JP5575650B2 - 奥行きマップを処理する方法及び装置 - Google Patents
奥行きマップを処理する方法及び装置 Download PDFInfo
- Publication number
- JP5575650B2 JP5575650B2 JP2010528511A JP2010528511A JP5575650B2 JP 5575650 B2 JP5575650 B2 JP 5575650B2 JP 2010528511 A JP2010528511 A JP 2010528511A JP 2010528511 A JP2010528511 A JP 2010528511A JP 5575650 B2 JP5575650 B2 JP 5575650B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- depth
- occlusion
- depth information
- depth map
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
Description
−物体を有する、ある視点からの場面の奥行き情報を有する奥行きマップを不可逆圧縮された奥行きマップに基づいて得るステップ、
−前記奥行きマップにおいて前記物体により遮蔽される情報を有する、前記視点からの場面に対する遮蔽情報を得るステップ、及び
−前記奥行きマップにおける圧縮アーチファクトを減少させるために、前記遮蔽情報の少なくとも一部を用いて前記奥行き情報の少なくとも一部を処理するステップ
を有するので達成される。
−物体を有する、ある視点からの場面の奥行き情報を有する奥行きマップを不可逆圧縮された奥行きマップに基づいて得るために配される手段、
−前記奥行きマップにおいて前記物体により遮蔽される情報を有する、前記視点からの場面に対する遮蔽情報を得るために配される手段、及び
−前記奥行きマップにおける圧縮アーチファクトを減少させるために、前記遮蔽情報の少なくとも一部を用いて前記奥行き情報の少なくとも一部を処理するために配される手段
を有する本発明による装置を用いて達成される。
図1は、遮蔽の概念を説明している。図1は、上部の水平線Bとして表される背景及びこの水平線Bと中央ビュー20との間に位置決められた線分Fにより表される物体を有する場面の上面図を表している。この画像は、中央ビュー20から感知されるように符号化される。これは、画像データ、遮蔽された画像のデータ、奥行きデータ及び遮蔽された奥行きのデータがこの中央ビュー20に対し符号化されることを意味している。
−遮蔽画像情報を用いて奥行き情報を処理する、
−遮蔽画像情報を用いて遮蔽奥行き情報を再生する及び遮蔽奥行き情報を用いて奥行き情報をフィルタリングする
2つの取り組みが存在している。
上述した遮蔽情報は、他のビューを合成するのに使用されることができる。(裸眼)立体視ディスプレイにおいて、左目での閲覧者が右目での閲覧者とは僅かに異なる画像を知覚するという事実の結果として3Dが知覚される。
図6は、不可逆圧縮により生じる圧縮アーチファクトを有する奥行きマップ610と同様に、グランドトゥルースの奥行きマップ605を説明する。
Claims (13)
- 奥行きマップを処理する方法において、
−物体を有する、ある視点からの場面の奥行き情報を有する奥行きマップを不可逆圧縮された奥行きマップに基づいて得るステップ、
−前記奥行きマップにおいて前記物体により遮蔽される情報を有する、前記視点からの場面に対する遮蔽情報であって、遮蔽画像情報、遮蔽奥行き情報及び遮蔽視差情報のうちの少なくとも1つである遮蔽情報を得るステップ、及び
−前記奥行きマップにおける圧縮アーチファクトを減少させるために、前記遮蔽情報の少なくとも一部を用いて前記奥行き情報の少なくとも一部を処理するステップ
を有し、
前記処理するステップが、前記物体の境界及び前記物体に関する前記奥行き情報における奥行き遷移の少なくとも1つから既定領域内の前記奥行き情報の少なくとも一部を処理することを含み、前記遮蔽情報の少なくとも一部が、処理される前記奥行き情報の領域に対応する領域からの遮蔽情報である、
方法。 - 前記遮蔽情報は、前記物体により遮蔽される奥行き情報を有する請求項1に記載の方法。
- 前記物体に関する前記奥行き情報における奥行き遷移から既定領域内の前記奥行き情報の少なくとも一部を処理するステップを有する請求項1に記載の方法。
- 前記物体の境界から既定領域内の前記奥行き情報の少なくとも一部を処理するステップを有する請求項1に記載の方法。
- 前記領域の大きさに関する情報を提供するメタデータを得るステップ
を有する請求項1乃至4の何れか一項に記載の方法。 - 前記不可逆圧縮された奥行きマップを生成するのに用いられる不可逆圧縮アルゴリズムは、前記奥行き情報における奥行き遷移の周辺にノイズを生じる請求項1に記載の方法。
- 請求項1に記載の方法はさらに、前記奥行き情報における奥行き遷移を検出するステップを有する方法。
- 前記処理ステップは、
−奥行き遷移付近における前記奥行き情報からのピクセルに対する置換基準であって、前記ピクセルが前記奥行き遷移のどの側に属しているかを分類する置換基準を設定するステップ、及び
−前記置換基準により示されるように、空間的状況に統計上対応している置換ピクセルを用いた前記置換基準に基づいて前記奥行き情報からの前記ピクセルを条件付きで置換するステップ
であり、前記置換基準及び前記置換ピクセルの少なくとも1つは遮蔽情報に基づいている請求項1に記載の方法。 - 前記置換基準は、
−前記奥行き情報からの前記ピクセルの空間的状況、及び
−前記奥行き情報からの前記ピクセルに対応する前記遮蔽情報からのピクセルの空間的状況
の少なくとも一方を介するフィルタリングを用いて設定される請求項8に記載の方法。 - 前記置換ピクセルは、
−前記奥行き情報からの前記ピクセルに対応する前記遮蔽奥行き情報からのピクセル、及び
−前記奥行き情報からの前記ピクセルに対応する前記遮蔽奥行き情報からの前記ピクセルの空間的状況に基づくピクセル
の一方である請求項9に記載の方法。 - 前記処理ステップは、
−前記奥行き情報からのピクセル、及び
−前記遮蔽情報からの対応するピクセル
の中から最小値及び最大値の一方を設定するステップを有する請求項2に記載の方法。 - 処理するための領域の大きさに関するメタデータが供給される請求項1に記載の方法。
- 奥行きマップを処理するための装置において、
−物体を有する、ある視点からの場面の奥行き情報を有する奥行きマップを不可逆圧縮された奥行きマップに基づいて得るために配される手段、
−前記奥行きマップにおいて前記物体により遮蔽される情報を有する、前記視点からの場面に対する遮蔽情報であって、遮蔽画像情報、遮蔽奥行き情報及び遮蔽視差情報のうちの少なくとも1つである遮蔽情報を得るために配される手段、及び
−前記奥行きマップにおける圧縮アーチファクトを減少させるために、前記遮蔽情報の少なくとも一部を用いて前記奥行き情報の少なくとも一部を処理するために配される手段、
を有し、
前記処理する手段が、前記物体の境界及び前記物体に関する前記奥行き情報における奥行き遷移の少なくとも1つから既定領域内の前記奥行き情報の少なくとも一部を処理し、前記遮蔽情報の少なくとも一部が、処理される前記奥行き情報の領域に対応する領域からの遮蔽情報である、装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP07118272 | 2007-10-11 | ||
EP07118272.9 | 2007-10-11 | ||
PCT/IB2008/054027 WO2009047681A1 (en) | 2007-10-11 | 2008-10-02 | Method and device for processing a depth-map |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011501496A JP2011501496A (ja) | 2011-01-06 |
JP5575650B2 true JP5575650B2 (ja) | 2014-08-20 |
Family
ID=40342298
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010528511A Expired - Fee Related JP5575650B2 (ja) | 2007-10-11 | 2008-10-02 | 奥行きマップを処理する方法及び装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US8447096B2 (ja) |
EP (1) | EP2201784B1 (ja) |
JP (1) | JP5575650B2 (ja) |
KR (1) | KR101484487B1 (ja) |
CN (1) | CN101822068B (ja) |
RU (1) | RU2497196C2 (ja) |
WO (1) | WO2009047681A1 (ja) |
Families Citing this family (121)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ATE486332T1 (de) * | 2005-03-17 | 2010-11-15 | British Telecomm | Verfahren zur verfolgung von objekten in einer videosequenz |
US9256926B2 (en) | 2008-07-28 | 2016-02-09 | Koninklijke Philips N.V. | Use of inpainting techniques for image correction |
US8798158B2 (en) * | 2009-03-11 | 2014-08-05 | Industry Academic Cooperation Foundation Of Kyung Hee University | Method and apparatus for block-based depth map coding and 3D video coding method using the same |
US8395642B2 (en) * | 2009-03-17 | 2013-03-12 | Mitsubishi Electric Research Laboratories, Inc. | Method for virtual image synthesis |
EP2424257A4 (en) * | 2009-04-24 | 2015-12-02 | Lg Electronics Inc | VIDEO DISPLAY DEVICE AND OPERATING METHOD THEREFOR |
KR20100135032A (ko) * | 2009-06-16 | 2010-12-24 | 삼성전자주식회사 | 2차원 영상의 3차원 영상 변환 장치 및 방법 |
JP5859441B2 (ja) * | 2009-10-02 | 2016-02-10 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 3dビデオにおける追加のビューを生成するための視点の選択 |
US10097843B2 (en) * | 2009-11-13 | 2018-10-09 | Koninklijke Philips Electronics N.V. | Efficient coding of depth transitions in 3D (video) |
EP2323412A1 (en) * | 2009-11-13 | 2011-05-18 | Koninklijke Philips Electronics N.V. | Generating an image signal |
US8643701B2 (en) * | 2009-11-18 | 2014-02-04 | University Of Illinois At Urbana-Champaign | System for executing 3D propagation for depth image-based rendering |
US8619122B2 (en) * | 2010-02-02 | 2013-12-31 | Microsoft Corporation | Depth camera compatibility |
US8692867B2 (en) * | 2010-03-05 | 2014-04-08 | DigitalOptics Corporation Europe Limited | Object detection and rendering for wide field of view (WFOV) image acquisition systems |
US20110234481A1 (en) * | 2010-03-26 | 2011-09-29 | Sagi Katz | Enhancing presentations using depth sensing cameras |
US9030536B2 (en) | 2010-06-04 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus and method for presenting media content |
US9787974B2 (en) | 2010-06-30 | 2017-10-10 | At&T Intellectual Property I, L.P. | Method and apparatus for delivering media content |
US8918831B2 (en) | 2010-07-06 | 2014-12-23 | At&T Intellectual Property I, Lp | Method and apparatus for managing a presentation of media content |
US9049426B2 (en) | 2010-07-07 | 2015-06-02 | At&T Intellectual Property I, Lp | Apparatus and method for distributing three dimensional media content |
US8848038B2 (en) * | 2010-07-09 | 2014-09-30 | Lg Electronics Inc. | Method and device for converting 3D images |
TWI420413B (zh) * | 2010-07-15 | 2013-12-21 | Chunghwa Picture Tubes Ltd | 深度圖強化方法及其電腦可讀媒體 |
US9560406B2 (en) | 2010-07-20 | 2017-01-31 | At&T Intellectual Property I, L.P. | Method and apparatus for adapting a presentation of media content |
US9232274B2 (en) | 2010-07-20 | 2016-01-05 | At&T Intellectual Property I, L.P. | Apparatus for adapting a presentation of media content to a requesting device |
US9032470B2 (en) | 2010-07-20 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus for adapting a presentation of media content according to a position of a viewing apparatus |
US8994716B2 (en) * | 2010-08-02 | 2015-03-31 | At&T Intellectual Property I, Lp | Apparatus and method for providing media content |
US9485495B2 (en) | 2010-08-09 | 2016-11-01 | Qualcomm Incorporated | Autofocus for stereo images |
US8438502B2 (en) | 2010-08-25 | 2013-05-07 | At&T Intellectual Property I, L.P. | Apparatus for controlling three-dimensional images |
CA2812117C (en) * | 2010-09-14 | 2020-03-24 | Dynamic Digital Depth Research Pty Ltd | A method for enhancing depth maps |
JP5150698B2 (ja) * | 2010-09-30 | 2013-02-20 | 株式会社東芝 | デプス補正装置及び方法 |
US8947511B2 (en) | 2010-10-01 | 2015-02-03 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting three-dimensional media content |
EP2451164B1 (en) * | 2010-11-08 | 2017-05-03 | Telefonaktiebolaget LM Ericsson (publ) | Improved view synthesis |
KR20120049997A (ko) * | 2010-11-10 | 2012-05-18 | 삼성전자주식회사 | 영상 변환 장치 및 이를 이용하는 디스플레이 장치와 그 방법들 |
EP2458877A1 (en) * | 2010-11-26 | 2012-05-30 | Thomson Licensing | Occlusion layer extension |
US9398313B2 (en) * | 2010-12-29 | 2016-07-19 | Nokia Technologies Oy | Depth map coding |
CN103348360B (zh) * | 2011-01-07 | 2017-06-20 | 索尼电脑娱乐美国公司 | 二维图像的再投影的形态学反混叠(mlaa) |
US9183670B2 (en) | 2011-01-07 | 2015-11-10 | Sony Computer Entertainment America, LLC | Multi-sample resolving of re-projection of two-dimensional image |
US8619094B2 (en) | 2011-01-07 | 2013-12-31 | Sony Computer Entertainment America Llc | Morphological anti-aliasing (MLAA) of a re-projection of a two-dimensional image |
US9041774B2 (en) | 2011-01-07 | 2015-05-26 | Sony Computer Entertainment America, LLC | Dynamic adjustment of predetermined three-dimensional video settings based on scene content |
US8514225B2 (en) | 2011-01-07 | 2013-08-20 | Sony Computer Entertainment America Llc | Scaling pixel depth values of user-controlled virtual object in three-dimensional scene |
US8994722B2 (en) * | 2011-02-14 | 2015-03-31 | Mitsubishi Electric Research Laboratories, Inc. | Method for enhancing depth images of scenes using trellis structures |
TWI419078B (zh) * | 2011-03-25 | 2013-12-11 | Univ Chung Hua | 即時立體影像產生裝置與方法 |
US8982180B2 (en) * | 2011-03-31 | 2015-03-17 | Fotonation Limited | Face and other object detection and tracking in off-center peripheral regions for nonlinear lens geometries |
US8723959B2 (en) | 2011-03-31 | 2014-05-13 | DigitalOptics Corporation Europe Limited | Face and other object tracking in off-center peripheral regions for nonlinear lens geometries |
US8860816B2 (en) * | 2011-03-31 | 2014-10-14 | Fotonation Limited | Scene enhancements in off-center peripheral regions for nonlinear lens geometries |
JP5210416B2 (ja) * | 2011-06-13 | 2013-06-12 | シャープ株式会社 | 立体画像生成装置、立体画像生成方法、プログラム、および記録媒体 |
US9602766B2 (en) | 2011-06-24 | 2017-03-21 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting three dimensional objects with telepresence |
US9445046B2 (en) | 2011-06-24 | 2016-09-13 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting media content with telepresence |
EP2538242B1 (en) * | 2011-06-24 | 2014-07-02 | Softkinetic Software | Depth measurement quality enhancement. |
US9030522B2 (en) | 2011-06-24 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus and method for providing media content |
US8947497B2 (en) | 2011-06-24 | 2015-02-03 | At&T Intellectual Property I, Lp | Apparatus and method for managing telepresence sessions |
US9300946B2 (en) | 2011-07-08 | 2016-03-29 | Personify, Inc. | System and method for generating a depth map and fusing images from a camera array |
US8587635B2 (en) | 2011-07-15 | 2013-11-19 | At&T Intellectual Property I, L.P. | Apparatus and method for providing media services with telepresence |
JP2013026808A (ja) * | 2011-07-21 | 2013-02-04 | Sony Corp | 画像処理装置および方法、並びにプログラム |
CN103703771B (zh) * | 2011-07-25 | 2017-05-10 | 索尼公司 | 用于生成3d立体视图的着色方法 |
WO2013022401A2 (en) | 2011-08-10 | 2013-02-14 | Telefonaktiebolaget L M Ericsson (Publ) | Method and apparatus for creating a disocclusion map used for coding a three-dimensional video |
JP5978573B2 (ja) * | 2011-09-06 | 2016-08-24 | ソニー株式会社 | 映像信号処理装置および映像信号処理方法 |
US9438889B2 (en) | 2011-09-21 | 2016-09-06 | Qualcomm Incorporated | System and method for improving methods of manufacturing stereoscopic image sensors |
WO2013049388A1 (en) | 2011-09-29 | 2013-04-04 | Dolby Laboratories Licensing Corporation | Representation and coding of multi-view images using tapestry encoding |
KR20140069266A (ko) | 2011-09-29 | 2014-06-09 | 톰슨 라이센싱 | 디스패리티 맵을 필터링하기 위한 방법 및 디바이스 |
US9471988B2 (en) | 2011-11-02 | 2016-10-18 | Google Inc. | Depth-map generation for an input image using an example approximate depth-map associated with an example similar image |
US9661307B1 (en) * | 2011-11-15 | 2017-05-23 | Google Inc. | Depth map generation using motion cues for conversion of monoscopic visual content to stereoscopic 3D |
JP5840114B2 (ja) * | 2011-11-30 | 2016-01-06 | 三菱電機株式会社 | 仮想画像を生成する方法 |
US9111350B1 (en) | 2012-02-10 | 2015-08-18 | Google Inc. | Conversion of monoscopic visual content to stereoscopic 3D |
US9070196B2 (en) | 2012-02-27 | 2015-06-30 | Samsung Electronics Co., Ltd. | Apparatus and method for estimating disparity using visibility energy model |
CN104769940B (zh) * | 2012-04-13 | 2017-07-11 | 皇家飞利浦有限公司 | 深度信令数据 |
WO2013173749A1 (en) * | 2012-05-17 | 2013-11-21 | The Regents Of The University Of California | Sampling-based multi-lateral filter method for depth map enhancement and codec |
CN102780908A (zh) * | 2012-05-31 | 2012-11-14 | 新奥特(北京)视频技术有限公司 | 一种通过左右眼图像混合显示调节3d图像效果的方法 |
WO2014013804A1 (ja) * | 2012-07-18 | 2014-01-23 | ソニー株式会社 | 画像処理装置及び画像処理方法、並びに画像表示装置 |
US9514522B2 (en) | 2012-08-24 | 2016-12-06 | Microsoft Technology Licensing, Llc | Depth data processing and compression |
JP6021541B2 (ja) * | 2012-09-13 | 2016-11-09 | キヤノン株式会社 | 画像処理装置及び方法 |
LU92074B1 (en) * | 2012-09-18 | 2014-03-19 | Iee Sarl | Depth image enhancement method |
US9398264B2 (en) | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
ITTO20121073A1 (it) * | 2012-12-13 | 2014-06-14 | Rai Radiotelevisione Italiana | Apparato e metodo per la generazione e la ricostruzione di un flusso video |
EP2949121B1 (en) * | 2013-02-06 | 2020-07-15 | Koninklijke Philips N.V. | Method of encoding a video data signal for use with a multi-view stereoscopic display device |
US9674498B1 (en) | 2013-03-15 | 2017-06-06 | Google Inc. | Detecting suitability for converting monoscopic visual content to stereoscopic 3D |
US10027947B2 (en) | 2013-06-05 | 2018-07-17 | Sony Corporation | Image processing apparatus and image processing method |
US9866813B2 (en) | 2013-07-05 | 2018-01-09 | Dolby Laboratories Licensing Corporation | Autostereo tapestry representation |
US9497439B2 (en) * | 2013-07-15 | 2016-11-15 | Ati Technologies Ulc | Apparatus and method for fast multiview video coding |
RU2535183C1 (ru) * | 2013-07-25 | 2014-12-10 | Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Южно-Российский государственный университет экономики и сервиса" (ФГБОУ ВПО "ЮРГУЭС") | Устройство предобработки карты глубины стереоизображения |
US10178373B2 (en) | 2013-08-16 | 2019-01-08 | Qualcomm Incorporated | Stereo yaw correction using autofocus feedback |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US9374516B2 (en) | 2014-04-04 | 2016-06-21 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US10013764B2 (en) | 2014-06-19 | 2018-07-03 | Qualcomm Incorporated | Local adaptive histogram equalization |
US9549107B2 (en) | 2014-06-20 | 2017-01-17 | Qualcomm Incorporated | Autofocus for folded optic array cameras |
US9294672B2 (en) | 2014-06-20 | 2016-03-22 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax and tilt artifacts |
US9819863B2 (en) | 2014-06-20 | 2017-11-14 | Qualcomm Incorporated | Wide field of view array camera for hemispheric and spherical imaging |
US9541740B2 (en) | 2014-06-20 | 2017-01-10 | Qualcomm Incorporated | Folded optic array camera using refractive prisms |
US9386222B2 (en) | 2014-06-20 | 2016-07-05 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax artifacts |
CN105516578B (zh) * | 2014-09-25 | 2019-01-15 | 联想(北京)有限公司 | 图像处理方法、装置及电子设备 |
US10176592B2 (en) | 2014-10-31 | 2019-01-08 | Fyusion, Inc. | Multi-directional structured image array capture on a 2D graph |
US10262426B2 (en) | 2014-10-31 | 2019-04-16 | Fyusion, Inc. | System and method for infinite smoothing of image sequences |
US9940541B2 (en) | 2015-07-15 | 2018-04-10 | Fyusion, Inc. | Artificially rendering images using interpolation of tracked control points |
US10275935B2 (en) | 2014-10-31 | 2019-04-30 | Fyusion, Inc. | System and method for infinite synthetic image generation from multi-directional structured image array |
US9832381B2 (en) | 2014-10-31 | 2017-11-28 | Qualcomm Incorporated | Optical image stabilization for thin cameras |
US10726593B2 (en) | 2015-09-22 | 2020-07-28 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US9905000B2 (en) * | 2015-02-19 | 2018-02-27 | Sony Corporation | Method and system for surgical tool localization during anatomical surgery |
US10222932B2 (en) | 2015-07-15 | 2019-03-05 | Fyusion, Inc. | Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations |
US11006095B2 (en) | 2015-07-15 | 2021-05-11 | Fyusion, Inc. | Drone based capture of a multi-view interactive digital media |
US11095869B2 (en) | 2015-09-22 | 2021-08-17 | Fyusion, Inc. | System and method for generating combined embedded multi-view interactive digital media representations |
US10852902B2 (en) | 2015-07-15 | 2020-12-01 | Fyusion, Inc. | Automatic tagging of objects on a multi-view interactive digital media representation of a dynamic entity |
US10147211B2 (en) | 2015-07-15 | 2018-12-04 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US10242474B2 (en) | 2015-07-15 | 2019-03-26 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US11783864B2 (en) | 2015-09-22 | 2023-10-10 | Fyusion, Inc. | Integration of audio into a multi-view interactive digital media representation |
US10136123B2 (en) * | 2015-10-30 | 2018-11-20 | Disney Enterprises, Inc. | Display system with normalized show lighting for wavelength multiplex visualization (WMV) environment |
WO2017080420A1 (en) * | 2015-11-09 | 2017-05-18 | Versitech Limited | Auxiliary data for artifacts –aware view synthesis |
EP3185550A1 (en) * | 2015-12-23 | 2017-06-28 | Thomson Licensing | Tridimensional rendering with adjustable disparity direction |
EP3273686A1 (en) * | 2016-07-21 | 2018-01-24 | Thomson Licensing | A method for generating layered depth data of a scene |
JP7028168B2 (ja) * | 2016-07-29 | 2022-03-02 | ソニーグループ株式会社 | 画像処理装置および画像処理方法 |
US10325403B2 (en) | 2016-08-24 | 2019-06-18 | Google Llc | Image based rendering techniques for virtual reality |
US11202017B2 (en) | 2016-10-06 | 2021-12-14 | Fyusion, Inc. | Live style transfer on a mobile device |
US10437879B2 (en) | 2017-01-18 | 2019-10-08 | Fyusion, Inc. | Visual search using multi-view interactive digital media representations |
US10313651B2 (en) | 2017-05-22 | 2019-06-04 | Fyusion, Inc. | Snapshots at predefined intervals or angles |
US11069147B2 (en) | 2017-06-26 | 2021-07-20 | Fyusion, Inc. | Modification of multi-view interactive digital media representation |
EP3422711A1 (en) * | 2017-06-29 | 2019-01-02 | Koninklijke Philips N.V. | Apparatus and method for generating an image |
US10776992B2 (en) * | 2017-07-05 | 2020-09-15 | Qualcomm Incorporated | Asynchronous time warp with depth data |
US10592747B2 (en) | 2018-04-26 | 2020-03-17 | Fyusion, Inc. | Method and apparatus for 3-D auto tagging |
EP3598389A1 (en) | 2018-07-19 | 2020-01-22 | Thomson Licensing | Method for detecting occlusions in an image, corresponding device and computer program product |
US10872463B2 (en) * | 2019-04-01 | 2020-12-22 | Microsoft Technology Licensing, Llc | Depth-compressed representation for 3D virtual scene |
RU2716311C1 (ru) * | 2019-11-18 | 2020-03-12 | федеральное государственное бюджетное образовательное учреждение высшего образования "Донской государственный технический университет" (ДГТУ) | Устройство для восстановления карты глубины с поиском похожих блоков на основе нейронной сети |
RU2730215C1 (ru) * | 2019-11-18 | 2020-08-20 | федеральное государственное бюджетное образовательное учреждение высшего образования "Донской государственный технический университет" (ДГТУ) | Устройство для восстановления изображений с поиском похожих блоков на основе нейронной сети |
EP3840389A1 (en) * | 2019-12-18 | 2021-06-23 | Koninklijke Philips N.V. | Coding scheme for video data using down-sampling/up-sampling and non-linear filter for depth map |
WO2021257639A1 (en) * | 2020-06-16 | 2021-12-23 | Dolby Laboratories Licensing Corporation | Supporting multi-view video operations with disocclusion atlas |
RU2745010C1 (ru) * | 2020-08-25 | 2021-03-18 | Самсунг Электроникс Ко., Лтд. | Способы реконструкции карты глубины и электронное вычислительное устройство для их реализации |
Family Cites Families (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0815538A1 (en) * | 1995-03-22 | 1998-01-07 | IDT INTERNATIONAL DIGITAL TECHNOLOGIES DEUTSCHLAND GmbH | Method and apparatus for depth modelling and providing depth information of moving objects |
US7912645B2 (en) * | 1997-10-22 | 2011-03-22 | Intelligent Technologies International, Inc. | Information transfer arrangement and method for vehicles |
US7610146B2 (en) * | 1997-10-22 | 2009-10-27 | Intelligent Technologies International, Inc. | Vehicle position determining system and method |
US7426437B2 (en) * | 1997-10-22 | 2008-09-16 | Intelligent Technologies International, Inc. | Accident avoidance systems and methods |
US7983802B2 (en) * | 1997-10-22 | 2011-07-19 | Intelligent Technologies International, Inc. | Vehicular environment scanning techniques |
US8209120B2 (en) * | 1997-10-22 | 2012-06-26 | American Vehicular Sciences Llc | Vehicular map database management techniques |
US7791503B2 (en) * | 1997-10-22 | 2010-09-07 | Intelligent Technologies International, Inc. | Vehicle to infrastructure information conveyance system and method |
US7840342B1 (en) * | 1997-10-22 | 2010-11-23 | Intelligent Technologies International, Inc. | Road physical condition monitoring techniques |
GB9913687D0 (en) * | 1999-06-11 | 1999-08-11 | Canon Kk | Image processing apparatus |
FR2798761B1 (fr) * | 1999-09-17 | 2002-03-29 | Thomson Multimedia Sa | Procede de construction d'un modele de scene 3d par analyse de sequence d'images |
US6377257B1 (en) * | 1999-10-04 | 2002-04-23 | International Business Machines Corporation | Methods and apparatus for delivering 3D graphics in a networked environment |
US6674877B1 (en) * | 2000-02-03 | 2004-01-06 | Microsoft Corporation | System and method for visually tracking occluded objects in real time |
FR2806570B1 (fr) * | 2000-03-15 | 2002-05-17 | Thomson Multimedia Sa | Procede et dispositif de codage d'images video |
WO2001071432A1 (en) * | 2000-03-22 | 2001-09-27 | Summit Industries, Inc. | A tracking, safety and navigation system for firefighters |
GB2378337B (en) * | 2001-06-11 | 2005-04-13 | Canon Kk | 3D Computer modelling apparatus |
US7103211B1 (en) * | 2001-09-04 | 2006-09-05 | Geometrix, Inc. | Method and apparatus for generating 3D face models from one camera |
RU2237283C2 (ru) * | 2001-11-27 | 2004-09-27 | Самсунг Электроникс Ко., Лтд. | Устройство и способ представления трехмерного объекта на основе изображений с глубиной |
US6856314B2 (en) | 2002-04-18 | 2005-02-15 | Stmicroelectronics, Inc. | Method and system for 3D reconstruction of multiple views with altering search path and occlusion modeling |
WO2004015369A2 (en) * | 2002-08-09 | 2004-02-19 | Intersense, Inc. | Motion tracking system and method |
EP1431919B1 (en) * | 2002-12-05 | 2010-03-03 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding and decoding three-dimensional object data by using octrees |
EP1588327B1 (en) * | 2003-01-17 | 2018-09-26 | Koninklijke Philips N.V. | Full depth map acquisition |
JP2006041811A (ja) * | 2004-07-26 | 2006-02-09 | Kddi Corp | 自由視点画像ストリーミング方式 |
US7456847B2 (en) * | 2004-08-12 | 2008-11-25 | Russell Steven Krajec | Video with map overlay |
US7576737B2 (en) * | 2004-09-24 | 2009-08-18 | Konica Minolta Medical & Graphic, Inc. | Image processing device and program |
JP2008537250A (ja) * | 2005-04-19 | 2008-09-11 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 奥行き検知装置及び方法 |
US8879823B2 (en) | 2005-06-23 | 2014-11-04 | Koninklijke Philips N.V. | Combined exchange of image and related data |
CN101443810B (zh) | 2006-05-09 | 2013-01-16 | 皇家飞利浦电子股份有限公司 | 向上尺度变换 |
US8237708B2 (en) * | 2006-08-18 | 2012-08-07 | William Edward Mantzel | Data structure representing a plenoptic function via compressible layered orthographic projections from multiple orientations |
WO2008041178A2 (en) | 2006-10-04 | 2008-04-10 | Koninklijke Philips Electronics N.V. | Image enhancement |
US8330801B2 (en) * | 2006-12-22 | 2012-12-11 | Qualcomm Incorporated | Complexity-adaptive 2D-to-3D video sequence conversion |
US20080244466A1 (en) * | 2007-03-26 | 2008-10-02 | Timothy James Orsley | System and method for interfacing with information on a display screen |
WO2010040402A1 (en) * | 2008-10-08 | 2010-04-15 | Tomtom International B.V. | Navigation apparatus and method for recording image data |
-
2008
- 2008-10-02 EP EP08807867A patent/EP2201784B1/en not_active Not-in-force
- 2008-10-02 CN CN2008801110247A patent/CN101822068B/zh not_active Expired - Fee Related
- 2008-10-02 WO PCT/IB2008/054027 patent/WO2009047681A1/en active Application Filing
- 2008-10-02 RU RU2010118466/07A patent/RU2497196C2/ru not_active IP Right Cessation
- 2008-10-02 KR KR1020107010239A patent/KR101484487B1/ko not_active IP Right Cessation
- 2008-10-02 JP JP2010528511A patent/JP5575650B2/ja not_active Expired - Fee Related
- 2008-10-02 US US12/681,637 patent/US8447096B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20100215251A1 (en) | 2010-08-26 |
CN101822068A (zh) | 2010-09-01 |
RU2497196C2 (ru) | 2013-10-27 |
EP2201784B1 (en) | 2012-12-12 |
KR20100095420A (ko) | 2010-08-30 |
JP2011501496A (ja) | 2011-01-06 |
RU2010118466A (ru) | 2011-11-20 |
WO2009047681A1 (en) | 2009-04-16 |
CN101822068B (zh) | 2012-05-30 |
US8447096B2 (en) | 2013-05-21 |
EP2201784A1 (en) | 2010-06-30 |
KR101484487B1 (ko) | 2015-01-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5575650B2 (ja) | 奥行きマップを処理する方法及び装置 | |
US8767046B2 (en) | Image based 3D video format | |
US9986258B2 (en) | Efficient encoding of multiple views | |
US20120120192A1 (en) | Hierarchical hole-filling for depth-based view synthesis in ftv and 3d video | |
Smolic et al. | Development of a new MPEG standard for advanced 3D video applications | |
Park et al. | Depth-image-based rendering for 3DTV service over T-DMB | |
US8761541B2 (en) | Comfort noise and film grain processing for 3 dimensional video | |
JP2013540402A (ja) | ユーザ選好に基づいて3dビデオレンダリングを調節するための3dビデオ制御システム | |
US11528538B2 (en) | Streaming volumetric and non-volumetric video | |
JP7344988B2 (ja) | ボリュメトリック映像の符号化および復号化のための方法、装置、およびコンピュータプログラム製品 | |
JP2015087851A (ja) | 画像処理装置及び画像処理プログラム | |
Salman et al. | Overview: 3D Video from capture to Display | |
US10469871B2 (en) | Encoding and decoding of 3D HDR images using a tapestry representation | |
Mantiuk et al. | Perception-inspired high dynamic range video coding and compression | |
WO2023215108A1 (en) | Stereoscopic high dynamic range video | |
Aflaki et al. | Unpaired multiview video plus depth compression | |
WO2011058483A1 (en) | Generating an image signal |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110929 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130628 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130718 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20131018 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20131025 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140603 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140702 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5575650 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |