JPWO2019142163A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2019142163A5
JPWO2019142163A5 JP2020538537A JP2020538537A JPWO2019142163A5 JP WO2019142163 A5 JPWO2019142163 A5 JP WO2019142163A5 JP 2020538537 A JP2020538537 A JP 2020538537A JP 2020538537 A JP2020538537 A JP 2020538537A JP WO2019142163 A5 JPWO2019142163 A5 JP WO2019142163A5
Authority
JP
Japan
Prior art keywords
point
depth
depth image
padded
projection plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020538537A
Other languages
Japanese (ja)
Other versions
JP7476104B2 (en
JP2021511712A (en
Publication date
Application filed filed Critical
Priority claimed from PCT/IB2019/050490 external-priority patent/WO2019142163A1/en
Publication of JP2021511712A publication Critical patent/JP2021511712A/en
Publication of JPWO2019142163A5 publication Critical patent/JPWO2019142163A5/ja
Application granted granted Critical
Publication of JP7476104B2 publication Critical patent/JP7476104B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

点群フレームの第1のより近い点の深度値を表す第1の深度画像であって、前記第1の点が、投影面のより近い点である、第1の深度画像と、前記点群フレームの第2の点の深度値を表す第2の深度画像であって、前記第2の点が、前記投影面のより遠い点である、第2の深度画像と、をパディングするように構成された少なくとも1つのプロセッサを備え、前記パディングされた第1の深度画像、または前記パディングされた第2の深度画像のうちの一方が、前記パディングされた第1の深度画像、または前記パディングされた第2の深度画像のうちの他方を基準画像として使用することによって予測される、デバイス。 A first depth image representing a depth value of a first closer point in a point group frame, wherein the first point is a point closer to the projection plane, and the point group. A second depth image representing the depth value of a second point in the frame, wherein the second point is configured to pad a second depth image, which is a point farther from the projection plane. One of the padded first depth image or the padded second depth image is the padded first depth image or the padded. A device predicted by using the other of the second depth images as a reference image. 点群フレームの第1の点の深度値を表す第1の深度画像であって、前記第1の点が、投影面のより近い点である、第1の深度画像と、前記点群フレームの第2の点の深度値を表す第2の深度画像であって、前記第2の点が、前記投影面のより遠い点である、第2の深度画像と、をパディングすることを含み、前記パディングされた第1の深度画像、または前記パディングされた第2の深度画像のうちの一方が、前記パディングされた第1の深度画像、または前記パディングされた第2の深度画像のうちの他方を基準画像として使用することによって予測される、方法。 A first depth image representing the depth value of a first point in a point group frame, wherein the first point is a point closer to the projection plane, the first depth image, and the point group frame. A second depth image representing a depth value of a second point, comprising padding the second depth image, wherein the second point is a point farther from the projection plane. One of the padded first depth image or the padded second depth image is the other of the padded first depth image or the padded second depth image. The method predicted by using it as a reference image. 前記少なくとも1つのプロセッサが、前記点群フレームの前記パディングされた第1および第2の深度画像のインターリービングを含むビデオストリームを符号化すること、のためにさらに構成されている、請求項1に記載のデバイス、または前記符号化すること、を含む、請求項1に記載の方法。 The first aspect of the invention is further configured for the at least one processor to encode a video stream comprising interleaving the padded first and second depth images of the point cloud frame. The method of claim 1, comprising the device according to the invention, or the encoding thereof. 少なくとも1つのプロセッサを備えるデバイスであって、前記少なくとも1つのプロセッサが、
-点群フレームの第1の点の深度値を表す第1の深度画像であって、前記第1の点が、投影面のより近い点である、第1の深度画像と、前記点群フレームの点の第2の深度値を表す第2の深度画像であって、前記第2の点が、前記投影面の最も遠い点である、第2の深度画像と、を提供するようにビデオストリームを復号化することと、
-前記第1の深度画像の画素値を使用することによって、前記第2の深度画像の画素値をフィルタリングすることと、を行うように構成されている、デバイス。
A device comprising at least one processor, said at least one processor.
-A first depth image representing the depth value of a first point in a point cloud frame, wherein the first point is a point closer to the projection plane, and the point cloud frame. A video stream for providing a second depth image representing a second depth value of a point, wherein the second point is the furthest point of the projection plane. To decrypt and
-A device configured to filter the pixel values of the second depth image by using the pixel values of the first depth image.
方法であって、
-投影面のより近い点である、点群フレームの第1の点の深度値を表す第1の深度画像、および投影面のより遠い点である、前記点群フレームの第2の点の深度値を表す第2の深度画像を提供するようにビデオストリームを復号化することと、
-前記第1の深度画像の画素値を使用することによって、前記第2の深度画像の画素値をフィルタリングすることと、を含む、方法。
It ’s a method,
-The depth of the first depth image representing the depth value of the first point of the point cloud frame, which is the closer point of the projection plane, and the depth of the second point of the point cloud frame, which is the farther point of the projection plane. Decoding the video stream to provide a second depth image representing the value,
-A method comprising filtering the pixel values of the second depth image by using the pixel values of the first depth image.
前記第2の深度画像の画素値をフィルタリングすることが、前記第1の深度画像の前記画素値と前記第2の深度画像の前記画素値との間の差に基づく、請求項4に記載のデバイス、または請求項5に記載の方法。 4. The fourth aspect of claim is that filtering the pixel values of the second depth image is based on the difference between the pixel values of the first depth image and the pixel values of the second depth image. The device, or the method of claim 5. 画素値をフィルタリングすることが、前記差のクリッピングを含む、請求項68に記載のデバイスまたは方法。 68. The device or method of claim 68, wherein filtering the pixel values comprises clipping the difference. 前記クリッピングが、所与の範囲に基づく、請求項7に記載のデバイスまたは方法。 The device or method of claim 7, wherein the clipping is based on a given range. 前記所与の範囲が、0から最大表面厚さまで及ぶ、請求項8に記載のデバイスまたは方法。 8. The device or method of claim 8, wherein the given range ranges from 0 to the maximum surface thickness. 前記所与の範囲の少なくとも1つの限界が、送信される、請求項8または9に記載のデバイスまたは方法。 The device or method of claim 8 or 9, wherein at least one limit of the given range is transmitted. 前記第1および第2の深度画像を提供することが、前記復号化されたビデオストリームをデインターリービングすることを含む、請求項4もしくは6~10のいずれかに記載のデバイス、または請求項5~10のいずれかに記載の方法。 The device according to any one of claims 4 or 6 to 10, wherein providing the first and second depth images comprises deinterleaving the decoded video stream, or claim 5. The method according to any one of 10. 点群フレームの点の深度値を表すデータを搬送する信号であって、前記信号が、同じ投影線に沿って投影面上に投影される前記点群の2つの点の前記深度値の間の最大差を画定する表面厚さを表すデータをさらに搬送する、信号。 A signal that carries data representing the depth values of a point in a point cloud frame, between the depth values of two points in the point cloud where the signal is projected onto a projection plane along the same projection line. A signal that further carries data representing the surface thickness that defines the maximum difference. 表面厚さを表す前記データは、深度値を表す搬送されたデータから導出される再構築された深度値がフィルタリングされる必要があるか否かを示す第1のビットと、前記表面厚さの整数値を示すための少なくとも1つの他のビットと、を含む、請求項12に記載の信号。 The data representing the surface thickness includes a first bit indicating whether or not the reconstructed depth value derived from the conveyed data representing the depth value needs to be filtered, and the surface thickness. 12. The signal of claim 12, comprising at least one other bit for indicating an integer value. 命令を含むコンピュータプログラム製品であって、前記命令は、前記プログラムが1つ以上のプロセッサによって実行されるときに、前記1つ以上のプロセッサに、請求項2もしくは3または5~11のいずれかに記載の方法を実行させる、コンピュータプログラム製品。 A computer program product comprising instructions that, when the program is executed by one or more processors, to the one or more processors according to either claim 2 or 3 or 5-11. A computer program product that causes the described method to be performed. 非一時的コンピュータ可読媒体であって、1つ以上のプロセッサに、請求項2もしくは3または5~11のいずれかに記載の方法を実行させ、かつ/または請求項12に記載の信号を格納するための命令を含む、非一時的コンピュータ可読媒体。 A non-temporary computer-readable medium, having one or more processors perform the method according to any one of claims 2 or 3 or 5-11, and / or storing the signal according to claim 12. A non-temporary computer-readable medium that contains instructions for.
JP2020538537A 2018-01-19 2019-01-21 Point Cloud Processing Active JP7476104B2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP18305050 2018-01-19
EP18305050.9 2018-01-19
EP18305282.8 2018-03-15
EP18305282 2018-03-15
PCT/IB2019/050490 WO2019142163A1 (en) 2018-01-19 2019-01-21 Processing a point cloud

Publications (3)

Publication Number Publication Date
JP2021511712A JP2021511712A (en) 2021-05-06
JPWO2019142163A5 true JPWO2019142163A5 (en) 2022-01-27
JP7476104B2 JP7476104B2 (en) 2024-04-30

Family

ID=65520343

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020538537A Active JP7476104B2 (en) 2018-01-19 2019-01-21 Point Cloud Processing

Country Status (6)

Country Link
US (1) US11949889B2 (en)
EP (1) EP3741118A1 (en)
JP (1) JP7476104B2 (en)
CN (1) CN111837392A (en)
MX (1) MX2020007663A (en)
WO (1) WO2019142163A1 (en)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10897269B2 (en) 2017-09-14 2021-01-19 Apple Inc. Hierarchical point cloud compression
US10861196B2 (en) 2017-09-14 2020-12-08 Apple Inc. Point cloud compression
US11818401B2 (en) 2017-09-14 2023-11-14 Apple Inc. Point cloud geometry compression using octrees and binary arithmetic encoding with adaptive look-up tables
US11113845B2 (en) 2017-09-18 2021-09-07 Apple Inc. Point cloud compression using non-cubic projections and masks
US10909725B2 (en) 2017-09-18 2021-02-02 Apple Inc. Point cloud compression
US10607373B2 (en) 2017-11-22 2020-03-31 Apple Inc. Point cloud compression with closed-loop color conversion
US10909727B2 (en) 2018-04-10 2021-02-02 Apple Inc. Hierarchical point cloud compression with smoothing
US10939129B2 (en) 2018-04-10 2021-03-02 Apple Inc. Point cloud compression
US10909726B2 (en) 2018-04-10 2021-02-02 Apple Inc. Point cloud compression
US11010928B2 (en) 2018-04-10 2021-05-18 Apple Inc. Adaptive distance based point cloud compression
KR20200140825A (en) 2018-04-11 2020-12-16 인터디지털 브이씨 홀딩스 인코포레이티드 Method and apparatus for encoding/decoding a point cloud representing a 3D object
CN110662087B (en) * 2018-06-30 2021-05-11 华为技术有限公司 Point cloud coding and decoding method and coder-decoder
US11017566B1 (en) 2018-07-02 2021-05-25 Apple Inc. Point cloud compression with adaptive filtering
US11202098B2 (en) 2018-07-05 2021-12-14 Apple Inc. Point cloud compression with multi-resolution video encoding
US11012713B2 (en) 2018-07-12 2021-05-18 Apple Inc. Bit stream structure for compressed point cloud data
US11367224B2 (en) 2018-10-02 2022-06-21 Apple Inc. Occupancy map block-to-patch information compression
MX2021003841A (en) * 2018-10-02 2021-12-10 Huawei Tech Co Ltd Motion estimation using 3d auxiliary data.
US11284091B2 (en) * 2019-03-25 2022-03-22 Apple Inc. Video based point cloud compression-patch alignment and size determination in bounding box
US11057564B2 (en) 2019-03-28 2021-07-06 Apple Inc. Multiple layer flexure for supporting a moving image sensor
WO2020230710A1 (en) * 2019-05-10 2020-11-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ Three-dimensional data encoding method, three-dimensional data decoding method, three-dimensional data encoding device, and three-dimensional data decoding device
US11711544B2 (en) 2019-07-02 2023-07-25 Apple Inc. Point cloud compression with supplemental information messages
US11627314B2 (en) 2019-09-27 2023-04-11 Apple Inc. Video-based point cloud compression with non-normative smoothing
US11562507B2 (en) 2019-09-27 2023-01-24 Apple Inc. Point cloud compression using video encoding with time consistent patches
US11538196B2 (en) 2019-10-02 2022-12-27 Apple Inc. Predictive coding for point cloud compression
US11895307B2 (en) 2019-10-04 2024-02-06 Apple Inc. Block-based predictive coding for point cloud compression
CN114391259B (en) * 2019-11-06 2024-05-31 Oppo广东移动通信有限公司 Information processing method, terminal device and storage medium
US11798196B2 (en) 2020-01-08 2023-10-24 Apple Inc. Video-based point cloud compression with predicted patches
US11625866B2 (en) 2020-01-09 2023-04-11 Apple Inc. Geometry encoding using octrees and predictive trees
GB202001839D0 (en) * 2020-02-11 2020-03-25 V Nova Int Ltd Use of tiered hierarchical coding for point cloud compression
US11615557B2 (en) 2020-06-24 2023-03-28 Apple Inc. Point cloud compression using octrees with slicing
US11620768B2 (en) 2020-06-24 2023-04-04 Apple Inc. Point cloud geometry compression using octrees with multiple scan orders
US11948338B1 (en) 2021-03-29 2024-04-02 Apple Inc. 3D volumetric content encoding using 2D videos and simplified 3D meshes

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285779B1 (en) 1999-08-02 2001-09-04 Trident Microsystems Floating-point complementary depth buffer
EP1321894B1 (en) * 2001-11-27 2011-11-09 Samsung Electronics Co., Ltd. Apparatus and method for representing 3-dimensional objects using depth images
CN102017628B (en) 2008-04-25 2013-10-09 汤姆逊许可证公司 Coding of depth signal
CN102224731A (en) 2009-09-22 2011-10-19 松下电器产业株式会社 Image coding apparatus, image decoding apparatus, image coding method, and image decoding method
JP5619918B2 (en) * 2010-02-01 2014-11-05 ドルビー ラボラトリーズ ライセンシングコーポレイション Method, apparatus and medium for filtering for image and video enhancement using asymmetric samples
PT2725797T (en) * 2011-06-23 2018-12-05 Huawei Tech Co Ltd Offset decoding device, offset encoding device, image filter device, and data structure
US9191646B2 (en) * 2011-08-29 2015-11-17 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
CN103314393B (en) 2012-01-13 2016-06-15 松下知识产权经营株式会社 Video generation device, image generating method and integrated circuit
US9514522B2 (en) * 2012-08-24 2016-12-06 Microsoft Technology Licensing, Llc Depth data processing and compression
BR112015026131A2 (en) 2013-05-10 2017-07-25 Koninklijke Philips Nv method of encoding a video data signal for use in a multi-view rendering device, video data signal for use in a multi-view rendering device, data bearer, method of decoding a video data signal video, decoder for decoding a video data signal, computer program product, and, encoder for a video data signal for use in a multi-view rendering device
US9524582B2 (en) * 2014-01-28 2016-12-20 Siemens Healthcare Gmbh Method and system for constructing personalized avatars using a parameterized deformable mesh
CN108605119B (en) * 2015-08-03 2020-12-01 M·M·赫菲达 2D to 3D video frame conversion
US10477247B2 (en) * 2015-11-18 2019-11-12 Electronics And Telecommunications Research Institute Method for decoding video using in-loop filter, and device therefor
JP6826368B2 (en) * 2016-01-14 2021-02-03 キヤノン株式会社 Encoding device and its control method
US11297346B2 (en) * 2016-05-28 2022-04-05 Microsoft Technology Licensing, Llc Motion-compensated compression of dynamic voxelized point clouds
EP3459251B1 (en) 2016-06-17 2021-12-22 Huawei Technologies Co., Ltd. Devices and methods for 3d video coding
GB2554633B (en) * 2016-06-24 2020-01-22 Imperial College Sci Tech & Medicine Detecting objects in video data
KR101798041B1 (en) 2016-06-29 2017-11-17 성균관대학교산학협력단 Device for 3 dimensional object recognition and pose estimation and method for the same
GB2552648B (en) * 2016-07-22 2020-09-16 Imperial College Sci Tech & Medicine Estimating dimensions for an enclosed space using a multi-directional camera
TWI815842B (en) 2018-01-16 2023-09-21 日商索尼股份有限公司 Image processing device and method

Similar Documents

Publication Publication Date Title
JPWO2019142163A5 (en)
JP2019509662A5 (en)
MX2020007663A (en) Processing a point cloud.
JP2022008296A (en) Apparatus for encoding and decoding image by using skip encoding and method of the same
JP2016192794A5 (en)
RU2017100690A (en) METHOD FOR CODING AND DECODING IMAGES, DEVICE FOR CODING AND DECODING, AND RELATED COMPUTER PROGRAMS
JP2016527791A5 (en)
JP2020522169A5 (en)
JP2011103589A5 (en)
JP2023010887A5 (en)
JP2015065671A5 (en)
JP2015526971A5 (en)
JP2012510737A5 (en)
JP2013243702A5 (en) Program, recording medium, and encoding method determination method
BRPI0408570B1 (en) PROCESSES AND APPARATUS FOR SIMULATING FILM GRANULATION IN ONE IMAGE
JP2014064249A5 (en)
JP2022522217A (en) Bit width control methods and devices for bidirectional optical flow
JP2016537929A5 (en)
JP2016195385A5 (en)
JP2010041064A (en) Image processing unit, image processing method, and program
GB2603873A (en) Use of embedded signalling for backward-compatible scaling improvements and super-resolution signalling
JP6857053B2 (en) A method and device for encoding at least one image unit, and a method and device for decoding a stream representing at least one image unit.
JP2017526004A5 (en)
JP2014099904A5 (en)
JP2015507902A5 (en) Method for decoding signal, computer program and decoder, method for encoding signal, computer program and encoder