JP7263521B2 - インターフレーム点群属性符号化のための方法並びにその、装置およびコンピュータプログラム - Google Patents
インターフレーム点群属性符号化のための方法並びにその、装置およびコンピュータプログラム Download PDFInfo
- Publication number
- JP7263521B2 JP7263521B2 JP2021536819A JP2021536819A JP7263521B2 JP 7263521 B2 JP7263521 B2 JP 7263521B2 JP 2021536819 A JP2021536819 A JP 2021536819A JP 2021536819 A JP2021536819 A JP 2021536819A JP 7263521 B2 JP7263521 B2 JP 7263521B2
- Authority
- JP
- Japan
- Prior art keywords
- point cloud
- motion estimation
- measure
- prediction
- target frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
- H04N19/54—Motion estimation other than block-based using feature points or meshes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/547—Motion estimation performed in a transform domain
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Processing (AREA)
Description
本出願は、2019年3月22日に米国特許商標庁に出願された米国仮特許出願第62/822,765号に基づく優先権を主張し、その内容を全て参照により本明細書に組み込むものとする。
実施形態に従う方法および装置は、グラフベースの点群圧縮(G-PCC)に関し、より具体的には、インターフレーム点群属性符号化のための方法および装置に関するものである。
世界の高度な3次元(3D)表現は、より没入的な形態のインタラクションおよびコミュニケーションを可能にし、機械が我々の世界を理解し、解釈し、ナビゲートすることをも可能にする。3D点群は、このような情報の表現を可能にするものとして登場した。点群データに関連する多くのユースケースが特定され、点群表現および圧縮についての対応する要件が開発されている。
210 端末
220 端末
230 端末
240 端末
250 通信ネットワーク
300 ストリーミングシステム
301 点群ソース
302 点群データ
303 圧縮器
304 点群データ
305 ストリーミングサーバ
306 クライアント
308 ストリーミングクライアント
310 解凍器
312 ディスプレイ
313 キャプチャサブシステム
405 量子化器
410 点除去モジュール
415 八分木エンコーダ
420 属性転送モジュール
425 生成器
430 予測モジュール
435 量子化器
440 算術符号化器
505 算術デコーダ
510 八分木デコーダ
515 逆量子化器
520 生成器
525 逆量子化器
530 逆予測モジュール
Claims (9)
- 少なくとも1つのプロセッサが実行する、インターフレーム点群属性符号化の方法であって、
ターゲットフレームの動き推定の動き推定不信頼性尺度として、現在のターゲットフレーム内の点群サンプルの数に対する、他のフレームからのインターフレーム参照フレームの第2の点群サンプルに一致する、または対応する前記現在のターゲットフレームの第1の点群サンプルの数の比に反比例する値を取得するステップであって、前記第2の点群サンプルは最近傍探索によって発見され、最近傍リストは時間的予測候補点を含む、ステップと、
取得された前記動き推定不信頼性尺度が所定の閾値よりも大きいか否かを識別するステップと、
取得された前記動き推定不信頼性尺度が前記所定の閾値よりも大きいと識別されたことに基づいて、前記ターゲットフレームの動き補償をスキップするステップと、
取得された前記動き推定不信頼性尺度が前記所定の閾値以下と識別されたことに基づいて、前記ターゲットフレームの前記動き補償を実行するステップと、を含む方法。 - 前記動き推定不信頼性尺度の値が小さいほど、前記動き推定の不確実性が小さいことを示し、
前記動き推定不信頼性尺度の値が大きいほど、前記動き推定の不確実性が大きいことを示す、請求項1に記載の方法。 - 最近傍探索アルゴリズムを用いて、前記第2の点群サンプルを取得するステップをさらに含む、請求項1に記載の方法。
- 取得された前記動き推定不信頼性尺度が前記所定の閾値よりも大きいと識別されたことに基づいて、前記ターゲットフレーム内の前記点群サンプルのうちの1つに含まれる点の属性の予測をスキップするステップをさらに含む、請求項1~3のいずれか1項に記載の方法。
- 前記動き補償が実行された前記ターゲットフレーム内の前記点群サンプルのうちの1つに含まれる点の属性の予測を実行するステップをさらに含む、請求項1~3のいずれか1項に記載の方法。
- 前記属性は、前記点の色値および反射率値のいずれか一方または両方を含む、請求項5に記載の方法。
- 前記予測を実行するステップは、前記属性に対して予測変換またはリフティング変換を適用するステップを含む、請求項5に記載の方法。
- インターフレーム点群属性符号化のための装置であって、
コンピュータプログラムコードを記憶するように構成される少なくとも1つのメモリと、
前記少なくとも1つのメモリにアクセスし、前記コンピュータプログラムコードに従って前記請求項1~7のいずれか1項に記載の方法を実行するように構成される少なくとも1つのプロセッサと、を備える装置。 - 少なくとも1つのプロセッサに、前記請求項1~7のいずれか1項に記載の方法を実行させるコンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962822765P | 2019-03-22 | 2019-03-22 | |
US62/822,765 | 2019-03-22 | ||
PCT/US2020/023767 WO2020197966A1 (en) | 2019-03-22 | 2020-03-20 | Method and apparatus for interframe point cloud attribute coding |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022516851A JP2022516851A (ja) | 2022-03-03 |
JP7263521B2 true JP7263521B2 (ja) | 2023-04-24 |
Family
ID=72514089
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021536819A Active JP7263521B2 (ja) | 2019-03-22 | 2020-03-20 | インターフレーム点群属性符号化のための方法並びにその、装置およびコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US10986364B2 (ja) |
EP (1) | EP3871421A4 (ja) |
JP (1) | JP7263521B2 (ja) |
CN (1) | CN113455007B (ja) |
WO (1) | WO2020197966A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102340238B1 (ko) * | 2019-10-03 | 2021-12-16 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
KR102423499B1 (ko) | 2020-01-07 | 2022-07-22 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
US11551334B2 (en) * | 2020-01-09 | 2023-01-10 | Tencent America LLC | Techniques and apparatus for coarse granularity scalable lifting for point-cloud attribute coding |
US20230154052A1 (en) * | 2020-04-24 | 2023-05-18 | Lg Electronics Inc. | Point cloud data transmission device, point cloud data transmission method, point cloud data reception device and point cloud data reception method |
CN116171460A (zh) * | 2020-10-09 | 2023-05-26 | 松下电器(美国)知识产权公司 | 三维数据编码方法、三维数据解码方法、三维数据编码装置及三维数据解码装置 |
WO2022098140A1 (ko) * | 2020-11-06 | 2022-05-12 | 엘지전자 주식회사 | 포인트 클라우드 데이터 전송 방법, 포인트 클라우드 데이터 전송 장치, 포인트 클라우드 데이터 수신 방법 및 포인트 클라우드 데이터 수신 장치 |
CN113589274B (zh) * | 2021-06-24 | 2023-10-13 | 森思泰克河北科技有限公司 | 脚踢信号识别方法、装置及终端 |
CN113344123B (zh) * | 2021-06-29 | 2024-05-14 | 广州文远知行科技有限公司 | 点云帧匹配方法、装置、设备和存储介质 |
KR20240032912A (ko) * | 2021-07-05 | 2024-03-12 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
EP4369716A1 (en) * | 2021-07-20 | 2024-05-15 | LG Electronics Inc. | Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method |
CN113613017B (zh) * | 2021-07-27 | 2024-04-19 | 闽都创新实验室 | 一种三维帧间预测改进v-pcc帧间预测的方法 |
CN117378204A (zh) * | 2021-08-12 | 2024-01-09 | Oppo广东移动通信有限公司 | 点云编解码方法、编码器、解码器及计算机可读存储介质 |
CN114025146B (zh) * | 2021-11-02 | 2023-11-17 | 浙江工商大学 | 基于场景流网络与时间熵模型的动态点云几何压缩方法 |
WO2023085856A1 (ko) * | 2021-11-11 | 2023-05-19 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 수신 방법 및 포인트 클라우드 데이터 수신 장치 |
WO2023131136A1 (en) * | 2022-01-04 | 2023-07-13 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for point cloud coding |
GB2620453A (en) * | 2022-07-08 | 2024-01-10 | Canon Kk | Method and apparatus for compression and encoding of 3D dynamic point cloud |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005252921A (ja) | 2004-03-08 | 2005-09-15 | Matsushita Electric Ind Co Ltd | 画像符号化方法、画像符号化装置、記録媒体、および画像復号化装置 |
JP2011507404A (ja) | 2007-12-10 | 2011-03-03 | クゥアルコム・インコーポレイテッド | ビデオ補間または外挿のための参照選択 |
US20170347120A1 (en) | 2016-05-28 | 2017-11-30 | Microsoft Technology Licensing, Llc | Motion-compensated compression of dynamic voxelized point clouds |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5834259B2 (ja) | 2011-06-30 | 2015-12-16 | パナソニックIpマネジメント株式会社 | 薬剤計数装置およびその方法 |
US9930250B2 (en) * | 2013-09-15 | 2018-03-27 | Mediatek Inc. | Method and apparatus for performing image processing operation based on frame/algorithm selection |
EP3078935A1 (en) | 2015-04-10 | 2016-10-12 | The European Atomic Energy Community (EURATOM), represented by the European Commission | Method and device for real-time mapping and localization |
TWI775760B (zh) * | 2016-07-08 | 2022-09-01 | 美商Vid衡器股份有限公司 | 使用幾何投影360度視訊編碼 |
US10462485B2 (en) * | 2017-09-06 | 2019-10-29 | Apple Inc. | Point cloud geometry compression |
-
2020
- 2020-03-20 EP EP20776697.3A patent/EP3871421A4/en active Pending
- 2020-03-20 JP JP2021536819A patent/JP7263521B2/ja active Active
- 2020-03-20 US US16/825,051 patent/US10986364B2/en active Active
- 2020-03-20 CN CN202080013302.6A patent/CN113455007B/zh active Active
- 2020-03-20 WO PCT/US2020/023767 patent/WO2020197966A1/en unknown
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005252921A (ja) | 2004-03-08 | 2005-09-15 | Matsushita Electric Ind Co Ltd | 画像符号化方法、画像符号化装置、記録媒体、および画像復号化装置 |
JP2011507404A (ja) | 2007-12-10 | 2011-03-03 | クゥアルコム・インコーポレイテッド | ビデオ補間または外挿のための参照選択 |
US20170347120A1 (en) | 2016-05-28 | 2017-11-30 | Microsoft Technology Licensing, Llc | Motion-compensated compression of dynamic voxelized point clouds |
Also Published As
Publication number | Publication date |
---|---|
JP2022516851A (ja) | 2022-03-03 |
US10986364B2 (en) | 2021-04-20 |
WO2020197966A1 (en) | 2020-10-01 |
US20200304829A1 (en) | 2020-09-24 |
EP3871421A4 (en) | 2022-01-26 |
CN113455007B (zh) | 2023-12-22 |
EP3871421A1 (en) | 2021-09-01 |
CN113455007A (zh) | 2021-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7263521B2 (ja) | インターフレーム点群属性符号化のための方法並びにその、装置およびコンピュータプログラム | |
JP7384520B2 (ja) | フレーム間点群属性コーディングのための方法、装置及びコンピュータ・プログラム | |
JP7234375B2 (ja) | 点群属性コーディングの加重中央値を予測するための手法及びデバイス並びにコンピュータプログラム | |
JP7261300B2 (ja) | 適応ポイントクラウド属性コーディングのための方法、装置、及びコンピュータプログラム | |
JP7213368B2 (ja) | 点群属性コーディングのためのチャネル間予測および変換の技術並びに装置 | |
RU2769460C1 (ru) | Способ и устройство для кодирования коэффициентов трансформации с алфавитным разделением для сжатия облака точек | |
US11551334B2 (en) | Techniques and apparatus for coarse granularity scalable lifting for point-cloud attribute coding | |
US11232599B2 (en) | Method and apparatus for inter-channel prediction and transform for point cloud attribute coding | |
CN112188197A (zh) | 通道间点云属性解码方法、装置以及可读存储介质 | |
CN113115019B (zh) | 视频编解码方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210623 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220829 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230320 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230412 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7263521 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |