JP6961115B2 - 画像復号装置、画像復号方法及びプログラム - Google Patents
画像復号装置、画像復号方法及びプログラム Download PDFInfo
- Publication number
- JP6961115B2 JP6961115B2 JP2021048673A JP2021048673A JP6961115B2 JP 6961115 B2 JP6961115 B2 JP 6961115B2 JP 2021048673 A JP2021048673 A JP 2021048673A JP 2021048673 A JP2021048673 A JP 2021048673A JP 6961115 B2 JP6961115 B2 JP 6961115B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- motion vector
- unit
- refinement
- prediction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
- H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
Description
て、ブロック毎にBDOF処理を適用するか否かについて判定するように構成されており、前記ブロックは、サブブロックであることを要旨とする。
以下、図1〜図10を参照して、本発明の第1実施形態に係る画像処理システム10について説明する。図1は、本実施形態に係る実施形態に係る画像処理システム10を示す図である。
以下、図2を参照して、本実施形態に係る画像符号化装置100について説明する。図2は、本実施形態に係る画像符号化装置100の機能ブロックの一例について示す図である。
うに構成されている。
以下、図3を参照して、本実施形態に係る画像符号化装置100のインター予測部111について説明する。図3は、本実施形態に係る画像符号化装置100のインター予測部111の機能ブロックの一例について示す図である。
能な符号化方法である。Symmetric MVDモードでは、復号側に伝送すべき情報である二つ(L0、L1)の参照フレーム及び二つ(L0、L1)の動きベクトルのうち、L0の動きベクトル(差分動きベクトル)のみを符号化する。残りのL1の動きベクトル及び二つの参照フレームの情報については、予め決められた方法によって符号化側及び復号側でそれぞれ一意に決定する。
MVDモードで符号化されていないことという条件を含んでもよい。
という条件を含んでもよい。ここで、差分動きベクトルの大きさは、上述のステップS41と同様の方法で判定することができる。閾値の値は、上述のステップS41と同様に0に設定することも可能である。
以下において、本実施形態に係るインループフィルタ処理部150について説明する。図6は、本実施形態に係るインループフィルタ処理部150を示す図である。
以下、図8を参照して、本実施形態に係る画像復号装置200について説明する。図8は、本実施形態に係る画像復号装置200の機能ブロックの一例について示す図である。
構成されていてもよい。
以下、図9を参照して、本実施形態に係るインター予測部241について説明する。図9は、本実施形態に係るインター予測部241の機能ブロックの一例について示す図である。
以下において、本実施形態に係るインループフィルタ処理部250について説明する。図10は、本実施形態に係るインループフィルタ処理部250を示す図である。
ブロックのブロックサイズを示す制御データに基づいて、隣接ブロックの境界を検出するように構成されている。
ベクトルがSymmetric MVDモードで符号化されているか否かを考慮する。
本発明によれば、洗練化後の動きベクトルをデブロッキングフィルタの適用判定に用いることができない場合でも、洗練化処理を行ったブロックの境界に適切にデブロッキングフィルタを適用し、ブロックノイズを抑制して主観画質を向上させることができる。
100…画像符号化装置
111、241…インター予測部
111A…動きベクトル探索部
111B…動きベクトル符号化部
111C、241C…洗練化部
111D、241D…予測信号生成部
112、242…イントラ予測部
121…減算器
122、230…加算器
131…変換・量子化部
132、220…逆変換・逆量子化部
140…符号化部
150、250…インループフィルタ処理部
151、251…対象ブロック境界検出部
152、252…隣接ブロック境界検出部
153、253…境界強度判定部
154、254…フィルタ決定部
155、255…フィルタ処理部
160、260…フレームバッファ
200…画像復号装置
210…復号部
241B…動きベクトル復号部
Claims (3)
- 画像復号装置であって、
符号化データから動きベクトルを復号するように構成されている動きベクトル復号部と、
復号された前記動きベクトルを修正する洗練化処理を行うように構成されている洗練化部と、
前記洗練化部から出力される修正された前記動きベクトルに基づいて予測信号を生成するように構成されている予測信号生成部とを有し、
前記予測信号生成部は、
ブロックを分割したサブブロック毎にBDOF適用条件を満たしているかについて判定し、
前記BDOF適用条件を満たしている前記サブブロックについて、前記洗練化処理における探索コストに基づいて、BDOF処理を適用するか否かについて判定するように構成されていることを特徴とする画像復号装置。 - 符号化データから動きベクトルを復号する工程Aと、
復号された前記動きベクトルを修正する洗練化処理を行う工程Bと、
前記工程Bにおいて修正された前記動きベクトルに基づいて予測信号を生成する工程Cとを有し、
前記工程Cは、
ブロックを分割したサブブロック毎にBDOF適用条件を満たしているかについて判定する工程と、
前記BDOF適用条件を満たしている前記サブブロックについて、前記洗練化処理における探索コストに基づいて、BDOF処理を適用するか否かについて判定する工程とを有することを特徴とする画像復号方法。 - 画像復号装置で用いるプログラムであって、コンピュータに、
符号化データから動きベクトルを復号する工程Aと、
復号された前記動きベクトルを修正する洗練化処理を行う工程Bと、
前記工程Bにおいて修正された前記動きベクトルに基づいて予測信号を生成する工程Cとを実行させ、
前記工程Cは、
ブロックを分割したサブブロック毎にBDOF適用条件を満たしているかについて判定する工程と、
前記BDOF適用条件を満たしている前記サブブロックについて、前記洗練化処理における探索コストに基づいて、BDOF処理を適用するか否かについて判定する工程とを有することを特徴とするプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021048673A JP6961115B2 (ja) | 2019-03-11 | 2021-03-23 | 画像復号装置、画像復号方法及びプログラム |
JP2021167722A JP7034363B2 (ja) | 2019-03-11 | 2021-10-12 | 画像復号装置、画像復号方法及びプログラム |
JP2022031145A JP7061737B1 (ja) | 2019-03-11 | 2022-03-01 | 画像復号装置、画像復号方法及びプログラム |
JP2022068204A JP7083971B1 (ja) | 2019-03-11 | 2022-04-18 | 画像復号装置、画像復号方法及びプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019043966A JP6867611B2 (ja) | 2019-03-11 | 2019-03-11 | 画像復号装置、画像復号方法及びプログラム |
JP2021048673A JP6961115B2 (ja) | 2019-03-11 | 2021-03-23 | 画像復号装置、画像復号方法及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019043966A Division JP6867611B2 (ja) | 2019-03-11 | 2019-03-11 | 画像復号装置、画像復号方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021167722A Division JP7034363B2 (ja) | 2019-03-11 | 2021-10-12 | 画像復号装置、画像復号方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021101578A JP2021101578A (ja) | 2021-07-08 |
JP6961115B2 true JP6961115B2 (ja) | 2021-11-05 |
Family
ID=72427471
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019043966A Active JP6867611B2 (ja) | 2019-03-11 | 2019-03-11 | 画像復号装置、画像復号方法及びプログラム |
JP2021048673A Active JP6961115B2 (ja) | 2019-03-11 | 2021-03-23 | 画像復号装置、画像復号方法及びプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019043966A Active JP6867611B2 (ja) | 2019-03-11 | 2019-03-11 | 画像復号装置、画像復号方法及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US11627311B2 (ja) |
EP (1) | EP3941064A4 (ja) |
JP (2) | JP6867611B2 (ja) |
CN (5) | CN116193145A (ja) |
WO (1) | WO2020184348A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022019720A (ja) * | 2019-03-11 | 2022-01-27 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7378968B2 (ja) | 2019-06-07 | 2023-11-14 | シャープ株式会社 | 予測画像生成装置、動画像復号装置および動画像符号化装置 |
KR20240029111A (ko) * | 2019-06-24 | 2024-03-05 | 엘지전자 주식회사 | 움직임 벡터를 이용한 영상 코딩 방법 및 장치 |
US11792423B2 (en) * | 2019-11-22 | 2023-10-17 | Qualcomm Incorporated | Early termination of motion vector refinement process in video coding |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106105196A (zh) * | 2014-04-28 | 2016-11-09 | 松下电器(美国)知识产权公司 | 编码方法、解码方法、编码装置以及解码装置 |
US10798385B2 (en) * | 2016-04-25 | 2020-10-06 | Lg Electronics Inc. | Inter-prediction method and apparatus in image coding system |
US10931969B2 (en) * | 2017-01-04 | 2021-02-23 | Qualcomm Incorporated | Motion vector reconstructions for bi-directional optical flow (BIO) |
JP6344508B2 (ja) * | 2017-06-12 | 2018-06-20 | 株式会社Jvcケンウッド | 画像復号装置、画像復号方法、画像復号プログラム |
CN110832858B (zh) * | 2017-07-03 | 2023-10-13 | Vid拓展公司 | 用于视频编解码的设备、方法 |
WO2019045427A1 (ko) * | 2017-08-29 | 2019-03-07 | 에스케이텔레콤 주식회사 | 양방향 옵티컬 플로우를 이용한 움직임 보상 방법 및 장치 |
US10977809B2 (en) * | 2017-12-11 | 2021-04-13 | Dolby Laboratories Licensing Corporation | Detecting motion dragging artifacts for dynamic adjustment of frame rate conversion settings |
US11575933B2 (en) * | 2018-04-06 | 2023-02-07 | Vid Scale, Inc. | Bi-directional optical flow method with simplified gradient derivation |
US11470348B2 (en) * | 2018-08-17 | 2022-10-11 | Hfi Innovation Inc. | Methods and apparatuses of video processing with bi-direction prediction in video coding systems |
WO2020084465A1 (en) * | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Simplified coding of generalized bi-directional index |
WO2020140874A1 (en) * | 2019-01-02 | 2020-07-09 | Huawei Technologies Co., Ltd. | A hardware and software friendly system and method for decoder-side motion vector refinement with decoder-side bi-predictive optical flow based per-pixel correction to bi-predictive motion compensation |
CN113475072B (zh) * | 2019-03-04 | 2023-12-15 | 北京字节跳动网络技术有限公司 | 视频处理中滤波信息的信令 |
EP3937498A4 (en) * | 2019-03-08 | 2022-12-07 | Sharp Kabushiki Kaisha | DYNAMIC IMAGE DECODING DEVICE |
-
2019
- 2019-03-11 JP JP2019043966A patent/JP6867611B2/ja active Active
-
2020
- 2020-03-04 CN CN202310232541.6A patent/CN116193145A/zh active Pending
- 2020-03-04 CN CN202310231395.5A patent/CN116193143A/zh active Pending
- 2020-03-04 US US17/437,991 patent/US11627311B2/en active Active
- 2020-03-04 CN CN202310232278.0A patent/CN116193144A/zh active Pending
- 2020-03-04 EP EP20768908.4A patent/EP3941064A4/en active Pending
- 2020-03-04 CN CN202310256037.XA patent/CN116208776A/zh active Pending
- 2020-03-04 WO PCT/JP2020/009245 patent/WO2020184348A1/ja unknown
- 2020-03-04 CN CN202080019761.5A patent/CN113545082B/zh active Active
-
2021
- 2021-03-23 JP JP2021048673A patent/JP6961115B2/ja active Active
-
2023
- 2023-03-07 US US18/180,041 patent/US20230224458A1/en active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022019720A (ja) * | 2019-03-11 | 2022-01-27 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN116208776A (zh) | 2023-06-02 |
EP3941064A1 (en) | 2022-01-19 |
CN113545082A (zh) | 2021-10-22 |
CN116193144A (zh) | 2023-05-30 |
EP3941064A4 (en) | 2023-01-11 |
US20220046233A1 (en) | 2022-02-10 |
US11627311B2 (en) | 2023-04-11 |
CN116193145A (zh) | 2023-05-30 |
JP6867611B2 (ja) | 2021-04-28 |
US20230224458A1 (en) | 2023-07-13 |
JP2021101578A (ja) | 2021-07-08 |
CN113545082B (zh) | 2023-03-28 |
CN116193143A (zh) | 2023-05-30 |
WO2020184348A1 (ja) | 2020-09-17 |
JP2020150313A (ja) | 2020-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6961115B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
KR102140331B1 (ko) | 인트라 예측 방법 및 그 장치 | |
JP2012142886A (ja) | 画像符号化装置及び画像復号装置 | |
JP2024029090A (ja) | 画像復号装置、画像符号化装置、画像処理システム及びプログラム | |
JP7076660B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7026276B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP6914462B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7026286B1 (ja) | 画像復号装置、画像符号化装置、画像処理システム及びプログラム | |
JP7034363B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7061737B1 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7083971B1 (ja) | 画像復号装置、画像復号方法及びプログラム | |
US11202082B2 (en) | Image processing apparatus and method | |
WO2020184262A1 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP6976916B2 (ja) | 画像復号装置、画像符号化装置、画像処理システム及びプログラム | |
JP6835337B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7324899B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
WO2020137125A1 (ja) | 画像復号装置、画像符号化装置、プログラム及び画像処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210326 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210326 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20210407 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20210423 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210719 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210817 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210908 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210921 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211012 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6961115 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |