JP7167372B2 - 画像復号装置、画像符号化装置、画像処理システム及びプログラム - Google Patents
画像復号装置、画像符号化装置、画像処理システム及びプログラム Download PDFInfo
- Publication number
- JP7167372B2 JP7167372B2 JP2022020183A JP2022020183A JP7167372B2 JP 7167372 B2 JP7167372 B2 JP 7167372B2 JP 2022020183 A JP2022020183 A JP 2022020183A JP 2022020183 A JP2022020183 A JP 2022020183A JP 7167372 B2 JP7167372 B2 JP 7167372B2
- Authority
- JP
- Japan
- Prior art keywords
- candidate
- prediction
- candidate position
- frame
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
開示の概要に係る画像復号装置は、動きベクトルに基づいて予測ブロックに含まれる予測信号を生成する予測部を備える。前記予測部は、前記動きベクトルによって特定される参照位置を基準として探索範囲を設定し、前記探索範囲の中から所定コストが最も小さい修正参照位置を特定し、前記修正参照位置に基づいて前記動きベクトルを修正する洗練化処理を実行する。前記予測部は、前記洗練化処理において、前記探索範囲の少なくとも一部を構成する対象探索範囲の外枠を定義する4つの第1候補位置及び前記参照位置について前記所定コストを算出する第1処理と、前記4つの第1候補位置の中で前記所定コストが最も小さい基準第1候補位置及び前記参照位置に基づいて、前記対象探索範囲が分割された分割探索範囲の外枠を定義する2つの第2候補位置を特定し、前記2つの第2候補位置について前記所定コストを算出する第2処理と、を実行する。
(画像処理システム)
以下において、実施形態に係る画像処理システムについて説明する。図1は、実施形態に係る実施形態に係る画像処理システム10を示す図である。
以下において、実施形態に係る画像符号化装置について説明する。図2は、実施形態に係る画像符号化装置100を示す図である。
以下において、実施形態に係るインター予測部について説明する。図3は、実施形態に係るインター予測部111を示す図である。
以下において、実施形態に係る画像復号装置について説明する。図8は、実施形態に係る画像復号装置200を示す図である。
以下において、実施形態に係るインター予測部について説明する。図9は、実施形態に係るインター予測部241を示す図である。
開示の概要に係る画像符号化装置100及び画像復号装置200では、象探索範囲の外枠を定義する4つの第1候補位置及び参照位置について所定コストを算出する第1処理が実行され、対象探索範囲が分割された分割探索範囲の外枠を定義する2つの第2候補位置を特定し、2つの第2候補位置について所定コストを算出する第2処理が実行される。すなわち、対象探索範囲の外側から修正参照位置を探索することによって、所定コストを算出すべき画素数を抑制しながら、修正参照位置を適切に探索することができる。言い換えると、動きベクトルの修正精度を落とさずに、動きベクトルの修正に伴う処理負荷を軽減することができる。
以下において、実施形態の変更例1について説明する。以下においては、実施形態に対する相違点について主として説明する。
以下において、実施形態の変更例2について説明する。以下においては、実施形態に対する相違点について主として説明する。
以下において、実施形態の変更例3について説明する。以下においては、実施形態に対する相違点について主として説明する。
以下において、実施形態の変更例4について説明する。以下においては、実施形態に対する相違点について主として説明する。
本発明は上述した実施形態によって説明したが、この開示の一部をなす論述及び図面は、この発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。
Claims (4)
- 動きベクトルに基づいて予測ブロックに含まれる予測信号を生成する予測部を備え、
前記予測部は、所定条件が満たされる場合に、前記動きベクトルによって特定される参照位置を基準として探索範囲を設定し、前記探索範囲の中から所定コストが最も小さい修正参照位置を特定し、前記修正参照位置に基づいて前記動きベクトルを修正する洗練化処理を実行し、
前記予測部は、前記洗練化処理において、
前記探索範囲の中から第1候補位置を選択し、
前記第1候補位置及び前記参照位置の中から第2候補位置を選択し、
前記参照位置の所定コストが前記第1候補位置のそれぞれの所定コストの最小値の一定割合より小さい場合、前記第2候補位置として前記参照位置のみを選択し、
前記第2候補位置として選択された前記参照位置に隣接する画素を第3候補位置として特定し、
前記第1候補位置、前記第2候補位置及び前記第3候補位置の中で前記所定コストが最も小さい位置を前記修正参照位置として特定し、
前記所定条件は、前記予測ブロックが双方向予測を行うブロックであり、一方の参照フレームが対象フレームよりも時間的に過去のフレームであり、他方の参照フレームが前記対象フレームよりも時間的に未来のフレームであるという条件であり、
前記一方の参照フレームにおける前記第1候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第1候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第2候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第2候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第3候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第3候補位置と前記参照位置との変位の符号を反転したものとし、
前記予測部は、前記予測ブロックのブロックサイズが予め定められたブロックサイズより大きい場合、サブブロック群に分割して、前記サブブロックごとに前記洗練化処理を行う、画像復号装置。 - 動きベクトルに基づいて予測ブロックに含まれる予測信号を生成する予測部を備え、
前記予測部は、所定条件が満たされる場合に、前記動きベクトルによって特定される参照位置を基準として探索範囲を設定し、前記探索範囲の中から所定コストが最も小さい修正参照位置を特定し、前記修正参照位置に基づいて前記動きベクトルを修正する洗練化処理を実行し、
前記予測部は、前記洗練化処理において、
前記探索範囲の中から第1候補位置を選択し、
前記第1候補位置及び前記参照位置の中から第2候補位置を選択し、
前記参照位置の所定コストが前記第1候補位置のそれぞれの所定コストの最小値の一定割合より小さい場合、前記第2候補位置として前記参照位置のみを選択し、
前記第2候補位置として選択された前記参照位置に隣接する画素を第3候補位置として特定し、
前記第1候補位置、前記第2候補位置及び前記第3候補位置の中で前記所定コストが最も小さい位置を前記修正参照位置として特定し、
前記所定条件は、前記予測ブロックが双方向予測を行うブロックであり、一方の参照フレームが対象フレームよりも時間的に過去のフレームであり、他方の参照フレームが前記対象フレームよりも時間的に未来のフレームであるという条件であり、
前記一方の参照フレームにおける前記第1候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第1候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第2候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第2候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第3候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第3候補位置と前記参照位置との変位の符号を反転したものとし、
前記予測部は、前記予測ブロックのブロックサイズが予め定められたブロックサイズより大きい場合、サブブロック群に分割して、前記サブブロックごとに前記洗練化処理を行う、画像符号化装置。 - 画像符号化装置及び画像復号装置を備える画像処理システムであって、
前記画像符号化装置及び前記画像復号装置は、動きベクトルに基づいて予測ブロックに含まれる予測信号を生成する予測部を備え、
前記予測部は、所定条件が満たされる場合に、前記動きベクトルによって特定される参照位置を基準として探索範囲を設定し、前記探索範囲の中から所定コストが最も小さい修正参照位置を特定し、前記修正参照位置に基づいて前記動きベクトルを修正する洗練化処理を実行し、
前記予測部は、前記洗練化処理において、
前記探索範囲の中から第1候補位置を選択し、
前記第1候補位置及び前記参照位置の中から第2候補位置を選択し、
前記参照位置の所定コストが前記第1候補位置のそれぞれの所定コストの最小値の一定割合より小さい場合、前記第2候補位置として前記参照位置のみを選択し、
前記第2候補位置として選択された前記参照位置に隣接する画素を第3候補位置として特定し、
前記第1候補位置、前記第2候補位置及び前記第3候補位置の中で前記所定コストが最も小さい位置を前記修正参照位置として特定し、
前記所定条件は、前記予測ブロックが双方向予測を行うブロックであり、一方の参照フレームが対象フレームよりも時間的に過去のフレームであり、他方の参照フレームが前記対象フレームよりも時間的に未来のフレームであるという条件であり、
前記一方の参照フレームにおける前記第1候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第1候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第2候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第2候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第3候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第3候補位置と前記参照位置との変位の符号を反転したものとし、
前記予測部は、前記予測ブロックのブロックサイズが予め定められたブロックサイズより大きい場合、サブブロック群に分割して、前記サブブロックごとに前記洗練化処理を行う、画像処理システム。 - プログラムであって、コンピュータに、
動きベクトルに基づいて予測ブロックに含まれる予測信号を生成する予測ステップを実行させ、
前記予測ステップは、所定条件が満たされる場合に、前記動きベクトルによって特定される参照位置を基準として探索範囲を設定し、前記探索範囲の中から所定コストが最も小さい修正参照位置を特定し、前記修正参照位置に基づいて前記動きベクトルを修正する洗練化処理を実行するステップを含み、
前記洗練化処理を実行するステップにおいて、
前記探索範囲の中から第1候補位置を選択し、
前記第1候補位置及び前記参照位置の中から第2候補位置を選択し、
前記参照位置の所定コストが前記第1候補位置のそれぞれの所定コストの最小値の一定割合より小さい場合、前記第2候補位置として前記参照位置のみを選択し、
前記第2候補位置として選択された前記参照位置に隣接する画素を第3候補位置として特定し、
前記第1候補位置、前記第2候補位置及び前記第3候補位置の中で前記所定コストが最も小さい位置を前記修正参照位置として特定し、
前記所定条件は、前記予測ブロックが双方向予測を行うブロックであり、一方の参照フレームが対象フレームよりも時間的に過去のフレームであり、他方の参照フレームが前記対象フレームよりも時間的に未来のフレームであるという条件であり、
前記一方の参照フレームにおける前記第1候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第1候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第2候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第2候補位置と前記参照位置との変位の符号を反転したものとし、
前記一方の参照フレームにおける前記第3候補位置と前記参照位置との変位は、前記他方の参照フレームにおける前記第3候補位置と前記参照位置との変位の符号を反転したものとし、
前記ステップにおいて、前記予測ブロックのブロックサイズが予め定められたブロックサイズより大きい場合、サブブロック群に分割して、前記サブブロックごとに前記洗練化処理を行う、プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022020183A JP7167372B2 (ja) | 2021-11-10 | 2022-02-14 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2022171213A JP7411318B2 (ja) | 2021-11-10 | 2022-10-26 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2023217487A JP2024029090A (ja) | 2021-11-10 | 2023-12-23 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021183488A JP7026286B1 (ja) | 2018-09-21 | 2021-11-10 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2022020183A JP7167372B2 (ja) | 2021-11-10 | 2022-02-14 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021183488A Division JP7026286B1 (ja) | 2018-09-21 | 2021-11-10 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022171213A Division JP7411318B2 (ja) | 2021-11-10 | 2022-10-26 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022078071A JP2022078071A (ja) | 2022-05-24 |
JP7167372B2 true JP7167372B2 (ja) | 2022-11-08 |
Family
ID=87884926
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022020183A Active JP7167372B2 (ja) | 2021-11-10 | 2022-02-14 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2022171213A Active JP7411318B2 (ja) | 2021-11-10 | 2022-10-26 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2023217487A Pending JP2024029090A (ja) | 2021-11-10 | 2023-12-23 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022171213A Active JP7411318B2 (ja) | 2021-11-10 | 2022-10-26 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP2023217487A Pending JP2024029090A (ja) | 2021-11-10 | 2023-12-23 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP7167372B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023002752A (ja) * | 2021-11-10 | 2023-01-10 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040252766A1 (en) | 2003-06-11 | 2004-12-16 | Daeyang Foundation (Sejong University) | Motion vector search method and apparatus |
WO2018110180A1 (ja) | 2016-12-15 | 2018-06-21 | シャープ株式会社 | 動きベクトル生成装置、予測画像生成装置、動画像復号装置、および動画像符号化装置 |
JP7026286B1 (ja) | 2018-09-21 | 2022-02-25 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7167372B2 (ja) * | 2021-11-10 | 2022-11-08 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
-
2022
- 2022-02-14 JP JP2022020183A patent/JP7167372B2/ja active Active
- 2022-10-26 JP JP2022171213A patent/JP7411318B2/ja active Active
-
2023
- 2023-12-23 JP JP2023217487A patent/JP2024029090A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040252766A1 (en) | 2003-06-11 | 2004-12-16 | Daeyang Foundation (Sejong University) | Motion vector search method and apparatus |
WO2018110180A1 (ja) | 2016-12-15 | 2018-06-21 | シャープ株式会社 | 動きベクトル生成装置、予測画像生成装置、動画像復号装置、および動画像符号化装置 |
JP7026286B1 (ja) | 2018-09-21 | 2022-02-25 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Non-Patent Citations (5)
Title |
---|
CHEN, Jianle et al.,Algorithm Description of Joint Exploration Test Model 7 (JEM 7),Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 7th Meeting: Torino, IT, 13-21 July 2017, [JVET-G1001-v1],JVET-G1001 (version 1),ITU-T,2017年08月19日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/7_Torino/wg11/JVET-G1001-v1.zip>: JVET-G1001-v1.docx: pp. 27-28 |
LIU, Hongbin et al.,CE9-related: Simplification of Decoder Side Motion Vector Derivation,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 11th Meeting: Ljubljana, SI, 10-18 July 2018, [JVET-K0105-v1],JVET-K0105 (version 1),ITU-T,2018年07月03日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/11_Ljubljana/wg11/JVET-K0105-v1.zip>: JVET-K0105.docx: pp. 1-3 |
UEDA, Motoharu,Bi-prediction by single motion vector using decoder-side inter-reference ME,Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 5th Meeting: Geneva, CH, 16-23 March, 2011, [JCTVC-E216_r1],JCTVC-E216 (version 2),ITU-T,2011年03月19日,<URL:http://phenix.it-sudparis.eu/jct/doc_end_user/documents/5_Geneva/wg11/JCTVC-E216-v2.zip>: JCTVC-E216_r1.doc: pp. 1-22 |
UNNO, Kyohei et al.,CE9-related : DMVR with Coarse-to-Fine Search and Block Size Limit,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 12th Meeting: Macao, CN, 3-12 Oct. 2018, [JVET-L0382-v2],JVET-L0382 (version 4),ITU-T,2018年10月07日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/12_Macao/wg11/JVET-L0382-v4.zip>: JVET-L0382-v2.docx: pp. 1-4 |
ZHOU, Minhua and HENG, Brian,Non-CE9: A computational complexity analysis for DMVR,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 11th Meeting: Ljubljana, SI, 10-18 July 2018, [JVET-K0480_v1],JVET-K0480 (version 1),ITU-T,2018年07月11日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/11_Ljubljana/wg11/JVET-K0480-v1.zip>: JVET-K0480_v1.docx: pp. 1-4 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023002752A (ja) * | 2021-11-10 | 2023-01-10 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
JP7411318B2 (ja) | 2021-11-10 | 2024-01-11 | Kddi株式会社 | 画像復号装置、画像符号化装置、画像処理システム及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7411318B2 (ja) | 2024-01-11 |
JP2023002752A (ja) | 2023-01-10 |
JP2024029090A (ja) | 2024-03-05 |
JP2022078071A (ja) | 2022-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6961115B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP2024029090A (ja) | 画像復号装置、画像符号化装置、画像処理システム及びプログラム | |
US20240114165A1 (en) | Image decoding device, image encoding device, image processing system, and program | |
JP7026286B1 (ja) | 画像復号装置、画像符号化装置、画像処理システム及びプログラム | |
JP7076660B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP6914462B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7026276B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP2022134162A (ja) | 画像符号化装置、方法及びプログラム | |
JP7005480B2 (ja) | 画像復号装置、画像符号化装置、プログラム及び画像処理システム | |
KR20200134302A (ko) | 이미지 처리 장치 및 방법 | |
JP7034363B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP6835337B2 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP7061737B1 (ja) | 画像復号装置、画像復号方法及びプログラム | |
WO2020184262A1 (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP2022103308A (ja) | 画像復号装置、画像復号方法及びプログラム | |
JP2022087335A (ja) | 画像復号装置、画像復号方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220214 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221026 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7167372 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |