RU2696316C1 - Адаптивный фильтр увеличения резкости для кодирования с предсказанием - Google Patents
Адаптивный фильтр увеличения резкости для кодирования с предсказанием Download PDFInfo
- Publication number
- RU2696316C1 RU2696316C1 RU2018114669A RU2018114669A RU2696316C1 RU 2696316 C1 RU2696316 C1 RU 2696316C1 RU 2018114669 A RU2018114669 A RU 2018114669A RU 2018114669 A RU2018114669 A RU 2018114669A RU 2696316 C1 RU2696316 C1 RU 2696316C1
- Authority
- RU
- Russia
- Prior art keywords
- adaptive
- block
- filter
- prediction
- frame
- Prior art date
Links
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 238
- 239000000872 buffer Substances 0.000 claims abstract description 39
- 239000010410 layer Substances 0.000 claims description 86
- 239000013598 vector Substances 0.000 claims description 48
- 238000000034 method Methods 0.000 claims description 40
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 claims description 36
- 230000033001 locomotion Effects 0.000 claims description 33
- 238000001914 filtration Methods 0.000 claims description 30
- 239000011229 interlayer Substances 0.000 claims description 24
- 238000006073 displacement reaction Methods 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 7
- 238000005457 optimization Methods 0.000 claims description 5
- 230000003628 erosive effect Effects 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract 1
- 239000000126 substance Substances 0.000 abstract 1
- 230000011664 signaling Effects 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 7
- 238000013139 quantization Methods 0.000 description 7
- 238000012935 Averaging Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20201—Motion blur correction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Изобретение относится к вычислительной технике. Технический результат – повышение эффективности кодирования/декодирования видеопотока. Видеокодер для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра, содержит: буферы, сконфигурированные для хранения исходного блока и блока предсказания соответственно, адаптивный фильтр увеличения резкости, узел управления, сконфигурированный для управления выборочным обходом и выборочным применением адаптивного фильтра увеличения резкости, и узел кодирования, сконфигурируемый для кодирования информации о фильтре увеличения резкости с использованием CABAC, узел оценки интенсивности контуров, переключатель контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров. 6 н. и 15 з.п. ф-лы, 9 ил.
Description
ОБЛАСТЬ ТЕХНИКИ
Настоящее изобретение относится в целом к области обработки видео, и в частности, относится к видеокодеру и видеодекодеру для поддержки кодирования с предсказанием. Настоящее изобретение дополнительно относится к способу для кодирования с предсказанием видео и к способу для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием. Наконец, настоящее изобретение относится к компьютерной программе с программным кодом для выполнения такого способа.
УРОВЕНЬ ТЕХНИКИ
Известные видеосистемы используют кодирование с предсказанием для повышения эффективности кодирования и декодирования. Примеры кодирования с предсказанием включают в себя межслойное предсказание в масштабируемом кодировании видео и межкадровое предсказание.
Масштабируемый видеокодек - ответ промышленности связи на растущий спрос на потоковую передачу видео мобильными устройствами, включая смартфоны, планшеты или ноутбуки, а также другое оборудование с большим многообразием размеров экранов и вычислительных возможностей. Кроме того, современные системы передачи видео, использующие Интернет и сети мобильной связи, обычно отличаются широким диапазоном качества соединения, которое зависит от адаптивных механизмов совместного использования ресурсов. В таких гетерогенных средах с меняющимся качеством соединения и разными приемными устройствами желательна гибкая адаптация однажды кодированного контента.
В этой связи масштабируемый видеокодек формирует многослойный поток двоичных сигналов. Многослойная структура любого масштабируемого видеоконтента может задаваться как сочетание базового слоя и по меньшей мере одного дополнительного слоя улучшения. Базовый слой соответствует наименьшей поддерживаемой характеристике видео, тогда как слои улучшения предусматривают уточнение упомянутого базового слоя. Достигаемое слоями улучшения усовершенствование может относиться к качеству, частоте кадров или пространственному уточнению с более высоким пространственным разрешением.
Фиг. 1 показывает видеокодер 100 для межслойного кодирования с предсказанием последовательности видеокадров 101 в соответствии с известным уровнем техники, например, из масштабируемого кодирования видео H.265/SHVC. Кодер 100 содержит пространственный слой 102 улучшения для приема видеокадра 101 и формирования кодированного потока двоичных сигналов слоя улучшения. Кодер 100 дополнительно содержит фильтр 107 понижающей дискретизации для формирования видеокадра 111 с пониженной дискретизацией из видеокадра 101 и пространственный базовый слой 112 для приема видеокадра 111 с пониженной дискретизацией и для формирования кодированного потока двоичных сигналов базового слоя. Кодер 100 дополнительно содержит мультиплексный узел 118 для мультиплексирования кодированного потока двоичных сигналов слоя улучшения и кодированного потока двоичных сигналов базового слоя и формирования кодированного потока двоичных сигналов видео.
Пространственный базовый слой 112 содержит последовательные узлы, которыми являются узел 113 временного масштабируемого кодирования, принимающий видеокадр 111 с пониженной дискретизацией, узел 114 предсказания, узел 115 кодирования базового слоя, узел 116 масштабируемого кодирования SNR и фильтр 117 повышающей дискретизации. Соответствующие выходы узла 115 кодирования базового слоя и узла 116 масштабируемого кодирования SNR предоставляются в мультиплексный узел 118. Пространственный слой 102 улучшения содержит последовательные узлы, которыми являются узел 103 временного масштабируемого кодирования, принимающий видеокадр 101, узел 104 предсказания, узел 105 кодирования базового слоя и узел 106 масштабируемого кодирования SNR. Соответствующие выходы узла 105 кодирования базового слоя и узла 106 масштабируемого кодирования SNR предоставляются в мультиплексный узел 118.
Выход фильтра 117 повышающей дискретизации в пространственном базовом слое 112 соответствует блоку предсказания для межслойного предсказания и поступает в узел 104 предсказания в пространственном слое улучшения. Информация с базового слоя используется для увеличения коэффициента сжатия слоев улучшения. Результатом этого является то, что можно уменьшить скорость передачи битов у видеосигналов.
Однако такое известное межслойное предсказание для пространственного слоя улучшения использует повышающую дискретизацию кадра базового слоя. В силу этого кадр базового слоя с повышенной дискретизацией страдает от нечетких контуров и от малого количества высокочастотных деталей, поскольку такие детали отсутствуют в опорном кадре базового слоя. Кроме того, качество кадра с повышенной дискретизацией также зависит от свойств фильтра 117 повышающей дискретизации. Фильтры с короткими отводами могут подавлять высокие частоты и выдавать интерполированный кадр еще более нечетким. В противоположность им фильтры с длинными отводами могут сохранять высокие частоты, но формировать некоторое ложное оконтуривание возле резких контуров.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Признав вышеупомянутые недостатки и проблемы, настоящее изобретение стремится усовершенствовать данный уровень техники. В частности, задача настоящего изобретения состоит в том, чтобы предоставить видеокодер, способ кодирования, видеодекодер и способ декодирования для улучшенного кодирования и декодирования видеопотока.
Настоящее изобретение предназначено, в частности, для повышения эффективности кодирования с предсказанием. В частности, изобретение также предназначено для лучшего соответствия локальным признакам изображения. Дополнительная задача изобретения состоит в том, чтобы улучшить кодирование с предсказанием путем увеличения резкости контуров и уменьшения ложного оконтуривания в блоках предсказания адаптивно к локальному содержимому изображения.
Вышеупомянутая задача настоящего изобретения достигается с помощью решения, предоставленного в прилагаемых независимых пунктах формулы изобретения. Полезные реализации настоящего изобретения дополнительно задаются в соответствующих зависимых пунктах формулы изобретения.
Первый аспект настоящего изобретения предоставляет видеокодер для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра. Видеокодер содержит буфер, сконфигурированный для хранения исходного блока. Видеокодер содержит буфер, сконфигурированный для хранения блока предсказания. Видеокодер содержит адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
В силу этого применение пространственного адаптивного фильтра увеличения резкости повышает эффективность предсказания и, например, эффективность межслойного или межкадрового предсказания. При условии, что наличие артефактов зависит от наличия контуров и от их интенсивности, полезно предоставить фильтр, который адаптируется к локальному содержимому изображения, то есть адаптируется к наличию и интенсивности контуров в блоках. Это решение также предусматривает адаптацию к локальным признакам для небольших областей кадра кодирования. При межслойном предсказании можно уменьшить ложное оконтуривание, вызванное фильтрами повышающей дискретизации, сохраняя при этом качество контуров. Можно уменьшить размывание контуров, вызванное предсказанием от кадра с меньшим разрешением. Также можно уменьшить служебную нагрузку сигнализации путем использования адаптивного фильтра увеличения резкости только с одним адаптивным коэффициентом. Служебную нагрузку сигнализации можно уменьшить, используя информацию об интенсивности контуров, вычисленную из уже переданного изображения базового слоя. Субъективное качество контуров можно повысить в восстановленных кадрах.
В одном виде реализации видеокодера, в соответствии с первым аспектом для кодирования с предсказанием множества исходных блоков исходного кадра в кодированный поток двоичных сигналов видео на основе, соответственно, множества блоков предсказания, полученных из опорного кадра, адаптивный фильтр увеличения резкости конфигурируется для наличия у него возможности применять разную фильтрацию увеличения резкости к каждому из множества блоков предсказания. В силу этого фильтр может адаптироваться к локальному содержимому изображения, то есть адаптироваться к наличию и интенсивности контуров в блоках.
В одном виде реализации видеокодера в соответствии с первым аспектом видеокодер подходит для межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения. Исходный кадр является кадром слоя улучшения. Опорный кадр является кадром восстановленного базового слоя. Видеокодер содержит фильтр повышающей дискретизации, сконфигурированный для повышения дискретизации опорного кадра, при этом блок предсказания является блоком опорного кадра с повышенной дискретизацией. В силу этого можно повысить эффективность межслойного предсказания.
В одном виде реализации видеокодера в соответствии с первым аспектом видеокодер подходит для межкадрового кодирования с предсказанием видеоконтента, содержащего последующие кадры. Исходный кадр является одним из последующих кадров. Опорный кадр является одним из восстановленных последующих кадров. Видеокодер содержит буфер, сконфигурированный для хранения опорного блока опорного кадра. Видеокодер содержит узел оценки движения, сконфигурированный для получения вектора движения, отражающего движение между опорным блоком и исходным блоком. Видеокодер содержит узел компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения. В силу этого можно повысить эффективность межкадрового предсказания.
В одном виде реализации видеокодера в соответствии с первым аспектом видеокодер содержит узел управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости. Видеокодер содержит узел кодирования, сконфигурированный для добавления информации о фильтре увеличения резкости в кодированный поток двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода и выборочного применения адаптивного фильтра увеличения резкости. В силу этого узел управления может принять решение применить или обойти фильтр увеличения резкости. Тогда решение можно приспособить к каждому конкретному случаю, например, к конкретному видеопотоку, который нужно кодировать. Также адаптивный фильтр увеличения резкости можно обходить для экономии вычислительных ресурсов видеокодера. С другой стороны, адаптивный фильтр увеличения резкости может применяться, если нужно отдать предпочтение, например, сокращению артефактов.
В одном виде реализации видеокодера в соответствии с первым аспектом узел кодирования конфигурируется для кодирования информации о фильтре увеличения резкости с использованием контекстно-адаптивного двоичного арифметического кодирования, CABAC. Видеокодер содержит узел оценки интенсивности контуров, сконфигурированный для оценки интенсивности контуров в блоке предсказания или опорном блоке опорного кадра. Видеокодер содержит переключатель контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров.
В одном виде реализации видеокодера в соответствии с первым аспектом узел управления конфигурируется для управления по меньшей мере одним из выборочного обхода и выборочного применения на основе минимизации остаточного блока, при этом упомянутый остаточный блок является разностью между исходным блоком и блоком предсказания, или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости. В силу этого возможность обхода или применения фильтра увеличения резкости может дополнительно использоваться для улучшения кодирования с предсказанием. Путем выбора варианта, который минимизирует остаточный блок, и путем соответственного применения или обхода фильтра увеличения резкости можно уменьшить количество данных и, например, количество коэффициентов преобразования, которое нужно кодировать.
В одном виде реализации видеокодера в соответствии с первым аспектом адаптивный фильтр увеличения резкости конфигурируется для управления им с помощью по меньшей мере одного адаптивного параметра. Видеокодер содержит узел управления, сконфигурированный для определения значения параметра у адаптивного параметра и передачи определенного значения параметра в адаптивный фильтр увеличения резкости. Видеокодер содержит узел кодирования, сконфигурированный для добавления информации об адаптивном параметре в кодированный поток двоичных сигналов видео касательно определенного значения параметра у адаптивного параметра. В силу этого можно оптимизировать адаптивный фильтр увеличения резкости, и одинаковая фильтрация может применяться кодером и декодером.
В одном виде реализации видеокодера в соответствии с первым аспектом узел управления конфигурируется для передачи разных значений параметра для адаптивного параметра и для выбора одного из разных значений параметра на основе минимизации остаточного блока, при этом упомянутый остаточный блок является разностью между исходным блоком и блоком предсказания, или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости. В силу этого можно дополнительно оптимизировать адаптивный фильтр увеличения резкости.
В одном виде реализации видеокодера в соответствии с первым аспектом адаптивный фильтр увеличения резкости является нелинейным фильтром, сконфигурированным для управления им с помощью единственного адаптивного параметра. В силу этого можно уменьшить служебную нагрузку сигнализации.
В одном виде реализации видеокодера в соответствии с первым аспектом адаптивный фильтр увеличения резкости содержит узел вычисления карты контуров, выполненный с возможностью формирования карты контуров блока-источника, при этом упомянутый блок-источник является блоком предсказания или опорным блоком опорного кадра. Адаптивный фильтр увеличения резкости содержит фильтр размывания, выполненный с возможностью размывания карты контуров у блока-источника. Адаптивный фильтр увеличения резкости содержит фильтр верхних частот, выполненный с возможностью формирования производного вектора для каждого положения блока-источника путем фильтрации верхних частот карты нечетких контуров. Адаптивный фильтр увеличения резкости содержит узел масштабирования, выполненный с возможностью формирования вектора смещения путем масштабирования производного вектора с коэффициентом интенсивности увеличения резкости. Адаптивный фильтр увеличения резкости содержит узел деформирования, выполненный с возможностью деформации блока предсказания на основе вектора смещения. Адаптивный параметр включает в себя коэффициент интенсивности увеличения резкости. В силу этого данная структура адаптивного фильтра увеличения резкости задает нелинейный фильтр увеличения резкости, который может преимущественно обеспечить лучшие результаты в плане устранения ложного оконтуривания. Также использование коэффициента интенсивности увеличения резкости в качестве адаптивного параметра подразумевает, что необходим только один адаптивный параметр, что дополнительно уменьшает служебную нагрузку сигнализации.
В одном виде реализации видеокодера в соответствии с первым аспектом информация об адаптивном параметре и/или информация о фильтре увеличения резкости добавляется на уровне блока для каждого блока предсказания, для произвольной или постоянной области кадра, на уровне кадра, на уровне GOP (группа изображений), на уровне PPS (набор параметров изображения) или на уровне SPS (набор параметров последовательности). В силу этого можно задать информацию о фильтре увеличения резкости и/или информацию об адаптивном параметре с нужной детализацией, чтобы можно было оптимизировать сигнализацию.
Второй аспект настоящего изобретения предоставляет способ для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра. Способ содержит сохранение исходного блока. Способ содержит сохранение блока предсказания. Способ содержит этап адаптивного фильтра увеличения резкости, содержащий применение пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Дополнительно признаки или реализации способа в соответствии со вторым аспектом изобретения могут выполнять функциональные возможности видеокодера в соответствии с первым аспектом изобретения и его разными видами реализации.
Третий аспект настоящего изобретения предоставляет видеодекодер для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра. Видеодекодер содержит узел декодирования, сконфигурированный для восстановления опорного кадра из кодированного потока двоичных сигналов видео. Видеодекодер содержит буфер, сконфигурированный для хранения блока предсказания, полученного из восстановленного опорного кадра. Видеодекодер содержит адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
В силу этого преимущества, полученные по отношению к видеокодеру в соответствии с первым аспектом, также задаются по отношению к видеодекодеру в соответствии с третьим аспектом.
В одном виде реализации видеодекодера в соответствии с третьим аспектом видеодекодер подходит для декодирования кодированного потока двоичных сигналов видео, полученного путем межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения. Исходный кадр является кадром слоя улучшения. Опорный кадр является кадром восстановленного базового слоя. Видеодекодер содержит фильтр повышающей дискретизации, сконфигурированный для повышения дискретизации восстановленного опорного кадра, при этом блок предсказания является блоком опорного кадра с повышенной дискретизацией.
В одном виде реализации видеодекодера в соответствии с третьим аспектом видеодекодер подходит для декодирования кодированного потока двоичных сигналов видео, полученного путем межкадрового кодирования с предсказанием видеоконтента, содержащего последующие кадры. Исходный кадр является одним из последующих кадров. Опорный кадр является одним из восстановленных последующих кадров. Видеодекодер содержит буфер, сконфигурированный для хранения опорного блока извлеченного опорного кадра. Видеодекодер содержит узел декодирования, сконфигурированный для извлечения вектора движения, отражающего движение между опорным блоком и исходным блоком, из кодированного потока двоичных сигналов видео. Видеодекодер содержит узел компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения.
В одном виде реализации видеодекодера в соответствии с третьим аспектом видеодекодер содержит узел декодирования, сконфигурированный для извлечения из кодированного потока двоичных сигналов видео информации о фильтре увеличения резкости, отражающей по меньшей мере одно из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости к блоку предсказания. Видеодекодер содержит узел управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода и выборочного применения в зависимости от извлеченной информации о фильтре увеличения резкости. В силу этого можно обеспечить, что видеокодер и видеодекодер осуществляют одинаковое предсказание.
В одном виде реализации видеодекодера в соответствии с третьим аспектом узел декодирования конфигурируется для декодирования информации о фильтре увеличения резкости в соответствии с контекстно-адаптивным двоичным арифметическим кодированием, CABAC. Видеодекодер содержит узел оценки интенсивности контуров, сконфигурированный для оценки интенсивности контуров в блоке предсказания или опорном блоке опорного кадра. Видеодекодер содержит переключатель контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров.
В одном виде реализации видеодекодера в соответствии с третьим аспектом адаптивный фильтр увеличения резкости конфигурируется для управления им с помощью по меньшей мере одного адаптивного параметра. Видеодекодер содержит узел декодирования, сконфигурированный для извлечения информации об адаптивном параметре из кодированного потока двоичных сигналов видео касательно значения параметра у адаптивного параметра. Видеодекодер содержит узел управления, сконфигурированный для управления адаптивным фильтром увеличения резкости в соответствии с извлеченной информацией об адаптивном параметре. В силу этого можно обеспечить, что видеокодер и видеодекодер осуществляют одинаковую адаптацию фильтра увеличения резкости, и что полученное видеодекодером видео соответствует видео, кодированному видеокодером.
В одном виде реализации видеодекодера в соответствии с третьим аспектом адаптивный фильтр увеличения резкости является нелинейным фильтром, сконфигурированным для управления им с помощью единственного адаптивного параметра. В силу этого можно дополнительно уменьшить служебную нагрузку сигнализации.
В одном виде реализации видеодекодера в соответствии с третьим аспектом адаптивный фильтр увеличения резкости содержит узел вычисления карты контуров, выполненный с возможностью формирования карты контуров блока-источника, при этом упомянутый блок-источник является блоком предсказания или опорным блоком опорного кадра. Адаптивный фильтр увеличения резкости содержит фильтр размывания, выполненный с возможностью размывания карты контуров у блока-источника. Адаптивный фильтр увеличения резкости содержит фильтр верхних частот, выполненный с возможностью формирования производного вектора для каждого положения блока-источника путем фильтрации верхних частот карты нечетких контуров. Адаптивный фильтр увеличения резкости содержит узел масштабирования, выполненный с возможностью формирования вектора смещения путем масштабирования производного вектора с коэффициентом интенсивности увеличения резкости. Адаптивный фильтр увеличения резкости содержит узел деформирования, выполненный с возможностью деформации блока предсказания на основе вектора смещения. Адаптивный параметр включает в себя коэффициент интенсивности увеличения резкости. В силу этого можно уменьшить артефакты, сохраняя при этом ограниченную служебную нагрузку сигнализации.
В одном виде реализации видеодекодера в соответствии с третьим аспектом информация об адаптивном параметре и/или информация о фильтре увеличения резкости извлекается на уровне блока для каждого блока предсказания, для произвольной или постоянной области кадра, на уровне кадра, на уровне GOP (группа изображений), на уровне PPS (набор параметров изображения) или на уровне SPS (набор параметров последовательности). В силу этого можно задать информацию о фильтре увеличения резкости и/или информацию об адаптивном параметре с нужной детализацией, чтобы можно было оптимизировать сигнализацию.
Четвертый аспект настоящего изобретения предоставляет способ для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра. Способ содержит этап декодирования, содержащий восстановление опорного кадра из кодированного потока двоичных сигналов видео. Способ содержит сохранение блока предсказания, полученного из восстановленного опорного кадра. Способ содержит этап адаптивного фильтра увеличения резкости, содержащий применение пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Дополнительно признаки или реализации способа в соответствии с четвертым аспектом изобретения могут выполнять функциональные возможности видеодекодера в соответствии с третьим аспектом изобретения и его разными видами реализации.
Пятый аспект настоящего изобретения предоставляет компьютерную программу с программным кодом для выполнения такого способа кодирования и/или декодирования, когда компьютерная программа выполняется на вычислительном устройстве.
Нужно отметить, что все устройства, элементы, узлы и средства, описанные в настоящей заявке, можно было бы реализовать в элементах программного обеспечения или аппаратных средств, или в любом виде их сочетания. Все этапы, которые выполняются различными сущностями, описанными в настоящей заявке, а также описанные функциональные возможности для выполнения различными сущностями подразумевают, что соответствующая сущность приспособлена или сконфигурирована для выполнения соответствующих этапов и функциональных возможностей. Даже если в нижеследующем описании характерных вариантов осуществления определенные функциональные возможности или этап, которые должны быть полностью образованы сущностями, не отражены в описании определенного подробного элемента той сущности, которая выполняет тот определенный этап или функциональные возможности, специалисту должно быть понятно, что эти способы и функциональные возможности можно реализовать в соответствующих элементах программного обеспечения или аппаратных средств, или в любом виде их сочетания.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Вышеприведенные аспекты и виды реализации настоящего изобретения будут объясняться в нижеследующем описании характерных вариантов осуществления относительно прилагаемых чертежей, на которых
Фиг. 1 показывает общее представление видеокодера для межслойного кодирования с предсказанием в соответствии с уровнем техники,
Фиг. 2 показывает общее представление видеокодера для межслойного кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 3 показывает фильтр увеличения резкости в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 4 показывает видеокодер для межслойного кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 5 показывает видеодекодер для межслойного кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 6 показывает видеокодер для межкадрового кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 7 показывает видеодекодер для межкадрового кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения,
Фиг. 8 показывает способ кодирования видео в соответствии с вариантом осуществления настоящего изобретения, и
Фиг. 9 показывает способ декодирования видео в соответствии с вариантом осуществления настоящего изобретения.
ПОДРОБНОЕ ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ
В соответствии с общим вариантом осуществления настоящего изобретения предлагается видеокодер для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра. Видеокодер содержит буфер, сконфигурированный для хранения исходного блока, буфер, сконфигурированный для хранения блока предсказания, и адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
В частности, для кодирования с предсказанием множества исходных блоков исходного кадра в кодированный поток двоичных сигналов видео на основе, соответственно, множества блоков предсказания, полученных из опорного кадра, адаптивный фильтр увеличения резкости конфигурируется для наличия у него возможности применять разную фильтрацию увеличения резкости к каждому из множества блоков предсказания.
В соответствии с общим вариантом осуществления настоящего изобретения предлагается видеодекодер для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра. Видеодекодер содержит узел декодирования, сконфигурированный для восстановления опорного кадра из кодированного потока двоичных сигналов видео, буфер, сконфигурированный для хранения блока предсказания, полученного из восстановленного опорного кадра, и адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Аналогичным образом для декодирования с предсказанием множества исходных блоков исходного кадра на основе, соответственно, множества блоков предсказания, полученных из восстановленного опорного кадра, адаптивный фильтр увеличения резкости конфигурируется для наличия у него возможности применять разную фильтрацию увеличения резкости к каждому из множества блоков предсказания.
Фиг. 2 показывает общее представление видеокодера 200 в соответствии с вариантом осуществления настоящего изобретения. В частности, фиг. 2 показывает видеокодер 200 для межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения.
Видеокодер 200 содержит пространственный слой 202 улучшения для приема видеокадра 201 и формирования кодированного потока двоичных сигналов слоя улучшения. Кодер 200 дополнительно содержит фильтр 208 понижающей дискретизации для формирования видеокадра 211 с пониженной дискретизацией из видеокадра 201 и пространственный базовый слой 212 для приема видеокадра 211 с пониженной дискретизацией и для формирования кодированного потока двоичных сигналов базового слоя. Кодер 200 дополнительно содержит мультиплексный узел 218 для мультиплексирования кодированного потока двоичных сигналов слоя улучшения и кодированного потока двоичных сигналов базового слоя и формирования кодированного потока двоичных сигналов видео.
Пространственный базовый слой 212 содержит узел 213 временного масштабируемого кодирования, принимающий видеокадр 211 с пониженной дискретизацией, где видеокадр 211 с пониженной дискретизацией представляет меньшее разрешение, чем видеокадр 201. Выход узла 213 временного масштабируемого кодирования поступает в узел 214 предсказания, который предоставляет сигнал предсказания на основе временной масштабированной кодированной версии видеокадра 211 с пониженной дискретизацией в узел 215 кодирования базового слоя. Результат узла 215 кодирования базового слоя предоставляется в узел 216 масштабируемого кодирования SNR. Соответствующие выходы узла 215 кодирования базового слоя и узла 216 масштабируемого кодирования SNR предоставляются в мультиплексный узел 218.
Пространственный слой 202 улучшения содержит последовательные узлы, которыми являются узел 203 временного масштабируемого кодирования, принимающий видеокадр 201, узел 204 предсказания, узел 205 кодирования базового слоя и узел 206 масштабируемого кодирования SNR. Соответствующие выходы узла 205 кодирования базового слоя и узла 206 масштабируемого кодирования SNR предоставляются в мультиплексный узел 218. Мультиплексный узел 218 формирует кодированный поток двоичных сигналов видео путем мультиплексирования выхода узла 215 кодирования базового слоя, узла 216 масштабируемого кодирования SNR, узла 205 кодирования базового слоя и узла 206 масштабируемого кодирования SNR.
В соответствии с настоящим изобретением блок предсказания, сформированный фильтром 217 повышающей дискретизации, поступает в адаптивный фильтр 219 увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания. Выходом фильтра 217 повышающей дискретизации в пространственном базовом слое 212 является блок предсказания для межслойного кодирования с предсказанием видеокадра 201 в пространственном слое 202 улучшения. Блок предсказания, сформированный фильтром 217 повышающей дискретизации, а также блок предсказания с увеличенной резкостью, сформированный адаптивным фильтром 219 увеличения резкости, предпочтительно передаются в переключатель 220, который подключается к узлу 204 предсказания в пространственном слое 202 улучшения. Кодирование с предсказанием видеокадра 201 в пространственном слое 202 улучшения может выборочно основываться на выходе фильтра 217 повышающей дискретизации или на выходе адаптивного фильтра 219 увеличения резкости.
Ниже изобретение будет описываться по отношению к фиг. 4 и 5, показывающим соответственно видеокодер и декодер для межслойного кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения, и по отношению к фиг. 6 и 7, показывающим соответственно видеокодер и декодер для межкадрового кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения. Фиг. 3 показывает вариант осуществления адаптивного фильтра увеличения резкости, например, в видеокодере для межслойного кодирования с предсказанием или видеокодере для межкадрового кодирования с предсказанием из фиг. 4 и 6.
Фиг. 4 показывает видеокодер 400 в соответствии с вариантом осуществления настоящего изобретения, и в частности, видеокодер 400 для межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения.
Видеокодер 400 подходит для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра. Видеокодер 400 содержит буфер 401, сконфигурированный для хранения исходного блока, буфер 408, сконфигурированный для хранения блока предсказания, и адаптивный фильтр 409 увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Применительно к межслойному кодированию с предсказанием исходный кадр является кадром слоя улучшения, а опорный кадр является кадром восстановленного базового слоя. Видеокодер 400 дополнительно содержит фильтр 407 повышающей дискретизации, сконфигурированный для повышения дискретизации восстановленного базового слоя, то есть для повышения дискретизации опорного кадра. Блок предсказания, сохраненный в буфере 408, является блоком опорного кадра с повышенной дискретизацией.
В частности, исходный кадр является кадром слоя улучшения, который кодируется в настоящее время, и его можно получить, например, из видеокадра 201 в видеокодере 200 из фиг. 2. С другой стороны, опорный кадр является кадром базового слоя, который был кодирован и восстановлен. Восстановленный кадр базового слоя можно получить в видеокодере 200 из фиг. 2 с помощью пространственного базового слоя 212 из видеокадра 211 с пониженной дискретизацией. Ниже любую ссылку на признак "кадр" можно заменять ссылкой на признак "изображение".
Исходный блок, сохраненный в буфере 401, и блок предсказания, сохраненный в буфере 408, и в более общем смысле все блоки настоящего изобретения предпочтительно образуют соответствующую область или подобласть кадра. Например, исходный блок является областью или подобластью исходного кадра, тогда как блок предсказания является областью или подобластью опорного кадра с повышенной дискретизацией, который сформирован фильтром 407 повышающей дискретизации. Такой блок может обладать правильной формой, например прямоугольной формой, или неправильной формой. В качестве альтернативы блок может иметь такой же размер, как и кадр. Все блоки, и особенно исходный блок и блок предсказания, имеют одинаковый размер. Размер блоков может задаваться посредством информации о режиме блока, передаваемой декодеру в качестве дополнительной информации или данных сигнализации кодированного потока двоичных сигналов видео. Блок может соответствовать единице кодирования, которая является базовой структурой кодирования видеопоследовательности предопределенного размера, содержащей часть кадра, например 64×64 пикселей.
В частности, видеокодер 400 содержит дополнительные узлы для поддержки кодирования видео с предсказанием. Например, видеокодер 400 содержит узел 404 преобразования и квантования для формирования коэффициентов преобразования посредством преобразования в частотную область и квантования тех коэффициентов, а также энтропийный кодер или узел 405 энтропийного кодирования для энтропийного кодирования квантованных коэффициентов, например, вместе с данными сигнализации. Входом узла 404 преобразования и квантования является остаточный блок, который может храниться в выделенном буфере 403. Остаточный блок формируется узлом 402 вычитания и задается как разность между исходным блоком, сохраненным в буфере 401, и либо блоком предсказания, сохраненным в буфере 408, либо блоком предсказания с увеличенной резкостью, сформированным адаптивным фильтром 409 увеличения резкости.
Видеокодер 400 дополнительно содержит узел 410 управления и узел 414 кодирования. Узел 410 управления конфигурируется для управления по меньшей мере одним из выборочного обхода адаптивного фильтра 409 увеличения резкости и выборочного применения адаптивного фильтра 409 увеличения резкости. Узел 414 кодирования конфигурируется для добавления информации о фильтре увеличения резкости в кодированный поток двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода и выборочного применения адаптивного фильтра 409 увеличения резкости. Информация о фильтре увеличения резкости предпочтительно имеет вид признака применения/обхода увеличения резкости.
С помощью узла 410 управления можно выборочно обходить и/или выборочно применять адаптивный фильтр 409 увеличения резкости. Если применяется адаптивный фильтр 409 увеличения резкости, то адаптивный фильтр 409 увеличения резкости формирует блок предсказания с увеличенной резкостью, а остаточный блок получается по разности исходного блока и блока предсказания с увеличенной резкостью, который выводится адаптивным фильтром 409 увеличения резкости. Если адаптивный фильтр 409 увеличения резкости обходят, то остаточный блок получается по разности исходного блока и блока предсказания, который хранится в буфере 408.
В частности, узел 410 управления конфигурируется для управления по меньшей мере одним из выборочного обхода и выборочного применения на основе минимизации остаточного блока или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости. Стоимостной критерий может применяться, в частности, к остаточному блоку, полученному из блока предсказания с увеличенной резкостью, который выводится адаптивным фильтром 409 увеличения резкости, и к остаточному блоку, полученному из блока предсказания, сохраненного в буфере 408. В зависимости от результата функции стоимости можно либо применять, либо обходить адаптивный фильтр 409 увеличения резкости.
Решение узла 410 управления обойти или применить адаптивный фильтр 409 увеличения резкости может передаваться в виде данных сигнализации в кодированном потоке двоичных сигналов видео, сформированном узлом кодирования или узлом 405 энтропийного кодирования. Узел 410 управления передает информацию о фильтре увеличения резкости в узел 414 кодирования, который добавляет информацию о фильтре увеличения резкости в виде данных сигнализации в кодированный поток двоичных сигналов видео, сформированный узлом 405 кодирования.
В качестве альтернативы адаптивный фильтр 409 увеличения резкости может применяться всегда. Это означает, что остаточный блок всегда получается по разности исходного блока и блока предсказания с увеличенной резкостью, который выводится адаптивным фильтром 409 увеличения резкости. Очевидно, что в этом случае не требуется никакой дополнительной сигнализации о применении или обходе адаптивного фильтра увеличения резкости.
Узел 414 кодирования конфигурируется, в частности, для кодирования информации о фильтре увеличения резкости с использованием контекстно-адаптивного двоичного арифметического кодирования, CABAC. Видеокодер 400 дополнительно содержит узел 411, 412 оценки интенсивности контуров, сконфигурированный для оценивания интенсивности контуров в блоке предсказания, и переключатель 413 контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров. Например, узел 411, 412 оценки интенсивности контуров содержит первый узел 411 для построения карты контуров блока предсказания и второй узел 412 для оценивания интенсивности контуров у карты контуров.
Кроме того, адаптивный фильтр 409 увеличения резкости конфигурируется для управления им с помощью по меньшей мере одного адаптивного параметра. Узел 410 управления конфигурируется для определения значения параметра у адаптивного параметра и передачи определенного значения параметра в адаптивный фильтр 409 увеличения резкости. Видеокодер 400 также содержит узел 415 кодирования, который конфигурируется для добавления информации об адаптивном параметре в кодированный поток двоичных сигналов видео касательно определенного значения параметра у адаптивного параметра.
В частности, узел 410 управления конфигурируется для передачи разных значений параметра для адаптивного параметра и для выбора одного из разных значений параметра на основе минимизации остаточного блока или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости.
Решение о применении или обходе адаптивного фильтра 409 увеличения резкости и решение о значении адаптивного параметра в случае применения фильтра увеличения резкости сигнализируется декодеру кодированного потока двоичных сигналов видео посредством информации о фильтре увеличения резкости и информации об адаптивном параметре. Эта сигнализация может выполняться для разных частей видеоконтента. Таким образом, информация об адаптивном параметре и/или информация о фильтре увеличения резкости может добавляться на уровне блока для каждого блока предсказания, для произвольной или постоянной области кадра, на уровне кадра, на уровне GOP (группа изображений), на уровне PPS (набор параметров изображения) или на уровне SPS (набор параметров последовательности). Детализация информации об адаптивном параметре и/или информации о фильтре увеличения резкости может меняться.
Вариант осуществления адаптивного фильтра 409 увеличения резкости показан на фиг. 3. Показанный на фиг. 3 адаптивный фильтр 300 увеличения резкости предпочтительно является нелинейным фильтром. Использование нелинейного фильтра увеличения резкости вместо линейного фильтра предпочтительно для удаления артефактов, вызванных фильтром передискретизации и квантованием опорного кадра. Выбор нелинейного фильтра может уменьшить количество адаптивных параметров у адаптивного фильтра 300 увеличения резкости. В частности, нелинейный фильтр может использовать только один адаптивный параметр, чтобы сократить служебную нагрузку сигнализации у кодированного потока двоичных сигналов видео. Хотя настоящее изобретение также охватывает использование более одного адаптивного параметра для управления адаптивным фильтром увеличения резкости, особенно преимущественным вариантом осуществления является адаптивный фильтр увеличения резкости, использующий только один адаптивный параметр.
В частности, адаптивный фильтр 300 увеличения резкости содержит узел 301, 302 вычисления карты контуров, фильтр 304 размывания, фильтр 305 верхних частот, узел 306 масштабирования и узел 307 деформирования.
Узел 301, 302 вычисления карты контуров приспособлен для формирования карты контуров блока-источника, при этом упомянутый блок-источник является блоком предсказания, сохраненным в буфере 408, и на фиг. 3 называется блоком базового слоя с повышенной дискретизацией. Фильтр 304 размывания приспособлен для размывания карты контуров блока-источника. Фильтр 305 верхних частот приспособлен для формирования производного вектора (d2x, d2y) для каждого положения блока-источника путем фильтрации верхних частот карты нечетких контуров. Узел 306 масштабирования приспособлен для формирования вектора смещения (wx, wy) путем масштабирования производного вектора (d2x, d2y) с коэффициентом k интенсивности увеличения резкости. Узел 307 деформирования приспособлен для деформации блока предсказания на основе вектора смещения (wx, wy).
В силу этого адаптивным параметром, управляющим адаптивным фильтром 300 увеличения резкости, является коэффициент k интенсивности увеличения резкости. Показанный на фиг. 3 адаптивный фильтр 300 увеличения резкости является вариантом осуществления настоящего изобретения только с одним адаптивным параметром.
Узел 301, 302 вычисления карты контуров может содержать узел 301 градиентного вектора, выполненный с возможностью формирования градиентного вектора (dx, dy) для каждого положения блока-источника, и узел 302 длины градиентного вектора, выполненный с возможностью вычисления длины градиентного вектора (dx, dy) в каждом положении, чтобы сформировать карту контуров блока-источника. В силу этого данная структура предусматривает формирование карты контуров, которая может дополнительно обрабатываться фильтром размывания, фильтром верхних частот и узлом масштабирования, чтобы сформировать деформирующий вектор смещения.
Градиентный вектор можно получить путем взятия первой производной отдельно для dx и dy, то есть отдельно для горизонтального и вертикального направления блока-источника, путем применения соответствующего фильтр Прюитта в соответствии со следующими уравнениями:
Карту контуров можно получить с помощью узла 302 длины градиентного вектора путем вычисления длины градиентного вектора в соответствии со следующим уравнением:
Фильтр 300 увеличения резкости преимущественно содержит узел 303 отсечения, выполненный с возможностью отсечения карты контуров блока-источника, при этом упомянутый узел 303 отсечения располагается между узлом 301, 302 вычисления карты контуров и фильтром 304 размывания. В силу этого отсечение карты контуров по пороговым величинам полезно в том, что оно предотвращает обработку очень больших и малых значений деформирующих векторов.
Этап размывания усеченной карты контуров можно получить с помощью фильтра 304 размывания в виде фильтра Гаусса, который можно задать следующим образом:
Фильтр верхних частот используется для получения второй производной отдельно для d2x и d2y, например, в соответствии со следующим:
Вектор смещения (wx, wy) получается путем масштабирования вектора второй производной (d2x, d2y) с коэффициентом k, где коэффициент k можно рассматривать как интенсивность увеличения резкости, в соответствии со следующими уравнениями:
Узел 307 деформирования включает в себя интерполирующий фильтр, который является, например, билинейным интерполирующим фильтром. Узел 307 деформирования использует вектор смещения, сформированный узлом 306 масштабирования.
Узел 308 вычитания приспособлен для создания разности между блоком предсказания с увеличенной резкостью, сформированным узлом 307 деформирования, и исходным блоком, сохраненным в буфере 401, при этом упомянутый исходный блок соответствует блоку, который нужно кодировать. Узел 308 вычитания фактически формирует остаточный блок. Адаптивный фильтр 300 увеличения резкости или узел 410 управления, управляющий адаптивным фильтром 300 увеличения резкости, приспособлен для отыскания оптимальной интенсивности k увеличения резкости, например, путем минимизации остаточного блока или по стоимостному критерию, например, на основе искажения в зависимости от скорости.
Возвращаясь к фиг. 4, видеокодер 400 конфигурируется для выбора во время оптимизации наиболее оптимального адаптивного параметра у адаптивного фильтра 409 увеличения резкости, и решение о применении или обходе адаптивного фильтра увеличения резкости для межслойного предсказания могло бы приниматься по минимальной ошибке предсказания или по стоимостному (скорость/искажение) критерию.
Видеокодер 400 представляет, в частности, процесс обработки, который может выглядеть следующим образом:
- Блок предсказания получается путем восстановления и повышающей дискретизации кадра базового слоя.
- Карта контуров блока предсказания формируется, например, узлом 301, 302 вычисления карты контуров в адаптивном фильтре увеличения резкости. В качестве альтернативы карта контуров может формироваться узлом 411 в узле 411, 412 оценки интенсивности контуров, при этом упомянутый узел 411 располагается вне адаптивного фильтра 409 увеличения резкости.
- Выполняется адаптация фильтра увеличения резкости, то есть выбор адаптивного параметра. Сформированная карта контуров могла бы использоваться преимущественно для адаптации фильтрации.
- Принимается решение, например, узлом 410 управления, о типе предсказания, при этом тип предсказания состоит в применении или обходе адаптивного фильтра 409 увеличения резкости. Решение может основываться на показателе качества предсказания, например минимальной остаточной ошибке, или на стоимостном критерии, например, стоимостном критерии на основе скорости/искажения.
- Уже сформированная карта контуров используется для оценивания интенсивности контуров в блоке предсказания. Интенсивность контуров оценивается, например, путем усреднения значений карты контуров блока предсказания.
- Оцененная интенсивность контуров используется в качестве переключения контекста для CABAC, а тип предсказания, состоящий в применении или обходе адаптивного фильтра 409 увеличения резкости, кодируется в виде информации о фильтре увеличения резкости. Другими словами, тип предсказания сжимается с использованием CABAC при переключении контекста, управляемом интенсивностью контуров. Переключение контекста может выполняться путем сравнения оцененной интенсивности контуров с заданной пороговой величиной. Если оцененная интенсивность контуров больше пороговой величины, то используется первый контекст. Если оцененная интенсивность контуров меньше пороговой величины, то используется второй контекст. В преимущественных вариантах осуществления может использоваться более двух уровней интенсивности контуров и больше соответствующих контекстов CABAC.
- Если применяется адаптивный фильтр 409 увеличения резкости, то интенсивность увеличения резкости кодируется в виде информации об адаптивном параметре.
- Коэффициенты вычисляются для остаточного блока с помощью узла 404 преобразования и квантования, и эти коэффициенты кодируются узлом 405 кодирования.
Фиг. 5 показывает видеодекодер в соответствии с вариантом осуществления настоящего изобретения, в частности, видеодекодер 500 для межслойного декодирования с предсказанием.
Видеодекодер 500 подходит для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра. Видеодекодер 500 содержит узел декодирования, сконфигурированный для восстановления опорного кадра из кодированного потока двоичных сигналов видео, буфер 514, сконфигурированный для хранения блока предсказания, полученного из восстановленного опорного кадра, и адаптивный фильтр 507 увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Применительно к межслойному декодированию с предсказанием исходный кадр является кадром слоя улучшения, а опорный кадр является кадром восстановленного базового слоя. Видеодекодер 500 дополнительно содержит фильтр 513 повышающей дискретизации, сконфигурированный для повышения дискретизации восстановленного базового слоя, то есть для повышения дискретизации опорного кадра. Блок предсказания, сохраненный в буфере 514, является блоком опорного кадра с повышенной дискретизацией.
Видеодекодер 500 дополнительно содержит узел 512 декодирования, сконфигурированный для извлечения информации о фильтре увеличения резкости из кодированного потока двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода адаптивного фильтра 507 увеличения резкости и выборочного применения адаптивного фильтра 507 увеличения резкости. Видеодекодер 500 содержит узел 508 управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода и выборочного применения в зависимости от извлеченной информации о фильтре увеличения резкости. Информация о фильтре увеличения резкости может иметь вид признака применения/обхода увеличения резкости. В качестве альтернативы адаптивный фильтр 507 увеличения резкости может применяться всегда.
В частности, узел 512 декодирования конфигурируется для декодирования информации о фильтре увеличения резкости в соответствии с CABAC. Видеодекодер содержит узел 510, 511 оценки интенсивности контуров, сконфигурированный для оценивания интенсивности контуров в блоке предсказания. Видеодекодер содержит переключатель 509 контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров. В частности, узел 510, 511 оценки интенсивности контуров может содержать первый узел 511 для построения карты контуров блока предсказания и второй узел 510 для оценивания интенсивности контуров на основе карты контуров.
Адаптивный фильтр 507 увеличения резкости конфигурируется, в частности, для управления им с помощью по меньшей мере одного адаптивного параметра. Видеодекодер дополнительно содержит узел 506 декодирования, сконфигурированный для извлечения информации об адаптивном параметре касательно значения параметра адаптивного параметра из кодированного потока двоичных сигналов видео, и в частности, из кодированного потока двоичных сигналов слоя улучшения. Узел 508 управления конфигурируется для управления адаптивным фильтром 507 увеличения резкости в соответствии с извлеченной информацией об адаптивном параметре.
Адаптивный фильтр 507 увеличения резкости в видеодекодере 500 предпочтительно представляет собой такую же структуру и такие же узлы, как показанный на фиг. 3 адаптивный фильтр 300 увеличения резкости, со следующими отличиями. Отличие между двумя этими фильтрами состоит в том, что адаптивный фильтр 507 увеличения резкости предпочтительно не содержит узел 308 вычитания. Кроме того, в видеодекодере 500 адаптивный параметр, то есть коэффициент k, не задается посредством узла 308 вычитания и минимизации остаточного блока. Вместо этого адаптивный параметр устанавливается в видеодекодере 500 предпочтительно в зависимости от информации об адаптивном параметре, извлеченной в виде данных сигнализации из кодированного потока двоичных сигналов.
Видеодекодер 500 может содержать дополнительные узлы, которыми являются узел 501 декодирования для декодирования принятого кодированного потока двоичных сигналов слоя улучшения и, соответственно, для получения квантованных остаточных коэффициентов преобразования. Квантованные остаточные коэффициенты преобразования поступают в узел 502 обратного квантования и обратного преобразования, чтобы сформировать остаточный блок, сохраняемый в буфере 503. Остаточный блок добавляется сумматором 504 к выходу управляющего узла 508. Затем в зависимости от извлеченной информации о фильтре увеличения резкости остаточный блок добавляется к блоку предсказания, сохраненному в буфере 514, или к блоку предсказания с увеличенной резкостью, выведенному адаптивным фильтром 507 увеличения резкости. Тогда выходом сумматора 504 является восстановленный блок слоя улучшения.
Видеодекодер 500 представляет, в частности, процесс обработки, который может выглядеть следующим образом:
- Блок предсказания получается путем восстановления и повышающей дискретизации кадра базового слоя.
- Карта контуров блока предсказания формируется, например, узлом 301, 302 вычисления карты контуров в адаптивном фильтре увеличения резкости. В качестве альтернативы карта контуров может формироваться узлом 511 в узле 511, 512 оценки интенсивности контуров, при этом упомянутый узел 511 располагается вне адаптивного фильтра 509 увеличения резкости.
- Сформированная карта контуров используется для оценивания интенсивности контуров в блоке предсказания. Интенсивность контуров оценивается, например, путем усреднения значений карты контуров блока предсказания.
- Оцененная интенсивность контуров используется в качестве переключения контекста для CABAC, и декодируется тип предсказания, состоящий в применении или обходе адаптивного фильтра 507 увеличения резкости, то есть информация о фильтре увеличения резкости. Переключение контекста может выполняться путем сравнения оцененной интенсивности контуров с заданной пороговой величиной. Если оцененная интенсивность контуров больше пороговой величины, то используется первый контекст. Если оцененная интенсивность контуров меньше пороговой величины, то используется второй контекст. В преимущественных вариантах осуществления может использоваться более двух уровней интенсивности контуров и больше соответствующих контекстов CABAC.
- Если на основе информации о фильтре увеличения резкости определяется, что применяется адаптивный фильтр 507 увеличения резкости, то декодируется интенсивность увеличения резкости, то есть информация об адаптивном параметре. Адаптивный фильтр 507 увеличения резкости применяется с декодированной интенсивностью увеличения резкости. Уже сформированная карта контуров могла бы использоваться для увеличения резкости, чтобы сэкономить ресурсы.
- Остаточный блок декодируется посредством узлов 501, 502, 503. В зависимости от информации о фильтре увеличения резкости остаточный блок добавляется к блоку предсказания или к блоку предсказания с увеличенной резкостью, чтобы получить восстановленный блок слоя улучшения.
Фиг. 6 показывает видеокодер 600 для межкадрового кодирования с предсказанием в соответствии с вариантом осуществления настоящего изобретения.
Видеокодер 600 подходит для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра. Видеокодер 600 содержит буфер 601, сконфигурированный для хранения исходного блока, буфер 608, сконфигурированный для хранения блока предсказания, и адаптивный фильтр 609 увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Применительно к межкадровому кодированию с предсказанием видеоконтента, содержащего последующие кадры, исходный кадр является одним из последующих кадров, а опорный кадр является одним из восстановленных последующих кадров. Видеокодер 600 содержит буфер 606, сконфигурированный для хранения опорного блока опорного кадра. Видеокодер 600 содержит узел 616 оценки движения, сконфигурированный для получения вектора движения, отражающего движение между опорным блоком и исходным блоком, и узел 607 компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения.
Остальная структура и узлы видеокодера 600 аналогичны структуре и узлам видеокодера 400. Видеокодер 600 содержит узел 610 управления, аналогичный узлу 410 управления. Видеокодер 600 содержит узел 614 кодирования, аналогичный узлу 414 кодирования. Видеокодер 600 содержит узел 611, 612 оценки интенсивности контуров, аналогичный узлу 411, 412 оценки интенсивности контуров, и переключатель 613 контекста CABAC, аналогичный переключателю 413 контекста CABAC. Видеокодер 600 содержит узел 615 кодирования, аналогичный узлу 415 кодирования. Аналогичным образом видеокодер также содержит узел 602 вычитания для формирования остаточного блока, буфер 603 для остаточного блока, узел 604 преобразования и квантования и узел 605 кодирования для кодирования квантованных коэффициентов.
Отличие между видеокодером 600 и видеокодером 400 состоит в том, что в качестве опорного кадра используется ранее кодированный кадр вместо кадра базового слоя с повышенной дискретизацией. Кроме того, для получения блока предсказания применяется компенсация движения. Компенсация движения преимущественно содержит интерполяцию движения.
В отличие от структуры видеокодера 400 узел 611, 612 оценки интенсивности контуров может оценивать интенсивность контуров опорного блока вместо оценки интенсивности контуров блока предсказания.
Также адаптивный фильтр увеличения резкости из фиг. 3 может использоваться в качестве адаптивного фильтра 609 увеличения резкости в видеокодере 600. Хотя узел 301, 302 вычисления карты контуров в видеокодере 400 приспособлен для формирования карты контуров блока-источника, являющегося блоком предсказания, блок-источник адаптивного фильтра увеличения резкости в видеокодере 600 может быть либо блоком предсказания, либо, в качестве альтернативы, опорным блоком. В соответствии с этой альтернативой вектор смещения (wx, wy) выводится из опорного блока, а затем деформирование применяется к блоку предсказания с использованием полученного вектора смещения, что полезно в том, что экономит вычислительные ресурсы на стороне кодера.
Кроме этих отличий и альтернатив между видеокодером 400 и 600, описанные выше дополнительные аспекты со ссылкой на видеокодер 400 также применяются к видеокодеру 600.
Видеокодер 600 представляет, в частности, процесс обработки, который может выглядеть следующим образом:
- Вектор движения получается с помощью процедуры оценки движения.
- Формируется карта контуров опорного блока.
- Выполняется адаптация фильтра увеличения резкости, то есть выбор адаптивного параметра. Сформированная карта контуров могла бы использоваться преимущественно для фильтрации.
- Принимается решение, например, узлом 610 управления, о типе предсказания, при этом тип предсказания состоит в применении или обходе адаптивного фильтра 609 увеличения резкости. Решение может основываться на показателе качества предсказания, например минимальной остаточной ошибке, или на стоимостном критерии, например, стоимостном критерии на основе скорости/искажения.
- Уже сформированная карта контуров используется для оценивания интенсивности контуров у опорного блока. Интенсивность контуров оценивается, например, путем усреднения значений карты контуров опорного блока.
- Оцененная интенсивность контуров используется в качестве переключения контекста для CABAC, а тип предсказания, состоящий в применении или обходе адаптивного фильтра 609 увеличения резкости, кодируется в виде информации о фильтре увеличения резкости. Переключение контекста может выполняться путем сравнения оцененной интенсивности контуров с заданной пороговой величиной. Если оцененная интенсивность контуров больше пороговой величины, то используется первый контекст. Если оцененная интенсивность контуров меньше пороговой величины, то используется второй контекст. В преимущественных вариантах осуществления может использоваться более двух уровней интенсивности контуров и больше соответствующих контекстов CABAC.
- Если применяется адаптивный фильтр 609 увеличения резкости, то интенсивность увеличения резкости кодируется в виде информации об адаптивном параметре.
- Коэффициенты вычисляются для остаточного блока с помощью узла 604 преобразования и квантования, и эти коэффициенты кодируются узлом 605 кодирования.
Фиг. 7 показывает видеодекодер в соответствии с вариантом осуществления настоящего изобретения, в частности, видеодекодер 700 для межкадрового декодирования с предсказанием.
Видеодекодер 700 подходит для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра. Видеодекодер 700 содержит узел декодирования, сконфигурированный для восстановления опорного кадра из кодированного потока двоичных сигналов видео, буфер 714, сконфигурированный для хранения блока предсказания, полученного из восстановленного опорного кадра, и адаптивный фильтр 707 увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Применительно к декодированию кодированного потока двоичных сигналов видео, полученного путем межкадрового кодирования с предсказанием видеоконтента, содержащего последующие кадры, исходный кадр является одним из последующих кадров, а опорный кадр является одним из восстановленных последующих кадров. Видеодекодер 700 содержит буфер 715, сконфигурированный для хранения опорного блока извлеченного опорного кадра, узел 716 декодирования, сконфигурированный для извлечения из кодированного потока двоичных сигналов видео вектора движения, отражающего движение между опорным блоком и исходным блоком, и узел 713 компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения.
Видеодекодер 700 дополнительно содержит узел 712 декодирования, сконфигурированный для извлечения информации о фильтре увеличения резкости из кодированного потока двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода адаптивного фильтра 707 увеличения резкости и выборочного применения адаптивного фильтра 707 увеличения резкости. Видеодекодер 700 содержит узел 708 управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода и выборочного применения в зависимости от извлеченной информации о фильтре увеличения резкости. Информация о фильтре увеличения резкости может иметь вид признака применения/обхода увеличения резкости. В качестве альтернативы адаптивный фильтр 707 увеличения резкости может применяться всегда.
В частности, узел 712 декодирования конфигурируется для декодирования информации о фильтре увеличения резкости в соответствии с CABAC. Видеодекодер содержит узел 710 оценки интенсивности контуров, сконфигурированный для оценивания интенсивности контуров на основе карты контуров, вычисленной узлом 711, используя опорный блок, сохраненный в буфере 715. Видеодекодер содержит переключатель 709 контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров. В частности, узел 710, 711 оценки интенсивности контуров может содержать первый узел 711 для построения карты контуров опорного блока и второй узел 710 для оценивания интенсивности контуров на основе карты контуров.
Адаптивный фильтр 707 увеличения резкости конфигурируется, в частности, для управления им с помощью по меньшей мере одного адаптивного параметра. Видеодекодер дополнительно содержит узел 706 декодирования, сконфигурированный для извлечения информации об адаптивном параметре из кодированного потока двоичных сигналов видео касательно значения параметра у адаптивного параметра. Узел 708 управления конфигурируется для управления адаптивным фильтром 707 увеличения резкости в соответствии с извлеченной информацией об адаптивном параметре.
Адаптивный фильтр 707 увеличения резкости в видеодекодере 700 предпочтительно представляет собой такую же структуру, как и адаптивный фильтр 609 увеличения резкости в видеокодере 600, со следующими отличиями. Отличие между двумя этими фильтрами состоит в том, что адаптивный фильтр 707 увеличения резкости предпочтительно не содержит узел 308 вычитания. Кроме того, в видеодекодере 700 адаптивный параметр, то есть коэффициент k, не задается посредством узла 708 вычитания и минимизации остаточного блока. Вместо этого адаптивный параметр устанавливается в видеодекодере 700 предпочтительно в зависимости от информации об адаптивном параметре, извлеченной в виде данных сигнализации из кодированного потока двоичных сигналов.
Видеодекодер 700 может содержать дополнительные узлы, которыми являются узел 701 декодирования для декодирования принятого кодированного потока двоичных сигналов и, соответственно, для получения квантованных остаточных коэффициентов преобразования. Квантованные остаточные коэффициенты преобразования поступают в узел 702 обратного квантования и обратного преобразования, чтобы сформировать остаточный блок, сохраняемый в буфере 703. Остаточный блок добавляется сумматором 704 к выходу управляющего узла 708. Затем в зависимости от извлеченной информации о фильтре увеличения резкости остаточный блок добавляется к блоку предсказания, сохраненному в буфере 714, или к блоку предсказания с увеличенной резкостью, выведенному адаптивным фильтром 707 увеличения резкости. Тогда выходом сумматора 704 является восстановленный блок заданного кадра.
Видеодекодер 700 представляет, в частности, процесс обработки, который может выглядеть следующим образом:
- Вектор движения получается в виде данных сигнализации из кодированного потока двоичных сигналов видео.
- Карта контуров формируется из опорного блока.
- Сформированная карта контуров используется для оценивания интенсивности контуров у опорного блока. Интенсивность контуров оценивается, например, путем усреднения значений карты контуров.
- Оцененная интенсивность контуров используется в качестве переключения контекста для CABAC, и декодируется тип предсказания, состоящий в применении или обходе адаптивного фильтра 707 увеличения резкости, то есть информация о фильтре увеличения резкости. Переключение контекста может выполняться путем сравнения оцененной интенсивности контуров с заданной пороговой величиной. Если оцененная интенсивность контуров больше пороговой величины, то используется первый контекст. Если оцененная интенсивность контуров меньше пороговой величины, то используется второй контекст. В преимущественных вариантах осуществления может использоваться более двух уровней интенсивности контуров и больше соответствующих контекстов CABAC.
- Если на основе информации о фильтре увеличения резкости определяется, что применяется адаптивный фильтр 707 увеличения резкости, то декодируется интенсивность увеличения резкости, то есть информация об адаптивном параметре. Адаптивный фильтр 707 увеличения резкости применяется с декодированной интенсивностью увеличения резкости. Уже сформированная карта контуров могла бы использоваться для увеличения резкости, чтобы сэкономить ресурсы.
- Остаточный блок декодируется посредством узлов 701, 702, 703. В зависимости от информации о фильтре увеличения резкости остаточный блок добавляется к блоку предсказания или к блоку предсказания с увеличенной резкостью, чтобы получить восстановленный блок заданного кадра.
Фиг. 8 показывает способ кодирования видео в соответствии с вариантом осуществления настоящего изобретения.
Способом кодирования видео является способ 800 для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра.
Способ содержит сохранение 801 исходного блока.
Способ содержит сохранение 802 блока предсказания.
Способ содержит этап 803 адаптивного фильтра увеличения резкости, содержащий применение пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Фиг. 9 показывает способ декодирования видео в соответствии с вариантом осуществления настоящего изобретения.
Способом кодирования видео является способ 900 для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра.
Способ содержит этап 901 декодирования, содержащий восстановление опорного кадра из кодированного потока двоичных сигналов видео.
Способ содержит этап 902 сохранения блока предсказания, полученного из восстановленного опорного кадра.
Способ содержит этап 903 адаптивного фильтра увеличения резкости, содержащий применение пространственной адаптивной фильтрации увеличения резкости к блоку предсказания.
Настоящее изобретение описано в сочетании с различными вариантами осуществления в качестве примеров, а также реализаций. Однако специалисты в данной области техники, путем применения на практике заявленного изобретения и из изучения чертежей, данного раскрытия изобретения и независимых пунктов формулы изобретения, могут представить и осуществить другие изменения. В формуле изобретения, а также в описании слово "содержащий" не исключает других элементов или этапов, а форма единственного числа не исключает множества. Один элемент или другой узел может выполнять функции нескольких сущностей или элементов, перечисленных в формуле изобретения. Сам факт, что некоторые критерии перечисляются во взаимно разных зависимых пунктах формулы изобретения, не указывает на то, что сочетание этих критериев нельзя использовать в полезной реализации.
Claims (67)
1. Видеокодер для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра, содержащий:
буфер, сконфигурированный для хранения исходного блока,
буфер, сконфигурированный для хранения блока предсказания,
адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания,
узел управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости, и
узел кодирования, сконфигурированный для добавления информации о фильтре увеличения резкости в кодированный поток двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода и выборочного применения адаптивного фильтра увеличения резкости,
причем узел кодирования конфигурируется для кодирования информации о фильтре увеличения резкости с использованием контекстно-адаптивного двоичного арифметического кодирования, CABAC,
причем видеокодер дополнительно содержит:
узел оценки интенсивности контуров, сконфигурированный для оценивания интенсивности контуров в блоке предсказания или опорном блоке опорного кадра,
переключатель контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров.
2. Видеокодер по п. 1, в котором для кодирования с предсказанием множества исходных блоков исходного кадра в кодированный поток двоичных сигналов видео на основе соответственно множества блоков предсказания, полученных из опорного кадра, адаптивный фильтр увеличения резкости конфигурируется для применения адаптивного фильтра увеличения резкости для каждого из множества блоков предсказания на основе адаптивных параметров.
3. Видеокодер по п. 1 или 2 для межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения, причем исходный кадр является кадром слоя улучшения, и опорный кадр является кадром восстановленного базового слоя, причем видеокодер содержит фильтр повышающей дискретизации, сконфигурированный для повышения дискретизации опорного кадра, при этом блок предсказания является блоком опорного кадра с повышенной дискретизацией.
4. Видеокодер по п. 1 или 2 для межкадрового кодирования с предсказанием видеоконтента, содержащего последующие кадры, причем исходный кадр является одним из последующих кадров, и опорный кадр является одним из восстановленных последующих кадров, причем видеокодер содержит: буфер, сконфигурированный для хранения опорного блока опорного кадра, узел оценки движения, сконфигурированный для получения вектора движения, отражающего движение между опорным блоком и исходным блоком, и узел компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения.
5. Видеокодер по п. 1, в котором узел управления конфигурируется для управления по меньшей мере одним из выборочного обхода и выборочного применения на основе минимизации остаточного блока, при этом упомянутый остаточный блок является разностью между исходным блоком и блоком предсказания, или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости.
6. Видеокодер по п. 1, в котором адаптивный фильтр увеличения резкости конфигурируется для управления им с помощью по меньшей мере одного адаптивного параметра, и причем видеокодер содержит: узел управления, сконфигурированный для определения значения параметра у адаптивного параметра и передачи определенного значения параметра в адаптивный фильтр увеличения резкости, и узел кодирования, сконфигурированный для добавления информации об адаптивном параметре в кодированный поток двоичных сигналов видео касательно определенного значения параметра у адаптивного параметра.
7. Видеокодер по п. 6, в котором узел управления конфигурируется для передачи разных значений параметра для адаптивного параметра и для выбора одного из разных значений параметра на основе минимизации остаточного блока, при этом упомянутый остаточный блок является разностью между исходным блоком и блоком предсказания, или на основе стоимостного критерия, например, оптимизации искажения в зависимости от скорости.
8. Видеокодер по любому из пп. 6-7, в котором адаптивный фильтр увеличения резкости является нелинейным фильтром, сконфигурированным для управления им с помощью единственного адаптивного параметра.
9. Видеокодер по п. 6, в котором адаптивный фильтр увеличения резкости содержит:
узел вычисления карты контуров, выполненный с возможностью формирования карты контуров блока-источника, при этом упомянутый блок-источник является блоком предсказания или опорным блоком опорного кадра,
фильтр размывания, выполненный с возможностью размывания карты контуров блока-источника,
фильтр верхних частот, выполненный с возможностью формирования производного вектора для каждого положения блока-источника путем фильтрации верхних частот карты нечетких контуров,
узел масштабирования, выполненный с возможностью формирования вектора смещения путем масштабирования производного вектора с коэффициентом интенсивности увеличения резкости, и
узел деформирования, выполненный с возможностью деформации блока предсказания на основе вектора смещения,
причем адаптивный параметр включает в себя коэффициент интенсивности увеличения резкости.
10. Видеокодер по п. 1, в котором информация об адаптивном параметре и/или информация о фильтре увеличения резкости добавляется на уровне блока для каждого блока предсказания, для произвольной или постоянной области кадра, на уровне кадра, на уровне GOP (группа изображений), на уровне PPS (набор параметров изображения) или на уровне SPS (набор параметров последовательности).
11. Способ для кодирования с предсказанием исходного блока исходного кадра в кодированный поток двоичных сигналов видео на основе блока предсказания, полученного из опорного кадра, содержащий этапы, на которых
сохраняют исходный блок,
сохраняют блок предсказания,
применяют пространственную адаптивную фильтрацию увеличения резкости к блоку предсказания на этапе адаптивного фильтра увеличения резкости,
управляют по меньшей мере одним из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости,
добавляют информацию о фильтре увеличения резкости в кодированный поток двоичных сигналов видео, отражающую по меньшей мере одно из выборочного обхода и выборочного применения адаптивного фильтра увеличения резкости, причем информация о фильтре увеличения резкости кодируется с использованием контекстно-адаптивного двоичного арифметического кодирования, CABAC,
оценивают интенсивность контуров в блоке предсказания или опорном блоке опорного кадра, и
выбирают контекст CABAC в зависимости от оцененной интенсивности контуров.
12. Видеодекодер для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра,
содержащий:
узел декодирования, сконфигурированный для восстановления опорного кадра из кодированного потока двоичных сигналов видео,
буфер, сконфигурированный для хранения блока предсказания, полученного из восстановленного опорного кадра,
адаптивный фильтр увеличения резкости, сконфигурированный для применения пространственной адаптивной фильтрации увеличения резкости к блоку предсказания,
узел декодирования, сконфигурированный для извлечения информации о фильтре увеличения резкости из кодированного потока двоичных сигналов видео, отражающей по меньшей мере одно из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости, и
узел управления, сконфигурированный для управления по меньшей мере одним из выборочного обхода и выборочного применения в зависимости от извлеченной информации о фильтре увеличения резкости,
причем узел декодирования конфигурируется для декодирования информации о фильтре увеличения резкости в соответствии с контекстно-адаптивным двоичным арифметическим кодированием, CABAC,
причем видеодекодер дополнительно содержит:
узел оценки интенсивности контуров, сконфигурированный для оценивания интенсивности контуров в блоке предсказания или опорном блоке опорного кадра,
переключатель контекста CABAC, сконфигурированный для выбора контекста CABAC в зависимости от оцененной интенсивности контуров.
13. Видеодекодер по п. 12 для декодирования кодированного потока двоичных сигналов видео, полученного путем межслойного кодирования с предсказанием масштабируемого видеоконтента, содержащего базовый слой и по меньшей мере один слой улучшения, причем исходный кадр является кадром слоя улучшения, и опорный кадр является кадром восстановленного базового слоя, причем видеодекодер содержит: фильтр повышающей дискретизации, сконфигурированный для повышения дискретизации восстановленного опорного кадра, при этом блок предсказания является блоком опорного кадра с повышенной дискретизацией.
14. Видеодекодер по п. 12 для декодирования кодированного потока двоичных сигналов видео, полученного путем межкадрового кодирования с предсказанием видеоконтента, содержащего последующие кадры, причем исходный кадр является одним из последующих кадров, и опорный кадр является одним из восстановленных последующих кадров, причем видеодекодер содержит: буфер, сконфигурированный для хранения опорного блока извлеченного опорного кадра, узел декодирования, сконфигурированный для извлечения вектора движения, отражающего движение между опорным блоком и исходным блоком, из кодированного потока двоичных сигналов видео, и узел компенсации движения, сконфигурированный для формирования блока предсказания из опорного блока на основе вектора движения.
15. Видеодекодер по п. 12, в котором адаптивный фильтр увеличения резкости конфигурируется для управления им с помощью по меньшей мере одного адаптивного параметра, и причем видеодекодер содержит: узел декодирования, сконфигурированный для извлечения информации об адаптивном параметре из кодированного потока двоичных сигналов видео касательно значения параметра у адаптивного параметра, и узел управления, сконфигурированный для управления адаптивным фильтром увеличения резкости в соответствии с извлеченной информацией об адаптивном параметре.
16. Видеодекодер по п. 15, в котором адаптивный фильтр увеличения резкости является нелинейным фильтром, сконфигурированным для управления им с помощью единственного адаптивного параметра.
17. Видеодекодер по п. 15, в котором адаптивный фильтр увеличения резкости содержит:
узел вычисления карты контуров, выполненный с возможностью формирования карты контуров блока-источника, при этом упомянутый блок-источник является блоком предсказания или опорным блоком опорного кадра,
фильтр размывания, выполненный с возможностью размывания карты контуров блока-источника,
фильтр верхних частот, выполненный с возможностью формирования производного вектора для каждого положения блока-источника путем фильтрации верхних частот карты нечетких контуров,
узел масштабирования, выполненный с возможностью формирования вектора смещения путем масштабирования производного вектора с коэффициентом интенсивности увеличения резкости, и
узел деформирования, выполненный с возможностью деформации блока предсказания на основе вектора смещения,
причем адаптивный параметр включает в себя коэффициент интенсивности увеличения резкости.
18. Видеодекодер по п. 12, в котором информация об адаптивном параметре и/или информация о фильтре увеличения резкости извлекается на уровне блока для каждого блока предсказания, для произвольной или постоянной области кадра, на уровне кадра, на уровне GOP (группа изображений), на уровне PPS (набор параметров изображения) или на уровне SPS (набор параметров последовательности).
19. Способ для декодирования кодированного потока двоичных сигналов видео, полученного путем кодирования с предсказанием исходного блока исходного кадра на основе блока предсказания, полученного из восстановленного опорного кадра,
содержащий этапы, на которых:
восстанавливают опорный кадр из кодированного потока двоичных сигналов видео на этапе декодирования,
сохраняют блок предсказания, полученный из восстановленного опорного кадра,
применяют пространственную адаптивную фильтрацию увеличения резкости к блоку предсказания на этапе адаптивного фильтра увеличения резкости,
извлекают информацию о фильтре увеличения резкости из кодированного потока двоичных сигналов видео, отражающую по меньшей мере одно из выборочного обхода адаптивного фильтра увеличения резкости и выборочного применения адаптивного фильтра увеличения резкости,
управляют по меньшей мере одним из выборочного обхода и выборочного применения в зависимости от извлеченной информации о фильтре увеличения резкости, причем информация о фильтре увеличения резкости декодируется в соответствии с контекстно-адаптивным двоичным арифметическим кодированием, CABAC,
оценивают интенсивность контуров в блоке предсказания или опорном блоке опорного кадра, и
выбирают контекст CABAC в зависимости от оцененной интенсивности контуров.
20. Компьютерно-читаемый носитель информации с сохраненной на нем компьютерной программой, содержащей программный код для выполнения способа по п. 11, когда компьютерная программа выполняется на вычислительном устройстве.
21. Компьютерно-читаемый носитель информации с сохраненной на нем компьютерной программой, содержащей программный код для выполнения способа по п. 19, когда компьютерная программа выполняется на вычислительном устройстве.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/RU2015/000612 WO2017052407A1 (en) | 2015-09-25 | 2015-09-25 | Adaptive sharpening filter for predictive coding |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2696316C1 true RU2696316C1 (ru) | 2019-08-01 |
Family
ID=55754393
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2018114669A RU2696316C1 (ru) | 2015-09-25 | 2015-09-25 | Адаптивный фильтр увеличения резкости для кодирования с предсказанием |
Country Status (14)
| Country | Link |
|---|---|
| US (1) | US10863205B2 (ru) |
| EP (1) | EP3348058B1 (ru) |
| JP (1) | JP6678735B2 (ru) |
| KR (1) | KR20180054751A (ru) |
| CN (1) | CN108370445B (ru) |
| AU (1) | AU2015410095C1 (ru) |
| CA (1) | CA2999872C (ru) |
| HK (1) | HK1250292A1 (ru) |
| MX (1) | MX2018003762A (ru) |
| MY (1) | MY190412A (ru) |
| NZ (1) | NZ741321A (ru) |
| RU (1) | RU2696316C1 (ru) |
| WO (1) | WO2017052407A1 (ru) |
| ZA (1) | ZA201802149B (ru) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106846270B (zh) * | 2017-01-05 | 2020-02-14 | 浙江大华技术股份有限公司 | 一种图像边缘增强方法及装置 |
| EP3797514A4 (en) | 2018-06-13 | 2021-08-04 | Huawei Technologies Co., Ltd. | INTRASOLUTION AND / OR ENTRY FILTER FOR VIDEO ENCODING |
| EP3799692A4 (en) * | 2018-06-13 | 2021-08-04 | Huawei Technologies Co., Ltd. | INTRA ENHANCEMENT AND / OR CONTOUR CORRECTION FILTER FOR VIDEO CODING ON THE BASIS OF A BIT TRAIN FLAG |
| CN112950491B (zh) * | 2021-01-26 | 2024-02-13 | 上海视龙软件有限公司 | 一种视频处理的方法及设备 |
| KR20220124031A (ko) * | 2021-03-02 | 2022-09-13 | 삼성전자주식회사 | 영상 패킷을 송수신하는 전자 장치 및 이의 동작 방법 |
| CN112702604B (zh) * | 2021-03-25 | 2021-06-29 | 北京达佳互联信息技术有限公司 | 用于分层视频的编码方法和装置以及解码方法和装置 |
| US12020408B2 (en) * | 2021-06-22 | 2024-06-25 | Ati Technologies Ulc | Sharpening of images in non-linear and linear formats |
| WO2024174072A1 (en) * | 2023-02-20 | 2024-08-29 | Rwth Aachen University | Filter design for signal enhancement filtering for reference picture resampling |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020063807A1 (en) * | 1999-04-19 | 2002-05-30 | Neal Margulis | Method for Performing Image Transforms in a Digital Display System |
| US20050243913A1 (en) * | 2004-04-29 | 2005-11-03 | Do-Kyoung Kwon | Adaptive de-blocking filtering apparatus and method for mpeg video decoder |
| RU2358410C2 (ru) * | 2000-01-20 | 2009-06-10 | Нокиа Корпорейшн | Способ и соответствующее устройство для фильтрации цифровых видеоизображений |
| RU2008106939A (ru) * | 2005-04-19 | 2009-08-27 | Самсунг Электроникс Ко., Лтд. (KR) | Способ и устройство адаптивного выбора контекстной модели для кодирования по энтропии |
| WO2013058876A1 (en) * | 2011-10-21 | 2013-04-25 | Qualcomm Incorporated | Loop filtering around slice boundaries or tile boundaries in video coding |
| EP2111719B1 (en) * | 2007-01-09 | 2014-08-13 | Qualcomm Incorporated | Adaptive upsampling for scalable video coding |
| WO2014158050A1 (en) * | 2013-03-28 | 2014-10-02 | Huawei Technologies Co., Ltd. | Method for determining predictor blocks for a spatially scalable video codec |
Family Cites Families (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6175656B1 (en) | 1999-03-25 | 2001-01-16 | Sony Corporation | Non-linear video sharpening filter |
| US6864916B1 (en) | 1999-06-04 | 2005-03-08 | The Trustees Of Columbia University In The City Of New York | Apparatus and method for high dynamic range imaging using spatially varying exposures |
| JP3995854B2 (ja) | 1999-06-10 | 2007-10-24 | 富士フイルム株式会社 | 画像処理方法および装置並びに記録媒体 |
| US7266150B2 (en) | 2001-07-11 | 2007-09-04 | Dolby Laboratories, Inc. | Interpolation of video compression frames |
| US7116831B2 (en) | 2002-04-10 | 2006-10-03 | Microsoft Corporation | Chrominance motion vector rounding |
| JP4120301B2 (ja) | 2002-04-25 | 2008-07-16 | ソニー株式会社 | 画像処理装置およびその方法 |
| US20130107938A9 (en) | 2003-05-28 | 2013-05-02 | Chad Fogg | Method And Apparatus For Scalable Video Decoder Using An Enhancement Stream |
| US7471845B2 (en) | 2004-01-06 | 2008-12-30 | Sharp Laboratories Of America, Inc. | De-ringing filter |
| JP4576930B2 (ja) | 2004-08-26 | 2010-11-10 | カシオ計算機株式会社 | 動きベクトル検出装置、および、プログラム |
| EP1841230A1 (en) | 2006-03-27 | 2007-10-03 | Matsushita Electric Industrial Co., Ltd. | Adaptive wiener filter for video coding |
| JP2008054267A (ja) | 2006-07-28 | 2008-03-06 | Hitachi Ltd | 画像処理装置、画像符号化装置及び画像復号化装置 |
| US9014280B2 (en) | 2006-10-13 | 2015-04-21 | Qualcomm Incorporated | Video coding with adaptive filtering for motion compensated prediction |
| US7751873B2 (en) | 2006-11-08 | 2010-07-06 | Biotronik Crm Patent Ag | Wavelet based feature extraction and dimension reduction for the classification of human cardiac electrogram depolarization waveforms |
| US20080205508A1 (en) | 2007-02-22 | 2008-08-28 | Streaming Networks (Pvt.) Ltd. | Method and apparatus for low complexity video encoding and decoding |
| EP2232874B1 (en) | 2008-01-08 | 2012-12-05 | Telefonaktiebolaget L M Ericsson (publ) | Adaptive filtering |
| EP2081386A1 (en) | 2008-01-18 | 2009-07-22 | Panasonic Corporation | High precision edge prediction for intracoding |
| US8705622B2 (en) | 2008-04-10 | 2014-04-22 | Qualcomm Incorporated | Interpolation filter support for sub-pixel resolution in video coding |
| US20090257499A1 (en) | 2008-04-10 | 2009-10-15 | Qualcomm Incorporated | Advanced interpolation techniques for motion compensation in video coding |
| US8811484B2 (en) | 2008-07-07 | 2014-08-19 | Qualcomm Incorporated | Video encoding by filter selection |
| US10123050B2 (en) | 2008-07-11 | 2018-11-06 | Qualcomm Incorporated | Filtering video data using a plurality of filters |
| JP4763026B2 (ja) | 2008-08-27 | 2011-08-31 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラム及びコンピュータ読み取り可能な記録媒体 |
| US9078007B2 (en) | 2008-10-03 | 2015-07-07 | Qualcomm Incorporated | Digital video coding with interpolation filters and offsets |
| US10198792B2 (en) | 2009-10-14 | 2019-02-05 | Dolby Laboratories Licensing Corporation | Method and devices for depth map processing |
| US8548065B2 (en) | 2009-10-22 | 2013-10-01 | The Chinese University Of Hong Kong | Parametric interpolation filter for motion-compensated prediction |
| US9445129B2 (en) * | 2010-04-13 | 2016-09-13 | Sun Patent Trust | Image coding method and image decoding method |
| US20110299604A1 (en) | 2010-06-04 | 2011-12-08 | Apple Inc. | Method and apparatus for adaptive video sharpening |
| US9154807B2 (en) | 2010-06-25 | 2015-10-06 | Qualcomm Incorporated | Inclusion of switched interpolation filter coefficients in a compressed bit-stream |
| RS56176B1 (sr) | 2010-09-30 | 2017-11-30 | Samsung Electronics Co Ltd | Postupak za interpolaciju slika pomoću filtera za interpolaciju i uglačavanje |
| US8761245B2 (en) | 2010-12-21 | 2014-06-24 | Intel Corporation | Content adaptive motion compensation filtering for high efficiency video coding |
| US9172972B2 (en) | 2011-01-05 | 2015-10-27 | Qualcomm Incorporated | Low complexity interpolation filtering with adaptive tap size |
| TW201301199A (zh) | 2011-02-11 | 2013-01-01 | Vid Scale Inc | 視訊及影像放大以邊為基礎之視訊內插 |
| US8780971B1 (en) | 2011-04-07 | 2014-07-15 | Google, Inc. | System and method of encoding using selectable loop filters |
| JP5552092B2 (ja) | 2011-06-13 | 2014-07-16 | 日本電信電話株式会社 | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム |
| US9232233B2 (en) | 2011-07-01 | 2016-01-05 | Apple Inc. | Adaptive configuration of reference frame buffer based on camera and background motion |
| US9432700B2 (en) | 2011-09-27 | 2016-08-30 | Broadcom Corporation | Adaptive loop filtering in accordance with video coding |
| US9596463B2 (en) | 2012-02-22 | 2017-03-14 | Qualcomm Incorporated | Coding of loop filter parameters using a codebook in video coding |
| WO2013147495A1 (ko) | 2012-03-26 | 2013-10-03 | 엘지전자 주식회사 | 스케일러블 비디오 인코딩/디코딩 방법 및 장치 |
| WO2014003379A1 (ko) | 2012-06-24 | 2014-01-03 | 엘지전자 주식회사 | 영상 디코딩 방법 및 이를 이용하는 장치 |
| US9344718B2 (en) | 2012-08-08 | 2016-05-17 | Qualcomm Incorporated | Adaptive up-sampling filter for scalable video coding |
| US20140072048A1 (en) | 2012-09-13 | 2014-03-13 | Samsung Electronics Co., Ltd | Method and apparatus for a switchable de-ringing filter for image/video coding |
| US9596465B2 (en) | 2013-01-04 | 2017-03-14 | Intel Corporation | Refining filter for inter layer prediction of scalable video coding |
| US20140192862A1 (en) | 2013-01-07 | 2014-07-10 | Research In Motion Limited | Methods and systems for prediction filtering in video coding |
| US20140254659A1 (en) | 2013-03-11 | 2014-09-11 | Mediatek Inc. | Video coding method using at least evaluated visual quality and related video coding apparatus |
| US20160105685A1 (en) | 2014-10-08 | 2016-04-14 | Qualcomm Incorporated | Boundary filtering and cross-component prediction in video coding |
-
2015
- 2015-09-25 EP EP15851637.7A patent/EP3348058B1/en active Active
- 2015-09-25 AU AU2015410095A patent/AU2015410095C1/en active Active
- 2015-09-25 MY MYPI2018701180A patent/MY190412A/en unknown
- 2015-09-25 RU RU2018114669A patent/RU2696316C1/ru active
- 2015-09-25 MX MX2018003762A patent/MX2018003762A/es unknown
- 2015-09-25 CN CN201580083395.9A patent/CN108370445B/zh active Active
- 2015-09-25 CA CA2999872A patent/CA2999872C/en active Active
- 2015-09-25 KR KR1020187010790A patent/KR20180054751A/ko not_active Application Discontinuation
- 2015-09-25 WO PCT/RU2015/000612 patent/WO2017052407A1/en active Application Filing
- 2015-09-25 NZ NZ74132115A patent/NZ741321A/en unknown
- 2015-09-25 JP JP2018515526A patent/JP6678735B2/ja active Active
-
2018
- 2018-03-23 US US15/934,628 patent/US10863205B2/en active Active
- 2018-04-03 ZA ZA2018/02149A patent/ZA201802149B/en unknown
- 2018-07-26 HK HK18109667.3A patent/HK1250292A1/zh unknown
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020063807A1 (en) * | 1999-04-19 | 2002-05-30 | Neal Margulis | Method for Performing Image Transforms in a Digital Display System |
| RU2358410C2 (ru) * | 2000-01-20 | 2009-06-10 | Нокиа Корпорейшн | Способ и соответствующее устройство для фильтрации цифровых видеоизображений |
| US20050243913A1 (en) * | 2004-04-29 | 2005-11-03 | Do-Kyoung Kwon | Adaptive de-blocking filtering apparatus and method for mpeg video decoder |
| RU2008106939A (ru) * | 2005-04-19 | 2009-08-27 | Самсунг Электроникс Ко., Лтд. (KR) | Способ и устройство адаптивного выбора контекстной модели для кодирования по энтропии |
| EP2111719B1 (en) * | 2007-01-09 | 2014-08-13 | Qualcomm Incorporated | Adaptive upsampling for scalable video coding |
| WO2013058876A1 (en) * | 2011-10-21 | 2013-04-25 | Qualcomm Incorporated | Loop filtering around slice boundaries or tile boundaries in video coding |
| WO2014158050A1 (en) * | 2013-03-28 | 2014-10-02 | Huawei Technologies Co., Ltd. | Method for determining predictor blocks for a spatially scalable video codec |
Non-Patent Citations (1)
| Title |
|---|
| MAXIM SYCHEV et al., Sharpening Filter for Interlayer Prediction, Media Communication Lab, Huawei Technologies Co., LTD. (Russia), December 2014, с. 470-473, [найдено 17.12.2018]. Найдено в сети Интернет по адресу: [https://www.researchgate.net/publication/295105217_Sharpening_filter_for_interlayer_prediction/download]. * |
Also Published As
| Publication number | Publication date |
|---|---|
| MX2018003762A (es) | 2018-09-12 |
| MY190412A (en) | 2022-04-21 |
| EP3348058A1 (en) | 2018-07-18 |
| KR20180054751A (ko) | 2018-05-24 |
| AU2015410095B2 (en) | 2019-08-29 |
| JP2018533292A (ja) | 2018-11-08 |
| NZ741321A (en) | 2019-10-25 |
| AU2015410095C1 (en) | 2020-01-16 |
| CA2999872C (en) | 2020-08-18 |
| BR112018005997A2 (pt) | 2018-10-23 |
| EP3348058B1 (en) | 2021-09-15 |
| HK1250292A1 (zh) | 2018-12-07 |
| US20180220162A1 (en) | 2018-08-02 |
| WO2017052407A8 (en) | 2017-10-26 |
| AU2015410095A1 (en) | 2018-04-26 |
| ZA201802149B (en) | 2023-01-25 |
| CN108370445B (zh) | 2020-02-21 |
| JP6678735B2 (ja) | 2020-04-08 |
| CN108370445A (zh) | 2018-08-03 |
| WO2017052407A1 (en) | 2017-03-30 |
| US10863205B2 (en) | 2020-12-08 |
| CA2999872A1 (en) | 2017-03-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2696316C1 (ru) | Адаптивный фильтр увеличения резкости для кодирования с предсказанием | |
| US10820008B2 (en) | Apparatus and method for video motion compensation | |
| RU2696311C1 (ru) | Устройство и способ для компенсации движения видео с выбираемым интерполяционным фильтром | |
| US10834416B2 (en) | Apparatus and method for video motion compensation | |
| US10848784B2 (en) | Apparatus and method for video motion compensation | |
| JP6797247B2 (ja) | ビデオ動き補償用の装置および方法 | |
| BR112018005997B1 (pt) | Codificador de vídeo, decodificador de vídeo, métodos para a codificação e a decodificação preditivas e meio de armazenamento legível em computador |