RU2643504C1 - Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений - Google Patents

Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений Download PDF

Info

Publication number
RU2643504C1
RU2643504C1 RU2016136095A RU2016136095A RU2643504C1 RU 2643504 C1 RU2643504 C1 RU 2643504C1 RU 2016136095 A RU2016136095 A RU 2016136095A RU 2016136095 A RU2016136095 A RU 2016136095A RU 2643504 C1 RU2643504 C1 RU 2643504C1
Authority
RU
Russia
Prior art keywords
prediction
pixel
mode
value
pixels
Prior art date
Application number
RU2016136095A
Other languages
English (en)
Inventor
Франк Ян БОССЕН
Сандип КАНУМУРИ
Original Assignee
Нтт Докомо, Инк.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Нтт Докомо, Инк. filed Critical Нтт Докомо, Инк.
Application granted granted Critical
Publication of RU2643504C1 publication Critical patent/RU2643504C1/ru

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

Группа изобретений относится к технологиям кодирования/декодирования данных видеоизображений. Техническим результатом является повышение эффективности кодирования/декодирования видео за счет обеспечения внутрикадрового предсказания в планарном режиме. Предложен способ декодирования видео для предсказания пиксельных значений каждого целевого пикселя в целевом блоке в планарном режиме. Способ содержит этап, на котором получают режим предсказания, выбранный кодером из множества различных режимов внутрикадрового предсказания, включающих в себя режим DC, направленные режимы и планарный режим. Далее согласно способу вычисляют первое значение предсказания каждого целевого пикселя с использованием линейной интерполяции между пиксельным значением пикселя горизонтальной границы в том же самом горизонтальном положении, что и каждый целевой пиксель из множества пикселей горизонтальной границы на верхней стороне целевого блока, и пиксельным значением одного пикселя вертикальной границы из множества пикселей вертикальной границы на левой стороне целевого блока, когда режим предсказания является планарным режимом. 2 н. и 2 з.п. ф-лы, 12 ил.

Description

РОДСТВЕННЫЕ ЗАЯВКИ
Настоящий патентный документ испрашивает приоритет по дате подачи временной заявки на патент США серийный номер 61/425670, поданной 21 декабря 2010 года, и 61/449528, поданной 4 марта 2011 года, содержание которых тем самым включено в настоящий документ по ссылке во всей своей полноте.
УРОВЕНЬ ТЕХНИКИ
ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Изобретение относится к видеокодированию и, в частности, к внутрикадровому предсказанию, усовершенствованному с помощью режима кодирования с планарным предсказанием с низкой сложностью.
ОПИСАНИЕ ПРЕДШЕСТВУЮЩЕГО УРОВНЯ ТЕХНИКИ
Цифровое видео требует большого объема данных для представления каждого кадра цифровой видеопоследовательности (например, серии кадров) в несжатом виде. Для большинства приложений передача несжатого цифрового видео через компьютерные сети является невыполнимой из-за ограничений пропускной способности. Кроме того, несжатое цифровое видео требует большого количества места для хранения. Цифровое видео обычно некоторым образом кодируется для уменьшения требований к хранению и уменьшения требований к пропускной способности.
Одной из методик для кодирования цифрового видео является межкадровое предсказание. Межкадровое предсказание использует временную избыточность среди разных кадров. Смежные по времени кадры видео, как правило, включают в себя блоки пикселей, которые остаются в значительной степени одинаковыми. Во время процесса кодирования вектор движения взаимно связывает движение блока пикселей в одном кадре с блоком аналогичных пикселей в другом кадре. В соответствии с этим система не нуждается в кодировании блока пикселей не дважды, а вместо этого кодирует блок пикселей один раз и предоставляет вектор движения для предсказания другого блока пикселей.
Другой методикой для кодирования цифрового видео является внутрикадровое предсказание. Внутрикадровое предсказание кодирует кадр или его часть независимо от пикселей в других кадрах. Внутрикадровое предсказание использует пространственную избыточность среди блоков пикселей в пределах кадра. Поскольку пространственно смежные блоки пикселей обычно имеют похожие атрибуты, эффективность процесса кодирования улучшается посредством ссылки на пространственную корреляцию между смежными блоками. Эта корреляция может использоваться посредством предсказания целевого блока на основе видов предсказания, используемых в смежных блоках.
Как правило, кодер содержит модуль предсказания пикселей, который содержит модуль межкадрового предсказания, модуль внутрикадрового предсказания и селектор режима. Модуль межкадрового предсказания выполняет предсказание для принятого изображения на основе опорного кадра с компенсацией движения. Модуль внутрикадрового предсказания выполняет предсказание для принятого изображения на основе уже обработанных частей текущего кадра или изображения. Модуль внутрикадрового предсказания дополнительно содержит множество разных режимов внутрикадрового предсказания и выполняет предсказание в соответствующих режимах предсказания. Выходная информация из модуля межкадрового предсказания и модуля внутрикадрового предсказания подается на селектор режима.
Селектор режима определяет, какой способ кодирования должен использоваться: кодирование с межкадровым предсказанием или кодирование с внутрикадровым предсказанием, и когда должно использоваться кодирование с внутрикадровым предсказанием, определяет, какой режим кодирования с внутрикадровым предсказанием должен использоваться среди множества режимов внутрикадрового предсказания. В процессе определения селектор режима использует функции затрат для анализа, какой способ кодирования или какой режим дает самый эффективный результат относительно эффективности кодирования и затрат на обработку.
Режимы внутрикадрового предсказания содержат режим DC (постоянный) и направленные режимы. Режим DC надлежащим образом представляет блок, пиксельные значения которого являются постоянными в блоке. Направленные режимы подходят для представления блока, который имеет шаблон полосы в некотором направлении. Имеется другой шаблон изображения, в котором изображение является плавным, и его пиксельные значения постепенно изменяются в блоке. Режим DC и направленные режимы не подходят для предсказания небольших постепенных изменений в содержании изображения и могут создавать раздражающие артефакты блочности, особенно при низких и средних битовых скоростях. Это происходит потому, что когда кодируются блоки с постепенным изменением пиксельных значений, коэффициенты AC (переменные) для блоков имеют тенденцию квантоваться как нуль, в то время как коэффициенты DC имеют ненулевые значения.
Чтобы справиться с этой проблемой, режимы внутрикадрового предсказания стандарта H.264/AVC дополнительно включают в себя планарный режим для представления блока с плавным изображением, пиксельные значения которого постепенно изменяются с малым планарным градиентом. В планарном режиме стандарта H.264/AVC планарный градиент оценивается и сообщается в битовом потоке декодеру.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Настоящее изобретение обеспечивает режим кодирования с планарным предсказанием с низкой сложностью, который может улучшить эффективность кодирования с внутрикадровым предсказанием. В настоящем изобретении в планарном режиме предсказания кодер вычисляет первое значение предсказания и второе значение предсказания. Первое значение предсказания вычисляется с использованием линейной интерполяции между значением соответствующих пикселей горизонтальной границы и значением одного из пикселей вертикальной границы. Второе значение предсказания вычисляется с использованием линейной интерполяции между значением соответствующих пикселей вертикальной границы и значением одного из пикселей горизонтальной границы. Затем кодер выполняет усреднение первого и второго значений предсказания для получения соответствующего значения предсказания в блоке предсказания.
В одном аспекте настоящего изобретения кодер сообщает разность между блоком предсказания и целевым блоком в битовом потоке декодеру.
В другом аспекте настоящего изобретения первичный набор ядра преобразования HN(i, j) переключается на вторичный набор ядра преобразования GN(i, j). Кодер преобразовывает разность с использованием вторичного набора ядра преобразования GN(i, j).
Вторичный набор ядра преобразования GN(i, j) может быть задан одним из следующих уравнений:
Figure 00000001
Figure 00000002
Figure 00000003
В другом аспекте настоящего изобретения вторичный набор ядра преобразования GN(i, j) для размера N×N задается посредством первичного набора ядра преобразования HM(i, j) для размера M×M, где M>N. В частности, вторичный набор ядра преобразования GN(i, j) может быть задан посредством
GN(i, j) = kt×H2N(2i,N+1-j), если поддерживаются ядра преобразования размером 2N×2N (H2N), или
GN(i, j)=HN(i, j) в ином случае.
Настоящее изобретение также обеспечивает планарный режим кодирования низкой сложности, используемый для декодирования. В планарном режиме декодер вычисляет первое значение предсказания и второе значение предсказания. Первое значение предсказания вычисляется с использованием линейной интерполяции между значением соответствующих пикселей горизонтальной границы и значением одного из пикселей вертикальной границы. Второе значение предсказания вычисляется с использованием линейной интерполяции между значением соответствующих пикселей вертикальной границы и значением одного из пикселей горизонтальной границы. Затем декодер выполняет усреднение первого и второго значений предсказания для получения соответствующего пиксельного значения предсказания в блоке предсказания. Декодер декодирует разность, сообщенную от кодера, которая была сформирована в планарном режиме в кодере, и добавляет декодированную разность к блоку предсказания для воссоздания данных изображения.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Фиг.1 - блок-схема, показывающая примерную аппаратную архитектуру, на которой может быть реализовано настоящее изобретение.
Фиг.2 - блок-схема, показывающая общий вид видеокодера, к которому может быть применено настоящее изобретение.
Фиг.3 - блок-схема, показывающая общий вид видеодекодера, к которому может быть применено настоящее изобретение.
Фиг.4 - блок-схема, показывающая функциональные модули кодера в соответствии с вариантом осуществления настоящего изобретения.
Фиг.5 - блок-схема последовательности операций, показывающая процесс кодирования, выполняемый видеокодером в соответствии с вариантом осуществления настоящего изобретения.
Фиг.6 - блок-схема, показывающая функциональные модули декодера в соответствии с вариантом осуществления настоящего изобретения.
Фиг.7 - схема, показывающая процесс декодирования, выполняемый видеодекодером в соответствии с вариантом осуществления настоящего изобретения.
Фиг.8 - схематическое представление целевого блока, содержащего 8×8 пикселей P(i, j) и опорные пиксели, используемые для предсказания пикселей P(i, j).
Фиг.9 - схематическое представление, показывающее процесс формирования пикселей предсказания в соответствии с планарным режимом кодирования, предложенным в JCT-VC A119.
Фиг.10 - схематическое представление, показывающее процесс формирования пикселей предсказания в соответствии с планарным режимом кодирования настоящего изобретения.
Фиг.11 - другое схематическое представление, показывающее процесс формирования пикселей предсказания в соответствии с планарным режимом кодирования настоящего изобретения.
Фиг.12 - блок-схема последовательности операций, показывающая процесс переключения между первичным набором ядра преобразования и вторичным набором ядра преобразования.
ПОДРОБНОЕ ОПИСАНИЕ ЧРЕТЕЖЕЙ И ПРЕДСТАВЛЕННЫХ ПРЕДПОЧТИТЕЛЬНЫХ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ
Фиг.1 показывает примерную аппаратную архитектуру компьютера 100, на котором может быть реализовано настоящее изобретение. Следует отметить, что аппаратная архитектура, показанная на Фиг.1, может быть общей как в видеокодере, так и в видеодекодере, которые реализуют варианты осуществления настоящего изобретения. Компьютер 100 включает в себя процессор 101, память 102 устройство 105 хранения и одно или более устройств 106 ввода и/или вывода (или периферийные устройства), которые соединены с возможностью взаимодействия через локальный интерфейс 107. Локальный интерфейс 105, например, может представлять собой, но без ограничения, одну или более шин или другие проводные или беспроводные соединения, известные в области техники.
Процессор 101 является аппаратным устройством для исполнения программного обеспечения, в частности, сохраненного в памяти 102. Процессор 101 может являться любым изготовленным на заказ или серийно выпускаемым процессором, центральным процессором (CPU), вспомогательным процессором среди нескольких процессоров, связанных с компьютером 100, полупроводниковым микропроцессором (в виде микрокристалла или чипсета) или любым устройством для исполнения программных команд.
Память 102 содержит машиночитаемый носитель, который может включать в себя любой элемент энергозависимой памяти или их комбинацию (например, оперативное запоминающее устройство (RAM, такое как DRAM, SRAM, SDRAM и т.д.)) и элементы энергонезависимой памяти (например, постоянное запоминающее устройство (ROM), накопитель на жестком диске, ленту, компакт диск (CD-ROM) и т.д.). Кроме того, память 102 может включать в себя электронные, магнитные, оптические и/или другие типы носителей. Машиночитаемый носитель может представлять собой любое средство, которое может хранить, передавать, распространять или транспортировать программу для использования с помощью системы или устройства исполнения команд. Следует отметить, что память 102 может иметь распределенную архитектуру, в которой различные компоненты расположены удаленно друг от друга, но к которым может быть получен доступ посредством процессора 101.
Программное обеспечение 103 в памяти 102 может включать в себя одну или более отдельных программ, каждая из которых содержит упорядоченный список исполняемых команд для реализации логических функций компьютера 100, как описано ниже. В примере на Фиг.1 программное обеспечение 103 в памяти 102 определяет функциональность кодирования видео и декодирования видео компьютера 100 в соответствии с настоящим изобретением. Кроме того, хотя это не обязательно, память 102 может содержать операционную систему (O/S) 104. Операционная система 104 в общем и целом управляет выполнением компьютерных программ и обеспечивает планирование, управление вводом-выводом, управление файлами и данными, управление памятью и управление связью и соответствующие службы.
Устройство 105 хранения компьютера 100 может являться одним из многих устройств хранения различных типов, включающих в себя стационарное устройство хранения или переносное устройство хранения. В качестве примера устройство 105 хранения может являться магнитной лентой, диском, флэш-памятью, энергозависимой памятью или другим устройством хранения. Кроме того, устройство 105 хранения может являться цифровой картой памяти с защищенным доступом или любым другим съемным устройством 105 хранения.
Устройства 106 ввода-вывода могут включать в себя устройства ввода данных, например, но без ограничения, сенсорный экран, клавиатуру, мышь, сканер, микрофон или другое устройство ввода данных. Кроме того, устройства 106 ввода-вывода также могут включать в себя устройства вывода, например, но без ограничения, дисплей или другие устройства вывода. Устройства 106 ввода-вывода могут дополнительно включать в себя устройства, которые осуществляют взаимодействие и через входы, и через выходы, например, но без ограничения, модулятор/демодулятор (например, модем для доступа к другому устройству, системе или сети), радиочастотный (RF), беспроводной или другой приемопередатчик, телефонный интерфейс, мост, маршрутизатор или другие устройства, которые функционируют и как устройства ввода, и как устройства вывода.
Как известно специалистам в области техники, сжатие видео достигается посредством удаления избыточной информации в последовательности видеокадров. Существует много различных стандартов видеокодирования, примеры которых включают в себя MPEG-1, MPEG-2, MPEG-4, H.261, H.263 и H.264/AVC. Следует отметить, что настоящее изобретение не предусматривает ограничения в применении какого-либо конкретного стандарта видеокодирования. Однако последующее описание настоящего изобретения представлено с использованием примера стандарта H.264/AVC, который включен в настоящий документ по ссылке. Стандарт H.264/AVC является новейшим стандартом видеокодирования и достигает существенного улучшения производительности по сравнению с предыдущими стандартами кодирования, такими как MPEG-1, MPEG-2, H.261 и H.263.
В стандарте H.264/AVC каждый кадр или изображение видео может быть разбит на несколько секций. Затем секции разделяются на блоки с размером 16×16 пикселей, называемые макроблоками, которые затем могут быть дополнительно разделены на блоки с размером 8×16, 16×8, 8×8, 4×8, 8×4 и вплоть до 4×4 пикселей. Имеется пять типов секций, поддерживаемых в стандарте H.264/AVC. В секциях I все макроэлементы кодируются с использованием внутрикадрового предсказания. В секциях P макроэлементы могут быть закодированы с использованием внутрикадрового или межкадрового предсказания. P секции разрешают использовать только один сигнал предсказания с компенсацией движения (MCP) для каждого макроблока. В секциях B макроэлементы могут быть закодированы с использованием внутрикадрового или межкадрового предсказания. Для каждого предсказания могут использоваться два сигнала MCP. Секции SP позволяют эффективно переключать секции P между разными видеопотоками. Секция SI представляет собой точное соответствие для секции SP для произвольного доступа или восстановления после ошибки при использовании только внутрикадрового предсказания.
Фиг.2 показывает общий вид видеокодера, к которому может быть применено настоящее изобретение. Блоки, показанные на чертеже, представляют функциональные модули, реализованные процессором 101, исполняющим программное обеспечение 103 в памяти 102. Изображение видеокадра 200 подается в видеокодер 201. Видеокодер обрабатывает изображение 200 в макроблоках 200A. Каждый макроблок содержит несколько пикселей изображения 200. Над каждым макроблоком выполняется преобразование в коэффициенты преобразования, за которым следует квантование в уровни коэффициентов преобразования. Кроме того, внутрикадровое предсказание или межкадровое предсказание используется таким образом, чтобы выполнять этапы кодирования не над самими пиксельными данными, а над их разностями с предсказанными пиксельными значениями, тем самым достигая маленьких значений, которые легче сжимаются.
Для каждой секции кодер 201 формирует несколько синтаксических элементов, которые формируют закодированную версию макроблоков соответствующей секции. Все элементы разностных данных в синтаксических элементах, которые относятся к кодированию коэффициентов преобразования, такие как уровни коэффициентов преобразования или карта значимости, указывающая пропущенные уровни коэффициентов преобразования, называются синтаксическими элементами разностных данных. Помимо этих синтаксических элементов разностных данных синтаксические элементы, формируемые кодером 201, содержат синтаксические элементы управляющей информации, содержащие управляющую информацию относительно того, как каждый макроблок был закодирован и должен быть декодирован, соответственно. Другими словами, синтаксические элементы делятся на две категории. Первая категория, синтаксические элементы управляющей информации, содержит элементы, имеющие отношение к типу макроблока, типу субмакроблока и информации о режимах предсказания как пространственного, так и временного типов, а также, например, управляющая информация для секций и макроблоков. Во второй категории все элементы разностных данных, такие как карта значимости, указывающая местоположения всех значимых коэффициентов в блоке квантованных коэффициентов преобразования, и значения значимых коэффициентов, которые указаны как уровни, соответствующие этапам квантования, объединяются и становятся синтаксическими элементами разностных данных.
Кодер 201 содержит энтропийный кодер, который кодирует синтаксические элементы и формирует арифметические кодовые слова для каждой секции. При формировании арифметических кодовых слов для секции энтропийный кодер использует статистические зависимости среди значений данных синтаксических элементов в битовом потоке видеосигнала. Кодер 201 выдает закодированный видеосигнал для секции изображения 200 видеодекодеру 301, показанному на Фиг.3.
Фиг.3 показывает общий вид видеодекодера, к которому может быть применено настоящее изобретение. Аналогичным образом, блоки, показанные на чертеже, представляют функциональные модули, реализованные процессором 101, исполняющим программное обеспечение 103 в памяти 102. Видеодекодер 301 принимает закодированный видеосигнал и сначала выполняет энтропийное декодирование сигнала обратно в синтаксические элементы. Декодер 301 использует синтаксические элементы для воссоздания, макроблока за макроблоком и затем секции за секцией, отсчетов 300A изображения пикселей в изображении 300.
Фиг.4 показывает функциональные модули видеокодера 201. Эти функциональные модули реализованы процессором 101, исполняющим программное обеспечение 103 в памяти 102. Входное видеоизображение представляет собой кадр или поле естественного (несжатого) видеоизображения, заданные точками отсчетов, представляющими компоненты первоначальных цветов, такие как цветность ("chroma") и яркость ("luma") (возможны другие компоненты, например, оттенок, насыщенность и значение). Входное видеоизображение разделяется на макроблоки 400, каждый из которых представляет квадратную область изображения, состоящую из 16×16 пикселей компонента яркости цвета изображения. Входное видеоизображение также разделяется на макроблоки, каждый из которых представляет 8×8 пикселей каждого из двух компонентов цветности цвета изображения. При обычной работе кодера введенные макроблоки могут быть предсказаны по времени или в пространстве с использованием межкадрового или внутрикадрового предсказания. Однако с целью обсуждения предполагается, что все макроблоки 400 представляют собой макроблоки секции типа I и подвергаются только внутрикадровому предсказанию.
Внутрикадровое предсказание выполняется в модуле 401 внутрикадрового предсказания, работа которого будет подробно обсуждена ниже. Модуль 401 внутрикадрового предсказания формирует блок 402 предсказания из пикселей горизонтальной и вертикальной границы соседних блоков, которые были ранее закодированы, воссозданы и сохранены в памяти 403 кадра. Разность 404 блока 402 предсказания, которая является разностью между целевым блоком 400 и блоком 402 предсказания, преобразовывается модулем 405 преобразования и затем квантуется модулем 406 квантования. Модуль 405 преобразования преобразовывает разность 404 в блок коэффициентов преобразования. Модуль 406 квантования квантует коэффициенты преобразования в квантованные коэффициенты 407 преобразования. Квантованные коэффициенты 407 преобразования затем подвергаются энтропийному кодированию в модуле 408 энтропийного кодирования и передаются (вместе с другой информацией, имеющей отношение к выбранному режиму внутрикадрового предсказания) как закодированный видеосигнал 409.
Видеокодер 201 содержит функциональность декодирования для выполнения внутрикадрового предсказания над целевыми блоками. Функциональность декодирования содержит модуль 410 обратного квантования и модуль 411 обратного преобразования, которые выполняют обратное квантование и обратное преобразование над квантованными коэффициентами 407 преобразования для получения декодированной разности 410 предсказания, которая добавляется к блоку 402 предсказания. Сумма декодированной разности 410 предсказания и блока 402 предсказания представляет собой воссозданный блок 413, который сохраняется в памяти 403 кадра и будет считан оттуда и использован модулем 401 внутрикадрового предсказания для формирования блока 402 предсказания для декодирования следующего целевого блока 400. Фильтр удаления блочности может быть дополнительно помещен либо на воде, либо на выходе памяти 403 кадра для удаления артефактов блочности из воссозданных изображений.
Фиг.5 является блок-схемой последовательности операций, показывающей процессы, выполняемые видеокодером 201. В соответствии со стандартом H.264/AVC, внутрикадровое предсказание включает в себя предсказание каждого пикселя целевого блока 400 во множестве режимов предсказания с использованием интерполяции граничных пикселей ("опорных пикселей") соседних блоков, ранее закодированных и воссозданных. Режимы предсказания идентифицированы положительными целыми числами 0, 1, 2, ..., и каждый из них имеет отношение к разным командам или алгоритмам для предсказания заданных пикселей в целевом блоке 400. Модуль 401 внутрикадрового предсказания выполняет внутрикадровое предсказание в соответствующих режимах предсказания и формирует разные блоки предсказания. В алгоритме полного поиска ("FS") каждый из сформированных блоков предсказания сравнивается с целевым блоком 400 для нахождения оптимального режима предсказания, который минимизирует разность 404 предсказания или производит меньшую разность 404 предсказания среди режимов предсказания (этап 501). Идентификационная информация оптимального режима предсказания сжимается (этап 502) и будет сообщена декодеру 301 с другими синтаксическими элементами управляющей информации.
Каждый режим предсказания может быть описан посредством общего направления предсказания, как описано словесно (то есть горизонтально, вертикально и по диагонали вниз и влево). Направление предсказания может быть описано графически угловым направлением. Угол, соответствующий режиму предсказания, имеет общее отношение к направлению от взвешенного среднего местоположения опорных пикселей, используемых для предсказания целевого пикселя, к местоположению целевого пикселя. В режиме предсказания DC блок 402 предсказания формируется таким образом, что каждый пиксель в блоке 402 предсказания однородно установлен равным среднему значению опорных пикселей.
Как показано на Фиг.5, модуль 401 внутрикадрового предсказания выдает блок 402 предсказания, который вычитается из целевого блока 400 для получения разности 404 (этап 503). Модуль 405 преобразования преобразовывает разность 404 в блок коэффициентов преобразования (этап 504). Модуль 406 квантования квантует коэффициенты преобразования в квантованные коэффициенты преобразования. Модуль 408 энтропийного кодирования - кодирует квантованные коэффициенты преобразования (этап 506), которые отправляются вместе со сжатой идентификационной информацией оптимального режима предсказания. Модуль 410 обратного квантования выполняет обратное квантование квантованных коэффициентов преобразования (этап 507). Модуль 411 обратного преобразования выполняет обратное преобразование для получения декодированной разности 412 предсказания (этап 508), который складывается с блоком 402 предсказания для получения воссозданного блока 413 (этап 509).
Фиг.6 показывает функциональные модули видеодекодера 301. Эти функциональные модули реализованы процессором 101, исполняющим программное обеспечение 103 в памяти 102. Закодированный видеосигнал от кодера 201 сначала принимается энтропийным декодером 600 и декодируется обратно в квантованные коэффициенты 601 преобразования. Квантованные коэффициенты 601 преобразования подвергаются обратному квантованию посредством модуля 602 обратного квантования и обратному преобразованию посредством модуля 603 обратного преобразования для формирования разности 604 предсказания. Модуль 605 внутрикадрового предсказания 605 уведомляется относительно режима предсказания, выбранного кодером 201. Согласно выбранному режиму предсказания модуль 605 внутрикадрового предсказания выполняет процесс внутрикадрового предсказания, аналогичный выполняемому на этапе 503 на Фиг.5, для формирования блока 606 предсказания с использованием граничных пикселей соседних блоков, ранее воссозданных и сохраненных в памяти 607 кадра. Блок 606 предсказания добавляется к разности 604 предсказания для воссоздания блока 608 из декодированного видеосигнала. Воссозданный блок 608 сохраняется в памяти 607 кадра для использования при предсказании следующего блока.
Фиг.7 является блок-схемой последовательности операций, показывающей процессы, выполняемые видеокодером 201. Видеодекодер 301 декодирует идентификационную информацию оптимального режима предсказания, сообщенную от видеокодера 201 (этап 701). С использованием декодированного режима предсказания модуль 605 внутрикадрового предсказания формирует блок 606 предсказания, используя граничные пиксели соседних блоков, ранее воссозданных и сохраненных в памяти 607 кадра (этап 702). Арифметический декодер 600 декодирует закодированный видеосигнал от кодера 201 обратно в квантованные коэффициенты 601 преобразования (этап 703). Модуль 602 обратного квантования выполняет обратное квантование квантованных коэффициентов преобразования в коэффициенты преобразования (этап 704). Модуль 603 обратного преобразования выполняет обратное преобразование коэффициентов преобразования в разность 604 предсказания (этап 705), которая складывается с блоком 606 предсказания для воссоздания блока 608 из декодированного видеосигнала (этап 706).
Процесс кодирования, выполняемый видеокодером 201, может быть более подробно объяснен со ссылкой на Фиг.8. Фиг.8 является схематическим представлением целевого блока, содержащего 8×8 пикселей P(i, j), и опорные пиксели, используемые для предсказания пикселей P(i, j). На Фиг.8 опорные пиксели состоят из 17 горизонтальных пикселей и 17 вертикальных пикселей, причем верхний левый пиксель является общим для горизонтальной и для вертикальной границ. Таким образом, доступны 32 разных пикселя для формирования пикселей предсказания для целевого блока. Следует отметить, что хотя Фиг.8 показывает блок с размером 8×8, который должен быть предсказан, последующее объяснение обобщено, чтобы оно стало применимым к разным количествам пикселей в разных конфигурациях. Например, блок, который должен быть предсказан, может включать массив пикселей размером 4×4. Блок предсказания также может включать в себя массив пикселей с размером 8×8, 16×16 или с большим количеством пикселей. Другие конфигурации пикселей, в том числе квадратные и прямоугольные массивы, также могут составлять блок предсказания.
Предположим, что блок пикселей ({P(i, j): 1≤i, j≤N}), подвергается кодированию с внутрикадровым предсказанием c использованием горизонтальных и вертикальных опорных пикселей ({P(i, 0): 0≤i≤2N}∪{P(0, j): 0≤j≤2N}). Причем PO(i, j) обозначает первоначальные пиксельные значения целевого блока, PP(i, j) обозначает предсказанные пиксельные значения, PR(i, j) обозначает разностные значения, PQ(i, j) обозначает сжатые разностные значения и PC(i, j) обозначает сжатые значения для пикселей (i, j), следующие уравнения определяют их соотношение:
Figure 00000004
HF N - матрица с размером N×N, представляющая ядро прямого преобразования. HI N - матрица с размером N×N, представляющая ядро обратного преобразования. PT(1:N, 1:N) представляет преобразованные и квантованные разностные сигналы в битовом потоке. QF( ) представляет операцию квантования, и QI( ) представляет операцию обратного квантования.
Предсказанные пиксельные значения PP(i, j) определены режимом внутрикадрового предсказания, выполняемым с опорными пикселями {P(i, 0):0≤i≤2N}∪{P(0, j):0≤j≤2N}. Стандарт H.264/AVC поддерживает предсказание Intra_4×4, предсказание Intra_8×8 и предсказание Intra_16×16. Предсказание Intra_4×4 выполняется в девяти режимах предсказания, включающих в себя вертикальный режим предсказания, горизонтальный режим предсказания, режим предсказания DC и шесть угловых режимов предсказания. Предсказание Intra_8×8 выполняется в девяти режимах предсказания, как и выполняющееся в предсказании Intra_4×4. Предсказание Intra_16×16 выполняется в четырех режимах предсказания, включающих в себя вертикальный режим предсказания, горизонтальный режим предсказания, режим предсказания DC и планарный режим предсказания. Например, предсказанные пиксельные значения PP(i, j), полученные в режиме предсказания DC, вертикальном режиме предсказания и горизонтальным режиме предсказания, определяются следующим образом:
Режим предсказания DC:
Figure 00000005
Вертикальный режим предсказания:
Figure 00000006
Горизонтальный режим предсказания:
Figure 00000007
Недавно Объединенной команде по видеокодированию ((JCT-VC) было представлено предложение № JCT-VC A119, которое включено в настоящий документ по ссылке. Предложение № JCT-VC A119 предлагает операцию планарного режима с низкой сложностью, которая использует комбинацию операций линейной и билинейной интерполяции для предсказания постепенно изменяющихся пиксельных значений с малым планарным градиентом. Предложенный процесс планарного режима схематично показан на Фиг.9. Процесс начинается с идентификации значения PP(N, N) нижнего правого пикселя в блоке, который должен быть предсказан. Затем выполняются линейные интерполяции между значением PP(N, N) и значением PC(N, 0) опорного пикселя для получения предсказанных пиксельных значений PP(N, j) нижнего ряда в блоке. Аналогичным образом выполняются линейные интерполяции между значением PP(N, N) и значением PC(0, N) опорного пикселя для получения предсказанных пиксельных значений PP(i, N) крайнего правого столбца в блоке. После этого выполняются билинейные интерполяции среди предсказанных пиксельных значений PP(N, j) и PP(i, N) и значений PC(i, 0) и PC(0, j) опорных пикселей для получения остальных пиксельных значений PP(i, j) в блоке. Предложенный процесс планарного режима может быть выражен следующими уравнениями:
Правый столбец:
Figure 00000008
Нижняя строка:
Figure 00000009
Остальные пиксели:
Figure 00000010
В процессе планарного режима, предложенном в JCT-VC A119, имеются две проблемы, которые должны быть разрешены. В предложенном процессе значение PP(N, N) нижнего правого пикселя сообщается в битовом потоке декодеру и используется для декодирования целевого блока в декодере. Другими словами, для выполнения предсказания в предложенном планарном режиме декодеру требуется значение нижнего правого пикселя. Кроме того, в предложенном процессе разность не получается в планарном режиме и, таким образом, не сообщается декодеру. Опускание сообщения разности может способствовать сокращению закодированных видеоданных, которые должны быть переданы, но ограничивает применение планарного режима кодированием видеосигнала с низкой битовой скоростью.
Планарный режим в соответствии с настоящим изобретением разработан для решения упомянутых выше вопросов, связанных с процессом планарного режима, предложенного в JCT-VC A119. Согласно варианту осуществления настоящего изобретения значение PP(N, N) нижнего правого пикселя получается из опорных пикселей. Таким образом, нет необходимости сообщать значение PP(N, N) нижнего правого пикселя декодеру. В другом варианте осуществления настоящего изобретения блок предсказания, сформированный в планарном режиме, используется для получения разности, которая преобразована и квантована для сообщения декодеру. Применение традиционного дискретного косинусного преобразования (DCT) и квантование со средним или грубым параметром квантования имеет тенденцию приводить к нулевым коэффициентам AC и ненулевым коэффициентам DC из разностей, полученных в планарном режиме. Чтобы избежать этого, вариант осуществления настоящего изобретения использует вторичное ядро преобразования вместо первичного ядра преобразования для преобразования разности, полученной в планарном режиме. Кроме того, другой вариант осуществления выполняет адаптивное квантование в планарном режиме, в котором параметр квантования изменяется адаптивно согласно пространственной активности в целевом блоке.
В варианте осуществления настоящего изобретения значение PP(N, N) нижнего правого пикселя вычисляется из опорных пикселей. Значение PP(N, N) вычисляется в соответствии с одним из следующих трех способов:
Способ 1:
Figure 00000011
где оператор ">>" представляет операцию сдвига вправо с округлением или без округления.
Способ 2:
Figure 00000012
где wh и wv - весовые коэффициенты, определенные с использованием PC(0,1: N) и PC(1: N,0). Например, wh и wv вычисляются следующим образом:
Figure 00000013
где оператор "var ()" представляет операцию для вычисления отклонения.
Способ 3:
Figure 00000014
где
Figure 00000015
и
Figure 00000016
представляет арифметическую операцию. В варианте осуществления настоящего изобретения арифметическая операция определена как
Figure 00000017
. В другом варианте осуществления настоящего изобретения арифметическая операция просто определена как y=f(x0, x1, ..., x2N)=x2N. Следует отметить, что в настоящем изобретении значение PP(N, N) нижнего правого пикселя не сообщается декодеру. Вместо этого декодер вычисляет значение PP(N, N) в соответствии со способом, принятым кодером, который может являться предварительно определенным или идентификационная информация которого может быть сообщена декодеру.
Фиг.10 является схематическим изображением, показывающим процесс предсказания пиксельных значений, выполняемый в планарном режиме в соответствии с вариантом осуществления настоящего изобретения, в котором реализован описанный выше способ 1. Процесс начинается с вычисления значения PP(N, N) нижнего правого пикселя в блоке с использованием способа 1. После вычисления значения PP(N, N) выполняются линейные интерполяции между значением PP(N, N) и значением PC(N, 0) для получения предсказанных пиксельных значений PP(N, j) нижней строки в блоке. Аналогичным образом, линейные интерполяции выполняются между значением PP(N, N) и значением PC(0, N) для получения предсказанных пиксельных значений PP(i, N) крайнего правого столбца в блоке. После этого выполняются билинейные интерполяции среди предсказанных пиксельных значений PP(N, j) и PP(i, N) и значениями PC(0, j) опорных пикселей для получения остальных пиксельных значений PP(i, j) в блоке. Как показано посредством следующих уравнений и на Фиг.11, способ 1 может упростить операцию предсказания пиксельных значений PP(i, j) в целевом блоке:
Figure 00000018
где
Figure 00000019
и
Figure 00000020
, если необходима дробная точность.
Приведенные выше уравнения требуют деления на значение N для вычисления пиксельных значений PP(i, j) в блоке. Дробных операций можно избежать посредством использования целочисленной арифметики следующим образом:
Figure 00000021
где
Figure 00000022
и
Figure 00000023
.
Если целочисленная точность достаточна, пиксельные значения PP(i, j) могут быть выражены посредством
Figure 00000024
,
где
Figure 00000025
и
Figure 00000026
.
Способ 1 может быть модифицирован следующим образом:
Figure 00000027
где y = f(x0, x1, ..., x2N) представляет арифметическую операцию. В варианте осуществления настоящего изобретения арифметическая операция определена как
Figure 00000028
. В другом варианте осуществления настоящего изобретения арифметическая операция просто определена как
Figure 00000029
.
Способ 1 дополнительно может быть изменен следующим образом:
Figure 00000030
где
Figure 00000031
представляет функцию, которая может быть определена одним из следующих четырех уравнений:
Уравнение 1:
Figure 00000032
Уравнение 2:
Figure 00000033
Уравнение 3:
Figure 00000034
Уравнение 4:
Figure 00000035
, где
Figure 00000036
является фильтрованным значением x(N+i), когда фильтр применен к массиву [x0, x1, ... x2N]. В варианте осуществления настоящего изобретения фильтр может являться фильтром с 3 коэффициентами
Figure 00000037
.
В описанных выше вариантах осуществления предполагается, что все вертикальные и горизонтальные опорные пиксели {P(i, 0):0≤i≤2N}∪{P(0, j):0≤j≤2N} доступны для предсказания. Опорные пиксели могут быть не доступны, если целевой блок расположен на границе секции или кадра. Если вертикальные опорные пиксели {P(i, 0):0≤i≤2N} не доступны для предсказания, но горизонтальные опорные пиксели {P(0, j):0≤j≤2N} доступны, присваивание PC(i, 0)=PC(0,1), ∀1≤i≤2N выполняется для формирования вертикальных опорных пикселей для предсказания. Если горизонтальные опорные пиксели {P(0, j):0≤i≤2N} не доступны для предсказания, но вертикальных опорные пиксели {P(i, j):0≤j<2N) доступны, присваивание PC(0, j)= PC(1,0), ∀1≤i≤2N выполняется для формирования горизонтальных опорных пикселей для предсказания. Если для предсказания не доступны ни вертикальные опорные пиксели, ни горизонтальные опорные пиксели, присвоение PC(i, 0)= PC(0, j)=(1 <<(Nb-1)), ∀1≤i, j≤2N выполняется для формирования и вертикальных, и горизонтальных опорных пикселей. В уравнении Nb представляет битовую глубину, используемую для представления пиксельных значений.
В варианте осуществления настоящего изобретения подобно блокам предсказания, сформированным в других режимах предсказания, блок предсказания, сформированный в планарном режиме используется для получения разности PR(1:N, 1:N), которая преобразовывается модулем 405 преобразования и квантуется модулем 406 квантования. Преобразованная и квантованная разность PT(1:N, 1:N) сообщается в битовом потоке декодеру. Кроме того, преобразованная и квантованная разность PT(1:N, 1:N) подвергается обратному преобразованию и обратному квантованию посредством модуля 410 обратного преобразования и модуля 411 обратного квантования для получения сжатой разности PQ(1:N, 1:N), которая сохраняется в памяти 403 кадра для использования в предсказании последующих целевых блоков.
Вся преобразованная и квантованная разность PT(1:N, 1:N) может быть сообщена в битовом потоке декодеру. В качестве альтернативы, только часть разности PT(1:K, 1:K) может быть сообщена в битовом потоке декодеру. K меньше N (K<N) и установлено равным предварительно определенному значению, например, 1. Значение K может быть сообщено в битовом потоке декодеру. Если декодер принимает только часть разности PT(1:K, 1:K), он декодирует часть разности и устанавливает 0 в оставшуюся часть разности. Хотя только часть разности сообщается декодеру, вся разность PT(1:N, 1:N) подвергается обратному преобразованию и квантованию для получения сжатой разности PQ(1:N, 1:N) с целью предсказания последующих целевых блоков.
Далее, в другом варианте осуществления настоящего изобретения параметр квантования адаптивно изменяется для квантования разности, сформированной в планарным режиме. Планарный режим применяется к блоку с плавным изображением, пиксельные значения которого постепенно изменяются с малым планарным градиентом. Разность из такого плавного блока имеет тенденцию квантоваться в нулевое значение со средним или грубым параметром квантования. Чтобы гарантировать, что при квантовании получаются отличные от нуля коэффициенты, в варианте осуществления настоящего изобретения параметр квантования переключается на более точный параметр квантования, когда квантуется разность, сформированная в планарном режиме. Параметр квантования (QPplanar), используемый для квантования разности, сформированной в планарном режиме, может быть определен с помощью базового параметра квантования (QPbaseP). Параметр QPbaseP может быть установлен равным предварительно определенному значению, представляющему более точный параметр квантования. Если параметр QPbaseP не известен декодеру, он может быть сообщен в битовом потоке декодеру или, более определенно, сообщен в заголовке секции или в наборе параметров изображения, как определено в стандарте H.264/AVC.
В варианте осуществления настоящего изобретения параметр QPPlanar просто устанавливается равным QPbaseP (QPPlanar = QPbaseP). Параметр QPPlanar может быть задан с помощью суммы QPbaseP и QPN (QPPlanar = QPbaseP + QPN), где QPN определяется с использованием таблицы поиска, которая перечисляет значения QPN относительно значений N. В качестве альтернативы параметр QPPlanar может быть определен как QPPlanar = QPbaseP + QPdiff(N). QPdiff(N) является функцией значения N и сообщается в битовом потоке декодеру или, более определенно, сообщается в заголовке секции или в наборе параметров изображения, как определено в стандарте H.264/AVC. Декодер определяет QPdiff(N) из битового потока для каждого из значений N, поддерживаемого в его схеме видеокодека.
В другом варианте осуществления настоящего изобретения посредством добавления дифференциальный параметра квантования (QPdelta) параметр QPbaseP модифицируется как QPbaseP = QPbaseP + QPdelta. Параметр QPdelta является параметром квантования, определенном из пространственной активности в блоке или группе блоков, для корректировки параметра QPbaseP, адаптивной по отношению к пространственной активности. QPdelta сообщается в битовом потоке декодеру. Поскольку параметр QPdelta определяется из пространственной активности в блоке, он может стать нулем в зависимости от содержания изображения в блоке и не влиять на QPbaseP для планарного режима предсказания.
Далее, в другом варианте осуществления настоящего изобретения параметр QPPlanar определяется с помощью нормального параметра квантования QPnormal, который используется для квантования разностей, сформированных в режимах предсказания, отличающихся от планарного режима. В таком варианте осуществления QPPlanar определяется согласно одному из следующих пяти вариантов:
1. QPPlanar = QPnormal.
2. QPPlanar = QPnormal + QPN, где QPN определяется из таблицы поиска, которая перечисляет значения QPN относительно значений N.
3. QPPlanar = QPnormal + QPdiff(N), где QPdiff(N) - функция значения N и сообщается в битовом потоке декодеру.
4. QPPlanar = QPnormal + QPdelta, где QPdelta - параметр квантования, определенный из пространственной активности в блоке или группе блоков, для адаптивной корректировки параметра QPnormal и сообщается в битовом потоке декодеру.
5. QPPlanar = QPnormal + QPN + QPdelta.
В другом варианте осуществления настоящего изобретения модуль 405 преобразования и модуль 410 обратного преобразования используют вторичный набор ядер прямого и обратного преобразования (GF H и GI H) для прямого и обратного преобразования разности, сформированной в планарном режиме, вместо использования первичного набора ядер прямого и обратного преобразования (HF H и HI H). Первичный набор ядер преобразования используется для преобразования разностей, сформированных в режимах предсказания, отличающихся от планарного режима, и подходит для блоков, в которых имеется высокочастотная энергия. С другой стороны, блоки, которые должны быть подвергнуты планарному режиму предсказания, имеют в себе низкую пространственную активность, и им нужны ядра преобразования, адаптированные к блокам с плавными изображениями. В этом варианте осуществления модуль 405 преобразования и модуль 410 обратного преобразования переключаются между первичным набором ядер преобразования и вторичным набором ядер преобразования, как показано на Фиг.12, и используют первичный набор ядер преобразования при преобразовании разностей, сформированных в режимах предсказания, отличающихся от планарного режима, тогда как используют вторичный набор ядер преобразования при преобразовании разностей, сформированных в планарном режиме предсказания. Однако следует отметить, что вторичный набор ядер преобразования не ограничен преобразованием разностей, сформированных в планарном режиме предсказания, и может использоваться для преобразования разностей, сформированных в режимах предсказания, отличающихся от планарного режима.
Вторичный набор прямого ядра преобразования (GF H) может являться аппроксимацией с фиксированной точкой, полученной из одного из следующих вариантов:
Вариант 1 (DST, тип 7):
Figure 00000038
Вариант 2 (DST, тип 4):
Figure 00000039
Вариант 3 (DCT, тип 2, обычно известен как DCT):
Figure 00000040
Вариант 4:
Figure 00000041
, если ядра преобразования с размером 2N×2N (HF 2N), поддерживаются видеокодеком. В ином случае
Figure 00000042
. Таким образом, в варианте 4, если самые маленькие и самые большие размеры преобразования, поддерживаемые в видеокодеке, представляют собой 4×4 и 32×32, вторичный набор ядра преобразования для размера 4×4 получается из первичного набора ядра преобразования для размера 8×8. Аналогичным образом, вторичный набор ядра преобразования для размера 8×8 получается из первичного набора ядра преобразования для размера 16×16, и вторичный набор ядра преобразования для размера 16×16 получается из первичного набора ядра преобразования для размера 32×32. Однако из-за ограничения размера, в котором самый большой поддерживаемый размер представляет 32×32, вторичный набор ядра преобразования для размера 32×32 получается из первичного набора ядра преобразования для размера 32×32.
Масштабный коэффициент ki может быть задан таким образом, чтобы удовлетворять
Figure 00000043
. Масштабный коэффициент ki может использоваться для корректировки параметра квантования, как используется в стандарте H.264/AVC. Вторичный набор ядра обратного преобразования GI N может быть получен с использованием прямого ядра преобразования
Figure 00000044
, где IN представляет единичную матрицу с размером N×N.
Если первичный набор ядра преобразования удовлетворяет свойству
Figure 00000045
, предпочтительным является вторичный набор ядра преобразования, определенный в варианте 4. Вариант 4 является выгодным в том, что вторичный набор ядра преобразования не должен быть сохранен отдельно от первичного набора ядра преобразования, поскольку вторичный набор может быть получен из первичного набора. Если первичный набор ядра преобразования для размера 2N×2N (HF 2N) является аппроксимацией DCT типа 2, приведенное выше свойство удовлетворено, и вторичный набор ядра преобразования для размера N×N (GF N) может являться приближением DST типа 4. Если первичный набор ядра преобразования не удовлетворяет приведенному выше свойству, предпочтительным является вторичный набор ядра преобразования, определенный в варианте 1.
Планарный режим предсказания может быть выбран одним из двух способов. В первом способе блок предсказания, сформированный в планарном режиме предсказания, оценивается на эффективность кодирования наряду с блоками предсказания, сформированными в других режимах предсказания. Если блок предсказания, сформированный в планарном режиме, проявляет наилучшую эффективность кодирования среди блоков предсказания, выбирается планарный режим. В качестве альтернативы, на эффективность кодирования оценивается только один планарный режим. Планарный режим предсказания предпочтителен для области, в которой изображение является плавным, и его планарный градиент является малым. В соответствии с этим содержание целевого блока анализируется, чтобы увидеть количество высокочастотной энергии в блоке и разрывы изображения вдоль краев блока. Если количество высокочастотной энергии ниже порога, и никакие существенные разрывы не найдены вдоль краев блока, выбирается планарный режим. В ином случае блоки предсказания, сформированные в других режимах предсказания, оцениваются для выбора одного режима. В обоих случаях выбор планарного режима предсказания сообщается в битовом потоке декодеру.
Принимая во внимание, что по прочтении предшествующего описания многие изменения и модификации настоящего изобретения без сомнения будут очевидны специалистам в области техники, следует подразумевать, что любой конкретный вариант осуществления, показанный и описанный посредством иллюстрации, никоим образом не предназначен для рассмотрения как ограничивающий. Таким образом, ссылки на подробные описания различных вариантов осуществления не предназначены для ограничения объема формулы изобретения, которая сама по себе излагает только те признаки, которые расцениваются как существенные для изобретения.

Claims (16)

1. Способ декодирования видео для предсказания пиксельных значений каждого целевого пикселя в целевом блоке, причем способ содержит компьютерно-исполняемые этапы, исполняемые процессором видеодекодера, на которых:
получают режим предсказания, выбранный кодером из множества различных режимов внутрикадрового предсказания, включающих в себя режим DC, направленные режимы и планарный режим;
вычисляют первое значение предсказания каждого целевого пикселя с использованием линейной интерполяции между пиксельным значением пикселя горизонтальной границы в том же самом горизонтальном положении, что и каждый целевой пиксель из множества пикселей горизонтальной границы на верхней стороне целевого блока, и пиксельным значением одного пикселя вертикальной границы из множества пикселей вертикальной границы на левой стороне целевого блока, когда режим предсказания является планарным режимом;
вычисляют второе значение предсказания каждого целевого пикселя с использованием линейной интерполяции между пиксельным значением пикселя вертикальной границы в том же самом вертикальном положении, что и каждый целевой пиксель из множества пикселей вертикальной границы, и пиксельным значением одного пикселя горизонтальной границы из множества пикселей горизонтальной границы, когда режим предсказания является планарным режимом; и
усредняют первое значение предсказания и второе значение предсказания каждого целевого пикселя для получения каждого пиксельного значения предсказания в блоке предсказания, когда режим предсказания является планарным режимом.
2. Способ по п.1, дополнительно содержащий этапы, на которых:
декодируют разность, сообщенную от кодера, которая была сформирована в планарном режиме в кодере; и
добавляют декодированную разность к блоку предсказания для воссоздания данных изображения.
3. Видеодекодер, который предсказывает пиксельные значения каждого целевого пикселя в целевом блоке, содержащий процессор компьютерной системы и память, которая хранит программы, исполняемые процессором, для:
получения режима предсказания, выбранного кодером из множества различных режимов внутрикадрового предсказания, включающих в себя режим DC, направленные режимы и планарный режим;
вычисления первого значения предсказания каждого целевого пикселя с использованием линейной интерполяции между пиксельным значением пикселя горизонтальной границы в том же самом горизонтальном положении, что и каждый целевой пиксель из множества пикселей горизонтальной границы на верхней стороне целевого блока, и пиксельным значением одного пикселя вертикальной границы из множества пикселей вертикальной границы на левой стороне целевого блока, когда режим предсказания является планарным режимом;
вычисления второго значения предсказания каждого целевого пикселя с использованием линейной интерполяции между пиксельным значением пикселя вертикальной границы в том же самом вертикальном положении, что и каждый целевой пиксель из множества пикселей вертикальной границы, и пиксельным значением одного пикселя горизонтальной границы из множества пикселей горизонтальной границы, когда режим предсказания является планарным режимом; и
усреднения первого значения предсказания и второго значения предсказания каждого целевого пикселя для получения каждого пиксельного значения предсказания в блоке предсказания, когда режим предсказания является планарным режимом.
4. Видеодекодер по п.3, в котором процессор дополнительно:
декодирует разность, сообщенную от кодера; и
добавляет декодированную разность к блоку предсказания.
RU2016136095A 2010-12-21 2016-09-07 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений RU2643504C1 (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201061425670P 2010-12-21 2010-12-21
US61/425,670 2010-12-21
US201161449528P 2011-03-04 2011-03-04
US61/449,528 2011-03-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
RU2015129679/08A Division RU2600536C2 (ru) 2010-12-21 2011-12-21 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2017142964A Division RU2673011C1 (ru) 2010-12-21 2017-12-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений

Publications (1)

Publication Number Publication Date
RU2643504C1 true RU2643504C1 (ru) 2018-02-01

Family

ID=46314437

Family Applications (9)

Application Number Title Priority Date Filing Date
RU2013133861/08A RU2562762C2 (ru) 2010-12-21 2011-12-21 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2015129679/08A RU2600536C2 (ru) 2010-12-21 2011-12-21 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2016136095A RU2643504C1 (ru) 2010-12-21 2016-09-07 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2017142964A RU2673011C1 (ru) 2010-12-21 2017-12-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139333A RU2694013C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139329A RU2694012C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139331A RU2694144C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139332A RU2696318C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2019122170A RU2713610C1 (ru) 2010-12-21 2019-07-15 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений

Family Applications Before (2)

Application Number Title Priority Date Filing Date
RU2013133861/08A RU2562762C2 (ru) 2010-12-21 2011-12-21 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2015129679/08A RU2600536C2 (ru) 2010-12-21 2011-12-21 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений

Family Applications After (6)

Application Number Title Priority Date Filing Date
RU2017142964A RU2673011C1 (ru) 2010-12-21 2017-12-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139333A RU2694013C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139329A RU2694012C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139331A RU2694144C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2018139332A RU2696318C1 (ru) 2010-12-21 2018-11-08 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
RU2019122170A RU2713610C1 (ru) 2010-12-21 2019-07-15 Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений

Country Status (16)

Country Link
US (8) US10863195B2 (ru)
EP (9) EP3373580B1 (ru)
JP (9) JP5625124B2 (ru)
KR (9) KR102062568B1 (ru)
CN (8) CN104811702B (ru)
AU (1) AU2011349244C1 (ru)
BR (1) BR112013016043B1 (ru)
CA (8) CA2900863C (ru)
ES (9) ES2770312T3 (ru)
MX (7) MX351231B (ru)
PL (9) PL3370420T3 (ru)
PT (9) PT3373581T (ru)
RU (9) RU2562762C2 (ru)
SG (1) SG191267A1 (ru)
TR (2) TR201809780T4 (ru)
WO (1) WO2012088211A1 (ru)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SI3745721T1 (sl) * 2010-05-25 2022-04-29 Lg Electronics Inc. Nov planarni način napovedovanja
KR20120016991A (ko) * 2010-08-17 2012-02-27 오수미 인터 프리딕션 방법
WO2012081895A1 (ko) 2010-12-13 2012-06-21 한국전자통신연구원 인트라 예측 방법 및 그 장치
US9462272B2 (en) 2010-12-13 2016-10-04 Electronics And Telecommunications Research Institute Intra prediction method and apparatus
PT3373581T (pt) * 2010-12-21 2020-01-27 Ntt Docomo Inc Codificação com intra-predição melhorada utilizando representações planares
WO2012115420A2 (ko) * 2011-02-23 2012-08-30 엘지전자 주식회사 필터링을 이용한 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
EP2705668A1 (en) * 2011-07-12 2014-03-12 Huawei Technologies Co., Ltd Pixel-based intra prediction for coding in hevc
US10645398B2 (en) 2011-10-25 2020-05-05 Texas Instruments Incorporated Sample-based angular intra-prediction in video coding
US9667965B2 (en) * 2012-06-25 2017-05-30 Industry-University Cooperation Foundation Hanyang University Video encoding and decoding method
KR101307257B1 (ko) * 2012-06-28 2013-09-12 숭실대학교산학협력단 영상의 인트라 예측 장치
US9277212B2 (en) * 2012-07-09 2016-03-01 Qualcomm Incorporated Intra mode extensions for difference domain intra prediction
WO2015056945A1 (ko) * 2013-10-14 2015-04-23 삼성전자 주식회사 깊이 인트라 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
WO2015056941A1 (ko) * 2013-10-14 2015-04-23 한국전자통신연구원 다계층 기반의 영상 부호화/복호화 방법 및 장치
US10091519B2 (en) 2013-10-14 2018-10-02 Electronics And Telecommunications Research Institute Multilayer-based image encoding/decoding method and apparatus
KR101994599B1 (ko) * 2013-10-25 2019-06-28 미디어텍 인크. 전송 동기화 이벤트에 따라 압축된 픽처의 전송을 제어하는 방법 및 장치
WO2016200235A1 (ko) * 2015-06-11 2016-12-15 엘지전자(주) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN108353193B (zh) * 2015-08-19 2022-07-15 Lg 电子株式会社 基于多个基于图的模型处理视频数据的方法和设备
CN110199523B (zh) 2017-01-13 2023-06-13 Vid拓展公司 用于帧内平面编码的预测方法
WO2018174457A1 (ko) * 2017-03-22 2018-09-27 엘지전자(주) 영상 처리 방법 및 이를 위한 장치
CN110741642B (zh) * 2017-07-05 2021-12-24 华为技术有限公司 使用拟合平面和参考样本进行定向帧内预测的装置和方法
CN115037931A (zh) 2017-10-18 2022-09-09 韩国电子通信研究院 图像编码/解码方法和装置以及存储有比特流的记录介质
CA3210247A1 (en) * 2017-12-15 2019-06-20 Lg Electronics Inc. Image coding method on basis of transformation and device therefor
WO2019155866A1 (ja) 2018-02-06 2019-08-15 日本碍子株式会社 ガスセンサ
WO2019182468A1 (en) * 2018-03-22 2019-09-26 Huawei Technologies Co., Ltd. Apparatus and method for coding an image
CN111316641B (zh) * 2018-05-03 2022-08-09 Lg电子株式会社 根据块尺寸使用变换来解码图像的方法和设备
US10687081B2 (en) 2018-06-29 2020-06-16 Tencent America LLC Method, apparatus and medium for decoding or encoding
AU2019390215B2 (en) * 2018-11-26 2023-04-06 Huawei Technologies Co., Ltd. Method of intra predicting a block of a picture
EP3886435A4 (en) * 2019-06-25 2022-01-26 Guangdong Oppo Mobile Telecommunications Corp., Ltd. MAPPING PROCESS, ENCODER, DECODER AND COMPUTER STORAGE MEDIA
US11313048B2 (en) 2019-06-27 2022-04-26 Prc-Desoto International, Inc. Addition polymer for electrodepositable coating compositions
US11485874B2 (en) 2019-06-27 2022-11-01 Prc-Desoto International, Inc. Addition polymer for electrodepositable coating compositions
US11274167B2 (en) * 2019-06-27 2022-03-15 Prc-Desoto International, Inc. Carbamate functional monomers and polymers and use thereof
CN117083855A (zh) * 2021-03-31 2023-11-17 瑞典爱立信有限公司 平滑表面预测
US20220345690A1 (en) * 2021-04-16 2022-10-27 Tencent America LLC Harmonized Design Among Multiple Reference Line Intra Prediction, Transform Partitioning and Transform Kernels

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6061474A (en) * 1995-06-22 2000-05-09 Canonkabushiki Kaisha Image processing apparatus and method
RU2201654C2 (ru) * 1997-12-23 2003-03-27 Томсон Лайсенсинг С.А. Способ низкошумового кодирования и декодирования
US20050129130A1 (en) * 2003-12-10 2005-06-16 Microsoft Corporation Color space coding framework
US20060268990A1 (en) * 2005-05-25 2006-11-30 Microsoft Corporation Adaptive video encoding using a perceptual model
US20090310677A1 (en) * 2006-07-28 2009-12-17 Kabushiki Kaisha Toshiba Image encoding and decoding method and apparatus
US20100118943A1 (en) * 2007-01-09 2010-05-13 Kabushiki Kaisha Toshiba Method and apparatus for encoding and decoding image
RU2406254C2 (ru) * 2006-03-29 2010-12-10 Квэлкомм Инкорпорейтед Видеообработка с масштабируемостью

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5631318A (en) 1979-08-22 1981-03-30 Matsushita Electric Works Ltd Leakage breaker
JPH0595538A (ja) 1991-10-02 1993-04-16 Toshiba Corp 画像符号化装置
US6950469B2 (en) * 2001-09-17 2005-09-27 Nokia Corporation Method for sub-pixel value interpolation
US20050013498A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
TW200808067A (en) 2006-07-31 2008-02-01 Univ Nat Cheng Kung Prediction module
EP2073557B1 (en) * 2006-10-10 2017-03-29 Nippon Telegraph and Telephone Corporation Intra prediction encoding control method and device, its program, and storage medium containing program
FR2908007A1 (fr) 2006-10-31 2008-05-02 Thomson Licensing Sas Procede de codage d'une sequence d'images
EP3002939A3 (en) 2006-11-24 2016-06-08 NEC Corporation Coding and decoding device, coding and decoding method and program
CN103338365B (zh) * 2007-06-29 2017-04-12 夏普株式会社 图像编码装置、图像编码方法、图像译码装置、图像译码方法
KR101517768B1 (ko) * 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP5187062B2 (ja) * 2008-08-15 2013-04-24 富士通株式会社 動画像符号化装置および動画像符号化方法
EP2173101A3 (en) * 2008-10-06 2010-08-18 LG Electronics Inc. A method and an apparatus for decoding a video signal
KR101647376B1 (ko) * 2009-03-30 2016-08-10 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US9113168B2 (en) * 2009-05-12 2015-08-18 Lg Electronics Inc. Method and apparatus of processing a video signal
CN106454356B (zh) 2010-06-17 2019-11-08 夏普株式会社 解码装置及编码装置
KR101530284B1 (ko) 2010-07-16 2015-06-19 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
PT3373581T (pt) * 2010-12-21 2020-01-27 Ntt Docomo Inc Codificação com intra-predição melhorada utilizando representações planares

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6061474A (en) * 1995-06-22 2000-05-09 Canonkabushiki Kaisha Image processing apparatus and method
RU2201654C2 (ru) * 1997-12-23 2003-03-27 Томсон Лайсенсинг С.А. Способ низкошумового кодирования и декодирования
US20050129130A1 (en) * 2003-12-10 2005-06-16 Microsoft Corporation Color space coding framework
US20060268990A1 (en) * 2005-05-25 2006-11-30 Microsoft Corporation Adaptive video encoding using a perceptual model
RU2406254C2 (ru) * 2006-03-29 2010-12-10 Квэлкомм Инкорпорейтед Видеообработка с масштабируемостью
US20090310677A1 (en) * 2006-07-28 2009-12-17 Kabushiki Kaisha Toshiba Image encoding and decoding method and apparatus
US20100118943A1 (en) * 2007-01-09 2010-05-13 Kabushiki Kaisha Toshiba Method and apparatus for encoding and decoding image

Also Published As

Publication number Publication date
CA3029038A1 (en) 2012-06-28
RU2696318C1 (ru) 2019-08-01
US20140341281A1 (en) 2014-11-20
CA2822391A1 (en) 2012-06-28
CN104796714B (zh) 2018-03-27
KR101838123B1 (ko) 2018-03-13
JP6851450B2 (ja) 2021-03-31
ES2752723T3 (es) 2020-04-06
JP6615290B2 (ja) 2019-12-04
CN104796714A (zh) 2015-07-22
US10897630B2 (en) 2021-01-19
KR101838122B1 (ko) 2018-03-13
EP3373580B1 (en) 2019-12-11
KR101838124B1 (ko) 2018-03-13
ES2767966T3 (es) 2020-06-19
US10771812B2 (en) 2020-09-08
RU2673011C1 (ru) 2018-11-21
PT3370421T (pt) 2020-02-28
CA3029047C (en) 2020-07-21
EP3370420A1 (en) 2018-09-05
CN104811715B (zh) 2018-02-23
EP2996334B1 (en) 2018-07-11
CN104796715B (zh) 2018-03-27
US20190052901A1 (en) 2019-02-14
KR101640873B1 (ko) 2016-07-19
CN104796716B (zh) 2017-12-29
BR112013016043B1 (pt) 2019-10-08
PL3373580T3 (pl) 2020-05-18
EP2996334A1 (en) 2016-03-16
CN104811702A (zh) 2015-07-29
TR201811262T4 (tr) 2018-08-27
US20190075318A1 (en) 2019-03-07
MX2019003463A (es) 2022-06-22
EP3370421B1 (en) 2020-01-22
ES2773887T3 (es) 2020-07-15
PT3373582T (pt) 2020-02-14
MX363570B (es) 2019-03-27
US20170026661A1 (en) 2017-01-26
CA3029042C (en) 2021-06-15
CA2900863A1 (en) 2012-06-28
AU2011349244C1 (en) 2016-02-18
CA3029043C (en) 2020-06-30
CN104811713A (zh) 2015-07-29
JP2020018022A (ja) 2020-01-30
KR101961783B1 (ko) 2019-03-25
RU2694144C1 (ru) 2019-07-09
JP2014241643A (ja) 2014-12-25
US10834423B2 (en) 2020-11-10
CA2900863C (en) 2019-02-26
JP6242438B2 (ja) 2017-12-06
KR20160085376A (ko) 2016-07-15
JP2018186581A (ja) 2018-11-22
KR20130128441A (ko) 2013-11-26
KR102062568B1 (ko) 2020-01-06
KR101839466B1 (ko) 2018-03-16
PL2993903T3 (pl) 2018-09-28
JP2020018023A (ja) 2020-01-30
MX337948B (es) 2016-03-29
PT3373579T (pt) 2019-10-25
EP3373580A1 (en) 2018-09-12
CA3029045C (en) 2021-06-15
JP2018019445A (ja) 2018-02-01
KR20180030244A (ko) 2018-03-21
CA3029045A1 (en) 2012-06-28
EP3373582B1 (en) 2020-01-22
US20190052899A1 (en) 2019-02-14
RU2562762C2 (ru) 2015-09-10
CN104811713B (zh) 2018-01-02
CN104796715A (zh) 2015-07-22
KR101949720B1 (ko) 2019-02-19
EP2656507A4 (en) 2015-07-08
PT2656507T (pt) 2017-06-15
EP2993903B1 (en) 2018-06-20
PL3373582T3 (pl) 2020-07-13
RU2694013C1 (ru) 2019-07-08
ES2627907T3 (es) 2017-08-01
MX2019003464A (es) 2022-06-22
CN104811714B (zh) 2018-06-29
KR20180028564A (ko) 2018-03-16
EP3373581B1 (en) 2019-12-18
US10841611B2 (en) 2020-11-17
JP6953497B2 (ja) 2021-10-27
PL3373581T3 (pl) 2020-05-18
ES2767926T3 (es) 2020-06-19
CN104796716A (zh) 2015-07-22
ES2681838T3 (es) 2018-09-17
US10205963B2 (en) 2019-02-12
WO2012088211A1 (en) 2012-06-28
RU2015129679A (ru) 2015-11-27
RU2013133861A (ru) 2015-01-27
ES2770312T3 (es) 2020-07-01
PL2996334T3 (pl) 2018-11-30
PT2996334T (pt) 2018-09-28
EP3370420B1 (en) 2019-10-02
EP3373581A1 (en) 2018-09-12
US10805632B2 (en) 2020-10-13
CA3029042A1 (en) 2012-06-28
TR201809780T4 (tr) 2018-07-23
KR20160086972A (ko) 2016-07-20
PT3370420T (pt) 2019-10-31
CN103270700A (zh) 2013-08-28
AU2011349244A1 (en) 2013-06-20
EP2656507B1 (en) 2017-05-24
BR112013016043A2 (pt) 2018-11-06
JP2016184970A (ja) 2016-10-20
CA3029038C (en) 2020-07-07
MX2019003465A (es) 2022-06-22
KR20160085922A (ko) 2016-07-18
JP2014504107A (ja) 2014-02-13
CN104811715A (zh) 2015-07-29
PT2993903T (pt) 2018-07-25
RU2600536C2 (ru) 2016-10-20
JP2015149763A (ja) 2015-08-20
AU2011349244A8 (en) 2013-07-04
US20190052898A1 (en) 2019-02-14
CN104811702B (zh) 2018-04-20
ES2682102T3 (es) 2018-09-18
JP2020018024A (ja) 2020-01-30
CN104811714A (zh) 2015-07-29
US20190052900A1 (en) 2019-02-14
CA3029043A1 (en) 2012-06-28
KR20190033654A (ko) 2019-03-29
CN103270700B (zh) 2015-05-06
KR20180029108A (ko) 2018-03-19
PL3370420T3 (pl) 2020-03-31
CA3029046C (en) 2020-07-14
PL2656507T3 (pl) 2017-08-31
RU2694012C1 (ru) 2019-07-08
EP3370421A1 (en) 2018-09-05
JP5960316B2 (ja) 2016-08-02
PL3373579T3 (pl) 2019-12-31
EP3373582A1 (en) 2018-09-12
MX351231B (es) 2017-10-06
US20190052902A1 (en) 2019-02-14
EP2993903A1 (en) 2016-03-09
JP5625124B2 (ja) 2014-11-12
EP2656507A1 (en) 2013-10-30
PT3373580T (pt) 2020-01-21
KR20160086974A (ko) 2016-07-20
RU2713610C1 (ru) 2020-02-05
EP3373579B1 (en) 2019-09-11
ES2750325T3 (es) 2020-03-25
AU2011349244B2 (en) 2015-05-07
CA3029047A1 (en) 2012-06-28
PT3373581T (pt) 2020-01-27
PL3370421T3 (pl) 2020-06-01
US10863195B2 (en) 2020-12-08
SG191267A1 (en) 2013-07-31
EP3373579A1 (en) 2018-09-12
KR101962284B1 (ko) 2019-03-26
US10856008B2 (en) 2020-12-01
CA2822391C (en) 2016-08-02
CA3029046A1 (en) 2012-06-28
JP5732582B2 (ja) 2015-06-10
MX2013007169A (es) 2013-08-01
JP6397555B2 (ja) 2018-09-26

Similar Documents

Publication Publication Date Title
RU2713610C1 (ru) Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
AU2019210559A1 (en) Enhanced intra-prediction coding using planar representations