RU2341034C1 - Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий - Google Patents
Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий Download PDFInfo
- Publication number
- RU2341034C1 RU2341034C1 RU2007125163/09A RU2007125163A RU2341034C1 RU 2341034 C1 RU2341034 C1 RU 2341034C1 RU 2007125163/09 A RU2007125163/09 A RU 2007125163/09A RU 2007125163 A RU2007125163 A RU 2007125163A RU 2341034 C1 RU2341034 C1 RU 2341034C1
- Authority
- RU
- Russia
- Prior art keywords
- block
- mode
- boundary
- filtering
- internal
- Prior art date
Links
- 230000000903 blocking effect Effects 0.000 title claims abstract description 19
- 238000001914 filtration Methods 0.000 claims abstract description 64
- 238000000034 method Methods 0.000 claims description 57
- 238000005516 engineering process Methods 0.000 abstract description 9
- 230000000694 effects Effects 0.000 abstract description 6
- 238000007906 compression Methods 0.000 abstract description 4
- 230000006835 compression Effects 0.000 abstract description 4
- 238000011161 development Methods 0.000 abstract description 2
- 239000000126 substance Substances 0.000 abstract 1
- 230000033001 locomotion Effects 0.000 description 51
- 238000013139 quantization Methods 0.000 description 24
- 239000013598 vector Substances 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 9
- 239000000470 constituent Substances 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 230000009466 transformation Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 238000005352 clarification Methods 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000010187 selection method Methods 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000010561 standard procedure Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B43—WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
- B43L—ARTICLES FOR WRITING OR DRAWING UPON; WRITING OR DRAWING AIDS; ACCESSORIES FOR WRITING OR DRAWING
- B43L21/00—Blackboard or slate cleaning devices
- B43L21/04—Wiper holders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- B08B1/143—
-
- B08B1/165—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B43—WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
- B43L—ARTICLES FOR WRITING OR DRAWING UPON; WRITING OR DRAWING AIDS; ACCESSORIES FOR WRITING OR DRAWING
- B43L19/00—Erasers, rubbers, or erasing devices; Holders therefor
- B43L19/0018—Erasers, rubbers, or erasing devices; Holders therefor with fluids
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B43—WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
- B43L—ARTICLES FOR WRITING OR DRAWING UPON; WRITING OR DRAWING AIDS; ACCESSORIES FOR WRITING OR DRAWING
- B43L19/00—Erasers, rubbers, or erasing devices; Holders therefor
- B43L19/04—Fibrous erasers
Abstract
Изобретение относится к технологии сжатия видео и, более конкретно, к фильтру устранения блочности, используемому в кодере/декодере многослойного видео. Техническим результатом является собственно создание способа выбора интенсивности фильтрации устранения блочности для кадра, содержащего множество блоков, который должным образом выбирает силу фильтра устранения блочности согласно тому, использует ли некоторый блок, к которому фильтр устранения блочности будет применяться, режим внутреннего базового слоя (BL) в кодировщике/декодере видео, базирующемся на множестве слоев. Предложен способ выбора интенсивности фильтрации устранения блочности для кадра, содержащего множество блоков, содержащий этапы: выбора текущего блока и соседнего блока, над которыми будет выполняться фильтрация для устранения блочности; оценки, были ли текущий блок и соседний блок кодированы с помощью режима внутреннего BL; и если, по меньшей мере, один из: текущий блок и соседний блок - кодирован с помощью режима, другого, нежели режим внутреннего BL, выбор заданной интенсивности фильтрации по отношению к границе между текущим блоком и соседним блоком; и если как текущий блок, так и соседний блок были кодированы с помощью режима внутреннего BL, выбор интенсивности фильтрации, которая ниже, чем интенсивность фильтрации, выбранная по отношению к границе. 2 н. и 11 з.п. ф-лы, 19 ил.
Description
Область техники, к которой относится изобретение
Настоящее изобретение относится к технологии сжатия видео и, более конкретно, к фильтру устранения блочности, используемому в кодировщике/декодере многослойного видео.
Уровень техники
С развитием технологий информации и связи, передачи данных мультимедиа увеличиваются в дополнение к передаче данных текста и речи. Существующие ориентированные на текст системы связи недостаточны для удовлетворения разнообразных желаний потребителей, и, таким образом, увеличиваются в объеме услуги мультимедиа, которые могут обеспечивать разнообразные формы информации, такие как текст, изображение, музыка и другие. Так как данные мультимедиа являются большими, для хранения и передачи данных мультимедиа требуются запоминающие устройства большой емкости и широкие полосы пропускания. Соответственно, требуются сжимающие технологии кодирования, чтобы передавать данные мультимедиа, которые включают в себя текст, изображения и аудиоданные.
Базовый принцип сжатия данных - это удалять избыточность данных. Данные могут сжиматься посредством удаления пространственной избыточности, такой как повторение одного и того же цвета или объекта в изображениях, временной избыточности, такой как маленькое изменение смежных кадров в кадрах движущегося изображения или непрерывное повторение звуков в звуковом сопровождении, и зрительной/воспринимаемой избыточности, которая учитывает нечувствительность зрения и восприятия людей к высоким частотам. В общем способе кодирования видео временная избыточность удаляется посредством временной фильтрации, базирующейся на компенсации движения, и пространственная избыточность удаляется посредством пространственного преобразования.
Чтобы передавать мультимедиа после удаления избыточности данных, требуются носители передачи, чьи производительности различаются. В настоящее время используемые носители передачи имеют разнообразные скорости передачи. Например, сеть связи сверхвысокой скорости может передавать несколько десятков мегабит данных в секунду и мобильная сеть связи имеет скорость передачи, равную 384 килобит в секунду. Чтобы поддерживать носители передачи в такой среде передачи и чтобы передавать мультимедиа со скоростью передачи, подходящей для среды передачи, наиболее подходящим является способ масштабируемого кодирования данных.
Этот способ кодирования делает возможным выполнять частичное декодирование одного сжатого битового потока на стороне декодера или предварительного декодера согласно скорости передачи битов, частоте ошибок и состоянию ресурсов системы. Декодер или предварительный декодер может восстанавливать последовательность мультимедиа, имеющую различающееся качество изображения, разрешение или частоту кадров, посредством принятия только части битового потока, кодированного с помощью способа масштабируемого кодирования.
По отношению к такому масштабируемому кодированию видео MPEG-21 (экспертная группа-21 по вопросам движущегося изображения) PART-13 уже продвинулась в своей работе по стандартизации. Конкретно, было сделано большое исследование для реализации масштабируемости в способе кодирования видео, базирующемся на множестве слоев. В качестве примера такого многослойного кодирования видео, многослойная структура компонуется из базового слоя, первого расширенного слоя и второго расширенного слоя, и соответствующие слои имеют разные разрешения QCIF, CIF и 2CIF, и разные частоты кадров.
Фиг. 1 показывает пример масштабируемого видеокодека, использующего многослойную структуру. В этом видеокодеке базовый слой установлен на QCIF (четвертной общий промежуточный формат) на 15 Гц (частота кадров), первый расширенный слой установлен на CIF (общий промежуточный формат) на 30 Гц, и второй расширенный слой установлен на SD (стандартная четкость) на 60 Гц.
В кодировании такого многослойного видеокадра может использоваться корреляция среди слоев. Например, некоторая область 12 видеокадра первого расширенного слоя эффективно кодируется через предсказание, основанное на соответствующей области 13 видеокадра базового слоя. Таким же способом область 11 видеокадра второго расширенного слоя может эффективно кодироваться через предсказание исходя из области 12 первого расширенного слоя. Если соответствующие слои многослойного видеокадра имеют разные разрешения, изображение базового слоя должно дискретизироваться с повышением до выполнения предсказания.
В нынешнем стандарте MPEG-21 масштабируемого кодирования видео (ниже указываемом как стандарт SVC) исследование находится на пути к реализации многослойного видеокодека, как в примере, показанном на фиг. 1, базирующейся на существующем H.264/AVC (улучшенное кодирование видео).
Однако H.264 использует преобразование DCT в качестве способа пространственного преобразования, и в базирующемся на DCT кодеке происходят нежелательные артефакты блочности и эффект блочности по мере того, как увеличивается скорость сжатия. Имеются две причины артефактов блочности.
Первая причина - это базирующееся на блоках целочисленное преобразование DCT. Это из-за того, что прерывность возникает на границе блоков вследствие квантования коэффициентов DCT, получающихся из преобразования DCT. Так как H.264 использует преобразование DCT размера 4×4, который является относительно маленьким размером, проблема прерывности может быть до некоторой степени уменьшена, но она не может быть полностью устранена.
Вторая причина - это предсказание компенсации движения. Компенсированный по движению блок генерируется посредством копирования пиксельных данных, интерполированных из другого положения другого опорного кадра. Так как эти наборы данных не совпадают точно друг с другом, на крае копируемого блока возникает прерывность. Также, в течение процесса копирования эта прерывность передается компенсированному по движению блоку.
В последнее время были разработаны несколько технологий для решения эффекта блочности. Чтобы уменьшать эффект блочности, H.263 и MPEG-4 предложили технологию компенсации движения перекрывающихся блоков (OBMC). Даже хотя OBMC является эффективной в уменьшении артефактов блочности, она имеет проблему в том, что требуется больший объем вычислений для предсказания движения, которое выполняется на стороне кодировщика. Соответственно, H.264 использует фильтр устранения блочности, чтобы удалять артефакты блочности и улучшать качество изображения.
Обработка фильтром блочности выполняется на стороне кодировщика или декодера до того, как макроблок восстанавливается, и после того, как выполняется его обратное преобразование. В этом случае, сила фильтра устранения блочности может регулироваться чтобы подходить для различных условий.
Фиг. 2 - это блок-схема последовательности операций, объясняющая способ выбора силы фильтра устранения блочности согласно общепринятому стандарту H.264. Здесь, блок q и блок p - это два блока, которые определяют границу блока, к которой будет применяться фильтр устранения блочности, и представляют текущий блок и соседний блок. Пять типов сил фильтра (показываемые как Bs=0 по 4) устанавливаются согласно тому, является ли блок p или q блоком с внутренним кодированием, располагается ли целевая выборка на границе макроблока, является ли блок p или q кодированным блоком, и другим. Если Bs=0, это означает, что фильтр устранения блочности не применяется к соответствующему целевому пикселю.
Другими словами, согласно стандартному способу для выбора силы фильтра устранения блочности сила фильтра базируется на том, являются ли текущий блок, в котором существует целевая выборка, и соседний блок внутренне кодированными, межкадровым образом кодированными или некодированными. Сила фильтра также базируется на том, существует ли целевая выборка на границе 4×4 блока или на границе 16×16 блока.
Раскрытие изобретения
Техническая проблема
Хотя в настоящее время развивающийся стандарт SVC принимает технологию, которая предсказывает кадр в текущем слое, используя кадр, сгенерированный в более низком слое, как показано на фиг. 1, т.е. режим внутреннего BL (базового слоя), он следует общепринятому стандарту H.264, как показано на фиг. 2, когда выбирается сила фильтра устранения блочности.
Однако так как фильтр устранения блочности применяется к слоям в кодировщике/декодере видео, базирующемся на множестве слоев, является неразумным сильно применять фильтр устранения блочности снова к кадру, предоставленному из более низкого слоя, чтобы эффективно предсказывать кадр текущего слоя. Тем не менее, в текущем стандарте SVC, режим внутреннего BL содержится как тип внутреннего кодирования, и способ для выбора силы фильтра, как показано на фиг. 2, применяется как есть. Никак не учитывается то, принадлежит ли текущий блок макроблоку внутреннего BL, когда выбирается сила фильтра.
Известно, что качество изображения восстановленного видео в значительной степени улучшается, когда сила фильтра является подходящей для соответствующих условий и фильтр устранения блочности применяется при подходящей силе фильтра. Соответственно, необходимо исследовать технологии, которые должным образом выбирают силу фильтра при учете режима внутреннего BL в течение операции кодирования/декодирования многослойного видео.
Техническое решение
Соответственно, настоящее изобретение было создано, чтобы обратиться к вышеупомянутым проблемам, возникающим в предшествующем уровне техники, и одним аспектом настоящего изобретения является предоставить должную силу фильтра устранения блочности согласно тому, использует ли некоторый блок, к которому фильтр устранения блочности будет применяться, режим внутреннего BL в кодировщике/декодере видео, базирующемся на множестве слоев.
Дополнительные преимущества, цели и признаки этого изобретения будут излагаться частично в описании, которое следует, и частично станут видны специалистам в данной области техники после изучения последующего или могут быть узнаны из использования этого изобретения на практике.
Для достижения этих целей предоставляется способ выбора силы фильтра устранения блочности согласно вариантам осуществления настоящего изобретения, содержащий (a) выбор текущего блока, для которого будет выполняться фильтрация устранения блочности, и его соседнего блока, (b) выяснение, являются ли текущий блок и соседний блок кодированными посредством режима внутреннего BL, и (c) выбор силы фильтра устранения блочности согласно результату выяснения.
В другом аспекте настоящего изобретения предоставляется способ фильтрации устранения блочности, содержащий (a) выбор текущего блока, для которого будет выполняться фильтрация устранения блочности, и его соседнего блока, (b) выяснение, являются ли текущий блок и соседний блок кодированными посредством режима внутреннего BL, (c) выбор силы фильтра устранения блочности согласно результату выяснения и (d) выполнение фильтрации устранения блочности по отношению к границе между текущим блоком и соседним блоком согласно силе фильтра устранения блочности.
В еще другом аспекте настоящего изобретения предоставляется способ кодирования видео, базирующийся на множестве слоев, содержащий (a) кодирование входного видеокадра, (b) декодирование кодированного кадра, (c) выбор силы фильтра устранения блочности согласно тому, является ли блок, составляющий декодированный кадр, кодированным посредством режима внутреннего BL, и (d) выполнение фильтрации устранения блочности по отношению к границе между блоком и его соседним блоком согласно выбранной силе фильтра устранения блочности.
В еще другом аспекте настоящего изобретения предоставляется способ декодирования видео, базирующийся на множестве слоев, содержащий (a) восстановление видеокадра из входного битового потока, (b) выбор силы фильтра устранения блочности согласно тому, является ли блок, составляющий восстановленный кадр, кодированным посредством режима внутреннего BL, и (c) выполнение фильтрации устранения блочности по отношению к границе между блоком и его соседним блоком согласно выбранной силе фильтра устранения блочности.
В еще другом аспекте настоящего изобретения предоставляется кодировщик видео, базирующийся на множестве слоев, содержащий средство для кодирования входного видеокадра, средство для декодирования кодированного кадра, средство для выбора силы фильтра устранения блочности согласно тому, является ли блок, составляющий декодированный кадр, кодированным посредством режима внутреннего BL, и средство для выполнения фильтрации устранения блочности по отношению к границе между блоком и его соседним блоком согласно выбранной силе фильтра устранения блочности.
В еще другом аспекте настоящего изобретения предоставляется декодер видео, базирующийся на множестве слоев, содержащий средство для восстановления видеокадра из входного битового потока, средство для выбора силы фильтра устранения блочности согласно тому, является ли блок, составляющий восстановленный кадр, кодированным посредством режима внутреннего BL, и средство для выполнения фильтрации устранения блочности по отношению к границе между блоком и его соседним блоком согласно выбранной силе фильтра устранения блочности.
Описание чертежей
Вышеуказанные и другие аспекты, признаки и преимущества настоящего изобретения будут более ясны из последующего подробного описания, взятого в соединении с сопровождающими чертежами, на которых:
Фиг. 1 - это вид, показывающий пример масштабируемого видеокодека, использующего многослойную структуру;
Фиг. 2 - это блок-схема последовательности операций, показывающая способ выбора силы фильтра устранения блочности согласно общепринятому стандарту H.264;
Фиг. 3 - это блок-схема последовательности операций, показывающая способ выбора силы фильтра видеокодера, базирующегося на множестве слоев, согласно одному варианту осуществления настоящего изобретения;
Фиг. 4 - это вид, показывающий вертикальную границу и целевые выборки блока;
Фиг. 5 - это вид, показывающий горизонтальную границу и целевые выборки блока;
Фиг. 6 - это вид, показывающий позиционную корреляцию текущего блока q с его соседними блоками pa и pb;
Фиг. 7 - это блок-схема последовательности операций, показывающая способ выбора силы фильтра видеокодера, базирующегося на множестве слоев, согласно другому варианту осуществления настоящего изобретения;
Фиг. 8 - это блок-схема, показывающая конструкцию кодировщика видео типа открытого контура согласно одному варианту осуществления настоящего изобретения;
Фиг. 9 - это вид, показывающий структуру битового потока, сгенерированного согласно одному варианту осуществления настоящего изобретения;
Фиг. 10 - это вид, показывающий границы макроблока и блоков по отношению к яркостной составляющей сигнала;
Фиг. 11 - это вид, показывающий границы макроблока и блоков по отношению к составляющей цветности сигнала;
Фиг. 12 - это вид, показывающий пример макроблоков с силами фильтра, установленными с помощью их границ;
Фиг. 13 - это блок-схема, показывающая конструкцию декодера видео согласно одному варианту осуществления настоящего изобретения;
Фиг. 14 - это график, показывающий яркостную составляющую PSNR согласно изменению скорости передачи битов в последовательности, относящейся к группе людей;
Фиг. 15 - это график, показывающий яркостную составляющую PSNR согласно изменению скорости передачи битов в последовательности, относящейся к порту;
Фиг. 16 - это график, показывающий улучшение производительности настоящего изобретения по сравнению с предшествующим уровнем техники по отношению к последовательности, относящейся к футболу, CIF@1024kbps;
Фиг. 17 - это график, показывающий улучшение производительности настоящего изобретения по сравнению с предшествующим уровнем техники по отношению к последовательности, относящейся к группе людей, 4CIF@3000kbps;
Фиг. 18 - это вид, показывающий один кадр из последовательности, относящейся к футболу, восстановленный с помощью предшествующего уровня техники; и
Фиг. 19 - это вид, показывающий кадр из фиг. 18, восстановленный согласно настоящему изобретению.
Варианты осуществления изобретения
Ниже, иллюстративные варианты осуществления настоящего изобретения будут подробно описываться со ссылкой на сопровождающие чертежи. Аспекты и признаки настоящего изобретения и способы для достижения аспектов и признаков должны быть видны из ссылок на варианты осуществления, которые будут подробно описываться со ссылкой на сопровождающие чертежи. Однако варианты осуществления настоящего изобретения не ограничены вариантами осуществления, раскрытыми ниже, и могут реализовываться в разнообразных формах. Предметы обсуждения, определенные в описании, такие как подробная конструкция и элементы, являются ни чем иным, как конкретными деталями, предоставленными, чтобы оказывать помощь для полного понимания этого изобретения. Таким образом, варианты осуществления настоящего изобретения могут реализоваться без таких ограничений. В последующем описании вариантов осуществления настоящего изобретения на различных чертежах используются одинаковые ссылочные позиции чертежей для одинаковых элементов.
Фиг. 3 - это блок-схема последовательности операций, показывающая способ выбора силы фильтра видеокодера, базирующегося на множестве слоев, согласно одному варианту осуществления настоящего изобретения. В последующем описании термин 'видеокодер' используется как общее обозначение кодировщика видео и декодера видео. Способ согласно варианту осуществления настоящего изобретения, как показано на фиг. 3, может дополнительно включать в себя этапы S25, S30, S55 и S60 в сравнении со стандартным способом, как показано на фиг. 2.
Прежде всего, целевые выборки выбираются вокруг границы блока (например, 4×4 блока пикселей). Целевые выборки означают набор выборок, размещенных, как показано на фиг. 4 или фиг. 5, вокруг границы между текущим блоком q и его соседним блоком p. Как показано на фиг. 6, при учете порядка генерирования блоков верхний блок и левый блок текущего блока q соответствуют соседним блокам p (Pa и Pb), и, таким образом, целевые объекты, к которым применяется фильтр устранения блочности, являются верхней границей и левой границей текущего блока q. Нижняя граница и правая граница текущего блока q фильтруются в течение последующей обработки для нижнего блока и правого блока текущего блока. В вариантах осуществления настоящего изобретения в качестве примера используются 4×4 блоки, так как в стандарте H.264 используется 4×4 преобразование DCT, и минимальный размер переменного блока в предсказании движения - это 4×4 пикселей. Однако в случае видеокодера, имеющего другие характеристики, то есть, использующего 8×8 преобразование DCT, специалистам в данной области техники должно быть видно, что фильтрация также может применяться к границам блоков 8×8 блоков и других размеров блоков.
Ссылаясь на фиг. 4, целевые выборки возникают вокруг левой границы текущего блока q в случае, где граница блока является вертикальной. Целевые выборки включают в себя четыре выборки p0, p1, p2 и p3 на левой стороне линии вертикальной границы, которая существует в соседнем блоке p, и четыре выборки q0, q1, q2 и q3 на правой стороне линии границы, которая существует в текущем блоке q. Хотя все из четырех выборок подвергаются фильтрации, количество опорных выборок и количество фильтрованных выборок могут изменяться согласно выбранной силе фильтра.
Ссылаясь на фиг. 5, целевые выборки появляются вокруг верхней границы текущего блока q в случае, где граница блока является горизонтальной. Целевые выборки включают в себя четыре выборки p0, p1, p2 и p3, существующие в верхней половине линии горизонтальной границы (соседний блок p), и четыре выборки q0, q1, q2 и q3, существующие в нижней половине линии горизонтальной границы (текущий блок q).
Согласно существующему стандарту H.264, фильтр устранения блочности применяется к компоненте яркости сигнала и компоненте цветности сигнала, соответственно, и фильтрация последовательно выполняется в порядке растрового сканирования на единице макроблока, который составляет один кадр. По отношению к соответствующим макроблокам, фильтрация в горизонтальном направлении (как показано на фиг. 5) может выполняться после того, как выполняется фильтрация в вертикальном направлении (как показано на фиг. 4), и наоборот.
Ссылаясь на фиг. 3, после S10, выясняется, является ли, по меньшей мере, один из: блок p и блок q, к которым принадлежат целевые выборки, внутренне кодированным S15. Причина, почему выявляется внутренне кодированный блок состоит в том, что внутреннее кодирование, которое использует сходство в кадре, в значительной степени усиливает эффект блочности в сравнении с межкадровым кодированием. Соответственно, сила фильтра относительно усиливается, когда, по меньшей мере, один из: блок p и q - является внутренне кодированным, в сравнении с тем, когда никакой из них не является внутренне кодированным.
В вариантах осуществления настоящего изобретения внутреннее кодирование может включать в себя как кодирование согласно режиму направленного внутреннего предсказания для предсказания текущего блока по некоторой части соседнего блока кадра, так и кодирование согласно 'режиму внутреннего BL' для предсказания текущего макроблока по изображению, восстановленному из более нижнего слоя относительно текущего слоя.
Если блок p и/или блок q являются внутренне кодированными как результат решения этапа S15, тогда выясняется, совпадает ли граница блока с границей макроблока, S20. Так как эффект блочности границы макроблока проявляется больше, чем эффект границы 4×4 блока, сила фильтра может увеличиваться вследствие решения на этапе S20.
Если граница блока совпадает с границей макроблока как результат решения S20, выясняется, находятся ли блок p и блок q в режиме внутреннего BL, S25. Если это так, величина, которая показывает силу фильтра (ниже указываемая как 'Bs') может устанавливаться на 'A' S30; если нет, Bs может устанавливаться на '4' S50. В одном варианте осуществления настоящего изобретения Bs может устанавливаться на '4', даже если один из: блок p и блок q - не находится в режиме BL.
Значение 'A' должно быть меньше чем выбранное значение, если ответ на этапе S25 - это 'Нет', то есть '4'. Это из-за того, что, так как фильтр устранения блочности уже был применен к изображению базового слоя, который предоставляется, чтобы использовать режим внутреннего BL, является неразумным применять к изображению фильтр, имеющий такую же силу, что и другие режимы внутреннего предсказания. Соответственно, хотя 'A' может быть 0, 1, 2 или 3, было подтверждено экспериментами, что является предпочтительным, что 'A' равно '1'.
Если граница блока не совпадает с границей макроблока как результат решения на этапе S20, выясняется, является ли блок q кодированным посредством режима внутреннего BL S55. Если это так, Bs может устанавливаться на 'B' S60; если нет, Bs может устанавливаться на '3' S65. По той же причине, что и в установке значения 'A', Bs должно быть меньше, чем выбранное значение, если ответ на этапе S55 - это 'Нет', то есть, '3'. Соответственно, хотя 'B' может быть 0, 1 или 2, было подтверждено экспериментами, что является предпочтительным, что 'B' равно '1'.
Если выясняется, что блок p или блок q не является внутренне кодированным, на этапе S15, тогда выясняется, является ли блок p или блок q кодированным, S70. В общем, блоки, которые не являются внутренне кодированными, являются межкадровым образом кодированными через межкадровое предсказание. Однако согласно стандарту H.264, если различие между предсказанным изображением и текущим изображением меньше, чем заданное пороговое значение как результат межкадрового предсказания, используется технология, которая не кодирует различие, и, таким образом, требуется выяснение этапа S70. Это из-за того, что вероятность, что возник эффект блочности, является малой в сравнении со случаем, где блоки являются кодированными, и, таким образом, является предпочтительным применять относительно низкую силу фильтра в этом случае.
Если какой-либо: блок p или блок q - является кодированным как результат выяснения этапа S70, Bs устанавливается на '2' S75. Однако, если опорные кадры блока p и блока q являются разными, или количества опорных кадров являются разными в состоянии, где никакой из блоков не был кодирован (что соответствует 'Да' на этапе S80, Bs устанавливается на '1' S85). Это из-за того, что факт, что блоки p и q имеют разные опорные кадры, означает, что вероятность, что возник эффект блочности, является относительно высокой.
Если опорные кадры блоков p и q не являются разными или количества опорных кадров между ними не являются разными (что соответствует 'Нет' на этапе S80) как результат выяснения на этапе S80, выясняется, являются ли векторы движения блока p и блока q разными S90. Это из-за того, что, так как в случае, в котором векторы движения не совпадают друг с другом, хотя оба блока имеют одни и те же опорные кадры (что соответствует 'Нет' на этапе S80), вероятность, что возник эффект блочности, является относительно высокой в сравнении со случаем, в котором векторы движения совпадают друг с другом, и, таким образом, является предпочтительным применять разные силы фильтра согласно результату выяснения на этапе S90.
Если векторы движения блока p и блока q являются разными на этапе S90 (что соответствует 'Да' на этапе S90), Bs устанавливается на '1' S85; если нет, Bs устанавливается на '0' S95.
Фиг. 7 - это блок-схема последовательности операций, показывающая способ видеокодера, базирующийся на множестве слоев, для выбора силы фильтра согласно другому варианту осуществления настоящего изобретения. Хотя в варианте осуществления из фиг. 3 на этапе S25 выясняется, находятся ли оба: блок p и блок q - в режиме внутреннего BL, в варианте осуществления из фиг. 7 выясняется, находится ли какой-либо из: блок p или блок q - в режиме внутреннего BL, в дополнение к тому, находятся ли оба: блок p и блок q - в режиме внутреннего BL, чтобы применять разные силы фильтра к упомянутым случаям, соответственно.
Так как другие части варианта осуществления из фиг. 7 аналогичны частям варианта осуществления из фиг. 3, в последующем будут объясняться только части из фиг. 7, которые отличаются от частей варианта осуществления из фиг. 3.
Если оба: блок p и блок q - находятся в режиме внутреннего BL на этапе S25 (что соответствует 'Да' на этапе S25), Bs может устанавливаться на 'A' как в варианте осуществления из фиг. 3 S30. Однако, если только один из: блок p и блок q - находится в режиме внутреннего BL (что соответствует 'Да' на этапе S35), Bs может устанавливаться на новое значение 'C' S45. Тем временем, если какой-либо из: блок p или блок q - не находится в режиме внутреннего BL (что соответствует 'Нет' на этапе S35), Bs может устанавливаться на '4' таким же способом как в варианте осуществления из фиг. 3 S50.
Так как 'C' указывает на случай, в котором только один из блоков находится в режиме внутреннего BL, сила фильтра должна устанавливаться на значение, которое больше, чем 'A', но меньше, чем '4'. Если 'A' устанавливается на '1' как на фиг. 3, то 'C' должно иметь значение, равное '2' или '3'.
Тем временем, фиг. 8 - это блок-схема, показывающая конструкцию кодировщика видео, базирующегося на множестве слоев, которая включает в себя фильтр устранения блочности согласно способу выбора силы фильтра. Кодировщик видео, базирующийся на множестве слоев, может реализоваться как тип замкнутого контура или тип открытого контура. Здесь, кодировщик видео типа замкнутого контура выполняет предсказание со ссылкой на исходный кадр, и кодировщик видео типа открытого контура выполняет предсказание со ссылкой на восстановленный кадр.
Устройство 280 выбора выбирает и выводит один из: сигнал, переданный от модуля 195 повышающей дискретизации кодировщика 100 базового слоя, сигнал, переданный от устройства 260 компенсации движения, и сигнал, переданный от устройства 270 внутреннего предсказания. Этот выбор выполняется посредством выбора из: режима внутреннего BL, режима межкадрового предсказания и режима внутреннего предсказания, - который имеет наивысшую эффективность кодирования.
Устройство 270 внутреннего предсказания предсказывает изображение текущего блока по изображению восстановленного соседнего блока, предоставленного из модуля 215 суммирования, согласно определенному режиму внутреннего предсказания. H.264 определяет такой режим внутреннего предсказания, который включает в себя восемь режимов, имеющих направления, и один режим DC. Выбор одного режима среди них выполняется посредством выбора режима, который имеет наивысшую эффективность кодирования. Устройство 270 внутреннего предсказания предоставляет предсказанные блоки, сгенерированные согласно выбранному режиму внутреннего предсказания, модулю 205 суммирования.
Устройство 250 оценки движения выполняет оценку движения на текущем макроблоке входных видеокадров, базируясь на опорном кадре, и получает векторы движения. Алгоритм, который широко используется для оценки движения, является алгоритмом сопоставления блоков. Этот алгоритм сопоставления блоков оценивает вектор, который имеет минимальную ошибку в заданной области поиска опорного кадра, как вектор движения. Оценка движения может выполняться, используя блок движения фиксированного размера или используя блок движения, имеющий переменный размер, согласно иерархическому алгоритму сопоставления блоков переменных размеров (HVSBM). Устройство 250 оценки движения предоставляет данные движения, такие как векторы движения, полученные как результат оценки движения, режим блока движения, число опорных кадров и другие, устройству 240 энтропийного кодирования.
Устройство 260 компенсации движения выполняет компенсацию движения, используя вектор движения, вычисленный устройством 250 оценки движения, и опорный кадр, и генерирует межкадровым образом предсказанное изображение для текущего кадра.
Модуль 205 вычитания генерирует остаточный кадр посредством вычитания сигнала, выбранного устройством 280 выбора, из текущего входного сигнала кадра.
Устройство 220 пространственного преобразования выполняет пространственное преобразование остаточного кадра, сгенерированного модулем 205 вычитания. DCT (дискретное косинусное преобразование), вейвлет-преобразование и другие могут использоваться как способ пространственного преобразования. Коэффициенты преобразования получаются как результат пространственного преобразования. В случае использования DCT в качестве способа пространственного преобразования получаются коэффициенты DCT, и в случае использования способа вейвлет-преобразования получаются коэффициенты вейвлет.
Устройство 230 квантования генерирует коэффициенты квантования посредством квантования коэффициентов преобразования, полученных устройством 220 пространственного преобразования. Квантование означает представление коэффициентов преобразования, выраженных как вещественные величины, с помощью дискретных величин посредством деления величин преобразования в заданных интервалах. Такой способ квантования может быть скалярным квантованием, векторным квантованием или другими. Способ скалярного квантования выполняется посредством деления коэффициентов преобразования на соответствующие величины из таблицы квантования и округления результирующих величин до ближайшего целого числа.
В случае использования вейвлет-преобразования в качестве способа пространственного преобразования, как способ квантования главным образом используется способ встроенного квантования. Этот способ встроенного квантования выполняет эффективное квантование, используя пространственную избыточность, посредством предпочтительного кодирования компонентов коэффициентов преобразования, которые превосходят пороговое значение, посредством изменения порогового значения (до 1/2). Способ встроенного квантования может быть встроенным вейвлет-алгоритмом деревьев нулей (EZW), множественным разбиением в иерархических деревьях (SPIHT) или встроенным кодированием блоков нулей (EZBC).
Процесс кодирования перед энтропийным кодированием, как описано выше, называется кодированием с потерями.
Устройство 240 энтропийного кодирования выполняет без потерь кодирование коэффициентов квантования и информации движения, предоставленной устройством 250 оценки движения, и генерирует выходной битовый поток. Арифметическое кодирование или кодирование переменной длины может использоваться как способ кодирования без потерь.
Фиг. 9 - это вид, показывающий пример структуры битового потока 50, сгенерированного согласно одному варианту осуществления настоящего изобретения. В H.264 битовый поток кодируется в единицах секции. Битовый поток 50 включает в себя заголовок 60 секции и данные 70 секции, и данные 70 секции компонуются из множества макроблоков (MB) 71 по 74. Данные макроблока, например, макроблок 73, компонуются из поля 80 mb_type, поля 85 mb_pred и поля 90 данных текстуры.
В поле 80 mb_type записывается значение, показывающее тип макроблока. То есть, это поле показывает, является ли текущий макроблок внутренним макроблоком, межкадровым макроблоком или макроблоком внутреннего BL.
В поле 85 mb_pred записывается режим детального предсказания согласно типу макроблока. В случае внутреннего макроблока записывается выбранный режим внутреннего предсказания, и в случае межкадрового макроблока записываются число опорных кадров и вектор движения посредством разбиений макроблока.
В поле 90 данных текстуры записывается кодированный остаточный кадр, т.е. данные текстуры.
Ссылаясь на фиг. 8, кодировщик 2 расширенного слоя дополнительно включает в себя устройство 271 обратного квантования, устройство 272 обратного преобразования DCT и модуль 215 суммирования, которые используются, чтобы восстанавливать кодированный с потерями кадр посредством его обратного декодирования.
Устройство 271 обратного квантования обратным образом квантует коэффициенты, квантованные устройством 230 квантования. Этот процесс обратного квантования является обратным процессом для процесса квантования. Устройство 272 обратного пространственного преобразования выполняет обратное преобразование квантованных результатов и предоставляет обратным образом преобразованные результаты модулю 215 суммирования.
Модуль 215 суммирования восстанавливает видеокадр посредством добавления сигнала, предоставленного от устройства 272 обратного пространственного преобразования, к предсказанному сигналу, выбранному устройством 280 выбора и сохраненному в буфере кадров (не показан). Видеокадр, восстановленный модулем 215 суммирования, предоставляется фильтру 290 устранения блочности, и изображение соседнего блока восстановленного видеокадра предоставляется устройству 270 внутреннего предсказания.
Устройство 291 выбора силы фильтра выбирает силу фильтра по отношению к границе макроблока и границам блоков (например, 4×4 блоков) в одном макроблоке согласно способу выбора силы фильтра, как объясняется со ссылкой на фиг. 3 и фиг. 7. В случае составляющей яркости сигнала макроблок имеет размер 16×16 пикселей, как показано на фиг. 10, и в случае составляющей цветности сигнала макроблок имеет размер 8×8 пикселей, как показано на фиг. 11. На фиг. 10 и 11 'Bs' отмечено на границе блоков, которые принадлежат макроблоку. Однако 'Bs' не отмечено на линии правой границы и линии нижней границы макроблока. Если никакой макроблок не существует справа или ниже текущего макроблока, фильтр устранения блочности для соответствующей части является ненужным, в то время как, если существует макроблок справа или ниже текущего макроблока, сила фильтра линий границы выбирается в течение процесса фильтрации устранения блочности соответствующего макроблока.
Пример выбора силы фильтра по отношению к нескольким граничным линиям макроблока составляющей яркости, как показано на фиг. 10, показан на фиг. 12. Ссылаясь на фиг. 12, текущий макроблок и левый макроблок являются макроблоками внутреннего BL, и верхний макроблок является межкадровым макроблоком (или внутренним макроблоком).
На основе варианта осуществления из фиг. 3, сила фильтрации всех граничных линий 4×4 блоков в макроблоке может устанавливаться на 'B', и сила фильтрации граничных линий (т.е. линии левой границы текущего макроблока) между текущим макроблоком и левым внутренним макроблоком может устанавливаться на 'A'. Также, сила фильтрации верхней границы текущего макроблока может устанавливаться на '4'.
На основе варианта осуществления из фиг. 7, сила фильтрации всех верхних граничных линий текущего макроблока может устанавливаться на 'C' в отличие от силы фильтрации, отмеченной на фиг. 12.
Фильтр 290 устранения блочности фактически выполняет фильтрацию устранения блочности по отношению к соответствующим граничным линиям согласно силе фильтра, выбранной устройством 291 выбора силы фильтра. Ссылаясь на фиг. 4 и 5, на обеих сторонах вертикальной границы или горизонтальной границы показаны четыре пикселя. Операция фильтрации может затрагивать три пикселя на каждой стороне границы, т.е. {p2, p1, p0, q0, q1, q2}, максимум. Это решается при учете силы Bs фильтра, параметра QP квантования соседнего блока и других параметров.
Однако в фильтрации устранения блочности очень важно отличать реальный край, существующий в изображении, от края, сгенерированного квантованием коэффициентов DCT. Чтобы сохранять различие изображения, реальный край должен оставаться без фильтрации настолько, насколько возможно, но искусственный край должен фильтроваться, чтобы быть незаметным. Соответственно, фильтрация выполняется, только когда все условия уравнения (1) удовлетворены.
Bs ≠ |p0-q0|<α, |p1-p0|<β, |q1-q0|<β...... (1)
Здесь, α и β - это пороговые значения, определенные согласно параметру квантования, FilterOffsetA, FilterOffsetB и другим.
Если Bs - это '1', '2' или '3' и 4-х элементный фильтр применяется к вводам p1, p0, q0 и q1, фильтрованные выводы будут P0 (что является результатом фильтрации p0) и Q0 (что является результатом фильтрации q0). По отношению к яркостной составляющей, если
|p2-p0|<β,
4-х элементный фильтр применяется к вводам p2, p1, p0 и q0, и фильтрованный вывод - это P1 (что является результатом фильтрации p1). Таким же способом, если
|q2-q0|<β,
4-х элементный фильтр применяется к вводам q2, q1, q0 и p0, и фильтрованный вывод - это Q1 (что является результатом фильтрации q1).
Между тем, если Bs - это '4', 3-х элементный фильтр, 4-х элементный фильтр или 5-ти элементный фильтр применяется к вводам и P0, P1 и P2 (которые являются результатами фильтрации p0, p1, p2) и Q0, Q1 и Q2 (которые являются результатами фильтрации q0, q1, q2) могут выводиться, базируясь на пороговых значениях α и β и восьми фактических пикселях.
Более подробная информация о процессе фильтрации при устранении блочности раскрывается в проекте рекомендации ITU-T и конечном проекте международного стандарта объединенной видеоспецификации 'Draft ITU-T Recommendation and Final Draft International Standard of Joint Video Specification (ITU-T Rec. H.264 IISO/IEC 14496-10 AVC), Pattaya, Thailand, 7-14 March, 2003'.
Ссылаясь на фиг. 8, результирующий кадр D1, фильтрованный фильтром 290 устранения блочности, предоставляется устройству 250 оценки движения, чтобы использоваться для межкадрового предсказания других входных кадров. Также, если существует расширенный слой выше текущего расширенного слоя, кадр D1 может предоставляться как опорный кадр, когда предсказание режима внутреннего BL выполняется над верхним расширенным слоем.
Однако выходные данные D1 фильтра устранения блочности вводятся в устройство 250 оценки движения только в случае кодировщика видео типа замкнутого контура. В случае кодировщика видео типа открытого контура, такого как кодировщик видео, базирующийся на MCTF (временной фильтрации с компенсацией движения), исходный кадр используется как опорный кадр в течение межкадрового предсказания, и, таким образом, не требуется, чтобы выходные данные фильтра устранения блочности вводились в устройство 250 оценки движения снова.
Кодировщик 100 базового слоя может включать в себя устройство 120 пространственного преобразования, устройство 130 квантования, устройство 140 энтропийного кодирования, устройство 150 оценки движения, устройство 160 компенсации движения, устройство 170 внутреннего предсказания, устройство 180 выбора, устройство 171 обратного квантования, устройство 172 обратного пространственного преобразования, модуль 105 понижающей дискретизации, модуль повышающей дискретизации и фильтр 190 устранения блочности.
Модуль 105 понижающей дискретизации выполняет понижающую дискретизацию исходного входного кадра до разрешения базового слоя, и модуль 195 повышающей дискретизации выполняет повышающую дискретизацию на выходе фильтра 190 устранения блочности и предоставляет дискретизированный с повышением результат устройству 280 выбора расширенного слоя.
Так как кодировщик 100 базового слоя не может использовать информацию более нижнего слоя, устройство 180 выбора выбирает один из: внутренне предсказанный сигнал и межкадровым образом предсказанный сигнал, - и фильтр 190 устранения блочности выбирает силу фильтра таким же способом как в стандартном H.264.
Так как операции других составляющих элементов являются такими же как операции составляющих элементов, существующих в кодировщике 200 расширенного слоя, их подробное объяснение будет пропущено.
Фиг. 13 - это блок-схема, показывающая конструкцию декодера 3000 видео согласно одному варианту осуществления настоящего изобретения. Декодер 3000 видео включает в себя декодер 600 расширенного слоя и декодер 500 базового слоя.
Сначала будет объясняться конструкция декодера 600 расширенного слоя. Устройство 610 энтропийного декодирования выполняет декодирование без потерь входного битового потока расширенного слоя, в отличие от устройства энтропийного кодирования, и извлекает информацию типа макроблока (т.е. информацию, которая указывает тип макроблока), режим внутреннего предсказания, информацию о движении, данные текстуры и другую информацию.
Битовый поток может быть сконструирован как в примере, показанном на фиг. 9. Здесь, тип макроблока известен из поля 80 mb_type; детальный режим внутреннего предсказания и информация движения известны из поля 85 mb_pred; и данные текстуры известны посредством считывания поля 90 данных текстуры.
Устройство 610 энтропийного декодирования предоставляет данные текстуры устройству 620 обратного квантования, режим внутреннего предсказания устройству 640 внутреннего предсказания и информацию движения устройству 650 компенсации движения. Также устройство 610 энтропийного декодирования предоставляет упомянутый тип из информации о текущем макроблоке устройству 691 выбора силы фильтра.
Устройство 620 обратного квантования обратным образом квантует информацию текстуры, переданную от устройства 610 энтропийного декодирования. В это время используется такая же таблица квантования как та, что использовалась на стороне кодировщика видео.
Затем устройство 630 обратного пространственного преобразования выполняет обратное пространственное преобразование над результатом обратного квантования. Это обратное пространственное преобразование соответствует пространственному преобразованию, выполненному в кодировщике видео. То есть, если преобразование DCT выполнялось в кодировщике, обратное DCT выполняется в декодере видео, и если вейвлет-преобразование выполнялось в кодировщике видео, обратное вейвлет-преобразование выполняется в декодере видео. Как результат обратного пространственного преобразования, восстанавливается остаточный кадр.
Устройство 640 внутреннего предсказания генерирует предсказанный блок для текущего внутреннего блока по восстановленному соседнему внутреннему блоку, выведенному из модуля 615 суммирования, согласно режиму внутреннего предсказания, переданному от устройства 610 энтропийного декодирования, чтобы предоставить сгенерированный предсказанный блок устройству 660 выбора.
Тем временем, устройство 650 компенсации движения выполняет компенсацию движения, используя информацию движения, предоставленную от устройства 610 энтропийного декодирования, и опорный кадр, предоставленный от фильтра 690 устранения блочности. Предсказанный кадр, сгенерированный как результат компенсации движения, предоставляется устройству 660 выбора.
Дополнительно, устройство 660 выбора выбирает один из: сигнал, переданный от модуля 590 повышающей дискретизации, сигнал, переданный от устройства 650 компенсации движения, и сигнал, переданный от устройства 640 внутреннего предсказания, - и передает выбранный сигнал модулю 615 суммирования. В это время, устройство 660 выбора распознает информацию о типе текущего макроблока, предоставленную от устройства 610 энтропийного декодирования, и выбирает соответствующий сигнал среди трех типов сигналов согласно типу текущего макроблока.
Модуль 615 суммирования добавляет сигнал, выведенный из устройства 630 обратного пространственного преобразования, к сигналу, выбранному устройством 660 выбора, чтобы восстановить видеокадр расширенного слоя.
Устройство 691 выбора силы фильтра выбирает силу фильтра по отношению к границе макроблока и границам блоков в одном макроблоке согласно способу выбора силы фильтра, как описано со ссылкой на фиг. 3 и фиг. 7. В этом случае, чтобы выполнить фильтрацию, тип макроблока, как показано на фиг. 12, должен быть известен, и информация о типе макроблока предоставляется от устройства 610 энтропийного декодирования.
Результирующий кадр D3, фильтрованный фильтром 690 устранения блочности, как описано выше, предоставляется устройству 650 компенсации движения, чтобы сгенерировать кадр межкадрового предсказания для других входных кадров. Также, если существует расширенный слой выше текущего расширенного слоя, кадр D3 может предоставляться как опорный кадр, когда предсказание режима внутреннего BL выполняется для верхнего расширенного слоя.
Конструкция декодера 500 базового слоя является аналогичной конструкции декодера расширенного слоя. Однако, так как декодер 500 базового слоя не может использовать информацию более нижнего слоя, устройство 560 выбора выбирает один из: внутренне предсказанный сигнал и межкадровым образом предсказанный сигнал, - и фильтр 590 устранения блочности выбирает силу фильтра таким же способом как в стандартном алгоритме H.264. Также, модуль 595 повышающей дискретизации выполняет повышающую дискретизацию результата, фильтрованного фильтром 590 устранения блочности, и предоставляет дискретизированный с повышением сигнал устройству 660 выбора расширенного слоя.
Так как операции других составляющих элементов являются такими же как операции составляющих элементов декодера 600 расширенного слоя, их подробное описание будет пропущено.
Как описано выше, в качестве примера дается, что кодировщик видео или декодер видео включает в себя два слоя, т.е. базовый слой и расширенный слой. Однако это всего лишь пример, и специалистам в данной области техники должно быть ясно, что может быть реализован видеокодер, имеющий три или более слоев.
До настоящего времени соответствующие составляющие элементы из фиг. 8 и 13 относятся к программному обеспечению или аппаратному обеспечению, такому как FPGA (программируемая пользователем вентильная матрица) или ASIC (специализированная интегральная схема). Однако соответствующие составляющие элементы могут быть сконструированы, чтобы находиться в адресуемом запоминающем носителе или исполняться одним или более процессорами. Функции, предоставленные в соответствующих составляющих элементах, могут разделяться в дополнительные детализованные составляющие элементы или комбинироваться в один составляющий элемент, все из которых выполняют заданные функции.
Фиг. 14 по 19 показывают экспериментальные результаты вариантов осуществления настоящего изобретения в сравнении с предшествующим уровнем техники. Здесь, в качестве предшествующего уровня техники использовалась модель SVM 3.0 стандарта 'ISO/IEC 21000 Scalable Video Coding, N6716, Palma, Oct. 2004'.
Фиг. 14 - это график, показывающий яркостную составляющую PSNR (т.е. Y-PSNR) согласно изменению скорости передачи битов в последовательности, относящейся к группе людей, и фиг. 15 - это график, показывающий яркостную составляющую PSNR (т.е. Y-PSNR) согласно изменению скорости передачи битов в последовательности, относящейся к порту. В последовательности, относящейся к группе людей, может быть подтверждено, что качество изображения явно улучшено на приблизительно 0,1 до 0,2 дБ. Тем временем, в последовательности, относящейся к порту, улучшение качества изображения является незначительным. Однако во всех случаях, никакого ухудшения качества изображения не произошло. Соответственно, способ согласно вариантам осуществления настоящего изобретения имеет большое влияние на последовательности быстрого движения, но имеет относительно маленькое влияние на последовательности медленного движения или последовательности, имеющие сильную временную корреляцию. Предполагается, что это из-за того, что варианты осуществления настоящего изобретения улучшают производительность в случае использования макроблока внутреннего BL, но количество макроблоков внутреннего BL является маленьким в случае последовательностей медленного движения или последовательностей, имеющих сильные временные корреляции.
Фиг. 16 и 17 - это графики, показывающие улучшение производительности вариантов осуществления настоящего изобретения по сравнению с предшествующим уровнем техники по отношению к последовательности, относящейся к футболу, CIF@1024kbps и по отношению к последовательности, относящейся к группе людей, 4CIF@3000kbps. Как показано на фиг. 14 и 15, среднее PSNR улучшение не является большим, но подтверждается, что значение PSNR улучшается вплоть до 0,7 дБ в некоторых кадрах. Также, в последовательности, относящейся к группе людей, подтверждается, что значение PSNR нескольких кадров улучшается вплоть до 0,17 дБ. Согласно вариантам осуществления настоящего изобретения, качество изображения в значительной степени улучшается в кадрах, имеющих быстрое движение, в то время как согласно предшествующему уровню техники качество изображения сильно ухудшается в кадрах, имеющих быстрое движение.
Фиг. 18 и 19 - это виды, показывающие один кадр последовательности, относящейся к футболу, восстановленный с помощью предшествующего уровня техники, и один кадр из фиг. 18, восстановленный согласно вариантам осуществления настоящего изобретения, соответственно. Здесь используется последовательность, относящаяся к футболу, CIF@1024kbps. Как показано на фиг. 18 и 19, способ согласно вариантам осуществления настоящего изобретения уменьшает сверхсглаживающий эффект, который генерируется в течение процесса устранения блочности, и, таким образом, может хорошо сохранять визуальные детали в сравнении со способом в предшествующем уровне техники.
Промышленная применимость
Согласно вариантам осуществления настоящего изобретения в кодировщике/декодере многослойного видео сила фильтра устранения блочности может должным образом устанавливаться согласно тому, является ли некоторый блок, к которому фильтр устранения блочности будет применяться, блоком режима внутреннего BL.
Дополнительно, посредством установки должной силы фильтра устранения блочности (как выше) качество изображения восстановленного видео может быть улучшено.
Варианты осуществления настоящего изобретения были описаны в иллюстративных целях, и специалисты в данной области техники должны принять во внимание, что возможны различные модификации, дополнения и замены без отхода от объема и сущности этого изобретения, как раскрывается в сопровождающей формуле изобретения.
Claims (13)
1. Способ выбора интенсивности фильтрации устранения блочности
для кадра, содержащего множество блоков, причем способ содержит
(a) выбор текущего блока и соседнего блока, над которыми будет выполняться фильтрация для устранения блочности;
(b) оценивают, были ли текущий блок и соседний блок кодированы с помощью режима внутреннего базового слоя (BL); и
(с1) если, по меньшей мере, один из: текущий блок и соседний блок кодирован с помощью режима другого, нежели режим внутреннего BL, выбор заданной интенсивности фильтрации по отношению к границе между текущим блоком и соседним блоком; и
(с2) если как текущий блок, так и соседний блок были кодированы с помощью режима внутреннего BL, выбор интенсивности фильтрации, которая ниже, чем интенсивность фильтрации, выбранная по отношению к границе.
2. Способ по п.1, где (с1) дополнительно содержит выбор более низкой интенсивности фильтрации в случае, в котором как текущий блок, так и соседний блок кодированы с помощью режима внутреннего BL, в сравнении со случаем, в котором один из двух блоков кодирован с помощью режима другого, нежели режим внутреннего BL.
3. Способ по п.1, где интенсивность фильтрации, выбранная в (с), разделяется на интенсивности фильтрации разной величины согласно тому, совпадает ли граница блока с границей макроблока, и если граница блока совпадает с границей макроблока, выбор более высокой интенсивности фильтрации по отношению к границе блока.
4. Способ по п.3, где если граница совпадает с границей макроблока, интенсивность фильтрации, выбранная в (с1), - это '4', и интенсивность фильтрации, выбранная в (с2), - это '1'.
5. Способ по п.3, где если граница не совпадает с границей макроблока, интенсивность фильтрации, выбранная в (с1), - это '3', и интенсивность фильтрации, выбранная в (с2), - это '1'.
6. Способ по п.1, где граница является, по меньшей мере, одной из: горизонтальной границей или вертикальной границей между текущим блоком и соседним блоком.
7. Способ выполнения фильтрации для устранения блочности кадра, содержащего множество блоков, причем способ содержит (a) выбор текущего блока, над которым будет выполняться фильтрация для устранения блочности, и соседнего блока из множества блоков;
(b) оценивают, были ли текущий блок и соседний блок кодированы с помощью режима внутреннего BL;
(с1) если, по меньшей мере, один из: текущий блок и соседний блок кодирован с помощью режима другого, нежели режим внутреннего BL, выбор заданной интенсивности фильтрации по отношению к границе между текущим блоком и соседним блоком; и
(с2) если как текущий блок, так и соседний блок были кодированы с помощью режима внутреннего BL, выбор интенсивности фильтрации, которая ниже, чем интенсивность фильтрации, выбранная по отношению к границе; и
(d) выполнение фильтрации для устранения блочности по отношению к границе между текущим блоком и соседним блоком согласно интенсивности фильтрации устранения блочности.
8. Способ по п.7, где (с1) дополнительно содержит выбор более низкой интенсивности фильтрации в случае, в котором как текущий блок, так и соседний блок кодированы с помощью режима внутреннего BL, в сравнении со случаем, в котором один из двух блоков кодирован с помощью режима другого, нежели режим внутреннего BL.
9. Способ по п.7, где каждый блок из множества блоков имеет размер 4×4 пикселей.
10. Способ по п.7, где интенсивность фильтрации, выбранная в (с), разделяется на интенсивности фильтрации разной величины согласно тому, совпадает ли граница блока с границей макроблока, и, если граница блока совпадает с границей макроблока, выбор более высокой интенсивности фильтрации по отношению к границе блока.
11. Способ по п.10, где если граница совпадает с границей макроблока, интенсивность фильтрации, выбранная в (c1), - это '4', и интенсивность фильтрации, выбранная в (с2), - это '1'.
12. Способ по п.10, где если граница не совпадает с границей макроблока, интенсивность фильтрации, выбранная в (c1),- это '3', и интенсивность фильтрации, выбранная в (с2), - это '1'.
13. Способ по п.7, где граница является, по меньшей мере, одной из: горизонтальной границей или вертикальной границей между текущим блоком и соседним блоком.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US64100405P | 2005-01-04 | 2005-01-04 | |
| US60/641,004 | 2005-01-04 |
Related Child Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2008112772/09A Division RU2367113C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, кодировщик-декодер многослойного видео, его использующий |
| RU2008112773/09A Division RU2365062C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2341034C1 true RU2341034C1 (ru) | 2008-12-10 |
Family
ID=36845198
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2007125163/09A RU2341034C1 (ru) | 2005-01-04 | 2005-12-27 | Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий |
| RU2008112772/09A RU2367113C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, кодировщик-декодер многослойного видео, его использующий |
| RU2008112773/09A RU2365062C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2008112772/09A RU2367113C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, кодировщик-декодер многослойного видео, его использующий |
| RU2008112773/09A RU2365062C1 (ru) | 2005-01-04 | 2008-04-02 | Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US8542750B2 (ru) |
| KR (1) | KR100679035B1 (ru) |
| CN (1) | CN100518321C (ru) |
| BR (1) | BRPI0519575A2 (ru) |
| RU (3) | RU2341034C1 (ru) |
| TW (1) | TWI309951B (ru) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2660612C2 (ru) * | 2009-07-31 | 2018-07-06 | Вилос Медиа Интернэшнл Лимитед | Устройство и способ обработки изображений |
| RU2787691C1 (ru) * | 2020-03-27 | 2023-01-11 | Тенсент Америка Ллс | Способ для режима набора выходных уровней в многоуровневом видеопотоке |
Families Citing this family (92)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7450641B2 (en) | 2001-09-14 | 2008-11-11 | Sharp Laboratories Of America, Inc. | Adaptive filtering based upon boundary strength |
| US7929610B2 (en) * | 2001-03-26 | 2011-04-19 | Sharp Kabushiki Kaisha | Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding |
| US6931063B2 (en) | 2001-03-26 | 2005-08-16 | Sharp Laboratories Of America, Inc. | Method and apparatus for controlling loop filtering or post filtering in block based motion compensationed video coding |
| KR20060122671A (ko) * | 2005-05-26 | 2006-11-30 | 엘지전자 주식회사 | 영상 신호의 스케일러블 인코딩 및 디코딩 방법 |
| EP1911291A4 (en) * | 2005-07-29 | 2011-04-27 | Samsung Electronics Co Ltd | DEFLOCKING FILTERING METHOD IN TAKING INTO ACCOUNT OF THE INTRA-BL MODE AND MULTILAYER VIDEO CODIER / DECODER FOR USING THIS METHOD |
| US8494042B2 (en) * | 2006-01-09 | 2013-07-23 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
| KR100772873B1 (ko) * | 2006-01-12 | 2007-11-02 | 삼성전자주식회사 | 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더 |
| CN102158697B (zh) | 2006-09-07 | 2013-10-09 | Lg电子株式会社 | 用于解码/编码视频信号的方法及装置 |
| US9001899B2 (en) * | 2006-09-15 | 2015-04-07 | Freescale Semiconductor, Inc. | Video information processing system with selective chroma deblock filtering |
| US8565314B2 (en) | 2006-10-12 | 2013-10-22 | Qualcomm Incorporated | Variable length coding table selection based on block type statistics for refinement coefficient coding |
| US8599926B2 (en) | 2006-10-12 | 2013-12-03 | Qualcomm Incorporated | Combined run-length coding of refinement and significant coefficients in scalable video coding enhancement layers |
| US9319700B2 (en) | 2006-10-12 | 2016-04-19 | Qualcomm Incorporated | Refinement coefficient coding based on history of corresponding transform coefficient values |
| US8325819B2 (en) | 2006-10-12 | 2012-12-04 | Qualcomm Incorporated | Variable length coding table selection based on video block type for refinement coefficient coding |
| CN101395922A (zh) * | 2006-11-17 | 2009-03-25 | Lg电子株式会社 | 用于解码/编码视频信号的方法及装置 |
| US7742532B2 (en) | 2006-11-17 | 2010-06-22 | Lg Electronics Inc. | Method and apparatus for applying de-blocking filter to a video signal |
| US7876808B2 (en) * | 2006-11-30 | 2011-01-25 | Broadcom Corp. | Method and apparatus for adaptive noise and/or signal filtering in an HSDPA channel quality indicator (CQI) selection |
| US9445128B2 (en) * | 2006-12-08 | 2016-09-13 | Freescale Semiconductor, Inc. | System and method of determining deblocking control flag of scalable video system for indicating presentation of deblocking parameters for multiple layers |
| US9961372B2 (en) | 2006-12-08 | 2018-05-01 | Nxp Usa, Inc. | Adaptive disabling of deblock filtering based on a content characteristic of video information |
| US8199812B2 (en) * | 2007-01-09 | 2012-06-12 | Qualcomm Incorporated | Adaptive upsampling for scalable video coding |
| WO2008090793A1 (ja) * | 2007-01-22 | 2008-07-31 | Nec Corporation | 画像再符号化装置、画像再符号化方法及び画像符号化プログラム |
| JP2008263529A (ja) * | 2007-04-13 | 2008-10-30 | Sony Corp | 符号化装置、符号化方法、符号化方法のプログラム及び符号化方法のプログラムを記録した記録媒体 |
| TWI375470B (en) * | 2007-08-03 | 2012-10-21 | Via Tech Inc | Method for determining boundary strength |
| US20090046783A1 (en) * | 2007-08-14 | 2009-02-19 | Chien-Chih Chen | Method and Related Device for Decoding Video Streams |
| US8619880B2 (en) * | 2007-10-10 | 2013-12-31 | Qualcomm Incorporated | Universal blockiness correction |
| EP2204046B1 (en) * | 2007-10-16 | 2019-12-04 | InterDigital Madison Patent Holdings | Methods and apparatus for artifact removal for bit depth scalability |
| CN101472173B (zh) * | 2007-12-29 | 2012-07-25 | 安凯(广州)微电子技术有限公司 | 一种去块滤波方法、系统及去块滤波器 |
| EP2200321A1 (en) | 2008-12-19 | 2010-06-23 | Thomson Licensing | Method for browsing video streams |
| CN101494787B (zh) * | 2009-02-10 | 2011-02-09 | 重庆大学 | 一种基于块效应检测的去块效应方法 |
| TWI468020B (zh) | 2009-02-19 | 2015-01-01 | Sony Corp | Image processing apparatus and method |
| KR20100095992A (ko) | 2009-02-23 | 2010-09-01 | 한국과학기술원 | 비디오 부호화에서의 분할 블록 부호화 방법, 비디오 복호화에서의 분할 블록 복호화 방법 및 이를 구현하는 기록매체 |
| KR101051871B1 (ko) * | 2009-08-24 | 2011-07-25 | 성균관대학교산학협력단 | 디블록킹 필터에서의 경계면 세기 계수 판단 장치 및 방법 |
| US20110116545A1 (en) * | 2009-11-17 | 2011-05-19 | Jinwen Zan | Methods and devices for in-loop video deblocking |
| RU2540846C2 (ru) * | 2010-01-11 | 2015-02-10 | Телефонактиеболагет Л М Эрикссон (Пабл) | Технология для оценки качества видео |
| US8712173B2 (en) * | 2010-03-12 | 2014-04-29 | Mediatek Singapore Pte. Ltd. | Methods for processing 2Nx2N block with N being positive integer greater than four under intra-prediction mode and related processing circuits thereof |
| WO2011129620A2 (ko) | 2010-04-13 | 2011-10-20 | 삼성전자 주식회사 | 트리 구조에 따른 부호화 단위에 기초한 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법 및 그 장치 |
| RU2448552C2 (ru) * | 2010-05-05 | 2012-04-27 | Государственное Образовательное Учреждение Высшего Профессионального Образования "Дагестанский Государственный Технический Университет" (Дгту) | Способ стерилизации компота из черешни |
| KR20110123651A (ko) * | 2010-05-07 | 2011-11-15 | 한국전자통신연구원 | 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법 |
| KR20110125153A (ko) * | 2010-05-12 | 2011-11-18 | 에스케이 텔레콤주식회사 | 영상의 필터링 방법 및 장치와 그를 이용한 부호화/복호화를 위한 방법 및 장치 |
| TWI508534B (zh) * | 2010-05-18 | 2015-11-11 | Sony Corp | Image processing apparatus and image processing method |
| CN102316318B (zh) * | 2010-07-07 | 2013-07-03 | 中国科学院微电子研究所 | 一种基于h.264标准的去块滤波边界强度计算装置及方法 |
| EP2594074A4 (en) * | 2010-07-16 | 2014-08-06 | Sharp Kk | VIDEO DECODER FOR LOW RESOLUTION POWER REDUCTION USING LOW RESOLUTION DATA |
| US8767828B2 (en) * | 2010-07-16 | 2014-07-01 | Sharp Laboratories Of America, Inc. | System for low resolution power reduction with compressed image |
| US20120014447A1 (en) * | 2010-07-16 | 2012-01-19 | Sharp Laboratories Of America, Inc. | System for low resolution power reduction with high resolution deblocking |
| KR20120012385A (ko) * | 2010-07-31 | 2012-02-09 | 오수미 | 인트라 예측 부호화 장치 |
| USRE49308E1 (en) | 2010-09-29 | 2022-11-22 | Electronics And Telecommunications Research Instit | Method and apparatus for video-encoding/decoding using filter information prediction |
| US9363533B2 (en) | 2010-09-29 | 2016-06-07 | Electronics And Telecommunications Research Institute | Method and apparatus for video-encoding/decoding using filter information prediction |
| EP2622857A1 (en) * | 2010-10-01 | 2013-08-07 | Dolby Laboratories Licensing Corporation | Optimized filter selection for reference picture processing |
| US20130194386A1 (en) * | 2010-10-12 | 2013-08-01 | Dolby Laboratories Licensing Corporation | Joint Layer Optimization for a Frame-Compatible Video Delivery |
| CN106791877B (zh) * | 2010-12-07 | 2020-02-28 | 索尼公司 | 图像处理设备和图像处理方法 |
| CN106454359B (zh) * | 2010-12-07 | 2020-05-19 | 索尼公司 | 图像处理设备和图像处理方法 |
| SG10201706999WA (en) | 2010-12-17 | 2017-09-28 | Mitsubishi Electric Corp | Image coding device, image decoding device, image coding method, and image decoding method |
| US9807424B2 (en) | 2011-01-10 | 2017-10-31 | Qualcomm Incorporated | Adaptive selection of region size for identification of samples in a transition zone for overlapped block motion compensation |
| CN103109534B (zh) | 2011-02-22 | 2016-11-16 | 太阳专利托管公司 | 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编解码装置 |
| JP5342069B2 (ja) * | 2011-02-22 | 2013-11-13 | パナソニック株式会社 | フィルタ方法、画像符号化方法、画像処理システム及び画像符号化装置 |
| WO2012144876A2 (ko) | 2011-04-21 | 2012-10-26 | 한양대학교 산학협력단 | 인루프 필터링을 적용한 예측 방법을 이용한 영상 부호화/복호화 방법 및 장치 |
| US9338476B2 (en) | 2011-05-12 | 2016-05-10 | Qualcomm Incorporated | Filtering blockiness artifacts for video coding |
| US20130101027A1 (en) * | 2011-06-20 | 2013-04-25 | Matthias Narroschke | Deblocking control by individual quantization parameters |
| CN104954805B (zh) * | 2011-06-28 | 2019-01-04 | 三星电子株式会社 | 用于使用帧内预测进行图像编码和解码的方法和设备 |
| CN102263954B (zh) * | 2011-07-06 | 2014-01-29 | 北京航空航天大学 | 一种基于对象的快速分形视频压缩与解压缩方法 |
| CN102263952B (zh) * | 2011-07-06 | 2013-12-11 | 北京航空航天大学 | 一种基于对象的快速双目立体视频分形压缩与解压缩方法 |
| CN102263953B (zh) * | 2011-07-06 | 2013-12-11 | 北京航空航天大学 | 一种基于对象的快速多目立体视频分形压缩与解压缩方法 |
| CN102316323B (zh) * | 2011-07-06 | 2014-03-05 | 北京航空航天大学 | 一种快速的双目立体视频分形压缩与解压缩方法 |
| CN102263951B (zh) * | 2011-07-06 | 2014-03-05 | 北京航空航天大学 | 一种快速的分形视频压缩与解压缩方法 |
| CN102291579B (zh) * | 2011-07-06 | 2014-03-05 | 北京航空航天大学 | 一种快速的多目立体视频分形压缩与解压缩方法 |
| CN103647969B (zh) * | 2011-07-06 | 2016-09-14 | 北京航空航天大学 | 一种基于对象的快速分形视频压缩与解压缩方法 |
| US8964833B2 (en) | 2011-07-19 | 2015-02-24 | Qualcomm Incorporated | Deblocking of non-square blocks for video coding |
| CA2837541C (en) * | 2011-07-19 | 2018-07-03 | Panasonic Corporation | Filtering method, decoding method, and coding method |
| CN107295342B (zh) | 2011-07-22 | 2020-04-28 | Sk电信有限公司 | 视频编码装置 |
| CN108696753B (zh) | 2011-09-20 | 2021-07-27 | Lg 电子株式会社 | 用于编码/解码图像信息的方法和装置 |
| AU2012327672B2 (en) * | 2011-10-24 | 2015-09-03 | Hfi Innovation Inc. | Method and apparatus for non-cross-tile loop filtering |
| CN109672883A (zh) * | 2011-11-04 | 2019-04-23 | Lg 电子株式会社 | 用于编码/解码图像信息的方法和装置 |
| AR092786A1 (es) * | 2012-01-09 | 2015-05-06 | Jang Min | Metodos para eliminar artefactos de bloque |
| US20130208808A1 (en) * | 2012-02-08 | 2013-08-15 | Panasonic Corporation | Image coding method and image decoding method |
| EP2829065B1 (en) * | 2012-03-21 | 2020-05-13 | MediaTek Singapore Pte Ltd. | Method and apparatus for intra mode derivation and coding in scalable video coding |
| US9264710B2 (en) * | 2012-07-06 | 2016-02-16 | Texas Instruments Incorporated | Method and system for video picture intra-prediction estimation |
| US10321130B2 (en) * | 2013-01-07 | 2019-06-11 | Vid Scale, Inc. | Enhanced deblocking filters for video coding |
| AU2014252043B2 (en) * | 2013-04-07 | 2016-11-24 | Dolby International Ab | Signaling change in output layer sets |
| US11109036B2 (en) | 2013-10-14 | 2021-08-31 | Microsoft Technology Licensing, Llc | Encoder-side options for intra block copy prediction mode for video and image coding |
| AU2013403224B2 (en) | 2013-10-14 | 2018-10-18 | Microsoft Technology Licensing, Llc | Features of intra block copy prediction mode for video and image coding and decoding |
| US10390034B2 (en) | 2014-01-03 | 2019-08-20 | Microsoft Technology Licensing, Llc | Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area |
| KR102258427B1 (ko) | 2014-01-03 | 2021-06-01 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 이미지 코딩/디코딩에서의 블록 벡터 예측 |
| US11284103B2 (en) | 2014-01-17 | 2022-03-22 | Microsoft Technology Licensing, Llc | Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning |
| CA2939431C (en) | 2014-03-04 | 2020-09-22 | Microsoft Techology Licensing, Llc | Block flipping and skip mode in intra block copy prediction |
| KR102319384B1 (ko) * | 2014-03-31 | 2021-10-29 | 인텔렉추얼디스커버리 주식회사 | 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치 |
| CN105493505B (zh) | 2014-06-19 | 2019-08-06 | 微软技术许可有限责任公司 | 统一的帧内块复制和帧间预测模式 |
| WO2016043933A1 (en) * | 2014-09-15 | 2016-03-24 | Mediatek Inc. | Method of deblocking for intra block copy in video coding |
| KR102330740B1 (ko) | 2014-09-30 | 2021-11-23 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 파면 병렬 프로세싱이 인에이블되는 경우의 인트라 픽쳐 예측 모드에 대한 규칙 |
| WO2016200242A1 (ko) | 2015-06-11 | 2016-12-15 | 한양대학교 산학협력단 | 적응적인 디블록킹 필터링을 이용하는 영상 부호화 방법과 영상 복호화 방법 및 장치 |
| US10986349B2 (en) | 2017-12-29 | 2021-04-20 | Microsoft Technology Licensing, Llc | Constraints on locations of reference blocks for intra block copy prediction |
| EP3782371A4 (en) * | 2018-03-30 | 2021-12-22 | Sharp Kabushiki Kaisha | SYSTEMS AND PROCEDURES FOR THE APPLICATION OF UNBLOCKING FILTERS ON RECONSTRUCTED VIDEO DATA |
| US11228776B1 (en) * | 2020-03-27 | 2022-01-18 | Tencent America LLC | Method for output layer set mode in multilayered video stream |
| CN117615146A (zh) * | 2023-11-13 | 2024-02-27 | 书行科技(北京)有限公司 | 视频处理方法及装置、电子设备及计算机可读存储介质 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6160503A (en) * | 1992-02-19 | 2000-12-12 | 8×8, Inc. | Deblocking filter for encoder/decoder arrangement and method with divergence reduction |
| KR960039992A (ko) | 1995-04-29 | 1996-11-25 | 배순훈 | 블록화 현상 제거 장치 및 이를 이용한 동영상 복호화기 |
| RU2093968C1 (ru) | 1995-08-02 | 1997-10-20 | Закрытое акционерное общество "Техно-ТМ" | Способ кодирования-декодирования изображений и устройство для его осуществления |
| DE69738787D1 (de) | 1996-05-14 | 2008-07-31 | Daewoo Electronics Corp | Reduzierung von Blockeffekten in einem Bewegtbilddekoder |
| US6292512B1 (en) * | 1998-07-06 | 2001-09-18 | U.S. Philips Corporation | Scalable video coding system |
| FI117534B (fi) * | 2000-01-21 | 2006-11-15 | Nokia Corp | Menetelmä digitaalisten kuvien suodattamiseksi ja suodatin |
| US7929610B2 (en) * | 2001-03-26 | 2011-04-19 | Sharp Kabushiki Kaisha | Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding |
| KR100804902B1 (ko) * | 2001-09-12 | 2008-02-20 | 마쯔시다덴기산교 가부시키가이샤 | 화상 부호화 방법 및 화상 복호화 방법 |
| US7203942B2 (en) * | 2001-09-25 | 2007-04-10 | Interuniversitair Microelektronica Centrum | Method for operating a real-time multimedia terminal in a QoS manner |
| KR100584549B1 (ko) | 2002-01-31 | 2006-05-30 | 삼성전자주식회사 | 블록킹 효과를 제거하기 위한 필터링 방법 및 그 장치 |
| US7715477B2 (en) * | 2002-05-29 | 2010-05-11 | Diego Garrido | Classifying image areas of a video signal |
| US20030235250A1 (en) * | 2002-06-24 | 2003-12-25 | Ankur Varma | Video deblocking |
| US7372905B2 (en) * | 2002-07-11 | 2008-05-13 | Matsushita Electric Industrial Co., Ltd. | Filtering intensity decision method, moving picture encoding method, and moving picture decoding method |
| US7227901B2 (en) * | 2002-11-21 | 2007-06-05 | Ub Video Inc. | Low-complexity deblocking filter |
| US20060051068A1 (en) | 2003-01-10 | 2006-03-09 | Thomson Licensing S.A. | Decoder apparatus and method for smoothing artifacts created during error concealment |
| RU2005126424A (ru) * | 2003-01-20 | 2006-01-10 | Конинклейке Филипс Электроникс Н.В. (Nl) | Кодирование видеосигнала |
| JP4191729B2 (ja) | 2005-01-04 | 2008-12-03 | 三星電子株式会社 | イントラｂｌモードを考慮したデブロックフィルタリング方法、及び該方法を用いる多階層ビデオエンコーダ／デコーダ |
| US7961963B2 (en) * | 2005-03-18 | 2011-06-14 | Sharp Laboratories Of America, Inc. | Methods and systems for extended spatial scalability with picture-level adaptation |
-
2005
- 2005-01-28 KR KR1020050008136A patent/KR100679035B1/ko active IP Right Grant
- 2005-12-27 BR BRPI0519575-6A patent/BRPI0519575A2/pt not_active IP Right Cessation
- 2005-12-27 RU RU2007125163/09A patent/RU2341034C1/ru not_active IP Right Cessation
-
2006
- 2006-01-02 TW TW095100038A patent/TWI309951B/zh not_active IP Right Cessation
- 2006-01-03 US US11/322,392 patent/US8542750B2/en active Active
- 2006-01-04 CN CNB2006100003325A patent/CN100518321C/zh not_active Expired - Fee Related
-
2008
- 2008-04-02 RU RU2008112772/09A patent/RU2367113C1/ru not_active IP Right Cessation
- 2008-04-02 RU RU2008112773/09A patent/RU2365062C1/ru not_active IP Right Cessation
Non-Patent Citations (1)
| Title |
|---|
| ЯН РИЧАРДСОН. Видеокодирование Н.264 и MPEG-4 стандарты нового поколения, Техносфера. - М., 2005, перевод издания 2003, с.240-244. BAHADIR K. GUNTURK et al. Multiframe Blocking-Artifact Reduction for Transform-Coded Video, IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY, vol.12, №4, April 2002. * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2660612C2 (ru) * | 2009-07-31 | 2018-07-06 | Вилос Медиа Интернэшнл Лимитед | Устройство и способ обработки изображений |
| RU2787691C1 (ru) * | 2020-03-27 | 2023-01-11 | Тенсент Америка Ллс | Способ для режима набора выходных уровней в многоуровневом видеопотоке |
Also Published As
| Publication number | Publication date |
|---|---|
| US20060146941A1 (en) | 2006-07-06 |
| TW200627963A (en) | 2006-08-01 |
| KR100679035B1 (ko) | 2007-02-06 |
| CN1812580A (zh) | 2006-08-02 |
| US8542750B2 (en) | 2013-09-24 |
| RU2365062C1 (ru) | 2009-08-20 |
| KR20060080107A (ko) | 2006-07-07 |
| TWI309951B (en) | 2009-05-11 |
| RU2367113C1 (ru) | 2009-09-10 |
| BRPI0519575A2 (pt) | 2009-02-17 |
| CN100518321C (zh) | 2009-07-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2341034C1 (ru) | Способ управления устранением блочности, учитывающий режим внутреннего bl, и кодировщик/декодер многослойного видео, его использующий | |
| AU2005323586B2 (en) | Deblocking control method considering intra BL mode and multilayer video encoder/decoder using the same | |
| RU2355125C1 (ru) | СПОСОБ ФИЛЬТРАЦИИ ДЛЯ УМЕНЬШЕНИЯ БЛОЧНОСТИ, УЧИТЫВАЮЩИЙ РЕЖИМ intra-BL, И ИСПОЛЬЗУЮЩИЙ ЕГО МНОГОУРОВНЕВЫЙ ВИДЕОКОДЕР/ВИДЕОДЕКОДЕР | |
| EP2008469B1 (en) | Multilayer-based video encoding method and apparatus thereof | |
| US8902976B2 (en) | Hybrid encoding and decoding methods for single and multiple layered video coding systems | |
| CA2570282A1 (en) | Multilayer-based video encoding/decoding method and video encoder/decoder using smoothing prediction | |
| EP2452499A1 (en) | Methods and apparatus for spatially varying residue coding | |
| AU2006289710B2 (en) | Deblocking filtering method considering intra-BL mode and multilayer video encoder/decoder using the same | |
| Li | Improved motion-compensated temporal filtering (mctf) for scalable video coding |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20201228 |