RU2433561C2 - Способы и устройство для кодирования видео с несколькими представлениями - Google Patents

Способы и устройство для кодирования видео с несколькими представлениями Download PDF

Info

Publication number
RU2433561C2
RU2433561C2 RU2008132879/08A RU2008132879A RU2433561C2 RU 2433561 C2 RU2433561 C2 RU 2433561C2 RU 2008132879/08 A RU2008132879/08 A RU 2008132879/08A RU 2008132879 A RU2008132879 A RU 2008132879A RU 2433561 C2 RU2433561 C2 RU 2433561C2
Authority
RU
Russia
Prior art keywords
image
cross
video
different viewpoints
lists
Prior art date
Application number
RU2008132879/08A
Other languages
English (en)
Other versions
RU2008132879A (ru
Inventor
Епин СУ (US)
Епин СУ
Пэн ИНЬ (US)
Пэн ИНЬ
Кристина ГОМИЛА (US)
Кристина ГОМИЛА
Original Assignee
Томсон Лайсенсинг
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Томсон Лайсенсинг filed Critical Томсон Лайсенсинг
Publication of RU2008132879A publication Critical patent/RU2008132879A/ru
Application granted granted Critical
Publication of RU2433561C2 publication Critical patent/RU2433561C2/ru

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

Изобретение относится к видеокодерам и декодерам и предназначены для кодирования видео с несколькими представлениями (многовидового видео). Технический результат - повышение точности видеокодирования. Видеокодер содержит кодер (100) для кодирования блока в изображении посредством выбора между временным прогнозированием и кросс-видовым прогнозированием, чтобы обеспечить прогнозирование для блока. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет одну из различных точек обзора. Высокоуровневый синтаксис используется для того, чтобы указать применение кросс-видового прогнозирования для блока. 9 н. и 4 з.п. ф-лы, 6 ил., 4 табл.

Description

Перекрестные ссылки на родственные заявки
Данная заявка притязает на приоритет предварительной заявки (США) под номером 60/757289, озаглавленной "Multi-View Video Coding System", поданной 9 января 2006 года, которая вставлена в данный документ по ссылке. Кроме того, данная заявка связана с непредварительной заявкой, под номером поверенного PU060004, озаглавленной "Methods and Apparatus for Multi-View Video Coding", которая является общеназначенной, полностью содержится по ссылке и подана параллельно с данной заявкой.
Область техники, к которой относится изобретение
Настоящее изобретение, в общем, относится к видеокодерам и декодерам, а более конкретно к способам и устройству кодирования видео с несколькими представлениями (многовидового видео).
Уровень техники
Кодирование видео с несколькими представлениями (Multi-view video coding, сокращенно MVC) - это структура сжатия для кодирования последовательностей с несколькими представлениями. Последовательность кодирования видео с несколькими представлениями (MVC) - это набор из двух или более видеопоследовательностей, которые фиксируют одну и ту же сцену с различной точки обзора.
Общепризнанно, что кодирование видео с несколькими представлениями является ключевой технологией, которая служит для множества вариантов применения, включая варианты применения свободной точки обзора и трехмерного видео, домашние развлекательные приложения и наблюдение. В этих вариантах применения с несколькими представлениями объем используемых видеоданных огромный. Таким образом, имеется потребность в технологиях эффективного сжатия, чтобы повысить эффективность кодирования текущих решений по кодированию видео, выполняющих одновременную передачу независимых видов.
В последние годы прилагались значительные усилия по проектированию эффективных способов сжатия стереоскопического видео. Традиционные способы моноскопического сжатия могут быть применены независимо к левому и правому представлению пары стереоизображения. Тем не менее, более высокие коэффициенты сжатия могут быть достигнуты, если используется высокая кросс-видовая корреляция.
Касательно подхода предшествующего уровня техники, при котором оба представления пары стереоскопического изображения кодируются, профиль с несколькими представлениями (MVP) задан в стандарте Экспертной группы по киноизображению-2 (MPEG-2) Международной организации по стандартизации/Международной электротехнической комиссии (ISO/IEC), чтобы передавать пару видеосигналов. MVP базируется на подходе многослойного представления сигнала, с тем чтобы одно представление (зачастую левое представление) назначалось основному уровню, а другое представление назначалось уровню улучшения. Моноскопическое кодирование с помощью таких же средств, что и основной профиль (MP), применяется к основному уровню. Уровень улучшения кодируется с помощью средств временной масштабируемости и гибридного прогнозирования полей движения и несоразмерности.
В способах предшествующего уровня техники, относящихся к стандарту улучшенного видеокодирования (AVC) часть 10 Экспертной группы по киноизображению-4 (MPEG-4) Международной организации по стандартизации/Международной электротехнической комиссии (ISO/IEC)/рекомендации H.264 Международного союза электросвязи - сектор телекоммуникаций (ITU-T) (далее "стандарт MPEG-4 AVC"), кодирование стереоскопического видео может осуществляться двумя различными способами: (i) в качестве конкретного случая кодирования черезстрочных изображений, где все поля конкретной четности назначаются левому представлению, а все поля противоположной четности считаются правым представлением содержимого стереопредставления; либо альтернативно (ii) посредством чередования кадров из левого и правого представлений, чтобы создать одну моноскопическую видеопоследовательность. Сообщение информации дополнительного улучшения (SEI) стереовидения предоставляет индикатор декодеру в отношении того, представляет или нет кодированная видеопоследовательность стереоскопическое содержимое, и какой способ использован для того, чтобы кодировать соответствующее содержимое.
Эти ранее известные способы требуют минимальных модификаций существующих методик моноскопического кодирования. Тем не менее, они демонстрируют ограниченную способность к снижению избыточности, имеющейся между двумя представлениями в стереоскопической паре. Как результат, кодирование стереопредставления приводит к значительной дополнительной служебной информации в сравнении с кодированием одного моноскопического представления. Более того, отсутствует предшествующая поддержка в кодировании более двух представлений камеры.
Раскрытие изобретения
Эти и другие недостатки и изъяны предшествующего уровня техники разрешаются посредством настоящего изобретения, которое направлено на способы и устройства кодирования видео с несколькими представлениями.
Согласно аспекту настоящего изобретения предусмотрен видеокодер. Видеокодер включает в себя кодер для кодирования блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет текущую одну из различных точек обзора. Два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
Согласно другому аспекту настоящего изобретения предусмотрен видеокодер. Видеокодер включает в себя, по меньшей мере, один буфер для сохранения декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены.
Согласно еще одному другому аспекту настоящего изобретения предусмотрен способ кодирования видео. Способ включает в себя кодирование блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет текущую одну из различных точек обзора. Два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
Согласно еще одному другому аспекту настоящего изобретения, предусмотрен способ кодирования видео. Способ включает в себя сохранение, по меньшей мере, в одном буфере декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены.
Согласно дополнительному аспекту настоящего изобретения, предусмотрен видеодекодер. Видеодекодер включает в себя декодер для декодирования блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет текущую одну из различных точек обзора. Два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
Согласно еще одному дополнительному аспекту настоящего изобретения, предусмотрен видеодекодер. Видеодекодер включает в себя, по меньшей мере, один буфер для сохранения декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены.
Согласно дополнительному аспекту настоящего изобретения, предусмотрен способ декодирования видео. Способ включает в себя декодирование блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет текущую одну из различных точек обзора. Два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
Согласно дополнительному аспекту настоящего изобретения, предусмотрен способ декодирования видео. Способ включает в себя сохранение, по меньшей мере, в одном буфере декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены.
Эти и другие аспекты, признаки и преимущества настоящего изобретения должны стать очевидными из последующего Осуществления изобретения с подробным описанием примерных вариантов осуществления, которые должны рассматриваться в связи с прилагаемыми чертежами.
Краткое описание чертежей
Настоящее изобретение может стать более понятным в соответствии со следующими примерными чертежами, на которых:
Фиг.1 - это блок-схема примерного кодера для кодирования видео с несколькими представлениями (MVC), к которому могут быть применены настоящие принципы, в соответствии с вариантом осуществления настоящих принципов;
Фиг.2 - это блок-схема примерного декодера для кодирования видео с несколькими представлениями (MVC), к которому могут быть применены настоящие принципы, в соответствии с вариантом осуществления настоящих принципов;
Фиг.3 - это блок-схема последовательности операций примерного способа составления списка эталонов для видеосодержимого с несколькими представлениями в соответствии с вариантом осуществления настоящих принципов;
Фиг.4 - это блок-схема последовательности операций примерного способа принятия решения по временному режиму/кросс-видовому режиму в соответствии с вариантом осуществления настоящих принципов;
Фиг.5 - это блок-схема последовательности операций примерного способа обработки векторов движения и несоразмерности для одной серии макроблоков, соответствующей видеосодержимому с несколькими представлениями, в соответствии с вариантом осуществления настоящих принципов; и
Фиг.6 - это блок-схема последовательности операций другого способа обработки векторов движения и несоразмерности для видеосодержимого с несколькими представлениями в соответствии с вариантом осуществления настоящих принципов.
Осуществление изобретения
Настоящее изобретение направлено на способы и устройства кодирования видео с несколькими представлениями.
Настоящее «Осуществление изобретения» иллюстрирует принципы настоящего изобретения. Таким образом, следует принимать во внимание, что специалисты в данной области техники должны иметь возможность разрабатывать различные компоновки, которые, хотя не описаны или показаны явно в данном документе, осуществляют принципы изобретения и включаются в его идею и область применения.
Все примеры и условный язык, применяемые в данном документе, предназначены для педагогических целей, чтобы помочь читателю в понимании принципов изобретения и понятий, вносимых автором изобретения в продвижение уровня техники, и должны рассматриваться как не налагающие ограничения на данные конкретно упоминаемые примеры и условия.
Более того, все заявления в данном документе, касающиеся принципов, аспектов и вариантов осуществления изобретения, а также его конкретных примеров предназначены для того, чтобы содержать в себя структурные и функциональные эквиваленты. Дополнительно, предназначено, чтобы эти эквиваленты включали в себя как известные в данный момент эквиваленты, так и эквиваленты, разрабатываемые в будущем, т.е. любые разрабатываемые элементы, которые выполняют ту же функцию, вне зависимости от структуры.
Таким образом, к примеру, специалисты в данной области техники должны признавать, что блок-схемы, представляемые в данном документе, означают концептуальные представления иллюстративной схемы, осуществляющей принципы изобретения. Аналогично, следует принимать во внимание, что все блок-схемы последовательности операций, блок-схемы, схемы переходов состояния, псевдокод и т.п. представляют различные процессы, которые могут быть большей частью представлены в машиночитаемых носителях и тем самым приведены в исполнение посредством компьютера или процессора, независимо от того, показан или нет в явной форме такой компьютер или процессор.
Функции различных элементов, показанных на чертежах, могут быть предоставлены посредством использования специализированных аппаратных средств, а также аппаратных средств, допускающих приведение в исполнение программного обеспечения, ассоциативно связанного с соответствующим программным обеспечением. Когда предоставляются посредством процессора, функции могут предоставляться посредством одного выделенного процессора, посредством одного совместно используемого процессора или посредством множества отдельных процессоров, некоторые из которых могут совместно использоваться. Кроме того, явное использование термина "процессор" или "контроллер" не должно рассматриваться так, чтобы ссылаться исключительно на аппаратные средства, допускающие приведение в исполнение программного обеспечения, и может неявно включать в себя, без ограничений, аппаратные средства процессора цифровых сигналов (DSP), постоянное запоминающее устройство (ROM) для сохранения программного обеспечения, оперативное запоминающее устройство (RAM) и энергонезависимое устройство хранения.
Другие аппаратные средства, традиционные и/или специализированные, также могут быть включены. Аналогично, все переключатели, показанные на чертежах, являются только концептуальными. Их функция может выполняться посредством операции программной логики, посредством специализированной логики, посредством взаимодействия программного управления и специализированной логики или даже вручную, при этом конкретная методика выбирается посредством средства реализации, как более четко ясно из контекста.
В формуле изобретения любой элемент, выраженный как средство для выполнения указанной функции, предназначен, чтобы содержать в себя любой способ выполнения этой функции, включая, к примеру, a) комбинацию схемных элементов, которые выполняют эту функцию, или b) программное обеспечение в любой форме, включая, таким образом, микропрограммное обеспечение, микрокод и т.п., комбинированное с надлежащей схемой для приведения в исполнение этого программного обеспечения, чтобы осуществлять функцию. Изобретение, задаваемое посредством данной формулы изобретения, базируется на том, что функциональность, предоставляемая посредством различных перечисленных средств, комбинируется и объединяется способом, который требуется формулой изобретения. Таким образом, считается, что любое средство, которое может предоставлять такую функциональность, эквивалентно показанным в данном документе.
Ссылка в этом подробном описании на "один вариант осуществления" или "вариант осуществления" настоящих принципов означает, что конкретный признак, структура, характеристика и т.п., описываемые в связи с вариантом осуществления, включены, по меньшей мере, в один вариант осуществления настоящих принципов. Таким образом, вхождения фразы "в одном варианте осуществления" или "в варианте осуществления" в различных местах подробного описания не обязательно все ссылаются на один и тот же вариант осуществления.
Обращаясь к Фиг.1, примерный кодер для кодирования видео с несколькими представлениями (MVC), в общем, показан ссылкой с номером 100. Кодер 100 включает в себя сумматор 105, имеющий выход, соединенный для обмена сигналами с входом модуля 110 преобразования. Выход модуля 110 преобразования соединен для обмена сигналами с входом квантователя 115. Выход квантователя 115 соединен для обмена сигналами с входом энтропийного кодера 120 и входом обратного квантователя 125. Выход обратного квантователя 125 соединен для обмена сигналами с входом модуля 130 обратного преобразования. Выход модуля 130 обратного преобразования соединен для обмена сигналами с первым неинвертирующим входом сумматора 135. Выход сумматора 135 соединен для обмена сигналами с входом модуля 145 внутреннего прогнозирования и входом деблокирующего фильтра 150. Выход деблокирующего фильтра 150 соединен для обмена сигналами с входом хранилища 155 опорных изображений (для представления i). Выход хранилища 155 опорных изображений соединен для обмена сигналами с первым входом модуля 175 компенсации движения и первым входом модуля 180 оценки движения. Выход модуля 180 оценки движения соединен для обмена сигналами со вторым входом модуля 175 компенсации движения.
Выход хранилища 160 опорных изображений (для других представлений) соединен для обмена сигналами с первым входом модуля 170 оценки несоразмерности/освещенности и первым входом модуля 165 компенсации несоразмерности/освещенности. Выход модуля 170 оценки несоразмерности/освещенности соединен для обмена сигналами со вторым входом модуля 165 компенсации несоразмерности/освещенности.
Выход энтропийного декодера 120 доступен в качестве выхода кодера 100. Неинвертирующий вход сумматора 105 доступен в качестве входа кодера 100 и соединен для обмена сигналами со вторым входом модуля 170 оценки несоразмерности/освещенности и вторым входом модуля 180 оценки движения. Выход переключателя 185 соединен для обмена сигналами со вторым неинвертирующим входом сумматора 135 и с инвертирующим входом сумматора 105. Переключатель 185 включает в себя первый вход, соединенный для обмена сигналами с выходом модуля 175 компенсации движения, второй вход, соединенный для обмена сигналами с выходом модуля 165 компенсации несоразмерности/освещенности, и третий вход, соединенный для обмена сигналами с выходом модуля 145 внутреннего прогнозирования.
Модуль 140 выбора режима имеет выход, соединенный с переключателем 185, для управления тем, какой вход выбран посредством переключателя 185.
Обращаясь к Фиг.2, примерный декодер для кодирования видео с несколькими представлениями (MVC) указан, в общем, посредством ссылки с номером 200. Декодер 200 включает в себя энтропийный декодер 205, имеющий выход, соединенный для обмена сигналами с входом обратного квантователя 210. Выход обратного квантователя соединен для обмена сигналами с входом модуля 215 обратного преобразования. Выход модуля 215 обратного преобразования соединен для обмена сигналами с первым неинвертирующим входом сумматора 220. Выход сумматора 220 соединен для обмена сигналами с входом деблокирующего фильтра 225 и входом модуля 230 внутреннего прогнозирования. Выход деблокирующего фильтра 225 соединен для обмена сигналами с входом хранилища 240 опорных изображений (для представления i). Выход хранилища 240 опорных изображений соединен для обмена сигналами с первым входом модуля 235 компенсации движения.
Выход хранилища 245 опорных изображений (для других представлений) соединен для обмена сигналами с первым входом модуля 250 компенсации несоразмерности/освещенности.
Вход энтропийного кодера 205 доступен в качестве входа в декодер 200 для приема остаточного потока битов. Кроме того, вход модуля 260 режима также доступен в качестве входа в декодер 200 для приема управляющего синтаксиса, чтобы управлять тем, какой вход выбран посредством переключателя 255. Более того, второй вход модуля 235 компенсации движения доступен в качестве входа декодера 200 для приема векторов движения. Так же, второй вход модуля 250 компенсации несоразмерности/освещенности доступен в качестве входа в декодер 200 для приема векторов несоразмерности и синтаксиса компенсации освещенности.
Выход переключателя 255 соединен для обмена сигналами со вторым неинвертирующим входом сумматора 220. Первый вход переключателя 255 соединен для обмена сигналами с выходом модуля 250 компенсации несоразмерности/освещенности. Второй вход переключателя 255 соединен для обмена сигналами с выходом модуля 235 компенсации движения. Третий вход переключателя 255 соединен для обмена сигналами с выходом модуля 230 внутреннего прогнозирования. Выход модуля 260 режима соединен для обмена сигналами с переключателем 255 для управления тем, какой вход выбирается посредством переключателя 255. Выход деблокирующего фильтра 225 доступен в качестве выхода декодера.
Кодирование видео с несколькими представлениями (MVC) - это структура сжатия для кодирования последовательностей с несколькими представлениями. Последовательность кодирования видео с несколькими представлениями (MVC) - это набор из двух или более видеопоследовательностей, которые фиксируют одну и ту же сцену с различной точки обзора.
Поскольку источник видео с несколькими представлениями включает в себя несколько представлений одной сцены, имеется высокая степень корреляции между изображениями нескольких представлений. Следовательно, избыточность представлений может быть использована в дополнение к временной избыточности и достигается посредством выполнения прогнозирования для различных представлений. Соответственно, варианты осуществления настоящих принципов, описанных в данном документе, могут влечь за собой как временное прогнозирование, так и кросс-видовое прогнозирование.
В иллюстративных целях варианты осуществления настоящих принципов описаны в данном документе относительно стандарта MPEG-4 AVC. Тем не менее, следует принимать во внимание, что настоящее изобретение не ограничено стандартом MPEG-4 AVC и, с учетом методик настоящих принципов, предоставленных в данном документе, специалисты в данной области техники должны рассматривать эти и другие стандарты кодирования видео, допускающие кодирование видео с несколькими представлениями, к которым могут быть применены настоящие принципы, при сохранении области применения настоящих принципов. Варианты осуществления настоящих принципов, описанные в данном документе, относящиеся к стандарту MPEG-4 AVC, могут включать в себя, к примеру, изменения деблокирующего фильтра и/или энтропийное кодирование синтаксисов.
В варианте осуществления, на уровне серии макроблоков списки кросс-видового прогнозирования вводятся с тем, чтобы обеспечить прогнозирование несоразмерности, и синтаксис типа кросс-видового кодирования добавлен, чтобы указать тип кодирования прогнозирования несоразмерности. На уровне макроблока (MB) синтаксис флага вводится, чтобы указать то, используется компенсация движения или компенсация несоразмерности для каждого блока сигнала. Более того, другие изменения, которые могут быть использованы в вариантах осуществления, направленных на стандарт MPEG-4 AVC, включают в себя, к примеру, фильтр деблокирования, контексты для контекстного адаптивного двоичного арифметического кодирования (CABAC) по новым синтаксисам и дополнительные синтаксисы на уровне набора параметров и уровне заголовка серии макроблоков.
Далее приводится описание, касающееся типа кросс-видового кодирования и списков кросс-видовых эталонов в соответствии с вариантом осуществления настоящих принципов.
Стандарт MPEG-4 AVC выполняет межкадровое прогнозирование посредством формирования двух списков прогнозирования, List0 и List1. Следовательно, блок изображений в текущем кадре может компенсироваться либо посредством использования только опорного изображения в List0, либо посредством использования двух опорных изображений, по одному из каждого списка. В заголовке серии макроблоков синтаксис slice_type сообщается, чтобы указать тип временного кодирования для каждой серии макроблоков. Когда slice_type=P_SLICE, только List0 должен быть использован при компенсации движения. Когда slice_type=B_SLICE, List0 и List1, вероятно, могут быть использованы при компенсации движения.
Чтобы обеспечить кросс-видовое прогнозирование для различных представлений, вариант осуществления настоящих принципов влечет за собой использование двух новых списков прогнозирования: ViewList0 и ViewList1. Изображения в ViewList0/ViewList1 являются опорными изображениями из представлений камеры, отличных от текущего представления. Новый синтаксис view_slice_type в заголовке серии макроблоков используется для того, чтобы указать тип кодирования для кросс-видового прогнозирования. Например, если конкретная серия макроблоков имеет slice_type=B_SLICE и view_slice_type=P_SLICE, то макроблок (MB) в этой серии макроблоков может быть либо кодирован во времени как тип кодирования B_SLICE, либо кодирован кросс-видовым образом как тип кодирования P_SLICE.
Альтернативный способ активации кросс-видовых прогнозирований в архитектуре стандарта MPEG-4 AVC включает в себя вставку опорных изображений из другого представления в списки List0/List1 без введения новых списков прогнозирования представлений и типа кросс-видового кодирования. Тем не менее, преимущества первого подхода следующие. Одно преимущество первого подхода заключается в том, что поскольку опорные изображения в ViewList0/ViewList1 включают в себя только кросс-видовые эталоны, служебные сигналы в ref_idx расходуют меньше битов, чем при наличии как эталонов этого же представления, так и кросс-видовых эталонов в одном списке. Другое преимущество первого подхода состоит в том, что наличие двух новых списков в ViewList0/ViewList1 предоставляет отдельный способ обработки временных прогнозирований и кросс-видовых прогнозирований. Это связано со случаем, когда List0/List1 включает в себя как временные эталоны, так и кросс-видовые эталоны, так что процесс переупорядочения стандарта MPEG-4 AVC для составления списков опорных изображений потребуется модифицировать, и он обязательно станет более сложным.
В варианте осуществления списки кросс-видовых эталонов для каждой серии макроблоков могут быть сформированы согласно следующим правилам. Касательно первого правила, в заголовке серии макроблоков число кросс-видовых опорных изображений и их view_id сообщаются для ViewList0 и ViewList1. View_id отличаются в каждом из двух списков кросс-видового прогнозирования. Касательно второго правила, опорные изображения в списке кросс-видового прогнозирования упорядочиваются в той же последовательности, что они отображаются в заголовке серии макроблоков. Для каждого упоминаемого представления опорное изображение с ближайшим порядковым номером изображения (POC) (в отношении POC текущей серии макроблоков) используется в списке кросс-видового прогнозирования текущей серии макроблоков.
Дополнительные синтаксисы переупорядочения эталонов могут быть включены, чтобы обеспечить более гибкую обработку кросс-видовых опорных изображений.
Обращаясь к Фиг.3, примерный способ составления списка эталонов для видеосодержимого с несколькими представлениями указывается, в общем, посредством ссылки с номером 300. Способ 300 включает в себя начальный этап 305, который передает управление этапу 310 принятия решения. Этап 310 принятия решения определяет, является или нет тип текущей серии макроблоков P-серией или B-серией. Если да, то управление передается функциональному этапу 315. В противном случае, управление передается этапу 330 принятия решения.
Функциональный этап 315 составляет List0 с помощью временных эталонов и передает управление этапу 320 принятия решения. Этап 320 принятия решения определяет то, является или нет текущий тип серии макроблоков B-серией. Если да, то управление передается функциональному этапу 325. В противном случае, управление передается этапу 330 принятия решения.
Функциональный этап 325 составляет List1 с помощью временных эталонов и передает управление этапу 330 принятия решения.
Этап 330 принятия решения определяет то, является или нет тип серии макроблоков текущего представления P-серией или B-серией. Если да, то управление передается функциональному этапу 335. В противном случае, управление передается этапу 350 границы цикла.
Функциональный этап 335 составляет ViewList0 с помощью кросс-видовых эталонов и передает управление этапу 340 принятия решения. Этап 340 принятия решения определяет то, является или нет тип серии макроблоков текущего представления B-серией. Если да, то управление передается функциональному этапу 345. В противном случае, управление передается этапу 350 границы цикла.
Функциональный этап 345 составляет ViewList0 с помощью кросс-видовых эталонов и передает управление этапу 350 границы цикла.
Этап 350 границы цикла начинает цикл по каждому макроблоку, включая задание диапазона для контура с помощью переменной mb = от 0 до MacroBlockslnPic-1, и передает управление функциональному этапу 355. Функциональный этап 355 кодирует текущий макроблок с помощью List0/List1 и передает управление этапу 360 принятия решения. Этап 360 принятия решения определяет то, равен или нет тип серии макроблоков текущего представления P-серии или B-серии. Если да, то управление передается функциональному этапу 365. В противном случае, управление передается функциональному этапу 370.
Функциональный этап 365 кодирует текущий макроблок с помощью ViewList0/ViewList1 и передает управление функциональному этапу 370.
Функциональный этап 370 выбирает оптимальный режим, задает mvc_prediction_flag и передает управление функциональному этапу 375. Функциональный этап 375 выполняет обработку буфера векторов движения/несоразмерности и передает управление этапу 380 границы контура. Этап границы контура завершает контур и передает управление функциональному этапу 385. Функциональный этап 385 сохраняет кодированное изображение в буфере декодированных изображений (dpb) и передает управление завершающему этапу 390.
Поскольку кросс-видовое прогнозирование каждой серии макроблоков является полностью конфигурируемым с помощью типа кросс-видового кодирования и списков прогнозирования представлений, кодек для кодирования видео с несколькими представлениями (MVC) может поддерживать произвольный порядок кодирования представлений и масштабируемость представлений.
В варианте осуществления на MB-уровне новый синтаксис, называемый mvc_pred_flag, указывает то, используется временное прогнозирование или кросс-видовое прогнозирование для кодирования каждого блока сигналов. В случае mvc_pred_flag=0, List0/List1 должен быть использован для компенсации движения в зависимости от slice_type. Когда mvc_pred_flag=1, то ViewList0/ViewList1 должен быть использован в зависимости от view_slice_type.
Обращаясь к Фиг.4, примерный способ осуществления выбора временного/кросс-видового режима указывается, в общем, посредством ссылки с номером 400. Способ 400 включает в себя начальный этап 405, который передает управление этапу 410 принятия решения. Этап 410 принятия решения определяет, является или нет тип текущей серии макроблоков P-серией или B-серией. Если да, то управление передается функциональному этапу 415. В противном случае, управление передается этапу 430 принятия решения.
Функциональный этап 415 составляет List0 с помощью временных эталонов и передает управление этапу 420 принятия решения. Этап 420 принятия решения определяет то, является или нет текущий тип серии макроблоков B-серией. Если да, то управление передается функциональному этапу 425. В противном случае, управление передается этапу 430 принятия решения.
Функциональный этап 425 составляет List1 с помощью временных эталонов и передает управление этапу 430 принятия решения.
Этап 430 принятия решения определяет то, является или нет тип серии макроблоков текущего представления P-серией или B-серией. Если да, то управление передается функциональному этапу 435. В противном случае, управление передается этапу 450 границы цикла.
Функциональный этап 435 составляет ViewList0 с помощью кросс-видовых эталонов и передает управление этапу 440 принятия решения. Этап 440 принятия решения определяет то, является или нет тип серии макроблоков текущего представления B-серией. Если да, то управление передается функциональному этапу 445. В противном случае, управление передается этапу 450 границы цикла.
Функциональный этап 445 составляет ViewList0 с помощью кросс-видовых эталонов и передает управление этапу 450 границы цикла.
Этап 450 границы цикла начинает цикл для каждого макроблока, включая задание диапазона для контура с помощью переменной mb = от 0 до MacroBlockslnPic-1, и передает управление этапу 455 принятия решения. Этап 455 принятия решения определяет то, равен или нет 1 mvc_prediction_flag. Если да, то управление передается функциональному этапу 460. В противном случае, управление передается функциональному этапу 465.
Функциональный этап 460 декодирует макроблок с помощью ViewList0/ViewList1 и передает управление функциональному этапу 470.
Функциональный этап 465 декодирует макроблок с помощью List0/List1 и передает управление функциональному этапу 470.
Функциональный этап 470 выполняет обработку буфера векторов движения/несоразмерности и передает управление этапу 475 границы контура. Этап 475 границы контура завершает контур и передает управление функциональному этапу 480. Функциональный этап 480 сохраняет декодированное изображение в буфере декодированных изображений (dpb) и передает управление завершающему этапу 485.
Три новых контекста CABAC добавлено для кодирования синтаксиса mvc_pred_dir. Моделирование контекста такое же, как и для синтаксиса transform_size_8×8_flag.
В дополнении по нескольким представлениям стандарта MPEG-4 AVC буфер декодированных изображений (dpb) должен иметь возможность обрабатывать декодированные изображения из нескольких представлений. При условии, что имеется N входных представлений, вариант осуществления настоящего изобретения может включать в себя N отдельных dpb. Каждый dpb сохраняет декодированные изображения из одного конкретного представления.
Альтернативный способ управления dpb состоит в том, что поместить изображения всех представлений в один dpb. Тем не менее, первый подход имеет следующие преимущества. Одно преимущество первого подхода состоит в том, что каждое представление имеет собственный dpb, с таким же процессом пометки декодированных эталонов, как и в стандарте MPEG-4 AVC. Этот более простой подход снижает сложность управления изображениями различных представлений в одном dpb. Другое преимущество первого подхода связано с нежелательностью снижения числа доступных временных опорных кадров, поскольку временная корреляция, в общем, сильнее, чем кросс-видовая корреляция. За счет управления посредством каждого представления собственными опорными изображениями в dpb временное прогнозирование должно иметь такую же способность прогнозирования нескольких опорных кадров, как и одновременная передача.
Характерной чертой MVC в сравнении с традиционным кодированием видео является совместное присутствия и движения, и несоразмерности. Блоки, которые прогнозируются во времени, должны сообщить векторы движения (MV), в отличие от векторов несоразмерности (DV) для кросс-видового прогнозирования.
Два примерных способа описаны в данном документе для обработки и векторов движения и векторов несоразмерности в одной серии макроблоков. Тем не менее, следует принимать во внимание, что с учетом методик настоящего изобретения, предоставленных в данном документе, специалисты в данной области техники должны рассматривать эти и другие способы для этого, при сохранении области применения настоящего изобретения.
В первом способе для каждого блока сообщается и сохраняется либо вектор движения, либо вектор несоразмерности, но не и того, и другого. То, сообщается и сохраняется вектор движения или вектор несоразмерности, зависит от синтаксиса mvc_pred_flag. Это должно требовать меньше объема памяти, но комбинированное векторное поле не будет согласованным.
Во втором способе для каждого блока сообщается и сохраняется и вектор движения, и вектор несоразмерности. Это может быть достигнуто либо посредством сообщения обоими векторами, либо посредством сообщения одного и заполнения другого с помощью интерполяции векторных полей. Данный подход требует большего объема памяти, но непротиворечивость полей движения и несоразмерности может поддерживаться более оптимально.
Примерный вариант осуществления первого способа показан и описан касательно Фиг.5. Примерный вариант осуществления второго способа показан и описан касательно Фиг.6.
Обращаясь к Фиг.5, примерный способ обработки векторов движения и несоразмерности для одной серии макроблоков, соответствующей видеосодержимому с несколькими представлениями, указан, в общем, посредством ссылки с номером 500. Способ 500 включает в себя начальный этап 505, который передает управление этапу 510 принятия решения. Этап 510 принятия решения определяет то, равен или нет mvc_pred_flag 0. Если да, то управление передается функциональному этапу 515. В противном случае, управление передается функциональному этапу 520. Функциональный этап 515 формирует прогнозирующий параметр вектора несоразмерности, обрабатывает вектор несоразмерности DV, сохраняет вектор несоразмерности DV в VectorBuffer и передает управление завершающему этапу 525.
Функциональный этап 520 формирует прогнозирующий параметр векторов движения, обрабатывает вектор движения MV, сохраняет вектор движения MV в VectorBuffer и передает управление завершающему этапу 525.
Обращаясь к Фиг.6, другой способ обработки векторов движения и несоразмерности для видеосодержимого с несколькими представления указывается, в общем, посредством ссылки с номером 600. Способ 600 включает в себя начальный этап 605, который передает управление функциональному этапу 610. Функциональный этап 610 формирует прогнозирующий параметр вектора несоразмерности, обрабатывает вектор несоразмерности DV, сохраняет вектор несоразмерности DV в VectorBuffer1 и передает управление функциональному этапу 615. Функциональный этап 615 формирует прогнозирующий параметр векторов движения, обрабатывает вектор движения MV, сохраняет вектор движения MV в VectorBuffer2 и передает управление завершающему этапу 620.
Следствие наличия векторов движения и несоразмерности при кодировании одной серии макроблоков возникает в следующих аспектах: (1) кодирование с прогнозированием векторов движения/несоразмерности; и (2) режимы направления и пропуска.
В стандарте MPEG-4 AVC компоненты векторов движения кодируются дифференциально с помощью либо медианного, либо направленного прогнозирования из соседних блоков. При кодировании видео с несколькими представлениями соседние блоки могут иметь другое направление(я) прогнозирования, чем текущий блок. Чтобы сэкономить биты при кодировании векторов движения/несоразмерности, предпочтительно иметь наиболее коррелированную информацию, чтобы сформировать прогнозирующий параметр. В зависимости от того, доступны ли как векторы движения, так и векторы несоразмерности для соседних блоков, в первом способе используются только те соседние блоки, которые имеют такое же направление прогнозирования; во втором способе используются только векторы движения соседних блоков при формировании прогнозирующего параметра вектора движения и используются только векторы несоразмерности соседних блоков при формировании прогнозирующего параметра несоразмерности.
Помимо пространственно соседних блоков, ближайшие по времени блоки также могут быть использованы для того, чтобы улучшать прогнозирование несоразмерности, поскольку поля несоразмерности обычно являются стационарными во временном измерении.
Режимы пропуска и направления в стандарте MPEG-4 AVC являются эффективными средства кодирования, которые более оптимально используют пространственно-временную корреляцию, которая имеется между соседними макроблоками, поскольку они представляют движения без необходимости передавать векторы движения. При кодировании видео с несколькими представлениями эти режимы должны быть приспособлены так, чтобы учитывать дополнительную кросс-видовую корреляцию.
Для режимов P_Skip восстановленный сигнал получается аналогично сигналу прогнозирования типа макроблока P_16×16, который ссылается на изображение, которое находится под индексом 0 в List0. Вектор движения, используемый для восстановления макроблока P_Skip, аналогичен прогнозирующему параметру вектора движения для блока 16×16. В MVC вышеупомянутое приспособление прогнозирующего параметра вектора движения/несоразмерности должно помочь сделать режим P_Skip более полезным.
При кодировании B_SLICE режимы B_Skip/B_Direct_16×16/B_Direct_8×8 должны быть приспособлены, чтобы учитывать смешение движения и несоразмерности. Поддерживается два различных режима направления в стандарте MPEG-4 AVC, а именно временное направление и пространственное направление.
В режиме временного направления векторы движения извлекаются из ближайшей позиции в первом эталоне List1. Когда первый эталон List1 прогнозируется по несоразмерности, система может либо искать векторы движения в ближайшей позиции в других эталонах List1 (ref_idx>0), либо использовать прогнозирующий параметр пространственных векторов движения.
В режиме пространственного направления векторы движения извлекаются способом, аналогичным используемому посредством P_SKIP, но с учетом обоих List0/List1. Такое же приспособление, выполненное в P_SKIP, может быть расширено также на List1.
Таблицы 1-4 иллюстрируют различные синтаксисы кодирования видео с несколькими представлениями, включая и синтаксисы в соответствии с различными вариантами осуществления настоящих принципов. Таблица 1 иллюстрирует синтаксис набора параметров последовательности RBSP для кодирования видео с несколькими представлениями. Таблица 2 иллюстрирует синтаксис набора параметров изображений RBSP для кодирования видео с несколькими представлениями. Таблица 3 иллюстрирует синтаксис заголовка серии макроблоков для кодирования видео с несколькими представлениями. Таблица 4 иллюстрирует синтаксис уровня макроблоков для кодирования видео с несколькими представлениями.
Таблица 1  
Figure 00000001
  
Таблица 2  
Figure 00000002
  
Таблица 3  
Figure 00000003
  
Таблица 4  
Figure 00000004
  
Далее приводится описание некоторых из множества сопутствующих преимуществ/особенностей настоящего изобретения, некоторые из которых упомянуты выше. Например, одно преимущество/особенность - это видеокодер, который включает в себя кодер для кодирования блока с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений. Изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены. Изображение представляет текущую одну из различных точек обзора. Два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
Другое преимущество/особенность - это видеокодер, описанный выше, при этом два списка кросс-видовых опорных изображений отличаются от List0 и List1 стандарта улучшенного видеокодирования часть 10 Экспертной группы по киноизображению-4 Международной организации по стандартизации/Международной электротехнической комиссии/рекомендации H.264 Международного союза электросвязи - сектор телекоммуникаций и ее дополнением.
Еще другое преимущество/особенность - это видеокодер, который включает в себя, по меньшей мере, один буфер для сохранения декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены.
Кроме того, другое преимущество/особенность - это видеокодер как описан выше, при этом, по меньшей мере, один буфер включает в себя отдельный буфер для каждой из различных точек обзора.
Эти и другие признаки и преимущества настоящего изобретения легко могут быть установлены специалистами в данной области техники на основе методик данного документа. Следует понимать, что методики настоящего изобретения могут быть реализованы в различных формах аппаратных средств, программного обеспечения, микропрограммного обеспечения, процессоров специального назначения или их комбинаций.
Предпочтительно, методики настоящего изобретения реализуются как комбинация аппаратных средств и программного обеспечения. Более того, программное обеспечение может быть реализовано как прикладная программа, материально осуществленная на устройстве хранения программ. Прикладная программа может быть выгружена или приведена в исполнение посредством машины, содержащей любую надлежащую архитектуру. Предпочтительно, машина реализуется на вычислительной платформе, имеющей аппаратные средства, такие как один или более центральных процессоров (CPU), оперативное запоминающее устройство (RAM) и интерфейсы ввода-вывода. Вычислительная платформа также может включать в себя операционную систему и код микрокоманд. Различные процессы и функции, описанные в данном документе, могут быть либо частью кода микрокоманд, либо частью прикладной программы или комбинации вышеозначенного, которая может приводиться в исполнение посредством CPU. Помимо этого, различные другие периферийные устройства могут быть подключены к вычислительной платформе, такие как дополнительное устройство хранения данных и печатающее устройство.
Дополнительно следует понимать, что поскольку некоторые из составляющих системных компонентов и способов, изображенных на прилагаемых чертежах, предпочтительно реализуются в программном обеспечении, фактические связи между системными компонентами или функциональными этапами процесса могут отличаться в зависимости от способа, которым запрограммировано настоящее изобретение. С учетом предлагаемых в данном документе методик, специалисты в данной области техники должны иметь возможность рассматривать эти и аналогичные реализации или конфигурации настоящего изобретения.
Хотя иллюстративные варианты осуществления описаны в данном документе со ссылкой на прилагаемые чертежи, следует понимать, что настоящее изобретение не ограничено исключительно этими вариантами осуществления и что различные изменения и модификации могут быть внесены в него специалистами в данной области техники без отступления от области применения и духа настоящего изобретения. Все эти изменения и модификации предназначены для того, чтобы быть включенными в область применения настоящего изобретения, задаваемую прилагаемой формулой изобретения.

Claims (13)

1. Видеокодер, содержащий кодер (100) для кодирования блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений, при этом изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены, причем изображение представляет текущую одну из различных точек обзора, два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
2. Видеокодер по п.1, в котором два списка кросс-видовых опорных изображений отличаются от List0 и List1 стандарта улучшенного видеокодирования часть 10 Экспертной группы по киноизображению-4 Международной организации по стандартизации/Международной электротехнической комиссии/рекомендации Н.264 Международного союза электросвязи сектор телекоммуникаций.
3. Видеокодер, содержащий по меньшей мере, один буфер (160) для сохранения декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены, причем упомянутый, по меньшей мере, один буфер (160) содержит отдельный буфер для каждой из различных точек обзора.
4. Способ кодирования видео, заключающийся в том, что кодируют блок в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений, при этом изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены, причем изображение представляет текущую одну из различных точек обзора, два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки (365) обзора.
5. Способ по п.4, в котором два списка кросс-видовых опорных изображений отличаются от List0 и List1 стандарта улучшенного видеокодирования часть 10 Экспертной группы по киноизображению-4 Международной организации по стандартизации/Международной электротехнической комиссии/рекомендации (335, 345) Н.264 Международного союза электросвязи, сектора телекоммуникаций.
6. Способ кодирования видео, заключающийся в том, что сохраняют, по меньшей мере, в одном буфере декодированные изображения, соответствующие содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены (385), причем на упомянутом этапе сохранения сохраняют декодированные изображения для каждой из различных точек обзора в соответствующих буферах, причем каждый из соответствующих буферов соответствует одной из различных точек (385) обзора.
7. Видеодекодер, содержащий декодер (200) для декодирования блока в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений, при этом изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены, причем изображение представляет текущую одну из различных точек обзора, два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
8. Видеодекодер по п.7, в котором два списка кросс-видовых опорных изображений отличаются от List0 и List1 стандарта улучшенного видеокодирования часть 10 Экспертной группы по киноизображению - 4 Международной организации по стандартизации/Международной электротехнической комиссии/рекомендации Н.264 Международного союза электросвязи, сектора телекоммуникаций.
9. Видеодекодер, содержащий по меньшей мере, один буфер (245) для сохранения декодированных изображений, соответствующих содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены, причем упомянутый, по меньшей мере, один буфер (245) содержит отдельный буфер для каждой из различных точек обзора.
10. Способ декодирования видео, заключающийся в том, что декодируют (435, 445) блок в изображении с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений, при этом изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены, причем изображение представляет текущую одну из различных точек обзора, два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
11. Способ по п.10, в котором два списка кросс-видовых опорных изображений отличаются от List0 и List1 стандарта улучшенного видеокодирования часть 10 Экспертной группы по киноизображению-4 Международной организации по стандартизации/Международной электротехнической комиссии/рекомендации Н.264 Международного союза электросвязи - сектор телекоммуникаций (435, 445).
12. Способ декодирования видео, заключающийся в том, что сохраняют (480), по меньшей мере, в одном буфере декодированные изображения, соответствующие содержимому с несколькими представлениями для различных точек обзора одной или аналогичной сцены, при этом на упомянутом этапе (480) сохранения сохраняют декодированные изображения для каждой из различных точек обзора в соответствующих буферах, причем каждый из соответствующих буферов соответствует одной из различных точек обзора.
13. Машиночитаемый носитель, имеющий данные видеосигнала, кодированные на нем, содержащий блок в изображении, кодированный с помощью, по меньшей мере, одного из двух списков кросс-видовых опорных изображений, при этом изображение является одним из набора изображений, соответствующих видеосодержимому с несколькими представлениями и имеющих различные точки обзора в отношении одной или аналогичной сцены, причем изображение представляет текущую одну из различных точек обзора, два списка кросс-видовых опорных изображений соответствуют опорным изображениям, имеющим различные точки обзора, отличные от текущей точки обзора.
RU2008132879/08A 2006-01-09 2007-01-08 Способы и устройство для кодирования видео с несколькими представлениями RU2433561C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US75728906P 2006-01-09 2006-01-09
US60/757,289 2006-01-09

Publications (2)

Publication Number Publication Date
RU2008132879A RU2008132879A (ru) 2010-02-20
RU2433561C2 true RU2433561C2 (ru) 2011-11-10

Family

ID=38193755

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2008132834/07A RU2494569C2 (ru) 2006-01-09 2007-01-08 Способы и устройство для кодирования видео с несколькими представлениями
RU2008132879/08A RU2433561C2 (ru) 2006-01-09 2007-01-08 Способы и устройство для кодирования видео с несколькими представлениями

Family Applications Before (1)

Application Number Title Priority Date Filing Date
RU2008132834/07A RU2494569C2 (ru) 2006-01-09 2007-01-08 Способы и устройство для кодирования видео с несколькими представлениями

Country Status (10)

Country Link
US (6) US10194171B2 (ru)
EP (8) EP1972145A2 (ru)
JP (14) JP5219212B2 (ru)
KR (2) KR101350676B1 (ru)
CN (9) CN101366286B (ru)
AU (2) AU2007205179B2 (ru)
BR (3) BRPI0706438B1 (ru)
RU (2) RU2494569C2 (ru)
WO (2) WO2007081926A2 (ru)
ZA (3) ZA200805337B (ru)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2573204C1 (ru) * 2011-12-02 2016-01-20 Квэлкомм Инкорпорейтед Кодирование значений счета порядка изображений, идентифицирующих долговременные опорные кадры
RU2639647C2 (ru) * 2012-09-28 2017-12-21 Сони Корпорейшн Устройство и способ обработки изображений
RU2646327C2 (ru) * 2012-09-27 2018-03-02 Квэлкомм Инкорпорейтед Сигнализация долгосрочных эталонных изображений при кодировании видео
RU2649758C2 (ru) * 2012-12-21 2018-04-04 Сони Корпорейшн Устройство и способ обработки изображения

Families Citing this family (118)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
KR101276847B1 (ko) 2006-01-12 2013-06-18 엘지전자 주식회사 다시점 비디오의 처리
KR100943914B1 (ko) * 2006-01-12 2010-03-03 엘지전자 주식회사 다시점 비디오의 처리 방법 및 장치
US20070177671A1 (en) * 2006-01-12 2007-08-02 Lg Electronics Inc. Processing multiview video
DE202007019458U1 (de) * 2006-03-30 2012-09-13 Lg Electronics Inc. Vorrichtung zum Decodieren/Codieren eines Videosignals
US20100091845A1 (en) * 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
US8325814B2 (en) * 2006-06-19 2012-12-04 Lg Electronics Inc. Method and apparatus for processing a video signal
CN101496407B (zh) * 2006-07-06 2013-02-06 汤姆逊许可证公司 用于针对多视角视频编码和解码解耦合帧号和/或图像顺序计数（poc）的方法和装置
EP2039170B1 (en) * 2006-07-06 2019-09-04 InterDigital VC Holdings, Inc. Method and apparatus for decoupling frame number and/or picture order count (poc) for multi-view video encoding and decoding
CN101491096B (zh) * 2006-07-12 2012-05-30 Lg电子株式会社 信号处理方法及其装置
WO2008020734A1 (en) 2006-08-18 2008-02-21 Gwangju Institute Of Science And Technology A method and apparatus for encoding or decoding frames of different views in multiview video using global disparity
WO2008023968A1 (en) * 2006-08-25 2008-02-28 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
CN101558652B (zh) * 2006-10-20 2011-08-17 诺基亚公司 用于实现低复杂度多视点视频编码的系统和方法
US9066096B2 (en) * 2006-12-28 2015-06-23 Nippon Telegraph And Telephone Corporation Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media which store the programs
KR20100014552A (ko) * 2007-03-23 2010-02-10 엘지전자 주식회사 비디오 신호의 인코딩/디코딩 방법 및 장치
KR102044130B1 (ko) 2007-04-12 2019-11-12 돌비 인터네셔널 에이비 비디오 인코딩 및 디코딩의 타일링
KR101615967B1 (ko) 2007-04-17 2016-04-28 톰슨 라이센싱 멀티뷰 비디오 코딩을 위한 가설의 참조 디코더
US8953684B2 (en) * 2007-05-16 2015-02-10 Microsoft Corporation Multiview coding with geometry-based disparity prediction
TW200910975A (en) * 2007-06-25 2009-03-01 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
US8804839B2 (en) * 2007-06-27 2014-08-12 Korea Electronics Technology Institute Method for image prediction of multi-view video codec and computer-readable recording medium thereof
CN101690235B (zh) * 2007-06-29 2013-05-01 夏普株式会社 图像编码装置、图像编码方法、图像译码装置、图像译码方法、程序以及记录介质
BRPI0814854A2 (pt) 2007-08-06 2015-01-27 Thomson Licensing Métodos e aparelho para modo de salto de vídeo animado com múltiplas imagens de referência entre exibições
CN101779471B (zh) * 2007-08-15 2013-07-10 汤姆森许可贸易公司 在多视图编码的视频中进行错误隐藏的方法和装置
CN101562745B (zh) * 2008-04-18 2012-07-04 华为技术有限公司 一种多视点视频图像编码和解码的方法及装置
EP2308232B1 (en) 2008-07-20 2017-03-29 Dolby Laboratories Licensing Corp. Encoder optimization of stereoscopic video delivery systems
CN104768031B (zh) 2009-01-26 2018-02-09 汤姆森特许公司 用于视频解码的装置
EP2398241A1 (en) * 2009-02-12 2011-12-21 Nippon Telegraph And Telephone Corporation Multi-view image encoding method, multi-view image decoding method, multi-view image encoding device, multi-view image decoding device, multi-view image encoding program, and multi-view image decoding program
JP4993224B2 (ja) * 2009-04-08 2012-08-08 ソニー株式会社 再生装置および再生方法
WO2010123203A2 (ko) * 2009-04-22 2010-10-28 엘지전자 주식회사 다시점 영상의 참조 픽쳐 리스트 변경 방법
CN102461171A (zh) 2009-05-01 2012-05-16 汤姆森特许公司 三维视频的参考画面列表
TWI384887B (zh) * 2009-06-11 2013-02-01 Univ Nat Central 多視點影像編解碼方法
KR20110007928A (ko) * 2009-07-17 2011-01-25 삼성전자주식회사 다시점 영상 부호화 및 복호화 방법과 장치
US20110045408A1 (en) * 2009-08-20 2011-02-24 Shota Suzuki Color-forming photosensitive composition, lithographic printing plate precursor and novel cyanine dye
US8624959B1 (en) * 2009-09-11 2014-01-07 The Boeing Company Stereo video movies
BR112012018976A2 (pt) 2010-01-29 2018-03-27 Thomson Licensing intercalação baseada em blocos
KR101628383B1 (ko) * 2010-02-26 2016-06-21 연세대학교 산학협력단 영상 처리 장치 및 방법
KR20110101099A (ko) * 2010-03-05 2011-09-15 한국전자통신연구원 복수 전송 계층 연동형 3ｄｔｖ 방송 서비스 제공을 위한 송신 및 수신 방법, 송신 및 수신 장치
WO2011146451A1 (en) * 2010-05-20 2011-11-24 Thomson Licensing Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding
JP2012034352A (ja) * 2010-06-30 2012-02-16 Panasonic Corp ステレオ動画像符号化装置及びステレオ動画像符号化方法
KR20130139242A (ko) 2010-09-14 2013-12-20 톰슨 라이센싱 차폐 데이터의 압축 방법 및 장치
JP5531881B2 (ja) * 2010-09-22 2014-06-25 富士通株式会社 動画像復号装置、動画像復号方法、及び集積回路
HU1000640D0 (en) * 2010-11-29 2011-02-28 Holografika Hologrameloeallito Fejlesztoe Es Forgalmazo Kft Image coding and decoding method and apparatus for efficient encoding and decoding of 3d field content
KR101893559B1 (ko) * 2010-12-14 2018-08-31 삼성전자주식회사 다시점 비디오 부호화/복호화 장치 및 방법
KR20120080122A (ko) * 2011-01-06 2012-07-16 삼성전자주식회사 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
US10027957B2 (en) 2011-01-12 2018-07-17 Sun Patent Trust Methods and apparatuses for encoding and decoding video using multiple reference pictures
US9300943B2 (en) * 2011-01-12 2016-03-29 Panasonic Intellectual Property Corporation Of America Image coding method, image decoding method, image coding apparatus, and image decoding apparatus
US20120189060A1 (en) * 2011-01-20 2012-07-26 Industry-Academic Cooperation Foundation, Yonsei University Apparatus and method for encoding and decoding motion information and disparity information
JP6078883B2 (ja) * 2011-02-08 2017-02-15 サン パテント トラスト 多数の参照ピクチャを用いる動画像符号化方法、動画像復号方法、動画像符号化装置、および動画像復号方法
KR20120095610A (ko) * 2011-02-21 2012-08-29 삼성전자주식회사 다시점 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP5747559B2 (ja) 2011-03-01 2015-07-15 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム
JP5664762B2 (ja) * 2011-03-17 2015-02-04 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置及び動画像復号プログラム
WO2012128068A1 (ja) * 2011-03-18 2012-09-27 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
CN103416064A (zh) * 2011-03-18 2013-11-27 索尼公司 图像处理设备、图像处理方法和程序
KR20120118780A (ko) * 2011-04-19 2012-10-29 삼성전자주식회사 다시점 비디오의 움직임 벡터 부호화 방법 및 장치, 그 복호화 방법 및 장치
US9485517B2 (en) 2011-04-20 2016-11-01 Qualcomm Incorporated Motion vector prediction with motion vectors from multiple views in multi-view video coding
JP5341952B2 (ja) * 2011-05-30 2013-11-13 株式会社東芝 ビデオサーバ及びデータ収録再生方法
JP6112418B2 (ja) * 2011-06-29 2017-04-12 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
WO2013001749A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
MY193110A (en) 2011-06-30 2022-09-26 Sony Corp Image processing device and image processing method
JP2013034171A (ja) * 2011-06-30 2013-02-14 Sony Corp 画像処理装置および方法
US10165267B2 (en) 2011-08-30 2018-12-25 Intel Corporation Multiview video coding schemes
US20130229485A1 (en) * 2011-08-30 2013-09-05 Nokia Corporation Apparatus, a Method and a Computer Program for Video Coding and Decoding
KR20140057269A (ko) * 2011-08-31 2014-05-12 소니 주식회사 부호화 장치 및 부호화 방법, 복호 장치 및 복호 방법
JP6039178B2 (ja) * 2011-09-15 2016-12-07 シャープ株式会社 画像符号化装置、画像復号装置、並びにそれらの方法及びプログラム
WO2013042884A1 (ko) * 2011-09-19 2013-03-28 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치
EP2777273B1 (en) 2011-11-11 2019-09-04 GE Video Compression, LLC Efficient multi-view coding using depth-map estimate for a dependent view
KR102318349B1 (ko) 2011-11-11 2021-10-27 지이 비디오 컴프레션, 엘엘씨 깊이-맵 추정 및 업데이트를 사용한 효율적인 멀티-뷰 코딩
EP2781091B1 (en) * 2011-11-18 2020-04-08 GE Video Compression, LLC Multi-view coding with efficient residual handling
US20130163880A1 (en) * 2011-12-23 2013-06-27 Chao-Chung Cheng Disparity search methods and apparatuses for multi-view videos
US20130176390A1 (en) * 2012-01-06 2013-07-11 Qualcomm Incorporated Multi-hypothesis disparity vector construction in 3d video coding with depth
WO2013108613A1 (ja) * 2012-01-17 2013-07-25 パナソニック株式会社 動画像符号化方法、動画像復号化方法、動画像符号化装置、動画像復号化装置および動画像符号化復号化装置
WO2013107028A1 (en) * 2012-01-19 2013-07-25 Mediatek Singapore Pte. Ltd. Methods and apparatuses of amvp simplification
CN104094604B (zh) 2012-01-20 2017-07-14 太阳专利托管公司 使用时间运动矢量预测对视频进行编码和解码的方法和装置
WO2013115942A1 (en) * 2012-02-01 2013-08-08 Vidyo, Inc. Techniques for multiview video coding
CN107483959B (zh) 2012-02-03 2019-12-20 太阳专利托管公司 图像解码方法及图像解码装置
US9621889B2 (en) 2012-03-02 2017-04-11 Sun Patent Trust Image encoding method, image decoding method, image encoding apparatus, image decoding apparatus, and image coding apparatus
WO2013132792A1 (ja) * 2012-03-06 2013-09-12 パナソニック株式会社 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、及び動画像符号化復号装置
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
US10200709B2 (en) 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
JP2013211776A (ja) * 2012-03-30 2013-10-10 Sharp Corp 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法およびプログラム
US10075708B2 (en) 2012-04-09 2018-09-11 Sun Patent Trust Image encoding method and image decoding method
JP5613846B2 (ja) 2012-05-09 2014-10-29 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 動きベクトル予測方法及び動きベクトル予測装置
US20130329007A1 (en) * 2012-06-06 2013-12-12 Qualcomm Incorporated Redundancy removal for advanced motion vector prediction (amvp) in three-dimensional (3d) video coding
CN104471944B (zh) * 2012-07-18 2018-01-09 索尼公司 图像处理装置和方法
ITTO20120647A1 (it) * 2012-07-24 2014-01-25 St Microelectronics Srl Procedimenti e sistemi per il trattamento di immagini stereoscopiche, prodotti informatici e supporto relativi
EP2878125A4 (en) * 2012-07-27 2016-10-12 Hfi Innovation Inc CONSTRAINED DISPARITY VECTOR DERIVATION METHOD IN 3D VIDEO CODING
US9357195B2 (en) * 2012-08-16 2016-05-31 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
US20140071235A1 (en) * 2012-09-13 2014-03-13 Qualcomm Incorporated Inter-view motion prediction for 3d video
EP2898696B1 (en) * 2012-09-19 2022-09-07 Qualcomm Incorporated Selection of pictures for disparity vector derivation
US20140086328A1 (en) * 2012-09-25 2014-03-27 Qualcomm Incorporated Scalable video coding in hevc
KR102657912B1 (ko) 2012-10-01 2024-04-15 지이 비디오 컴프레션, 엘엘씨 향상 레이어에서 변환 계수 블록들의 서브블록-기반 코딩을 이용한 스케일러블 비디오 코딩
WO2014053085A1 (en) * 2012-10-03 2014-04-10 Mediatek Inc. Method and apparatus of motion information management in video coding
CN104838655B (zh) * 2012-12-11 2018-09-04 索尼公司 编码设备和编码方法、及解码设备和解码方法
KR20150099797A (ko) 2013-01-07 2015-09-01 미디어텍 인크. ３차원 비디오 코딩에서의 직접 모드 및 스킵 모드에 대한 공간 모션 벡터 예측 유도 방법 및 장치
US9762905B2 (en) * 2013-03-22 2017-09-12 Qualcomm Incorporated Disparity vector refinement in video coding
WO2014165555A1 (en) * 2013-04-02 2014-10-09 Vid Scale, Inc. Enhanced temporal motion vector prediction for scalable video coding
WO2014166068A1 (en) * 2013-04-09 2014-10-16 Mediatek Inc. Refinement of view synthesis prediction for 3-d video coding
CA2896810C (en) * 2013-04-10 2017-12-19 Mediatek Inc. Method and apparatus for bi-prediction of illumination compensation
KR101712110B1 (ko) 2013-07-12 2017-03-13 삼성전자 주식회사 변이 벡터 유도를 사용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
KR20150010660A (ko) 2013-07-18 2015-01-28 삼성전자주식회사 인터 레이어 비디오 복호화 및 부호화 장치 및 방법을 위한 깊이 영상의 화면내 예측 방법
EP3024242A4 (en) * 2013-07-18 2017-01-11 LG Electronics Inc. Method and apparatus for processing video signal
WO2015056955A1 (ko) 2013-10-14 2015-04-23 삼성전자 주식회사 다시점 비디오 부호화 방법 및 장치, 다시점 비디오 복호화 방법 및 장치
KR101761523B1 (ko) * 2013-10-17 2017-07-25 미디어텍 인크. 멀티뷰 및 3차원 비디오 코딩시의 모션 정보 예측 및 상속 방법
RU2550544C1 (ru) * 2013-12-16 2015-05-10 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Тульский государственный университет" (ТулГУ) Способ компенсации движения в цифровых динамических стереовидеоизображениях
KR20170023000A (ko) 2014-06-20 2017-03-02 삼성전자주식회사 인터 레이어 비디오 부복호화를 위한 깊이 영상의 예측 모드 전송 방법 및 장치
US10554966B2 (en) 2014-10-07 2020-02-04 Samsung Electronics Co., Ltd. Multi-view image encoding/decoding method and apparatus
US10321145B2 (en) 2014-10-07 2019-06-11 Samsung Electronics Co., Ltd. Method and device for encoding or decoding image by means of view merging prediction
WO2017090988A1 (ko) * 2015-11-23 2017-06-01 한국전자통신연구원 다시점 비디오의 부호화/복호화 방법
US20180091812A1 (en) * 2016-09-23 2018-03-29 Apple Inc. Video compression system providing selection of deblocking filters parameters based on bit-depth of video data
KR102004247B1 (ko) * 2016-11-25 2019-07-29 경희대학교 산학협력단 영상 병렬 처리 방법 및 장치
US11113636B2 (en) 2016-12-30 2021-09-07 Stubhub, Inc. Automated generation of a package data object
CN106791835B (zh) * 2017-03-01 2019-12-10 北京大学 一种参考图像管理方法
CN107071385B (zh) * 2017-04-18 2019-01-25 杭州派尼澳电子科技有限公司 一种基于h265引入视差补偿的立体视频编码方法
KR102503743B1 (ko) * 2018-04-11 2023-02-28 삼성전자주식회사 이미지 처리 장치 및 방법
US11665365B2 (en) * 2018-09-14 2023-05-30 Google Llc Motion prediction coding with coframe motion vectors
US11991376B2 (en) * 2020-04-09 2024-05-21 Intel Corporation Switchable scalable and multiple description immersive video codec
CN111556331A (zh) * 2020-05-08 2020-08-18 湖南快乐阳光互动娱乐传媒有限公司 一种智能化多机位直播装置

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2643531B1 (fr) 1989-02-21 1996-04-26 Thomson Csf Procede et dispositif de compression de l'information destine au decodage compatible d'une famille de signaux de television de resolutions croissantes
JPH05229842A (ja) 1992-01-27 1993-09-07 Fujikura Ltd 耐放射イメージファイバ
US6052414A (en) 1994-03-30 2000-04-18 Samsung Electronics, Co. Ltd. Moving picture coding method and apparatus for low bit rate systems using dynamic motion estimation
US5617334A (en) 1995-07-21 1997-04-01 The Trustees Of Columbia University In The City Of New York Multi-viewpoint digital video coder/decoder and method
TW335480B (en) 1995-09-29 1998-07-01 Matsushita Electric Ind Co Ltd Method and apparatus for encoding a bistream for multi-angle connection
JP3263807B2 (ja) 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
JPH10191394A (ja) 1996-12-24 1998-07-21 Sharp Corp 多視点画像符号化装置
JPH10191393A (ja) 1996-12-24 1998-07-21 Sharp Corp 多視点画像符号化装置
CN1202500C (zh) * 1997-07-11 2005-05-18 皇家菲利浦电子有限公司 视听数据解码方法
US6055264A (en) 1997-08-01 2000-04-25 Nokia Mobile Phones Limited Method and apparatus for fast acquisition and multipath search in a spread spectrum system
JP3931392B2 (ja) 1997-08-25 2007-06-13 ソニー株式会社 立体画像用ビデオ信号生成装置、立体画像用ビデオ信号送出装置および立体画像用ビデオ信号受信装置
DE69721847T2 (de) 1997-10-23 2004-03-11 Mitsubishi Denki K.K. Bilddekoder, bildenkoder und bildkommunikationssystem
ES2171312T3 (es) 1997-11-27 2002-09-01 British Telecomm Transcodificacion.
US6055274A (en) * 1997-12-30 2000-04-25 Intel Corporation Method and apparatus for compressing multi-view video
JP3519594B2 (ja) * 1998-03-03 2004-04-19 Ｋｄｄｉ株式会社 ステレオ動画像用符号化装置
JP2000132683A (ja) * 1998-10-23 2000-05-12 Toshiba Corp 多視点画像符号化方法
US6693964B1 (en) 2000-03-24 2004-02-17 Microsoft Corporation Methods and arrangements for compressing image based rendering data using multiple reference frame prediction techniques that support just-in-time rendering of an image
EP1277347A1 (en) 2000-04-11 2003-01-22 Koninklijke Philips Electronics N.V. Video encoding and decoding method
JP4608136B2 (ja) 2001-06-22 2011-01-05 オリンパス株式会社 動きベクトル及び視差ベクトル検出装置
KR20030001758A (ko) * 2001-06-27 2003-01-08 한국전자통신연구원 움직임 및 시차 보상을 갖는 입체영상의 부호화/복호화장치 및 그 방법
US6566133B1 (en) * 2001-08-01 2003-05-20 Isis Pharmaceuticals, Inc. Antisense inhibition of dual specific phosphatase 9 expression
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
KR100508798B1 (ko) 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
KR100481732B1 (ko) 2002-04-20 2005-04-11 전자부품연구원 다 시점 동영상 부호화 장치
JP2004023458A (ja) 2002-06-17 2004-01-22 Toshiba Corp 動画像符号化／復号化方法及び装置
KR100523052B1 (ko) 2002-08-30 2005-10-24 한국전자통신연구원 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법
KR100751422B1 (ko) 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
JP4259884B2 (ja) 2003-01-20 2009-04-30 シャープ株式会社 画像データ作成装置およびそのデータを再生する画像データ再生装置
CN1258925C (zh) * 2003-06-27 2006-06-07 中国科学院计算技术研究所 多视角视频编解码预测补偿方法及装置
FR2857132A1 (fr) 2003-07-03 2005-01-07 Thomson Licensing Sa Dispositif, systeme et procede de codage d'images numeriques
US7778328B2 (en) * 2003-08-07 2010-08-17 Sony Corporation Semantics-based motion estimation for multi-view video coding
EP1661409A2 (en) 2003-08-26 2006-05-31 Thomson Licensing S.A. Method and apparatus for minimizing number of reference pictures used for inter-coding
JP4355914B2 (ja) * 2003-10-01 2009-11-04 日本電気株式会社 多視点画像伝送システムと方法、多視点画像圧縮装置と方法、多視点画像伸長装置と方法およびプログラム
FI115589B (fi) * 2003-10-14 2005-05-31 Nokia Corp Redundanttien kuvien koodaaminen ja dekoodaaminen
CN1545333A (zh) * 2003-11-21 2004-11-10 �Ϻ���ͨ��ѧ 立体视频图像信号压缩的方法
CN1823531B (zh) * 2003-12-22 2010-05-26 日本电气株式会社 编码运动图像的方法和设备
JP3879741B2 (ja) 2004-02-25 2007-02-14 ソニー株式会社 画像情報符号化装置および画像情報符号化方法
JP4421940B2 (ja) 2004-05-13 2010-02-24 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置および方法、並びに動画像復号化装置および方法
WO2006036712A2 (en) * 2004-09-22 2006-04-06 Nunnari Paul G A system and method for leveraging health care at a point of sale
FR2878758B1 (fr) 2004-12-06 2007-08-24 Sylvius Sarl Ensemble de jeu electronique avec objets physiques identifiables ou localisables par le jeu
US7728877B2 (en) 2004-12-17 2010-06-01 Mitsubishi Electric Research Laboratories, Inc. Method and system for synthesizing multiview videos
KR100779875B1 (ko) * 2005-01-14 2007-11-27 주식회사 휴맥스 다-시점 코딩을 위한 참조 프레임 순서 설정 방법 및 그방법을 기록한 기록매체
CN101253774B (zh) * 2005-07-18 2011-04-06 韩国电子通信研究院 使用视角时间参考图像缓冲器的预测编码/解码装置及使用其的方法
US8559515B2 (en) * 2005-09-21 2013-10-15 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view video
US7903737B2 (en) 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
JP5225141B2 (ja) 2009-02-20 2013-07-03 下西技研工業株式会社 ディスプレイ支持装置
JP2010191393A (ja) 2009-02-20 2010-09-02 Bridgestone Corp カラーフィルタ基板の製造方法およびカラー情報表示用パネルの製造方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JAE HOON KIM ЕТ AL: «Dependent Bit Allocation in Multiview Video coding», IMAGE PROCESSING, 2005, ICIP 2005, IEEE INTERNATIONAL CONFERENCE ON GENEVA, ITALY 11-14 09/2005, PISCATAWAY, NJ, USA, IEEE, 11.09.2005, pg.293-296, fig.1. *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2573204C1 (ru) * 2011-12-02 2016-01-20 Квэлкомм Инкорпорейтед Кодирование значений счета порядка изображений, идентифицирующих долговременные опорные кадры
RU2646327C2 (ru) * 2012-09-27 2018-03-02 Квэлкомм Инкорпорейтед Сигнализация долгосрочных эталонных изображений при кодировании видео
RU2639647C2 (ru) * 2012-09-28 2017-12-21 Сони Корпорейшн Устройство и способ обработки изображений
RU2649758C2 (ru) * 2012-12-21 2018-04-04 Сони Корпорейшн Устройство и способ обработки изображения

Also Published As

Publication number Publication date
KR101350676B1 (ko) 2014-01-14
RU2008132879A (ru) 2010-02-20
ZA200805337B (en) 2009-11-25
JP2013138486A (ja) 2013-07-11
RU2008132834A (ru) 2010-02-20
JP5534536B2 (ja) 2014-07-02
US20190037241A1 (en) 2019-01-31
JP5610552B2 (ja) 2014-10-22
CN101931806B (zh) 2014-03-26
JP6214097B2 (ja) 2017-10-18
KR20080092359A (ko) 2008-10-15
US20150350680A1 (en) 2015-12-03
JP5229810B2 (ja) 2013-07-03
CN103108184B (zh) 2016-03-23
JP5229842B1 (ja) 2013-07-03
JP6578421B2 (ja) 2019-09-18
JP2017077015A (ja) 2017-04-20
EP3484157A2 (en) 2019-05-15
CN101366286A (zh) 2009-02-11
JP2013176066A (ja) 2013-09-05
JP2013176065A (ja) 2013-09-05
US10194171B2 (en) 2019-01-29
CN101931806A (zh) 2010-12-29
CN101366286B (zh) 2013-03-27
EP2458871A3 (en) 2013-01-23
CN101366285A (zh) 2009-02-11
JP2015097406A (ja) 2015-05-21
CN101366285B (zh) 2012-04-18
ZA200805650B (en) 2009-10-28
EP2458871A2 (en) 2012-05-30
KR101350597B1 (ko) 2014-01-14
EP2458869A2 (en) 2012-05-30
CN103096089B (zh) 2016-03-23
JP2009522986A (ja) 2009-06-11
JP2014239523A (ja) 2014-12-18
JP6086560B2 (ja) 2017-03-01
RU2494569C2 (ru) 2013-09-27
AU2007205179A1 (en) 2007-07-19
BRPI0706438B1 (pt) 2020-01-07
AU2007205007B2 (en) 2011-03-31
EP2458870A3 (en) 2013-01-23
JP2012213205A (ja) 2012-11-01
EP2458869A3 (en) 2013-01-23
JP5602192B2 (ja) 2014-10-08
JP6008433B2 (ja) 2016-10-19
BR122016024819B1 (pt) 2020-05-26
CN103108184A (zh) 2013-05-15
JP2012231512A (ja) 2012-11-22
WO2007081926A2 (en) 2007-07-19
CN102685488B (zh) 2016-04-20
JP2018164312A (ja) 2018-10-18
CN103118258A (zh) 2013-05-22
EP2309750A3 (en) 2013-12-25
JP6453839B2 (ja) 2019-01-16
US20090168874A1 (en) 2009-07-02
EP2458868A3 (en) 2013-01-23
ZA200805751B (en) 2009-10-28
EP2458868A2 (en) 2012-05-30
EP3484157A3 (en) 2019-08-07
JP2013176067A (ja) 2013-09-05
BRPI0706434A2 (pt) 2011-03-29
WO2007081756A2 (en) 2007-07-19
CN102685489B (zh) 2015-04-29
US20090010323A1 (en) 2009-01-08
CN103096089A (zh) 2013-05-08
US9143782B2 (en) 2015-09-22
EP1972148A2 (en) 2008-09-24
CN103096088B (zh) 2016-03-23
BRPI0706434B1 (pt) 2021-02-02
JP6077965B2 (ja) 2017-02-08
JP2009522985A (ja) 2009-06-11
JP5483509B2 (ja) 2014-05-07
JP5219212B2 (ja) 2013-06-26
JP5483510B2 (ja) 2014-05-07
BRPI0706438A2 (pt) 2011-03-29
WO2007081756A3 (en) 2008-01-03
US9525888B2 (en) 2016-12-20
EP1972145A2 (en) 2008-09-24
EP2458870A2 (en) 2012-05-30
JP2016059067A (ja) 2016-04-21
CN102685489A (zh) 2012-09-19
US8842729B2 (en) 2014-09-23
US20130242048A1 (en) 2013-09-19
JP2014003681A (ja) 2014-01-09
AU2007205007A1 (en) 2007-07-19
US9521429B2 (en) 2016-12-13
AU2007205179B2 (en) 2011-08-25
CN102685488A (zh) 2012-09-19
CN103096088A (zh) 2013-05-08
KR20080092357A (ko) 2008-10-15
US20150350668A1 (en) 2015-12-03
WO2007081926A3 (en) 2007-10-04
CN103118258B (zh) 2016-03-23
EP2309750A2 (en) 2011-04-13

Similar Documents

Publication Publication Date Title
RU2433561C2 (ru) Способы и устройство для кодирования видео с несколькими представлениями

Legal Events

Date Code Title Description
PD4A Correction of name of patent owner
PC41 Official registration of the transfer of exclusive right

Effective date: 20191111