JP2019519964A5 - - Google Patents

Download PDF

Info

Publication number
JP2019519964A5
JP2019519964A5 JP2018555753A JP2018555753A JP2019519964A5 JP 2019519964 A5 JP2019519964 A5 JP 2019519964A5 JP 2018555753 A JP2018555753 A JP 2018555753A JP 2018555753 A JP2018555753 A JP 2018555753A JP 2019519964 A5 JP2019519964 A5 JP 2019519964A5
Authority
JP
Japan
Prior art keywords
picture
global motion
refresh
motion estimate
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018555753A
Other languages
English (en)
Other versions
JP6867406B2 (ja
JP2019519964A (ja
Filing date
Publication date
Priority claimed from US15/188,067 external-priority patent/US10652572B2/en
Application filed filed Critical
Publication of JP2019519964A publication Critical patent/JP2019519964A/ja
Publication of JP2019519964A5 publication Critical patent/JP2019519964A5/ja
Priority to JP2021065873A priority Critical patent/JP6908797B1/ja
Application granted granted Critical
Publication of JP6867406B2 publication Critical patent/JP6867406B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (21)

  1. ビデオ処理システムにおいて、
    レンダリングされる第1ピクチャの第1グローバルモーション推定値を決定することと、
    前記第1ピクチャのエッジを、前記第1グローバルモーション推定値の方向にある前記第1ピクチャのエッジとして識別することと、
    前記第1ピクチャのエッジを識別することに応じて、前記ビデオ処理システムのエンコーダにおいて、前記識別されたエッジに隣接する前記第1ピクチャの領域を、前記第1ピクチャのイントラ符号化されたリフレッシュ領域として符号化することによって、前記第1ピクチャをイントラリフレッシュ符号化することと、を含
    前記リフレッシュ領域の幅は、前記第1グローバルモーション推定値の主方向成分の大きさに基づいて設定される、
    方法。
  2. ビデオ処理システムにおいて、
    レンダリングされる第1ピクチャの第1グローバルモーション推定値を決定することと、
    前記第1グローバルモーション推定値を閾値と比較することと、
    前記第1ピクチャのエッジを、前記第1グローバルモーション推定値の方向にある前記第1ピクチャのエッジとして識別することと、
    前記第1ピクチャのエッジを識別することに応じて、前記ビデオ処理システムのエンコーダにおいて、前記識別されたエッジに隣接する前記第1ピクチャの領域を、前記第1ピクチャのイントラ符号化されたリフレッシュ領域として符号化することによって、前記第1ピクチャをイントラリフレッシュ符号化することと、
    前記第1ピクチャのエッジを識別することと、前記識別されたエッジに隣接する前記第1ピクチャの領域を、イントラ符号化されたリフレッシュ領域として符号化することとは、前記第1グローバルモーション推定値が前記閾値を超えていることに応じて行われる、
    法。
  3. レンダリングされる第2ピクチャの第2グローバルモーション推定値を決定することと、
    前記第2グローバルモーション推定値を前記閾値と比較することと、
    前記第2グローバルモーション推定値が前記閾値を超えないことに応じて、前記エンコーダにおいて、イントラ符号化されるリフレッシュ領域の位置がピクチャのセット内の連続するピクチャ間で移動するリフレッシュ領域パターンに基づいて選択された前記第2ピクチャの領域を符号化することによって、前記第2ピクチャをイントラリフレッシュ符号化することと、をさらに含む、
    請求項の方法。
  4. 前記符号化された第1ピクチャを含む符号化ビットストリームを、ヘッドマウントディスプレイ(HMD)装置に送信すること、をさらに含み、
    前記第1グローバルモーション推定値を決定することは、前記HMD装置のモーションに基づいて前記第1グローバルモーション推定値を決定することを含む、
    請求項1の方法。
  5. 前記第1グローバルモーション推定値を決定することは、前記第1ピクチャのコンテンツと、少なくとも1つの前のピクチャのコンテンツのモーション分析と、に基づいて、前記第1グローバルモーション推定値を決定することを含む、
    請求項1の方法。
  6. ビデオ符号化システムにおいて、
    ピクチャの第1セットに関連するグローバルモーション推定値が特定の閾値を超えないと決定したことに応じて、前記ピクチャのリフレッシュ領域の位置が前記ピクチャの第1セット内の前のピクチャのリフレッシュ領域の位置に対して空間的にシフトするように、前記第1セット内の各ピクチャをイントラリフレッシュ符号化することと、
    ピクチャの第2セットに関連するグローバルモーション推定値が前記特定の閾値を超えていると決定したことに応じて、前記第2セット内の各ピクチャのリフレッシュ領域の位置が、前記第2セットに関連するグローバルモーション推定値の方向にあるピクチャエッジに隣接して固定されるように、前記第2セット内の各ピクチャをイントラリフレッシュ符号化することと、を含む、
    方法。
  7. 前記ピクチャの第1セットのリフレッシュ領域が同じ幅を有し、
    前記ピクチャの第2セットに関連する前記グローバルモーション推定値が複数のグローバルモーション推定値を含み、各グローバルモーション推定値は、前記第2セットの対応するピクチャに関連しており、
    前記第2セットのピクチャのリフレッシュ領域は、そのピクチャに関連する前記グローバルモーション推定値に基づいている、
    請求項の方法。
  8. 前記第1セット及び前記第2セットのピクチャのイントラリフレッシュ符号化された表現を含む符号化ビットストリームを、ヘッドマウントディスプレイ(HMD)装置(304)に送信すること、をさらに含む、
    請求項の方法。
  9. 前記HMD装置において、レンダリングされたピクチャのセットを生成するために、前記符号化ビットストリームを復号化することと、
    前記HMD装置のディスプレイパネルにおいて、前記レンダリングされたピクチャのセットを表示することと、をさらに含む、
    請求項の方法。
  10. 第1時間での前記HMD装置のモーションに基づいて、前記ピクチャの第1セットに関連する前記グローバルモーション推定値を決定することと、
    第2時間での前記HMD装置のモーションに基づいて、前記ピクチャの第2セットに関連する前記グローバルモーション推定値を決定することと、をさらに含む、
    請求項9の方法。
  11. 前記第1セットのピクチャのコンテンツのモーション分析に基づいて、前記第1セットに関連する前記グローバルモーション推定値を決定することと、
    前記第1セットのピクチャのコンテンツのモーション分析に基づいて、前記第1セットに関連する前記グローバルモーション推定値を決定することと、をさらに含む、
    請求項6の方法。
  12. ピクチャストリームのピクチャを符号化して符号化ビットストリームを生成するエンコーダと、
    少なくとも1つのプロセッサと、を備え、
    前記少なくとも1つのプロセッサは、
    前記ピクチャストリームの第1ピクチャに関連する第1グローバルモーション推定値を決定し、前記第1ピクチャのエッジを、前記第1グローバルモーション推定値の方向にある前記第1ピクチャのエッジとして識別し、前記識別されたエッジに隣接する前記第1ピクチャの領域が前記第1ピクチャのイントラ符号化されたリフレッシュ領域として符号化されるように、前記第1ピクチャをイントラリフレッシュ符号化するように前記エンコーダを構成し、前記第1グローバルモーション推定値の大きさに基づいて前記リフレッシュ領域の幅を構成する
    システム。
  13. 前記第1グローバルモーション推定値の方向は、前記第1グローバルモーション推定値の主方向成分の方向である、
    請求項12のシステム。
  14. 前記少なくとも1つのプロセッサは、前記第1ピクチャのエッジを識別し、前記第1グローバルモーション推定値が特定の閾値を超えていることに応じて、前記第1ピクチャをイントラリフレッシュ符号化するように前記エンコーダを構成する、
    請求項12のシステム。
  15. 前記少なくとも1つのプロセッサは、前記ピクチャストリームの第2ピクチャの第2グローバルモーション推定値を決定し、
    前記少なくとも1つのプロセッサは、前記第2グローバルモーション推定値が前記特定の閾値を超えないことに応じて、イントラ符号化される領域の位置がピクチャのセット内の連続するピクチャ間で移動するリフレッシュ領域パターンに基づいて選択された前記第2ピクチャの領域を符号化することによって、前記第2ピクチャをイントラリフレッシュ符号化するように前記エンコーダを構成する、
    請求項14のシステム。
  16. 前記符号化ビットストリームを受信し、前記符号化ビットストリームを復号化して、復号化されたピクチャストリームを生成し、前記復号化されたピクチャストリームをユーザに表示するヘッドマウントディスプレイ(HMD)装置を備える、
    請求項12のシステム。
  17. 前記少なくとも1つのプロセッサは、前記HMD装置のモーションに基づいて前記第1グローバルモーション推定値を決定する、
    請求項16のシステム。
  18. 前記少なくとも1つのプロセッサは、前記第1ピクチャのコンテンツと、少なくとも1つの前のピクチャのコンテンツのモーション分析と、に基づいて、前記第1グローバルモーション推定値を決定する、
    請求項12のシステム。
  19. 前記符号化された第1ピクチャを含む符号化ビットストリームを、ヘッドマウントディスプレイ(HMD)装置に送信すること、をさらに含み、
    前記第1グローバルモーション推定値を決定することは、前記HMD装置のモーションに基づいて前記第1グローバルモーション推定値を決定することを含む、
    請求項2の方法。
  20. 少なくとも1つのプロセッサと、
    エンコーダと、を備え、
    前記少なくとも1つのプロセッサは、
    レンダリングされる第1ピクチャの第1グローバルモーション推定値を決定し、前記第1グローバルモーション推定値を閾値と比較し、前記第1ピクチャのエッジを、前記第1グローバルモーション推定値の方向にある前記第1ピクチャのエッジとして識別し、
    前記エンコーダは、
    前記第1グローバルモーション推定値が前記閾値を超えていること、及び、前記第1ピクチャのエッジを識別することに応じて、前記識別されたエッジに隣接する前記第1ピクチャの領域を、前記第1ピクチャのイントラ符号化されたリフレッシュ領域として符号化することによって、前記第1ピクチャをイントラリフレッシュ符号化する、
    システム。
  21. 前記少なくとも1つのプロセッサは、レンダリングされる第2ピクチャの第2グローバルモーション推定値を決定し、前記第2グローバルモーション推定値を前記閾値と比較し、
    前記エンコーダは、前記第2グローバルモーション推定値が前記閾値を超えないことに応じて、前記エンコーダにおいて、イントラ符号化されるリフレッシュ領域の位置がピクチャのセット内の連続するピクチャ間で移動するリフレッシュ領域パターンに基づいて選択された前記第2ピクチャの領域を符号化することによって、前記第2ピクチャをイントラリフレッシュ符号化する、
    請求項20のシステム。
JP2018555753A 2016-04-29 2017-04-28 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ Active JP6867406B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021065873A JP6908797B1 (ja) 2016-04-29 2021-04-08 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662329602P 2016-04-29 2016-04-29
US62/329,602 2016-04-29
US15/188,067 US10652572B2 (en) 2016-04-29 2016-06-21 Motion-adaptive intra-refresh for high-efficiency, low-delay video coding
US15/188,067 2016-06-21
PCT/CA2017/050520 WO2017185187A1 (en) 2016-04-29 2017-04-28 Motion-adaptive intra-refresh for high-efficiency, low-delay video coding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021065873A Division JP6908797B1 (ja) 2016-04-29 2021-04-08 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ

Publications (3)

Publication Number Publication Date
JP2019519964A JP2019519964A (ja) 2019-07-11
JP2019519964A5 true JP2019519964A5 (ja) 2020-06-11
JP6867406B2 JP6867406B2 (ja) 2021-04-28

Family

ID=60158697

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018555753A Active JP6867406B2 (ja) 2016-04-29 2017-04-28 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ
JP2021065873A Active JP6908797B1 (ja) 2016-04-29 2021-04-08 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021065873A Active JP6908797B1 (ja) 2016-04-29 2021-04-08 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ

Country Status (6)

Country Link
US (1) US10652572B2 (ja)
EP (1) EP3449632A4 (ja)
JP (2) JP6867406B2 (ja)
KR (1) KR102239856B1 (ja)
CN (1) CN109076227A (ja)
WO (1) WO2017185187A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106488229B (zh) * 2015-09-01 2022-01-21 恩智浦美国有限公司 具有可调整帧内刷新率的视频编码器
JP2019530299A (ja) * 2016-10-13 2019-10-17 富士通株式会社 画像コーディング/デコーディング方法、装置及び画像処理機器
US20190156792A1 (en) * 2017-01-10 2019-05-23 Shenzhen Royole Technologies Co., Ltd. Method and system for adjusting display content and head-mounted display
GB2569107B (en) * 2017-11-29 2022-04-06 Displaylink Uk Ltd Managing display data
EP3522539A1 (en) * 2018-02-01 2019-08-07 Vrije Universiteit Brussel Method and apparatus for compensating motion for a holographic video stream
EP3657799B1 (en) * 2018-11-22 2020-11-04 Axis AB Method for intra refresh encoding of a plurality of image frames
EP3942803A4 (en) * 2019-03-21 2022-12-21 Nokia Technologies Oy METHOD, APPARATUS AND COMPUTER PROGRAM PRODUCT FOR VIDEO CODING AND DECODING
US11039149B2 (en) 2019-08-01 2021-06-15 Qualcomm Incorporated Dynamic video insertion based on feedback information
EP3829169B1 (en) * 2019-11-29 2021-10-13 Axis AB Method for intra refresh encoding of a plurality of image frames using convex and concave distribution functions
CN112911294A (zh) * 2021-03-22 2021-06-04 杭州灵伴科技有限公司 一种使用imu数据的视频编码、解码方法,xr设备和计算机存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11289542A (ja) * 1998-02-09 1999-10-19 Matsushita Electric Ind Co Ltd 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体
EP0935396A3 (en) * 1998-02-09 2004-08-11 Matsushita Electric Industrial Co., Ltd. Video coding method and apparatus
DE102005029127A1 (de) * 2005-06-23 2007-04-19 On Demand Microelectronics Ag Verfahren und Vorrichtung zur optimierten prädiktiven Videocodierung
JP4851911B2 (ja) * 2006-10-23 2012-01-11 富士通株式会社 符号化装置、符号化プログラムおよび符号化方法
CN101621685B (zh) * 2008-07-04 2011-06-15 株式会社日立制作所 编码装置和编码方法
US9897805B2 (en) * 2013-06-07 2018-02-20 Sony Interactive Entertainment Inc. Image rendering responsive to user actions in head mounted display
US9930360B2 (en) * 2011-11-08 2018-03-27 Texas Instruments Incorporated Method, system and apparatus for intra-refresh in video signal processing
JP2013165340A (ja) * 2012-02-09 2013-08-22 Sony Corp 画像処理装置と画像処理方法
US9100636B2 (en) * 2012-09-07 2015-08-04 Intel Corporation Motion and quality adaptive rolling intra refresh
US20140294072A1 (en) * 2013-03-27 2014-10-02 Magnum Semiconductor, Inc. Apparatuses and methods for staggered-field intra-refresh
JP2015106747A (ja) 2013-11-28 2015-06-08 富士通株式会社 動画像符号化装置、動画像符号化方法及び動画像符号化用コンピュータプログラム
US9529200B2 (en) 2014-03-10 2016-12-27 Ion Virtual Technology Corporation Method and system for reducing motion blur when experiencing virtual or augmented reality environments

Similar Documents

Publication Publication Date Title
JP2019519964A5 (ja)
KR101715833B1 (ko) 프레임들의 시퀀스를 비디오 인코딩하기 위한 방법 및 인코더
JP2017522789A5 (ja)
GB2588003A (en) Interaction between pairwise average merging candidates and intra-block intra-bloc (IBC)
JP2018201222A5 (ja)
AU2015213343B2 (en) Video decoder, video encoder, video decoding method, and video encoding method
JP2012105349A5 (ja) 動画像復号装置及び動画像復号方法
JP2016503971A5 (ja)
RU2013145081A (ru) Кодирование и декодрование видео
JP2015510357A5 (ja)
US20150373341A1 (en) Techniques for Interactive Region-Based Scalability
JP2015521826A5 (ja) エンコーダ、デコーダ、方法、及びプログラム
PH12015500537A1 (en) Expanded decoding unit definition
JP2017510121A5 (ja)
JP2015529065A5 (ja)
MX358071B (es) Conjunto de mosaico de movimiento restringido para region de codificacion de interes.
JP2015533462A5 (ja)
JP2015532551A5 (ja)
JP2013531942A5 (ja)
JP2005184857A5 (ja)
JP2013176129A5 (ja)
JP2015516758A5 (ja)
JP2015019152A5 (ja)
FI3681161T3 (fi) Kuvan koodausjärjestelmässä olevassa alilohkoyksikössä suoritettuun liike-ennustukseen perustuvalla laitteistolla suoritettava kuvan dekoodaus- ja koodausmenetelmä
JP2017526268A5 (ja)