JP6529568B2 - ビデオ符号化のサンプル適応オフセット処理の方法 - Google Patents

ビデオ符号化のサンプル適応オフセット処理の方法 Download PDF

Info

Publication number
JP6529568B2
JP6529568B2 JP2017246468A JP2017246468A JP6529568B2 JP 6529568 B2 JP6529568 B2 JP 6529568B2 JP 2017246468 A JP2017246468 A JP 2017246468A JP 2017246468 A JP2017246468 A JP 2017246468A JP 6529568 B2 JP6529568 B2 JP 6529568B2
Authority
JP
Japan
Prior art keywords
sao
offset
bit
value
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017246468A
Other languages
English (en)
Other versions
JP2018082453A (ja
Inventor
シン−タ シャン，
シン−タ シャン，
ユ−ウェン ファン，
ユ−ウェン ファン，
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HFI Innovation Inc
Original Assignee
HFI Innovation Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HFI Innovation Inc filed Critical HFI Innovation Inc
Publication of JP2018082453A publication Critical patent/JP2018082453A/ja
Application granted granted Critical
Publication of JP6529568B2 publication Critical patent/JP6529568B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/567—Motion estimation based on rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

この出願は、２０１３年７月１５日に出願された“Method and Apparatus for Image and Video Coding with Modified Sample-Adaptive Offset Processing”と題された米国仮出願番号６１／８４６１３０から、優先権を主張するものであり、その内容は引用によって本願に援用される。
本発明は、サンプル適応オフセット（ＳＡＯ）処理に関するものである。特に、本発明は、ＳＡＯ処理のパフォーマンスを改善する修正されたＳＡＯ処理に関するものである。
動き推定は、ビデオシーケンスにおいて、時間冗長性を有効に活かす効果的なインターフレーム符号化技術である。動き補償インターフレーム符号化は、すでに幅広く、各種国際ビデオ符号化標準に用いられている。各種符号化標準に採用される動き測定は、通常、ブロックベースの技術で、動き情報、たとえば、符号化モードと動きベクトルは、各マクロブロック、または、類似のブロック設定に対して決定される。このほか、イントラ符号化も適応的に適用され、ピクチャは、その他のピクチャの参照なしに処理される。インター予測、または、イントラ予測の剰余は、通常、さらに、変換、量子化、および、エントロピー符号化により処理されて、圧縮ビデオビットストリームを生成する。符号化処理の期間、符号化アーチファクト（符号化歪み）が、特に、量子化プロセスにおいて導入される。符号化アーチファクトを軽減するため、最新の符号化システムにおいては、追加処理が、再構成されたビデオに適用されて、ピクチャ品質を向上させている。追加処理は、しばしば、ループ内操作で構成されるので、エンコーダー、および、デコーダーは、同一リファレンス画像を生成して、システム性能の改善を達成する。高効率ビデオコーディング（ＨＥＶＣ）は、映像符号化国際標準のＨＥＶＣ標準化の共同チーム（ＪＣＴ−ＶＣ）で発展される新世代国際ビデオ符号化標準である。
図１は、適応インター／イントラ予測を用いた高効率ビデオコーディングシステム（ＨＥＶＣ）に基づいたビデオエンコーダーのシステムブロック図である。このシステムにおいて、ピクチャは、複数の非重複の最大符号化ユニット、符号化ツリーブロック（ＣＴＢ）に分割される。インター予測において、動き推定（ＭＥ）／動き補正（ＭＣ、１１２）は、その他のピクチャ、または、ピクチャからのビデオデータに基づいて、予測データを提供するのに用いられる。スイッチ１１４は、イントラ予測１１０からイントラ予測データ、または、ＭＥ／ＭＣ１１２からインター予測データを選択する。選択された予測データ（１３６）は、加算器１１６に供給されて入力ビデオデータから取り除かれ、剰余とも称される予測誤差を形成する。その後、予測誤差は、変換（Ｔ）１１８、次に、量子化（Ｑ）１２０により処理される。その後、変換、および、量子化された剰余が、エントロピーエンコーダー１２２により符号化されて、圧縮ビデオデータに対応するビデオビットストリームを形成する。その後、変換係数に関連するビットストリーム変換係数は、サイド情報、たとえば、動き、モード、および、イメージ領域に関連するその他の情報とともにパックされる。サイド情報は、さらに、エントロピー符号化により、必要なバンド幅を減少させる。したがって、図１に示されるように、サイド情報に関連するデータがエントロピーエンコーダー１２２に提供される。インター予測モードが用いられるとき、リファレンス画像、または、ピクチャは、終端のエンコーダーで再構築なれなければならない。よって、変換、および、量子化された剰余は、逆量子化（ＩＱ）１２４と逆変換（ＩＴ）１２６により処理されて、剰余をリカバーする。その後、剰余は、再構成（ＲＥＣ）１２８で、予測データ１３６を加えて、ビデオデータを再構成する。再構成のビデオデータは、リファレンス画像バッファ１３４中に保存されると共に、別のフレームの予測に用いられる。
図１に示されるように、入ってくるビデオデータは、符号化システムで、一連の処理を受ける。ＲＥＣ１２８からの再構成のビデオデータは、一連の処理によって、各種障害に見舞われる。したがって、再構成のビデオデータがリファレンス画像バッファ１３４に保存される前、各種ループ内処理が再構成のビデオデータに適用され、ビデオ品質を改善する。発展中の高効率ビデオコーディング（ＨＥＶＣ）標準化において、非ブロック化フィルター（ＤＦ）１３０、および、サンプル適応オフセット（ＳＡＯ）１３１が発展して、ピクチャ品質を向上させている。インループフィルタ情報が、ビットストリーム中に組み込まれて、デコーダーが、必要な情報を適切にリカバーすることができる。よって、ＳＡＯからのインループフィルタ情報がエントロピーエンコーダー１２２に提供されて、ビットストリーム中に組み込まれる。
現在のＨＥＶＣ標準化は、各カラーコンポーネントの８ビット、または、１０ビットに等しい画素深さを有する４：０：０と４：２：０ピクチャサンプリングフォーマットだけをサポートすることができる。しかし、ＨＥＶＣの範囲拡張が開発されて、高い忠実度レベル、たとえば、ＵＨＤＴＶ（Ultra-High Definition Television）で、ビデオ符号化アプリケーションが現れた。拡張されたＨＥＶＣ標準化は、ＹＵＶ４：２：２，ＹＵＶ４：４：４とＲＧＢ４：４：４ピクチャフォーマットをさらにサポートすることが期待され、且つ、画素深さは、さらに、各カラーコンポーネントの１２ビットと１６ビットをサポートすることができる。
ＨＥＶＣ標準化において、サンプル適応オフセット（ＳＡＯ）処理が用いられて、再構成ピクチャの歪みを減少させる。非ブロック化フィルタリング（ＤＦ）後、ＳＡＯ処理が実行され、且つ、それは、非ブロック解除フィルタリング（ＮＤＦｓ）操作の一部である。図２は、非ブロック化フィルター（ＤＦ）とＳＡＯを含むＨＥＶＣ−ベースデコーダーのシステムブロック図である。エンコーダーは、また、ローカルデコーダーを含んで、ビデオデータを再構成するので、いくつかのデコーダーコンポーネントも、エンコーダー中で用いられる。デコーダーにおいて、エントロピーデコーダー２２２が、剰余、動き情報に関連する符号化された構文要素、および、その他の制御データを構文解析、および、リカバーするのに用いられる。スイッチ２１４は、イントラ予測、または、インター予測を選択すると共に、選択された予測データは、リカバーされた剰余と結合される再構成（ＲＥＣ）２２８に供給される。圧縮されたビデオデータで、エントロピー復号が実行される以外に、エントロピー復号２２２は、サイド情報のエントロピー復号に対して責任を負い、サイド情報を各自ブロックに提供する。たとえば、イントラモード情報がイントラ予測２１０に提供され、インターモード情報が動き補正２１２に提供され、サンプル適応オフセット情報がＳＡＯ２３２に提供され、剰余が逆量子化２２４に提供される。剰余は、ＩＱ２２４、ＩＴ２２６、および、後続の再構成プロセスにより処理されて、ビデオデータを再構成する。再び、図２に示されるように、ＲＥＣ２２８からの再構成のビデオデータは、ＩＱ２２４とＩＴ２２６を含む一連の処理を受け、且つ、激しいシフトが発生する。再構成のビデオデータは、さらに、非ブロック化フィルター（ＤＦ）２３０、および、サンプル適応オフセット（ＳＡＯ）２３２により処理される。
ＳＡＯのコンセプトは、それらの隣接画素値にしたがって、再構成画素をカテゴリに分類する。各カテゴリーは、その後、ビットストリームで符号化されたオフセット値が割り当てられ、各カテゴリーで、オフセットを再構成画素に加えることにより、再構成信号の歪みが減少する。ＨＥＶＣ標準化において、ＳＡＯツールは、二種の画素分類方法：バンドオフセット（ＢＯ）とエッジオフセット（ＥＯ）をサポートする。
ＢＯにおいて、図３に示されるように、画素大きさを量子化することにより、再構成画素が複数のバンドに分類される。その後、オフセット値が各バンドに生成されて、バンド中の再構成画素の歪みを減少させる。開始バンド位置により識別される一群のオフセットが選択されると共に、ビットストリームで符号化される。各カラーコンポーネント（luma またはchroma）において、ＳＡＯアルゴリズムは、一ピクチャを非重複領域に分割することができ、各領域は、Ｂ０（開始バンド位置を有する）、４個のＥＯタイプ（クラス）、および、非処理（ＯＦＦ）の中から１つのＳＡＯタイプを選択することができる。ＳＡＯ分割はＣＴＢ境界と配列されて、ＣＴＢ−ベース処理を促す。一ピクチャ中のオフセット値の総数は、領域分割と各領域により選択されるＳＡＯタイプの数量に基づく。
図４に示されるように、ＥＯにおいて、ＥＯタイプにより識別される方向に沿って、現在の画素とその隣接画素を比較することにより、再構成画素がカテゴリーに分類される。表１は、ＨＥＶＣによるＥＯ画素分類の決定をリストし、“c”は、分類された現在の画素を表す。現在の画素“c”の既存のＨＥＶＣ標準化によるカテゴリーインデックス，cat_idxは以下により決定される：
Figure 0006529568
Figure 0006529568
式中、“c1”と“c-1”は、図４に示される所定のＥＯタイプに対応する隣接画素である。異なる配向の隣接画素の選択による４個のＥＯタイプが図４でも示される。オフセット値が、各カテゴリー中の全画素に生成される。カテゴリーに対応する４個のオフセット値インデックス１から４は、それぞれ、ＨＥＶＣで、一符号化ツリーブロック（ＣＴＢ）に符号化される。
Figure 0006529568
ＥＯ分類のカテゴリーは、３個の連続サンプルに関連する物理的意味を有する。図５に示されるように、３個の隣接画素の状況が対応するカテゴリに示される。たとえば、カテゴリー１は谷に対応し、カテゴリー４は山に対応する。
ＨＥＶＣにおいて、ピクチャは、複数の非重複符号化ツリーユニット（ＣＴＵ）に分割され、各ＣＴＵは、複数のＣＴＢから構成され、各ＣＴＢはカラーコンポーネントに対応する。各ＣＴＢは非処理（ＳＡＯ−ＯＦＦ）を選択する、または、ＳＡＯタイプ、または、クラスのひとつを適用することができる（すなわち、開始バンド位置インデックスを有するＢＯ、０度ＥＯ、９０度ＥＯ、１３５度ＥＯ、および、４５度ＥＯ）。サイド情報をさらに減少させるため、図６に示されるマージ構文を用いることにより、現在のＣＴＢのＳＡＯパラメータは、その上、または、左ＣＴＢのそれらを再利用することができる。ＳＡＯ構文は、sao_merge_left_flag，sao_merge_up_flag，sao_type_idx_luma，sao_type_idx_chroma，sao_eo_class_luma，sao_eo_class_chroma，sao_band_position，sao_offset_absとsao_offset_signから構成される。構文sao_merge_left_flagは、現在のＣＴＢが、左ＣＴＢのパラメータを再利用することを示す。構文sao_merge_up_flagは、現在のＣＴＢが、上ＣＴＢのパラメータを再利用することを示す。構文sao_type_idxは、選択されたＳＡＯタイプ（すなわち、それぞれ、lumaコンポーネントとchromaコンポーネントのsao_type_idx_lumaとsao_type_idx_chroma）を表す。構文sao_eo_class_lumaとsao_eo_class_chromaは、それぞれ、lumaとchromaに選択されたＥＯタイプを表す。構文sao_band_positionは、選択されたバンドの開始バンド位置を表す。cIdxは、３個のカラーコンポーネントのひとつを表す。さらに、ＳＡＯ処理は、別々に、ビデオデータの異なるカラーコンポーネントに適用される。カラーコンポーネントは、（Ｙ，Ｃｂ，Ｃｒ）、（Ｙ，Ｕ，Ｖ）または（Ｒ，Ｇ，Ｂ）に対応する。
構文sao_offset_absはオフセット大きさを表し、構文sao_offset_signはオフセットサインを表す。オフセット値SaoOffsetValは以下にしたがって決定される：
Figure 0006529568
式中、bitDepthは、ロウ画素の各コンポーネントに用いられるビットの数量で、sao_offset_signが１であるとき、offsetSignは−１に等しく、そうでなければ、１に等しい。以下により与えられたパラメータを有するトランケーティドライス（ＴＲ）二進化プロセスを用いて、既存のＨＥＶＣ標準化にしたがって、構文sao_offset_absがエントロピー符号化される
Figure 0006529568
Riceパラメータにより、cRiceParamは０に等しい。トランケーティドライスコードは、ビデオ符号化の分野で広く知られている。ＴＲコードは、トランケーテッドユーナリ（ＴＵ）コードにより表されるプレフィックス部分、および、固定長のコード名により表される切り捨てられない残りの部分を有する。
図７は、現在のＣＴＵが、左、または、上ＣＴＵと合併しないときのＣＴＵレベルのＳＡＯ情報の符号化プロセスを示す図である。注意すべきことは、ＥＯクラスとバンド位置は、一種のサブクラス、または、サブタイプで、ＳＡＯタイプ情報を記述することである。
図７に示されるように、ステップ７１０において、ＳＡＯタイプ決定が行われる。それが、ＥＯタイプである場合、符号なしのlumaオフセット（７１２）とlumaＥＯクラス（７１４）は、ビットストリームで符号化される。ＳＡＯタイプがＢＯである場合、符号つきのlumaオフセット（７１６）とlumaバンド位置（７１８）は、ビットストリームで符号化される。ＳＡＯタイプがオフである場合、その他のＳＡＯ情報はシグナリングされず、ステップ７２０に進む。クロマコンポーネンツの類似するＳＡＯ情報は以下である。クロマコンポーネンツがＥＯを選択する場合、符号なしのＣｂオフセット（７２２）、彩度ＥＯクラス（７２４）、および、符号なしのＣｒオフセット（７２６）がシグナリングされる。クロマコンポーネンツがＢＯを選択する場合、符号つきのＣｂオフセット（７３２）、Ｃｂバンド位置（７３４）、符号つきのＣｒオフセット（７３６）、および、Ｃｂバンド位置（７３８）がシグナリングされる。ＳＡＯタイプは、クロマコンポーネンツのためにオフで、シグナリングされるその他のＳＡＯ情報はなく、プロセスはステップ７４０に進む。
既存のＨＥＶＣ標準化におけるＳＡＯプロセスは、適応的に、局部的に強いオフセットを補償することにより、パフォーマンスを改善することができ、可能ならいつでも、パフォーマンスをさらに改善し、効率的ターゲット全体を達成することが望まれる。
ビデオ符号化システムにおける再構成ピクチャのパフォーマンスを改善する修正されたＳＡＯ（sample-adaptive offset）の方法を提供することを目的とする。
ビデオ符号化システムにおける再構成ピクチャのパフォーマンスを改善する修正されたＳＡＯ(sample-adaptive offset）の方法を提供する。一実施態様において、ＳＡＯ−サインスレショルドが導入されて、現在の再構成画素と隣接再構成画素間の差異のサインを決定する。負のＳＡＯ−サインスレショルドより大きく、正のＳＡＯ−サインスレショルドより小さい差分値の範囲が割り当てられて、０のサイン値を有する。二個のＳＡＯサインが、現在の再構成画素と二個の対応する隣接再構成画素間の二個の差に決定される。その後、現在の再構成画素のＥＯ分類インデックスは、二個のＳＡＯサインに基づいて決定される。その後、現在の再構成画素がＳＡＯ補償される。現在の再構成画素、および、二個の対応する隣接再構成画素は、水平方向、垂直方向、４５度斜めの方向、または、１３５度斜めの方向で、３個の連続画素に対応する。ＳＡＯ−サインスレショルドに対応する構文要素は、ビットストリーム、たとえば、スライスヘッダーでシグナリングされる。ＳＡＯ−サインスレショルドは、レート歪み最適化（ＲＤＯ）工程にしたがって、ビデオ符号化システムのエンコーダー側で決定される。
別の実施態様において、現在の再構成画素のＥＯ分類インデックス、または、ＢＯ開始バンド位置に関連するＳＡＯ−オフセット値は、ＳＡＯ−オフセットサイン、ＳＡＯ−オフセット絶対値、および、ＳＡＯ−ビット−シフト値にしたがって決定され、ＳＡＯ−オフセット値は、ＳＡＯ−ビット−シフト値を、ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、ＳＡＯ−オフセットサインを増加させることにより生成される。現在の再構成画素に関連する量子化パラメータ（ＱＰ）が第一スレショルドより小さく、且つ、第一スレショルドがビデオデータのビット深度に基づくとき、ＳＡＯ−ビット−シフト値は０に設定される。ＳＡＯ−ビット−シフト値に対応する構文要素は、ビットストリーム、たとえば、スライスヘッダーでシグナリングされる。
さらにその他の実施態様において、ＳＡＯ−オフセット絶対値は、トランケーティドライス（ＴＲ）コードにより符号化され、最大ＴＲ値が構文要素により示される。別々の最大ＴＲ値は、ビデオ符号化システムのビデオデータの異なるカラーコンポーネントに用いられる。最大ＴＲ値の構文要素は、ビットストリームのピクチャレベル、または、スライスレベルでシグナリングされる。最大ＴＲ値は、レート歪み最適化（ＲＤＯ）工程にしたがって、ビデオ符号化システムのエンコーダー側で決定される。
上記の個別の修正ＳＡＯ処理も結合できる。
図１は、サンプル適応オフセット（ＳＡＯ）処理を組み込んだ高効率ビデオコーディング（ＨＥＶＣ）標準に基づいたビデオ符号化システムのブロック図である。 図２は、サンプル適応オフセット（ＳＡＯ）処理を組み込んだ高効率ビデオコーディング（ＨＥＶＣ）標準に基づいたビデオ復号システムのブロック図である。 図３は、高効率ビデオコーディング（ＨＥＶＣ）標準により用いられるバンドオフセット（ＢＯ）による、強度を複数のバンドに分割することによるサンプル適応オフセット（ＳＡＯ）処理を示す図である。 図４は、高効率ビデオコーディング（ＨＥＶＣ）標準により用いられる０度、９０度、１３５度と４５度に対応する４個のエッジオフセット（ＥＯ）タイプを示す図である。 図５は、各種ＥＯカテゴリーに対応する隣接画素特徴を示す図である。 図６は、隣接ブロックとシェアされるＳＡＯ情報で、現在のＣＴＵ（coding tree unit）は、左、または、上ＣＴＵのＳＡＯパラメータを再利用することができることを示す図である。 図７は、現在のＣＴＵが、左、または、上ＣＴＵと合併しないとき、符号化プロセスがＣＴＵ−レベルのＳＡＯ情報を送信することを示す図である。 図８は、本発明の一実施態様による配列レベルで、ＳＡＯビットシフトフラグを組み込む構文設計を示す図である。 図９は、本発明の一実施態様によるルマとクロマコンポーネンツのＳＡＯビットシフト値をスライスヘッダーに組み込む構文設計を示す図である。 図１０は、本発明の一実施態様による配列レベルで、ルマとクロマコンポーネンツのＳＡＯビットシフト値を組み込む構文設計を示す図である。 図１１は、本発明の一実施態様によるＳＡＯ−サインスレショルドを組み込んだ修正ＳＡＯ処理のフローチャートである。 図１２は、本発明の一実施態様による修正ＳＡＯ処理を組み込んだ修正ＳＡＯ修理のフローチャートで、ＳＡＯ−オフセット値は、ＳＡＯ−ビット−シフト値を、ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、ＳＡＯ−オフセットサインを増加させることにより生成される。 図１３は、本発明の一実施態様による修正ＳＡＯ処理を組み込んだ修正ＳＡＯ処理のフローチャートで、ＳＡＯ−オフセット絶対値はトランケーティドライス（ＴＲ）コードにより符号化され、最大ＴＲ値は構文要素により示される。
既存の高効率ビデオコーディング（ＨＥＶＣ）標準におけるＳＡＯ処理のパフォーマンスを改善するため、修正ＳＡＯ処理が開示される。新しい構文要素の導入により、修正ＳＡＯ処理は修正処理を含む。
本発明による一実施態様において、修正されたＳＡＯサイン決定が導入される。等式（１）と（２）に示されるように、既存のＨＥＶＣ標準化によるＳＡＯサインは、現在のサンプル（c）と隣接サンプル（c1またはc-1）間の基本的差異のサインである。よって、ゼロ値の基本的差異だけが、０値が割り当てられるその対応するsao_signを有する。本発明の実施態様は、ＳＡＯ−サインスレショルドsao_sign_threを導入することにより、０値が割り当てられる基本的差異のデータ範囲を拡大する。本発明の実施態様による基本的差異のＳＡＯサインは、以下の等式にしたがって決定される：
Figure 0006529568
可変saoSignThreは、構文要素sao_sign_threにより特定される。
したがって、saoSignThreより大きく、saoSignThreより小さい値を有する基本的差異は、０値が割り当てられるsao_signを有する。同時に、sao_sign値１と−１に関連するデータ範囲が減少する。構文要素sao_sign_threが、ＥＯタイプの画素分類の修正ＳＡＯ処理中に用いられる。適切なsao_sign_thre値が、一シーケンス、ピクチャ、スライス、または、その他のピクチャユニットに選択されて、パフォーマンス改善を達成する。たとえば、エンコーダーは、レート歪み工程を用いて、最高のパフォーマンスを達成するsao_sign_thre値を決定する。修正ＳＡＯ処理にしたがった現在の画素“c”のカテゴリーインデックスcat_idxは、ＨＥＶＣ標準化と同じ方式で決定され、すなわち：
Figure 0006529568
別の実施態様において、既存のＨＥＶＣ標準化のＳＡＯ処理の第二修正が関係して、ＳＡＯオフセット値SaoOffsetValを表す。構文要素sao_bit_shiftが、修正ＳＡＯ処理に用いられて、以下のように、オフセット値SaoOffsetValを表す：
Figure 0006529568
可変saoBITShiftは、構文要素sao_bit_shiftにより特定される。一方、既存のＨＥＶＣ標準化により、SaoOffsetValを得る左方移動操作の値は（bitDepth-Min(bitDepth,10）である。新しい構文要素sao_bit_shiftと一緒に、ＳＡＯオフセット値を得る修正されたＳＡＯ操作は、パフォーマンス改善、特に、高サンプルビット深度の改善を助けることができる。ＳＡＯ処理に対するこの第二修正は、エッジオフセット（ＥＯ）、バンドオフセット（ＢＯ）、または、両方に適用される。
本発明の一実施態様によるsao_bit_shiftをシグナリングするサンプル構文設計が、図８と図９で示される。図８において、ＳＡＯ有効フラグsample_adaptive_offset_enabled_flagにより示されるように、ＳＡＯが有効であるとき、ＳＡＯビットシフトフラグadaptive_sao_bit_shift_active_flagが、シーケンスパラメータセットＲＢＳＰ（raw byte sequence payload）構文に組み込まれる。関連する構文要素は、図８中で、参照符号８１０により示される。ＳＡＯビットシフトフラグが１の値を有する場合、それは、sao_luma_bit_shiftとsao_chroma_bit_shiftが、スライスセグメントヘッダー中に提示されることを意味する。ＳＡＯビットシフトフラグが０値を有する場合、それは、sao_luma_bit_shiftとsao_chroma_bit_shiftが、スライスセグメントヘッダー中に提示されないことを意味する。提示されない場合、ＳＡＯビットシフトフラグの値は０であると推定される。構文要素sao_luma_bit_shiftは、サンプルのＳＡＯオフセット値を生成するのに用いられるパラメータを特定する。一実施態様において、sao_luma_bit_shiftの値は、０からBITDepthY-6を含めた範囲にある。提示されない場合、sao_luma_bit_shiftの値は、bitDepthY - Min(bitDepthY,10）であると推定される。構文要素sao_chroma_bit_shiftは、chromaサンプルのＳＡＯオフセット値を生成するのに用いられるパラメータを特定する。sao_chroma_bit_shiftの値は、０からBITDepthC-6を含めた範囲にある。提示されない場合、sao_chroma_bit_shiftの値は、bitDepthC -Min(bitDepth C,10）であると推定される。図９において、サンプル構文設計を説明し、参照符号９１０に示されるように、スライスセグメントヘッダー中にsao_luma_bit_shiftとsao_chroma_bit_shiftを組み込む。
図１０は、本発明の一実施態様を組み込んだその他のサンプル構文設計を示す図で、参照符号１０１０により示されるように、sao_luma_bit_shiftとsao_chroma_bit_shiftは、ピクチャパラメータセットＲＢＳＰ中に組み込まれる。ＳＡＯビットシフトも、ビデオビットストリームのその他の位置、たとえば、配列レベルに組み込まれる。
ＨＥＶＣ標準化において、絶対的オフセット値は、等式（４）と０に設定されるＲｉｃｅパラメータ（cRiceParam）セットにしたがって、最大可能値（ｃＭａｘ）セットを有するトランケーティドライス（ＴＲ）コードを用いて符号化される。本発明の一実施態様による修正ＳＡＯ処理は、新しい構文要素sao_offset_maxを用いて、最大オフセット値（ｃＭａｘ）を直接示す。特定されるｃＭａｘとｃＲｉｃｅＰａｒａｍは以下で示され、構文要素sao_offset_absは、トランケーティドライス（ＴＲ）二進化プロセスを用いて、エントロピー符号化される。
cMax = saoOffsetMax, and cRiceParam = 0
可変saoOffsetMaxは、構文要素sao_offset_maxにより特定される。
現在の再構成画素に関連する量子化パラメータ（ＱＰ）がスレショルドより小さいとき、ＳＡＯ−ビット−シフト値は０に設定される。たとえば、スレショルドは、ビデオデータのビット深度に基づき、小さいスレショルドは大きいビット深度に用いられる。
修正ＳＡＯ処理による本発明の一実施態様を組み込んだビデオ符号化システムのパフォーマンスは、それぞれ、各種符号化段（主、高、および、超高段）で、全イントラ、ランダムアクセス、および、低遅延Bピクチャ符号化設定の表２−４に示されるＨＴＭ−１０．０に基づいて、従来のシステムパフォーマンスと比較される。ＢＤレート差は、個別のビデオコンポーネント（Ｙ，ＵとＶ）に示される。ＢＤレートの負の値は、本発明がよいパフォーマンスを有することを示す。表２−４に示されるように、本発明の一実施態様を組み込んだ個別のコンポーネント（Ｙ，ＵとＶ）のＢＤレートは、０．１％から１．６％に減少する。
Figure 0006529568
Figure 0006529568
Figure 0006529568
sao_luma_bit_shiftとsao_chroma_bit_shiftを用いた本発明の一実施態様を組み込んだ１６ビットと１２ビットで、高ビット深度を有するビデオ符号化システムのパフォーマンスが、それぞれ、全イントラ、および、低遅延符号化設定の表５と表６で示されるように、ＨＴＭ−１０．０に基づいた従来のパフォーマンスと比較される。パフォーマンス比較は、第一カラムでリストされた異なる組のテストデータに基づく。表５に示されるように、本発明の一実施態様を組み込んだ個別のコンポーネント（Ｙ／Ｇ，Ｃｂ／ＢとＣｒ／Ｒ）のＢＤレートは、全イントラ設定において、従来のＨＥＶＣとほぼ同じである。しかし、表６に示されるように、本発明の一実施態様を組み込んだ個別のコンポーネント（Ｙ／Ｇ，Ｃｂ／ＢとＣｒ／Ｒ）のＢＤレートは、低遅延Bピクチャ設定において、０．１％から３．３％減少する。
Figure 0006529568
Figure 0006529568
図１１は、本発明の一実施態様によるＳＡＯサインスレショルドを用いたＳＡＯ処理のフローチャートである。ステップ１１０において、システムは、再構成ピクチャに関連する入力データを受信する。再構成ピクチャは、メモリから回収されるか、または、プロセッサから受信される。ステップ１１２０において、現在の再構成画素と第一隣接再構成画素間の第一差異、および、現在の再構成画素と第二隣接再構成画素間の第二差異が決定される。ステップ１１３０に示されるように、第一差異とＳＡＯ−サインスレショルドに基づく第一ＳＡＯサインが決定され、第一差異が、ＳＡＯ−サインスレショルド以上である場合、第一ＳＡＯサインは１に等しい、および、第一差異が、負のＳＡＯ−サインスレショルド以下である、第一ＳＡＯサインはー１に等しい、および、第一差異の絶対値が、ＳＡＯ−サインスレショルドより小さい場合、第一ＳＡＯサインは０に等しい。第二差異に基づいた第二ＳＡＯサインとＳＡＯ−サインスレショルドが、ステップ１１４０において決定され、第二差異が、ＳＡＯ−サインスレショルド以上である場合、第二ＳＡＯサインは１に等しい；第二差異が、負のＳＡＯ−サインスレショルド以下である場合、第二ＳＡＯサインはー１に等しい、および、第二差異の絶対値が、ＳＡＯ−サインスレショルドより小さい場合、第二ＳＡＯサインは０に等しい。ステップ１１５０に示されるように、第一ＳＡＯサインと第二ＳＡＯサインにしたがって、現在の再構成画素のＥＯ分類インデックスが決定される。その後、ステップ１１１６において、ＥＯ分類インデックスに関連するＳＡＯ−オフセット値を、現在の再構成画素に加えることにより、現在の再構成画素が補償される（ステップ１１６０）。
図１２は、本発明の一実施態様による修正ＳＡＯ処理を組み込んだ修正ＳＡＯ処理のフローチャートで、ＳＡＯ−オフセット値は、ＳＡＯ−ビット−シフト値を、ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、ＳＡＯ−オフセットサインを増加させることにより生成される。再構成ピクチャに関連する入力データがステップ１２１０で受信される。ステップ１２２０において、現在の再構成画素のＢＯのＥＯ分類インデックス、または、開始バンド位置は、現在の再構成画素、および、隣接再構成画素に基づいて決定される。ステップ１２３０において、ＳＡＯ−オフセットサイン、ＳＡＯ−オフセット絶対値、および、ＳＡＯ−ビット−シフト値にしたがって、現在の再構成画素のＥＯ分類インデックス、または、ＢＯ開始バンド位置に関連するＳＡＯ−オフセット値が決定される。ＳＡＯ−オフセット値は、ＳＡＯ−ビット−シフト値を、ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、ＳＡＯ−オフセットサインを増加させることにより生成される。その後、ステップ１２４０に示されるように、ＥＯ分類インデックス、または、ＢＯ開始バンド位置に関連するＳＡＯ−オフセット値を、現在の再構成画素に加えることにより、現在の再構成画素が補償される。
図１３は、本発明の一実施態様による修正ＳＡＯ処理を組み込んだ修正ＳＡＯ処理のフローチャートであり、ＳＡＯ−オフセット絶対値は、トランケーティドライス（ＴＲ）コードにより符号化され、最大ＴＲ値は構文要素により表される。ステップ１３１０において、再構成ピクチャに関連する入力データが受信される。ステップ１３２０において、ＥＯ分類インデックスに関連するＳＡＯ−オフセット値が決定され、各ＳＡＯ−オフセット値の絶対値は、トランケーティドライス（ＴＲ）コードにより符号化され、最大ＴＲ値は構文要素により示される。ステップ１３３０に示されるように、現在の再構成画素、および、隣接再構成画素に基づいて、現在の再構成画素の現在のＥＯ分類インデックスが決定される。その後、ステップ１３４０に示されるように、ＥＯ分類インデックスに関連するＳＡＯ−オフセット値を、現在の再構成画素に加えることにより、現在の再構成画素が補償される。
上述のフローチャートは、本発明による修正ＳＡＯ処理の例を説明することが目的である。当業者は、精神と領域を脱しない範囲内で、本発明の各ステップを修正、ステップを再アレンジ、ステップを分割、または、ステップを組み合わせて、本発明を実行することができる。
上の記述が提示されて、当業者が、特定のアプリケーションとその要求の文脈で提供されるように、本発明を実施できるようにする。当業者なら、上記実施態様に対する各種修正が理解でき、ここで定義される一般定義は、その他の実施態様に適用される。よって、本発明は、示される特定の実施態様や記述に限定されるものではなく、原理と新規特徴と一致する幅広い領域が認められる。上述の詳細な記述において、各種特定の詳細が説明されて、本発明の十分な理解を提供する。それでもなお、当業者なら、本発明が実行できることが理解できる。
上記の本発明の実施態様は、各種ハードウェア、ソフトウェアコード、または、それらの組み合わせで実行される。たとえば、本発明の一実施態様は、ビデオ圧縮チップに整合される回路、または、ビデオ圧縮ソフトウェア中に整合されるプログラムコードで、記述される処理を実行する。本発明の一実施態様は、また、デジタルシグナルプロセッサ（ＤＳＰ）で実行されるプログラムコードで、記述される処理を実行する。本発明は、さらに、コンピュータプロセッサ、デジタルシグナルプロセッサ、マイクロプロセッサ、または、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）により実行される複数の機能を含む。これらのプロセッサは、本発明により具体化される特定の方法を定義する機械可読ソフトウェアコード、または、ファームウェアコードを実行することにより、本発明による特定のタスクを実行するように設定される。ソフトウェアコード、または、ファームウェアコードは、異なるプログラミング言語と異なるフォーマットやスタイルで開発される。ソフトウェアコードは、さらに、異なる標的プラットフォームにコンパイルされる。しかし、本発明によるソフトウェアコードの異なる符号化フォーマット、スタイル、および、言語、および、コードを設定して、タスクを実行するその他の手段は、本発明の精神と領域を脱しない。
本発明では好ましい実施例を前述の通り開示したが、これらは決して本発明に限定するものではなく、当該技術を熟知する者なら誰でも、本発明の精神と領域を脱しない範囲内で各種の変動や潤色を加えることができ、従って本発明の保護範囲は、特許請求の範囲で指定した内容を基準とする。

Claims (8)

  1. ビデオ符号化システムＳＡＯ（sample-adaptive offset）処理の方法であって、前記方法は、
    再構成ピクチャに関連する入力データを受信する工程と、
    前記現在の再構成画素、および、隣接再構成画素に基づいて、現在の再構成画素のＥＯ分類インデックス、または、ＢＯ開始バンド位置を決定する工程と、
    第１のカラーコンポーネントに関連する第１のＳＡＯ−ビット−シフト値、および、第２のカラーコンポーネントに関連する第２のＳＡＯ−ビット−シフト値を生成する工程であって、前記第１のＳＡＯ−ビット−シフト値および前記第２のＳＡＯ−ビット−シフト値の各々は、ビットストリームの異なるレベルにおける少なくとも２つの構文要素に対応する工程と、
    ＳＡＯ−オフセットサイン、ＳＡＯ−オフセット絶対値、前記第１のＳＡＯ−ビット−シフト値、および、前記第２のＳＡＯ−ビット−シフト値にしたがって、前記現在の再構成画素の前記ＥＯ分類インデックス、または、前記ＢＯ開始バンド位置に関連するＳＡＯ−オフセット値を決定する工程と、
    前記現在の再構成画素が前記第１のカラーコンポーネントに対応するとき、前記ＳＡＯ−オフセット値は、前記第１のＳＡＯ−ビット−シフト値を、前記ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、前記ＳＡＯ−オフセットサインを増加させることにより生成される工程と、
    前記現在の再構成画素が前記第２のカラーコンポーネントに対応するとき、前記ＳＡＯ−オフセット値は、前記第２のＳＡＯ−ビット−シフト値を、前記ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、前記ＳＡＯ−オフセットサインを増加させることにより生成される工程と、
    前記現在の再構成画素が前記第１のカラーコンポーネントに対応するか、あるいは、前記第２のカラーコンポーネントに対応するかに従って、前記ＥＯ分類インデックス、または、前記ＢＯ開始バンド位置に関連する前記ＳＡＯ−オフセット値を、前記現在の再構成画素に加えることにより、前記現在の再構成画素を補償する工程と、を有することを特徴とする方法。
  2. 前記第１のＳＡＯ−ビット−シフト値は、前記ビットストリームの第１のレベルにおける第１の構文要素に対応し、前記第２のＳＡＯ−ビット−シフト値は、前記ビットストリームの前記第１のレベルにおける第２の構文要素に対応し、前記第１の構文要素と前記第２の構文要素は異なることを特徴とする請求項１に記載の方法。
  3. 前記第１の構文要素の値の範囲は、ビデオデータの画素深さによって決まることを特徴とする請求項２に記載の方法。
  4. 前記第２の構文要素の値の範囲は、ビデオデータの画素深さによって決まることを特徴とする請求項２に記載の方法。
  5. ビデオ符号化システムＳＡＯ（sample-adaptive offset）処理の装置であって、前記装置は、
    再構成ピクチャに関連する入力データを受信する処理、
    前記現在の再構成画素、および、隣接再構成画素に基づいて、現在の再構成画素のＥＯ分類インデックス、または、ＢＯ開始バンド位置を決定する処理、
    第１のカラーコンポーネントに関連する第１のＳＡＯ−ビット−シフト値、および、第２のカラーコンポーネントに関連する第２のＳＡＯ−ビット−シフト値を生成する処理であって、前記第１のＳＡＯ−ビット−シフト値および前記第２のＳＡＯ−ビット−シフト値の各々は、ビットストリームの異なるレベルにおける少なくとも２つの構文要素に対応する処理、
    ＳＡＯ−オフセットサイン、ＳＡＯ−オフセット絶対値、前記第１のＳＡＯ−ビット−シフト値、および、前記第２のＳＡＯ−ビット−シフト値にしたがって、前記現在の再構成画素の前記ＥＯ分類インデックス、または、前記ＢＯ開始バンド位置に関連するＳＡＯ−オフセット値を決定する処理、
    前記現在の再構成画素が前記第１のカラーコンポーネントに対応するとき、前記ＳＡＯ−オフセット値は、前記第１のＳＡＯ−ビット−シフト値を、前記ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、前記ＳＡＯ−オフセットサインを増加させることにより生成される処理、
    前記現在の再構成画素が前記第２のカラーコンポーネントに対応するとき、前記ＳＡＯ−オフセット値は、前記第２のＳＡＯ−ビット−シフト値を、前記ＳＡＯ−オフセット絶対値に左方移動させることによる結果により、前記ＳＡＯ−オフセットサインを増加させることにより生成される処理、および
    前記現在の再構成画素が前記第１のカラーコンポーネントに対応するか、あるいは、前記第２のカラーコンポーネントに対応するかに従って、前記ＥＯ分類インデックス、または、前記ＢＯ開始バンド位置に関連する前記ＳＡＯ−オフセット値を、前記現在の再構成画素に加えることにより、前記現在の再構成画素を補償する処理、
    のために構成された１またはそれ以上の回路を有することを特徴とする装置。
  6. 前記第１のＳＡＯ−ビット−シフト値は、前記ビットストリームの第１のレベルにおける第１の構文要素に対応し、前記第２のＳＡＯ−ビット−シフト値は、前記ビットストリームの前記第１のレベルにおける第２の構文要素に対応し、前記第１の構文要素と前記第２の構文要素は異なることを特徴とする請求項５に記載の装置。
  7. 前記第１の構文要素の値の範囲は、ビデオデータの画素深さによって決まることを特徴とする請求項６に記載の装置。
  8. 前記第２の構文要素の値の範囲は、ビデオデータの画素深さによって決まることを特徴とする請求項６に記載の装置。
JP2017246468A 2013-07-15 2017-12-22 ビデオ符号化のサンプル適応オフセット処理の方法 Active JP6529568B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201361846130P 2013-07-15 2013-07-15
US61/846,130 2013-07-15

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016526429A Division JP6328759B2 (ja) 2013-07-15 2014-07-15 ビデオ符号化のサンプル適応オフセット処理の方法

Publications (2)

Publication Number Publication Date
JP2018082453A JP2018082453A (ja) 2018-05-24
JP6529568B2 true JP6529568B2 (ja) 2019-06-12

Family

ID=52345754

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016526429A Active JP6328759B2 (ja) 2013-07-15 2014-07-15 ビデオ符号化のサンプル適応オフセット処理の方法
JP2017246468A Active JP6529568B2 (ja) 2013-07-15 2017-12-22 ビデオ符号化のサンプル適応オフセット処理の方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2016526429A Active JP6328759B2 (ja) 2013-07-15 2014-07-15 ビデオ符号化のサンプル適応オフセット処理の方法

Country Status (7)

Country Link
US (1) US10659817B2 (ja)
EP (1) EP3011744A4 (ja)
JP (2) JP6328759B2 (ja)
KR (1) KR101752612B1 (ja)
CN (1) CN105230020A (ja)
CA (1) CA2908323C (ja)
WO (1) WO2015007200A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150195574A1 (en) * 2013-11-06 2015-07-09 Arris Enterprises, Inc. Modification of picture parameter set (pps) for hevc extensions
JP6253406B2 (ja) * 2013-12-27 2017-12-27 キヤノン株式会社 画像符号化装置、撮像装置、画像符号化方法、及びプログラム
BR122021021258A8 (pt) 2014-01-03 2023-02-07 Arris Entpr Llc Método para decodificar uma pluralidade de figuras, método para codificar uma pluralidade de figuras, e, fluxo de bits de dados de vídeo compactados
CN112887735B (zh) * 2014-01-03 2024-04-02 康普英国有限公司 用于hevc扩展处理的条件解析扩展语法
CN105208382A (zh) * 2015-09-23 2015-12-30 北京君正集成电路股份有限公司 采样点自适应补偿模式判决方法和装置
WO2017078450A1 (ko) * 2015-11-04 2017-05-11 엘지전자 주식회사 영상 코딩 시스템에서 영상 디코딩 방법 및 장치
CN105657433B (zh) * 2015-12-30 2019-09-03 航天恒星科技有限公司 一种基于图像复杂度的信源实时编码方法及系统
US10542294B2 (en) 2016-03-16 2020-01-21 Mediatek Inc. Method and apparatus of video data processing with restricted block size in video coding
CN105979262B (zh) * 2016-05-06 2019-12-03 西安电子科技大学 一种hevc基于时间相关性和帧内预测方向的sao优化方法
CN116708784A (zh) 2016-07-12 2023-09-05 韩国电子通信研究院 图像编码/解码方法以及用于该方法的记录介质
US10623737B2 (en) * 2016-10-04 2020-04-14 Qualcomm Incorporated Peak sample adaptive offset
WO2018070723A1 (ko) * 2016-10-11 2018-04-19 엘지전자(주) 영상의 부호화/복호화 방법 및 이를 위한 장치
KR20180074150A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 Sao 필터링을 포함하는 비디오 데이터의 부호화를 위한 방법 및 장치
JP6769302B2 (ja) * 2016-12-28 2020-10-14 富士通株式会社 動画像符号化装置、動画像符号化方法、動画像符号化用コンピュータプログラム、動画像復号装置及び動画像復号方法ならびに動画像復号用コンピュータプログラム
WO2019105536A1 (en) * 2017-11-28 2019-06-06 Huawei Technologies Co., Ltd. Syntax prediction using reconstructed samples
GB2575119B (en) * 2018-06-29 2021-11-24 Canon Kk Methods and devices for performing sample adaptive offset (SAO) filtering
US11595644B2 (en) 2020-10-01 2023-02-28 Tencent America LLC Method and apparatus for offset in video filtering
US11849117B2 (en) 2021-03-14 2023-12-19 Alibaba (China) Co., Ltd. Methods, apparatus, and non-transitory computer readable medium for cross-component sample adaptive offset
GB2617839A (en) * 2022-04-19 2023-10-25 Canon Kk Video coding and decoding

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7218691B1 (en) * 2001-03-05 2007-05-15 Marvell International Ltd. Method and apparatus for estimation of orthogonal frequency division multiplexing symbol timing and carrier frequency offset
US6771836B2 (en) * 2001-06-21 2004-08-03 Microsoft Corporation Zero-crossing region filtering for processing scanned documents
JP4094604B2 (ja) * 2004-11-30 2008-06-04 本田技研工業株式会社 車両周辺監視装置
CN101589625B (zh) 2006-10-25 2011-09-21 弗劳恩霍夫应用研究促进协会 质量可缩放编码
JP4412323B2 (ja) * 2006-12-28 2010-02-10 株式会社日立製作所 映像処理装置及び映像表示装置
US8208560B2 (en) 2007-10-15 2012-06-26 Intel Corporation Bit depth enhancement for scalable video coding
JP2010199631A (ja) * 2007-11-30 2010-09-09 国立大学法人京都大学 画像ノイズ除去方法
KR20100099686A (ko) * 2007-12-04 2010-09-13 소니 주식회사 화상 처리 장치 및 방법, 프로그램, 및 기록 매체
JP5624619B2 (ja) * 2009-07-15 2014-11-12 カーディアック ペースメイカーズ， インコーポレイテッド 埋め込み型医療装置における遠隔感知
US8508811B2 (en) * 2009-12-14 2013-08-13 Samsung Electronics Co., Ltd. Image forming apparatus and method of copying two-sided card thereof
JP5624998B2 (ja) * 2009-12-25 2014-11-12 本田技研工業株式会社 画像処理装置、画像処理方法、コンピュータプログラム及び移動体
US8693769B2 (en) * 2009-12-28 2014-04-08 Industrial Technology Research Institute Image classification methods and systems
KR101665137B1 (ko) * 2010-04-07 2016-10-12 삼성전자주식회사 이미지 센서에서 발생되는 잡음을 제거하기 위한 장치 및 방법
US8660174B2 (en) 2010-06-15 2014-02-25 Mediatek Inc. Apparatus and method of adaptive offset for video coding
KR101663764B1 (ko) * 2010-08-26 2016-10-07 에스케이 텔레콤주식회사 인트라 예측을 이용한 부호화 및 복호화 장치와 방법
EP2625859A4 (en) 2010-10-05 2016-03-02 Mediatek Inc METHOD AND DEVICE FOR ADAPTIVE LOOP FILTRATION ON REGION BASE
JP5562812B2 (ja) * 2010-11-22 2014-07-30 株式会社東芝 送受切替回路、無線装置および送受切替方法
US9161041B2 (en) * 2011-01-09 2015-10-13 Mediatek Inc. Apparatus and method of efficient sample adaptive offset
CN106454357A (zh) 2011-01-09 2017-02-22 寰发股份有限公司 已处理视频数据的样本自适应补偿的方法和装置
US20120236936A1 (en) * 2011-03-14 2012-09-20 Segall Christopher A Video coding based on edge determination
CN102227127B (zh) 2011-06-21 2012-11-14 天津理工大学 全自动多媒体素材缺陷检测及质量分析方法
US9942573B2 (en) * 2011-06-22 2018-04-10 Texas Instruments Incorporated Systems and methods for reducing blocking artifacts
KR101785770B1 (ko) 2011-06-23 2017-10-16 후아웨이 테크놀러지 컴퍼니 리미티드 오프셋 복호 장치, 오프셋 부호화 장치, 화상 필터 장치 및 데이터 구조
US9344743B2 (en) * 2011-08-24 2016-05-17 Texas Instruments Incorporated Flexible region based sample adaptive offset (SAO) and adaptive loop filter (ALF)
US10070152B2 (en) * 2011-08-24 2018-09-04 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
WO2013046990A1 (ja) 2011-09-29 2013-04-04 シャープ株式会社 オフセット復号装置、オフセット符号化装置、画像フィルタ装置、および、データ構造
US8913656B2 (en) * 2011-10-14 2014-12-16 Mediatek Inc. Method and apparatus for in-loop filtering
JP2013138395A (ja) * 2011-11-04 2013-07-11 Sharp Corp 画像フィルタ装置、画像復号装置、画像符号化装置、および、データ構造
US9253482B2 (en) * 2011-11-08 2016-02-02 Texas Insturments Incorporated Method and apparatus for sample adaptive offset without sign coding
EP2777272B1 (en) 2011-11-08 2019-01-09 Google Technology Holdings LLC Devices and methods for sample adaptive offset coding and/or signaling
US9277194B2 (en) * 2011-11-08 2016-03-01 Texas Instruments Incorporated Method and apparatus for image and video coding using hierarchical sample adaptive band offset
WO2013103892A1 (en) * 2012-01-05 2013-07-11 General Instrument Corporation Devices and methods for sample adaptive offset coding and/or selection of edge offset parameters
WO2013103893A1 (en) * 2012-01-05 2013-07-11 General Instrument Corporation Devices and methods for multipass sample adaptive offset coding
US9282328B2 (en) * 2012-02-10 2016-03-08 Broadcom Corporation Sample adaptive offset (SAO) in accordance with video coding
US9030714B2 (en) * 2012-03-22 2015-05-12 Canon Kabushiki Kaisha Image processing apparatus and image processing method to set appropriate ink amount for character data and for image data
US9031319B2 (en) * 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US8953882B2 (en) * 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
MX2013015086A (es) * 2012-06-27 2014-02-21 Panasonic Corp Metodo de codificacion de imagenes, metodo de decodificacion de imagenes, aparato de codificacion de imagenes, aparato de decodificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
US9083948B2 (en) * 2012-07-18 2015-07-14 Qualcomm Incorporated Crosstalk reduction in multiview video processing
JP5987660B2 (ja) * 2012-11-30 2016-09-07 富士通株式会社 画像処理装置、画像処理方法及びプログラム
US9053389B2 (en) * 2012-12-03 2015-06-09 Analog Devices, Inc. Hough transform for circles
US20140192266A1 (en) * 2013-01-04 2014-07-10 Qualcomm Incorporated Method and apparatus of reducing compression noise in digital video streams
GB2509707B (en) * 2013-01-04 2016-03-16 Canon Kk A method, device, computer program, and information storage means for encoding or decoding a video sequence
US10708588B2 (en) * 2013-06-19 2020-07-07 Apple Inc. Sample adaptive offset control

Also Published As

Publication number Publication date
CN105230020A (zh) 2016-01-06
WO2015007200A1 (en) 2015-01-22
CA2908323A1 (en) 2015-01-22
US10659817B2 (en) 2020-05-19
KR101752612B1 (ko) 2017-06-29
CA2908323C (en) 2021-07-06
EP3011744A1 (en) 2016-04-27
US20160127747A1 (en) 2016-05-05
KR20160019531A (ko) 2016-02-19
EP3011744A4 (en) 2017-03-01
JP2018082453A (ja) 2018-05-24
JP6328759B2 (ja) 2018-05-23
JP2016527793A (ja) 2016-09-08

Similar Documents

Publication Publication Date Title
JP6529568B2 (ja) ビデオ符号化のサンプル適応オフセット処理の方法
US10116967B2 (en) Method and apparatus for coding of sample adaptive offset information
US11153562B2 (en) Method and apparatus of advanced deblocking filter in video coding
AU2013248857B2 (en) Method and apparatus for loop filtering across slice or tile boundaries
US9872015B2 (en) Method and apparatus for improved in-loop filtering
JP2023145724A (ja) 映像復号化方法、映像符号化方法およびビットストリーム送信方法
JP5689563B2 (ja) インループフィルターバッファーの削減方法及び装置
US20140198844A1 (en) Method and apparatus for non-cross-tile loop filtering
KR20220046686A (ko) 비디오 코딩을 위한 제약된 교차 성분 적응형 루프 필터링 방법 및 장치
CA2864570A1 (en) Method and apparatus for sample adaptive offset coding with separate sign and magnitude
KR20130070195A (ko) 문맥 기반의 샘플 적응적 오프셋 필터 방향 추론 및 적응적 선택에 대한 비디오 방법 및 장치

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190405

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190423

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190514

R150 Certificate of patent or registration of utility model

Ref document number: 6529568

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250