JP2021520728A - 画像圧縮のためのさらに改善された方法及び装置 - Google Patents
画像圧縮のためのさらに改善された方法及び装置 Download PDFInfo
- Publication number
- JP2021520728A JP2021520728A JP2020554294A JP2020554294A JP2021520728A JP 2021520728 A JP2021520728 A JP 2021520728A JP 2020554294 A JP2020554294 A JP 2020554294A JP 2020554294 A JP2020554294 A JP 2020554294A JP 2021520728 A JP2021520728 A JP 2021520728A
- Authority
- JP
- Japan
- Prior art keywords
- group
- sample
- code
- bits
- significant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 123
- 238000007906 compression Methods 0.000 title abstract description 18
- 230000006835 compression Effects 0.000 title abstract description 17
- 230000008569 process Effects 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 12
- 230000003044 adaptive effect Effects 0.000 claims description 11
- 230000006872 improvement Effects 0.000 claims description 9
- 230000001364 causal effect Effects 0.000 claims description 6
- 230000001419 dependent effect Effects 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 3
- 230000003190 augmentative effect Effects 0.000 claims description 2
- 238000004422 calculation algorithm Methods 0.000 description 70
- 239000003550 marker Substances 0.000 description 29
- 238000006243 chemical reaction Methods 0.000 description 14
- 230000008901 benefit Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 5
- 230000002441 reversible effect Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 230000008520 organization Effects 0.000 description 4
- 230000011664 signaling Effects 0.000 description 4
- 238000006467 substitution reaction Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- MTHSVFCYNBDYFN-UHFFFAOYSA-N diethylene glycol Chemical compound OCCOCCO MTHSVFCYNBDYFN-UHFFFAOYSA-N 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012856 packing Methods 0.000 description 3
- 230000036961 partial effect Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000000717 retained effect Effects 0.000 description 3
- 101100202529 Danio rerio scoca gene Proteins 0.000 description 2
- 101150046895 SCOC gene Proteins 0.000 description 2
- 208000033853 acromesomelic dysplasia 4 Diseases 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- GXFZCDMWGMFGFL-KKXMJGKMSA-N (+)-Tubocurarine chloride hydrochloride Chemical compound [Cl-].[Cl-].C([C@H]1[N+](C)(C)CCC=2C=C(C(=C(OC3=CC=C(C=C3)C[C@H]3C=4C=C(C(=CC=4CC[NH+]3C)OC)O3)C=21)O)OC)C1=CC=C(O)C3=C1 GXFZCDMWGMFGFL-KKXMJGKMSA-N 0.000 description 1
- 239000008709 Curare Substances 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000013383 initial experiment Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000005945 translocation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/005—Statistical coding, e.g. Huffman, run length coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/007—Transform coding, e.g. discrete cosine transform
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
- H04N19/647—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission using significance based coding, e.g. Embedded Zerotrees of Wavelets [EZW] or Set Partitioning in Hierarchical Trees [SPIHT]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/93—Run-length coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Discrete Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
Abstract
Description
圧縮効率
品質スケーラビリティ
解像度スケーラビリティ
関心領域アクセス可能性
並列処理
反復的符号化を必要としない最適化されたレート制御
視覚的に関連する最適化目標を標的化することができる
エラー耐性
圧縮ドメイン(すなわち、非常にローメモリの)転置及びフリップ動作
コード・ブロック、区域又はJ2Kパケットのレベルにおいて情報を並べ直すことができる
JPIPを介した映像(ビデオ及びアニメーションを含む)の効率的且つ反応のよい遠隔対話的閲覧
膨大な映像ソースからの任意の領域の効率的なオンデマンドのレンダリング
非線形トーン・カーブ及び/又はカスタム浮動小数点マッピングを使用することによる高ダイナミック・レンジ圧縮
豊富なメタデータ・アノテーション
ハイパースペクトル及びボリューメトリック・コンテンツの効率的な圧縮
a.第1のビット・ストリーム(MELビット・ストリーム)が、因果関係のある隣接グループがすべて非有意であるグループ(AZCグループ)全体の有意性を符号化し、非ゼロの大きさを有するサンプルは有意であると識別され、ゼロの大きさを有するサンプルは非有意であると識別され、
b.第2のビット・ストリーム(VLCビット・ストリーム)が、有意なAZCグループであるか、又は、AZCグループでないかのいずれかである各グループ内の個々のサンプルの有意性を符号化し、
c.上記第2のビット・ストリーム(VLCビット・ストリーム)はまた、指数予測子(exponent predictor)のセットに加えられると、グループ内の各有意なサンプルの大きさ指数の上限を与える、各有意なグループの符号なし残差値も符号化し、
d.第3のビット・ストリーム(MagSgnビット・ストリーム)は、対応する指数境界を所与として、有意なサンプル値を表すのに必要な符号ビット及び任意の追加の大きさビットを提供し、
e.上記指数予測子は、ブロック内の先行するサンプルがブロックの境界の外部にある場合を除いて、ブロック内の先行するサンプルと関連付けられる指数境界と追加の大きさビットの両方を使用して計算される、
方法を提供する。
a.第1のビット・ストリーム(MELビット・ストリーム)が、因果関係のある隣接グループがすべて非有意であるグループ(AZCグループ)全体の有意性を発見するために復号され、非ゼロの大きさを有するサンプルは有意であると識別され、ゼロの大きさを有するサンプルは非有意であると識別され、
b.第2のビット・ストリーム(VLCビット・ストリーム)が、有意なAZCグループであるか、又は、AZCグループでないかのいずれかである各グループ内の個々のサンプルの有意性を発見するために復号され、
c.上記第2のビット・ストリーム(VLCビット・ストリーム)の復号はまた、指数予測子のセットに加えられると、グループ内の各有意なサンプルの大きさ指数の上限を与える、各有意なグループの符号なし残差値を発見するためにも使用され、
d.第3のビット・ストリーム(MagSgnビット・ストリーム)は、対応する指数境界を所与として、各有意なサンプルの値を推測するために使用される符号ビット及び任意の追加の大きさビットを発見するためにアンパックされ、
e.上記指数予測子は、ブロック内の先行するサンプルがブロックの境界の外部にある場合を除いて、ブロック内の先行して復号されているサンプルと関連付けられる指数境界と追加の大きさビットの両方を使用して計算される、
方法を提供する。
1.HTJ2Kブロック符号化アルゴリズムが、J2K−1ブロック・ビット・ストリームへの/からの可逆的コード変換をサポートするものとする。
2.HTJ2Kを介してJPEG2000に導入される技術の影響は、コード・ブロック・ビット・ストリームの符号化及び復号のみに限定されるものとし、新たな符号化スタイルの存在をシグナリングするためのコード・ストリーム/タイル部分ヘッダ・マーカに必要とされる必然的な変化以外の、パケット・ヘッダ構文を含むコード・ストリーム構文に影響を及ぼさない。
3.HTJ2Kブロック復号器は、平均して、コード変換されたコンテンツ及びHTJ2Kを使用して直接的に符号化されたコンテンツを含む、実際の適用において重要である範囲の条件にわたって一般的な商用Kakadu(商標)ツールキット(脚注1)内でのJ2K−1ブロック復号器実施態様よりも少なくとも10倍高速であるものとする。
4.HTJ2Kブロック符号化器は、平均して、実際の適用において重要である範囲の条件にわたって、Kakadu(商標)内でのJ2K−1ブロック符号化器実施態様よりも少なくとも10倍高速であるものとする。
5.HTJ2Kブロック符号化アルゴリズムの符号化効率は、平均して、実際の適用において重要である範囲の条件にわたって、J2K−1ブロック符号化アルゴリズムよりも15%を超えて不良ではないものとする。
ほとんどのモバイル・デバイスは、J2K−1ブロック符号化アルゴリズムが使用される場合、それらの画像センサが生成することが可能である高解像度ビデオ・ストリームを直接的に圧縮するのに十分なCPU能力を有しない。FASTブロック符号化オプションは、圧縮ストリームがリアルタイムで生成されることを可能にし、例えば、JPIPを介した効率的な対話的閲覧のために、品質スケーラビリティ属性が重要である場合に、後にJ2K−1表現にコード変換されることを可能にすることによって、この問題に対処する。コード変換は、任意の2つの圧縮フォーマットの間で可能であるが、本明細書において記載されているFBCOTアルゴリズムの利点は、以下のとおりである。
a)コード変換は、変換された領域において行うことができる。
b)コード変換は、たとえ圧縮自体が損失を伴うものであったとしても、本質的に損失を伴わない。
c)コード変換は必要に応じて選択的に、コード・ブロック単位にさえ行うことができる。
JPEG2000の多くの用途において、コンテンツは複数回レンダリングされる。例えば、大きい画像は、連続的にレンダリングされるビューが一般的に多くのコード・ブロックを含むような解像度又は関心領域によって対話的に閲覧される。完全に解凍されたコード・ブロックをメモリ内にキャッシュすることはほとんど実際的ではなく、FASTブロック符号化オプションが利用可能であるということは、インテリジェントなコンテンツ・キャッシュが、繰り返しアクセスされているコード・ブロックを、より迅速に又はより少ないエネルギー消費で復号することができる表現にコード変換することを選択することができることを意味する。本明細書において記載されているアルゴリズムの利点は、J2K−1ブロック・ビット・ストリームからFASTブロック・ビット・ストリームへのコード変換が、計算効率的であるとともに、全体的に損失がなく、元のJPEG2000表現のすべての態様が正確に保持されることである。
JPEG2000は、送達点に近い関心解像度(又はさらには領域)が効率的に抽出されることを可能にする、ビデオ・コンテンツの中間配布フォーマットとしての優れた枠組みを提供し、これを受けて、ビデオ・コンテンツは、いくつかの一般的なストリーミング・ビデオ・フォーマットのうちのいずれかにコード変換することができる。この使用はすでに実行可能であり、他の手法よりも好都合である可能性があるが、そのような適用は、すべての他の関連機能を保持する、軽量ブロック・コーダが利用可能であることから、さらに受益することができる。
IS15444−1に記載されているものとしてのJ2K−1ブロック・コーダは、一連のコーディング・パスを通じて各コード・ブロック内のサブバンド・サンプルを処理する。次の節において、FASTブロック符号化アルゴリズムの異なる、しかしなお関連するコーディング・パス構造を説明するために、これを簡潔に見直すことが有用である。
ここで、Δは、可逆的符号化手順については存在しない、量子化ステップ・サイズである。
P=K−Mstart
Cleanup(p=P−1):すべてのサンプルの、ビットプレーンp内の有意性+有意サンプルの符号を符号化する。
SigProp(p=P−2):プレーンp内の、既知の有意サンプルの、それらの有意性(及び符号)を符号化する、非有意隣接サンプルを訪問する。
MagRef(p=P−2):Mp[n]の最下位ビットを符号化する、プレーンp+1に関してすでに有意であったサンプルを訪問する。
Cleanup(p=P−2):有意性がまだ確立されていなかったすべてのサンプルの、ビットプレーンp内の有意性(及び符号)を符号化する。
SigProp(p=P−3):…
MagRef(p=P−3):…
Cleanup(p=P−3):…
…
Cleanup(p=0):…
コーディング・パス構造
FASTブロック・コーダも、ビットプレーンpに対して定義されるCleanup、SigProp及びMagRefコーディング・パスを有するコーディング・パス構造を採用する。しかしながら、重要なことに、各ビットプレーンpと関連付けられるCleanupパスは、Mp[n]≠0であるサンプルの大きさMp[n]及び符号を完全に符号化する。この情報は、それらのコード・ストリームへの放出における点が存在しないように、すべての先行する(pがより大きい)コーディング・パスと関連付けられるものを完全に包含する。
1.J2K−1ブロック・コーダがビッグ・エンディアン・ビット・パック順序を使用する一方で、コード・ビットはここでもリトル・エンディアン・ビット順序で未処理のビット・ストリームのバイトにパックされる。
2.J2K−1ブロック・コーダが同じサンプルの大きさビットの直後に任意の必要な符号ビットを挿入する一方で、1つ又は複数のストライプ列と関連付けられる有意性ビットが最初に放出され、続いて、関連する符号ビットが放出され、その後、次のストライプ列セットに進む。
本明細書の大部分は、FASTブロック・コーダのCleanupパスの説明に割かれる。エラー!引用元が見当たりません。図2及び図3は、エラー!引用元が見当たりません。それぞれ符号化及び復号プロセスの要約ブロック図を提供する。
有意性値、指数値、Implicit−1(暗黙1)値及びMagSgn値
FAST Cleanupアルゴリズムを理解するために、関与する重要な量の定義を与えることから始める。すでに言及したように、Cleanupパスは、特定のビットプレーンpと関連付けられ、サンプルX[n]の大きさは、以下のように理解され、
サンプルは、Mp[n]≠0である場合に、有意であると考えられる。サンプルの大きさ指数Ep[n]は、本明細書においては以下のように定義される。
式中、
は自然数の集合である。表1は、サンプル大きさMpと指数Epとの間の関係の詳細な精緻化を可能にする。JPEG2000規格ファミリがサポートするサブバンド・サンプルの大きさは237まで(ただし、この値を含まない)であり、そのため、指数が38を超える必要はないことに留意されたい。
Up[n]≧Ep[n]
vp[n]のUp[n]個のLSBは、特に、各有意サンプルの符号及び大きさの完全な記述を提供する。しかしながら、境界が密であり(すなわち、Up[n]=Ep[n])、Ep[n]>1であることを復号器が知ることができる場合、vp[n]のUp[n]個のLSBの間での最上位ビットは黙示的に1であることが分かるため、vp[n]のUp[n]−1個のLSBのみを放出することで十分である。
mp[n]=Up[n]−ip[n]
1.コード・ブロック内のサブバンド・サンプルは、2×2グループg内で処理され、それらの各々が、当該グループ内の各サンプルの有意性を示す4ビット有意性パターンρgを割り当てられる。
2.有意性パターンは、適応的MELCODE及び非適応的VLCコードのセットの、2つの異なる技法の組合せを使用して符号化される。
3.指数境界Unは、2×2グループ内のすべてのサンプルに共通である「符号なし予測残差」ugを介して符号化され、その結果、グループg内のすべての位置nについてUn=fpred(κn,ug)となり、fpred()は、ほぼ常にκn+ugを返す固定関数である。
4.予測子κnは、それ自体はコード・ブロック内の先行するサンプルのMagSgn値に依存する、特定の先行して符号化されているサンプルの大きさ指数から導出される。
5.あるグループの有意性パターンρg及び符号なし予測残差ugは、そのうちの一方(CxtVLCコード)が隣接有意性コンテクストcgに依存して、テーブル検索手法に最良に適し、一方で他方(U−VLCコード)が必要な場合に直接的な計算に適している、2つのサブコードを伴うVLC符号化方式を使用してともに符号化される。
6.2×2グループの対のVLCコード・ビットは、所望される場合に4サンプル・グループが個々に符号化又は復号されることを可能にしながら、一度に8個のサンプルをともに符号化又は復号することを容易にするように、インターリーブされる。
言及したように、JPEG2000コード・ストリーム構造との互換性のために、FASTブロック・コーダのCleanupパスは、その長さが既存の方法を使用して関連パケット・ヘッダについて通信される、単一の符号語セグメントを生成する。しかしながら、FASTブロック・コーダにおいては、この符号語セグメントは、ビット・スタッフィングすること、及び、以下の3つのビット・ストリームからのビットをパックすることによって導出される、3つのバイト・ストリームに分割する。
A.そのパックされたバイトが符号語セグメントの始まりから前方に成長するMagSgnビット・ストリーム、
B.そのパックされたバイトが符号語セグメントの終わりから後方に成長するVLCビット・ストリーム、及び
C.そのパックされたバイトがMagSgnバイト・ストリームの終わりから前方に成長するMELビット・ストリーム。
MagSgnビット・ストリームからのビットは、リトル・エンディアン順序でMagSgnビット・ストリームのバイトにパックされ、その結果、MagSgnビット・ストリームからの最初のビットが、MagSgnバイト・ストリームからの最初のバイトのLSB(ビット0)に現れる。バイトが一杯になると、バイトの値がFFhである場合、次のバイトのMSB(ビット7)が、値0を有するスタッフィング・ビットになり、その結果、バイトは利用可能なビットを7ビットしか有せず、7Fhの値を超えることができない。これは、連続するバイトからなるいずれの対も、FF80h〜FFFFhの範囲内の16ビットのビッグ・エンディアン符号なし整数を形成することができず、MagSgnビット・ストリームからパックされる15ビットごとに導入されるスタッフィング・ビットが最大で1であることを意味する。
FAST Cleanupパスの符号語セグメントの長さLは常に、関連付けられるJPEG2000パケット・ヘッダ内で通信される。MELバイト・ストリーム及びVLCバイト・ストリームを含むこの符号語セグメントの部分は、Sバイトから成る符号語サフィックスとして識別される。L−Sが、符号語セグメントの前方に成長するMagSgnバイト・ストリーム部分とMELバイト・ストリーム部分との間のインターフェースを識別するため、Sの値は、インターフェース・ロケータ語(ILW)として確保されている12ビット内で符号化される。
S=BL−1+(BL−2&0Fh)×255
式中、BL−1は符号語セグメント内の最後のバイトであり、BL−2は最後から2番目のバイトであり、(BL−2&0Fh)は、BL−2の4つのLSBを分離する。この表現において、BL−1FFhに等しくないものとする。
に決して違反しない必要があり、そのため、BL−2の4つのLSBは、すべて1になることができないことを示すことができる。これを念頭に置いて、Sの符号化を単純化するとともに、スタッフィング・ビットが符号語セグメントの最後から2番目のバイト(VLCバイト・ストリームの第2のバイト)に出現する可能性を確定的に回避するように、最終的な規格のために本発明において使用されるILW符号化ポリシを改善することができる。これを行うために、Sの12ビット表現の8つのMSBを変更せずにBL−1にパックし、これによって、Sの4つのLSBも、変更せずにBL−2にパックすることができる。このとき、BL−1は8Fhを超えないはずであり、その結果、スタッフィング・ビットはBL−2内にある必要はなく、VLCバイト・ストリームからのVLCビットのアンパック中に12個すべてのILWビットを0に置き換えることが安全である。これは、元のアルゴリズムに対する望ましい変更である。
前方に成長するMELバイト・ストリームと逆方向に成長するVLCバイト・ストリームとの間の境界は、明示的にシグナリングされない。復号器は、ビットをアンパックするときにMELバイト・ストリームとVLCバイト・ストリームの両方に属するように、FAST Cleanup符号語セグメントのS個すべてのサフィックス・バイトを考慮すべきである。これは、サフィックスからのいくつかのビットが両方のビット・ストリームにアンパックされ得ることを意味する。
高さW及び幅Hのコード・ブロックからのサンプルが、2×2グループに編成され、図5に認められるライン・インターリーブ様式で処理される。すべての2×2グループが4つのサンプルを走査パターンに確実に与えるように、幅が奇数であるコード・ブロックの右に追加の列が実効的に挿入され、高さが奇数であるコード・ブロックの下に追加の行が挿入されることに留意されたい。この付け足しは、FAST Cleanupコーディング・パスのみにおいて適用され、他のコーディング・パスには影響を与えない。付け足された位置と関連付けられるサンプル値は符号化されるが、すべて非有意、すなわち、Mp=0であるべきである。
各グループgは、グループ内の任意のサンプルが有意である場合は1であり、そうでなければ0である2進有意性状態σgを有する。加えて、グループgは、0〜15の範囲内の4ビットの有意性パターンρgを有し、その各ビット(走査順序においてLSB〜MSB)は、グループ内の対応するサンプルが有意である場合は1である。明らかに、σg=0⇔ρg=0である。
cg=0であるグループgは、全ゼロ・コンテクスト(AZC:All−Zero−Context)状態にあると言われる。実際、これらは、因果関係のある隣接グループがすべて非有意であるグループであり、このことがAZCという用語を説明している。適応的符号化は、AZCグループの有意性σgを符号化するためにのみ利用される。具体的には、シーケンス内の各AZCグループと関連付けられる2値シンボルσgは、連結されて、MELビット・ストリーム内で符号化される、可変長2進列σAZC[i]を形成する。このAZCシンボル列の符号化及び復号は、任意の他の符号化又は復号ステップと同期される必要はない。
と関連付けられる。表2は、重要な量の値を列挙している。
R≧Tである間、1(「ヒット」)を放出し、RからTを減算する
0(「ミス」)を放出し、その後、RのE個のLSBを放出する
完全なMEL符号化アルゴリズムは、以下のとおりである。
k=0に初期化する
for 各j=0,1,…
RをRAZC[j]に設定する
while R≧TMEL[k]
「1」(「ヒット」)を放出する
RをR−TMEL[k]に更新する
kをmin{k+1,12}に更新する
「0」(「ミス」)を放出する
RのEMEL[k]個のLSBを放出する
kをmax{k−1,0}に更新する
非AZCグループ、及び、有意である(すなわち、σg=1)AZCグループについて、個々の2×2グループに対して動作する可変長コードを使用して、有意性パターンρgが、他の情報とともに符号化される。本明細書においてはCxtVLCコード及びU−VLCコードとして識別される、2つのタイプのコードが利用される。結果もたらされるコード・ビットは、後に説明するようにグループ対単位でインターリーブされ、FASTブロック・コーダのVLCビット・ストリームを形成する。
をともに表すために使用されるCxtVLCコードのみに関する。これらの
値の正確な意味は、本明細書において後に与えられる。
最初のものでないグループ行:
最初のグループ行:
最初のグループ行(代替形態):
最初のものでないグループ行(コード・ブロックの最初のものでないライン対)に見出されるグループについて、CxtVLC符号語は、最大7ビットの長さを有する。8つの別個のコンテクストcgが存在し、それらの各々は、4ビットの有意性パターンρg及び2進
値の有効な組合せに対応する、最大31個の異なる符号語を有する。グループ全体が非有意である場合、
の値は、復号器にとって何の意味もなく、ここで説明を目的として0であるものとして解釈され、そのため、組合せ
は有効でない。コンテクストcg=0は、その全体的な有意性がMELビット・ストリーム内で符号化されるAZCグループに対応し、その結果、
が0又は1に等しい非ゼロρgパターンに対応する30個のみの有効な符号語が存在する。
組合せについて符号化されている情報を拡張する機会が存在する。bgが、対応する境界Unによって決定されるような、グループg内の各サンプルの最上位の大きさビットをキャプチャする4ビット語(ビットパターン)を示すものとする。すなわち、4ビットのパターン語bg及びρg内のビットjに対応するサンプルの位置をnjと表現すると、bgのビットjは、ρgのビットjが0でない限り、
のビット
であり、これは、
が0であることを意味し、この場合、bgのビットjは0である。bgをグループgの「msbパターン」として識別する。本明細書において後に説明するように、
且つ
であるときはいつでも、msbパターンは明示的な通信なしで復号器によって推測されることができず、そのため、グループ内の各有意サンプルのmsbパターン・ビットは通常、MagSgnビット・ストリームに含まれる。しかしながら、代わりに拡張されたCxtVLCコード内のこれらのビットの内の1つ又は複数を符号化する機会が存在する。VLC復号複雑度はほぼ全体的に、最大符号語長によって駆動され、そのため、基礎となる確率が、表現を効率的にするために7ビットよりも長い符号語を必要とすることなくmsbパターン符号化によって導入される追加のダイバーシティに対応するのに十分に大きい、一部の符号語のmsbパターン情報のみを提供する。その上、一般的に、msbパターン情報の一部のみが、CxtVLC内で符号化される。
対を、部分的msbパターン
、及び、
内のいずれのビット位置が、
であるときはいつでも0である有効なmsbパターン情報φgを含むことを示す有効性マスクφgとともに識別する。
の対応するビットに設定されることを除いて、実質的に変更されないままである。これは、VLC復号プロセスを大幅に改変することなく、又は、MagSgnパック/アンパック・プロセスを変更することなく、msbパターン・データのCxtVLCに基づく符号化と関連付けられる(穏当な(脚注3))符号化効率改善を得ることができることを意味する。CxtVLC符号化は、この変形形態の下ではいくらかより複雑になると予測され得るが、特にCxtVLC検索待ち時間が符号化器スループットに(復号器スループットとは異なり)にほぼ影響を与えないことに留意すると、管理可能なサイズのルックアップ・テーブルによって達成することができる。この変更の、ソフトウェア・スループットに対する主な影響は、各サンプルのmn及びin値の計算の複雑度が増大することである。しかしながら、これは、符号化器と復号器の両方において全体的にベクトル化可能である。
の最後のビットの数を示す2ビット値に置き換えることによって、いくらか単純化することができる。
のすべてのビットが無効である場合を明示的に通信する必要はないことに留意されたい。これは、φg=0及び
などの、他の様態では不可能な組合せによってこれを容易に識別することができるためであり、これは、すべてのmsbパターン・ビットが0に等しいことを意味し、これは、
である場合には不可能である。さらにより単純な変形形態は、
と関連付けられる情報を、0であることが分かっているbgの最初のエントリの数を識別するただ単一の2ビット量に低減することを含む。
である場合、正確にbgは0になり得ないため、ゼロの数がグループ内の有意サンプルの数よりも1少ない場合はいつでも、復号器は、そのような0に後続するimplicit−1を推測することができることが留意される。
グループの最初の行について、指数境界の符号化も、これらのグループについては異なるため、ここで
値を符号化することはしない。この場合、8個のコンテクスト・ラベルの各々について最大16個の有効な符号語が存在し、符号語長は表4に記録されている。
値を含む、グループの最初の行の符号化テーブルが採用され得る。これは、下記の「最初のグループ行内で利用される符号化技法」の節に見られる注記においてさらに論じる。
for 各w=0,1,…,W−1
for 各i=0,1,…,w−1
IF (lw<lidx[i])又は((lw=lidx[i])且つ(i mod 2≠0))
idx[i]エントリi〜w−1を位置i+1〜wに移動させる
iを進めることなくループを脱出する
idx[i]=wを割り当てる
この節は、排他的に、最初のものでないグループ行の大きさ指数境界の符号化に関する。コード・ブロック内のグループの最初の行に属するサンプルは、後述するように、いくらか別様に処理される。
、
、
及び
を
、
、
及び
から形成することである。利用される割り当ては単純に以下のとおりである。
式中、グループgが2つ以上の有意サンプルを有する場合、γgは1に等しく、そうでない場合は0である。γg値は、「複数有意性」マスクとして解釈することができる。
κn=max{Pn,1}−Zg
式中、Zgは、グループ内のすべての有意サンプルが2以上の推定指数を有する場合は1であり、そうでなければ0である、位置nが属するグループgの予測オフセットである。オフセットZgは実効的に、ugが−1程度と小さい予測残差を表すことを可能にし、これは形式的に以下のように書くことができる。
一方、U−VLCコードは、
が1であるときの実際のug値を表す。
この厳しい制約は、精度が限定された(例えば、最大32ビット/サンプル)サブバンド・サンプルのみをサポートする復号器実施態様が、上記に記した特別な条件ug=36を試験及び処理する必要性を回避することができることを保証する。これはまた、グループgが1つのみの有意サンプルを有する場合に、そのサンプルの指数境界Unが、ug>0且つug>36であるときはいつでも、Enに等しくなることも保証する。これによって、以下のように、グループgに属する位置nにあるサンプルについてimplicit−1ビットを割り当てることが可能になる。
すなわち、位置nにあるサンプルがそのグループg内の唯一の有意サンプルであり(すなわち、γg=0)、
且つugが36のエスケープ値に等しくない場合はいつでも、復号器はMagSgnビット・ストリームにパックされるMagSgn値vnのmn個のLSBを直ちに超えるimplicit−1の存在を推測することができる。
を離れる推定指数割り当ての結果として、同じグループ内のすべてのサンプルについて同じ値をとる。したがって、各グループは、実際には1つの指数予測子
のみを有し、そのため、UnはσnUgと書くことができ、inはσnigと書くことができ、ここで、
であり、符号化器は、以下を選択する必要がある。
ここで、基線Bgは以下に従って更新される。
値は最初のグループ行内のCxtVLCの一部として符号化されず、そのため、U−VLCは、すべての有意グループの空でない符号語を含む。
変数を含め、表5のU−VLCコードを採用して、最初のものでないグループ行のものと正確に同じ方法を使用することである。
である非AZCグループについて2進シンボル
を含めることによって増強される。その後、表5のU−VLCコードは、
を符号化するために使用され、ここで、Tは正の整数の定数である。符号化器は、u’g≧1を離れる場合にのみ、
を選択する。結果として、
である場合、ugの値は必ず1〜Tの範囲内にあり、これによって、U−VLCコードが切り捨てされることが可能である。
であるときの切り捨てされたU−VLCコードは単一の2進数まで縮小するため、値T=2が特に関心を持たれる。この変更は、MEL符号化シンボル・ストリームsMEL[i]がグループあたり最大1つの2進シンボルを保持するという有意義な特性と干渉せず、最初のグループ行及び最初のものでないグループ行内で利用される符号化方法を調和させる助けとなる。低ビットレートにおいて、又は、低アクティビティにおいて、σAZCと
の両方のコード・ブロックは、結果0に向かって大きく歪曲された確率分布を呈するはずであり、これは、適応的MEL符号化手順を使用して効率的に符号化することができる。
及び
が両方とも1に等しいときはいつでも、CxtVLCビット及びU−VLCビットが下記に説明するようにインターリーブされる、グループg1=2g及びg2=2g+1から成るグループ対に対して単一の非AZC MEL符号化2進シンボル
を導入する。シンボル
は、
と
の両方が、好ましい値がここでもT=2である定数Tよりも大きい場合は1であり、そうでない場合、
である。
であるとき、U−VLCコードは、
及び
に適用され、そうでなく、
であるが、
である場合、U−VLCコードは、
、及び、
にならない限り、その後また
に適用され、この場合、
は切り捨てされたU−VLCコードを使用する。ここでも、T=2の場合、切り捨てされたU−VLCコードは、値
を符号化する単一の2進数に縮小する。変形形態6のこの変更は平均して符号化効率がわずかに劣るが、変形形態6よりも低い複雑度及び高いスループットで実施することができることが分かる。変形形態6にまさるこの変形形態の1つの利点は、グループがAZCグループであるか否かに関する依存性を導入する必要がないことである。代わりに、
シンボルの存在、及び、各クワッドの符号なし残差値の符号化に関するその実施態様は、効率的な対単位のU−VLC符号化及び復号実施態様にすでに含まれている
及び
のみに依存する。
がより一般的であるため、符号化効率における利益は大きくなると予測することができる。
VLCビット・ストリームは、グループ対単位でインターリーブされる、CxtVLCコード及びU−VLCコードからのビットから構成される。グループ行あたり奇数の2×2グループを有するコード・ブロックについて、各グループ行は、CxtVLC符号語又はAZCシンボルを有せず、常に非有意であり、その結果、U−VLC符号語も有しない追加の2×2グループによってパディングされる。このように、各グループ行は、左から右へと、整数のグループ対に分割される。
MagSgnビット・ストリームは、図5に示す走査順序に従って、各サンプルのMagSgn値vnからのmn個のLSBを連結することによって形成され、ここで、
mn=Un−in
vn=χn+2(Mn−1)
であり、χnはサンプルの符号ビットであり、サンプルが負である場合は1であり、それ以外の場合は0である。非有意である、すなわち、σn=0であるサンプルについて、Un、in及びmnはすべてゼロであり、そのため、非有意サンプルは、MagSgnビット・ストリームに寄与しないことに留意されたい。すべての有意サンプルは、MagSgnビット・ストリームに少なくとも1ビット寄与する。
を追加して符号化MagSgn値vnを復元し、そこから大きさMn=Mp[n]符号χn=χ[n]が得られる。復号器は、一般的に、2×2グループの次の行内のサンプルについて指数予測子κnを形成するために、復号された大きさMnから大きさ指数Enのうちの少なくともいくつかを再構築する必要が有り、その結果、mn値をそれらのサンプルについて推測することができる。
FAST MagRefコーディング・パスは、未処理の精度改善ビットがビッグ・エンディアン順序とは対照的にリトル・エンディアン順序においてバイトにパックされることを除いて、BYPASSモードが使用されるときのJ2K−1アルゴリズムの精度改善パスと同一である。
rp[n]=(Mp−1[n] mod 2)∈{0,1}
の値を提供する。
FAST SigPropコーディング・パスは、有意性ビット及び符号ビットが再配置されビッグ・エンディアン順序とは対照的にリトル・エンディアン順序においてバイトにパックされることを除いて、BYPASSモードが使用されるときのJ2K−1アルゴリズムの有意性伝播パスと同じである。
rp[n]=(Mp−1[n] mod 2)∈{0,1}
を符号化し、その結果、
となり、
は2進SigProp成員変数(binary SigProp membership variable)であり、これは以下から計算される。
は、4ライン・ストライプ配向走査パターン内で位置nに先行する隣接位置のみを含むことを除いて、Nnと同様である隣接位置である。
である位置)からのrp[n]ビットが、新たに有意になる成員(
であるもの)と関連付けられる符号ビットを放出する前に、SigPropビット・ストリームに放出される。すなわち、大きさビットrp[n]及び符号ビットは、各4ライン・ストライプ内で列単位でインターリーブされる。対照的に、J2K−1有意性伝播パスは、大きさ及び符号ビットをサンプル単位でインターリーブする。
この節は、FASTブロック・コーダの導入をサポートするために必要とされる、IS15444−1に記載されているコード・ストリーム構文に対する変更の小さいセットを説明する。これらの変更の背後にある原理の一部は強調するに値する。
1.JPEG2000規格ファミリにわたって、J2K−1ブロック・コーダの当座の代替としてFASTブロック・コーダを使用することが可能である。
2.量子化画像サンプルに関する情報を一切失うことなく、J2K−1に基づくコード・ストリームを、FASTブロック・コーダを使用するものにコード変換することが可能である。この特性は本質的に、J2K−1アルゴリズム内で対応するものと正確に同じ情報を符号化するFAST SigPropコーディング・パス及びMagRefコーディング・パスを提供することによってすでに付与される。
3.たとえFASTブロック・コーダ自体が高度にスケーリング可能でない場合であっても、各コード・ブロックと関連付けられる層境界に関するすべての情報も保持しながら、複数の品質層を有するJ2K−1に基づくコード・ストリームを、FASTブロック・コーダを使用するものにコード変換することが可能であり、その結果、元の精細に埋め込まれた表現にコード変換し戻すことを、情報を一切損失することなく行うことができる。
4.FASTブロック符号化アルゴリズムの使用を識別するために新たなシグナリング方法が導入される必要がある範囲までを除いて、JPEG2000コード・ストリーム構文、又はJPEG2000パケットの構造に変更が行われない。
IS15444−1の付属書Bに記載されているように、コード・ブロックは区域に編成され、各区域は、品質層ごとに1つの、パケットのシーケンによって表される。各パケットは、区域の各コード・ブロックによってそのパケットに行われる寄与を識別するヘッダと、区域のコード・ブロックからの関連する符号化バイトを保持する本体とを有する。パケット・ヘッダは、コーディング・パスの数及び寄与する各コード・ブロックの関連する符号化長情報とともに、寄与を行う各コード・ブロックの最初の失われている最上位の大きさビットプレーンの数を識別する。
p=K−Mstart−Z−1
式中、Kはサブバンドと関連付けられる大きさビットプレーンの最大数であり、Mstartは、コード・ブロックの最初の寄与を識別するパケット・ヘッダ内でシグナリングされるような、失われているMSBの数であり、Zは、非ゼロ長を有する最初の寄与の前に識別されるコーディング・パスの空のトリプレットの数である。
参考:他のコード・ブロックはJ2K−1アルゴリズムを使用して符号化される一方で、FASTブロック符号化アルゴリズムを使用してタイル構成要素のいくつかのコード・ブロックを符号化することが有用であり得る。これは、コード・ブロックが1つの表現から別の表現へとオンデマンドに(例えば、映像の一部分を表示又は通信するために必要とされるときに)コード変換され、その結果、他のコード・ブロックがコード変換されていない一方で、いくつかのコード・ブロックがコード変換されている用途において必要になり得る。
FASTブロック・コーダを使用するコード・ストリームは、メイン・ヘッダ内に、パート15機能への依存を広告するCAPマーカ・セグメントを含む。FASTブロック・コーダが所与のタイル構成要素に属するコード・ブロック内で使用される場合、FASTモード・フラグ(コード・ブロック・スタイル・フィールドのビット7)が、関連COD又はCOCマーカ内で(1に等しく)設定される。
本発明においては、以下のように、CAPマーカ・セグメント内でパート15機能語の3つのビット・フラグを定義することを提案する。
「空のパス(Empty Passes)」フラグは、コード・ストリームがFAST Cleanupパスの前にZ>0個の空のコーディング・パスを含み得ることを示す。このフラグが設定されない(すなわち、0)場合、FASTブロック符号化アルゴリズムを使用する任意のコード・ブロックからの最初のパケット寄与はFAST Cleanupパスである。
「複数のFAST Cleanup(Multiple FAST Cleanup)」フラグは、コード・ストリームがコード・ブロックの2つ以上のFAST Cleanupパスを含み得ることを示す。このフラグが設定されない(すなわち、0)場合、最大1つのFAST Cleanupパスが、任意のコード・ブロックによって、その区域のパケットに寄与される。
「混合符号化」フラグは、上述したように示される、2つ以上のタイプの符号化技術が、コード・ブロックについて可能であり得ることを示す。このフラグが設定されない(すなわち、0)場合、そのCOD/COCマーカ・セグメントがFASTモード・フラグ(コード・ブロック・スタイル・フィールドのビット7)を設定されているすべてのコード・ブロックが、FASTブロック符号化アルゴリズムを使用して復号され、SXcodフィールドは存在しないか、又は、その「混合符号化」モード・フラグが0になる。
脚注
1 http://www.kakadusoftware.com−比較は、50%だけより高速であり得るKakaduスピードパック・エディションとは対照的に、通常のKakadu配布に関する。
2 実際には、JPEG2000の未処理の符号語セグメントにおけるビット・スタッフィングによって、ビッグ・エンディアン16進値がFF80h〜FFFFhの範囲内にあるバイト対の出現が回避されるが、ブロック符号化アルゴリズムは一般に、FF90h〜FFFFhの範囲直野マーカ・コードを回避するためにのみ必要とされる。
3 初期実験は、この変形形態からもたらされる符号化効率の典型的な改善が1.5%を超える確率は低いことを示唆している。
4 グループ内の非有意サンプルの予測子は同じように形成することができるが、符号化又は復号プロセスには影響を及ぼさない。
5 「空の」とは、本明細書においては、CxtVLC符号語が存在しない非有意AZCグループ、及び、各グループ行が整数のグループ対を有することを保証するための付け足しとして加えられるグループを指す。
Claims (46)
- 静止画像、ビデオ・フレーム、又は関連メディアから導出される、サブバンド・サンプル値のブロックを符号化するための方法であって、3つのビット・ストリームと、サンプルを前記ブロックから規定のグループへと分割することとを含み、
a.第1のビット・ストリーム(MELビット・ストリーム)が、因果関係のある隣接グループがすべて非有意であるグループ(AZCグループ)全体の有意性を符号化し、非ゼロの大きさを有するサンプルは有意であると識別され、ゼロの大きさを有するサンプルは非有意であると識別され、
b.第2のビット・ストリーム(VLCビット・ストリーム)が、有意なAZCグループであるか、又は、AZCグループでないかのいずれかである各グループ内の個々のサンプルの有意性を符号化し、
c.前記第2のビット・ストリーム(VLCビット・ストリーム)はまた、指数予測子のセットに加えられると、前記グループ内の各有意なサンプルの大きさ指数の上限を与える、各有意なグループの符号なし残差値も符号化し、
d.第3のビット・ストリーム(MagSgnビット・ストリーム)が、対応する指数境界を所与として、有意なサンプル値を表すのに必要な符号ビット及び任意の追加の大きさビットを提供し、
e.前記指数予測子は、前記ブロック内の先行するサンプルが前記ブロックの前記境界の外部にある場合を除いて、前記ブロック内の前記先行するサンプルと関連付けられる指数境界と前記追加の大きさビットの両方を使用して計算される、方法。 - 前記MELビット・ストリームは、AZCグループと関連付けられるグループ有意性シンボルの列に適用される適応的ラン・レングス符号化プロセスによって形成される、請求項1に記載の方法。
- あるグループの前記因果関係のある隣接グループは、グループの最初の行を除いて、前記グループの左及びグループの同じ行内、又は、グループの先行する行内のいずれかに見出される、前記グループに隣接するサンプル位置に対応し、あるグループの前記因果関係のある隣接グループは、前記グループ内で直ぐ左に見出されるサンプル位置に対応し、前記ブロック内に含まれていない隣接グループは非有意であると解釈される、請求項1又は2に記載の方法。
- グループ内のすべてのサンプルの有意性(前記グループの有意性パターン)は、前記グループの因果関係のある隣接グループの有意性から形成されるコンテクスト・ラベルに基づいてともに符号化される、請求項1、2又は3に記載の方法。
- 前記有意性パターンの符号化は、前記コンテクスト・ラベルに依存する可変長コード(CxtVLCコード)の使用を含む、請求項4に記載の方法。
- 前記符号なし残差の符号化は、符号語がプレフィックス構成要素及びサフィックス構成要素から成る、可変長コード(U−VLCコード)を含み、前記サフィックスの長さは、前記サフィックスの値によって完全に決定される、請求項1から5までのいずれか一項に記載の方法。
- 符号なし残差オフセット値が、コンテクスト依存可変長コード(CxtVLCコード)を使用してグループの前記有意性パターンとともに符号化され、前記符号なし残差オフセットは、前記符号なし残差が非ゼロであるか否かを示し、前記U−VLCコードは、非ゼロである符号なし残差を符号化するためにのみ使用される、請求項5と6の両方に記載の方法。
- 前記CxtVLCコードは、符号語と関連付けられる前記符号なし残差オフセット値が非ゼロであるいくつかの有意サンプルの大きさビットを識別するように増強され、前記大きさビットはこのとき、前記MagSgnビット・ストリーム内に含まれない、請求項7に記載の方法。
- 前記指数予測子は、前記ブロックのグループの最初の行内を除き、グループの先行する行からのサンプルの値を使用して形成される、請求項1から8までのいずれか一項に記載の方法。
- グループは、前記ブロック内の連続する行から成る対の中の連続する列から成る対からの前記サンプルから構成される、2×2のサイズを有する、請求項1から9までのいずれか一項に記載の方法。
- 前記ブロックのグループの最初のものでない行内にあるグループ内のサンプルの前記指数予測子は、前記グループの直上にあるサンプルの行上に見出される、前記グループに隣接する4つのサンプルの前記大きさ指数の最大値から形成される、請求項10に記載の方法。
- グループ内の有意サンプルの前記指数予測子は、前記グループ内の唯一の有意サンプルである場合には強制的に1にされる、請求項1から11までのいずれか一項に記載の方法。
- 前記グループの最初の行において、MELシンボル・ストリームは、グループの集合の1つの追加の符号なし残差オフセット・シンボルを用いて増強され、集合の好ましいサイズは2つの連続するグループであり、該グループの有意性パターンとともに符号化される前記符号なし残差オフセット値がすべて非ゼロである場合にのみ、前記集合内のすべてのグループの前記符号なし残差が、U−VLCコードを前記グループの調整済みの符号なし残差に適用する前に、共通の追加の符号なし残差オフセット値に基づいて調整される、請求項7と併せた、請求項1から12までのいずれか一項に記載の方法。
- 前記CxtVLCコード・ビット及び前記U−VLCコード・ビットは、グループの規定の集合にわたってインターリーブされ、その結果、前記集合内のすべてのグループの前記CxtVLCビットは、同じグループの前記U−VLCコード・ビットの前に現れ、集合内のすべてのグループのU−VLCプレフィックス・ビットは、同じグループの前記U−VLCサフィックス・ビットの前に現れ、前記グループの集合は好ましくは、水平方向に隣接するグループから成る対から構成される、請求項5及び6と併せた、請求項1から13までのいずれか一項に記載の方法。
- 前記Melビット・ストリーム、前記VLCビット・ストリーム、及び前記MagSgnビット・ストリームは各々、ビット・スタッフィング手順を受け、バイトにパックされて、MELバイト・ストリーム、VLCバイト・ストリーム、及びMagSgnバイト・ストリームを形成し、前記VLCバイト・ストリームは、ブロックを表す単一のバイト列(符号語セグメント)の終わりから後方に成長し、一方、前記MagSgnバイト・ストリームは、前記バイト列の始まりから前方に成長し、前記MELバイト・ストリームは、前記MagSgnバイト・ストリームの終わりから前方に成長し、その結果、前記MagSgnバイト・ストリームと前記MELバイト・ストリームとの間の前記境界のみが、前記バイト列にとともに明示的に与えられる必要がある、請求項1から14までのいずれか一項に記載の方法。
- 符号化される前記サンプル値は、所与の大きさビットプレーン(p値)と関連付けられる精度までの可能な切り捨ての後の、量子化サブバンド・サンプルに対応する、請求項1から15までのいずれか一項に記載の方法。
- 追加のコーディング・パス(SigPropパス)が、最初の大きさビットプレーン(p値)と関連付けられる精度において非有意(ゼロ)である特定のサンプルの、次に精細な大きさビットプレーンに対する大きさを符号化するために、及び、より精細な大きさビットプレーンに関して有意であるすべての前記サンプルの符号ビットも符号化するために使用され、前記ブロック・サンプルを通じてストライプ配向走査に従い、ストライプ列の規定の集合からSigPropビット・ストリームにすべての関連する大きさビットを放出し、その後、前記放出されている大きさビットに基づいて有意として識別される前記ストライプ列の集合内の前記サンプルの符号ビットを放出する、請求項16に記載の方法。
- 追加のコーディング・パス(MagRefパス)が、前記最初の大きさビットプレーン(p値)と関連付けられる精度において有意(非ゼロ)として符号化されるサンプルの、次に精細な大きさビットプレーンに対する最下位の大きさビットを符号化するために使用され、前記ブロック・サンプルを通じてストライプ配向走査に従い、MagRefビット・ストリームにすべての関連する大きさビットを放出する、請求項16又は17に記載の方法。
- 前記SigPropビット・ストリーム及び前記MagRefビット・ストリームは各々、ビット・スタッフィング手順を受け、SigPropバイト・ストリーム及びMagRefバイト・ストリームにパックされ、前記SigPropバイト・ストリームは精度改善コード・バイト列の始まりから前方に成長し、前記MagRefバイト・ストリームは精度改善コード・バイト列の終わりから後方に成長する、請求項17及び18に記載の方法。
- 静止画像、ビデオ・フレーム、又は関連メディアを生成する、サブバンド・サンプルのブロックを復号するための方法であって、前記サンプルは、規定のグループに構成されており、3つのビット・ストリームを使用して表され、
a.第1のビット・ストリーム(MELビット・ストリーム)が、因果関係のある隣接グループがすべて非有意であるグループ(AZCグループ)全体の有意性を発見するために復号され、非ゼロの大きさを有するサンプルは有意であると識別され、ゼロの大きさを有するサンプルは非有意であると識別され、
b.第2のビット・ストリーム(VLCビット・ストリーム)が、有意なAZCグループであるか、又は、AZCグループでないかのいずれかである各グループ内の個々のサンプルの有意性を発見するために復号され、
c.前記第2のビット・ストリーム(VLCビット・ストリーム)の復号はまた、指数予測子のセットに加えられると、前記グループ内の各有意なサンプルの大きさ指数の上限を与える、各有意なグループの符号なし残差値を発見するためにも使用され、
d.第3のビット・ストリーム(MagSgnビット・ストリーム)は、対応する指数境界を所与として、各有意なサンプルの値を推測するために使用される符号ビット及び任意の追加の大きさビットを発見するためにアンパックされ、
e.前記指数予測子は、前記ブロック内の先行するサンプルが前記ブロックの境界の外部にある場合を除いて、前記ブロック内の先行して復号されているサンプルと関連付けられる指数境界と追加の大きさビットの両方を使用して計算される、方法。 - 適応的ラン・レングス復号プロセスが、前記MELビット・ストリームを復号するために使用され、各AZCグループの有意性を識別するグループ有意性シンボルの列が生成される、請求項20に記載の方法。
- あるグループの前記因果関係のある隣接グループは、グループの最初の行を除いて、前記グループの左及びグループの同じ行内、又は、グループの先行する行内のいずれかに見出される、前記グループに隣接するサンプル位置に対応し、前記サンプルの有意性はすでに復号されており、あるグループの前記因果関係のある隣接グループは、前記グループ内で直ぐ左に見出されるサンプル位置に対応し、前記サンプルの有意性はすでに復号されており、前記ブロック内に含まれていない隣接グループは非有意であると解釈される、請求項20又は21に記載の方法。
- グループ内のすべてのサンプルの有意性(前記グループの有意性パターン)は、前記グループの因果関係のある隣接グループの有意性から形成されるコンテクスト・ラベルを使用してともに復号される、請求項20、21又は22に記載の方法。
- 前記有意性パターンの復号は、前記コンテクスト・ラベルに依存する可変長コード(CxtVLCコード)の復号を含む、請求項23に記載の方法。
- 前記符号なし残差の復号は、符号語がプレフィックス構成要素及びサフィックス構成要素から成る、可変長コード(U−VLCコード)の復号を含み、前記サフィックスの長さは、前記サフィックスの値によって完全に決定される、請求項20から24までのいずれか一項に記載の方法。
- 符号なし残差オフセット値が、コンテクスト依存可変長コード(CxtVLCコード)を復号するプロセスにおいてグループの前記有意性パターンとともに復号され、前記符号なし残差オフセットは、前記符号なし残差が非ゼロであるか否かを示し、前記グループのU−VLC符号語の復号は、前記符号なし残差オフセット値が非ゼロである場合にのみ実施され、前記実施を受けて、前記U−VLC復号結果が、前記符号なし残差オフセット値に加えられる、請求項24と25の両方に記載の方法。
- 前記復号されている符号なし残差オフセット値が非ゼロであるいくつかのコンテクスト依存可変長符号語(CxtVLCコード)を復号するプロセスにおいて、追加の大きさビットが、前記有意性パターン及び符号なし残差オフセット値とともにいくつかの有意係数について復号され、前記追加の大きさビットが、前記関連付けられるサンプル値を再構築するために、前記MagSgnビット・ストリームからのビットと組み合わされる、請求項26に記載の方法。
- 前記指数予測子は、前記ブロックのグループの最初の行内を除き、グループの先行する行からのサンプルの値を使用して形成され、前記サンプル値は以前に復号されている、請求項20から27までのいずれか一項に記載の方法。
- グループは、前記ブロック内の連続する行から成る対の中の連続する列から成る対からの前記サンプルから構成される、2×2のサイズを有する、請求項20から28までのいずれか一項に記載の方法。
- 前記ブロックのグループの最初のものでない行内にあるグループ内のサンプルの前記指数予測子は、前記グループの直上にあるサンプルの行上に見出される、前記グループに隣接する4つの位置にある前記大きさ指数の最大値から形成され、前記大きさ指数は、前記4つの位置にある先行して復号されているサンプル値から計算される、請求項29に記載の方法。
- グループ内の有意サンプルの前記指数予測子は、前記グループ内の唯一の有意サンプルである場合には強制的に1にされる、請求項20から30までのいずれか一項に記載の方法。
- 前記グループの最初の行について、前記増強されたMELシンボル・ストリームは、グループの集合の共通の追加の符号なし残差オフセット値を提供し、集合の好ましいサイズは2つの連続するグループであり、該グループの有意性パターンとともに復号される前記符号なし残差オフセット値がすべて非ゼロである場合にのみ、前記集合内のすべてのグループの前記符号なし残差が、前記グループの前記U−VLCコードの復号後に、前記共通の追加の符号なし残差オフセット値に基づいて調整される、請求項25と併せた、請求項20から31までのいずれか一項に記載の方法。
- グループの規定の集合と関連付けられる前記CxtVLCコード・ビットが、前記VLCビット・ストリーム内でともに見出され、その結果、前記グループの集合の前記CxtVLCコードは、最初に復号されなければならず、続いて前記集合内のすべてのグループのU−VLCプレフィックスが復号され、次いで、前記集合内のすべてのグループのU−VLCサフィックスが復号され、その後、復号は、グループの任意の後続の集合について進行することができ、前記グループの集合は好ましくは、水平方向に隣接するグループから成る対から構成される、請求項24及び25と併せた、請求項20から32までのいずれか一項に記載の方法。
- 前記Melビット・ストリーム、前記VLCビット・ストリーム、及び前記MagSgnビット・ストリームは各々、それぞれMELバイト・ストリーム、VLCバイト・ストリーム、及びMagSgnバイト・ストリームからのビットをアンパックし、ビット・スタッフィング手順を介して前記バイト・ストリームに導入されている場合があるスタッフィング・ビットを除去することによって復元され、前記VLCバイト・ストリームは、ブロックを表す単一のバイト列(符号語セグメント)の終わりから後方に成長し、一方、前記MagSgnバイト・ストリームは、前記バイト列の始まりから前方に成長し、前記MELバイト・ストリームは、前記MagSgnバイト・ストリームの終わりから前方に成長し、前記MagSgnバイト・ストリームと前記MELバイト・ストリームとの間の前記境界が、前記バイト列自体とともに明示的に識別される、請求項20から34までのいずれか一項に記載の方法。
- 復号される前記サンプル値は、所与の大きさビットプレーン(p値)と関連付けられる精度までの可能な切り捨ての後の、量子化サブバンド・サンプルに対応する、請求項20から34までのいずれか一項に記載の方法。
- 最初の大きさビットプレーン(p値)と関連付けられる精度において非有意(ゼロ)であるとして復号された特定のサンプルの、次に精細な大きさビットプレーンに対する大きさを発見するために、及び、より精細な大きさビットプレーンに関して有意であると見出されたすべての前記サンプルの符号ビットも復元するために、追加の復号パス(SigPropパス)が実施され、前記ブロック・サンプルを通じてストライプ配向走査に従い、SigPropビット・ストリームからのストライプ列の規定の集合のすべての関連する大きさビットを取り出し、その後、前記取り出されている大きさビットに基づいて有意として識別される前記ストライプ列の集合内の前記サンプルの符号ビットを取り出す、請求項35に記載の方法。
- 前記最初の大きさビットプレーン(p値)に関して有意としてすでに復号されているサンプルの、次に精細な大きさビットプレーンに対する最下位の大きさビットを発見するために、追加の復号パス(MagRefパス)が実施され、前記ブロック・サンプルを通じてストライプ配向走査に従い、MagRefビット・ストリームからすべての関連する大きさビットを取り出す、請求項35又は36に記載の方法。
- 前記SigPropビット・ストリーム及び前記MagRefビット・ストリームは、単一の制度改善コード・バイト列内で、それぞれ、前方に成長するSigPropバイト・ストリーム及び後方に成長するMagRefバイト・ストリームからのビットをアンパックし、ビット・スタッフィング手順を介して前記バイト・ストリームに導入されている場合があるスタッフィング・ビットを除去することによって復元される、請求項36及び37に記載の方法。
- サンプル値のブロックを符号化するための装置であって、請求項1から19までのいずれか一項に記載の方法を実施するように構成されている符号化装置を備える、装置。
- 請求項1から19までのいずれか一項に記載の方法を実施するようにコンピュータを制御するための命令を含む、コンピュータ・プログラム。
- 請求項40に記載のコンピュータ・プログラムを提供する、不揮発性コンピュータ可読媒体。
- 請求項40に記載のコンピュータ・プログラムを含む、データ信号。
- 請求項20から38までのいずれか一項に記載の方法を実施するように構成されている復号器装置を含む、サンプルのブロックを復号するための装置。
- 請求項20から38までのいずれか一項に記載の方法を実施するようにコンピュータを制御するための命令を含む、コンピュータ・プログラム。
- 請求項44に記載のコンピュータ・プログラムを提供する、不揮発性コンピュータ可読媒体。
- 請求項44に記載のコンピュータ・プログラムを含む、データ信号。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
AU2018901112A AU2018901112A0 (en) | 2018-04-04 | An Improved Method and Apparatus for Image Compression | |
AU2018901112 | 2018-04-04 | ||
AU2018901249A AU2018901249A0 (en) | 2018-04-13 | An Improved Method and Apparatus for Image Compression | |
AU2018901249 | 2018-04-13 | ||
AU2018901512A AU2018901512A0 (en) | 2018-05-03 | A Further Improved Method and Apparatus for Image Compression | |
AU2018901512 | 2018-05-03 | ||
PCT/AU2019/050299 WO2019191811A1 (en) | 2018-04-04 | 2019-04-04 | A further improved method and apparatus for image compression |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021520728A true JP2021520728A (ja) | 2021-08-19 |
JPWO2019191811A5 JPWO2019191811A5 (ja) | 2022-06-08 |
Family
ID=68099677
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020554294A Pending JP2021520728A (ja) | 2018-04-04 | 2019-04-04 | 画像圧縮のためのさらに改善された方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11265550B2 (ja) |
EP (1) | EP3777187A4 (ja) |
JP (1) | JP2021520728A (ja) |
AU (2) | AU2019247481B2 (ja) |
WO (1) | WO2019191811A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019191811A1 (en) | 2018-04-04 | 2019-10-10 | Kakadu R & D Pty Ltd | A further improved method and apparatus for image compression |
US11357020B2 (en) | 2020-02-06 | 2022-06-07 | International Business Machines Corporation | Connecting computer processing systems and transmitting data |
US11290575B2 (en) * | 2020-02-06 | 2022-03-29 | International Business Machines Corporation | Connecting computer processing systems and transmitting data |
US11405766B2 (en) | 2020-02-06 | 2022-08-02 | International Business Machines Corporation | Connecting computer processing systems and transmitting data |
CN113965761B (zh) * | 2021-10-22 | 2023-06-02 | 长安大学 | 基于gpu实现的htj2k图像压缩方法、装置及设备 |
CN116527904B (zh) * | 2023-07-03 | 2023-09-12 | 鹏城实验室 | 熵编码方法、熵解码方法及相关装置 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017201574A1 (en) * | 2016-05-23 | 2017-11-30 | Newsouth Innovations Pty Limited | A method and apparatus for image compression |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6678419B1 (en) * | 1999-03-26 | 2004-01-13 | Microsoft Corporation | Reordering wavelet coefficients for improved encoding |
JP4135617B2 (ja) * | 2003-09-08 | 2008-08-20 | ソニー株式会社 | 画像符号化装置及び方法 |
CA2807919C (en) * | 2012-08-31 | 2016-06-14 | Research In Motion Limited | Methods and devices for entropy coding in scalable video compression |
US9930348B2 (en) * | 2014-03-14 | 2018-03-27 | Qualcomm Incorporated | Coefficient level coding in a video coding process |
US10362310B2 (en) * | 2015-10-21 | 2019-07-23 | Qualcomm Incorporated | Entropy coding techniques for display stream compression (DSC) of non-4:4:4 chroma sub-sampling |
US10609367B2 (en) * | 2016-12-21 | 2020-03-31 | Qualcomm Incorporated | Low-complexity sign prediction for video coding |
WO2019191811A1 (en) | 2018-04-04 | 2019-10-10 | Kakadu R & D Pty Ltd | A further improved method and apparatus for image compression |
-
2019
- 2019-04-04 WO PCT/AU2019/050299 patent/WO2019191811A1/en active Application Filing
- 2019-04-04 JP JP2020554294A patent/JP2021520728A/ja active Pending
- 2019-04-04 US US17/044,637 patent/US11265550B2/en active Active
- 2019-04-04 AU AU2019247481A patent/AU2019247481B2/en active Active
- 2019-04-04 EP EP19781011.2A patent/EP3777187A4/en active Pending
-
2023
- 2023-10-05 AU AU2023241351A patent/AU2023241351A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017201574A1 (en) * | 2016-05-23 | 2017-11-30 | Newsouth Innovations Pty Limited | A method and apparatus for image compression |
Also Published As
Publication number | Publication date |
---|---|
US11265550B2 (en) | 2022-03-01 |
EP3777187A1 (en) | 2021-02-17 |
AU2023241351A1 (en) | 2023-10-26 |
US20210112250A1 (en) | 2021-04-15 |
EP3777187A4 (en) | 2021-12-22 |
WO2019191811A1 (en) | 2019-10-10 |
AU2019247481B2 (en) | 2023-07-06 |
AU2019247481A1 (en) | 2020-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2021520728A (ja) | 画像圧縮のためのさらに改善された方法及び装置 | |
JP7037554B2 (ja) | 画像を圧縮する方法および装置 | |
KR101955143B1 (ko) | 엔트로피 인코딩 및 디코딩 방식 | |
EP2614592B1 (en) | Entropy encoding and decoding scheme | |
AU2019356526B2 (en) | A method and apparatus for image compression |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220404 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220531 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230607 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230907 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20231107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231207 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240705 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240820 |