JP2016523476A - リサンプリングプロセスにおける中間データのダイナミックレンジ制御 - Google Patents
リサンプリングプロセスにおける中間データのダイナミックレンジ制御 Download PDFInfo
- Publication number
- JP2016523476A JP2016523476A JP2016517963A JP2016517963A JP2016523476A JP 2016523476 A JP2016523476 A JP 2016523476A JP 2016517963 A JP2016517963 A JP 2016517963A JP 2016517963 A JP2016517963 A JP 2016517963A JP 2016523476 A JP2016523476 A JP 2016523476A
- Authority
- JP
- Japan
- Prior art keywords
- intermediate output
- video
- bits
- video information
- bit depth
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 200
- 238000012952 Resampling Methods 0.000 title claims description 90
- 230000008569 process Effects 0.000 title description 80
- 230000004044 response Effects 0.000 claims description 5
- 238000005070 sampling Methods 0.000 claims description 5
- 239000010410 layer Substances 0.000 description 210
- 239000011229 interlayer Substances 0.000 description 55
- 239000000523 sample Substances 0.000 description 36
- 238000004891 communication Methods 0.000 description 32
- 239000013598 vector Substances 0.000 description 32
- 238000003860 storage Methods 0.000 description 28
- 230000005540 biological transmission Effects 0.000 description 24
- 238000013139 quantization Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 9
- 238000013500 data storage Methods 0.000 description 9
- 230000002123 temporal effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000005192 partition Methods 0.000 description 8
- 230000003044 adaptive effect Effects 0.000 description 6
- 238000000638 solvent extraction Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 5
- 241000023320 Luma <angiosperm> Species 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 4
- 239000002356 single layer Substances 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000012432 intermediate storage Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241000036569 Carp sprivivirus Species 0.000 description 1
- 108091026890 Coding region Proteins 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000006249 magnetic particle Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000005022 packaging material Substances 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000013074 reference sample Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
Abstract
Description
ビデオコーディング
[0018]ビデオコーディング規格は、ITU−T H.261、ISO/IEC MPEG−1 Visual、ITU−T H.262またはISO/IEC MPEG−2 Visual、ITU−T H.263、ISO/IEC MPEG−4 Visual、およびそれのスケーラブルビデオコーディング(SVC)拡張と、マルチビュービデオコーディング(MVC)拡張と、マルチビューコーディングプラス深度(MVC+D)と拡張とを含む、(ISO/IEC MPEG−4 AVCとしても知られる)ITU−T H.264を含む。以下、HEVC WD10と呼ばれる、最新のHEVCのドラフト仕様書が、http://phenix.int−evry.fr/jct/doc_end_user/documents/12_Geneva/wg11/JCTVC−L1003−v34.zipから入手可能である。HEVCへのマルチビュー拡張、すなわちMV−HEVCもまた、JCT−3Vによって開発されている。以下、MV−HEVC WD3の最新のワーキングドラフト(WD)が、http://phenix.it−sudparis.eu/jct2/doc_end_user/documents/3_Geneva/wg11/JCT3V−C1004−v4.zipから入手可能である。HEVCへのスケーラブル拡張、すなわちSHVCもまた、JCT−VCによって開発されている。以下、SHVC WD1と呼ばれる、SHVCの最新のワーキングドラフト(WD)が、http://phenix.int−evry.fr/jct/doc_end_user/documents/12_Geneva/wg11/JCTVC−L1008−v1.zipから入手可能である。
概要
[0022]SHVCでは、参照レイヤ画像は、たとえば、エンハンスメントレイヤにおけるレイヤ間予測のために、リサンプリングされる必要がある場合がある。リサンプリングは、参照レイヤ画像から輝度サンプルにリサンプリングフィルタを適用することによって実行され得る。たとえば、nタップフィルタが適用され得る。リサンプリングプロセスは、2次元リサンプリングのための2つのステップで発生し得る。第1に、水平リサンプリングが実行されてよく、次いで垂直リサンプリングが実行され得る。たとえば、垂直リサンプリングは、水平リサンプリングプロセスからビデオ情報出力上に実行され得る。リサンプリングフィルタは、入力として輝度サンプルを受信することができ、水平リサンプリングプロセスは、入力輝度サンプルに基づいて中間出力を生成することができる。次いで、中間出力は、垂直リサンプリングステップのための入力として使用され得る。いくつかの状況では、水平リサンプリングプロセスは、中間出力が入力輝度サンプルよりも多くのビットを有する(たとえば、より大きいビット深度を有する)ように、入力輝度サンプルにさらなるビットを追加することができる。さらなるビットは、データ範囲を非常に大きくして、垂直リサンプリングステップの計算の複雑性に重大な影響を有するようにすることができる。たとえば、中間データのバッファは、データ範囲が高くなるにつれて比例して増加され得る。また、補間プロセス、特に乗算演算の複雑性は、入力データのビット深度に強く依存する場合がある。さらに、特定の所定の最大値を超えないビット深度を有する入力を必要とする特定の計算命令セットがある。たとえば、特定の16ビットの命令セットは、16ビットを有する(たとえば、16ビットのビット深度を有する)入力にのみ使用され得る。したがって、多段階リサンプリングプロセスの第1の段階の中間出力のビット深度を制限(たとえば、減少または限定)することが有利である。
ビデオコーディングシステム
[0027]図1は、本開示で説明する態様による技法を利用し得る例示的なビデオコーディングシステム10を示すブロック図である。本明細書で使用し説明する「ビデオコーダ」という用語は、総称的にビデオエンコーダとビデオデコーダの両方を指す。本開示では、「ビデオコーディング」または「コーディング」という用語は、ビデオ符号化とビデオ復号とを総称的に指すことがある。
ビデオエンコーダ
[0056]図2Aは、本開示で説明する態様による技法を実装し得るビデオエンコーダの例を示すブロック図である。ビデオエンコーダ20は、HEVCのような、ビデオビットストリームの単一のレイヤを処理するように構成され得る。さらに、ビデオエンコーダ20は、これに限定されないが、図4〜図5に関連して上記および以下でより詳細に説明する、リサンプリングプロセスおよび関連プロセスにおける中間データのダイナミックレンジ制御のための方法を含む、本開示の技法のうちのいくつか、またはすべてを実行するように構成され得る。一例として、レイヤ間予測ユニット66(与えられる場合)は、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。ただし、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオエンコーダ20の様々な構成要素間で共有され得る。いくつかの例では、さらに、または代替で、プロセッサ(図示せず)は、本開示において説明する技法のいずれかまたはすべてを実行するように構成され得る。
マルチレイヤビデオエンコーダ
[0075]図2Bは、本開示で説明する態様に従って技法を実装し得るマルチレイヤビデオエンコーダ21の例を示すブロック図である。ビデオエンコーダ21は、SHVCおよびマルチビューコーディングのような、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオエンコーダ21は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。
ビデオデコーダ
[0082]図3Aは、本開示で説明する態様による技法を実装し得るビデオデコーダの例を示すブロック図である。ビデオデコーダ30は、HEVCのような、ビデオビットストリームの単一のレイヤを処理するように構成され得る。さらに、ビデオデコーダ30は、これに限定されないが、図4〜図5に関連して上記および以下でより詳細に説明する、リサンプリングプロセスおよび関連プロセスにおける中間データのダイナミックレンジ制御のための方法を含む、本開示の技法のうちのいくつか、またはすべてを実行するように構成され得る。一例として、レイヤ間予測ユニット75は、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。ただし、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオデコーダ30の様々な構成要素間で共有され得る。いくつかの例では、さらに、または代替で、プロセッサ(図示せず)は、本開示において説明する技法のいずれかまたはすべてを実行するように構成され得る。
マルチレイヤデコーダ
[0092]図3Bは、本開示で説明する態様に従って技法を実装し得るマルチレイヤビデオデコーダ31の例を示すブロック図である。ビデオデコーダ31は、SHVCおよびマルチビューコーディングのような、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオデコーダ31は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。
リサンプリングプロセスにおける中間データのダイナミックレンジ制御
[0098]SHVCでは、参照レイヤ画像は、たとえば、エンハンスメントレイヤにおけるレイヤ間予測のために、リサンプリングされる必要がある場合がある。リサンプリングは、参照レイヤ画像から輝度サンプルにリサンプリングフィルタを適用することによって実行され得る。たとえば、nタップフィルタが適用され得る。リサンプリングプロセスは、2次元(2D)リサンプリングのための2つのステップで発生し得る。たとえば、2D分離可能補間フィルタが適用され得る。第1に、輝度サンプルに水平リサンプリングが実行されてよく、次いで、輝度サンプルに垂直リサンプリングが実行され得る。たとえば、垂直リサンプリングは、水平リサンプリングプロセスからビデオ情報出力上に実行され得る。リサンプリングフィルタは、入力として輝度サンプルを受信することができ、水平リサンプリングプロセスは、入力輝度サンプルに基づいて中間出力を生成することができる。次いで、中間出力は、垂直リサンプリングステップのための入力として使用され得る。いくつかの状況では、水平リサンプリングプロセスは、中間出力が入力輝度サンプルよりも多くのビットを有する(たとえば、より大きいビット深度を有する)ように、入力輝度サンプルにさらなるビットを追加することができる。さらなるビットは、データ範囲を非常に大きくして、垂直リサンプリングステップの計算の複雑性に重大な影響を有するようにすることができる。たとえば、中間データのバッファは、データ範囲が高くなるにつれて比例して増加され得る。また、補間プロセス、特に乗算演算の複雑性は、入力データのビット深度に強く依存する場合がある。さらに、特定の所定の最大値を超えないビット深度を有する入力を必要とする特定の計算命令セットがある。たとえば、特定の16ビットの命令セットは、16ビットを有する(たとえば、16ビットのビット深度を有する)入力にのみ使用され得る。
・輝度参照サンプルアレイrlPicSampleL、および、
・現在の画像の左上の輝度サンプルに関連する輝度サンプル位置(xP,yP)
ここで、rlPicSampleLは参照レイヤ画像の輝度サンプルアレイを指し、(xP,yP)は処理されている現在のピクセルのサンプル位置を指す。入力に基づいて、プロセスは、リサンプリングプロセスによって生成された輝度サンプル値を指す、リサンプリングされた輝度サンプル値rsLumaSampleを出力として生成することができる。表1は、輝度リサンプリングプロセスのために使用され得る、p=0...15およびX=0...7である8タップフィルタ係数fL[p,X]の一例を指定する。
・n=0・・・7であるサンプル値tempArray[n]は、以下のように導出され得る。
・n=0・・・7であるサンプル値tempArray[n]は、以下のように導出され得る。
・リサンプリングされた輝度サンプル値rsLumaSampleは、以下のように導出され得る。
リサンプリングプロセスにおける中間データのダイナミックレンジ制御のための方法
[0107]図4は、本開示の態様による、リサンプリングプロセスにおける中間データのダイナミックレンジ制御のための例示的な方法を示すフローチャートである。プロセス400は、実施形態に応じて、エンコーダ(たとえば、図2A、図2B等に示されるエンコーダ)、デコーダ(たとえば、図3A、図3B等に示されるデコーダ)、または他の何らかの構成要素によって実行され得る。プロセス400のブロックは、図3Bのデコーダ31に関連して説明されているが、プロセス400は上述のエンコーダなどの他の構成要素によって実行され得る。デコーダ31のレイヤ1ビデオデコーダ30B、および/またはデコーダ31のレイヤ0デコーダ30Aは、実施形態に応じてプロセス400を実行することができる。図4に関連して説明されるすべての実施形態は別々に実装されてもよく、相互に組み合わせて実装されてもよい。プロセス400に関連する特定の詳細は上記で説明される。
用語
[00126]上記の開示は特定の実施形態を記載しているが、多くの変形形態が可能である。たとえば、上述されたように、上記の技法は3Dビデオコーディングに適用され得る。3Dビデオのいくつかの実施形態では、参照レイヤ(たとえば、ベースレイヤ)は、ビデオの第1のビューを表示するのに十分なビデオ情報を含み、エンハンスメントレイヤは、参照レイヤに比べてさらなるビデオ情報を含み、その結果、参照レイヤおよびエンハンスメントレイヤは一緒に、ビデオの第2のビューを表示するのに十分な情報を含む。これらの2つのビューは、立体的な画像を生成するために使用され得る。上記で説明されたように、本開示の態様に従って、エンハンスメントレイヤ内でビデオユニットを符号化または復号するとき、参照レイヤからの動き情報は、さらなる暗黙的な仮説を識別するために使用され得る。これにより、3Dビデオのビットストリームについてのより大きいコーディング効率が実現され得る。
以下に、出願当初の特許請求の範囲に記載された発明を付記する。
[C1]
ビデオ情報をコーディングするように構成された装置であって、
ビデオ情報を記憶するように構成されたメモリと、
前記メモリに動作可能に結合され、
参照レイヤビデオ情報を取得して、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングして、
前記中間出力を所定のビット深度に制限して、
第2の次元において前記制限された中間出力をアップサンプリングするように構成されたプロセッサとを備え、前記第2の次元が前記第1の次元と直交している、装置。
[C2]
前記プロセッサが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記ビット数に基づいて、前記中間出力をシフトするかどうかを決定することと、
前記中間出力をシフトすると決定することに応じて、前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、C1に記載の装置。
[C3]
前記プロセッサが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、C1に記載の装置。
[C4]
前記プロセッサが、前記中間出力をシフトする前記ビット数を、前記参照レイヤビデオ情報の前記ビット深度マイナス8ビットとして決定するように構成される、C3に記載の装置。
[C5]
前記プロセッサが、右シフト動作を使用して、前記中間出力を前記ビット数だけシフトするように構成される、C3に記載の装置。
[C6]
前記第1の次元が水平次元であり、前記第2の次元が垂直次元である、C1に記載の装置。
[C7]
前記参照レイヤビデオ情報が輝度値を備える、C1に記載の装置。
[C8]
前記プロセッサが、前記参照レイヤビデオ情報にリサンプリングフィルタを適用することによって、前記第1の次元において前記参照レイヤビデオ情報をアップサンプリングして、前記第2の次元において前記制限された中間出力をアップサンプリングするように構成される、C1に記載の装置。
[C9]
前記所定のビット深度が16ビットである、C1に記載の装置。
[C10]
前記プロセッサが、
前記アップサンプリングされて、制限された中間出力から第2の中間出力を生成して、
前記第2の中間出力を第2の所定のビット深度に制限するようにさらに構成される、C1に記載の装置。
[C11]
前記プロセッサが、前記制限された第2の中間出力から前記取得された参照レイヤビデオ情報のアップサンプリングされたバージョンを生成するようにさらに構成される、C10に記載の装置。
[C12]
前記プロセッサが、
前記参照レイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとによって、前記第2の中間出力を前記第2の所定のビット深度に制限するように構成される、C10に記載の装置。
[C13]
前記プロセッサが、
エンハンスメントレイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとによって、前記第2の中間出力を前記第2の所定のビット深度に制限するように構成される、C10に記載の装置。
[C14]
前記プロセッサが、右シフト動作を使用して、前記第2の中間出力を前記第2のビット数だけシフトするように構成される、C13に記載の装置。
[C15]
前記プロセッサが、前記第2の中間出力をシフトする前記第2のビット数を、20ビットマイナス前記エンハンスメントレイヤビデオ情報の前記ビット深度として決定するようにさらに構成される、C13に記載の装置。
[C16]
前記装置が、デスクトップコンピュータ、ノートブックコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、セットトップボックス、電話ハンドセット、スマートフォン、スマートパッド、テレビ、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲーム機、およびビデオストリーミングデバイスの1つまたは複数から構成されるグループから選択される、C1に記載の装置。
[C17]
ビデオ情報をコーディングする方法であって、
参照レイヤビデオ情報を取得することと、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングすることと、
前記中間出力を所定のビット深度に制限することと、
第2の次元において前記制限された中間出力をアップサンプリングすることとを備え、前記第2の次元が前記第1の次元と直交している、方法。
[C18]
前記中間出力を前記所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記ビット数に基づいて、前記中間出力をシフトするかどうかを決定することと、
前記中間出力をシフトすると決定することに応じて、前記中間出力を前記ビット数だけシフトすることとを備える、C17に記載の方法。
[C19]
前記中間出力を前記所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとを備える、C17に記載の方法。
[C20]
前記中間出力をシフトする前記ビット数が、前記参照レイヤビデオ情報の前記ビット深度マイナス8ビットとして決定される、C19に記載の方法。
[C21]
前記中間出力を前記ビット数だけシフトする前記ことが、右シフト動作を使用して実行される、C19に記載の方法。
[C22]
前記第1の次元が水平次元であり、前記第2の次元が垂直次元である、C17に記載の方法。
[C23]
前記参照レイヤビデオ情報が輝度値を備える、C17に記載の方法。
[C24]
前記第1の次元において前記参照レイヤビデオ情報をアップサンプリングする前記ことと、前記第2の次元において前記制限された中間出力をアップサンプリングする前記こととが、前記参照レイヤビデオ情報にリサンプリングフィルタを適用することによって実行される、C17に記載の方法。
[C25]
前記所定のビット深度が16ビットである、C17に記載の方法。
[C26]
前記アップサンプリングされて、制限された中間出力から第2の中間出力を生成することと、
前記第2の中間出力を第2の所定のビット深度に制限することとをさらに備える、C17に記載の方法。
[C27]
前記制限された第2の中間出力から前記取得された参照レイヤビデオ情報のアップサンプリングされたバージョン生成することをさらに備える、C26に記載の方法。
[C28]
前記第2の中間出力を前記第2の所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとを備える、C26に記載の方法。
[C29]
前記第2の中間出力を前記第2の所定のビット深度に制限する前記ことが、
エンハンスメントレイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとを備える、C26に記載の方法。
[C30]
前記第2の中間出力を前記第2のビット数だけシフトする前記ことが、右シフト動作を使用して実行される、C29に記載の方法。
[C31]
前記第2の中間出力をシフトする前記第2のビット数が、20ビットマイナス前記エンハンスメントレイヤビデオ情報の前記ビット深度として決定される、C29に記載の方法。
[C32]
コンピュータハードウェアを備えるプロセッサ上で実行されると、前記プロセッサに、
ビデオ情報を記憶することと、
参照レイヤビデオ情報を取得することと、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングすることと、
前記中間出力を所定のビット深度に制限することと、
第2の次元において前記制限された中間出力をアップサンプリングすることとを行わせる命令を備え、前記第2の次元が前記第1の次元と直交している、非一時的コンピュータ可読媒体。
[C33]
前記プロセッサに、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限させる命令をさらに備える、C32に記載のコンピュータ可読媒体。
[C34]
ビデオ情報をコーディングするように構成された装置であって、前記装置が、
ビデオ情報を記憶するための手段と、
参照レイヤビデオ情報を取得するための手段と、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングするための手段と、
前記中間出力を所定のビット深度に制限するための手段と、
第2の次元において前記制限された中間出力をアップサンプリングするための手段とを備え、前記第2の次元が前記第1の次元と直交している、装置。
[C35]
前記中間出力を前記所定のビット深度に制限するための前記手段が、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、C34に記載の装置。
Claims (35)
- ビデオ情報をコーディングするように構成された装置であって、
ビデオ情報を記憶するように構成されたメモリと、
前記メモリに動作可能に結合され、
参照レイヤビデオ情報を取得して、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングして、
前記中間出力を所定のビット深度に制限して、
第2の次元において前記制限された中間出力をアップサンプリングするように構成されたプロセッサとを備え、前記第2の次元が前記第1の次元と直交している、装置。 - 前記プロセッサが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記ビット数に基づいて、前記中間出力をシフトするかどうかを決定することと、
前記中間出力をシフトすると決定することに応じて、前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、請求項1に記載の装置。 - 前記プロセッサが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、請求項1に記載の装置。 - 前記プロセッサが、前記中間出力をシフトする前記ビット数を、前記参照レイヤビデオ情報の前記ビット深度マイナス8ビットとして決定するように構成される、請求項3に記載の装置。
- 前記プロセッサが、右シフト動作を使用して、前記中間出力を前記ビット数だけシフトするように構成される、請求項3に記載の装置。
- 前記第1の次元が水平次元であり、前記第2の次元が垂直次元である、請求項1に記載の装置。
- 前記参照レイヤビデオ情報が輝度値を備える、請求項1に記載の装置。
- 前記プロセッサが、前記参照レイヤビデオ情報にリサンプリングフィルタを適用することによって、前記第1の次元において前記参照レイヤビデオ情報をアップサンプリングして、前記第2の次元において前記制限された中間出力をアップサンプリングするように構成される、請求項1に記載の装置。
- 前記所定のビット深度が16ビットである、請求項1に記載の装置。
- 前記プロセッサが、
前記アップサンプリングされて、制限された中間出力から第2の中間出力を生成して、
前記第2の中間出力を第2の所定のビット深度に制限するようにさらに構成される、請求項1に記載の装置。 - 前記プロセッサが、前記制限された第2の中間出力から前記取得された参照レイヤビデオ情報のアップサンプリングされたバージョンを生成するようにさらに構成される、請求項10に記載の装置。
- 前記プロセッサが、
前記参照レイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとによって、前記第2の中間出力を前記第2の所定のビット深度に制限するように構成される、請求項10に記載の装置。 - 前記プロセッサが、
エンハンスメントレイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとによって、前記第2の中間出力を前記第2の所定のビット深度に制限するように構成される、請求項10に記載の装置。 - 前記プロセッサが、右シフト動作を使用して、前記第2の中間出力を前記第2のビット数だけシフトするように構成される、請求項13に記載の装置。
- 前記プロセッサが、前記第2の中間出力をシフトする前記第2のビット数を、20ビットマイナス前記エンハンスメントレイヤビデオ情報の前記ビット深度として決定するようにさらに構成される、請求項13に記載の装置。
- 前記装置が、デスクトップコンピュータ、ノートブックコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、セットトップボックス、電話ハンドセット、スマートフォン、スマートパッド、テレビ、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲーム機、およびビデオストリーミングデバイスの1つまたは複数から構成されるグループから選択される、請求項1に記載の装置。
- ビデオ情報をコーディングする方法であって、
参照レイヤビデオ情報を取得することと、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングすることと、
前記中間出力を所定のビット深度に制限することと、
第2の次元において前記制限された中間出力をアップサンプリングすることとを備え、前記第2の次元が前記第1の次元と直交している、方法。 - 前記中間出力を前記所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記ビット数に基づいて、前記中間出力をシフトするかどうかを決定することと、
前記中間出力をシフトすると決定することに応じて、前記中間出力を前記ビット数だけシフトすることとを備える、請求項17に記載の方法。 - 前記中間出力を前記所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとを備える、請求項17に記載の方法。 - 前記中間出力をシフトする前記ビット数が、前記参照レイヤビデオ情報の前記ビット深度マイナス8ビットとして決定される、請求項19に記載の方法。
- 前記中間出力を前記ビット数だけシフトする前記ことが、右シフト動作を使用して実行される、請求項19に記載の方法。
- 前記第1の次元が水平次元であり、前記第2の次元が垂直次元である、請求項17に記載の方法。
- 前記参照レイヤビデオ情報が輝度値を備える、請求項17に記載の方法。
- 前記第1の次元において前記参照レイヤビデオ情報をアップサンプリングする前記ことと、前記第2の次元において前記制限された中間出力をアップサンプリングする前記こととが、前記参照レイヤビデオ情報にリサンプリングフィルタを適用することによって実行される、請求項17に記載の方法。
- 前記所定のビット深度が16ビットである、請求項17に記載の方法。
- 前記アップサンプリングされて、制限された中間出力から第2の中間出力を生成することと、
前記第2の中間出力を第2の所定のビット深度に制限することとをさらに備える、請求項17に記載の方法。 - 前記制限された第2の中間出力から前記取得された参照レイヤビデオ情報のアップサンプリングされたバージョン生成することをさらに備える、請求項26に記載の方法。
- 前記第2の中間出力を前記第2の所定のビット深度に制限する前記ことが、
前記参照レイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとを備える、請求項26に記載の方法。 - 前記第2の中間出力を前記第2の所定のビット深度に制限する前記ことが、
エンハンスメントレイヤビデオ情報の前記ビット深度に基づいて、前記第2の中間出力をシフトする第2のビット数を決定することと、
前記第2の中間出力を前記第2のビット数だけシフトすることとを備える、請求項26に記載の方法。 - 前記第2の中間出力を前記第2のビット数だけシフトする前記ことが、右シフト動作を使用して実行される、請求項29に記載の方法。
- 前記第2の中間出力をシフトする前記第2のビット数が、20ビットマイナス前記エンハンスメントレイヤビデオ情報の前記ビット深度として決定される、請求項29に記載の方法。
- コンピュータハードウェアを備えるプロセッサ上で実行されると、前記プロセッサに、
ビデオ情報を記憶することと、
参照レイヤビデオ情報を取得することと、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングすることと、
前記中間出力を所定のビット深度に制限することと、
第2の次元において前記制限された中間出力をアップサンプリングすることとを行わせる命令を備え、前記第2の次元が前記第1の次元と直交している、非一時的コンピュータ可読媒体。 - 前記プロセッサに、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限させる命令をさらに備える、請求項32に記載のコンピュータ可読媒体。 - ビデオ情報をコーディングするように構成された装置であって、前記装置が、
ビデオ情報を記憶するための手段と、
参照レイヤビデオ情報を取得するための手段と、
中間出力を生成するために、第1の次元において前記参照レイヤビデオ情報をアップサンプリングするための手段と、
前記中間出力を所定のビット深度に制限するための手段と、
第2の次元において前記制限された中間出力をアップサンプリングするための手段とを備え、前記第2の次元が前記第1の次元と直交している、装置。 - 前記中間出力を前記所定のビット深度に制限するための前記手段が、
前記参照レイヤビデオ情報のビット深度を決定することと、
前記参照レイヤビデオ情報の前記ビット深度に基づいて前記中間出力をシフトするビット数を決定することと、
前記中間出力を前記ビット数だけシフトすることとによって、前記中間出力を前記所定のビット深度に制限するように構成される、請求項34に記載の装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361832648P | 2013-06-07 | 2013-06-07 | |
US61/832,648 | 2013-06-07 | ||
US14/294,913 US9762920B2 (en) | 2013-06-07 | 2014-06-03 | Dynamic range control of intermediate data in resampling process |
US14/294,913 | 2014-06-03 | ||
PCT/US2014/040909 WO2014197595A1 (en) | 2013-06-07 | 2014-06-04 | Dynamic range control of intermediate data in resampling process |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016523476A true JP2016523476A (ja) | 2016-08-08 |
JP2016523476A5 JP2016523476A5 (ja) | 2017-06-22 |
JP6479776B2 JP6479776B2 (ja) | 2019-03-06 |
Family
ID=52005457
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016517963A Active JP6479776B2 (ja) | 2013-06-07 | 2014-06-04 | リサンプリングプロセスにおける中間データのダイナミックレンジ制御 |
Country Status (7)
Country | Link |
---|---|
US (1) | US9762920B2 (ja) |
EP (1) | EP3005706A1 (ja) |
JP (1) | JP6479776B2 (ja) |
KR (2) | KR20160017045A (ja) |
CN (1) | CN105264895B (ja) |
BR (1) | BR112015030642B1 (ja) |
WO (1) | WO2014197595A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140138538A (ko) * | 2013-05-24 | 2014-12-04 | 주식회사 케이티 | 복수의 레이어를 지원하는 비디오 코딩 방법 및 장치 |
KR20150026927A (ko) * | 2013-09-03 | 2015-03-11 | 주식회사 케이티 | 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치 |
US10769818B2 (en) * | 2017-04-09 | 2020-09-08 | Intel Corporation | Smart compression/decompression schemes for efficiency and superior results |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003339050A (ja) * | 2002-04-10 | 2003-11-28 | Microsoft Corp | マルチステージ補間の丸め制御 |
JP2009522935A (ja) * | 2006-01-06 | 2009-06-11 | マイクロソフト コーポレーション | 多重解像度ビデオ符号化および復号化のための再サンプリングおよび画像サイズ変更の演算 |
JP2010516199A (ja) * | 2007-01-09 | 2010-05-13 | クゥアルコム・インコーポレイテッド | スケーラブルビデオコーディング用の適応アップサンプリング |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6331862B1 (en) * | 1988-07-06 | 2001-12-18 | Lg Philips Lcd Co., Ltd. | Image expansion display and driver |
US7110459B2 (en) * | 2002-04-10 | 2006-09-19 | Microsoft Corporation | Approximate bicubic filter |
US20050259729A1 (en) * | 2004-05-21 | 2005-11-24 | Shijun Sun | Video coding with quality scalability |
US8023569B2 (en) * | 2005-12-15 | 2011-09-20 | Sharp Laboratories Of America, Inc. | Methods and systems for block-based residual upsampling |
US8401091B2 (en) * | 2006-01-09 | 2013-03-19 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
EP1933563A1 (en) * | 2006-12-14 | 2008-06-18 | Thomson Licensing | Method and apparatus for encoding and/or decoding bit depth scalable video data using adaptive enhancement layer residual prediction |
WO2008083521A1 (en) * | 2007-01-10 | 2008-07-17 | Thomson Licensing | Video encoding method and video decoding method for enabling bit depth scalability |
CN101822060B (zh) * | 2007-10-19 | 2014-08-06 | 汤姆森许可贸易公司 | 组合的空间和比特深度可缩放性 |
CN102388611B (zh) * | 2009-02-11 | 2015-08-19 | 汤姆森特许公司 | 使用色调映射和反色调映射的比特深度可分级视频编码和解码的方法和装置 |
US9100661B2 (en) * | 2010-04-05 | 2015-08-04 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding video by using dynamic-range transformation, and method and apparatus for decoding video by using dynamic-range transformation |
JP5802666B2 (ja) * | 2010-12-22 | 2015-10-28 | パナソニック株式会社 | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
EP2661892B1 (en) * | 2011-01-07 | 2022-05-18 | Nokia Technologies Oy | Motion prediction in video coding |
US20120307889A1 (en) * | 2011-06-01 | 2012-12-06 | Sharp Laboratories Of America, Inc. | Video decoder with dynamic range adjustments |
TWI601419B (zh) * | 2011-06-30 | 2017-10-01 | 三星電子股份有限公司 | 視訊解碼方法 |
EP2779646A4 (en) * | 2011-11-07 | 2015-08-19 | Samsung Electronics Co Ltd | INVERSE TRANSFORM METHOD FOR REVERSE QUANTIFICATION DATA STRETCHING, REVERSE TRANSFORMATION DURING VIDEO DECODING STEP AND CORRESPONDING DEVICE |
-
2014
- 2014-06-03 US US14/294,913 patent/US9762920B2/en active Active
- 2014-06-04 KR KR1020167000158A patent/KR20160017045A/ko active Application Filing
- 2014-06-04 EP EP14735766.9A patent/EP3005706A1/en not_active Ceased
- 2014-06-04 BR BR112015030642-0A patent/BR112015030642B1/pt active IP Right Grant
- 2014-06-04 WO PCT/US2014/040909 patent/WO2014197595A1/en active Application Filing
- 2014-06-04 CN CN201480030534.7A patent/CN105264895B/zh active Active
- 2014-06-04 JP JP2016517963A patent/JP6479776B2/ja active Active
- 2014-06-04 KR KR1020207025394A patent/KR102293104B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003339050A (ja) * | 2002-04-10 | 2003-11-28 | Microsoft Corp | マルチステージ補間の丸め制御 |
JP2009522935A (ja) * | 2006-01-06 | 2009-06-11 | マイクロソフト コーポレーション | 多重解像度ビデオ符号化および復号化のための再サンプリングおよび画像サイズ変更の演算 |
JP2010516199A (ja) * | 2007-01-09 | 2010-05-13 | クゥアルコム・インコーポレイテッド | スケーラブルビデオコーディング用の適応アップサンプリング |
Non-Patent Citations (2)
Title |
---|
MUHAMMED COBAN 5775 MOREHOUSE DRIVE SAN DIEGO, CA 92121, USA: "Luma/chroma interpolation precision[online]", JCTVC-F JCTVC-F585, JPN6018051982, 15 July 2011 (2011-07-15), ISSN: 0003950329 * |
THOMAS WIEGAND (FRAUNHOFER HHI): "Suggested design of initial software model for scalable HEVC extension proposal by Fraunhofer HHI, V", JCTVC-K JCTVC-K0345R3, JPN6018051983, 18 October 2012 (2012-10-18), ISSN: 0003950330 * |
Also Published As
Publication number | Publication date |
---|---|
KR20200105977A (ko) | 2020-09-09 |
BR112015030642B1 (pt) | 2023-04-11 |
US9762920B2 (en) | 2017-09-12 |
KR20160017045A (ko) | 2016-02-15 |
KR102293104B1 (ko) | 2021-08-23 |
CN105264895A (zh) | 2016-01-20 |
EP3005706A1 (en) | 2016-04-13 |
CN105264895B (zh) | 2019-06-14 |
US20140362909A1 (en) | 2014-12-11 |
JP6479776B2 (ja) | 2019-03-06 |
WO2014197595A1 (en) | 2014-12-11 |
BR112015030642A2 (pt) | 2017-07-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6297670B2 (ja) | ハイレベルシンタックスのみのスケーラブルビデオコーディングのための、レイヤ間参照ピクチャ制限 | |
JP6388929B2 (ja) | マルチレイヤビデオコーディングにおけるレイヤ間予測タイプに関するビットストリーム制約を処理すること | |
JP6285020B2 (ja) | コンポーネント間フィルタ処理 | |
JP6141386B2 (ja) | 深度範囲パラメータのシグナリング | |
JP6321139B2 (ja) | Shvcにおいて再サンプリングプロセスを条件付きで呼び出すこと | |
JP6129969B2 (ja) | スケーラブルビデオコード化における代替変換 | |
JP6285018B2 (ja) | スケーリングファクタを用いた再サンプリング | |
JP6400741B2 (ja) | ネスティング補足エンハンスメント情報(sei)メッセージの拡張可能設計 | |
JP6416203B2 (ja) | レイヤ間ピクチャシグナリングおよび関連プロセス | |
JP6352314B2 (ja) | 異なるアスペクト比を伴う空間スケーラビリティのためのレイヤ間の参照ピクチャの構築 | |
JP6333942B2 (ja) | ビデオ情報のスケーラブルコード化のための装置及び方法 | |
JP6495268B2 (ja) | パラメータセット内のビューidビット深度のシグナリング | |
JP6239612B2 (ja) | スケーラブル映像コーディング及び3d映像コーディングに関する一般化された残差予測 | |
JP6526574B2 (ja) | レイヤ間シンタックス予測制御 | |
JP6466349B2 (ja) | スケーラブルビデオコーディングのための空間動きベクトルスケーリング | |
JP6356146B2 (ja) | スケーラブル映像コーディングに関する層間基準ピクチャ生成 | |
JP6479776B2 (ja) | リサンプリングプロセスにおける中間データのダイナミックレンジ制御 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170511 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170511 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180403 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180703 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190108 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190206 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6479776 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |