JP2014003523A - 画像符号化装置およびその制御方法ならびにプログラム - Google Patents
画像符号化装置およびその制御方法ならびにプログラム Download PDFInfo
- Publication number
- JP2014003523A JP2014003523A JP2012138666A JP2012138666A JP2014003523A JP 2014003523 A JP2014003523 A JP 2014003523A JP 2012138666 A JP2012138666 A JP 2012138666A JP 2012138666 A JP2012138666 A JP 2012138666A JP 2014003523 A JP2014003523 A JP 2014003523A
- Authority
- JP
- Japan
- Prior art keywords
- encoding
- code amount
- block
- coding
- size
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
- H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Algebra (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【解決手段】複数のフレームを含む画像データを符号化する画像符号化装置は、取得した画像データに基づいて、当該画像データの符号化対象のフレームの符号化ブロックサイズを決定し、決定した符号化ブロックサイズに従って、取得した画像データを符号化ブロック単位で符号化し、サイズが決定された現在の符号化ブロックおよび当該現在の符号化ブロックの前に符号化した符号化ブロックに係わる符号化情報に基づいて、サイズが決定された符号化ブロックの符号量を制御するとともに、符号化情報に基づいて符号化対象のフレームの所定の符号化情報を演算し、当該演算された所定の符号化情報に従って前記予測手段が決定する符号化ブロックサイズを制限する。
【選択図】図1
Description
符号化ブロックのサイズを適応的に変更することは、画像の特徴等によりブロック分けが可能となり、符号化効率および画質を向上させることが可能となる。
ところが、符号化ブロックのサイズ毎に量子化係数を決定できることにより、ブロック毎の目標符号量と発生符号量の差である符号量誤差が大きくなり、それによって画質劣化を引き起こすこととなってしまう。
図1は、本実施例に係る画像符号化装置100の構成例を示すブロック図である。
図1において、画像符号化装置100は、レンズや撮像センサ等のカメラ部を含む撮像部101と、撮像部から出力された動画像データを記憶するフレームメモリ102を備える。また、ピクチャ間の差分により動きベクトルを探索するインター予測回路103と、インター予測とイントラ予測とのどちらかの予測方法を選択する予測方法選択回路104と、イントラ予測方法を選択するイントラ予測回路105とを備えている。さらに、選択された予測方法により符号化ブロック単位で予測符号化を行なうために、予測画像生成回路106、減算器107、整数変換回路108、量子化回路109、エントロピー符号化回路115、量子化制御回路116、符号量制御回路117を備えている。さらに、インター予測方法で使用する参照画像を生成するために、逆量子化回路110、逆整数変換回路111、加算器112、ループ内フィルタ113を備えている。また、画像符号化装置100は記録回路118を備えるとともに、記録媒体119を装着可能に構成されており、フレームメモリ102は、インター予測に用いる参照画像を記憶する参照画像メモリ114を備えている。
H = D/Q + I
とし、各ブロック評価値Hの合計値が最小となるように判定を行う。
ただし、本実施例は図2に示すブロックの分割方法に限らず、別の分割方法であっても構わない。
エントロピー符号化回路115は、量子化回路109により量子化された整数変換係数をエントロピー符号化し、ストリームとして記録回路118に出力する。ここで、量子化回路109における量子化係数は、量子化制御回路116が以下の係数、符号量などのデータを用いて算出する。即ち、初期量子化係数または前ブロックで用いた量子化係数、予測方法選択回路104で決定した符号化ブロックサイズ、エントロピー符号化回路115で発生した符号量、符号量制御回路117から設定される目標符号量などである。
{(目標ピクチャ符号量)−(積算符号量)}/(残ブロック相当サイズ)
より求めることができる。
ただし、残ブロック相当サイズは、未符号化ブロックを現在のブロックのブロックサイズで換算した値である。未符号化ブロック(の範囲)は、現在の符号化位置(例えば後述する図7のposA)から求めることが可能であり、符号化ブロックに係わる符号化情報である。このような情報は、量子化制御回路116の図示しないメモリ又は符号化装置全体を制御する図示しない制御部のメモリなどに適宜保持され、必要に応じて読み出され得る情報である。
このとき、量子化係数Qpは、
[式1]
Qp = Q + Σerr * α
として求められる。αは任意の値である。
量子化回路109により量子化された整数変換係数は、逆量子化回路110にも入力される。逆量子化回路110は、入力された整数変換係数を逆量子化し、逆整数変換回路111は、逆量子化された整数変換係数に対して逆整数変換処理を施す。
次に、本発明の第2の実施例を図6および7を参照して説明する。
(符号量誤差) = (実積算符号量) −(目標積算符号量)
(符号量誤差率) = (符号量誤差)/(目標符号量)
なお、図において、実積算符号量を表わす折れ線の横へのスライドの長さが違うのは符号化ブロックサイズが異なるためであり、縦の変移は発生符号量によるものである。
Claims (14)
- 複数のフレームを含む画像データを符号化する画像符号化装置において、
前記画像データを取得する取得手段と、
前記取得した画像データに基づいて、符号化対象のフレームの符号化ブロックサイズを決定する予測手段と、
前記決定された符号化ブロックサイズに従って、前記取得した画像データを符号化ブロック単位で符号化する符号化手段と、
前記予測手段でサイズが決定された現在の符号化ブロックおよび当該現在の符号化ブロックの前に前記符号化手段で符号化された符号化ブロックに係わる符号化情報に基づいて、前記予測手段でサイズが決定された符号化ブロックの符号量を制御する符号量制御手段を備え、
前記符号量制御手段は、前記符号化情報に基づいて前記符号化対象のフレームの所定の符号化情報を演算し、当該演算された所定の符号化情報に従って前記予測手段が決定する符号化ブロックサイズを制限することを特徴とする画像符号化装置。 - 前記符号量制御手段は、前記所定の符号化情報として前記符号化対象のフレームの符号化率を算出し、当該符号化率が所定の閾値より大きい場合に、前記予測手段が決定する符号化ブロックサイズの上限を変更し、前記予測手段による当該変更された上限以上のブロックサイズの決定を禁止することを特徴とする請求項1に記載の画像符号化装置。
- 前記符号量制御手段は、前記符号化率を前記現在の符号化ブロックに係わる符号化情報から得られる未符号化ブロックの情報と所定のブロックサイズとに基づいて算出することを特徴とする請求項2に記載の画像符号化装置。
- 前記符号量制御手段は、前記符号化対象のフレームの発生符号量と目標符号量とから符号量誤差率を算出し、前記算出した符号量誤差率に従って前記予測手段が決定する符号化ブロックサイズの上限を変更することを特徴とする請求項1に記載の画像符号化装置。
- 前記符号量制御手段は、前記算出した符号量誤差率が所定の誤差率を超えている場合、前記予測手段が決定する符号化ブロックサイズの上限を小さくすることを特徴とする請求項4に記載の画像符号化装置。
- 前記符号量制御手段は、前記算出した符号量誤差率が前記所定の誤差率を超えて大きくなるに従って、前記予測手段が決定する符号化ブロックのサイズの上限を段階的に小さくすることを特徴とする請求項5に記載の画像符号化装置。
- 前記符号量制御は、前記符号化手段により符号化された符号化ブロックにおける発生符号量を積算し、前記符号化対象のフレームの目標符号量と前記積算された発生符号量とから残符号量を算出し、当該残符号量に基づいてブロック目標符号量および量子化係数を決定することを特徴とする請求項1乃至6のいずれか一項に記載の画像符号化装置。
- 前記予測手段は、イントラ予測およびインター予測のいずれかに従った画素の差分値に基づいて、符号化ブロックサイズを決定することを特徴とする請求項1乃至7のいずれか一項に記載の画像符号化装置。
- 前記符号化手段は、イントラ符号化およびインター符号化のいずれかに従って、前記画像データの符号化対象のフレームを前記符号化ブロック単位で符号化することを特徴とする請求項1乃至8のいずれか一項に記載の画像符号化装置。
- 複数のフレームを含む画像データを取得する手段と、前記取得した画像データに基づいて、当該画像データの符号化対象のフレームの符号化ブロックサイズを決定する予測手段と、前記決定された符号化ブロックサイズに従って、前記取得した画像データを符号化ブロック単位で符号化する符号化手段とを備える画像符号化装置の制御方法において、
前記予測手段でサイズが決定された現在の符号化ブロックおよび当該現在の符号化ブロックの前に前記符号化手段で符号化された符号化ブロックに係わる符号化情報に基づいて、前記予測手段でサイズが決定された符号化ブロックの符号量を制御する符号量制御ステップを備え、
前記符号量制御ステップは、前記符号化情報に基づいて前記符号化対象のフレームの所定の符号化情報を演算し、当該演算された所定の符号化情報に従って前記予測手段が決定する符号化ブロックサイズを制限するステップを含むことを特徴とする画像符号化装置の制御方法。 - 複数のフレームを含む画像データを符号化する画像符号化装置の制御プログラムにおいて、
コンピュータを、
前記画像データを取得する取得手段、
前記取得した画像データに基づいて、当該画像データの符号化対象のフレームの符号化ブロックサイズを決定する予測手段、
前記決定された符号化ブロックサイズに従って、前記取得した画像データを符号化ブロック単位で符号化する符号化手段、
前記予測手段でサイズが決定された現在の符号化ブロックおよび当該現在の符号化ブロックの前に前記符号化手段で符号化された符号化ブロックに係わる符号化情報に基づいて、前記予測手段でサイズが決定された符号化ブロックの符号量を制御するとともに、前記符号化情報に基づいて前記符号化対象のフレームの所定の符号化情報を演算し、当該演算された所定の符号化情報に従って前記予測手段が決定する符号化ブロックサイズを制限する符号量制御手段として機能させるプログラム。 - 請求項11のプログラムを記録したコンピュータが読み取り可能な記録媒体。
- コンピュータを、請求項1乃至9のいずれか一項に記載された画像符号化装置の各手段として機能させるプログラム。
- コンピュータを、請求項1乃至9のいずれか一項に記載された画像符号化装置の各手段として機能させるプログラムを格納した記憶媒体。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012138666A JP5943733B2 (ja) | 2012-06-20 | 2012-06-20 | 画像符号化装置およびその制御方法ならびにプログラム |
US13/909,595 US9319680B2 (en) | 2012-06-20 | 2013-06-04 | Image encoding apparatus and its control method |
CN201310246869.XA CN103517074B (zh) | 2012-06-20 | 2013-06-20 | 图像编码设备及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012138666A JP5943733B2 (ja) | 2012-06-20 | 2012-06-20 | 画像符号化装置およびその制御方法ならびにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014003523A true JP2014003523A (ja) | 2014-01-09 |
JP5943733B2 JP5943733B2 (ja) | 2016-07-05 |
Family
ID=49774437
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012138666A Expired - Fee Related JP5943733B2 (ja) | 2012-06-20 | 2012-06-20 | 画像符号化装置およびその制御方法ならびにプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9319680B2 (ja) |
JP (1) | JP5943733B2 (ja) |
CN (1) | CN103517074B (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014023081A (ja) * | 2012-07-23 | 2014-02-03 | Canon Inc | 画像符号化装置及びその方法 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10887589B2 (en) * | 2019-04-12 | 2021-01-05 | Realnetworks, Inc. | Block size determination for video coding systems and methods |
TWI743919B (zh) * | 2020-08-03 | 2021-10-21 | 緯創資通股份有限公司 | 視訊處理裝置及視訊串流的處理方法 |
TWI749676B (zh) | 2020-08-03 | 2021-12-11 | 緯創資通股份有限公司 | 影像品質評估裝置及其影像品質評估方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09284769A (ja) * | 1996-04-11 | 1997-10-31 | Sony Corp | 画像符号化装置および方法 |
JP2001204028A (ja) * | 1999-04-13 | 2001-07-27 | Matsushita Electric Ind Co Ltd | 符号化データ変換方法,再符号化方法,再符号化システム,及びデータ記録媒体 |
JP2006339774A (ja) * | 2005-05-31 | 2006-12-14 | Kddi R & D Laboratories Inc | 動画像符号化装置 |
JP2010154264A (ja) * | 2008-12-25 | 2010-07-08 | Sharp Corp | 画像復号装置及び画像符号化装置 |
JP2010239422A (ja) * | 2009-03-31 | 2010-10-21 | Kddi R & D Laboratories Inc | 動画像符号化装置および復号装置 |
JP2012080212A (ja) * | 2010-09-30 | 2012-04-19 | Mitsubishi Electric Corp | 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3855286B2 (ja) | 1995-10-26 | 2006-12-06 | ソニー株式会社 | 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体 |
US6243417B1 (en) * | 1996-12-12 | 2001-06-05 | Sony Corporation | Device and method for encoding image data, and image data transmission method |
JP2001136535A (ja) * | 1999-08-25 | 2001-05-18 | Fuji Xerox Co Ltd | 画像符号化装置および量子化特性決定装置 |
JP4708819B2 (ja) | 2005-03-14 | 2011-06-22 | キヤノン株式会社 | 画像処理装置、方法、コンピュータプログラム及び記憶媒体 |
EP1909408A4 (en) * | 2005-07-28 | 2012-08-08 | Fujitsu Ltd | RADIO TRANSMISSION APPARATUS AND METHOD FOR CONTROLLING THE DOWNSTREAM TRANSMISSION THEREOF |
JP4787100B2 (ja) * | 2006-07-27 | 2011-10-05 | パナソニック株式会社 | 画像符号化装置 |
JP4569840B2 (ja) * | 2007-09-12 | 2010-10-27 | ソニー株式会社 | 画像符号化装置、画像符号化方法 |
-
2012
- 2012-06-20 JP JP2012138666A patent/JP5943733B2/ja not_active Expired - Fee Related
-
2013
- 2013-06-04 US US13/909,595 patent/US9319680B2/en active Active
- 2013-06-20 CN CN201310246869.XA patent/CN103517074B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09284769A (ja) * | 1996-04-11 | 1997-10-31 | Sony Corp | 画像符号化装置および方法 |
JP2001204028A (ja) * | 1999-04-13 | 2001-07-27 | Matsushita Electric Ind Co Ltd | 符号化データ変換方法,再符号化方法,再符号化システム,及びデータ記録媒体 |
JP2006339774A (ja) * | 2005-05-31 | 2006-12-14 | Kddi R & D Laboratories Inc | 動画像符号化装置 |
JP2010154264A (ja) * | 2008-12-25 | 2010-07-08 | Sharp Corp | 画像復号装置及び画像符号化装置 |
JP2010239422A (ja) * | 2009-03-31 | 2010-10-21 | Kddi R & D Laboratories Inc | 動画像符号化装置および復号装置 |
JP2012080212A (ja) * | 2010-09-30 | 2012-04-19 | Mitsubishi Electric Corp | 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014023081A (ja) * | 2012-07-23 | 2014-02-03 | Canon Inc | 画像符号化装置及びその方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5943733B2 (ja) | 2016-07-05 |
US20130343449A1 (en) | 2013-12-26 |
CN103517074B (zh) | 2017-03-01 |
US9319680B2 (en) | 2016-04-19 |
CN103517074A (zh) | 2014-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101482896B1 (ko) | 최적화된 디블록킹 필터 | |
JP5173409B2 (ja) | 符号化装置および符号化装置を備えた動画像記録システム | |
JP6149707B2 (ja) | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、及び動画像撮影装置 | |
JPWO2006098226A1 (ja) | 符号化装置および符号化装置を備えた動画像記録システム | |
US8514935B2 (en) | Image coding apparatus, image coding method, integrated circuit, and camera | |
JP2012034213A (ja) | 画像処理装置、画像処理システムおよび画像処理方法 | |
JP6875821B2 (ja) | 画像符号化装置、撮像装置、画像符号化方法およびプログラム | |
JP7343817B2 (ja) | 符号化装置、符号化方法、及び符号化プログラム | |
JP5943733B2 (ja) | 画像符号化装置およびその制御方法ならびにプログラム | |
JP5441812B2 (ja) | 動画像符号化装置、及びその制御方法 | |
US9736485B2 (en) | Encoding apparatus, encoding method, and image capture apparatus | |
WO2021007702A1 (en) | Video encoding method, video decoding method, video encoding device, and video decoding device | |
US10516896B2 (en) | Encoding device, encoding method, and storage medium | |
JP4719108B2 (ja) | 映像符号化方法、映像符号化装置、映像符号化プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
JP5355234B2 (ja) | 符号化装置及び符号化方法 | |
JP5873290B2 (ja) | 符号化装置 | |
JP6200220B2 (ja) | 画像処理装置、符号化装置、復号装置、及びプログラム | |
JP2011004051A (ja) | 動画像符号化方法,動画像符号化装置および動画像符号化プログラム | |
JP6249913B2 (ja) | ノイズ除去装置、ノイズ除去方法及び画像符号化装置 | |
JP2008153802A (ja) | 動画像符号化装置及び動画像符号化プログラム | |
JP5943757B2 (ja) | 画像符号化装置及びその方法 | |
JP2012222460A (ja) | 動画像符号化装置、動画像符号化方法及びプログラム | |
JP2022070176A (ja) | 符号化装置及びプログラム | |
JP5390458B2 (ja) | 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム | |
CN114760467A (zh) | 编码模式的确定方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150612 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160216 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160426 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160524 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5943733 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |