JP2008278210A - 動画像復号装置、放送受信装置、動画像復号方法 - Google Patents
動画像復号装置、放送受信装置、動画像復号方法 Download PDFInfo
- Publication number
- JP2008278210A JP2008278210A JP2007119476A JP2007119476A JP2008278210A JP 2008278210 A JP2008278210 A JP 2008278210A JP 2007119476 A JP2007119476 A JP 2007119476A JP 2007119476 A JP2007119476 A JP 2007119476A JP 2008278210 A JP2008278210 A JP 2008278210A
- Authority
- JP
- Japan
- Prior art keywords
- macroblock
- slice
- error
- unit
- decoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
- H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
Abstract
【解決手段】 複数のマクロブロック(MB)をもつ複数のスライス(SL)からなるストリーム信号から、マクロブロックの誤りを検出する検出部(14)と、検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、スライス中のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック(M1)以降の各マクロブロックを破棄する制御部(11)と、復号制御部により誤りのあるマクロブロック列が破棄されたストリーム信号を補間し復号して動画像信号を出力する復号部(2)をもつ動画像復号装置。
【選択図】図1
Description
複数のマクロブロック(MB)をもつ複数のスライス(SL)からなるストリーム信号から、マクロブロックの誤りを検出する検出部(14)と、
前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、このスライス中のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック(M1)以降の各マクロブロックを破棄する制御部(11)と、
前記復号制御部により誤りのあるマクロブロック列が破棄された前記ストリーム信号を補間し復号して動画像信号を出力する復号部(2)と、
を具備することを特徴とする動画像復号装置である。
本発明の一実施形態である動画像復号装置は、後述するように、一例として、マクロブロックのCBP(Coded Block Pattern)数を判断する機能をもった復号制御部11を有し、これにより、CBP値が突如大きな値になった場合、そのマクロブロックを誤りが混入したものと推定し破棄して補間することで、マクロブロックの誤解釈による画質劣化を低減させるものである。
初めに、本発明の一実施形態である動画像復号装置の構成の一例を図面を用いて説明する。図1は、この発明に係わる動画像復号装置の一実施形態を示す機能ブロック図である。この実施形態の動画像復号装置は、制御ユニット1と、信号処理ユニット2とを備える。制御ユニット1は、マイクロプロセッサを主構成要素とするもので、CBP(Coded Block Pattern)数を判断する復号制御部11と、復号部12と、復号情報メモリ13と、誤り検出部14とを備えている。これらのうちCBP数を判断する復号制御部11、復号部12及び誤り検出部14は一例としてプログラムをマイクロプロセッサに実行させることにより実現される。又、復号情報メモリ13は、一例として、RAM(Random Access Memory)により構成される。
フレームメモリ26はRAM(Random Access Memory)により構成され、再生されたフレーム画像データが参照画像データとして蓄積される。
逆量子化・逆周波数変換部23は、入力されたマクロブロックに対し逆量子化・逆周波数変換処理を行い、これにより残差信号を算出する。
デブロック(Deblock)部25は、データ合成部24により再生されたマクロブロックに対し適応的にデブロッキング・フィルタ処理を行い、これにより画像の符号化時に発生するブロック歪みを除去する。
次に、以上のように構成された動画像復号装置10のCBP数を判断する復号処理の動作を、CBP数を判断する復号制御部11の制御手順を示す図2のフローチャートを用いて説明する。図2は、本発明の一実施形態に係る復号回路のマクロブロック復号処理の一例を示すフローチャートである。図3は、本発明の一実施形態に係る復号回路のマクロブロック復号処理の他の一例を示すフローチャートである。図4は、本発明の一実施形態に係る一スライスのデータ構成の一例を示す説明図である。図5は、本発明の一実施形態に係る復号回路が復号処理の対象とするピクチャ中の一スライス中のデータ破棄の開始箇所の一例を示す説明図である。図6は、本発明の一実施形態に係る復号回路が復号処理の対象とするマクロブロックの一例を示す説明図である。図7は、本発明の一実施形態に係る復号回路が復号処理の対象とするピクチャ中の一スライス中のデータ破棄の開始箇所の一例を示す説明図。
次に、上述した『スキップマクロブロックを含むスライス中のマクロブロックのCBP数に基づいて誤りを検出する』以外にも、同時に行なうことが有効と思われる誤り検出方法を、図3のフローチャートを用いて説明する。
『同一スライス中にPCMマクロブロックが存在する』際に誤りと判断し、
『同一スライス中にスキップ長がしきい値を越えたスキップマクロブロックが存在する』際に誤りと判断するものである。
このIntraマクロブロック以降のデータを破棄する(ステップS27)。
次に、本発明に係る動画像復号装置10を適用した移動型通信装置の一例を図8及び図9を用いて説明する。図8は、本発明の一実施形態に係る復号回路を用いたモバイル機器の一例を示す外観図である。図9は、同じく復号回路を用いたモバイル機器の一例の構成を示すブロック図である。
Claims (10)
- 複数のマクロブロックをもつ複数のスライスからなるストリーム信号から、マクロブロックの誤りを検出する検出部と、
前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、このスライス中のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック以降の各マクロブロックを破棄する制御部と、
前記復号制御部により誤りのあるマクロブロック列が破棄された前記ストリーム信号を補間し復号して動画像信号を出力する復号部と、
を具備することを特徴とする動画像復号装置。 - 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、スキップマクロブロックの直後のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック以降の各マクロブロックを破棄することを特徴とする請求項1記載の動画像復号装置。
- 前記動画像復号装置で用いられる復号部の復号処理は、H.264/AVCであることを特徴とする請求項1記載の動画像復号装置。
- 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス内にスキップマクロブロックがなければ、このスライス中の前記検出部が誤りを検出したマクロブロック以降のマクロブロックを破棄するべく制御することを特徴とする請求項1記載の動画像復号装置。
- 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス内にPCMマクロブロックがあれば、このスライス中の前記PCMマクロブロック以降の各マクロブロックを破棄するべく制御することを特徴とする請求項1記載の動画像復号装置。
- 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス内にスキップ長がしきい値を越えるスキップマクロブロックがあれば、最大のスキップ長をもつスキップマクロブロック以降の各マクロブロックを破棄するべく制御することを特徴とする請求項1記載の動画像復号装置。
- 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス内にIntraマクロブロックがあり、このIntraマクロブロックの輝度成分の予測情報と色差成分の予測情報のIntra予測モードの間に相関がしきい値より小さいマクロブロックを検出すると、このIntraマクロブロック以降の各マクロブロックを破棄するべく制御することを特徴とする請求項1記載の動画像復号装置。
- ワンセグのテレビ放送信号を選局して受信するチューナ部と、
前記チューナ部が受信したワンセグのテレビ放送信号のストリーム信号について、複数のマクロブロックをもつ複数のスライスからなるストリーム信号から、マクロブロックの誤りを検出し、この誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、このスライス中のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック以降の各マクロブロックを破棄し、この破棄された前記ストリーム信号を補間し復号して動画像信号を出力する復号部と、
前記復号部が復号した動画像信号に応じた動画を画面に表示する表示部と、
を具備することを特徴とする放送受信装置。 - 前記制御部は、前記検出部が誤りを検出したマクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、スキップマクロブロックの直後のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック以降の各マクロブロックを破棄することを特徴とする請求項8記載の放送受信装置。
- 複数のマクロブロックをもつ複数のスライスからなるストリーム信号から、マクロブロックの誤りを検出し、
前記マクロブロックを含んでいるスライスについて、このスライス中にスキップマクロブロックが存在し、このスライス中のマクロブロックのCBP値がしきい値を越えている場合は、CBP値がしきい値を越えたマクロブロック以降の各マクロブロックを破棄し、
前記誤りのあるマクロブロック列が破棄された前記ストリーム信号を補間し復号して動画像信号を出力することを特徴とする動画像復号方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007119476A JP4792001B2 (ja) | 2007-04-27 | 2007-04-27 | 動画像復号装置、放送受信装置、動画像復号方法 |
US12/046,569 US20080267298A1 (en) | 2007-04-27 | 2008-03-12 | Moving image decoding device, broadcasting reception device, and moving image decoding method |
CN2008101092876A CN101296379B (zh) | 2007-04-27 | 2008-03-14 | 运动图像解码装置、广播接收装置、以及运动图像解码方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007119476A JP4792001B2 (ja) | 2007-04-27 | 2007-04-27 | 動画像復号装置、放送受信装置、動画像復号方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008278210A true JP2008278210A (ja) | 2008-11-13 |
JP4792001B2 JP4792001B2 (ja) | 2011-10-12 |
Family
ID=39886951
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007119476A Expired - Fee Related JP4792001B2 (ja) | 2007-04-27 | 2007-04-27 | 動画像復号装置、放送受信装置、動画像復号方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20080267298A1 (ja) |
JP (1) | JP4792001B2 (ja) |
CN (1) | CN101296379B (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8107536B2 (en) | 2009-06-11 | 2012-01-31 | Kabushiki Kaisha Toshiba | Video decoder |
JP2012119735A (ja) * | 2010-11-29 | 2012-06-21 | Mitsubishi Electric Corp | 映像品質管理システム、映像受信端末、および映像品質管理装置 |
JP2018509791A (ja) * | 2015-01-31 | 2018-04-05 | インテル コーポレイション | 無線リンク状態に基づくビデオ復号化待ち時間調整、並びにビデオ復号化誤りの隠蔽のための、古いパケットのリプレイ |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1816871A4 (en) * | 2004-10-29 | 2010-06-16 | Sharp Kk | DECODING DEVICE FOR MOVABLE IMAGES AND DECODING METHOD FOR MOVABLE IMAGES |
JP2010226376A (ja) * | 2009-03-23 | 2010-10-07 | Toshiba Corp | 画像復号装置およびコンピュータが実行可能なプログラム |
KR20110063004A (ko) * | 2009-12-04 | 2011-06-10 | 삼성전자주식회사 | 키 프레임 추출 장치 및 방법과 이를 이용한 방송 녹화 장치 및 방법 |
US9749636B2 (en) * | 2014-10-24 | 2017-08-29 | Intel Corporation | Dynamic on screen display using a compressed video stream |
CN106534859B (zh) * | 2015-09-11 | 2021-01-15 | 中兴通讯股份有限公司 | 基于spice协议的图像传输方法及装置 |
JP7082994B2 (ja) * | 2018-01-31 | 2022-06-09 | ソフトバンク株式会社 | 光通信を利用した大容量のサプリメンタルダウンリンクを可能とする通信システム、表示制御装置、通信端末及びプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005295054A (ja) * | 2004-03-31 | 2005-10-20 | Mitsubishi Electric Corp | 動画像情報復元装置、動画像情報復元方法、動画像情報復元プログラム |
JP2006295569A (ja) * | 2005-04-11 | 2006-10-26 | Toshiba Corp | 動画像復号装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1922657B (zh) * | 2004-02-19 | 2012-04-25 | Nxp股份有限公司 | 用于可变块尺寸信号的解码方案 |
US7664176B2 (en) * | 2004-07-09 | 2010-02-16 | Nokia Corporation | Method and system for entropy decoding for scalable video bit stream |
CN100584025C (zh) * | 2005-08-04 | 2010-01-20 | 华为技术有限公司 | 一种基于内容自适应的算术解码系统及装置 |
-
2007
- 2007-04-27 JP JP2007119476A patent/JP4792001B2/ja not_active Expired - Fee Related
-
2008
- 2008-03-12 US US12/046,569 patent/US20080267298A1/en not_active Abandoned
- 2008-03-14 CN CN2008101092876A patent/CN101296379B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005295054A (ja) * | 2004-03-31 | 2005-10-20 | Mitsubishi Electric Corp | 動画像情報復元装置、動画像情報復元方法、動画像情報復元プログラム |
JP2006295569A (ja) * | 2005-04-11 | 2006-10-26 | Toshiba Corp | 動画像復号装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8107536B2 (en) | 2009-06-11 | 2012-01-31 | Kabushiki Kaisha Toshiba | Video decoder |
JP2012119735A (ja) * | 2010-11-29 | 2012-06-21 | Mitsubishi Electric Corp | 映像品質管理システム、映像受信端末、および映像品質管理装置 |
JP2018509791A (ja) * | 2015-01-31 | 2018-04-05 | インテル コーポレイション | 無線リンク状態に基づくビデオ復号化待ち時間調整、並びにビデオ復号化誤りの隠蔽のための、古いパケットのリプレイ |
Also Published As
Publication number | Publication date |
---|---|
US20080267298A1 (en) | 2008-10-30 |
CN101296379B (zh) | 2011-05-04 |
JP4792001B2 (ja) | 2011-10-12 |
CN101296379A (zh) | 2008-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4792001B2 (ja) | 動画像復号装置、放送受信装置、動画像復号方法 | |
US11328452B2 (en) | Image processing device and method | |
US9900614B2 (en) | Picture decoding method for decoding coded picture data and performing distortion removal by comparing pixel difference values with threshold | |
KR100768058B1 (ko) | 부호화 스트림 재생 장치 | |
US8861848B2 (en) | Image processor and image processing method | |
CN101409847B (zh) | 视频解码设备和视频解码方法 | |
JP5464435B2 (ja) | 画像復号装置および方法 | |
US11297354B2 (en) | Encoding apparatus, decoding apparatus and transmission control method | |
US20080008250A1 (en) | Video encoder | |
US20110164684A1 (en) | Image processing apparatus and method | |
US8705627B2 (en) | Image processing apparatus and method | |
JP5556996B2 (ja) | 画像処理装置および方法 | |
WO2012098790A1 (ja) | 画像処理装置及び画像処理方法 | |
JP4203036B2 (ja) | 動画像復号装置とこの装置を備えた移動体端末 | |
JP2011151431A (ja) | 画像処理装置および方法 | |
JP2009081579A (ja) | 動画像復号装置、および動画像復号方法 | |
JP2006060358A (ja) | デジタル放送受信機 | |
JPH07274176A (ja) | 動画像伝送装置 | |
JP2001045490A (ja) | 動画像信号の符号化装置及び符号化方法 | |
JP2002142162A (ja) | ディジタル放送受信機の復調処理装置 | |
JP2010172003A (ja) | 復号再生方法及び復号再生装置 | |
JP4735558B2 (ja) | 情報処理装置および情報処理方法 | |
JPH07322243A (ja) | 画像伝送装置 | |
WO2012124406A1 (ja) | 画像処理装置及び画像処理方法 | |
JP2004328022A (ja) | 無線伝送システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20091126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110118 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110419 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110608 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110628 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110722 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |