JP5418756B2 - 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム - Google Patents

画像再符号化装置、画像再符号化方法及び画像再符号化プログラム Download PDF

Info

Publication number
JP5418756B2
JP5418756B2 JP2008555024A JP2008555024A JP5418756B2 JP 5418756 B2 JP5418756 B2 JP 5418756B2 JP 2008555024 A JP2008555024 A JP 2008555024A JP 2008555024 A JP2008555024 A JP 2008555024A JP 5418756 B2 JP5418756 B2 JP 5418756B2
Authority
JP
Japan
Prior art keywords
encoding
image data
block
encoding method
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008555024A
Other languages
English (en)
Other versions
JPWO2008090793A1 (ja
Inventor
尚司 谷内田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2008555024A priority Critical patent/JP5418756B2/ja
Publication of JPWO2008090793A1 publication Critical patent/JPWO2008090793A1/ja
Application granted granted Critical
Publication of JP5418756B2 publication Critical patent/JP5418756B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H04N19/865—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness with detection of the former encoding block subdivision in decompressed video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

本発明は、ある符号化方法により符号化された画像データを別のパラメータや別の符号化方法により再符号化する画像再符号化方法、画像再符号化装置及び画像再符号化プログラムに関する。
画像再符号化方法、画像再符号化装置及び画像再符号化プログラムは、例えば、画像データの圧縮率を更に高めるために利用されている。
特許文献１には、復号化部において、ソース符号化ストリームをデコードして復号化ビデオデータを生成すると共に、符号化ストリーム中に重畳されている過去の符号化パラメータを抽出し、再符号化部において、復号化ビデオデータと過去の符号化パラメータを受け取り、過去の符号化パラメータを使用して符号化処理を行う画像再符号化装置が開示されている。
特許文献２には、遅延回路と減算器とから求められた注目画素と隣接する参照画素とのレベル差を非線形回路に入力し、非線形処理回路が、レベル差が予め定められた範囲にある場合に、ブロック歪みがあると判断してブロック歪量を出力するブロック歪除去装置が開示されている。
特許文献３には、ビットストリーム中に含まれていた付加情報の内のブロック量子化幅情報をブロック量子化幅値検出部で検出し、検出されたブロック量子化幅情報が、予め定められた値よりも大きな値を示す領域内に含まれている単位のブロックの境界部分、及び、前記した各領域毎に個別に設定されているブロック量子化幅値が、隣接する領域に設定されているブロック量子化幅値との間で大きな差値を示すブロック量子化幅を有する領域内に含まれている単位のブロックの境界部分についてフィルタリングが行なわれるように、制御信号発生部で発生させた制御信号を可変通過帯域低域通過濾波器に与えて、ブロック量子化幅値の大きさの差と適応的に高域成分を減少させるような信号処理を行なわせる復号化装置が開示されている。
国際公開第２０００／０４８４０２号パンフレット 特開平８−３１７３８９号公報 特開平８−１４９４７０号公報
しかし、上記の特許文献１の従来装置では、復号化装置で第１のＭＰＥＧ−２符号化画像データを復号した画像データと符号化パラメータとを同期させ、符号化装置に入力し、その符号化パラメータを利用して画像データを符号化することにより多重符号化による画質劣化を抑制しているが、第１のＭＰＥＧ−２符号化画像データのブロック歪を検出し、ブロック歪を軽減させることは出来ない。
また、上記の特許文献２、及び３記載の従来装置は、単に、ブロック歪を除去するのみであり、復号時に発生したブロック歪を符号化装置にて軽減させることができない。
更に、復号化装置と符号化装置間に上記の特許文献２、及び３記載の従来装置を接続した場合には、記憶装置（メモリ）が少なくとも１マクロブロックライン（ＭＰＥＧ−２におけるマクロブロックを画面の水平方向に並べたもの。例えば、１６ラインメモリ）以上必要となり、第１のＭＰＥＧ−２符号化画像データのブロック歪を軽減させるトランスコードを実現させるためには、トランスコード全体の処理時間の増加と、記憶装置（メモリ）の追加による回路規模の増大という課題がある。
従来装置のブロック図の１例に関し図６を用いて説明する。第１の符号化方法で符号化された画像データＳ１は復号回路部１でベースバンド画像データＳ３に復号され、復号時に分離した符号化パラメータ情報Ｓ４と共にデブロッキングフィルタ部２２に入力される。デブロッキングフィルタ部２２は少なくとも符号化ブロックが画像データの水平ラインに並べられるサイズの画像メモリ２３を持ち、符号化ブロックの水平・垂直境界のブロック歪を軽減させ、ベースバンド画像データＳ７を出力する。次に符号化回路部２により第２の符号化方法で符号化し、画像データＳ２を出力する。
本発明は上記の点に鑑みなされたものであり、第１の符号化方法で符号化された画像データを第２の符号化方法に従って再符号化を行う際、ブロック歪みの削減とメモリの削減を同時に満たす画像再符号方法、画像再符号化装置及び画像再符号化プログラムを提供することを目的とする。
本発明の第１の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記符号化回路部は、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化方法が提供される。
また、本発明の第２の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記符号化回路部は、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化方法が提供される。
また、本発明の第の３観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記符号化回路部が、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高めるステップと、前記符号化回路部が、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高めるステップと、を更に備えることを特徴とする画像再符号化方法が提供される。
本発明の第４の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化装置が提供される。
また、本発明の第５の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化装置が提供される。
また、本発明の第６の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高める手段と、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高める手段と、を更に備えることを特徴とする画像再符号化装置が提供される。
本発明の第７の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、前記画像再符号化装置とは、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高める画像再符号化装置であることを特徴とする画像再符号化プログラムが提供される。
また、本発明の第８の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、前記画像再符号化装置とは、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高める画像再符号化装置であることを特徴とする画像再符号化プログラムが提供される。
また、本発明の第９の観点によれば、第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、前記画像再符号化装置とは、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、を備え、前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高める手段と、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高める手段と、を更に備える画像再符号化装置であることを特徴とする画像再符号化プログラムが提供される。
本発明の第１の効果は、第１の符号化方法に対応した復号化方法で復号した符号化パラメータ情報を第２の符号化方法に伝送することにより、第１の符号化方法に対応した復号化方法を行う復号装置と第２の符号化方法を行う符号化装置との間にブロック歪低減手段を設ける必要が無くなる。従って、回路規模を増加させることなく、画質劣化を抑制する画像再圧縮装置を提供することができる。
その理由は、第２の符号化方法に配置されているデブロッキングフィルタ部に第１の符号化で発生しているブロック歪情報によりブロック歪除去フィルタ係数を加えることにより第１の符号化方法で発生したブロック歪の低減を行うことである。
本発明の第２の効果は、第１の復号化方法に符号化ブロック内のブロック歪除去方法を備え、第１の符号化パラメータ情報からブロック歪の発生条件とブロック境界の差分情報からデブロッキングフィルタ係数情報を出力し、第２の符号化手段で第１の符号化手段で発生した符号化ブロック間のブロック歪と第２の符号化手段で発生するブロック歪を低減させることができ、符号化パラメータ情報を全て伝送しないため、回路規模が小さく画質劣化を抑制する画像再圧縮装置を提供することができる。
その理由は、第１の符号化パラメータ情報を伝送する配線が削減され、第２の符号化方法に配置されているデブロッキングフィルタ部に第１符号化でデブロッキングフィルタ係数情報によりブロック歪除去フィルタ係数を修正することにより第１の符号化方法で発生したブロック歪の低減を行うことである。
本発明の第１の実施の形態のブロック図である。 符号化フレームパラメータ情報の１例である。 符号化マクロブロックパラメータ情報の１例である。 本発明の第２の実施の形態のブロック図である。 符号化ブロックと直交変換ブロックとの関係の１例である。 従来装置の１例のブロック図である。
符号の説明
１ 復号回路部
２ 符号化回路部
３ 符号化情報生成部
４ イントラ予測部
５ 動き検出部
６ 画像メモリ部
７ 動き補償部
８ 選択部
９ 演算部
１０ 直交変換／量子化部
１１ 可変長符号部
１２ 逆量子化／逆変換部
１３ 演算部
１４ デブロッキングフィルタ部
１５ 復号化情報解析部
１６ 可変長復号部
１７ 逆量子化／逆変換部
１８ 演算部
１９ 動き補償部
２０ 画像メモリ部
２１ デブロッキングフィルタ部
２２ デブロッキングフィルタ部
２３ 画像メモリ部
Ｓ１ 第１の符号化方法で符号化された画像データ
Ｓ２ 第２の符号化方法で符号化された画像データ
Ｓ３ 復号後のベースバンド画像データ
Ｓ４ 第１の符号化パラメータ情報
Ｓ５ 復号時に符号化ブロック内のブロック歪が軽減されたベースバンド画像データ
Ｓ６ デブロッキングフィルタ係数情報
Ｓ７ 復号後第１の符号化によるブロック歪が軽減されたベースバンド画像データ
ＭＰＥＧ−２符号化パラメータ情報を入力しブロック歪が発生する条件と判定した場合、Ｈ．２６４符号化装置内のループフィルタを利用しブロック歪を軽減させる。
また、ＭＰＥＧ−２復号化時に符号化パラメータを利用してブロック歪を検出し、マクロブロック内のブロック歪に関してＭＰＥＧ−２復号化時にブロック歪除去フィルタにより軽減させ、復号化後の画像データとブロック歪除去フィルタ強度を、Ｈ．２６４符号化装置へ入力しＨ．２６４符号化装置ではブロック歪除去フィルタ強度情報からマクロブロック間のブロック歪除去のためのパラメータを変更する。
上記目的を達成するため、本発明の画像再符号化装置は、予め定めた複数の画素からなるブロック単位で画素データを第１の符号化方法により圧縮符号化して得られた画像データを復号し、復号化情報解析手段により復号時に圧縮画像データから第１の符号化方法の符号化パラメータ情報を抽出し復号画像データと同期して出力する。更に復号画像データを予め定めた複数の画素からなるブロックに分割し圧縮符号化を行う第２の符号化方法で符号化する際、第２の符号化方法には予めブロック歪を低減させる目的のデブロッキングフィルタを持ち、第１の符号化パラメータ情報からブロック境界部にブロック歪が発生するパタンと、ブロック境界の画素の差分値からデブロッキングフィルタ強度を決定しブロック歪を低減させることを特徴とする。
このような構成にすれば、第１の符号化方法の復号手段と、第２の符号化方法の符号手段との間に、第１の符号化方法により発生したブロック歪を低減させるブロック歪低減手段を加えず、第１の符号化方法により発生したブロック歪を低減させることが出来る。
また、本発明は、第１の符号化方法が予め定めた複数の画素からなる変換ブロックと符号化ブロックを有し、符号化ブロック内に複数の変換ブロックが存在する場合、符号化データを符号化ブロック単位で復号する際、符号化ブロック内の変換ブロック境界のブロック歪を低減し、ブロック歪低減に用いたデブロッキング係数情報を復号画像データと同期して出力する。更に復号画像データを予め定めた複数の画素からなるブロックに分割し圧縮符号化を行う第２の符号化方法で符号化する際、第２の符号化方法には予めブロック歪を低減させる目的のデブロッキングフィルタを持ち、第１の符号化方法により発生した符号化ブロック境界部のブロック歪を第２の符号化方法のブロック歪の低減を目的に準備されているデブロッキングフィルタ部に第１のデブロッキング係数情報を入力することで、合わせてブロック歪を低減させることを特徴とする。
このような構成にすれば、第１の符号化方法の復号手段と、第２の符号化方法の符号手段との間に、第１の符号化方法により発生したブロック歪を低減させるブロック歪低減手段を加えず、第１の符号化方法により発生したブロック歪を低減させることが出来、合わせて第１の符号方法の復号手段と第２の符号化方法の復号手段との間の符号化パラメータ情報の削減が出来る。
以下、図面を参照して本発明を実施するための最良の形態について詳細に説明する。
本実施形態では、第１の圧縮符号化方法をＩＳＯ／ＩＥＣ１３８１８−２（ＭＰＥＧ−２）規格として述べるが、ＩＳＯ／ＩＥＣ１０９１８−１（ＪＰＥＧ）規格であっても、ＩＳＯ／ＩＥＣ１１１７２−２（ＭＰＥＧ−１）規格であっても良い。また、第２の圧縮符号化方法をＩＳＯ／ＩＥＣ１４４９６−１０（ＭＰＥＧ−４／ＡＶＣ、Ｈ．２６４）規格として述べるが、ＩＳＯ／ＩＥＣ１４４９６−２（ＭＰＥＧ−４／Ｖｉｓｕａｌ）規格であっても良い。
図１は本発明の実施形態における画像再符号化装置の構成を示すものであり、復号回路部１と、符号化回路部２を備えている。符号化回路部２は、符号化情報生成部３と、イントラ予測部４と、動き検出部５と、画像メモリ部６と、動き補償部７と、選択部８と、デブロッキングフィルタ部１４と、加算器１３と、減算器９と直交変換／量子化部１０と、逆量子化／逆変換部１２と、可変長符号化部１１を備える。
復号回路部１では、第１の符号化方法（以降ＭＰＥＧ−２とする。）で符号化されている画像データＳ１を復号し、復号後のベースバンド画像データＳ３を出力するとともに、第１の符号化パラメータ情報Ｓ４を出力する。符号化パラメータ情報Ｓ４には様々な書式や情報が考えられるが、本実施の形態に即した１例を図２および図３に示す。図２に示すパラメータ情報は１フレーム毎に出力される情報で、図３に示すパラメータ情報は１マクロブロック毎に出力される情報であり、これらの情報は１連の情報として連続して伝送されても良いし別ファイルとして伝送されても良い。
次に符号化回路部２では第２の符号化方法（以降Ｈ．２６４とする）で画像データを符号化したデータＳ２を出力するが、符号化パラメータ情報Ｓ４を用いた符号化処理を行うため、詳細動作に関し説明する。
ベースバンド画像データＳ３はイントラ予測部４と、動き検出部５と、減算器９に分配される。イントラ予測部４に入力されたデータは、選択部８と、加算器１３を通してデブロッキングフィルタ部１４に入力される。デブロッキングフィルタ部１４は、第１の符号化方法でブロック境界部であった画像データに対しデブロッキング処理を施す。デブロッキングフィルタ部１４の出力は再度イントラ予測部４に入力される。
ここで、第１の符号化方法によるブロック境界部の検出方法は、画像データから直接検出する方法であってもよいし、符号化パラメータ情報Ｓ４を用いる方法であっても良い。一例として、ＭＰＥＧ−２符号化方法の場合には、ＤＣＴのブロックサイズが８×８であるため、現在の画素番号を８で除算して得られた剰余が０であれば境界であり、その他の値であれば境界ではない。
イントラ予測部４ではデブロッキング処理された画像データを規格で定められた画面内符号化方法のうち符号化効率の良い方法を選択しイントラ予測処理を施し選択部８に入力する。また、動き検出部５に入力された画像データＳ３は画像メモリ部６に予め記録された参照画像データとの間で動き検出処理が施される。動き検出された画像データＳ３は、動き補償部７で動き補償処理を施され選択部８に入力される。選択部８は、イントラ予測のデータと動き予測のデータとのうちのどちらかのデータを選択する。選択された信号は、減算器９に入力される。ベースバンド画像データＳ３と選択部８から出力された信号との差分情報は、直交変換／量子化部１０に入力され直交変換および量子化が施される。直交変換／量子化部１０からの出力は可変長符号部１１を介して第２の符号データＳ２として出力される。
また、直交変換および量子化されたデータは逆量子化／逆変換部１２で逆量子化および逆変換が施される。逆量子化／逆変換部１２の出力データは、加算器１３で、予測画像データと加算処理をされる。この結果得られる部分的な圧縮伸張画像データは、デブロッキングフィルタ部１４に入力される。デブロッキングフィルタ部１４では、部分的な圧縮伸張画像データが第２の符号化方法によりブロック歪が軽減される。デブロッキングフィルタ部１４の出力信号は、参照画像データとして画像メモリ部６に記憶される。
符号化パラメータ情報Ｓ４は符号化情報生成部３に入力される。符号化情報生成部３は、入力された符号化パラメータ情報Ｓ４およびイントラ予測および動き予測のデータからデブロッキングフィルタ強度や量子化スケールを決定し、符号化回路部２の制御を行う。
従来Ｈ．２６４ではデブロッキングフィルタ強度の決定は量子化パラメータに応じてデブロッキングフィルタのＯｎ／Ｏｆｆや強度が変更され、時にはそれにオフセットを加えて強度を変更することが可能である。これらフィルタ処理のオフセット値は符号化パラメータとして符号化データに加えられるが、本発明ではそれに加えて、ＭＰＥＧ−２方式で符号化された時のブロック境界に対し本デブロッキング処理を行うことでＭＰＥＧ−２符号化によるブロック歪を軽減させている。
ＭＰＥＧ−２符号化方式のブロック歪を軽減させるためのデブロッキングフィルタ強度の決定は、符号化パラメータ情報Ｓ４に含まれるピクチャタイプ情報（Ｐｉｃｔｕｒｅ Ｃｏｄｉｎｇ Ｔｙｐｅ）や、マクロブロックタイプ情報（Ｍａｃｒｏｂｌｏｃｋ Ｔｙｐｅ Ｉｎｔｒａ）や、量子化スケール（Ｑ Ｓｃａｌｅ）やＤＣＴタイプ情報（ＤＣＴ Ｔｙｐｅ）を用いる。
例えば、ピクチャタイプ情報がイントラピクチャもしくはマクロブロックタイプ情報がイントラタイプの場合にデブロッキングフィルタをＯｎにする。
また、ＭＰＥＧ−２の量子化スケールに応じてデブロッキングフィルタ強度を変更する方法などがある。量子化が粗い場合に、量子化が細かい場合に比べて、デブロッキングフィルタの強度を強くする。
更に、ＤＣＴタイプ情報を利用してＤＣＴタイプがフレームＤＣＴである場合には水平方向および垂直方向のデブロッキングフィルタをＯｎにし、フィールドＤＣＴである場合には水平方向のデブロッキングフィルタのみＯｎにすることもできる。
これらのパラメータ情報の組み合わせによりデブロッキングフィルタ強度の変更やＯｎ／Ｏｆｆといった動作を行うことにより更にＭＰＥＧ−２のブロック歪の軽減効果を得ることが可能になる。
更に、画像の複雑度を示すアクティビティ値を指標にしてデブロッキングフィルタのＯｎ／Ｏｆｆを決定することも考えられる。画像のアクティブティ値として、隣り合う画素の差を加算した値や、各画素とブロック内画素の平均値の差分の２乗和を算出して得た分散値、等のうちで、どの値が算出される構成様態のものであってもよい。
画像のアクティビティ値を指標とする場合のデブロッキングフィルタＯｎ／Ｏｆｆの条件に関する１例を示す。隣接するブロックにおけるブロック内画素の平均値をＭ１、Ｍ２とし、前記ブロック内画素の平均値の差分をΔ１、それぞれのブロックのアクティビティ値をＡ１、Ａ２、及びブロック境界の画素値をｎｉ、ｐｉ（ｉは０からｎまでの数でｎは符号化ブロックの１辺の画素数）とし、ブロック境界の画素値の差分値をΔｄｉとし、前記ブロック境界の画素毎の差分値の平均値をΔｄとした場合、以下の式の条件によりデブロッキングフィルタのＯｎ／Ｏｆｆを決定する。
Δ１＝｜Ｍ１−Ｍ２｜
Δｄｉ＝｜ｎｉ−ｐｉ｜
Δｄ＝Σ（Δｄｉ）／ｎ
アクティビティ値Ａ１、Ａ２の閾値をＴＨと設定し、少なくともＡ１、Ａ２のどちらか１方が閾値ＴＨより小さく、ΔｄがΔ１より大きい場合にデブロッキングフィルタをＯｎにする。
なお、デブロッキングフィルタ部１４では、本発明による第１の符号化方法に対応したデブロッキングフィルタ処理と、Ｈ．２６４などの規格に従った第２の符号化方法によるデブロッキングフィルタ処理とを重畳的にかける。すなわち、例えば、本発明による第１の符号化方法に対応したデブロッキングフィルタ処理を行った後に、Ｈ．２６４などの規格に従った第２の符号化方法によるデブロッキングフィルタ処理をかけたり、これとは逆の順序によりこの２種類のデブロッキングフィルタ処理を行う。
以上、１連の動作によりＭＰＥＧ−２符号化により発生したブロック歪をＨ．２６４符号化の際に低減でき、本発明により従来の問題点は解決できる。
図４は本発明の他の一実施形態における画像再符号化装置の構成を示すものであり大きく分けて復号回路部１と符号化回路部２を備える。復号回路部１はＭＰＥＧ−２符号化画像データＳ１を復号化するために、復号化情報解析部１５と、可変長復号部１６と、逆量子化／逆変換部１７と、加算部１８と、動き補償部１９と、画像メモリ部２０と、デブロッキングフィルタ部２１とを備える。符号化回路部２は復号回路部１５の出力をＨ．２６４符号化画像データＳ２に符号化するために、符号化情報生成部３と、イントラ予測部４と、動き検出部５と、画像メモリ部６と、動き補償部７と、選択部８と、減算器９と、直交変換／量子化部１０と、可変長符号部１１と、逆量子化／逆変換部１２と、加算器１３と、デブロッキングフィルタ部１４とを備える。
まず、復号回路部１の動作に関し図面を利用して説明する。復号化情報解析部１５は、ＭＰＥＧ−２画像データＳ１からヘッダ情報を検出する。可変長復号部１６は、ヘッダ情報に基づいて可変長データを復号し、復号結果を固定長データとして出力する。更に、復号化情報解析部１５は、ヘッダ情報からピクチャタイプ情報や量子化パラメータ情報や動きベクトル情報などの符号化パラメータ情報を抽出する。前記固定長データは逆量子化／逆変換部１７に入力され、前記量子化パラメータ情報などにより逆量子化および逆直交変換される。加算器１８は、前記ピクチャタイプ情報が当該マクロブロックがフレーム間符号化ブロックであることを示しているのであれば、動き補償部１９から出力される参照画像データを逆量子化／逆変換部１７の出力に加算する。加算器１８は、前記ピクチャタイプ情報が当該マクロブロックがフレーム内符号化ブロックであれば、逆量子化／逆変換部１７の出力をそのまま出力する。加算器１８の出力は、デブロッキングフィルタ部２１に入力される。デブロッキングフィルタ部２１は、入力した信号のブロック歪を軽減させた後、その結果をベースバンド画像データＳ５として出力する。また、前記ピクチャタイプ情報が当該ピクチャがＩピクチャまたはＰピクチャであることを示している場合には前記画像データＳ５は、参照画像データとして画像メモリ部２０に格納される。画像メモリ部２０から読み出される信号は、逆量子化／逆変換部１７から出力される信号と加算される前に、前記動きベクトル情報に応じて動き補償部１９にて動き補償される。
デブロッキングフィルタ部２１では、図５に斜線で示すようなマクロブロック内の直交変換ブロック境界に対してブロック歪を軽減させる処理を行うものである。デブロッキングフィルタ部２１は、具体的には、ＬＰＦや線形補間処理部などである。
本実施形態ではＨ．２６４で用いられているデブロッキングフィルタを使用することとして説明する。復号化情報解析部１５ではデブロッキングフィルタ部１４のＯｎ／Ｏｆｆ制御や強度制御のためのデブロッキングフィルタ係数情報Ｓ６を生成する。前記デブロッキングフィルタ係数情報Ｓ６としては、ピクチャタイプ情報（Ｐｉｃｔｕｒｅ Ｃｏｄｉｎｇ Ｔｙｐｅ）や、マクロブロックタイプ情報（Ｍａｃｒｏｂｌｏｃｋ Ｔｙｐｅ Ｉｎｔｒａ）や、量子化スケール（Ｑ Ｓｃａｌｅ）やＤＣＴタイプ情報（ＤＣＴ Ｔｙｐｅ）を用いる。
例えば、ピクチャタイプ情報がイントラピクチャもしくはマクロブロックタイプ情報がイントラタイプの場合にデブロッキングフィルタをＯｎにする。
また、ＭＰＥＧ−２の量子化スケールに応じてデブロッキングフィルタ強度を変更する方法などがある。すなわち、量子化スケールが粗い場合に、デブロッキングフィルタの強度を強くする。
更に、ＤＣＴタイプ情報を利用してＤＣＴタイプがフレームＤＣＴである場合には水平方向および垂直方向のデブロッキングフィルタをＯｎにし、フィールドＤＣＴである場合には水平方向のデブロッキングフィルタのみＯｎにすることもできる。
これらのパラメータ情報の組み合わせによりデブロッキングの強度が構成されている。１例としてはマクロブロック毎に８ビットの整数を用意しデブロッキング強度を０から２５５までの範囲で変化させることができるようにする。
次に符号化回路部２の動作に関し図面を利用して説明する。ベースバンド画像データＳ５はイントラ予測部４と、動き検出部５と、減算部９に分配される。イントラ予測部４に入力されたデータは、選択部８と加算部１３を介して通してデブロッキングフィルタ部１４に入力される。デブロッキングフィルタ部１４は、Ｈ．２６４に従ったデブロッキングフィルタ処理に加え、第１の符号化方法に従って、第１の符号化方法における符号化ブロック境界部にある画像データに対しデブロッキング処理を施す。デブロッキングフィルタ部１４の出力は再度イントラ予測部４に入力される。
デブロッキングフィルタ部１４は、Ｈ．２６４に従ったデブロッキング処理に加え、デブロッキングフィルタ係数情報Ｓ６に従い符号化ブロック境界部のデブロッキング処理を行う。
イントラ予測部４は、デブロッキング処理された画像データを規格で定められた画面内符号化方法のうち符号化効率の良い方法を選択しイントラ予測処理を施し、処理後の信号を選択部８に出力する。また、動き検出部５に入力された画像データＳ５は、画像メモリ部６に予め格納されている参照画像データとの間で動き検出処理がされる。動き補償部７は、動き検出処理により検出された動きベクトルに従って、画像データＳ５に対して動き補償を行い、その結果得られる信号を選択部８に出力する。
選択部８ではイントラ予測部４からの信号又は動き補償部７からの信号のうちのどちらかのデータを選択する。選択部８で選択された信号は、減算部９に入力される。ベースバンド画像データＳ５から選択部８からの信号を差し引くことにより得られた差分信号は、直交変換／量子化部１０に入力され、ここで、直交変換および量子化を施される。直交変換／量子化部１０の出力は、可変長符号部１１を介して第２の符号データＳ２として出力される。また、直交変換および量子化されたデータは逆量子化／逆変換部１２で逆量子化および逆変換を施される。加算部１３は、選択部８からの予測信号と、逆量子化／逆変換部１２からの予測誤差信号との加算処理を行い部分的な圧縮伸張画像データを生成する。デブロッキングフィルタ部１４は、加算処理により得られる信号に対し、第１の符号化処理によるブロック歪みを軽減させる処理及び第２の符号化方法によるブロック歪を軽減させる処理を行う。処理結果は、参照画像データとして画像メモリ部６に格納される。
以上、１連の動作によりＭＰＥＧ−２符号化により発生したブロック歪をＨ．２６４符号化の際に低減でき、本発明により従来の問題点は解決できる。
本願は、日本の特願２００７−０１１３２９（２００７年１月２２日に出願）に基づいたものであり、又、特願２００７−０１１３２９に基づくパリ条約の優先権を主張するものである。特願２００７−０１１３２９の開示内容は、特願２００７−０１１３２９を参照することにより本明細書に援用される。
本発明の代表的な実施形態が詳細に述べられたが、様々な変更(changes)、置き換え(substitutions)及び選択(alternatives)が請求項で定義された発明の精神と範囲から逸脱することなくなされることが理解されるべきである。また、仮にクレームが出願手続きにおいて補正されたとしても、クレームされた発明の均等の範囲は維持されるものと発明者は意図する。
本発明は画像の再符号化に利用することができる。

Claims (21)

  1. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、
    符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、
    前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記符号化回路部は、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化方法。
  2. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、
    符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、
    前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記符号化回路部は、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化方法。
  3. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化方法であって、
    符号化回路部が、前記復号前の画像データを利用してデブロッキングフィルタ強度を決定するステップと、
    前記符号化回路部が、前記決定したデブロッキングフィルタ強度に基づいて、当該符号化回路部のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化するステップと、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記符号化回路部が、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高めるステップと、
    前記符号化回路部が、前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高めるステップと、
    を更に備えることを特徴とする画像再符号化方法。
  4. 前記復号前の画像データは、ピクチャタイプ情報及びマクロブロックタイプ情報を前記第１の符号化方法の符号化パラメータとして含み、ピクチャタイプがイントラピクチャである場合又はマクロブロックタイプがイントラタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１乃至３の何れか１項に記載の画像再符号化方法。
  5. 前記復号前の画像データは、量子化スケール情報を前記第１の符号化方法の符号化パラメータとして含み、量子化スケールが粗いほど、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１乃至４の何れか１項に記載の画像再符号化方法。
  6. 前記符号化回路部が、前記復号後の画像データ内の前記第１の直交変換ブロック毎に画像の複雑度を表すアクティビティ情報を算出するアクティビティ算出ステップを更に備え、アクティビティが閾値より小さい場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１乃至５の何れか１項に記載の画像再符号化方法。
  7. 前記復号は、前記復号前の画像データ内の第１の直交変換ブロックが接するブロック境界部分に前記デブロッキング処理とは別途のデブロッキング処理を施しつつ、前記画像データを復号することにより行われることを特徴とする請求項１乃至６の何れか１項に記載の画像再符号化方法。
  8. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化装置。
  9. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高めることを特徴とする画像再符号化装置。
  10. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置であって、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高める手段と、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高める手段と、
    を更に備えることを特徴とする画像再符号化装置。
  11. 前記復号前の画像データは、ピクチャタイプ情報及びマクロブロックタイプ情報を前記第１の符号化方法の符号化パラメータとして含み、ピクチャタイプがイントラピクチャである場合又はマクロブロックタイプがイントラタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項８乃至１０の何れか１項に記載の画像再符号化装置。
  12. 前記復号前の画像データは、量子化スケール情報を前記第１の符号化方法の符号化パラメータとして含み、量子化スケールが粗いほど、前記デブロッキングフィルタ強度を高めることを特徴とする請求項８乃至１１の何れか１項に記載の画像再符号化装置。
  13. 前記復号後の画像データ内の前記第１の直交変換ブロック毎に画像の複雑度を表すアクティビティ情報を算出するアクティビティ算出手段を更に備え、アクティビティが閾値より小さい場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項８乃至１２の何れか１項に記載の画像再符号化装置。
  14. 前記復号は、前記復号前の画像データ内の第１の直交変換ブロックが接するブロック境界部分に前記デブロッキング処理とは別途のデブロッキング処理を施しつつ、前記画像データを復号することにより行われることを特徴とする請求項８乃至１３の何れか１項に記載の画像再符号化装置。
  15. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、
    前記画像再符号化装置とは、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、前記デブロッキングフィルタ強度を高める画像再符号化装置であることを特徴とする画像再符号化プログラム。
  16. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、
    前記画像再符号化装置とは、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、第１の符号化方法の水平方向のブロック境界部分の前記デブロッキングフィルタ強度を高める画像再符号化装置であることを特徴とする画像再符号化プログラム。
  17. 第１の符号化方法で符号化された画像データであって、第１のブロック毎に直交変換され、複数の第１の直交変換ブロックを符号化ブロック単位とする画像データを復号し、復号された画像データを第２の符号化方法で第２のブロック毎に再符号化する画像再符号化装置としてコンピュータを機能させるための画像再符号化プログラムであって、
    前記画像再符号化装置とは、
    前記復号前の画像データを利用してデブロッキングフィルタ強度を決定する手段と、
    前記決定したデブロッキングフィルタ強度に基づいて、符号化のループ内において逆量子化及び逆変換した前記復号後の画像データ内の第１の直交変換ブロックが接するブロック境界部分にデブロッキング処理を施しつつ、前記復号後の画像データを前記第２の符号化方法で符号化する手段と、
    を備え、
    前記復号前の画像データは、ＤＣＴタイプ情報を前記第１の符号化方法の符号化パラメータ情報として含み、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフレームタイプである場合、第１の符号化方法におけるブロック境界部分に対し前記デブロッキングフィルタ強度を高める手段と、
    前記ＤＣＴタイプ情報が示すＤＣＴタイプがフィールドタイプである場合、前記第１の符号化方法におけるブロックの水平境界部分に対し前記デブロッキングフィルタ強度を高める手段と、
    を更に備える画像再符号化装置であることを特徴とする画像再符号化プログラム。
  18. 前記復号前の画像データは、ピクチャタイプ情報及びマクロブロックタイプ情報を前記第１の符号化方法の符号化パラメータとして含み、ピクチャタイプがイントラピクチャである場合又はマクロブロックタイプがイントラタイプである場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１５乃至１７の何れか１項に記載の画像再符号化プログラム。
  19. 前記復号前の画像データは、量子化スケール情報を前記第１の符号化方法の符号化パラメータとして含み、量子化スケールが粗いほど、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１５乃至１８の何れか１項に記載の画像再符号化プログラム。
  20. 前記画像再符号化装置が、前記復号後の画像データ内の前記第１の直交変換ブロック毎に画像の複雑度を表すアクティビティ情報を算出するアクティビティ算出手段を更に備え、アクティビティが閾値より小さい場合、前記デブロッキングフィルタ強度を高めることを特徴とする請求項１５乃至１９の何れか１項に記載の画像再符号化プログラム。
  21. 前記復号は、前記復号前の画像データ内の第１の直交変換ブロックが接するブロック境界部分に前記デブロッキング処理とは別途のデブロッキング処理を施しつつ、前記画像データを復号することにより行われることを特徴とする請求項１５乃至２０の何れか１項に記載の画像再符号化プログラム。
JP2008555024A 2007-01-22 2008-01-17 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム Active JP5418756B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008555024A JP5418756B2 (ja) 2007-01-22 2008-01-17 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2007011329 2007-01-22
JP2007011329 2007-01-22
JP2008555024A JP5418756B2 (ja) 2007-01-22 2008-01-17 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム
PCT/JP2008/050490 WO2008090793A1 (ja) 2007-01-22 2008-01-17 画像再符号化装置、画像再符号化方法及び画像符号化プログラム

Publications (2)

Publication Number Publication Date
JPWO2008090793A1 JPWO2008090793A1 (ja) 2010-05-20
JP5418756B2 true JP5418756B2 (ja) 2014-02-19

Family

ID=39644369

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008555024A Active JP5418756B2 (ja) 2007-01-22 2008-01-17 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム

Country Status (5)

Country Link
US (1) US8326064B2 (ja)
JP (1) JP5418756B2 (ja)
CN (1) CN101589624A (ja)
TW (1) TW200847792A (ja)
WO (1) WO2008090793A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017217656A1 (ko) * 2016-06-15 2017-12-21 주식회사 에벤에셀케이 동영상 압축방법, 장치 및 이에 대한 컴퓨터 프로그램
KR20170141390A (ko) * 2016-06-15 2017-12-26 주식회사 에벤에셀케이 동영상 압축방법, 장치 및 이에 대한 컴퓨터 프로그램

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101589624A (zh) * 2007-01-22 2009-11-25 日本电气株式会社 图像再编码设备、图像再编码方法以及图像编码程序
JP4847890B2 (ja) * 2007-02-16 2011-12-28 パナソニック株式会社 符号化方式変換装置
JP4656452B2 (ja) * 2008-05-20 2011-03-23 ソニー株式会社 画像信号処理装置および画像信号処理方法、予測係数生成装置および予測係数生成処理方法、並びに各方法をコンピュータに実行させるためのプログラム
JP5137687B2 (ja) * 2008-05-23 2013-02-06 キヤノン株式会社 復号装置及び復号方法、プログラム
JP5195250B2 (ja) * 2008-10-03 2013-05-08 ソニー株式会社 画像表示システム及び画像表示装置
FR2951891B1 (fr) * 2009-10-22 2011-12-30 Viaccess Sa Procedes d'emission et de reception de flux d'images, support d'enregistrement, dispositif d'emission, module de transformation pour ces procedes
CN102104777B (zh) * 2009-12-16 2016-10-05 晨星软件研发(深圳)有限公司 区块边界侦测方法及区块边界侦测装置
JP2011151431A (ja) * 2009-12-25 2011-08-04 Sony Corp 画像処理装置および方法
US8471890B1 (en) * 2009-12-30 2013-06-25 Insors Integrated Communications Adaptive video communication channel
CN105163118B (zh) * 2010-07-20 2019-11-26 Sk电信有限公司 用于解码视频信号的解码方法
KR20120012385A (ko) * 2010-07-31 2012-02-09 오수미 인트라 예측 부호화 장치
RU2691962C2 (ru) * 2010-12-07 2019-06-19 Сони Корпорейшн Устройство обработки изображений и способ обработки изображений
EP2728877A4 (en) * 2011-06-30 2014-12-03 Mitsubishi Electric Corp IMAGE ENCODING DEVICE, IMAGE DECODING DEVICE, IMAGE ENCODING METHOD, AND IMAGE DECODING METHOD
US20130170543A1 (en) * 2011-12-30 2013-07-04 Ning Lu Systems, methods, and computer program products for streaming out of data for video transcoding and other applications
AR092786A1 (es) * 2012-01-09 2015-05-06 Jang Min Metodos para eliminar artefactos de bloque
EP2838259A4 (en) * 2012-04-13 2015-12-16 Mitsubishi Electric Corp APPARATUS FOR CODING MOVEMENT PICTURES, DEVICE FOR DECODING MOVEMENT PICTURES, METHOD FOR CREATING MOVEMENT IMAGES AND METHOD FOR DECODING MOVEMENT PICTURES
RU2616548C2 (ru) * 2012-10-19 2017-04-17 КОЛЕН, Жан-Клод Обратимый способ преобразования файла, закодированного первым кодированием, в файл, закодированный вторым кодированием
AU2016273973A1 (en) * 2016-12-16 2018-07-05 Canon Kabushiki Kaisha Transcode PCL delta-row compressed image to edges
US11115661B2 (en) * 2019-03-17 2021-09-07 International Business Machines Corporation Low delay content disarm and reconstruction (CDR) of live streaming video
CN112004090B (zh) * 2020-07-14 2024-09-10 浙江大华技术股份有限公司 目标边界确定方法、计算机设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07170512A (ja) * 1993-11-24 1995-07-04 Matsushita Electric Ind Co Ltd 画像信号復号化装置におけるポストフィルタ処理方法およびポストフィルタ処理装置
JPH1056646A (ja) * 1996-08-07 1998-02-24 Mitsubishi Electric Corp 映像信号復号化装置
JP2001258026A (ja) * 2000-03-13 2001-09-21 Fujitsu Ltd 画像符号化方式変換装置
JP2004140863A (ja) * 2003-12-18 2004-05-13 Sharp Corp 動画像復号装置
JP2004328634A (ja) * 2003-04-28 2004-11-18 Sony Corp 画像復号化装置及び方法
JP2007336468A (ja) * 2006-06-19 2007-12-27 Sharp Corp 再符号化装置、再符号化方法およびプログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2940422B2 (ja) 1994-11-24 1999-08-25 日本ビクター株式会社 変換符号化された画像データの復号化時に生じるブロック歪の低減方法及び変換符号化された画像データの復号化装置
JP3149729B2 (ja) 1995-05-15 2001-03-26 松下電器産業株式会社 ブロック歪除去装置
RU2154918C1 (ru) * 1998-08-01 2000-08-20 Самсунг Электроникс Ко., Лтд. Способ и устройство для цикл-фильтрации данных изображения
US6434197B1 (en) * 1999-01-07 2002-08-13 General Instrument Corporation Multi-functional transcoder for compressed bit streams
ES2569491T3 (es) 1999-02-09 2016-05-11 Sony Corporation Sistema de codificación y método asociado
EP1193649A1 (en) * 2000-09-28 2002-04-03 Sony International (Europe) GmbH Quality rating function for a discrete decoded picture
JP2002199403A (ja) 2000-10-20 2002-07-12 Matsushita Electric Ind Co Ltd ブロック歪み検出方法、ブロック歪み検出装置、ブロック歪み除去方法およびブロック歪み除去装置
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
US7570818B2 (en) * 2003-10-17 2009-08-04 Hewlett-Packard Development Company, L.P. Method for deblocking and transcoding a media stream
NO320048B1 (no) * 2004-06-14 2005-10-17 Tandberg Telecom As Fremgangsmate for chroma de-blokking
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP4680608B2 (ja) 2005-01-17 2011-05-11 パナソニック株式会社 画像復号装置及び方法
JP2006203724A (ja) 2005-01-24 2006-08-03 Toshiba Corp 画像圧縮装置及び画像圧縮方法
JP4129006B2 (ja) * 2005-02-23 2008-07-30 日本電信電話株式会社 動画像再符号化方法、動画像再符号化装置、動画像再符号化プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体
US8213495B2 (en) * 2006-02-06 2012-07-03 Panasonic Corporation Picture decoding method and picture decoding apparatus
CN101589624A (zh) * 2007-01-22 2009-11-25 日本电气株式会社 图像再编码设备、图像再编码方法以及图像编码程序
TWI386068B (zh) * 2008-10-22 2013-02-11 Nippon Telegraph & Telephone 解塊處理方法、解塊處理裝置、解塊處理程式及記錄該程式之可由電腦讀取之記錄媒體
US8681875B2 (en) * 2008-11-25 2014-03-25 Stmicroelectronics Asia Pacific Pte., Ltd. Apparatus and method for coding block boundary detection using interpolated autocorrelation
JP4703759B2 (ja) * 2009-11-27 2011-06-15 株式会社東芝 画像処理装置および同装置における画像処理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07170512A (ja) * 1993-11-24 1995-07-04 Matsushita Electric Ind Co Ltd 画像信号復号化装置におけるポストフィルタ処理方法およびポストフィルタ処理装置
JPH1056646A (ja) * 1996-08-07 1998-02-24 Mitsubishi Electric Corp 映像信号復号化装置
JP2001258026A (ja) * 2000-03-13 2001-09-21 Fujitsu Ltd 画像符号化方式変換装置
JP2004328634A (ja) * 2003-04-28 2004-11-18 Sony Corp 画像復号化装置及び方法
JP2004140863A (ja) * 2003-12-18 2004-05-13 Sharp Corp 動画像復号装置
JP2007336468A (ja) * 2006-06-19 2007-12-27 Sharp Corp 再符号化装置、再符号化方法およびプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017217656A1 (ko) * 2016-06-15 2017-12-21 주식회사 에벤에셀케이 동영상 압축방법, 장치 및 이에 대한 컴퓨터 프로그램
KR20170141390A (ko) * 2016-06-15 2017-12-26 주식회사 에벤에셀케이 동영상 압축방법, 장치 및 이에 대한 컴퓨터 프로그램
KR101930389B1 (ko) * 2016-06-15 2019-01-02 주식회사 에벤에셀케이 동영상 압축방법, 장치 및 이에 대한 컴퓨터 프로그램

Also Published As

Publication number Publication date
JPWO2008090793A1 (ja) 2010-05-20
WO2008090793A1 (ja) 2008-07-31
US8326064B2 (en) 2012-12-04
US20100086225A1 (en) 2010-04-08
CN101589624A (zh) 2009-11-25
TW200847792A (en) 2008-12-01

Similar Documents

Publication Publication Date Title
JP5418756B2 (ja) 画像再符号化装置、画像再符号化方法及び画像再符号化プログラム
JP6618439B2 (ja) 動画像符号化装置、動画像符号化方法、動画像復号装置および動画像復号方法
JP4769605B2 (ja) 動画像符号装置及び方法
CN104396245B (zh) 用于对图像进行编码或解码的方法和装置
EP2755388B1 (en) Method, device, and program for encoding and decoding image
WO2010004939A1 (ja) 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
KR20070090700A (ko) 영상의 인트라 예측 부호화, 복호화 방법 및 장치
KR20120079180A (ko) 동화상 복호화 방법 및 장치
JP2008219870A (ja) 動画像符号化方法及び動画像符号化装置
WO2013089129A1 (ja) 画像符号化及び復号方法、装置、プログラム
JP2014075652A (ja) 画像符号化装置及び方法
KR20110091748A (ko) 동화상 부호화 장치 및 동화상 복호 장치
JP5100572B2 (ja) 符号化装置
KR101223780B1 (ko) 압축 화상 노이즈 제거 장치와 재생 장치
JP2008166916A (ja) イントラ予測符号化装置およびイントラ予測符号化方法
JP2006270851A (ja) 画像符号化装置及び画像復号装置
JP2009005217A (ja) 画像符号化方法，画像復号方法，画像符号化装置，画像復号装置，画像符号化プログラム，画像復号プログラムおよびコンピュータ読み取り可能な記録媒体
JP2005311512A (ja) エラーコンシールメント方法及び復号器
KR20220024120A (ko) 부호화 장치, 복호 장치, 및 프로그램
US20160212420A1 (en) Method for coding a sequence of digital images
JP5885886B2 (ja) 画像解析装置及び画像解析方法
JP5235818B2 (ja) 動画像符号化装置、動画像符号化装置の制御方法及びプログラム
KR20110067648A (ko) 영상 부호화/복호화 방법 및 이를 수행하는 장치
JP2006101397A (ja) 動画像符号化装置及び動画像符号化プログラム
JP2013017085A (ja) 画像符号化装置及び画像符号化方法

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20101020

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20101020

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130719

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130913

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131023

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131105

R150 Certificate of patent or registration of utility model

Ref document number: 5418756

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150