JP2003309851A - 映像データ変換装置および映像データ変換方法 - Google Patents

映像データ変換装置および映像データ変換方法

Info

Publication number
JP2003309851A
JP2003309851A JP2002112860A JP2002112860A JP2003309851A JP 2003309851 A JP2003309851 A JP 2003309851A JP 2002112860 A JP2002112860 A JP 2002112860A JP 2002112860 A JP2002112860 A JP 2002112860A JP 2003309851 A JP2003309851 A JP 2003309851A
Authority
JP
Japan
Prior art keywords
motion vector
video
coding
mpeg
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002112860A
Other languages
English (en)
Other versions
JP4193406B2 (ja
Inventor
Shunichi Sekiguchi
俊一 関口
Etsuhisa Yamada
悦久 山田
Fuminobu Ogawa
文伸 小川
Kotaro Asai
光太郎 浅井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2002112860A priority Critical patent/JP4193406B2/ja
Priority to CNB038055872A priority patent/CN100353769C/zh
Priority to PCT/JP2003/004529 priority patent/WO2003088676A1/ja
Priority to KR20047016448A priority patent/KR100719647B1/ko
Priority to EP03746441A priority patent/EP1475971A4/en
Priority to US10/501,897 priority patent/US7526027B2/en
Publication of JP2003309851A publication Critical patent/JP2003309851A/ja
Application granted granted Critical
Publication of JP4193406B2 publication Critical patent/JP4193406B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Color Television Systems (AREA)

Abstract

(57)【要約】 【課題】 トランスコーディングシステムにおいて従来
技術では十分に検討されなかった第２の映像符号化方式
へのインパクトを考慮する。 【解決手段】 MPEG-2デコーダ部２では、可変長復号部
２AがMPEG-2規格に従い入力圧縮データ１のシンタック
ス解析を行ない、符号化モード情報３および動きベクト
ル情報４、予測残差信号２Bを生成する。予測残差信号
２Bは逆量子化部２C等を経て復号画像５となり、解像度
変換部６を介しMPEG-4エンコーダ部１０へ入力する。MP
EG-4エンコーダ部１０では、符号化パラメータ判定部１
０Ｂが動きベクトルマッピング部７が生成した動きベク
トル候補を用いた場合の予測効率を評価する予測誤差評
価値と、該動きベクトル候補を用いることによる動きベ
クトル符号量を評価する値とに基づいて、動きベクトル
を決定する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、各種国際標準の映
像圧縮・伸長方式に準拠したビデオ圧縮データの各種変
換を行なう映像データ変換装置および映像データ変換方
法の技術に関する。
【０００２】
【従来の技術】現在、デジタル放送(衛星、地上波、ケ
ーブル)、DVD、ビデオCD、インターネット、モバイルな
ど、放送・通信・パッケージにまたがる多様なアプリケ
ーションにおいて、MPEGやITU-T H.26xなどの国際標準
映像符号化方式が活用されている。これらの符号化方式
で圧縮された映像コンテンツを、サポートする符号化方
式、伝送ビットレート、空間解像度(フレームサイズ)、
時間解像度(フレームレート)などの条件が異なるプラッ
トフォームで再利用する要求が高まっており、これを背
景として映像トランスコーディング技術の研究開発が盛
んに行われている。
【０００３】特に、MPEGやITU-T H.26xなどの標準映像
符号化方式は、一貫して、動き補償予測(Motion Compen
sation、以下MC)による時間方向の信号冗長度削減、離
散コサイン変換(Discrete Cosine Transform、以下DCT)
による空間方向の信号冗長度削減を基本としているた
め、符号化データの構文(シンタックス)がある程度共通
化されており、このことを利用したビットストリームレ
ベルでの変換を考えることにより、上記標準映像符号化
方式を対象として演算負荷を低減したトランスコーディ
ング技術が主に検討されてきている。
【０００４】中でも、NTSC解像度(704×480画素フレー
ム、30frames/sec)のMPEG-2ビデオを、SIF(35２×２40
画素)の低フレームレートMPEG-4もしくはH.263ビデオへ
変換する問題は、既存MPEG-2コンテンツの有効活用の観
点から実用化要求が高く、ホットトピックとなっている
(例えば、Wang Xing Guo, Zheng Wei Guo, and IshfaqA
hmad, "MPEG-2 To MPEG-4 Transcoding", Workshop and
Exhibition on MPEG-4(WEMP) 2001.など)。
【０００５】このような映像トランスコーディング技術
においては、トランスコーダ入力のMPEG-2ビデオストリ
ームに含まれる動きベクトルを、MPEG-4符号化に利用可
能な動きベクトルへ変換する処理が重要となる。縦横1/
2の解像度変換が行われるため、入力MPEG-2ストリーム
の４つのマクロブロック領域が、ちょうどMPEG-4符号化
時の１マクロブロックの領域に対応する。この問題は、
もとの最大４本の動きベクトルから、解像度変換後の動
きベクトルを推定する問題であり、これまで多くの検討
報告がなされている。例えば、B.Shen他、"Adaptive Mo
tion-Vector Resampling for Compressed Video Downsa
mpling", IEEE Transactions on Circuits And Systems
for Video Technology, vol.9, no.6, Sep.1999では、
入力圧縮データにおいて予測残差が大きい動きベクトル
に大きな重みをかけて４つの動きベクトルの重み付け平
均をとる手法を報告している。これはいわば、入力圧縮
データ中の予測残差信号を判断基準として、そのアクテ
ィビティ値に基づいて変換すべき動きベクトルの値を決
定する手法であり、M.R.Hashemi他、"Compressed Domai
n Motion Vector Resampling for Downscaling of MPEG
Video", IEEE International Conference on Image Pr
ocessing, Kobe, Japan, Oct.1999においてもその変形
が報告されている。
【０００６】
【発明が解決しようとする課題】しかし、これらの技術
はいずれも、変換すべき動きベクトルが１本のケースに
適用が限定されるほか、変換後の動きベクトルの符号化
性能の意味での最適性を保証するものではない、という
課題があった。
【０００７】そこで、本発明は、従来技術に述べた第１
映像符号化方式から第２の映像符号化方式へのトランス
コーディングの際に、従来技術では十分に検討されなか
った第２の映像符号化方式へのインパクトを考慮した動
きベクトル再利用や符号化モード判定を行なうことので
きる映像データ変換装置および映像データ変換方法を提
供することを目的とする。
【０００８】また、インタレース信号からプログレッシ
ブ信号への変換に際して、フィールド単位の動きベクト
ルからプログレッシブフレーム単位の動きベクトルに変
換するための工夫も併せて提供する。
【０００９】なお、本発明は、MC+DCT映像符号化方式を
対象とするトランスコーディング全般について適用可能
である。
【００１０】
【課題を解決するための手段】上記課題を解決するた
め、本発明では、映像信号の各フレームを所定部分領域
に分割し、その単位で動きベクトル等の符号化パラメー
タを選択して符号化を行う第1の映像符号化方式に従う
映像符号化データを入力として、映像信号の各フレーム
を所定部分領域に分割し、その単位で符号化パラメータ
を選択して符号化を行う第2の映像符号化方式に従う映
像符号化データへの変換を行う映像データ変換装置であ
って、前記第1の映像符号化方式における所定部分領域
単位の符号化パラメータである動きベクトルから、前記
第2の映像符号化方式における所定の部分領域の単位で
用いる動きベクトルの候補を生成する動きベクトルマッ
ピング部と、前記生成された第2の映像符号化方式にお
ける動きベクトルの候補のうち、該動きベクトル候補を
用いた場合の予測効率を評価する予測誤差評価値と、該
動きベクトル候補を用いることによる動きベクトル符号
量を評価する値とに基づいて、第2の映像符号化方式に
おいて使用する動きベクトルを決定する符号化パラメー
タ判定部と、を備える映像データ変換装置であることを
特徴とする。これによって、第2の映像符号化方式にお
ける符号化性能のインパクトを考慮した動きベクトル変
換を可能となる。
【００１１】特に、前記動きベクトルマッピング部は、
前記第2の映像符号化方式がとりうる動き予測の種類の
分だけ動きベクトル候補を生成する映像データ変換装置
であることを特徴とする。
【００１２】また、さらに、前記第1の映像符号化方式
における所定部分領域単位の符号化パラメータである符
号化モードに基づき、前記第の映像符号化方式における
所定の部分領域の単位の符号化モードを推定する符号化
モード推定部を備え、前記符号化パラメータ判定部は、
符号化モードを決定する際、前記符号化モード推定部に
よって推定された符号化モードに基づいて前記第2の映
像符号化方式における所定部分領域単位で用いるべき符
号化モードを強制的に決定するか、あるいは前記予測誤
差評価値と前記動きベクトル符号量の評価値と基づいて
前記第2の映像符号化方式における所定の部分領域の単
位で用いるべき符号化モードを決定するかを選択して、
第2の映像符号化方式において使用すべき符号化モード
を判定する映像データ変換装置であることを特徴とす
る。これによって、第2の映像符号化方式における符号
化性能のインパクトを考慮した符号化方法の選択を可能
とする。
【００１３】また、さらに、前記第1の映像符号化方式
によって符号化された映像データの空間解像度を、水平
および垂直方向に各半分の解像度に変換する空間解像度
変換部を備える映像データ変換装置であることを特徴と
する。
【００１４】また、さらに、前記第1の映像符号化方式
によって符号化された映像データの時間解像度を、フレ
ーム間動き予測に使用しないフレームを間引くことで実
現する時間解像度変換部を備える映像データ変換装置で
あることを特徴とする。
【００１５】また、さらに、前記第1の映像符号化方式
によって符号化された映像データの時間解像度を、フレ
ーム間動き予測に使用するフレームを含めて間引くこと
で実現する時間解像度変換部を備え、前記動きベクトル
マッピング部は、フレーム間動き予測に使用するフレー
ムが間引かれる場合は、間引かれたフレームにおける動
きベクトルを利用して、第2の映像符号化方式で用いる
べき動きベクトル候補を決定し、前記符号化モード判定
手段は、フレーム間動き予測に使用するフレームが間引
かれる場合は、間引かれたフレームにおける符号化モー
ドを利用して、第2の映像符号化方式で用いるべき符号
化モードを決定する映像データ変換装置であることを特
徴とする。これらによって、時間や空間解像度の変更を
伴う映像データ変換が可能とする。
【００１６】また、前記第1の映像符号化方式は、ISO/I
EC 13818-2に規定されるMPEG-2映像符号化方式であり、
前記第2の映像符号化方式は、ISO/IEC 14496-2に規定さ
れるMPEG-4映像符号化方式である映像データ変換装置こ
とを特徴とする。
【００１７】また、映像信号の各フレームを所定部分領
域に分割し、その単位で一部の符号化パラメータを選択
して符号化を行う第1の映像符号化方式に従う映像符号
化データを入力として、映像信号の各フレームを所定部
分領域に分割し、その単位で一部の符号化パラメータを
選択して符号化を行う第2の映像符号化方式に従う映像
符号化データへの変換を行う際の映像データ変換方法で
あって、前記第1の映像符号化方式における所定部分領
域単位の符号化パラメータである動きベクトルから、前
記第2の映像符号化方式における所定の部分領域の単位
で用いる動きベクトルの候補を生成し、生成した第2の
映像符号化方式における動きベクトルの候補のうち、該
動きベクトル候補を用いた場合の予測効率を評価する予
測誤差評価値に基づいて、第2の映像符号化方式におい
て使用する動きベクトルを決定する映像データ変換方法
であることを特徴とする。これによって、第2の映像符
号化方式における符号化性能のインパクトを考慮した動
きベクトル変換を可能となる。
【００１８】
【発明の実施の形態】実施の形態１．本実施の形態１で
は、MPEG-2ビデオデータを入力とし、空間解像度が縦横
1/2にダウンサンプリングされたMPEG-4ビデオデータを
出力する映像トランスコーダについて説明する。以下の
説明では、MPEG-4はMPEG-4シンプルプロファイルに準拠
する符号化方式とする。
【００１９】図１に、本実施の形態１におけるトランス
コーダの内部構成を示す。本トランスコーダは、MPEG-2
デコーダ部２、MPEG-4エンコーダ部１０が、空間解像度
変換部としての解像度変換部６、動きベクトルマッピン
グ部７、符号化モード推定部８を介してカスケード接続
された構成であらわされる。
【００２０】MPEG-2デコーダ部２において一旦復号画像
を生成し、解像度変換部６において画素領域で縦横1/2
のサイズへ解像度変換を行った後、MPEG-4エンコーダ部
１０で符号化を行う。この際、MPEG-4エンコーダ部１０
の動きベクトル検出処理を省略するため、動きベクトル
マッピング部７において、MPEG-2ビデオストリームから
取り出した動きベクトルを、MPEG-4符号化に利用可能な
動きベクトルへ変換する。さらに、符号化モード推定部
８において、MPEG-2ビデオストリームから取り出した符
号化モード情報から、MPEG-4符号化で利用すべき符号化
モード情報に関する方針を決定する。
【００２１】以下、図１に基づいて本トランスコーダの
動作を詳しく説明する。．入力MPEG-2ビデオストリームの復号処理 まず、MPEG-2準拠の符号化方式で圧縮された入力圧縮デ
ータ１がMPEG-2デコーダ部２に入力される。MPEG-2デコ
ーダ部２では、可変長復号部２AにおいてMPEG-2規格に
従い入力圧縮データ１のシンタックス解析が行われ、符
号化モード情報３、および動きベクトル情報４、予測残
差信号符号化データ２Bが生成される。予測残差信号符
号化データ２Bは、逆量子化部２C、逆DCT部２Dを経て、
予測残差信号復号値２Eに復号される。
【００２２】動きベクトル情報４は、動きベクトル値そ
のものだけでなく、フレーム予測かフィールド予測かを
示すフラグなど、MCに関わるすべての情報を含むものと
する。これは動き補償部２Fへ入力され、フレームメモ
リ２G中に格納される参照画像データ２Hと動きベクトル
とに従い、予測画像２Iが生成される。予測残差信号復
号値２Eと予測画像２Iが加算されて、復号画像５が生成
される。復号画像５は、MPEG-2デコーダ部２の出力とし
て、解像度変換部６へ出力されるとともに、以後のフレ
ームの動き補償に参照画像として用いるため、フレーム
メモリ２Gに格納される。
【００２３】．解像度変換処理 MPEG-2復号画像５は、空間解像度変換部としての解像度
変換部６において、所定のダウンサンプルフィルタに基
づいた画素間引きにより、例えば縦横1/2の空間解像度
へ縮小される。この結果がMPEG-4エンコーダ部１０への
入力画像９となる。なお、本実施の形態１では、時間方
向の解像度変換は、例えば、S.J.Wee他,"Field-to-fram
e Transcoding with Spatial And Temporal Downsampli
ng", IEEE International Conference on Image Proces
sing, Kobe, Japan, Oct.1999で開示されるように、MPE
G-2ストリーム中にBフレーム(両方向予測フレーム)が存
在する場合に、Bフレームを間引くことでフレームレー
トを削減する処理のみを許容する。これは、Bフレーム
は、I(イントラ)またはP(片方向予測)フレームとは異な
り、それ自身を別のフレームの予測に使用されないた
め、これを間引くことによって他のフレームの品質に影
響が及ぶことがないからである。例えば、I(イントラ)
またはP(片方向予測)フレームの間にBフレームを２フレ
ーム挿入する符号化パターンがよく用いられているが、
この場合、Bフレームをすべて間引くことによって、フ
レームレートを1/3に低減することが可能である。ま
た、本実施の形態１では、MPEG-2のI(イントラ)フレー
ムはMPEG-4でもI(イントラ)フレームのままとし、同じ
くMPEG-2のP(片方向予測)フレームはMPEG-4でもP(片方
向予測)フレームとして変換を行うものとする。
【００２４】．動きベクトルマッピングおよび符号化
モード選択処理 以下、本発明のポイントである、動きベクトルマッピン
グ処理ならびに符号化モード選択処理について説明す
る。なお、本プロセスは、図１における動きベクトルマ
ッピング部７、符号化モード推定部８、およびMPEG-4エ
ンコーダ部１０の構成要素である符号化パラメータ判定
部１０Bとの連携によって実行される。
【００２５】図２に、本プロセスに関する動作フローチ
ャートを示す。MPEG-2復号画像５と、MPEG-4エンコーダ
部入力信号９とは、空間解像度が縦横1/2であるので、
以下説明する処理手順は、MPEG-2の２×２個のマクロブ
ロック、すなわちMPEG-4の１マクロブロックを単位とし
て実行されるものとする。
【００２６】図３に、この様子を示す。MPEG-4では、マ
クロブロックに対して１本もしくは４本の動きベクトル
を割り当てられるため、動きベクトルのマッピングの方
法としては、図３(A)のように、４本のMPEG-2動きベク
トルから１本のMPEG-4動きベクトルへの変換する場合
と、図３(B)のように、４本のMPEG-2動きベクトルから
４本のMPEG-4動きベクトルへの変換の２通りがある。
【００２７】1) 事前の強制符号化モード判定(ステップ
S0) まず、符号化モード推定部８において、図３に示すMPEG
-2の２×２マクロブロック内の符号化モード分布の様子
を調べる。４つのマクロブロックすべてがINTRAモード
である場合、および４つのマクロブロックすべてがSKIP
モードである場合は、それぞれMPEG-4符号化で用いるべ
き変換後の符号化モードは強制的にINTRA、SKIPとす
る。この場合には、動きベクトルはすべてゼロとし、以
降のステップをスキップする。
【００２８】なお、INTRAモードとは、動き予測を用い
ずフレーム内で符号化するモード、SKIPモードとは、参
照画像中の同一位置の画像データをそのままコピーする
モードで、符号化情報を伝送しないモードのことであ
る。
【００２９】この結果、４つのマクロブロックのいずれ
かに動き予測モードを含んでいるケースについてのみ、
INTERモード、すなわち動きベクトルを用いて動き予測
を行うモードを採用することで符号化効率がよくなる可
能性が含まれるケースとみなされる。ただし、この場
合、以下の手順2)以降のプロセスに従い、とりうるMPEG
-4符号化モードのうち符号化効率の意味で最適なモード
を再度決定する。
【００３０】したがって、符号化モード推定部８の出力
１２には、強制的にINTRA、強制的にSKIP、もしくはINT
ERモードの可能性がある、という3ケースの選択肢が出
力される。
【００３１】2) 動きベクトル候補の選定 上記1)においてINTERモードの利用価値があると判断さ
れた場合は、MPEG-2デコーダ部２内の可変長復号部２A
から出力される２×２マクロブロック分のMPEG-2の動き
ベクトルから、MPEG-4エンコーダ部１０にて用いる動き
ベクトルの候補を定める。本プロセスは、動きベクトル
マッピング部７において実施される。MPEG-2はインタレ
ース信号の圧縮符号化をサポートし、フレームを符号化
単位とするフレーム構造符号化、フィールドを符号化単
位とするフィールド構造符号化の2つの符号化モードの
いずれかを選択できる。フレーム構造符号化では、１６
×１６画素からなるマクロブロックをフレーム画像領域
で構成し、フィールド構造符号化ではフィールド画像領
域でマクロブロックを構成する。フレームは、トップフ
ィールド(上部ラインを構成するフィールド)と、ボトム
フィールド(下部ラインを構成するフィールド)をくし状
に組合せた画像データとして定義されるため、フィール
ド構造符号化におけるマクロブロックは、フレーム画像
領域におけるマクロブロックに対して、垂直方向をカバ
ーする領域が2倍になる。
【００３２】図４は、MPEG-2のPフレームにおける動き
予測モードと対応する動きベクトルの様子を示したもの
である。図４(A)はフレーム構造符号化時に利用可能な
動き予測モードで、同図(B)はフィールド構造符号化時
に利用可能な動き予測モードである。図４(A)におい
て、フレーム予測は、フレーム画像からなるマクロブロ
ックを1本の動きベクトルvfrで予測する。フィールド予
測は、フレーム画像からなるマクロブロックの個々のフ
ィールド領域に対して、個別の動きベクトルvtfおよびv
bfで予測を行う。このとき、参照するフィールドがトッ
プフィールドかボトムフィールドかを選択することが可
能である。デュアルプライム予測は、1本のフィールド
ベクトルvで同一フィールド位置から第1の予測画像を生
成する(トップフィールドの予測はトップフィールドを
参照、ボトムフィールドの予測はボトムフィールドを参
照)とともに、別フィールド位置からはベクトルvをフィ
ールド間距離に基づいてスケーリングした結果に微小ベ
クトルdmvを加算した動きベクトルで第2の予測画像を生
成して、第1および第2の予測画像の加算平均を個々のフ
ィールドの予測画像として用いるものである。
【００３３】図４（B）において、フィールド予測は、
フィールド画像からなるマクロブロックを1本の動きベ
クトルvfiで予測する。１６×８予測は、フィールド画
像からなるマクロブロックを上下１６×８の２つの領域
に分割し、それぞれを個別の動きベクトルvfi,upperお
よびvfi,lowerで予測する。デュアルプライム予測は、
フレーム構造符号化の場合のルールをフィールドに適用
した予測を行う。
【００３４】動きベクトルマッピング部７では、以上の
MPEG-2動き予測モードに対応して、MPEG-4符号化のため
の動きベクトルを生成する。本実施の形態１では、MPEG
-4符号化に利用する動きベクトルは、以下の手順で選定
する。
【００３５】2-1) INTER4Vモード用動きベクトル候補の
選定(ステップS1) MPEG-2のマクロブロックの単位に定義される動きベクト
ルを、その予測の性質に応じて解像度変換後の動きベク
トルのスケールにダウンスケールし、MPEG-2の２×２マ
クロブロックの領域に対応する４本の動きベクトルを一
意に定め、それら動きベクトルを、MPEG-4のINTER4Vモ
ードのための動きベクトル候補とする。INTER4Vモード
とは、フレーム画像領域で定義される１６×１６画素か
らなるマクロブロック領域を４つの８×８画素ブロック
に分割し、それぞれ個別の動きベクトルで予測するモー
ドのことである。図３(B)のケースに該当する。本ステ
ップについては、以下のルールに基づいてINTER4Vモー
ドのための動きベクトル候補を選定する。
【００３６】○フレーム構造符号化の場合 [フレーム予測の場合]動きベクトルvfrを水平垂直各1/2
した動きベクトルを候補とする。
【００３７】[フィールド予測の場合]トップフィールド
の動きベクトルvtfを、水平方向1/2した動きベクトルを
候補とする。
【００３８】[デュアルプライム予測の場合]トップフィ
ールドのための動きベクトルvおよびαv+dmvの平均値
を、水平方向1/2した動きベクトルを候補とする。
【００３９】○フィールド構造符号化の場合 以下、トップフィールドの予測に用いるベクトルについ
てのみ抽出を行う。 [フィールド予測の場合]動きベクトルvfiを水平方向に1
/2、垂直方向に1/4した動きベクトルを候補とする。
【００４０】[１６×８予測の場合]動きベクトルv
fi,upperとvfi,lowerを平均し、水平垂直各1/2した動き
ベクトルを候補とする。
【００４１】[デュアルプライム予測の場合]動きベクト
ルvおよびαv+dmvの平均値を、水平方向に1/2、垂直方
向に1/4した動きベクトルを候補とする。
【００４２】2-2) INTERモード対応動きベクトル候補の
選定(ステップS2) 上記定められた４本の動きベクトルから、MPEG-4のINTE
Rモードのための動きベクトルを定める。INTERモードと
は、フレーム画像領域で定義される１６×１６画素から
なるマクロブロック領域を１本の動きベクトルで予測す
るモードのことである。図３の(A)のケースに該当す
る。これは、例えば、B.Shen他、"Adaptive Motion-Vec
tor Resampling for Compressed Video Downsampling",
IEEE Transactions on Circuits And Systems for Vid
eo Technology, vol.9, no.6, Sep.1999に開示される方
法で決定することが考えられる。
【００４３】以上1-1), 1-2)で選定されるINTER用、INT
ER4V用動きベクトル候補は、動きベクトルマッピング情
報１１として、MPEG-4エンコーダ部１０へ入力される。
【００４４】3) 符号化モード判定 上記2)により、MPEG-4のINTERおよびINTER4Vで利用すべ
き動きベクトルの候補が選定されたため、残る符号化モ
ードの可能性としてINTRA、SKIPのうち、最も符号化効
率のよいモードを選択する。この結果として、最終的な
符号化モードと動きベクトルが決定される。この処理
は、符号化パラメータ判定部１０Bで実行される。
【００４５】このモード判定処理に、判定基準として、
下式に示すレート歪コストJmを用いる。
【００４６】
【数１】
【００４７】同式において、mは符号化モード種別、vm
はモードmの場合の動きベクトル、Mはモード種別の集合
(M=(INTRA,SKIP,INTER,INTER4V))、αmはモードmに応じ
て定まる定数、Emはモードm使用時の予測誤差評価値、R
vmは動きベクトルがvmの場合の動きベクトル符号量、λ
は正の定数、m*, vm*は本評価の結果選定される符号化
モードと動きベクトルである。なお、この3)の符号化モ
ード判定の際、予測誤差評価値と、動きベクトル符号量
とのどちらか一方のみに基づくようにしても良い。
【００４８】Emとしては、SKIP,INTER,INTER4Vモードに
関しては、例えば、入力信号９と、動きベクトルvmを用
いて動き補償部１０Aから得られる予測画像候補との間
の差分絶対値和などで定義することができる。なお、SK
IPの場合の動きベクトルvmはゼロであり、Rvmもゼロで
あるとする。同じ評価式でINTRAモードも評価を行うた
めに、INTRAモードのEmとしては、入力信号９における
マクロブロック内の輝度信号平均値を予測画像候補とみ
なし、それを入力信号９から差し引いた差分の絶対値和
を用いることができる。なお、Emは輝度信号のみでな
く、色差成分(Cb、Cr成分)を加味して定義するように構
成してもよい。
【００４９】MPEG-2およびMPEG-4の符号化対象映像の色
成分サンプル比は多くの場合Y:Cb:Cr=4:2:0(輝度成分１
６×１６画素領域に対して、８×８画素領域のCb、Cr成
分が対応するケース)を用いることが多いので、例え
ば、Cb、Crのそれぞれの８×８領域の平均値(DC成分)を
上記INTRAモードの輝度成分のケースと同様、予測画像
候補とみなし、入力信号９のCb、Cr各成分から該平均値
を差し引いた差分絶対値和を加味するように構成でき
る。これによって、輝度パターンの類似度だけでなく、
色の類似度も考慮した動きベクトルを評価することが可
能となり、視覚的に目立ちやすい色ずれによる劣化を抑
制することができる。
【００５０】また、INTRAモードでは動きベクトルの符
号量Rvmがゼロである一方、符号化すべきDCT係数が多く
なるため、重みαmによってあらかじめEmに対する評価
の重みを変更しておく。これによって、擬似的にINTRA
モードのDCT係数符号量の加算分を考慮したモード判定
を行うことが可能となる。
【００５１】尚、Emに対する評価の重み付けは重みαm
の乗算でなく、オフセット値Omの加算で実現してもよ
い。また、λの値としては、例えば、Gary J. Sullivan
and Thomas Wiegand, "Rate-Distortion Optimization
for Video Compression", IEEE Signal Processing Ma
gazine, vol. 15, no. 6, pp. 74-90, Nov. 1998.に開
示される以下の値を用いることができる。ただし、Qp
は、符号化対象マクロブロックの量子化ステップパラメ
ータである。
【００５２】
【数２】
【００５３】図２のフローでは、便宜上、mをカウンタ
として定義し、mのループ処理の形式で上記プロセスを
記述している。符号化モード推定部８の出力１２から、
INTERモードの評価価値があると判断される場合に、mお
よびコスト評価値min_Jを初期化して(ステップS3)処理
を開始する。
【００５４】m =3(INTRA)か否かの判定(ステップS4)を
経て、INTRAである場合は、当該マクロブロック内の輝
度値の平均値を算出する(ステップS5)。さもなくば、動
きベクトルマッピング情報１１から定まる動きベクトル
vmを用いて動き補償部１０Bを利用して予測画像候補を
得る(ステップS6)。ステップS5またはステップS6の結果
は、入力信号９であらわされる符号化対象マクロブロッ
クの輝度信号との間で差分絶対値和が計算され、それを
上記EmとしてコストJmを算出する(ステップS7)。ステッ
プS8、S9において、コスト最小となるモードmへの候補
更新が行なわれ、ステップS10でmをインクリメントし、
ステップS11でループが終了するまで上記処理を継続す
る。
【００５５】以上の手順により、ステップS0でINTERモ
ードの利用価値があると判断されるケースでは、MPEG-4
符号化においてとりうるすべての符号化モードを対象と
して最適なモード選択ならびにそれに付随する動きベク
トルを選定することが可能となる。従来技術では、上記
1)に記載したような動きベクトル候補の選定は開示して
いるが、その結果得られる動きベクトル自身の符号量コ
スト、MPEG-4符号化へのインパクトまでは評価されな
い。特に低レートのMPEG-4符号化を行うような場合に
は、動きベクトルの符号量の大きさを無視しにくくなる
が、上記判定規範を用いることで、INTER、INTER4Vの動
きベクトル候補のうち符号量と予測精度の最適なトレー
ドオフを与えるものを選択することができる。また、IN
TRA、SKIPも同様の評価尺度で判定を行うようにするこ
とで、同一の判定規範でMPEG-4符号化に用いるべき動き
ベクトルと符号化モードを一括して決定することができ
る。
【００５６】．MPEG-4符号化処理 以上の結果、MPEG-4エンコーダ１０には、入力圧縮デー
タ１から抽出された動きベクトル情報、符号化モード情
報を再利用する形で、動きベクトルマッピング情報１
１、符号化モード強制設定情報１２が入力され、解像度
変換後のMPEG-2復号画像９の符号化に用いられる。これ
らの情報は上記で述べた手順に基づいて、符号化パラ
メータ判定部１０Bにおける、MPEG-4の各マクロブロッ
ク単位に符号化に用いる符号化モードおよび動きベクト
ルの決定に利用される。
【００５７】その結果、INTER、INTER4Vのいずれかのモ
ードの場合は動き補償部１０Aで予測画像１０Cが生成さ
れ、入力信号９との差分をとって予測残差信号が生成さ
れ、それがDCT部１０D、量子化部１０Eを経て可変長符
号化部１０JによってMPEG-4ビデオストリームの形式に
配列される。
【００５８】INTRAモードの場合は、入力信号９そのも
のがDCT、量子化されたのち可変長符号化される。SKIP
モードの場合は、当該マクロブロックがSKIPであること
を示すフラグ(not_coded)のみをビットストリームに多
重することで符号化を完了する。
【００５９】量子化後の予測残差信号は、逆量子化部１
０F、逆DCT部１０Gを経て予測残差信号復号値１０Hに戻
され、予測画像１０Cと加算されたのち、以降のフレー
ムのMCに用いるためにフレームメモリ１０Mに格納され
る。なお、可変長符号化部１０Jは、その内部にAC、DC
成分の予測処理、DCT係数のランレングス符号化のため
のスキャニング処理を含む。
【００６０】また、可変長符号化部１０Jの出力は、バ
ッファリングされた後、伝送もしくは記録されることか
ら、一般にバッファ占有量１０Kに基づいた符号化制御
を、符号化制御部１０Lが実施する。ここでは、主とし
てフレームた、マクロブロックをラスタスキャン順に複
数個グルーピングした単位で、フレーム内での周辺画像
領域との依存関係を断ち切ることで誤りからの早期復帰
に用いられるビデオパケット、マクロブロックなどの単
位で、量子化ステップパラメータ(Qp)１０Nを決定する
処理を行う。決定された量子化ステップパラメータ１０
Nは、量子化部１０E、逆量子化部１０Fへ入力されると
ともに、上記λ算出のため符号化パラメータ判定部１０
Bにも入力される。
【００６１】以上のべたように、本実施の形態１によれ
ば、MPEG-2映像データからMPEG-4映像データへの変換動
作を行うトランスコーダにより、MPEG-2データ中の動き
ベクトルや符号化モードの情報を再利用しながらMPEG-4
符号化における最適な符号化モードならびに動きベクト
ルの決定を行うので、その結果、少ない演算量でトラン
スコード映像の品質を向上させることが可能である。
【００６２】特に、本実施の形態１では、演算負荷の大
きい動きベクトル検出処理を簡略化したので、従来の単
純動きベクトル再利用手法に比べてMPEG-2からMPEG-4へ
の映像トランスコーティング品質を向上させることがで
きる。
【００６３】なお、詳しくは述べなかったが、本構成に
よれば、符号化制御部１０Lにおける量子化ステップパ
ラメータ(Qp)１０Nの決定プロセス、もしくはフレーム
やビデオパケット、マクロブロック等の設定単位と、上
記に述べたMPEG-2の動きベクトル・符号化モード情報
再利用の方針とを密に連携させることで、さらに符号化
効率の改善を行うことができる。
【００６４】また、上記では、MPEG-4シンプルプロファ
イルを前提として記載したが、本構成のトランスコーダ
は、MPEG-4アドバンスドシンプルプロファイルや、ITU-
T H.263においてAnnex Fに記載される動き予測オプショ
ンをサポートするケースなど、MPEG-4シンプルプロファ
イルに準ずるあらゆる多モード符号化方式に適用可能で
ある。
【００６５】実施の形態．２ 本実施の形態２では、解像度変換部６が、空間解像度変
換部としてだけでなく、さらに時間解像度変換部として
機能して、動き予測の影響が伝播するPフレームを間引
くことによる時間解像度すなわちフレームレートの変換
を行う実施の形態について説明する。なお、解像度変換
部６は、空間解像度変換部および時間解像度変換部とし
て機能しても良いし、空間解像度変換部としては機能せ
ず時間解像度変換部としてのみ機能するようにしても勿
論よい。
【００６６】図５に、本実施の形態２のトランスコーダ
の内部構成を示す。なお、本実施の形態２のトランスコ
ーダの構成は、図１に示す実施の形態１のトランスコー
ダの内部構成と同じであり、解像度変換部６および動き
ベクトルマッピング部７の動作が、実施の形態１と異な
るため、実施の形態１と異なる動作については詳細に説
明する。
【００６７】次に動作を説明する。．入力MPEG-2ビデオストリームの復号処理 実施の形態１と同じ動作である。
【００６８】．解像度変換処理 MPEG-2復号画像５は、解像度変換部６において、所定の
ダウンサンプルフィルタに基づいた画素間引きにより、
縦横1/2の空間解像度へ縮小される。さらに、MPEG-4エ
ンコーダ部１０から通知される符号化フレーム指示情報
１３に基づいて、MPEG-4エンコーダ部１０への入力信号
９の入力フレームレートを制御する。本実施の形態２で
は、実施の形態１に述べたBフレームの間引き処理だけ
でなく、符号化フレーム指示情報１３の指示次第でPフ
レームの間引きも行う構成とする。符号化フレーム指示
情報１３は、MPEG-4エンコーダ部１０が固定フレームレ
ートで符号化を行う場合には、その符号化フレームレー
ト値を示し、MPEG-4エンコーダ部１０が可変フレームレ
ートで符号化を行う場合には、符号化対象となるフレー
ムの表示時刻情報、あるいは直前のMPEG-4符号化フレー
ムからのフレーム数オフセット情報などを示す。
【００６９】．動きベクトルマッピングおよび符号化
モード選択処理 以下、本実施の形態２のポイントである、動きベクトル
マッピング処理ならびに符号化モード選択処理について
説明する。本プロセスは、図５における動きベクトルマ
ッピング部７、符号化モード推定部８、およびMPEG-4エ
ンコーダ部１０の構成要素である符号化パラメータ判定
部１０Bとの連携によって実行される。
【００７０】図６に、本プロセスに関する動作フローチ
ャートを示す。MPEG-2復号画像５とMPEG-4エンコーダ部
入力信号９とは、空間解像度が縦横1/2であるので、以
下説明する処理手順は、MPEG-2の２×２個のマクロブロ
ック、すなわち、MPEG-4の１マクロブロックを単位とし
て実行されるものとする(図３参照のこと)。
【００７１】1) 事前の強制符号化モード判定 まず、符号化モード推定部８において、図３に示すMPEG
-2の２×２マクロブロック内の符号化モード分布の様子
を調べる。
【００７２】図７に、図５に示す実施の形態２のMPEG-2
/MPEG-4ビデオトランスコーディングシステムにおける
符号化モード推定部８のMPEG-2符号化モードの監視動作
を示す。図７に示すように、本実施の形態２では、符号
化フレーム指示情報１３に基づき、直前にMPEG-4符号化
の対象となったフレーム以降、現在符号化対象となるフ
レームに至るまでのフレーム間引きの間、MPEG-2符号化
モードの監視を行う(ステップS12、S13)。MPEG-2の４つ
のマクロブロックすべてがINTRAモードになる場合が1回
でもあれば、MPEG-4符号化で用いるべき変換後の符号化
モードは強制的にINTRAモードとする。
【００７３】一方、４つのマクロブロックすべてがSKIP
モードになる場合については、直前にMPEG-4符号化の対
象となったフレーム以降、現在符号化対象となるフレー
ムに至るまでフレーム間引きの間、常にSKIPが継続する
場合についてはMPEG-4符号化で用いるべき符号化モード
は強制的にSKIPとし、一回でもSKIPでないケースがある
場合はINTERモードの可能性を検討するものとする。た
だし、フレーム間引きを行っている間のMPEG-2符号化モ
ードの監視はPフレームについてのみ行うものとし、Iフ
レームはそのままIフレームとして間引きを行わずにMPE
G-4符号化を行い、MPEG-2符号化モードの監視をリセッ
トする(ステップS14、S15)。強制的にINTRAまたはSKIP
となる場合については、動きベクトルはすべてゼロと
し、以降のステップをスキップする。
【００７４】したがって、符号化モード推定部８の出力
１２には、強制的にINTRA、強制的にSKIP、もしくはINT
ERモードの可能性がある、という3ケースの選択肢が出
力される(ステップS0)。
【００７５】この結果、INTERモードの可能性を検討す
ると判断されたケースについてのみ、以下の手順2)以降
のプロセスに従い、とりうるMPEG-4符号化モードのうち
符号化効率の意味で最適なモードを再度決定する。
【００７６】2) 動きベクトル候補の選定 上記1)においてINTERモードの利用価値があると判断さ
れた場合は、図８に示すように、符号化フレーム指示情
報１３に基づき、直前にMPEG-4符号化の対象となったフ
レーム以降、現在符号化対象となるフレームに至るまで
のフレーム間引きの間、MPEG-2動きベクトルの監視を行
う(ステップS12、S13)。監視の結果得られるMPEG-2動き
ベクトルから、MPEG-4エンコーダ部１０にて用いる動き
ベクトルの候補を定める。本プロセスは、動きベクトル
マッピング部７において実施される。上記1)の結果か
ら、本プロセスでは、原則、フレーム間引きが行なわれ
る間のMPEG-2の符号化モードとしてSKIPモードもしくは
INTERモードが発生するケースを考慮することになる。
そこで、以下のルールを適用する。
【００７７】ルール1：符号化対象マクロブロックの動
きベクトル候補は、フレームレート変換の結果間引かれ
るフレームの同一空間位置に存在するマクロブロックの
動きベクトルを下式による累積することで求める。
【００７８】
【数３】
【００７９】ここで、vMPEG4は、MPEG-4符号化対象マク
ロブロックの動きベクトル候補、kはフレームレート変
換の結果間引かれるフレームのカウンタ、S(*)は解像度
にあわせた動きベクトルのスケーリング、vk MPEG2はMPE
G-4符号化対象マクロブロック領域に対応するMPEG-2の
動きベクトルを表す。ただし、vMPEG4にはINTER、INTER
4Vの2種類があり、実施の形態１の2-2)に述べたよう
に、まずINTER4Vの動きベクトル候補を求めたのち、INT
ER動きベクトル候補を定める。(ステップS1、S2)
【００８０】ルール２： S(vk MPEG2)は、インタレース
符号化に伴うフレーム・フィールドベクトルの違いを考
慮して、実施の形態１における2-1)のルールに従うスケ
ーリング処理を行う。
【００８１】ルール３： フレームカウンタkのいずれか
の時点で、SKIPモードが発生する場合は、累積すべき動
きベクトルvk MPEG2はゼロとする。
【００８２】ルール４： IフレームではMPEG-2動きベク
トルの監視ならびに上記動きベクトル累積をリセットす
る(ステップS14、S15)。
【００８３】3) 符号化モード判定 上記2)により、MPEG-4のINTERおよびINTER4Vで利用すべ
き動きベクトルの候補が選定されたため、残る符号化モ
ードの可能性としてINTRA、SKIPのうち、最も符号化効
率のよいモードを選択する(ステップS3〜S11)。この結
果として、最終的な符号化モードと動きベクトルが決定
される。この処理は、符号化パラメータ判定部１０Bで
実行される。以下、符号化パラメータ判定部１０Bにお
ける処理は実施の形態１の3)に準ずる。ただし、動き予
測に用いる参照画像は、現在符号化対象となるフレーム
の直前にMPEG-4符号化されたフレームの局所復号画像を
用いることになる。
【００８４】以上の手順により、本実施の形態２によれ
ば、Pフレームの間引きを伴う時間解像度すなわちフレ
ームレート変換を実行するトランスコーディングに際し
ても、MPEG-4符号化においてとりうるすべての符号化モ
ードを対象として最適なモード選択ならびにそれに付随
する動きベクトルを選定することが可能となる。
【００８５】特に、本実施の形態２では、Pフレームの
間引きを行うトランスコーダにおいても、演算負荷の大
きい動きベクトル検出処理を簡略化したので、従来の単
純動きベクトル再利用手法に比べてMPEG-2からMPEG-4へ
の映像トランスコーティング品質を向上させることがで
きる。
【００８６】なお、上記では、MPEG-4シンプルプロファ
イルを前提として記載したが、本構成のトランスコーダ
は、MPEG-4アドバンスドシンプルプロファイルや、ITU-
T H.263においてAnnex Fに記載される動き予測オプショ
ンをサポートするケースなど、MPEG-4シンプルプロファ
イルに準ずるあらゆる多モード符号化方式に適用可能
で、本発明は、MC+DCT映像符号化方式を対象とするトラ
ンスコーディング全般について適用可能である。
【００８７】
【発明の効果】以上説明したように、本発明によれば、
第1の映像符号化方式における所定部分領域単位の符号
化パラメータである動きベクトルから、第2の映像符号
化方式における所定の部分領域の単位で用いる動きベク
トルの候補を生成し、生成した第2の映像符号化方式に
おける動きベクトルの候補のうち、該動きベクトル候補
を用いた場合の予測効率を評価する予測誤差評価値と、
該動きベクトル候補を用いることによる動きベクトル符
号量を評価する値と等に基づいて、第2の映像符号化方
式において使用する動きベクトル等を決定するようにし
たので、第2の映像符号化方式における符号化性能のイ
ンパクトを考慮した動きベクトル等を変換することが可
能となる。
【図面の簡単な説明】
【図１】 実施の形態1におけるMPEG-2/MPEG-4ビデオト
ランスコーディングシステムの内部構成を示す図面であ
る。
【図２】 図１に示す実施の形態1のMPEG-2/MPEG-4ビデ
オトランスコーディングシステムにおける動きベクトル
マッピングおよび符号化モード判定処理の動作フローを
示す図面である。
【図３】 図１に示す実施の形態1のMPEG-2/MPEG-4ビデ
オトランスコーディングにおける、解像度変換を伴うト
ランスコーディング単位を示す図面である。
【図４】 MPEG-2ビデオ符号化における動き予測モード
の種別を説明する図面である。
【図５】 実施の形態２におけるMPEG-2/MPEG-4ビデオ
トランスコーディングシステムの内部構成を示す図面で
ある。
【図６】 図５に示す実施の形態２のMPEG-2/MPEG-4ビ
デオトランスコーディングシステムにおける動きベクト
ルマッピングおよび符号化モード判定処理の動作フロー
を示す図面である。
【図７】 図５に示す実施の形態２のMPEG-2/MPEG-4ビ
デオトランスコーディングシステムにおける符号化モー
ド推定部８のMPEG-2符号化モードの監視動作を示す図面
である。
【図８】 図５に示す実施の形態２のMPEG-2/MPEG-4ビ
デオトランスコーディングシステムにおける動きベクト
ルマッピング部７のMPEG-2動きベクトルの監視動作を示
す図面である。
【符号の説明】
２ MPEG-2デコーダ部、６ 解像度変換部（空間解像度
変換部、時間解像度変換部）、７ 動きベクトルマッピ
ング部、８ 符号化モード推定部 １０Ｂ 符号化パラ
メータ判定部、１０ MPEG-4エンコーダ部。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 小川 文伸 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 浅井 光太郎 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 5C057 EA02 EA07 EG05 EG06 EG08 EJ02 EK05 EL01 EM03 EM04 EM09 EM13 EM16 5C059 KK41 LB05 LB07 MA00 MA03 MA05 MA13 MA14 MA23 MC11 MC32 MC34 ME01 ME05 NN10 NN11 NN14 NN21 NN28 PP05 PP06 PP07 PP16 SS06 TA17 TA46 TA65 TB07 TC02 TC03 TC12 TC18 TC27 TD03 TD05 TD06 UA02 UA05 UA33 5C063 AB03 AB07 AC01 CA11 CA40 5J064 AA00 BA04 BA16 BB02 BB03 BC01 BC08 BC14 BC16 BC25 BC29 BD02 BD03

Claims (8)

    【特許請求の範囲】
  1. 【請求項１】 映像信号の各フレームを所定部分領域に
    分割し、その単位で動きベクトル等の符号化パラメータ
    を選択して符号化を行う第1の映像符号化方式に従う映
    像符号化データを入力として、映像信号の各フレームを
    所定部分領域に分割し、その単位で符号化パラメータを
    選択して符号化を行う第2の映像符号化方式に従う映像
    符号化データへの変換を行う映像データ変換装置であっ
    て、 前記第1の映像符号化方式における所定部分領域単位の
    符号化パラメータである動きベクトルから、前記第2の
    映像符号化方式における所定の部分領域の単位で用いる
    動きベクトルの候補を生成する動きベクトルマッピング
    部と、 前記生成された第2の映像符号化方式における動きベク
    トルの候補のうち、該動きベクトル候補を用いた場合の
    予測効率を評価する予測誤差評価値と、該動きベクトル
    候補を用いることによる動きベクトル符号量を評価する
    値とに基づいて、第2の映像符号化方式において使用す
    る動きベクトルを決定する符号化パラメータ判定部と、 を備えることを特徴とする映像データ変換装置。
  2. 【請求項２】 前記動きベクトルマッピング部は、前記
    第2の映像符号化方式がとりうる動き予測の種類の分だ
    け動きベクトル候補を生成することを特徴とする請求項
    １記載の映像データ変換装置。
  3. 【請求項３】 さらに、前記第1の映像符号化方式にお
    ける所定部分領域単位の符号化パラメータである符号化
    モードに基づき、前記第の映像符号化方式における所定
    の部分領域の単位の符号化モードを推定する符号化モー
    ド推定部を備え、 前記符号化パラメータ判定部は、符号化モードを決定す
    る際、 前記符号化モード推定部によって推定された符号化モー
    ドに基づいて前記第2の映像符号化方式における所定部
    分領域単位で用いるべき符号化モードを強制的に決定す
    るか、あるいは前記予測誤差評価値と前記動きベクトル
    符号量の評価値と基づいて前記第2の映像符号化方式に
    おける所定の部分領域の単位で用いるべき符号化モード
    を決定するかを選択して、第2の映像符号化方式におい
    て使用すべき符号化モードを判定することを特徴とする
    請求項１または請求項２記載の映像データ変換装置。
  4. 【請求項４】 さらに、前記第1の映像符号化方式によ
    って符号化された映像データの空間解像度を、水平およ
    び垂直方向に各半分の解像度に変換する空間解像度変換
    部を備えることを特徴とする請求項１〜３からいずれか
    の請求項に記載の映像データ変換装置。
  5. 【請求項５】 さらに、前記第1の映像符号化方式によ
    って符号化された映像データの時間解像度を、フレーム
    間動き予測に使用しないフレームを間引くことで実現す
    る時間解像度変換部を備えることを特徴とする請求項１
    〜請求項４いずれかの請求項に記載の映像データ変換装
    置。
  6. 【請求項６】 さらに、前記第1の映像符号化方式によ
    って符号化された映像データの時間解像度を、フレーム
    間動き予測に使用するフレームを含めて間引くことで実
    現する時間解像度変換部を備え、 前記動きベクトルマッピング部は、フレーム間動き予測
    に使用するフレームが間引かれる場合は、間引かれたフ
    レームにおける動きベクトルを利用して、第2の映像符
    号化方式で用いるべき動きベクトル候補を決定し、 前記符号化モード判定手段は、フレーム間動き予測に使
    用するフレームが間引かれる場合は、間引かれたフレー
    ムにおける符号化モードを利用して、第2の映像符号化
    方式で用いるべき符号化モードを決定することを特徴と
    する請求項３または請求項４いずれかに記載の映像デー
    タ変換装置。
  7. 【請求項７】 前記第1の映像符号化方式は、ISO/IEC 1
    3818-2に規定されるMPEG-2映像符号化方式であり、前記
    第2の映像符号化方式は、ISO/IEC 14496-2に規定される
    MPEG-4映像符号化方式であることを特徴とする請求項１
    〜６からいずれかの請求項に記載の記載の映像データ変
    換装置。
  8. 【請求項８】 映像信号の各フレームを所定部分領域に
    分割し、その単位で一部の符号化パラメータを選択して
    符号化を行う第1の映像符号化方式に従う映像符号化デ
    ータを入力として、映像信号の各フレームを所定部分領
    域に分割し、その単位で一部の符号化パラメータを選択
    して符号化を行う第2の映像符号化方式に従う映像符号
    化データへの変換を行う際の映像データ変換方法であっ
    て、 前記第1の映像符号化方式における所定部分領域単位の
    符号化パラメータである動きベクトルから、前記第2の
    映像符号化方式における所定の部分領域の単位で用いる
    動きベクトルの候補を生成し、 生成した第2の映像符号化方式における動きベクトルの
    候補のうち、該動きベクトル候補を用いた場合の予測効
    率を評価する予測誤差評価値と、該動きベクトル候補を
    用いることによる動きベクトル符号量を評価する値との
    うち少なくとも一方に基づいて、第2の映像符号化方式
    において使用する動きベクトルを決定することを特徴と
    する映像データ変換方法。
JP2002112860A 2002-04-16 2002-04-16 映像データ変換装置および映像データ変換方法 Expired - Fee Related JP4193406B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2002112860A JP4193406B2 (ja) 2002-04-16 2002-04-16 映像データ変換装置および映像データ変換方法
CNB038055872A CN100353769C (zh) 2002-04-16 2003-04-09 影像数据转换装置以及影像数据转换方法
PCT/JP2003/004529 WO2003088676A1 (en) 2002-04-16 2003-04-09 Video data conversion device and video data conversion method
KR20047016448A KR100719647B1 (ko) 2002-04-16 2003-04-09 영상 데이터 변환 장치 및 영상 데이터 변환 방법
EP03746441A EP1475971A4 (en) 2002-04-16 2003-04-09 VIDEO DATA IMPLEMENTATION DEVICE AND VIDEO DATA IMPLEMENTING PROCESS
US10/501,897 US7526027B2 (en) 2002-04-16 2003-04-09 Video data converter and video data converting method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002112860A JP4193406B2 (ja) 2002-04-16 2002-04-16 映像データ変換装置および映像データ変換方法

Publications (2)

Publication Number Publication Date
JP2003309851A true JP2003309851A (ja) 2003-10-31
JP4193406B2 JP4193406B2 (ja) 2008-12-10

Family

ID=29243335

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002112860A Expired - Fee Related JP4193406B2 (ja) 2002-04-16 2002-04-16 映像データ変換装置および映像データ変換方法

Country Status (6)

Country Link
US (1) US7526027B2 (ja)
EP (1) EP1475971A4 (ja)
JP (1) JP4193406B2 (ja)
KR (1) KR100719647B1 (ja)
CN (1) CN100353769C (ja)
WO (1) WO2003088676A1 (ja)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005278168A (ja) * 2004-03-02 2005-10-06 Mitsubishi Electric Research Laboratories Inc 圧縮された入力ビデオを処理する方法及びシステム
JP2006109418A (ja) * 2004-10-02 2006-04-20 Samsung Electronics Co Ltd トランスコーディングのために出力マクロブロック及び動きベクトルを推定する方法及びトランスコーダ
JP2006295598A (ja) * 2005-04-12 2006-10-26 Kddi Corp ビデオ情報変換装置及びプログラム
KR100718467B1 (ko) 2004-11-30 2007-05-16 주식회사 휴맥스 영상 축소 트랜스코딩 방법 및 장치
KR100718468B1 (ko) 2004-11-30 2007-05-16 주식회사 휴맥스 영상 축소 트랜스 코딩 방법 및 장치
JP2007134810A (ja) * 2005-11-08 2007-05-31 Kddi Corp 符号化方式変換装置
JP2007228400A (ja) * 2006-02-24 2007-09-06 Mitsubishi Electric Corp 動画像変換装置
KR100801974B1 (ko) 2005-12-08 2008-02-12 한국전자통신연구원 저비용 움직임 추정 장치 및 움직임 추정 방법
JP2010507946A (ja) * 2006-10-27 2010-03-11 アクトイマジン ビデオストリームの圧縮を最適化するための方法および装置
US7933335B2 (en) 2004-11-30 2011-04-26 Panasonic Corporation Moving picture conversion apparatus
US8059720B2 (en) 2004-11-30 2011-11-15 Humax Co., Ltd. Image down-sampling transcoding method and device
KR101147744B1 (ko) * 2005-02-22 2012-05-25 엘지전자 주식회사 비디오 트랜스 코딩 방법 및 장치와 이를 이용한 ｐｖｒ
KR101196429B1 (ko) * 2004-03-12 2012-11-01 삼성전자주식회사 동영상 트랜스코딩 방법 및 그 장치, 이에 사용되는움직임 벡터 보간방법
JP2013515415A (ja) * 2009-12-21 2013-05-02 アルカテル−ルーセント 複数のビデオストリームを結合符号化するための方法および構成
JP2015195470A (ja) * 2014-03-31 2015-11-05 富士通株式会社 符号化装置、符号化方法及び符号化プログラム
US11375216B2 (en) 2017-09-13 2022-06-28 Jvckenwood Corporation Transcoding apparatus, transcoding method, and transcoding program

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUP0301368A3 (en) * 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
JP4470431B2 (ja) * 2003-10-01 2010-06-02 ソニー株式会社 データ処理装置およびその方法
US20050201469A1 (en) * 2004-03-11 2005-09-15 John Sievers Method and apparatus for improving the average image refresh rate in a compressed video bitstream
US20050232497A1 (en) * 2004-04-15 2005-10-20 Microsoft Corporation High-fidelity transcoding
EP1808025B1 (en) * 2004-11-04 2016-03-09 Thomson Licensing Method and apparatus for fast mode decision of b-frames in a video encoder
US7933336B2 (en) * 2004-11-30 2011-04-26 Humax Co., Ltd. Image down-sampling transcoding method and device
KR101213904B1 (ko) * 2005-07-22 2012-12-20 미쓰비시덴키 가부시키가이샤 화상 복호 장치, 화상 복호 방법, 화상 부호화 장치 및 화상 부호화 방법
JP4682102B2 (ja) * 2005-09-02 2011-05-11 キヤノン株式会社 画像符号化装置及び画像符号化方法
US7944965B2 (en) * 2005-12-19 2011-05-17 Seiko Epson Corporation Transform domain based distortion cost estimation
TW200743386A (en) * 2006-04-27 2007-11-16 Koninkl Philips Electronics Nv Method and apparatus for encoding/transcoding and decoding
WO2007136088A1 (ja) * 2006-05-24 2007-11-29 Panasonic Corporation 画像符号化装置、画像符号化方法、及び画像符号化用集積回路
TWI348651B (en) * 2006-06-09 2011-09-11 Via Tech Inc A system for reducing bandwidth requirements for transferring graphics data and its related method
JP4245026B2 (ja) 2006-09-20 2009-03-25 株式会社豊田中央研究所 被覆膜の除膜方法および被覆部材の再生方法
JP2008109637A (ja) * 2006-09-25 2008-05-08 Toshiba Corp 動画像符号化装置及びその方法
JP4882948B2 (ja) * 2007-10-04 2012-02-22 ソニー株式会社 画像処理装置および方法、並びにプログラム
US8098732B2 (en) * 2007-10-10 2012-01-17 Sony Corporation System for and method of transcoding video sequences from a first format to a second format
US8457958B2 (en) * 2007-11-09 2013-06-04 Microsoft Corporation Audio transcoder using encoder-generated side information to transcode to target bit-rate
KR101377527B1 (ko) 2008-10-14 2014-03-25 에스케이 텔레콤주식회사 복수 개의 참조 픽처의 움직임 벡터 부호화/복호화 방법 및장치와 그를 이용한 영상 부호화/복호화 장치 및 방법
US8396114B2 (en) * 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
US8311115B2 (en) * 2009-01-29 2012-11-13 Microsoft Corporation Video encoding using previously calculated motion information
US8270473B2 (en) * 2009-06-12 2012-09-18 Microsoft Corporation Motion based dynamic resolution multiple bit rate video encoding
JP5378939B2 (ja) * 2009-10-02 2013-12-25 日立コンシューマエレクトロニクス株式会社 画像符号化方法、画像復号化方法、画像符号化装置、及び画像復号化装置、並びにプログラム
US20110142129A1 (en) * 2009-12-11 2011-06-16 General Instrument Corporation Mpeg video resolution reduction system
US8358698B2 (en) * 2010-01-08 2013-01-22 Research In Motion Limited Method and device for motion vector estimation in video transcoding using full-resolution residuals
US8340188B2 (en) * 2010-01-08 2012-12-25 Research In Motion Limited Method and device for motion vector estimation in video transcoding using union of search areas
US8315310B2 (en) * 2010-01-08 2012-11-20 Research In Motion Limited Method and device for motion vector prediction in video transcoding using full resolution residuals
US8559519B2 (en) * 2010-01-08 2013-10-15 Blackberry Limited Method and device for video encoding using predicted residuals
US20110170608A1 (en) * 2010-01-08 2011-07-14 Xun Shi Method and device for video transcoding using quad-tree based mode selection
US8913661B2 (en) * 2010-02-19 2014-12-16 Skype Motion estimation using block matching indexing
US9609342B2 (en) * 2010-02-19 2017-03-28 Skype Compression for frames of a video signal using selected candidate blocks
US9819358B2 (en) * 2010-02-19 2017-11-14 Skype Entropy encoding based on observed frequency
US9313526B2 (en) * 2010-02-19 2016-04-12 Skype Data compression for video
US20110206118A1 (en) * 2010-02-19 2011-08-25 Lazar Bivolarsky Data Compression for Video
US9049450B2 (en) 2010-04-05 2015-06-02 Samsung Electronics Co., Ltd. Method and apparatus for encoding video based on internal bit depth increment, and method and apparatus for decoding video based on internal bit depth increment
WO2011126282A2 (en) 2010-04-05 2011-10-13 Samsung Electronics Co., Ltd. Method and apparatus for encoding video by using transformation index, and method and apparatus for decoding video by using transformation index
WO2011126277A2 (en) 2010-04-05 2011-10-13 Samsung Electronics Co., Ltd. Low complexity entropy-encoding/decoding method and apparatus
KR20110112168A (ko) * 2010-04-05 2011-10-12 삼성전자주식회사 내부 비트뎁스 확장에 기반한 비디오 부호화 방법 및 그 장치, 내부 비트뎁스 확장에 기반한 비디오 복호화 방법 및 그 장치
JP5368631B2 (ja) 2010-04-08 2013-12-18 株式会社東芝 画像符号化方法、装置、及びプログラム
US8705616B2 (en) 2010-06-11 2014-04-22 Microsoft Corporation Parallel multiple bitrate video encoding to reduce latency and dependences between groups of pictures
CN101964910B (zh) * 2010-08-20 2012-08-22 华中科技大学 基于码率型转码辅助的视频空间分辨率转换方法
US8755438B2 (en) * 2010-11-29 2014-06-17 Ecole De Technologie Superieure Method and system for selectively performing multiple video transcoding operations
US9749657B2 (en) * 2011-01-21 2017-08-29 Sharp Kabushiki Kaisha Buffer compression for motion vector competition
US20120275502A1 (en) * 2011-04-26 2012-11-01 Fang-Yi Hsieh Apparatus for dynamically adjusting video decoding complexity, and associated method
US9591318B2 (en) 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
US11089343B2 (en) 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
JP6421426B2 (ja) 2014-03-26 2018-11-14 沖電気工業株式会社 符号化方式変換装置及びプログラム
CN111741310B (zh) * 2014-10-31 2024-03-19 三星电子株式会社 用于对运动矢量进行编码/解码的方法和装置
US10462459B2 (en) * 2016-04-14 2019-10-29 Mediatek Inc. Non-local adaptive loop filter
US10764603B2 (en) 2018-12-31 2020-09-01 Alibaba Group Holding Limited Resolution-adaptive video coding
WO2020219982A1 (en) * 2019-04-24 2020-10-29 Nextvr Inc. Methods and apparatus for encoding, communicating and/or using images
EP4119273A4 (en) 2020-03-10 2023-04-26 Sumitomo Electric Hardmetal Corp. REAMER

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06105299A (ja) 1992-09-22 1994-04-15 Casio Comput Co Ltd 動画像圧縮装置
EP0691066B1 (en) * 1993-03-26 1999-02-10 BRITISH TELECOMMUNICATIONS public limited company A transcoder
NL9301358A (nl) * 1993-08-04 1995-03-01 Nederland Ptt Transcodeerinrichting.
JPH07264597A (ja) 1994-03-18 1995-10-13 Nippon Telegr & Teleph Corp <Ntt> 動き補償方法
DE4416967A1 (de) * 1994-05-13 1995-11-16 Thomson Brandt Gmbh Verfahren und Vorrichtung zur Transcodierung von Bitströmen mit Videodaten
JP3778960B2 (ja) 1994-06-29 2006-05-24 株式会社東芝 動画像符号化方法及び装置
JP3058028B2 (ja) 1994-10-31 2000-07-04 三菱電機株式会社 画像符号化データ再符号化装置
JPH09322176A (ja) * 1995-12-20 1997-12-12 Sanyo Electric Co Ltd 符号化モード選択方法、動画像符号化装置、符号化方法、記録方法、及び伝送方法
JPH09322173A (ja) 1996-05-27 1997-12-12 Nippon Telegr & Teleph Corp <Ntt> 動画像テロップ抽出方法及び装置
JP3150627B2 (ja) 1996-10-04 2001-03-26 日本電信電話株式会社 復号信号の再符号化方法
FR2757295B1 (fr) 1996-12-13 2001-05-18 Sgs Thomson Microelectronics Procede et dispositif d'estimation de mouvement de portions d'images mobiles
JPH10336672A (ja) * 1997-05-30 1998-12-18 Oki Electric Ind Co Ltd 符号化方式変換装置およびその動きベクトル検出方法
KR100592651B1 (ko) 1997-11-27 2006-06-23 브리티쉬 텔리커뮤니케이션즈 파블릭 리미티드 캄퍼니 트랜스코딩 방법 및 장치
JPH11243551A (ja) 1997-12-25 1999-09-07 Mitsubishi Electric Corp 動き補償装置と動画像符号化装置及び方法
US6058143A (en) * 1998-02-20 2000-05-02 Thomson Licensing S.A. Motion vector extrapolation for transcoding video sequences
JP3855522B2 (ja) * 1999-02-23 2006-12-13 松下電器産業株式会社 動画変換装置
JP4426689B2 (ja) * 1999-02-25 2010-03-03 パナソニック株式会社 動画像符号化方式の変換方法及びその装置
US6625211B1 (en) * 1999-02-25 2003-09-23 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transforming moving picture coding system
JP2001268579A (ja) 2000-03-23 2001-09-28 Sanyo Electric Co Ltd 動画像再符号化装置
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
JP2002010267A (ja) 2000-06-26 2002-01-11 Sony Corp 動きベクトル変換装置及び方法

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005278168A (ja) * 2004-03-02 2005-10-06 Mitsubishi Electric Research Laboratories Inc 圧縮された入力ビデオを処理する方法及びシステム
KR101196429B1 (ko) * 2004-03-12 2012-11-01 삼성전자주식회사 동영상 트랜스코딩 방법 및 그 장치, 이에 사용되는움직임 벡터 보간방법
JP2006109418A (ja) * 2004-10-02 2006-04-20 Samsung Electronics Co Ltd トランスコーディングのために出力マクロブロック及び動きベクトルを推定する方法及びトランスコーダ
US8059720B2 (en) 2004-11-30 2011-11-15 Humax Co., Ltd. Image down-sampling transcoding method and device
KR100718468B1 (ko) 2004-11-30 2007-05-16 주식회사 휴맥스 영상 축소 트랜스 코딩 방법 및 장치
KR100718467B1 (ko) 2004-11-30 2007-05-16 주식회사 휴맥스 영상 축소 트랜스코딩 방법 및 장치
US7933335B2 (en) 2004-11-30 2011-04-26 Panasonic Corporation Moving picture conversion apparatus
KR101147744B1 (ko) * 2005-02-22 2012-05-25 엘지전자 주식회사 비디오 트랜스 코딩 방법 및 장치와 이를 이용한 ｐｖｒ
JP4604805B2 (ja) * 2005-04-12 2011-01-05 Ｋｄｄｉ株式会社 ビデオ情報変換装置及びプログラム
JP2006295598A (ja) * 2005-04-12 2006-10-26 Kddi Corp ビデオ情報変換装置及びプログラム
JP4600997B2 (ja) * 2005-11-08 2010-12-22 Ｋｄｄｉ株式会社 符号化方式変換装置
JP2007134810A (ja) * 2005-11-08 2007-05-31 Kddi Corp 符号化方式変換装置
KR100801974B1 (ko) 2005-12-08 2008-02-12 한국전자통신연구원 저비용 움직임 추정 장치 및 움직임 추정 방법
JP2007228400A (ja) * 2006-02-24 2007-09-06 Mitsubishi Electric Corp 動画像変換装置
JP2010507946A (ja) * 2006-10-27 2010-03-11 アクトイマジン ビデオストリームの圧縮を最適化するための方法および装置
JP2013515415A (ja) * 2009-12-21 2013-05-02 アルカテル−ルーセント 複数のビデオストリームを結合符号化するための方法および構成
JP2015195470A (ja) * 2014-03-31 2015-11-05 富士通株式会社 符号化装置、符号化方法及び符号化プログラム
US11375216B2 (en) 2017-09-13 2022-06-28 Jvckenwood Corporation Transcoding apparatus, transcoding method, and transcoding program

Also Published As

Publication number Publication date
EP1475971A4 (en) 2010-03-03
WO2003088676A1 (en) 2003-10-23
US20050041740A1 (en) 2005-02-24
EP1475971A1 (en) 2004-11-10
CN1640149A (zh) 2005-07-13
US7526027B2 (en) 2009-04-28
CN100353769C (zh) 2007-12-05
KR100719647B1 (ko) 2007-05-17
KR20040105872A (ko) 2004-12-16
JP4193406B2 (ja) 2008-12-10

Similar Documents

Publication Publication Date Title
JP2003309851A (ja) 映像データ変換装置および映像データ変換方法
KR100750136B1 (ko) 영상의 부호화, 복호화 방법 및 장치
KR100955152B1 (ko) 비디오 인코딩을 위한 다차원 인접 블록 예측
KR100593350B1 (ko) 화상 부호화 장치, 화상 부호화 방법, 화상 복호 장치,화상 복호 방법, 및 통신 장치
JP5061179B2 (ja) 照明変化補償動き予測符号化および復号化方法とその装置
KR100680452B1 (ko) 움직임 벡터 메모리의 갱신방법 및 장치
KR20050074286A (ko) 화상 부호화 장치, 화상 부호화 방법 및 화상 부호화프로그램
US20070133689A1 (en) Low-cost motion estimation apparatus and method thereof
JP3866624B2 (ja) 動画像符号化方法，動画像復号方法，動画像符号化装置および動画像復号装置
JP5213964B2 (ja) 動画像符号化装置及び動画像復号装置
JP5649296B2 (ja) 画像符号化装置
KR20130055773A (ko) 부호화 방법 및 장치
KR20130118735A (ko) 부호화 장치 및 부호화 방법
JP4438749B2 (ja) 符号化装置、符号化方法およびプログラム
JP2007251815A (ja) 再符号化装置及び再符号化用プログラム
KR20010073608A (ko) 압축영상의 공간 도메인에서의 효율적인 엣지 예측 방법
KR100617598B1 (ko) 1/4픽셀 움직임 벡터를 이용한 동영상 압축방법
KR100757832B1 (ko) 1/4픽셀 움직임 벡터를 이용한 동영상 압축방법
KR100986992B1 (ko) Ｈ．264 인코딩 시 고속 인터 모드 결정 방법
JP4100067B2 (ja) 画像情報変換方法及び画像情報変換装置
JP2007228400A (ja) 動画像変換装置
KR100757830B1 (ko) 1/4픽셀 움직임 벡터를 이용한 동영상 압축방법
KR100757831B1 (ko) 1/4픽셀 움직임 벡터를 이용한 동영상 압축방법
KR20070063479A (ko) 1/4픽셀 움직임 벡터를 이용한 동영상 압축방법
KR20080093302A (ko) 고속 동작을 위한 ｍｐｅｇ２／ｈ．２６４ 디지털 비디오트랜스코딩 시스템 및 방법

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20040707

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050406

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070710

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070910

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080122

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080324

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080624

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080730

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080902

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080915

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111003

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121003

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131003

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees