JPH11298906A - 映像信号符号化装置 - Google Patents

映像信号符号化装置

Info

Publication number
JPH11298906A
JPH11298906A JP18874498A JP18874498A JPH11298906A JP H11298906 A JPH11298906 A JP H11298906A JP 18874498 A JP18874498 A JP 18874498A JP 18874498 A JP18874498 A JP 18874498A JP H11298906 A JPH11298906 A JP H11298906A
Authority
JP
Japan
Prior art keywords
field
bab
motion vector
mvp
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP18874498A
Other languages
English (en)
Other versions
JP3924071B2 (ja
Inventor
Jin-Hun Kim
鎮憲 金
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WiniaDaewoo Co Ltd
Original Assignee
Daewoo Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daewoo Electronics Co Ltd filed Critical Daewoo Electronics Co Ltd
Publication of JPH11298906A publication Critical patent/JPH11298906A/ja
Application granted granted Critical
Publication of JP3924071B2 publication Critical patent/JP3924071B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding

Abstract

(57)【要約】 【課題】 フレームベース及びフィールドベース動き
ベクトル双方に基づいて２値形状信号の動きベクトルを
符号化する映像信号符号化装置を提供する。 【解決手段】 目標２値アルファブロックＢＡＢの符
号化により適する符号化法を表す符号化タイプ信号を発
生する符号化タイプ決定部と、目標ＢＡＢ又はその目標
ＢＡＢを分割して生成される上部及び下部フィールドＢ
ＡＢを生成する再編成部と、形状情報及びテキスチャー
情報に対するフレームベース及びフィールドベース動き
ベクトルを有する候補動きベクトル予測値ＭＶＰのう
ち、目標ＢＡＢ又は上部及び下部フィールドＢＡＢの１
つに対応するフレームベースＭＶＰ又はフィールドベー
スＭＶＰを検出するＭＶＰ決定部と、目標ＢＡＢに対応
する動きベクトルを決定する動き推定部と、目標ＢＡＢ
に対応する動きベクトルを符号化する動きベクトル差分
（ＭＶＤ）計算部とを含む。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、２値形状信号符号
化装置に関し、特に、２値形状信号の動きベクトルを符
号化する２値形状信号符号化装置に関する。
【０００２】
【従来の技術】通常、テレビ電話及び電子会議のような
ディジタルテレビジョンシステムにおいて、ビデオフレ
ーム信号におけるビデオライン信号が「画素値」と呼ば
れる一連のディジタルデータからなっているため、各ビ
デオフレーム信号を表現するのには大量のディジタルデ
ータが必要である。しかしながら、通常の伝送チャネル
上の利用可能な周波数帯域幅は制限されているので、そ
のチャネルを通して大量のディジタルデータを伝送する
ためには、特に、テレビ電話及び電子会議のような低ビ
ットレートの映像信号符号化システムの場合、様々なデ
ータ圧縮技法を用いて伝送すべきデータの量を圧縮する
か減らさなければならない。
【０００３】低ビットレートの映像信号符号化システム
において、映像信号を符号化する方法の１つに、所謂、
物体（オブジェクト）指向分析／合成符号化法（Ｏｂｊ
ｅｃｔ−ｏｒｉｅｎｔｅｄ ａｎａｌｙｓｉｓ−ｓｙｎ
ｔｈｅｓｉｓ ｃｏｄｉｎｇｔｅｃｈｎｉｑｕｅ）があ
る。このオブジェクト指向分析／合成符号化法によれ
ば、入力ビデオ映像は複数の物体（オブジェクト）に分
けられ、各オブジェクトの動き、輪郭線及び画素データ
を規定する３組よりなるパラメータが異なる符号化チャ
ネルを通して処理される。
【０００４】このオブジェクト指向符号化方法の一例と
しては、いわゆるＭＰＥＧ−４（Ｍｏｖｉｎｇ Ｐｉｃ
ｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ−４）がある
が、この技法は、低ビットレート通信、相互対話式マル
チメディア（例えば、ゲーム、相互対話式ＴＶなど）及
び領域監視用の機構のような応用分野において、コンテ
キストに基づいたインタラクティビティ、向上された符
号化の効率性の向上及び／又はユニバーサルなアクセス
可能性を許容する視聴覚符号化の標準案を提供する。
【０００５】このＭＰＥＧ−４によれば、入力ビデオ映
像は、ビットストリーム内でユーザがアクセスし得る
か、又は操作し得るエンティティに対応する複数の映像
物体平面（ＶＯＰ）に分割される。ＶＯＰは物体として
称され、幅及び高さが１６画素（マクロブロックの大き
さ）の最小倍数である、各物体を取り囲む境界四角形と
して表れ得る。従って、エンコーダは入力ビデオ映像を
ＶＯＰ単位に処理することになる。
【０００６】ＭＰＥＧ−４に開示されたＶＯＰは、ルミ
ナンスデータ及びクロミナンスデータより構成される形
状情報及びカラー情報を有する。ここで、形状情報は２
値形状信号で表現され、アルファプレーンとして称され
る。このアルファプレーンは各々が１６×１６個の２値
画素よりなる複数の２値アルファブロック（ＢＡＢ）に
分割される。各２値画素は背景画素又は物体画素のうち
の何れか１つとして分類される。ここで、背景画素はア
ルファプレーンにおける物体の外側に位置し、２値画素
値（例えば、０値）として割当てられ、物体画素は物体
の内側に位置し、２値画素値（例えば、２５５）として
割当てられる。
【０００７】ＢＡＢにおける各２値画素は、コンテキス
トに基づいた算術符号化（ＣＡＥ）技法のような従来の
ビットマップベース形状符号化技法を用いて符号化され
得る。例えば、イントラモードにおいて、ＢＡＢにおけ
る全ての２値画素は、イントラＣＡＥ法によって符号化
されて、イントラ符号化ＢＡＢを発生する。ここで、イ
ントラＣＡＥ法によるＢＡＢにおける各２値画素に対す
る内容値は、ＢＡＢにおける各２値画素を取囲む所定の
数（例えば、１０個）の２値画素の値を用いて計算され
る。一方、インター符号化モードにおいては、現ＢＡＢ
における全ての２値画素はインタＣＡＥ法によって符号
化されて、インター符号化ＢＡＢを発生する。ここで、
インタＣＡＥ技法による現ＢＡＢにおける各２値画素の
内容値は、現ＢＡＢにおける各２値画素を取囲む所定の
数（例えば、４個）の２値画素の値と境界動き補償ＢＡ
Ｂにおける所定の数（例えば、５個）の２値画素の値と
を用いて計算される（ＭＰＥＧ−４ Ｖｉｄｅｏ Ｖｅ
ｒｉｆｉｃａｔｉｏｎ Ｍｏｄｅｌ Ｖｅｒｓｉｏｎ
７．０，Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａｎｉｚ
ａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔｉｏ
ｎ， Ｃｏｄｉｎｇｏｆ Ｍｏｖｉｎｇ Ｐｉｃｔｕｒ
ｅｓ Ａｎｄ Ａｓｓｏｃｉａｔｅｄ Ａｕｄｉｏ Ｉ
ｎｆｏｒｍａｔｉｏｎ， ＩＳＯ／ＩＥＣ ＪＴＣ１／
ＳＣ２９／ＷＧ１１ ＭＰＥＧ９７／Ｎ１６４２， Ｂ
ｒｉｓｔｏｌ、１９９７年４月、２８〜３０頁参照）。
【０００８】一方、従来の２値形状符号化技法において
は、符号化の効率を向上させるために、ＢＡＢに対する
該当符号化条件を表示するか又は特徴づけるモード信号
が符号化されることによって、該当符号化モード信号を
発生して伝送する。
【０００９】例えば、ＢＡＢにおける全ての２値画素が
物体画素である場合は、物体画素の２値画素値を符号化
して符号化２値画素値を伝送することより、ＢＡＢにお
ける全ての２値画素が物体画素であることを表すモード
信号を符号化することが好ましい。このように、該当符
号化モード信号をＢＡＢに対する２値形状情報として伝
送することによって、符号化の効率を向上させることが
できる。
【００１０】表１には、従来のモード符号化方法による
ＢＡＢの２値アルファ情報に対する７つのモードが示さ
れている。ここで、ＢＡＢの形状動きベクトル差分（Ｍ
ＶＤ）は、形状動きベクトルＭＶと形状動きベクトル予
測値ＭＶＰとの間の差分であり、ＭＶＰは、従来の動き
推定方法を用いて決定される（ＭＰＥＧ−４ Ｖｉｄｅ
ｏ Ｖｅｒｆｉｃａｔｉｏｎ Ｍｏｄｅｌ Ｖｅｒｓｉ
ｏｎ ７．０、Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａ
ｎｉｚａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔ
ｉｏｎ、Ｃｏｄｉｎｇ ｏｆ Ｍｏｖｉｎｇ Ｐｉｃｔ
ｕｒｅｓ Ａｎｄ Ａｓｓｏｃｉａｔｅｄ Ａｕｄｉｏ
Ｉｎｆｏｒｍａｔｉｏｎ、ＩＳＯ／ＩＥＣ ＪＴＣ１
／ＳＣ２９／ＷＧ１１ ＭＰＥＧ９７／Ｎ１６４２，
Ｂｒｉｓｔｏｌ、Ａｐｒｉｌ １９９７、ｐｐ．２０〜
２３参照）。
【００１１】
【表１】
【００１２】表１において、モード０は現ＢＡＢに対す
るＭＶＤが０であり、現ＢＡＢが最も類似な候補ＢＡＢ
によって表現され得ることを表し、モード１は現ＢＡＢ
に対するＭＶＤが０でない値を有し、現ＢＡＢが最も類
似な候補ＢＡＢによって表現され得ることを表す。モー
ド０の現ＢＡＢに対してはモード信号のみが符号化さ
れ、モード１の現ＢＡＢに対してはモード信号及び該当
ＭＶＤによって現れる。「ｎｏ＿ｕｐｄａｔｅ」の決定
の際は、最も類似な候補ＢＡＢの各画素と現ＢＡＢにお
ける該当画素との間の差分によって差分ＢＡＢが形成さ
れ、差分ＢＡＢに含まれた４×４個の画素よりなる４×
４個のサブブロックのうちの何れかに対するエラーが予
め定められた閾値より小さいか否かが判定される。ここ
で、サブブロックのエラーは、例えば、サブブロックに
おける絶対画素値の和である。全てのサブブロックのエ
ラー値が閾値以下である場合は、現ＢＡＢはＭＶＤの値
によってモード０又は１として決定される。
【００１３】同様に、現ＢＡＢにおける全ての画素が０
に変わるとき、４×４個のサブブロックに対するエラー
が閾値以下である場合には、現ＢＡＢは「ａｌｌ＿０」
モード（即ち、モード２）として符号化される。現ＢＡ
Ｂにおける全ての画素が２５５に変わるとき、４×４個
のサブブロックに対するエラーが閾値以下である場合
は、現ＢＡＢは「ａｌｌ＿２５５」モード（即ち、モー
ド３）として符号化される。モード２又はモード３の現
ＢＡＢに対しては、モード信号のみが符号化される。現
ＢＡＢがモード０〜３のうちの何れにも属さない場合
は、「イントラＣＡＥ」又は「インタＣＡＥ」技法が現
ＢＡＢを符号化するために用いられる。モード４の現Ｂ
ＡＢはモード信号及びイントラＣＡＥ符号化済みのＢＡ
Ｂデータによって、モード５の現ＢＡＢはモード信号及
びインタＣＡＥ符号化済みのＢＡＢデータによって、モ
ード６の現ＢＡＢはモード信号、インタＣＡＥ符号化済
みのＢＡＢデータ及びＭＶＤによって各々表現される。
【００１４】上述したモード符号化技法を用いる従来の
２値形状符号化方法では、基本的にプログレッシブ符号
化を用いる。即ち、従来の２値形状符号化方法ではフィ
ールドベース動き推定方法を用いて行われるインタレー
ス符号化技法が用いられていなかった。しかし、フレー
ム間の空間的及び／又は時間的相関性がフィールド間の
相関性より低い場合、２値形状信号の符号化の効率を向
上させるのにはインタレース符号化技法が適している。
プログレッシブ符号化技法及びインタレース符号化技法
を用いて２値形状信号を適応的に符号化する例示的な方
法及びその装置が、本特許出願と出願人を同じくする日
本国特許第３３８，８２８／９７号に「モード信号符号
化装置」との名称で開示されている。
【００１５】２値形状信号（即ち、形状情報）と同様
に、テキスチャー情報も符号化効率を向上させるため
に、プログレッシブ符号化技法及びインタレース符号化
技法によって適応的に符号化される。
【００１６】適応的符号化処理の結果、形状情報及びテ
キスチャー情報がプログレッシブ符号化技法によって符
号化される場合、フレームベース動きベクトルをフレー
ムベース動き推定方法によって生成し、そうでない場合
には、フィールドベース動きベクトルをフィールドベー
ス動き推定方法によって生成することができる。
【００１７】しかし、従来の２値形状符号化技法は、２
値形状信号を符号化する際にフレームベース動きベクト
ルのみを用いている、という不都合がある。
【００１８】
【発明が解決しようとする課題】従って、本発明の主な
目的は、プログレッシブ符号化技法及びインタレース符
号化技法を用いて２値形状信号を適応的に符号化する映
像信号エンコーダに用いられ、フレームベース動きベク
トル、及びフィールドベース動きベクトルに基づいて、
２値形状信号の動きベクトルを効果的に符号化する映像
信号符号化装置を提供することにある。
【００１９】
【課題を解決するための手段】上記の目的を達成するた
めに、本発明によれば、プログレッシブ符号化又はイン
ターレース符号化技法を選択的に用いて、Ｍ×Ｎ個（Ｍ
及びＮは正の整数）の２値画素よりなる複数の２値アル
ファブロック（ＢＡＢ）に分割される形状情報と、前記
ＢＡＢと同一の数の画素を有する複数のマクロブロック
を有するテキスチャー情報とを有する映像信号を符号化
する映像信号エンコーダに用いられ、前記形状情報の動
きベクトルを符号化する映像信号符号化装置であって、
前記プログレッシブ符号化技法又は前記インターレース
符号化技法のうち何れが目標ＢＡＢを符号化するのによ
り効果的であるかを決定して、符号化タイプ信号を発生
する符号化タイプ決定手段と、前記符号化タイプ信号に
応じて、前記目標ＢＡＢ、又は前記インタレース符号化
技法によって前記目標ＢＡＢを分割することにより生成
される上部及び下部フィールドＢＡＢを発生するＢＡＢ
発生手段と、前記形状情報及びテキスチャー情報に対す
るフレームベース動きベクトル、及びフィールドベース
動きベクトルを有する候補動きベクトル予測値（ＭＶ
Ｐ）のうち、前記目標ＢＡＢ、又は前記上部及び下部フ
ィールドＢＡＢのうちの何れか１つに対応するフレーム
ベースＭＶＰ又はフィールドベースＭＶＰを検出するＭ
ＶＰ検出手段と、前記検出されたＭＶＰを用いて、前記
目標ＢＡＢに対応する動きベクトルを決定する動きベク
トル決定手段と、前記目標ＢＡＢに対応する前記動きベ
クトルを符号化する符号化手段とを含むことを特徴とす
る映像信号符号化装置が提供される。
【００２０】
【発明の実施の形態】以下、本発明の好適実施例につい
て図面を参照しながらより詳しく説明する。
【００２１】図１は、１つのフレーム（又は、ＶＯＰ）
における物体（オブジェクト）に対するテキスチャー情
報及び形状情報を符号化する映像信号符号化器の概略的
なブロック図である。テキスチャー情報は各々Ｍ×Ｎ個
（例えば、１６×１６個）の画素よりなる複数のマクロ
ブロックによって表現され、形状情報はマクロブロック
と同一の数を有する画素よりなる複数の２値アルファブ
ロック（ＢＡＢ）によって表現される。ここで、Ｍ及び
Ｎは正の整数である。
【００２２】テキスチャ符号化部１００はプログレッシ
ブ符号化技法又はインターレース符号化技法を用いて、
マクロブロック単位で供給されるテキスチャー情報を適
応的に符号化する。インターレース符号化技法によれ
ば、マクロブロックは上部フィールドブロック及び下部
フィールドブロックに分割され、各フィールドマクロブ
ロックは（Ｍ／２）×Ｎ個（例えば、８×１６個）の画
素を有する。この両フィールドブロックはフィールド単
位で符号化される。一方、プログレッシブ符号化技法に
おいては、マクロブロックは上記分割過程等のプロセス
無しに符号化される。
【００２３】上記テキスチャー符号化プロセスの結果、
テキスチャ符号化部１００は符号化テキスチャー情報を
データＭＵＸ３００に供給し、テキスチャー動きベクト
ル情報をラインＬ１０を通して形状符号化部２００に供
給する。このテキスチャー動きベクトル情報は、プログ
レッシブ符号化技法又はインターレース符号化技法のう
ちの何れか１つを用いてマクロブロックを符号化するこ
とによって生成される。この場合、マクロブロックに対
応する動きベクトルが存在しない場合は、テキスチャに
対する動きベクトル情報はマクロブロックに対応する動
きベクトルの不在を表すデータを有し、動きベクトルが
存在する場合には、テキスチャに対する動きベクトル情
報はその動きベクトルを有する。
【００２４】詳述すると、マクロブロックがプログレッ
シブ符号化技法によってインター符号化される場合は、
マクロブロックに対応する１つのフレームベース動きベ
クトルが存在する。一方、マクロブロックがインターレ
ース符号化技法によってインター符号化される場合に
は、マクロブロックの上部及び下部フィールドブロック
に各々対応する２つのフィールドベース動きベクトル
（即ち、上部フィールド動きベクトル及び下部フィール
ド動きベクトル）が存在する。又、マクロブロックがイ
ントラ符号化される場合は、該当動きベクトルは定義さ
れず、動きベクトルも存在しない。
【００２５】形状符号化部２００はプログレッシブ符号
化技法又はインターレース符号化技法を用いて、ＢＡＢ
単位で入力される形状情報を適応的に符号化して、符号
化形状情報をデータＭＵＸ３００に供給する。
【００２６】データＭＵＸ３００は、テキスチャ符号化
部１００から受取った符号化テキスチャー情報及び形状
符号化部２００から受取った符号化形状情報を多重化し
て、符号化映像信号としてその伝送のために伝送器（図
示せず）に供給する。
【００２７】図２は、本発明の実施例による図１中の形
状符号化部２００の詳細なブロック図である。形状情報
は現ＢＡＢとしてフレームモード検出部２１０に供給さ
れる。
【００２８】このフレームモード検出部２１０は、現Ｂ
ＡＢの符号化モードが「ａｌｌ＿０」であるか又は「ａ
ｌｌ＿２５５」であるかを調べる。詳述すると、現ＢＡ
ＢはＴ×Ｓ個（例えば、４×４個）の２値画素に分割さ
れ、よって、現ＢＡＢは各々が４×４個の２値画素より
なる４個のサブブロックを有する。ここで、Ｔ及びＳは
正の整数である。
【００２９】現ＢＡＢにおける各サブブロックと「ａｌ
ｌ＿０」のＢＡＢのサブブロックとの間のエラーが予め
定められた閾値以下である場合、フレームモード検出部
２１０は現ＢＡＢの符号化モードが「ａｌｌ＿０」であ
ることを表すタイプ１の指示信号Ｂ１をフレーム符号化
部２４０に供給する。ここで、「ａｌｌ＿０」ＢＡＢは
内部の各画素値が０であるＢＡＢを表す。
【００３０】又、現ＢＡＢにおける各サブブロックと
「ａｌｌ＿２５５」のＢＡＢのサブブロックとの間のエ
ラーが予め定められた閾値以下である場合には、フレー
ムモード検出部２１０は、現ＢＡＢの符号化モードが
「ａｌｌ＿２５５」であることを表すタイプ２の指示信
号Ｂ１をフレーム符号化部２４０に供給する。ここで、
「ａｌｌ＿２５５」のＢＡＢは内部の各画素値が２５５
であるＢＡＢを表す。
【００３１】又、現ＢＡＢの符号化モードが「ａｌｌ＿
０」でも「ａｌｌ＿２５５」でもない場合には、フレー
ムモード検出部２１０は指示信号を、現ＢＡＢをライン
Ｌ２０を介して符号化タイプ決定部２２０、スイッチ２
３０、動き推定及び補償（ＭＥ＆ＭＣ）部２６０に各々
供給する。
【００３２】符号化タイプ決定部２２０は、フレームベ
ース現ＢＡＢ及びフィールドベース現ＢＡＢにおける画
素行間の空間的相関性を比較して、プログレッシブ符号
化技法又はインターレース符号化技法のうち、フレーム
モード検出部２１０から伝送された現ＢＡＢを符号化す
るためのより効果的な符号化技法を選択し、該当符号化
技法を表す符号化タイプ信号Ｅ１を発生して、スイッチ
２３０、ＭＥ＆ＭＣ部２６０及びマルチプレクサ（ＭＵ
Ｘ）２７０に各々供給する。
【００３３】スイッチ２３０は符号化タイプ決定部２２
０からの符号化タイプ信号Ｅ１に応じて、ラインＬ２０
を通して伝送された現ＢＡＢを、ラインＬ２２を通して
フレーム符号化部２４０に供給するか、又はラインＬ２
４を通してフィールド符号化部２５０に供給する。詳述
すると、符号化タイプ信号Ｅ１がプログレッシブ符号化
技法を表す場合は、現ＢＡＢはフレーム符号化部２４０
に供給され、そうでない場合には、フィールド符号化部
２５０に供給される。従って、フレーム符号化部２４０
又はフィールド符号化部２５０は、現ＢＡＢが供給され
るかによって動作を実行する。
【００３４】現ＢＡＢがラインＬ２２を通してフレーム
符号化部２４０に供給される場合は、フレーム符号化部
２４０はフレームベース符号化技法（即ち、プログレッ
シブ符号化技法）を用いて、ＭＥ＆ＭＣ部２６０と相互
作用して現ＢＡＢを符号化することによって、フレーム
符号化データ及び現ＢＡＢに対応するフレームモード信
号を発生する。ここで、フレームモード信号はフレーム
符号化データの符号化状態を表し、上記表１に記載され
ている７つのモードのうちの何れか１つを有する。詳述
すると、モード２（即ち、「ａｌｌ＿０」）又はモード
３（即ち、「ａｌｌ＿２５５」）は、フレームモード検
出部２１０から供給された指示信号Ｂ１のみに基づいて
決定される。符号化フレームモード信号を有するフレー
ム符号化データは、ラインＬ４２を通してＭＵＸ２７０
に供給され、フレームモード信号は、ラインＬ２６を通
してＭＥ＆ＭＣ部２６０に伝送される。
【００３５】一方、現ＢＡＢがラインＬ２４を通してフ
ィールド符号化部２５０に供給される場合は、フィール
ド符号化部２５０はフィールドベース符号化技法（即
ち、インタレース符号化技法）を用いて、ＭＥ＆ＭＣ部
２６０と相互作用して現ＢＡＢを符号化することによっ
て、フィールド符号化データ及び現ＢＡＢに対応するフ
ィールドモード信号を発生する。ここで、フィールドモ
ード信号はフィールド符号化データの符号化状態を表
し、上記表１においてモード２、３はフレーム符号化部
２４０のみによって決定されるので、残りの５つのモー
ドのうちの何れか１つを有する。符号化フィールドモー
ド信号を有するフィールド符号化データは、ラインＬ４
４を通してＭＵＸ２７０に供給され、フィールドモード
信号は、ラインＬ２８を通してＭＥ＆ＭＣ部２６０に伝
送される。
【００３６】ＭＵＸ２７０は、受け取ったフレーム符号
化データ、フィールド符号化データ、及び符号化タイプ
信号Ｅ１を多重化して、図１中のデータＭＵＸ３００に
符号化形状情報として供給する。
【００３７】以下、フレーム符号化部２４０又はフィー
ルド符号化部２５０とＭＥ＆ＭＣ部２６０との間の相互
関連動作に対しては、図３を参照して説明する。
【００３８】ＭＥ＆ＭＣ部２６０はラインＬ２０上の現
ＢＡＢと、符号化タイプ信号Ｅ１と、ラインＬ１０を通
して図１中のテキスチャ符号化部１００から供給された
テキスチャー動きベクトル情報と、ラインＬ２６上のフ
レームモード信号又はラインＬ２８上のフィールドモー
ド信号とに基づいて、現ＢＡＢに対するフレームベース
又はフィールドベース動き推定処理を行う。
【００３９】図３は、本発明の実施例によって、図２中
のＭＥ＆ＭＣ部２６０の詳細なブロック図である。
【００４０】図１中のテキスチャ符号化部１００から伝
送されたテキスチャー動きベクトル情報は、テキスチャ
ー動きベクトルメモリ２６９−２に格納される。
【００４１】現ＢＡＢはラインＬ２０を通してＭＥ＆Ｍ
Ｃ部２６０に供給された後、再編成部２６２に入力され
る。再編成部２６２は符号化タイプ信号Ｅ１に応じて、
現ＢＡＢを上部フィールドＢＡＢ及び下部フィールドＢ
ＡＢに分割してラインＬ５０に供給するか、又は現ＢＡ
ＢをラインＬ５０に直接伝送する。ここで、上部フィー
ルドＢＡＢは現ＢＡＢにおける各奇数番目の行を有し、
下部フィールドＢＡＢは現ＢＡＢにおける各偶数番目の
行を有することが好ましい。再編成部２６２から出力さ
れた現ＢＡＢ、又は上部及び下部フィールドＢＡＢはラ
インＬ５０を通して動き推定部２６３及び再構成部２６
６に供給される。
【００４２】一方、動きベクトル予測値（ＭＶＰ）決定
部２６１は符号化タイプ信号Ｅ１に応じて、本発明によ
る所定の規則によって、形状ＭＶメモリ２６９−１及び
テキスチャーＭＶメモリ２６９−２に格納されている複
数の候補ＭＶＰのうち、現ＢＡＢに対応する形状に対す
る動きベクトル予測値を検出する。このＭＶＰ検出過程
に対しては、図４〜図７を参照して説明する。
【００４３】本発明によれば、映像信号の形状情報及び
テキスチャー情報が、プログレッシブ符号化技法及びイ
ンターレース符号化技法を用いて適応的に符号化される
ため、形状ＭＶメモリ２６９−１も、テキスチャーＭＶ
メモリ２６９−２に格納されているテキスチャー動きベ
クトル情報と類似な形状動きベクトル情報を格納する。
即ち、現ＢＡＢに対応する動きベクトルが存在しない場
合、形状動きベクトル情報は現ＢＡＢに対応する動きベ
クトルの不在を表すデータを有し、動きベクトルが存在
する場合には、形状動きベクトル情報は、該当動きベク
トルのみならずテキスチャ動きベクトル情報も有する。
表１に示す２値形状信号の符号化モードを参照すると、
現ＢＡＢの符号化モードがモード０、１、５、６のうち
の何れか１つとして決定される場合は、現ＢＡＢに対す
る少なくとも１つの動きベクトルが存在し、符号化モー
ドがモード２、３、４のうちの何れか１つとして決定さ
れる場合には、動きベクトルがモード２、３及び４に対
しては定義されないので、現ＢＡＢに対する動きベクト
ルは存在しない。
【００４４】さらに、現ＢＡＢがプログレッシブ符号化
技法によって符号化される場合は、該当形状動きベクト
ル情報は、１つのフレームベース動きベクトルを有し、
現ＢＡＢがインタレース符号化技法によって符号化され
る場合には、上部及び下部フィールドＢＡＢがフィール
ド単位で符号化されるため、両フィールドＢＡＢに対応
する２つのフィールドベース動きベクトル（即ち、上部
フィールド動きベクトル及び下部フィールド動きベクト
ル）を含む。
【００４５】選択部２６８においては、ラインＬ２６又
はＬ２８上の各ＢＡＢに対するモード信号と動き推定部
２６３にて各ＢＡＢに対して生成されることがあるライ
ンＬ５５上の動きベクトルＭＶとに基づいて、形状動き
ベクトル情報が決定される。
【００４６】即ち、ＢＡＢの符号化モードがモード２、
３及び４のうちの何れか１つである場合は、該当動きベ
クトルが存在しても動きベクトルは意味をもたない。従
って、その場合、選択部２６８は動きベクトルの不在を
表す形状動きベクトル情報を形状ＭＶメモリ２６９−１
に供給する。一方、ＢＡＢの符号化モードが０、１、５
及び６のうちの何れか１つである場合には、ＢＡＢに対
する動きベクトルが少なくとも１つ存在するので、該当
動きベクトルを有する形状動きベクトル情報が形状ＭＶ
メモリ２６９−１に供給される。
【００４７】上述したように、形状ＭＶメモリ２６９−
１及びテキスチャーＭＶメモリ２６９−２に格納されて
いるフレームベース動きベクトル及びフィールドベース
動きベクトルは、候補ＭＶＰになり得る。従って、ＭＶ
Ｐ決定部２６１は符号化タイプ信号Ｅ１に応じて、候補
ＭＶＰのうち、現ＢＡＢに対するフレームベースＭＶＰ
又はフィールドベースＭＶＰを検出する。
【００４８】現ＢＡＢがプログレッシブ符号化技法によ
って符号化される場合、即ち、符号化タイプ信号Ｅ１が
フレームベース符号化を表す場合は、現ＢＡＢに対する
フレームベースＭＶＰが生成される。一方、現ＢＡＢが
インターレース符号化技法によって符号化される場合、
即ち、符号化タイプ信号Ｅ１がフィールドベース符号化
を表す場合には、現ＢＡＢに対する上部及び下部フィー
ルドＢＡＢに対応する上部及び下部フィールドＭＶＰを
有するフィールドベースＭＶＰが生成される。
【００４９】その後、ＭＶＰ決定部２６１は、決定され
たＭＶＰ（即ち、フレームベースＭＶＰ又はフィールド
ベースＭＶＰ）を、動き推定部２６３及び動きベクトル
差分（ＭＶＤ）計算部２６４に各々供給する。
【００５０】動き推定部２６３は、ＭＶＰ決定部２６１
から供給されたフレームベース又はフィールドベースＭ
ＶＰのうちの何れか１つと、再編成部２６２から出力さ
れた現ＢＡＢ又は上部及び下部フィールドＢＡＢのうち
の何れか１つと、フレームメモリ２６７から取出された
前フレームとに基づいて、現ＢＡＢに対するフレームベ
ース又はフィールドベース動きベクトルを決定する。
【００５１】例えば、ＭＰＥＧ−４に開示されたよう
に、現ＢＡＢに対するフレームベース動きベクトルは、
次のフレームベース動き推定の過程にて該当フレームベ
ースＭＶＰを用いて決定される。動き補償エラーは、フ
レームベースＭＶＰによって指示されたＢＡＢと現ＢＡ
Ｂとを比較して計算される。この計算された動き補償エ
ラーが各４×４個のサブブロックに対して予め定められ
た閾値以下である場合は、フレームベースＭＶＰが直接
フレームベース動きベクトルとして用いられ、プロセス
は終了する。
【００５２】しかし、上記条件を満足しない場合、候補
動きベクトルは、候補動きベクトルによって指定される
ＢＡＢと現ＢＡＢとを比較して、１６×１６個の動き補
償（ＭＣ）エラーを計算する間フレームベースＭＶＰの
周りで決定される。探索領域は水平及び垂直方向に沿っ
てフレームベースＭＶＰを基準として１６個の画素であ
る。しかる後、最小のＭＣエラーをもたらす候補動きベ
クトルが現ＢＡＢのフレームベース動きベクトルとして
決定される。
【００５３】フィールドベース動き推定の過程も、フレ
ームベース動き推定の過程と同様な方法にて、各フィー
ルドＢＡＢに対して行われる。
【００５４】現ＢＡＢのＭＶ（即ち、フレームベースＭ
Ｖ又はフィールドベースＭＶ）は、ラインＬ５５を通し
て、ＭＶＤ計算部２６４、動き補償部２６５及び選択部
２６８に各々供給される。
【００５５】ＭＶＤ計算部２６４は、現ＢＡＢに対応す
る形状動きベクトル差分（ＭＶＤ）を計算して、現ＢＡ
Ｂの符号化タイプによってラインＬ３０又はＬ３２に供
給する。ここで、ＭＶＤはＭＶとＭＶＰとの間の差分を
表す。
【００５６】動き補償部２６５は、動き推定部２６３か
ら生成されたＭＶ及びフレームメモリ２６７から取出さ
れた前フレームに基づいて、従来の動き補償法を用いて
動き補償ＢＡＢを発生して、現ＢＡＢの符号化タイプに
よってラインＬ３４又はＬ３６に、再構成部２６６に供
給する。
【００５７】再構成部２６６は、ラインＬ２６又はＬ２
８上の現ＢＡＢのモード信号に応じて、動き補償部２６
５から供給された動き補償ＢＡＢ又は、再編成部２６２
から出力されたラインＬ５０上の現ＢＡＢ又は上部及び
下部フィールドＢＡＢを選択して、再構成ＢＡＢとして
発生する。一方、フレーム符号化部２４０から出力され
たラインＬ２６上のモード信号がモード２又はモード３
のうちの１つを表す場合、再構成ＢＡＢは「ａｌｌ＿
０」ＢＡＢ又は「ａｌｌ＿２５５」ＢＡＢになる。
【００５８】再構成ＢＡＢは現ＢＡＢの符号化タイプに
よってラインＬ３８又はＬ４０に供給され、再構成現フ
レームの発生のためにフレームメモリ２６７に供給され
る。この再構成現フレームは、フレームメモリ２６７に
前フレームとして格納される。
【００５９】上記において、ＭＶＤ計算部２６４、動き
補償部２６５及び再構成部２６６の出力は、現ＢＡＢが
プログレッシブ符号化技法によって符号化される場合
は、フレーム単位で生成され、各ラインＬ３０、Ｌ３４
及びＬ３８を通してフレーム符号化部２４０に入力さ
れ、そうでない場合には、フィールド単位で生成され、
各ラインＬ３２、Ｌ３６及びＬ４０を通してフィールド
符号化部２５０に供給される。
【００６０】従って、フレーム符号化部２４０は、現Ｂ
ＡＢの符号化モードを決定し、指示信号Ｂ１と、スイッ
チ２３０を通して伝送された現ＢＡＢと、ラインＬ３０
上のフレームベースＭＶＤと、ラインＬ３４上の動き補
償ＢＡＢと、ラインＬ３８上の再構成ＢＡＢとに基づい
て、従来技術の同じ方法にてフレーム符号化データを発
生する。
【００６１】同様に、フィールド符号化部２５０は、現
ＢＡＢに対応する上部及び下部フィールドＢＡＢの符号
化モードを決定し、スイッチ２３０を通して供給された
現ＢＡＢ、ラインＬ３２上のフィールドベースＭＶＤ、
ラインＬ３６上の上部及び下部フィールドＢＡＢに対応
する動き補償ＢＡＢ及びラインＬ４０上の再構成ＢＡＢ
に基づいて、上部及び下部フィールドＢＡＢに対応する
フィールド符号化データを発生する。
【００６２】以下、図４〜図７を参照して、動きベクト
ル決定及び符号化の過程をより詳細に説明する。
【００６３】本発明によれば、現ＢＡＢに対するＭＶＰ
は、図７（Ａ）に示すような現ＢＡＢ（例えば、ＳＢ）
を取囲むＢＡＢ（例えば、Ｓ１〜Ｓ３）の形状動きベク
トルと、図７（Ｂ）に示すようなマクロブロック（例え
ば、現ＢＡＢ ＳＢに対応するＴＢ）を取囲むマクロブ
ロック（例えば、Ｔ１〜Ｔ３）のテキスチャー動きベク
トルとよりなる複数の候補ＭＶＰのなかから選択され
る。
【００６４】現ＢＡＢを取囲む各ＢＡＢ、及び現ＢＡＢ
に対応するマクロブロックを取囲む各マクロブロック
は、符号化タイプによってフレームベース動きベクト
ル、又は上部及び下部フィールド動きベクトルを有する
フィールドベース動きベクトルを含む。
【００６５】従って、現ＢＡＢのフレームベースＭＶＰ
又はフィールドベースＭＶＰを決定するために、候補Ｍ
ＶＰはＭＰＥＧ−４及び現ＢＡＢの符号化タイプによっ
て決定される優先順位によって決定される。ＭＰＥＧ−
４によれば、図７（Ａ）に示したように、現ＢＡＢ Ｓ
Ｂを取囲むＢＡＢ Ｓ１〜Ｓ３は、Ｓ１、Ｓ２、Ｓ３の
順の優先順位を有し、同様に、マクロブロックＴＢを取
囲むマクロブロックＴ１〜Ｔ３は、Ｔ１、Ｔ２、Ｔ３の
順の優先順位を有する。符号化タイプによる優先順位は
図４〜図６を参照して説明する。
【００６６】図４を参照すると、ステップＳ１０におい
ては、図２中の符号化タイプ決定部２２０にて決定され
た現ＢＡＢの符号化タイプがプログレッシブ符号化タイ
プであるかを判定する。判定の結果、現ＢＡＢの符号化
タイプがプログレッシブ符号化タイプとして決定される
場合、プロセスはステップＳ２０に進んで、ここで候補
ＭＶＰのうち、フレームベース動きベクトルをフィール
ドベース動きベクトルの先に検討して、現ＢＡＢのフレ
ームベースＭＶＰを決定する。
【００６７】ステップＳ２０においては、図７（Ａ）の
Ｓ１、Ｓ２、Ｓ３の順序で候補ＭＶＰsのうち適切なフ
レームベース形状動きベクトルＭＶsが存在するかを判
定する。
【００６８】判定の結果、フレームベースＭＶsが存在
する場合、プロセスがステップＳ７０に進んで、検出し
たフレームベースＭＶsを現ＢＡＢのフレームベースＭ
ＶＰとして決定する。その後、プロセスはタップＢを介
して図６中のステップＳ９０に進む。
【００６９】フレームベースＭＶsが存在する場合に
は、ステップＳ３０にて、図７（Ａ）のＳ１、Ｓ２、Ｓ
３の順序で候補ＭＶＰのうち適切なフィールドベースＭ
Ｖsが存在するかを判定し、判定の結果、上部及び下部
動きベクトルを有するフィールドベースＭＶsが存在す
る場合、プロセスはステップＳ８０に進む。
【００７０】ステップＳ８０においては、フィールドベ
ースＭＶsに含まれた上部及び下部フィールド動きベク
トルの平均値を計算して、その平均値を現ＢＡＢのフレ
ームベースＭＶＰとして決定する。その後、プロセスは
タップＢを介して図６中のステップＳ９０に進む。
【００７１】ステップＳ３０における判定の結果、フィ
ールドベースＭＶsが検出されない場合は、ステップＳ
４０にて、図７（Ｂ）示すＴ１、Ｔ２、Ｔ３の順序で候
補ＭＶＰのうち適切なフレームベーステキスチャー動き
ベクトルＭＶTが存在するかを判定し、判定の結果、存
在すると、フレームベースＭＶTは現ＢＡＢのフレーム
ベースＭＶＰとして決定され（ステップＳ７０）、そう
でない場合には、ステップＳ５０に進む。
【００７２】ステップＳ５０にては、ステップＳ４０と
同一の順序で候補ＭＶＰのうち適切なフィールドベース
ＭＶTが存在するか否かを判定し、判定の結果、上部及
び下部フィールド動きベクトルを有するフィールドベー
スＭＶTが存在する場合は、ステップＳ８０に進む。
【００７３】ステップＳ８０においては、フィールドベ
ースＭＶTに含まれた上部及び下部フィールド動きベク
トルの平均値を計算し、その平均値を現ＢＡＢのフレー
ムベースＭＶＰとして決定する。その後、プロセスはタ
ップＢを介して図６中のステップＳ９０に進む。
【００７４】一方、ステップＳ２０〜Ｓ５０の判定の結
果、候補ＭＶＰのうちフレームベース動きベクトルもフ
ィールドベース動きベクトルも存在しない場合には、現
ＢＡＢのフレームベースＭＶＰは０に設定される（ステ
ップＳ６０）。
【００７５】現ＢＡＢのフレームベースＭＶＰを決定す
るステップＳ２０〜Ｓ８０は、図３中のＭＶＰ決定部２
６１にて行われる。
【００７６】続いて、図６中のステップＳ９０におい
て、現ＢＡＢのフレームベース動きベクトルＭＶは、図
３中の動き推定部２６３にてＭＰＥＧ−４によって、現
ＢＡＢのフレームベースＭＶＰに基づいて決定される。
【００７７】ステップＳ１００においては、現ＢＡＢの
フレームベースＭＶからフレームベースＭＶＰを減算し
て、現ＢＡＢのフレームベース動きベクトル差分ＭＶＤ
を計算する。
【００７８】その後、フレームベースＭＶＤは図２中の
フレーム符号化部２４０に伝送され（ステップＳ１１
０）、動きベクトル決定及び符号化の過程は終了する。
【００７９】一方、図４のステップＳ１０において、現
ＢＡＢの符号化タイプがプログレッシブ符号化タイプで
ない場合は、即ち、現ＢＡＢがインターレース符号化技
法によって符号化される場合は、フレームベース動きベ
クトルの先にフィールドベース動きベクトルが検討さ
れ、プロセスはタップＡを介して図５中のステップＳ１
２０に進む。
【００８０】ステップＳ１２０では、図７のＳ１、Ｓ
２、Ｓ３の順序で候補ＭＶＰのうち上部及び下部動きベ
クトルを有する適切なフィールドベースＭＶsが存在す
るかを判定する。判定の結果、フィールドベースＭＶs
が存在する場合、プロセスはステップＳ１６０に進み、
ここで、上部及び下部フィールドＭＶＰを有するフィー
ルドベースＭＶＰはフィールドベースＭＶsに基づいて
決定される。この上部及び下部フィールドＭＶＰは現Ｂ
ＡＢの上部及び下部フィールドＢＡＢに各々対応する。
【００８１】本発明の実施例によれば、フィールドベー
スＭＶsの上部フィールド動きベクトルは現ＢＡＢの上
部フィールドＭＶＰとして、下部フィールド動きベクト
ルは現ＢＡＢの下部フィールドＭＶＰとして決定され
る。
【００８２】本発明の他の実施例によれば、フィールド
ベースＭＶsの下部フィールド動きベクトルは現ＢＡＢ
の上部及び下部フィールドＭＶＰとして決定される。
【００８３】一方、ステップＳ１２０にて適切なフィー
ルドベースＭＶsが選択されない場合は、Ｓ１、Ｓ２、
Ｓ３の順序で候補ＭＶＰのうち適切なフレームベースＭ
Ｖsが存在するかを判定する（ステップＳ１３０）。
【００８４】判定の結果、フレームベースＭＶsが存在
する場合は、フレームベースＭＶsを現ＢＡＢの上部及
び下部フィールドＭＶＰとして決定し（ステップＳ１６
０）、そうでない場合には、ステップＳ１４０に進む。
【００８５】ステップＳ１４０においては、図７（Ｂ）
のＴ１、Ｔ２、Ｔ３の順序で候補ＭＶＰのうち上部及び
下部フィールド動きベクトルを有するフィールドベース
ＭＶ Tが存在するかを判定する。
【００８６】判定の結果、フィールドベースＭＶTが存
在する場合は、上記フィールドベースＭＶSを用いてフ
ィールドベースＭＶＰを決定する方法と同様に、現ＢＡ
ＢのフィールドベースＭＶＰが決定される（ステップＳ
１６０）。
【００８７】一方、フィールドベースＭＶTが存在しな
い場合には、ステップＳ１４０と同一の順序に、候補Ｍ
ＶＰのうちフレームベースＭＶTが存在するか否かを判
定する（ステップＳ１５０）。
【００８８】判定の結果、フレームベースＭＶTが存在
する場合は、フレームベースＭＶTを現ＢＡＢの上部及
び下部フィールドＭＶＰとして決定し（ステップＳ１６
０）、プロセスはタップＣを介して図６中のステップＳ
１８０に進む。
【００８９】ステップＳ１２０〜Ｓ１５０の判定の結
果、候補ＭＶＰのうちフレームベース動きベクトルもフ
ィールドベース動きベクトルも存在しない場合には、現
ＢＡＢのフィールドベースＭＶＰは０に設定され（ステ
ップＳ１７０）、プロセスはタップＣを介して図６中の
ステップＳ１８０に進む。
【００９０】ステップＳ１８０においては、現ＢＡＢの
フィールドベースＭＶをＭＰＥＧ−４によってフィール
ド単位で決定して、現ＢＡＢの上部及び下部フィールド
ＭＶを発生する。
【００９１】ステップＳ１８０にてフィールドベースＭ
Ｖが決定される場合、フィールド単位で現ＢＡＢのフィ
ールドベースＭＶ及びＭＶＰを用いてフィールドベース
ＭＶＤを計算する（ステップＳ１９０）。
【００９２】ステップＳ２００においては、図２に示し
たように、フィールドベースＭＶＤがラインＬ３２を通
してフィールド符号化部２５０に供給され、動きベクト
ル決定及び符号化の過程は終了する。
【００９３】上記において、本発明の好適な実施の形態
について説明したが、本発明の請求範囲を逸脱すること
なく、当業者は種々の改変をなし得るであろう。
【００９４】
【発明の効果】従って、本発明によれば、２値形状信号
の動きベクトルの符号化に際してフレームベース動きベ
クトルのみならず、フィールドベース動きベクトルも共
に用いることによって、符号化の効率をより一層向上さ
せることができる。
【図面の簡単な説明】
【図１】映像信号エンコーダのブロック図である。
【図２】本発明による図１中の形状符号化部の詳細なブ
ロック図である。
【図３】図２中の動き推定及び動き補償（ＭＥ＆ＭＣ）
部の詳細なブロック図である。
【図４】本発明による動きベクトル符号化の過程を説明
するためのフロー図である。
【図５】同じく、本発明による動きベクトル符号化の過
程を説明するためのフロー図である。
【図６】同じく、本発明による動きベクトル符号化の過
程を説明するためのフロー図である。
【図７】Ａ及びＢよりなり、Ａは２値アルファブロック
Ｓ１〜Ｓ３の形状動きベクトルからなる、Ｂはマクロブ
ロックＴ１〜Ｔ３のテキスチャー動きベクトルからなる
複数の候補ＭＶＰのうち、動きベクトル予測値を決定す
る過程を説明する模式図である。
【符号の説明】
１００ テキスチャ符号化部 ２００ 形状符号化部 ２１０ フレームモード検出部 ２２０ 符号化タイプ決定部 ２３０ スイッチ ２４０ フレーム符号化部 ２５０ フィールド符号化部 ２６０ 動き推定及び補償（ＭＥ＆ＭＣ）部 ２６１ 動きベクトル予測値（ＭＶＰ）決定部 ２６２ 再編成部 ２６３ 動き推定部 ２６４ 動きベクトル差分（ＭＶＤ）計算部 ２６５ 動き補償部 ２６６ 再構成部 ２６７ フレームメモリ ２６８ 選択部 ２６９−１ 形状動きベクトル（ＭＶ）メモリ ２６９−２ テキスチャーＭＶメモリ ２７０ マルチプレクサ（ＭＵＸ） ３００ データＭＵＸ

Claims (8)

    【特許請求の範囲】
  1. 【請求項１】 プログレッシブ符号化又はインターレ
    ース符号化技法を選択的に用いて、Ｍ×Ｎ個（Ｍ及びＮ
    は正の整数）の２値画素よりなる複数の２値アルファブ
    ロック（ＢＡＢ）に分割される形状情報と、前記ＢＡＢ
    と同一の数の画素を有する複数のマクロブロックを有す
    るテキスチャー情報とを有する映像信号を符号化する映
    像信号エンコーダに用いられ、前記形状情報の動きベク
    トルを符号化する映像信号符号化装置であって、 前記プログレッシブ符号化技法又は前記インターレース
    符号化技法のうち何れが目標ＢＡＢを符号化するのによ
    り効果的であるかを決定して、符号化タイプ信号を発生
    する符号化タイプ決定手段と、 前記符号化タイプ信号に応じて、前記目標ＢＡＢ、又は
    前記インタレース符号化技法によって前記目標ＢＡＢを
    分割することにより生成される上部及び下部フィールド
    ＢＡＢを発生するＢＡＢ発生手段と、 前記形状情報及びテキスチャー情報に対するフレームベ
    ース動きベクトル、及びフィールドベース動きベクトル
    を有する候補動きベクトル予測値（ＭＶＰ）のうち、前
    記目標ＢＡＢ、又は前記上部及び下部フィールドＢＡＢ
    のうちの何れか１つに対応するフレームベースＭＶＰ又
    はフィールドベースＭＶＰを検出するＭＶＰ検出手段
    と、 前記検出されたＭＶＰを用いて、前記目標ＢＡＢに対応
    する動きベクトルを決定する動きベクトル決定手段と、 前記目標ＢＡＢに対応する前記動きベクトルを符号化す
    る符号化手段とを含むことを特徴とする映像信号符号化
    装置。
  2. 【請求項２】 前記候補ＭＶＰが、前記目標ＢＡＢを
    取囲み、既に符号化されたＢＡＢに対応するフレームベ
    ース及びフィールドベース動きベクトルと、前記目標Ｂ
    ＡＢに対応する前記マクロブロックを取囲み、既に符号
    化された複数のマクロブロックにに対応するフレームベ
    ース及びフィールドベース動きベクトルとを備えてお
    り、各フィールドベース動きベクトルが、ＢＡＢ又はマ
    クロブロックの、上部及び下部フィールドブロックに対
    応する上部及び下部フィールド動きベクトルを有するこ
    とを特徴とする請求項１に記載の映像信号符号化装置。
  3. 【請求項３】 前記ＭＶＰ決定手段が、前記候補ＭＶ
    Ｐを、前記形状情報に対する前記フレームベース動きベ
    クトル、前記形状情報に対する前記フィールドベース動
    きベクトル、前記テキスチャー情報に対する前記フレー
    ムベース動きベクトル、及び前記テキスチャー情報に対
    する前記フィールドベース動きベクトルの順序で探索し
    て、前記フレームベースＭＶＰを選択することを特徴と
    する請求項２に記載の映像信号符号化装置。
  4. 【請求項４】 前記フレームベースＭＶＰが前記形状
    情報及び前記テキスチャー情報に対する前記フィールド
    ベース動きベクトルのなかから検出される場合、前記Ｍ
    ＶＰ決定手段が、前記検出されたフィールドベース動き
    ベクトルの前記上部及び下部フィールド動きベクトルの
    平均値を計算して、前記フレームベースＭＶＰとして決
    定することを特徴とする請求項３に記載の映像信号符号
    化装置。
  5. 【請求項５】 前記ＭＶＰ決定手段が、前記候補ＭＶ
    Ｐを、前記形状情報に対する前記フィールドベース動き
    ベクトル、前記形状情報に対する前記フレームベース動
    きベクトル、前記テキスチャー情報に対する前記フィー
    ルドベース動きベクトル、及び前記テキスチャー情報に
    対する前記フレームベース動きベクトルの順序で探索し
    て、前記上部及び下部フィールドＢＡＢに各々対応する
    上部及び下部フィールドＭＶＰを有する前記フィールド
    ベースＭＶＰを選択することを特徴とする請求項２に記
    載の映像信号符号化装置。
  6. 【請求項６】 前記フィールドベースＭＶＰが前記形
    状情報及び前記テキスチャー情報に対するフレームベー
    ス動きベクトルのなかから検出される場合、前記ＭＶＰ
    決定手段が、前記検出されたフレームベース動きベクト
    ルを各々前記上部及び下部フィールドＭＶＰとして前記
    上部及び下部フィールドＢＡＢに割当てることを特徴と
    する請求項５に記載の映像信号符号化装置。
  7. 【請求項７】 前記フィールドベースＭＶＰが前記形
    状情報及び前記テキスチャー情報に対するフィールドベ
    ース動きベクトルのなかから検出される場合、前記ＭＶ
    Ｐ決定手段が、前記検出されたフィールドベース動きベ
    クトルの前記上部フィールド動きベクトルを前記上部フ
    ィールドＭＶＰとして決定し、前記下部フィールド動き
    ベクトルを前記下部フィールドＭＶＰとして決定するこ
    とを特徴とする請求項５に記載の映像信号符号化装置。
  8. 【請求項８】 前記フィールドベースＭＶＰが前記形
    状情報及び前記テキスチャー情報に対する前記フィール
    ドベース動きベクトルのなかから検出される場合、前記
    ＭＶＰ決定手段が、前記検出されたフィールドベース動
    きベクトルの前記下部フィールド動きベクトルを、前記
    上部及び下部フィールドＭＶＰとして前記目標ＢＡＢの
    前記上部及び下部フィールドＢＡＢに各々割当てること
    を特徴とする請求項５に記載の映像信号符号化装置。
JP18874498A 1998-03-30 1998-07-03 映像信号符号化装置 Expired - Lifetime JP3924071B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1998-11093 1998-03-30
KR1019980011093A KR100281462B1 (ko) 1998-03-30 1998-03-30 격행 부호화에서 이진 형상 신호의 움직임 벡터 부호화 방법

Publications (2)

Publication Number Publication Date
JPH11298906A true JPH11298906A (ja) 1999-10-29
JP3924071B2 JP3924071B2 (ja) 2007-06-06

Family

ID=36371734

Family Applications (1)

Application Number Title Priority Date Filing Date
JP18874498A Expired - Lifetime JP3924071B2 (ja) 1998-03-30 1998-07-03 映像信号符号化装置

Country Status (9)

Country Link
US (1) US6243418B1 (ja)
EP (1) EP1075765B1 (ja)
JP (1) JP3924071B2 (ja)
KR (1) KR100281462B1 (ja)
CN (1) CN1147153C (ja)
AU (1) AU748276B2 (ja)
DE (1) DE69834348T2 (ja)
ES (1) ES2263208T3 (ja)
WO (1) WO1999051034A1 (ja)

Families Citing this family (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100523908B1 (ko) * 1997-12-12 2006-01-27 주식회사 팬택앤큐리텔 격행주사 영상에 대한 영상신호 부호화 장치 및 그 방법
US6563953B2 (en) * 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US6983018B1 (en) * 1998-11-30 2006-01-03 Microsoft Corporation Efficient motion vector coding for video compression
US6483874B1 (en) * 1999-01-27 2002-11-19 General Instrument Corporation Efficient motion estimation for an arbitrarily-shaped object
US6973126B1 (en) * 1999-03-05 2005-12-06 Kdd Corporation Video coding apparatus according to a feature of a video picture
US6690728B1 (en) 1999-12-28 2004-02-10 Sony Corporation Methods and apparatus for motion estimation in compressed domain
US6671319B1 (en) 1999-12-28 2003-12-30 Sony Corporation Methods and apparatus for motion estimation using neighboring macroblocks
US6483876B1 (en) * 1999-12-28 2002-11-19 Sony Corporation Methods and apparatus for reduction of prediction modes in motion estimation
JP2002064821A (ja) * 2000-06-06 2002-02-28 Office Noa:Kk 動画像情報の圧縮方法およびそのシステム
CN100452883C (zh) 2001-12-17 2009-01-14 微软公司 处理视频图像的方法
US7003035B2 (en) * 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US7280700B2 (en) * 2002-07-05 2007-10-09 Microsoft Corporation Optimization techniques for data compression
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
US7092442B2 (en) * 2002-12-19 2006-08-15 Mitsubishi Electric Research Laboratories, Inc. System and method for adaptive field and frame video encoding using motion activity
US10554985B2 (en) 2003-07-18 2020-02-04 Microsoft Technology Licensing, Llc DC coefficient signaling at small quantization step sizes
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7426308B2 (en) * 2003-07-18 2008-09-16 Microsoft Corporation Intraframe and interframe interlace coding and decoding
US7738554B2 (en) 2003-07-18 2010-06-15 Microsoft Corporation DC coefficient signaling at small quantization step sizes
US8064520B2 (en) * 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
US7620106B2 (en) * 2003-09-07 2009-11-17 Microsoft Corporation Joint coding and decoding of a reference field selection and differential motion vector information
US7599438B2 (en) * 2003-09-07 2009-10-06 Microsoft Corporation Motion vector block pattern coding and decoding
US7616692B2 (en) * 2003-09-07 2009-11-10 Microsoft Corporation Hybrid motion vector prediction for interlaced forward-predicted fields
US7623574B2 (en) * 2003-09-07 2009-11-24 Microsoft Corporation Selecting between dominant and non-dominant motion vector predictor polarities
US7606308B2 (en) * 2003-09-07 2009-10-20 Microsoft Corporation Signaling macroblock mode information for macroblocks of interlaced forward-predicted fields
US7567617B2 (en) * 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7577200B2 (en) * 2003-09-07 2009-08-18 Microsoft Corporation Extended range variable length coding/decoding of differential motion vector information
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
KR100703760B1 (ko) * 2005-03-18 2007-04-06 삼성전자주식회사 시간적 레벨간 모션 벡터 예측을 이용한 비디오인코딩/디코딩 방법 및 장치
US20060222251A1 (en) * 2005-04-01 2006-10-05 Bo Zhang Method and system for frame/field coding
US20060230428A1 (en) * 2005-04-11 2006-10-12 Rob Craig Multi-player video game system
US8118676B2 (en) * 2005-07-08 2012-02-21 Activevideo Networks, Inc. Video game system using pre-encoded macro-blocks
US8270439B2 (en) * 2005-07-08 2012-09-18 Activevideo Networks, Inc. Video game system using pre-encoded digital audio mixing
US8284842B2 (en) * 2005-07-08 2012-10-09 Activevideo Networks, Inc. Video game system using pre-encoded macro-blocks and a reference grid
US9061206B2 (en) * 2005-07-08 2015-06-23 Activevideo Networks, Inc. Video game system using pre-generated motion vectors
US8074248B2 (en) 2005-07-26 2011-12-06 Activevideo Networks, Inc. System and method for providing video content associated with a source image to a television in a communication network
US9077960B2 (en) * 2005-08-12 2015-07-07 Microsoft Corporation Non-zero coefficient block pattern coding
WO2007100187A1 (en) 2006-01-09 2007-09-07 Lg Electronics Inc. Inter-layer prediction method for video signal
KR20070074451A (ko) * 2006-01-09 2007-07-12 엘지전자 주식회사 베이스 레이어의 영상신호를 레이어간 예측에 사용하는방법
US7903894B2 (en) * 2006-10-05 2011-03-08 Microsoft Corporation Color image coding using inter-color correlation
US9042454B2 (en) 2007-01-12 2015-05-26 Activevideo Networks, Inc. Interactive encoded content system including object models for viewing on a remote device
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
KR101337206B1 (ko) 2007-10-12 2013-12-06 삼성전자주식회사 블록 샘플링을 이용한 영상의 움직임 추정 시스템 및 방법.
CN101505419B (zh) * 2008-02-05 2011-06-15 晨星半导体股份有限公司 一种决定移动向量的影像处理装置及其相关方法
CN101272498B (zh) * 2008-05-14 2010-06-16 杭州华三通信技术有限公司 一种视频编码方法及视频编码装置
CN101631241B (zh) * 2008-07-14 2011-05-25 晨星软件研发(深圳)有限公司 影像处理方法及装置
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US8194862B2 (en) * 2009-07-31 2012-06-05 Activevideo Networks, Inc. Video game system with mixing of independent pre-encoded digital audio bitstreams
AU2011315950B2 (en) 2010-10-14 2015-09-03 Activevideo Networks, Inc. Streaming digital video between video devices using a cable television system
WO2012138660A2 (en) 2011-04-07 2012-10-11 Activevideo Networks, Inc. Reduction of latency in video distribution networks using adaptive bit rates
US10409445B2 (en) 2012-01-09 2019-09-10 Activevideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television
US9800945B2 (en) 2012-04-03 2017-10-24 Activevideo Networks, Inc. Class-based intelligent multiplexing over unmanaged networks
US9123084B2 (en) 2012-04-12 2015-09-01 Activevideo Networks, Inc. Graphical application integration with MPEG objects
WO2014145921A1 (en) 2013-03-15 2014-09-18 Activevideo Networks, Inc. A multiple-mode system and method for providing user selectable video content
EP3005712A1 (en) 2013-06-06 2016-04-13 ActiveVideo Networks, Inc. Overlay rendering of user interface onto source video
US9219922B2 (en) 2013-06-06 2015-12-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9294785B2 (en) 2013-06-06 2016-03-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9788029B2 (en) 2014-04-25 2017-10-10 Activevideo Networks, Inc. Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks
CN113079372B (zh) * 2021-06-07 2021-08-06 腾讯科技（深圳）有限公司 帧间预测的编码方法、装置、设备及可读存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU570439B2 (en) * 1983-03-28 1988-03-17 Compression Labs, Inc. A combined intraframe and interframe transform coding system
JPH04177992A (ja) * 1990-11-09 1992-06-25 Victor Co Of Japan Ltd 階層性を有する画像符号化装置
JP3374989B2 (ja) * 1993-03-26 2003-02-10 ソニー株式会社 画像信号符号化方法および画像信号符号化装置、ならびに画像信号復号化方法および画像信号復号化装置
JP3050736B2 (ja) * 1993-12-13 2000-06-12 シャープ株式会社 動画像符号化装置
KR0170932B1 (ko) * 1994-12-29 1999-03-20 배순훈 영상의 시각적, 기하학적 특성에 따른 고속 움직임 추정장치
JP3169783B2 (ja) * 1995-02-15 2001-05-28 日本電気株式会社 動画像の符号化・復号システム
KR0181052B1 (ko) * 1995-03-31 1999-05-01 배순훈 고화질 영상 시스템의 영역 분할 장치
JP3929492B2 (ja) * 1995-10-25 2007-06-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ セグメント化画像符号化方法及びシステム並びにその復号化方法及びシステム
US5991447A (en) * 1997-03-07 1999-11-23 General Instrument Corporation Prediction and coding of bi-directionally predicted video object planes for interlaced digital video
KR100256022B1 (ko) * 1997-10-14 2000-05-01 전주범 이진형상신호부호화에있어서의모드부호화방법
KR100258111B1 (ko) * 1997-10-31 2000-06-01 전주범 이진형상신호적응적부호화장치
US5973743A (en) * 1997-12-02 1999-10-26 Daewoo Electronics Co., Ltd. Mode coding method and apparatus for use in an interlaced shape coder
US6094225A (en) * 1997-12-02 2000-07-25 Daewoo Electronics, Co., Ltd. Method and apparatus for encoding mode signals for use in a binary shape coder

Also Published As

Publication number Publication date
KR19990076276A (ko) 1999-10-15
JP3924071B2 (ja) 2007-06-06
WO1999051034A1 (en) 1999-10-07
ES2263208T3 (es) 2006-12-01
DE69834348D1 (de) 2006-06-01
EP1075765B1 (en) 2006-04-26
KR100281462B1 (ko) 2001-02-01
CN1147153C (zh) 2004-04-21
AU7789598A (en) 1999-10-18
EP1075765A1 (en) 2001-02-14
CN1230855A (zh) 1999-10-06
US6243418B1 (en) 2001-06-05
DE69834348T2 (de) 2006-09-14
AU748276B2 (en) 2002-05-30

Similar Documents

Publication Publication Date Title
JP3924071B2 (ja) 映像信号符号化装置
JP4148549B2 (ja) モード信号符号化装置
US5973743A (en) Mode coding method and apparatus for use in an interlaced shape coder
KR19980080014A (ko) 양방향으로 예측된 비디오 객체면과 같은 디지털비디오 화상의 코딩을 위한 방법 및 장치
EP0921497B1 (en) Interlaced binary shape coding apparatus
JP4573366B2 (ja) 動きベクトル符号化方法及び符号化装置
JPH114441A (ja) インターレースされたデジタルビデオ用のビデオオブジェクト平面の移動推定及び補償
JP4033554B2 (ja) インタレース形状情報符号化方法
US6069976A (en) Apparatus and method for adaptively coding an image signal
JP4518599B2 (ja) 運動推定フェーズにおける３：２プルダウンの検知及び最適化したビデオ圧縮エンコーダ
JP3974244B2 (ja) ２値形状信号符号化装置
KR100291719B1 (ko) 이진 형상 신호의 움직임 벡터 부호화 장치 및 방법
KR100283579B1 (ko) 격행형상코더에사용하기위한모드코딩방법및장치
EP0923250A1 (en) Method and apparatus for adaptively encoding a binary shape signal
MXPA00008745A (en) Method and apparatus for encoding a motion vector of a binary shape signal
KR100285593B1 (ko) 이미지 신호 적응적 부호화 장치
Yu et al. A fast motion estimation algorithm for MPEG-4 shape coding
JPH11187394A (ja) ２値形状信号符号化装置
Puri et al. Mpeg-4 natural video coding—part i
KR19990069012A (ko) 격행주사를 위한 모양정보 부호화 방법 및 그 장치
KR20000021867A (ko) 이진 형상 신호의 움직임 벡터 부호화 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060509

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20060728

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20060803

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070223

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110302

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110302

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120302

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120302

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130302

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130302

Year of fee payment: 6

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130302

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140302

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140302

Year of fee payment: 7

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term