JP2001111961A - トリックモード表示用プログラム情報を含むデジタルデータストリームの再生方法及び装置 - Google Patents

トリックモード表示用プログラム情報を含むデジタルデータストリームの再生方法及び装置

Info

Publication number
JP2001111961A
JP2001111961A JP2000246985A JP2000246985A JP2001111961A JP 2001111961 A JP2001111961 A JP 2001111961A JP 2000246985 A JP2000246985 A JP 2000246985A JP 2000246985 A JP2000246985 A JP 2000246985A JP 2001111961 A JP2001111961 A JP 2001111961A
Authority
JP
Japan
Prior art keywords
trick mode
decoding
mode controller
history
data stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000246985A
Other languages
English (en)
Inventor
Dirk Adolph
アドルフ ディルク
Osutaman Ralf
オスタマン ラルフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deutsche Thomson Brandt GmbH
Original Assignee
Deutsche Thomson Brandt GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deutsche Thomson Brandt GmbH filed Critical Deutsche Thomson Brandt GmbH
Publication of JP2001111961A publication Critical patent/JP2001111961A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】 【課題】 使用中にGOP構成情報を明示的に得るトリ
ックモード表示用プログラム情報を含むデジタルデータ
ストリームの再生方法及び装置を提供する。 【解決手段】 入来デジタルデータストリームをノーマ
ルプレイモードで復号化し、ノーマル復号化中一群の画
像構成ヒストリを生成し、該ヒストリをGOPヒストリ
ロガーに格納し、該ヒストリを用いて該デジタルデータ
ストリームをトリックモードの再生用に編集し、該編集
されたビットストリームをトリックモード用に復号化
し、目標画像又は一連の目標画像を表示する各段階より
なる、デジタルデータストリームを再生する方法。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明はトリックモード表示
用プログラム情報を含むデジタルデータストリームを再
生する方法及び装置に係る。
【0002】
【従来の技術】画像資料中をナビゲートするためにMP
EG符号化映像ビットストリームを復号化するため、符
号化されたGOP構成に関する情報が必要である。符号
化GOP構成が既知の場合、例えばデジタルバーサタイ
ルディスク(DVD)を復号化する際と逆の映像シーケ
ンスを復号化し表示することが可能である。GOP構成
は符号化されたビットストリームで利用可能と思われ抽
出されなければならない。しかし、通常の復号化中発生
されたGOP構成分析を提供することにより、復号化制
御ユニットはトリックモード復号化のため逆戻り又は他
の自由ナビゲーションを制御するのに必要な全ての情報
を得る。
【0003】暗示的GOP構成情報を明示的に得るた
め、GOP構成情報を抽出するため映像ビットストリー
ムを予め分解しメモリにその情報を格納することが知ら
れている。GOP構成情報を明示的に得るために、別の
分解ソフトウェア処理過程が必要であり、或いはそれ用
の分解ハードウェア装置が必要である。ソフトウェア処
理過程は余分な処理パワーを必要とし、ハードウェア装
置は余分なチップ領域を必要とする。
【0004】
【発明が解決しようとする課題】本発明の一つの目的は
使用中にGOP構成情報を明示的に得る方法を提供する
ことである。この目的は請求項1に記載の方法で達成さ
れる。
【0005】本発明の他の目的は本発明方法を利用する
装置を提供することである。この目的は請求項8記載の
装置で達成される。
【0006】本発明の方法及び装置の他の有利な実施例
は夫々の従属項に記載されている。
【0007】MPEGビットストリームはI−、P−及
び/又はB−フレーム型を含むGOP構成で符号化され
ている。フレームの数は例えば画像内容又は圧縮基準に
よって変る。表示順序で映像ピクチャシーケンスを再構
成するため、GOP構成により異なるフレーム型を再分
類する必要がある。GOP構成の情報は明示的に規定さ
れないが、通常の復号化処理中見い出され用いられる。
しかし、GOPからの画像を復号化するため画像表示順
序で自由ナビゲーションをするため、GOP構成を前も
って即ち明示的に知ることが必要である。
【0008】MPEGビットストリームは一つの独立の
符号化I−フレーム及びこのI−フレームからこれに依
存して符号化された幾つかのP−及びB−フレームを含
むGOP構成に作られる。これはデータ圧縮で最良の結
果を得る為になされる。GOP構成は符号化器で自由に
選ばれ、ビットストリームの各新しいGOP内で変る。
GOP構成は復号化処理中各単一画像ヘッダを分解する
ことにより検出される。表示のため、復号化画像がGO
P構成に従って再配列される。
【0009】トリックモード復号化、例えばシングルス
テップバックワードの場合、GOP内のその位置から独
立にGOPの画像を復号することが必要となる。これを
行なうため、GOPの可能な画像に対し、表示のため目
標の画像に到達するまでGOPの最初から始まる全ての
画像を復号化しなければならない。これはGOP構成を
前もって知っておくことを必要とする。
【0010】
【課題を解決するための手段】本発明による、トリック
モード表示用プログラム情報を含むデジタルデータスト
リームを再生する方法は、第1に入来デジタルデータス
トリームがノーマルプレーモードで復号化され、第2に
該ノーマル復号化中一群の画像構成ヒストリが生成さ
れ、第3に該ヒストリがGOPヒストリロガーに格納さ
れ、第4にトリックモードでの再生に対し、該デジタル
データストリームはビットストリームの必要な部分を抽
出し用意するために該ヒストリを用いて編集され、第5
に該編集されたビットストリームはトリックモード用に
復号化され、第6に目標画像又は一連の目標画像が表示
される、各段階を含む。
【0011】編集手段は、トリックモード復号化用に必
要な部分が抽出され標準復号化ハードウェアの為用意さ
れる様に、元のビットストリームを変える。
【0012】有利なことに、GOP構成は通常の再生モ
ード中生成される、予め分解するソフトウェア又は特別
の予め分解するハードウェアは必要ない。
【0013】更に、トリックモード用の該ビットストリ
ームの編集及び復号段階中、最後に復号化された画像は
使用者に対し乱されない画像表示を達成するため表示し
続けけられる。
【0014】復号器で2つのフレームバッファトリック
モード用の該編集されたビットストリームの該復号化に
用いられ、これにより復号化が不可視的に行なわれる。
【0015】余分なバッファを避けるため、トリックモ
ード用の該編集されたビットストリームのB−フレーム
の上記復号化はその内容を格納することなく行なわれ
る。
【0016】望ましくは、トリックモードでの上記再生
はトリックモード制御器により制御され、これにより制
御されたトリックモードは以下の動作を行なう:該トリ
ックモード制御器はモードリクエストユニットからコマ
ンドを受け取り、該トリックモード制御器は該画像ヒス
トリ群の内容を該モードリクエストに基いてリクエスト
し、該トリックモード制御器はデータストリーム選択用
ピックアップ装置を制御し、該トリックモード制御器は
トリックモード適用のため該ビットストリーム編集を可
能にし、該トリックモード制御器は該復号化を制御し、
該トリックモード制御器は該目標画像又は一連の目標画
像の表示のため表示スイッチを起動する。
【0017】他の方法では、上記制御されたトリックモ
ードは以下の動作をする:該トリックモード制御器はモ
ードリクエストユニットからコマンドを受け取り、該ト
リックモード制御器は該画像ヒストリ群の内容を該モー
ドリクエストに基いてリクエストし、該トリックモード
制御器はデータストリーム選択用ピックアップ装置を制
御し、該トリックモード制御器はトリックモード適用の
ため該ビットストリーム編集を可能にし、該トリックモ
ード制御器は該復号化を制御し、該トリックモード制御
器は表示切換情報を提供するためタイムスタンプを該ビ
ットストリームに追加する。
【0018】トリックモード表示用プログラム情報を含
むデジタルデータストリームを再生する本発明による方
法を用いる本発明の装置は、入来デジタルデータストリ
ームをノーマルプレーモードで復号化する復号器と、ノ
ーマル復号化中一群の画像構成ヒストリを生成する抽出
手段と、該ヒストリを格納するGOPヒストリロガー
と、該ヒストリを用いて該デジタルデータストリームを
トリックモードの再生用に編集する編集器と、該編集さ
れたビットストリームをトリックモード用に復号化する
復号器と、目標画像又は一連の目標画像を表示用に提供
する出力とを含む。
【0019】可能手段が上記編集されたトリックモード
用ビットストリーム復号化中最後に復号化された画像の
表示を提供することが有利である。
【0020】上記編集されたトリックモード用ビットス
トリームを復号化するため、2つのフレームバッファは
復号されたビットストリームを格納する。
【0021】本発明装置は望ましくは2つのみのフレー
ムバッファを含む。余分なバッファを避けるため、上記
編集されたトリックモード用ビットストリームのB−フ
レームの復号がその内容を格納することなく行なわれ
る。
【0022】本発明装置は望ましくはトリックモードで
の上記再生を制御するトリックモード制御器を含み、該
トリックモード制御器はモードリクエストユニットに接
続され、該トリックモード制御器は該画像ヒストリの群
の内容を該モードリクエストに基いてリクエストするた
め該ヒストリを格納する該GOPヒストリロガーに接続
され、該トリックモード制御器はデータストリーム選択
を制御するためピックアップ装置に接続され、該トリッ
クモード制御器はトリックモード適用のため該ビットス
トリーム編集を可能にするため該編集器に接続され、該
トリックモード制御器は該復号化を制御する復号器に接
続され、該トリックモード制御器は該目標画像又は一連
の目標画像の表示のため該表示スイッチを起動するため
該出力に接続されてなる。
【0023】或いは上記トリックモード制御器は以下の
特徴を含む:上記トリックモード制御器は該画像ヒスト
リ群の内容を該モードリクエストに基いてリクエストす
るため該ヒストリを格納する該GOPヒストリロガーに
接続され、該トリックモード制御器はデータストリーム
選択を制御するためピックアップ装置に接続され、該ト
リックモード制御器はトリックモード適用のため該ビッ
トストリーム編集を可能にする該編集器に接続され、該
トリックモード制御器は該復号化を制御する復号器に接
続され、該トリックモード制御器は表示切換情報を提供
するためタイムスタンプを該ビットストリームに追加す
る。
【0024】本発明は例えばMPEG1、2、4ビデオ
復号化又はビデオ−CD等の媒体に格納された圧縮され
たビデオ符号化内容用に用いられうる。本発明はハード
ウェア及びソフトウェアに実施されうる。
【0025】
【発明の実施の形態】以下本発明の実施例を図面を参照
して説明する。
【0026】図1は復号化順序対表示順序を示す。図1
から分る様に、復号化順序では、画像はI0,P,B
,B,P,B,B,P,P,Bの順序
で配列されており、一方表示の順序では、画像はI
,B,P,B,B ,P,B,B,P
であり、この例では10画像を含むGOP構成であ
る。前述の如く、このGOP構成は適用又は画像内容に
より変る。
【0027】図2は再生装置内のGOPヒストリ発生の
機能ブロック系統図を示す。
【0028】MPEGビット2ストリームはトリックモ
ード編集装置1に供給される、トリックモード編集装置
1の出力は復号化ハードウェア2に接続されており、復
号化ハードウェアの出力は画像表示装置に接続されてい
る。トリックモード編集装置1はトリックモード制御器
3により制御される。ノーマルプレーモードでは、編集
装置1は上記トリックモード制御器によりトリックモー
ドで動作不能、動作可能とされる。上記トリックモード
制御器3はまた復号化ハードウェア2及び上記再生装置
のピックアップ制御ユニットに接続されている。復号化
ハードウェア2はGOPヒストリロガー4に接続され、
GOPヒストリロガー4は出力を介してトリックモード
制御器3に接続されている。
【0029】ブロック系統の機能を単一ステップバック
ワードモードを例にとり説明する。図1のGOPの5番
目の画像Bが表示上に停止しているとする。一画像の
ステッピングバックワードはGOPの4番目の画像P
を示さなければならない。画像Pが最初から始まるG
OPを復号化することにより再構成され、一方表示に5
番目の画像Bを保持する。復号器2は背景に不可視の
2つの画像IとPを復号化する。Pの復号化が終
った後、表示は目標画像Pに切換わる。
【0030】更に単一ステップバックワードによりGO
Pの3番目の画像B示される。これは最初から再び始
まるGOPを復号し、一方表示の4番目の画像Pを保
持することによりなされる。復号器は背景に不可視の4
つの画像I―P―B―Bを復号する。Bは、
この動作で使われないB−フレームであるので、NUL
L装置で復号化される。NULL装置はメモリが適用さ
れないメモリアドレスである。NULL装置での図示し
ないB−フレームの復号化が、余分ではないが通常の3
つのフレームバッファでトリックモードをさせる為にな
される。次のB−フレーム、画像B再びフレームバッ
ファで復号化され、Bの復号化を終えた後、表示がそ
れに切り換えられる。
【0031】3つのフレームバッファが必要である。一
つのフレームバッファはトリックモード復号化中表示に
画像を示すのに必要であり、二つのフレームバッファは
トリックモード復号化自体に必要である。
【0032】前述の如く、かかるトリックモードを行な
うためGOP構成を前もって発生させることが必要であ
る。ここに示される本発明による解決は、依存する復号
化器ハードウェアを用いてGOP構成の前分析である。
この解決を用いることにより、安価な前分析ハードウェ
ア又はソフトウェアが必要なだけである。
【0033】図2に示す如く、GOPヒストリはGOP
を介して復号器を動作させ画像のタイプをロギングする
ことにより発生される。この不可視復号器の動作中、表
示は更新されない、ログされたGOPヒストリ情報は後
にトリックモード制御ユニットによりトリックモード編
集及び復号化を制御するのに用いられうる。
【0034】本発明の利点は次の通りである: 1)余分なハードウェアを必要とせずに通常復号化処理
中GOPヒストリを発生する。 2)表示された画像に対し不可視の背景中のビットスト
リームを復号可する。 3)表示に使われないB−フレームをNULL装置へ復
号化する、即ち再構成がプラグインされたメモリを有さ
ないアドレス領域に書き込まれる。NULL装置は余分
なフレームバッファなしで不可視復号化を管理するのに
用いられる。 4)単一ステップフォワード、単一ステップバックワー
ド、スローモーションバックワード及びファーストモー
ションバックワードの如きトリックモードに不可視ビッ
トストリーム復号化を用いる。
【図面の簡単な説明】
【図1】復号化順序対表示順序を示す図である。
【図2】GOPヒストリ発生の機能ブロック系統図であ
る。
【符号の説明】
1 トリックモード編集装置 2 復号化ハードウェア 3 トリックモード制御器 4 GOPヒストリロガー
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 7/24 G11B 27/02 Z (72)発明者 ラルフ オスタマン ドイツ連邦共和国,30167 ハノーヴァー, オーバーシュトラーセ 17

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】−入来デジタルデータストリームをノーマ
    ルプレーモードで復号化し、 −ノーマル復号化中一群の画像構成ヒストリを生成し、 −該ヒストリをGOPヒストリロガーに格納し、 −該ヒストリを用いて該デジタルデータストリームをト
    リックモードの再生用に編集し、 −該編集されたビットストリームをトリックモード用に
    復号化し、 −目標画像又は一連の目標画像を表示する各段階よりな
    る、トリックモード表示用プログラム情報を含むデジタ
    ルデータストリームを再生する方法。
  2. 【請求項2】 最後に復号化された画像が該編集された
    トリックモード用ビットストリームの復号化中表示され
    続ける、請求項1記載の方法。
  3. 【請求項3】 該編集されたトリックモード用ビットス
    トリームの該復号化は2つのフレームバッファを用いて
    不可視的になされる請求項2記載の方法。
  4. 【請求項4】 該編集されたトリックモード用ビットス
    トリームの該復号化はその内容を格納せずにB−フレー
    ムでなされる請求項3記載の方法。
  5. 【請求項5】 トリックモードの該再生はトリックモー
    ド制御器で制御される請求項1記載の方法。
  6. 【請求項6】 −該トリックモード制御器はモードリク
    エストユニットからコマンドを受け取り、 −該トリックモード制御器は該画像ヒストリ群の内容を
    該モードリクエストに基いてリクエストし、 −該トリックモード制御器はデータストリーム選択用ピ
    ックアップ装置を制御し、 −該トリックモード制御器はトリックモード適用のため
    該ビットストリーム編集を可能にし、 −該トリックモード制御器は該復号化を制御し、 −該トリックモード制御器は該目標画像又は一連の目標
    画像の表示のため表示スイッチを起動する、請求項5記
    載の方法。
  7. 【請求項7】 −該トリックモード制御器はモードリク
    エストユニットからコマンドを受け取り、 −該トリックモード制御器は該画像ヒストリ群の内容を
    該モードリクエストに基いてリクエストし、 −該トリックモード制御器はデータストリーム選択用ピ
    ックアップ装置を制御し、 −該トリックモード制御器はトリックモード適用のため
    該ビットストリーム編集を可能にし、 −該トリックモード制御器は該復号化を制御し、 −該トリックモード制御器は表示切換情報を提供するた
    めタイムスタンプを該ビットストリームに追加する、請
    求項5の方法。
  8. 【請求項8】 −入来デジタルデータストリームをノー
    マルプレーモードで復号化する復号器と、 −ノーマル復号化中一群の画像構成ヒストリを生成する
    抽出手段と、 −該ヒストリを格納するGOPヒストリロガーと、 −該ヒストリを用いて該デジタルデータストリームをト
    リックモードの再生用に編集する編集器と、 −該編集されたビットストリームをトリックモード用に
    復号化する復号器と、 −目標画像又は一連の目標画像を表示用に提供する出力
    とよりなる、トリックモード表示用プログラム情報を含
    むデジタルデータストリームを再生するデジタル装置。
  9. 【請求項9】 最後に復号化された画像を該編集された
    トリックモード用ビットストリームの復号化中表示可能
    にする手段を有する請求項8記載の装置。
  10. 【請求項10】 2つのフレームバッファは復号化され
    たビットストリームを格納する、請求項9記載の装置。
  11. 【請求項11】 該編集されたトリックモード用ビット
    ストリームの該復号化はその内容を格納せずにB−フレ
    ームでなされる請求項10記載の装置。
  12. 【請求項12】 トリックモード制御器はトリックモー
    ドの該再生を制御する請求項8記載の装置。
  13. 【請求項13】 −該トリックモード制御器はモードリ
    クエストユニットに接続され、 −該トリックモード制御器は該画像ヒストリの群の内容
    を該モードリクエストに基いてリクエストするため該ヒ
    ストリを格納する該GOPヒストリロガーに接続され、 −該トリックモード制御器はデータストリーム選択を制
    御するためピックアップ装置に接続され、 −該トリックモード制御器はトリックモード適用のため
    該ビットストリーム編集を可能にするため該編集器に接
    続され、 −該トリックモード制御器は該復号化を制御する復号器
    に接続され、 −該トリックモード制御器は該目標画像又は一連の目標
    画像の表示のため該表示スイッチを起動するため該出力
    に接続されてなる請求項12記載の装置。
  14. 【請求項14】 −該トリックモード制御器はモードリ
    クエストユニットに接続され、 −該トリックモード制御器は該画像ヒストリ群の内容を
    該モードリクエストに基いてリクエストするため該ヒス
    トリを格納する該GOPヒストリロガーに接続され、 −該トリックモード制御器はデータストリーム選択を制
    御するためピックアップ装置に接続され、 −該トリックモード制御器はトリックモード適用のため
    該ビットストリーム編集を可能にする該編集器に接続さ
    れ、 −該トリックモード制御器は該復号化を制御する復号器
    に接続され、 −該トリックモード制御器は表示切換情報を提供するた
    めタイムスタンプを該ビットストリームに追加する、請
    求項12の装置。
JP2000246985A 1999-08-17 2000-08-16 トリックモード表示用プログラム情報を含むデジタルデータストリームの再生方法及び装置 Pending JP2001111961A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US149296 1993-10-29
US14929699P 1999-08-17 1999-08-17

Publications (1)

Publication Number Publication Date
JP2001111961A true JP2001111961A (ja) 2001-04-20

Family

ID=22529621

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000246985A Pending JP2001111961A (ja) 1999-08-17 2000-08-16 トリックモード表示用プログラム情報を含むデジタルデータストリームの再生方法及び装置

Country Status (1)

Country Link
JP (1) JP2001111961A (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0795536A (ja) * 1993-05-31 1995-04-07 Toshiba Corp 動画像逆再生装置及び方法
JPH08214264A (ja) * 1995-01-31 1996-08-20 Sony Corp 符号化データ復号方法および復号装置
JPH1013791A (ja) * 1996-06-24 1998-01-16 Matsushita Electric Ind Co Ltd 映像信号復号化方法,及び映像信号復号化装置
JPH10173539A (ja) * 1996-12-10 1998-06-26 Matsushita Electric Ind Co Ltd ディジタル圧縮されたデータの復号再生装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0795536A (ja) * 1993-05-31 1995-04-07 Toshiba Corp 動画像逆再生装置及び方法
JPH08214264A (ja) * 1995-01-31 1996-08-20 Sony Corp 符号化データ復号方法および復号装置
JPH1013791A (ja) * 1996-06-24 1998-01-16 Matsushita Electric Ind Co Ltd 映像信号復号化方法,及び映像信号復号化装置
JPH10173539A (ja) * 1996-12-10 1998-06-26 Matsushita Electric Ind Co Ltd ディジタル圧縮されたデータの復号再生装置

Similar Documents

Publication Publication Date Title
JP3491365B2 (ja) 符号化データ復号方法および復号装置
US8639100B2 (en) Accelerated access to frames from a compressed digital video stream without keyframes
JPH0951533A (ja) データ符号化装置および方法、データ復号化装置および方法並びに記録媒体
JP2003032617A (ja) データ記録再生装置及び方法
JP2010022003A (ja) 動画ファイル再生装置、動画ファイル再生方法、プログラム
TW200847780A (en) Video motion menu generation in a low memory environment
KR100556506B1 (ko) 트릭 플레이 특징들을 갖는 디지털 비디오 플레이백
JP2002232834A (ja) 動画撮像記録装置、動画撮像記録方法、及び記憶媒体
JP2006157873A (ja) データ処理システム、再生装置、コンピュータ、再生方法、プログラムおよび記録媒体
US7317866B1 (en) Reproducing a digital datastream containing program information for trick mode display
JP3607315B2 (ja) 動画像復号化装置
JP2001111961A (ja) トリックモード表示用プログラム情報を含むデジタルデータストリームの再生方法及び装置
JPH11313283A (ja) 動画像データ再生装置及び動画像データの逆再生方法
JP2000175152A (ja) 多重化装置、多重化方法及び記録媒体
JP2002218396A (ja) 情報再生装置および情報再生方法、記録媒体、並びにプログラム
JP2000287177A (ja) 画像再生装置
JP2002281458A (ja) 画像情報復号化再生装置および画像情報復号化再生方法
JP2001211420A (ja) ディスク記録媒体における圧縮符号化ストリームの編集方法および編集装置
JP2001291342A (ja) ディジタル情報記録再生装置
JP2000206994A (ja) 音声符号化装置及び復号化装置
JP3178347B2 (ja) 映像出力装置
JP4288534B2 (ja) 符号化データ復号装置及び符号化データ復号方法
JP5968069B2 (ja) 画像処理装置、撮像装置、画像処理装置の制御方法およびプログラム
JPH10327417A (ja) 画像処理装置
JP2003101956A (ja) 再生装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070807

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100614

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100915

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110315