JP3410703B2 - 画像表示方法 - Google Patents

画像表示方法

Info

Publication number
JP3410703B2
JP3410703B2 JP2000021978A JP2000021978A JP3410703B2 JP 3410703 B2 JP3410703 B2 JP 3410703B2 JP 2000021978 A JP2000021978 A JP 2000021978A JP 2000021978 A JP2000021978 A JP 2000021978A JP 3410703 B2 JP3410703 B2 JP 3410703B2
Authority
JP
Japan
Prior art keywords
image
display
information
point
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2000021978A
Other languages
English (en)
Other versions
JP2001215941A (ja
Inventor
芳仁 荒井
睦子 村本
Original Assignee
ディー・リンク株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ディー・リンク株式会社 filed Critical ディー・リンク株式会社
Priority to JP2000021978A priority Critical patent/JP3410703B2/ja
Publication of JP2001215941A publication Critical patent/JP2001215941A/ja
Application granted granted Critical
Publication of JP3410703B2 publication Critical patent/JP3410703B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Description

【発明の詳細な説明】 【0001】 【発明の属する技術分野】この発明は、地域の特定の地
点ないし移動軌跡に対応する画像情報の表示方法に関す
るもので、例えば観光地の特定地点、ゴルフコース、ス
キーの滑降コースなどにおける移動に伴って変化する全
方位画像(パノラマ動画)をディスプレイ画面上に表示
する方法に関するものである。 【0002】 【従来の技術】ディスプレイ画面上に地図や鳥瞰図など
の地域画を表示し、この地域画上の予め定められた特定
地点に対応する位置に地点記号を重ねて表示して、その
地点記号が例えばライトペンやマウスカーソルなどでポ
イントされたときに、当該地点の景観を示す画像をディ
スプレイ画面上に表示する画像表示方法及び装置は公知
である。 【0003】また、観光地の案内所や施設の管理室に設
置されて対応する地域内に設けた複数個のカメラから送
られてくる信号を、ディスプレイ画面上に表示された地
域図上のカメラの設置位置を示す地点記号をポイントす
ることによって選択して、当該選択されたカメラの画像
をディスプレイ画面上に表示する方法及び装置も公知で
ある。 【0004】 【発明が解決しようとする課題】上記のような従来の画
像表示手段は、複数地点の景観情報などを操作者が自由
に選択して表示させることができるという特徴がある。
しかし従来のこの種手段は、地点毎に予め準備された二
次元画像であって、時間軸を含めた四次元空間である現
実の景観に比べて情報量が少なく、臨場感にも欠ける。
また、操作者は地域画上の特定の地点を選択できるだけ
であり、選択された地点においてどのような画像を表示
するかは、予め固定されてしまっている。 【0005】この発明は、より臨場感に溢れ、操作者が
実空間の要素である位置、方角及び時間を統合的に制御
可能にした表示手段を提供する。すなわち実際にその地
点にいるときの状態により近いかたちで地域画上の特定
の地点や移動経路上の景観その他の画像を表示可能にす
ることを課題としている。 【0006】 【課題を解決するための手段】この発明の画像の表示方
法では、ディスプレイ画面上に表示された地域画上に方
向指示要素を備えた地点記号を表示し、操作者が当該地
点の方向指定情報を入力したときに、前記方向指示要素
を指定方向に向けると共に、地域画上の当該地点に対応
する全方位画像情報から前記指定方向の画像部分を切り
出して表示する。 【0007】この出願の請求項1に係る発明の画像の表
示方法は、ディスプレイ画面上に表示された地域画上に
移動経路を示す軌跡記号と方向指示要素とを表示し、当
該軌跡記号上の座標と方向指定情報とが入力されたとき
に、前記方向指示要素を指定方向に向けると共に、当該
軌跡に沿って視点を移動させたときの景観の変化を示す
全方位動画情報から前記座標に対応させた開始時間と終
了時間とで切取られた全方位動画情報を、前記指定方向
の画像部分を切り出して表示するというものである。 【0008】上記方法を実現するための画像表示装置
は、特定地点の画像情報(パノラマ画、動画、静止画、
CGグラフィックスなど)を記録した画像ファイルと、
画像表示区画と地域画表示区画とを備えた表示装置と、
画像情報を前記画像表示区画に表示する画像表示手段
と、地域画情報(地図、間取り図、鳥瞰図など)を前記地
域画表示区画に表示する地域画表示手段と、地域画情報
の特定地点に地点記号を表示する地点記号表示手段と、
地域画表示区画上のポイント座標及び当該座標上の方向
情報の取得手段と、取得したポイント座標が前記特定地
点の座標に対応するときに当該特定地点に関連付けられ
た画像ファイルを選択して前記画像表示手段に送出する
ファイル選択手段とを備えた画像表示装置において、前
記画像ファイルには前記特定地点の全方位画像情報が記
録され、前記地点記号表示手段は方向指示要素を備えた
地点記号を表示し、選択された全方位画像から前記方向
情報に対応する部分画像を切出して画像表示手段に送出
する部分画像切出手段を備えている。 【0009】上記方法及び装置は、スタンドアロンのコ
ンピュータで実現することも、表示端末とサーバとをイ
ンターネット、LAN等でつないだシステムで実現する
こともできる。多くの情報を表示可能にしようとすると
画像データのデータ量が膨大になること及びデータの更
新を考慮すると、画像データは複数のサーバに貯えて表
示端末とネットワークで接続する構成がより好ましい。 【0010】上記請求項1の方法により、パノラマ動画
の特定の方向の画像を経時的に表示できる。 【0011】 【発明の実施の形態】以下、図面を参照して、この発明
の実施の形態を説明する。図示実施例の装置は、表示端
末1と、検索データベース(検索データのサーバ)2
と、画像データベース(画像データのサーバ)3とで構
成されている。表示端末1と2種類のデータベース2、
3とは、インターネットを用いてネットワークを構成し
ており、画像データベース3及び表示端末1は複数存在
している。 【0012】図2は、表示端末1のハードウェア構成の
一例を示したもので、CPU10、ディスプレイ11、
メモリ12、キーボード13、マウス14、CD−RO
M15、スピーカ16、ネットワークインターフェイス
17及びHDD18を備えており、HDD18にはネッ
トワーク接続プログラム、ブラウザ、パノラマ画処理プ
ログラム、動画処理プログラムなどの処理プログラムが
記録されている。ディスプレイ画面上の座標情報は、マ
ウス14によって入力される。 【0013】表示端末1のディスプレイ画面は、図3に
示すように、画像表示区画20、地域図表示区画21及
びテキスト情報表示区画22に区画されており、情報の
選択や表示の切換を行うためのコントロール23、24
の表示領域を備えている。 【0014】ブラウザは、検索データベース2から受取
った情報により画像データベース3から取得する地図、
間取り図、鳥瞰図などの地域画を地域画表示区画21に
表示し、画像撮影位置として指定された地域画表示区画
上の位置に方向指示要素41を備えた地点記号40を表
示する。また動画の撮影位置情報に対応して、動画軌跡
情報に基づいた軌跡を地域画表示区画に表示する。更に
ブラウザは、画像データベース3から受取って後述する
切出しプログラムによって切出された静止画、動画、
Gグラフィックスなどの画像情報を画像表示区画20に
表示し、テキスト情報をテキスト表示区画に表示し、サ
ウンドデータを再生する。 【0015】パノラマ画処理プログラムは、取得された
地域画表示区画上のポイント座標が地点記号の表示位置
に対応するときに、当該地点の地点IDを検索データベ
ース2に送信する地点ID送信プログラムと、指定され
た画像ファイルから取得した方向情報に対応する部分画
像を切出してブラウザへ送出する切出しプログラムとを
含んでいる。 【0016】また動画処理プログラムは、取得されたポ
イント座標が表示された軌跡上にあるときに、当該軌跡
の軌跡IDを検索データベース2に送信する送信プログ
ラムと、取得したポイント座標の位置に対応する動画の
再生区間を動画再生基準時間のデータを基にして切出し
てブラウザに送出する切出しプログラムとを含んでい
る。 【0017】検索データベース2及び画像データベース
3のハードウエア構成は、基本的には表示端末のものと
ほぼ同じであるので、図4及び図5に図2と同じ符号を
付して説明を省略する。 【0018】検索データベース2のHDD18には、ネ
ットワーク接続プログラム、テーブルデータの送信プロ
グラム、テーブル更新プログラム、リストテーブル、検
索テーブルなどが記録されている。検索テーブルの項目
は、例えば画面ID、ネットワークドメイン名、画面タ
イトル名、地域画像情報、地域画表示区画に表示される
複数の地点ないし軌跡の地点ID、各地点IDに対応す
るパノラマ画撮影位置情報、地点記号表示位置情報、方
向指示器基準位置情報、動画撮影軌跡情報、動画再生基
準時間などである。 【0019】更に検索データベースには、複数の地点I
Dのそれぞれに対応して、動画ファイル名、パノラマ画
像ファイル名、テキスト情報ファイル名、サウンドデー
タファイル名が登録されている。 【0020】検索データベース2は、初期情報としてリ
ストテーブルを表示端末1に送り、表示端末1は、テキ
スト表示領域にリストテーブルを表示する。表示端末側
でリストテーブル中の1レコードが選択されると、表示
端末は当該レコードの画面IDを検索データベース2に
送り、検索データベース2は選択されたレコードに記載
されている項目情報を表示端末1に送信する。 【0021】複数の画像データベース3は、それぞれが
検索データベース2に登録されたネットワークドメイン
名を所持しており、検索テーブルに登録されている名前
の動画ファイル、パノラマ画像ファイル、テキスト情報
ファイル、サウンドデータファイルが登録されている。
また画像データベース3は、ネットワーク接続プログラ
ムと画像情報送信プログラムの他に、更新情報送信プロ
グラムを備え、画像データベース3に新しい画像が追加
されたり変更されたり削除されたりしたときは、それに
対応する項目データを検索データベース2に送り、検索
データベース2の更新プログラムは、検索テーブルの内
容を更新する。 【0022】検索データベース2のリストテーブル及び
検索テーブルは、CD−ROMで提供することも可能で
あり、この場合はCD−ROMドライブ15で表示端末
に読み込まれる。またパノラマ画像や動画再生時間の切
出しは、画像データ側で行なうようにすることもでき
る。 【0023】図8は表示端末が備えている方向情報取得
手段を概念的に示したものであり、図7はパノラマ画像
の部分画像切出手段を概念的に示したものである。地域
図上の特定地点を表示する地点記号40は、方向指示要
素41を備えている。この方向指示要素は、当該地点記
号40の近傍の点42の座標が入力されたとき乃至当該
地点記号がドラッグされたときに地点記号の表示座標と
点42の座標から方向を演算して、その向きを変える。
表示端末は、取得した方向指示情報から、現在表示して
いるパノラマ画像データから指定された方向にある所定
領域の部分情報を切出、補正して画像表示区画20に表
示する。 【0024】図9及び10は、地域画表示区画に表示さ
れた軌跡記号43と、動画表示時間との関係を示す概念
図である。軌跡上の点44の座標が入力されると、その
軌跡上の点が動画の再生期間中のどの時間位置であるか
が算出され、その時間位置の前後の時間幅で、動画再生
時間45と終了時間46とが設定される。そして設定さ
れた時間内の画像情報を画像表示区画20に表示する。 【0025】図11はパノラマ画表示時における処理の
流れを示したフローチャートである。操作者が表示ポイ
ントを指定していないときは、表示状態を保持する。ポ
イントを指定すると、位置記号の表示座標R1とポイン
ト座標R2から角度を算出し、表示する画像を更新す
る。そして表示する画像の方向とテキストの表示内容及
びサウンドデータとの関係を記録した方向情報ファイル
を参照し、必要であれば表示データの更新を行う。 【0026】図12は動画を表示するときの処理を示す
フローチャートである。操作者が軌跡記号をポイントし
ていないときは、動画が再生中であれば、その再生を継
続し、再生していなければ、表示状態を保持する。動画
が再生しているときは、その再生時間と表示するテキス
トデータ及びサウンドデータとの関係を記載した軌跡情
報ファイルを参照して、必要な表示やサウンドの変更処
理を行う。操作者が軌跡記号をポイントしたときは、再
生時間を変更し、軌跡情報ファイルを見てテキストデー
タ及びサウンドデータの更新を行う。 【0027】次に上記実施例で示した装置の全体的な動
作を説明する。表示端末には初期画面としてリストテー
ブルが表示されている。リストテーブルには例えば地名
とその簡単な案内文が表示され、操作者が所望の地名を
クリックすると、その画面IDが検索データベースに送
られ、検索データベースはその画面IDに対応するレコ
ードの項目を表示端末に送る。送られた項目には、地域
画情報、地域画上の撮影地点情報、基準方向情報、撮影
軌跡情報が含まれているから、これらの情報を基に、デ
ィスプレイの地域画表示区画に地域画を表示し、更に地
点記号や軌跡記号を重ねで表示する。 【0028】操作者が表示させたい地点記号や軌跡記号
上の点をクリックすると、地点IDが取得され、ドメイ
ン名を基にその画面IDに対応する画像データベースに
接続して画像ファイル名、動画ファイル名などが送信さ
れ、画像データベースは指定された画像のデータを表示
端末に送る。表示端末は、受取った画像を基準方向で切
出して画像表示領域に表示する。 【0029】パノラマ画においては、操作者が地点記号
の方向指示要素の方向を変えると、画像の切出し位置が
変更されて、その方向の画像が表示される。また動画に
おいては、操作者が軌跡上の地点をクリックしたとき
に、その前後の所定時間の動画情報を切出して画像表示
区画に動画として表示する。そして変更データが登録さ
れているときには、画面の変化に応じてテキスト情報や
サウンドデータが変更される。 【0030】以上説明したように、この発明の方法及び
装置では、地域画上に表示された特定地点や特定軌跡を
ポイントすることによって、その映像が表示されるとと
もに、操作者の操作によって視線の方向や動画の再生時
間を操作者が選択することが可能であり、従来は二次元
的な映像しか得られなかったこの種の画像表示手段にお
いて、空間的及び時間的な広がりのある三次元ないし四
次元情報として画像を提示することができるという効果
がある。
【図面の簡単な説明】 【図1】実施例における端末とデータべースの接続形態
を示す説明図 【図2】表示端末のハードウエア構成図 【図3】表示端末のディスプレイ画面を示す図 【図4】検索データベースのハードウエア構成図 【図5】画像データベースのハードウエア構成図 【図6】データの流れを示す説明図 【図7】パノラマ画像と表示する部分情報との関係を示
す図 【図8】方向情報の入力手段の一例を示す説明図 【図9】動画の移動軌跡の例を示す図 【図10】移動軌跡と動画の再生時間との関係を示す説
明図 【図11】パノラマ画像の表示制御の例を示すフローチ
ャート 【図12】動画像の表示制御の例を示すフローチャート 【符号の説明】 1 表示端末 2 検索データベース 3 画像データベース 10 CPU 11 ディスプレイ 12 メモリ 13 キーボード 14 マウス 15 CD−ROM 16 スピーカ 17 ネットワークインタフェース 18 HDD 20 画像表示区画 21 地域図表示区画 22 テキスト情報表示区画 23 コントロール 24 コントロール 40 地点記号 41 方向指示要素 42 近傍の点 43 軌跡記号 44 軌跡上の点 15 動画再生時間 46 終了時間 R1 方向指示要素の座標 R2 ポイント座標
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI G09B 29/00 G09B 29/00 F G09G 5/14 G09G 5/14 A 5/36 510 5/36 510B 510M (56)参考文献 特開 平9−113291(JP,A) 特開2001−4389(JP,A) 特開2000−244812(JP,A) 特開 平11−259502(JP,A) マルチメディア百科事典と百科地球儀 を1つのパッケージに収めたマイクロソ フトエンカルタ総合大百科99−,Oh! PC,日本,ソフトバンク株式会社, 1999年 1月 1日,第17巻、第9号, 198−199 谷田部智之外2名,地図とリンクした 実写映像のインタラクティブ操作,映像 情報メディア学会誌,日本,社団法人映 像メディア学会,1999年10月20日,第53 巻、第10号,1430−1438 (58)調査した分野(Int.Cl.7,DB名) G09G 5/00 - 5/42 G09B 29/00 - 29/14

Claims (1)

  1. (57)【特許請求の範囲】 【請求項1】 ディスプレイ画面上に表示された地域画
    上に移動経路を示す軌跡記号と方向指示要素とを表示
    し、当該軌跡記号上の座標と方向指定情報とが入力され
    たときに、前記方向指示要素を指定方向に向けると共
    に、当該軌跡に沿って視点を移動させたときの景観の変
    化を示す全方位動画情報から前記座標に対応させた開始
    時間と終了時間とで切取られた全方位動画情報を、前記
    指定方向の画像部分を切り出して表示することを特徴と
    する、画像の表示方法。
JP2000021978A 2000-01-31 2000-01-31 画像表示方法 Expired - Lifetime JP3410703B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000021978A JP3410703B2 (ja) 2000-01-31 2000-01-31 画像表示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000021978A JP3410703B2 (ja) 2000-01-31 2000-01-31 画像表示方法

Publications (2)

Publication Number Publication Date
JP2001215941A JP2001215941A (ja) 2001-08-10
JP3410703B2 true JP3410703B2 (ja) 2003-05-26

Family

ID=18548325

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000021978A Expired - Lifetime JP3410703B2 (ja) 2000-01-31 2000-01-31 画像表示方法

Country Status (1)

Country Link
JP (1) JP3410703B2 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5037765B2 (ja) * 2001-09-07 2012-10-03 株式会社トプコン オペレータ誘導システム
US7096428B2 (en) * 2001-09-28 2006-08-22 Fuji Xerox Co., Ltd. Systems and methods for providing a spatially indexed panoramic video
JP3982273B2 (ja) * 2002-02-05 2007-09-26 三菱電機株式会社 ナビゲーション装置
JP4181372B2 (ja) 2002-09-27 2008-11-12 富士フイルム株式会社 表示装置、画像情報管理端末、画像情報管理システム、および画像表示方法
JP4929887B2 (ja) * 2005-09-14 2012-05-09 ソニー株式会社 画像表示装置、画像表示方法、プログラムおよび記録媒体
JP4853149B2 (ja) * 2005-09-14 2012-01-11 ソニー株式会社 画像処理装置、画像表示装置、画像処理方法、プログラムおよび記録媒体
US8453060B2 (en) * 2006-08-25 2013-05-28 Microsoft Corporation Panoramic ring user interface
KR101042909B1 (ko) * 2008-11-13 2011-06-21 엔에이치엔(주) 이미지 데이터를 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
JP5792424B2 (ja) 2009-07-03 2015-10-14 ソニー株式会社 地図情報表示装置、地図情報表示方法およびプログラム
JP5745497B2 (ja) * 2012-12-04 2015-07-08 任天堂株式会社 表示システム、表示制御装置、情報処理プログラム及び表示方法
JP6691589B2 (ja) * 2012-12-04 2020-04-28 任天堂株式会社 情報処理システム及び表示方法
JP6539999B2 (ja) * 2014-11-27 2019-07-10 キヤノンマーケティングジャパン株式会社 情報処理装置、システム、制御方法、及びプログラム
JP2016200884A (ja) * 2015-04-08 2016-12-01 株式会社ユニモト 観光誘客システム、観光誘客方法、観光誘客用データベース、情報処理装置、通信端末装置およびそれらの制御方法と制御プログラム
JP2019101192A (ja) 2017-11-30 2019-06-24 パナソニックIpマネジメント株式会社 画像表示装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09113291A (ja) * 1995-10-19 1997-05-02 Toshiba Corp 地図表示処理装置
JPH11259502A (ja) * 1998-03-11 1999-09-24 Mitsubishi Electric Corp 映像情報表示装置
JP2000244812A (ja) * 1999-02-18 2000-09-08 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報統合装置およびマルチメディア情報統合方法ならびにこの方法を記録した記録媒体
JP2001004389A (ja) * 1999-06-23 2001-01-12 Alps Electric Co Ltd 動画表示装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
マルチメディア百科事典と百科地球儀を1つのパッケージに収めたマイクロソフトエンカルタ総合大百科99−,Oh!PC,日本,ソフトバンク株式会社,1999年 1月 1日,第17巻、第9号,198−199
谷田部智之外2名,地図とリンクした実写映像のインタラクティブ操作,映像情報メディア学会誌,日本,社団法人映像メディア学会,1999年10月20日,第53巻、第10号,1430−1438

Also Published As

Publication number Publication date
JP2001215941A (ja) 2001-08-10

Similar Documents

Publication Publication Date Title
JP3410703B2 (ja) 画像表示方法
US6052123A (en) Animation reuse in three dimensional virtual reality
US6081278A (en) Animation object having multiple resolution format
US7096428B2 (en) Systems and methods for providing a spatially indexed panoramic video
US6268864B1 (en) Linking a video and an animation
US8331611B2 (en) Overlay information over video
US6968973B2 (en) System and process for viewing and navigating through an interactive video tour
EP2324460B1 (en) Touring in a geographic information system
KR20160112898A (ko) 증강현실 기반 동적 서비스 제공 방법 및 장치
US20100122208A1 (en) Panoramic Mapping Display
US20180160194A1 (en) Methods, systems, and media for enhancing two-dimensional video content items with spherical video content
US20110007134A1 (en) Synchronizing video images and three dimensional visualization images
US20050116964A1 (en) Image reproducing method and apparatus for displaying annotations on a real image in virtual space
WO2012051566A2 (en) Semi-automatic navigation within an immersive image
CN106464773B (zh) 增强现实的装置及方法
WO2019192424A1 (zh) 短视频处理方法、装置及移动终端
JP2019528654A (ja) 没入型メディアコンテンツをカスタマイズするための方法及びシステム
US20070038945A1 (en) System and method allowing one computer system user to guide another computer system user through a remote environment
EP1097568A2 (en) Creating animation from a video
KR20000037022A (ko) 인터넷 및 lan/wan등의 네트워크 환경에서의동영상 실시간 서비스 시스템 및 그 방법
JP2005003752A (ja) 地図誘導全方位映像システム
CN112684893A (zh) 信息展示方法、装置、电子设备及存储介质
JP2016200884A (ja) 観光誘客システム、観光誘客方法、観光誘客用データベース、情報処理装置、通信端末装置およびそれらの制御方法と制御プログラム
WO2014132988A1 (ja) 情報処理装置及び情報処理方法
US20030090487A1 (en) System and method for providing a virtual tour

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
R150 Certificate of patent or registration of utility model

Ref document number: 3410703

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090320

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090320

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100320

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100320

Year of fee payment: 7

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130320

Year of fee payment: 10

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160320

Year of fee payment: 13

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term