JP3854062B2 - 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体 - Google Patents

断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体 Download PDF

Info

Publication number
JP3854062B2
JP3854062B2 JP2000374378A JP2000374378A JP3854062B2 JP 3854062 B2 JP3854062 B2 JP 3854062B2 JP 2000374378 A JP2000374378 A JP 2000374378A JP 2000374378 A JP2000374378 A JP 2000374378A JP 3854062 B2 JP3854062 B2 JP 3854062B2
Authority
JP
Japan
Prior art keywords
tomographic plane
image
tomographic
plane image
cursor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000374378A
Other languages
English (en)
Other versions
JP2002011000A (ja
Inventor
正和 鈴木
英基 吉川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
J Morita Manufaturing Corp
Original Assignee
J Morita Manufaturing Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=26591121&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP3854062(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by J Morita Manufaturing Corp filed Critical J Morita Manufaturing Corp
Priority to JP2000374378A priority Critical patent/JP3854062B2/ja
Priority to CA002345217A priority patent/CA2345217C/en
Priority to DE10120649A priority patent/DE10120649A1/de
Priority to US09/844,801 priority patent/US6961911B2/en
Priority to FI20010897A priority patent/FI20010897A/fi
Publication of JP2002011000A publication Critical patent/JP2002011000A/ja
Application granted granted Critical
Publication of JP3854062B2 publication Critical patent/JP3854062B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/02Devices for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computerised tomographs
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/466Displaying means of special interest adapted to display 3D data
    • A61B6/51
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5223Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data generating planar views from image data, e.g. extracting a coronal view from a 3D image
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B42/00Obtaining records using waves other than optical waves; Visualisation of such records by using optical means
    • G03B42/02Obtaining records using waves other than optical waves; Visualisation of such records by using optical means using X-rays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/008Cut plane or projection plane definition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/028Multiple view windows (top-side-front-sagittal-orthogonal)

Description

【0001】
【発明の属する技術分野】
本発明は、CT撮影などして得られた3次元領域の3次元CTデータを再構成し、断層面画像を表示する表示方法、表示装置、この方法を実現するプログラムを記録した記録媒体に関する。
【0002】
【従来の技術】
CT撮影などして得られた3次元領域の3次元CTデータを再構成して、任意の断層面を指定することによって、断層面画像、つまり、指定された断層面上の3次元CTデータを画像化したものを得ることが出来るが、従来は、必要な断層面について得られた断層面画像を複数枚、所定の大きさのフィルムに焼き付けたり、断層面を指定して、その都度得られた断層面画像を表示装置の画面に表示させていた。
【0003】
【発明が解決しようとする課題】
しかしながら、フィルムに焼き付ける方法では、表示枚数に限界があり、表示された断層面画像を見て更に別の断層面の断層面画像が欲しい場合には再度、断層面を指定して3次元CTデータを画像化し、フィルムに焼き付ける必要があるため、機動性に欠けていた。
【0004】
また、表示装置の画面に表示させる場合も含めて、断層面画像は、所望の部分について、相互に直交する3方向から見たものを、相互に対比させて見られるようにすると解りやすいが、このような配慮はなされていなかった。更に、表示装置に表示させる場合には、断層面を指定して断層面画像を表示させるのに、その画像処理のために一定の時間が必要となり、断層面画像を利用する者にもどかしさを与えていた。
【0005】
本発明は、このような事情に鑑みてなされたものであり、3次元領域の3次元CTデータを用いて、直感的に解りやすい断層面画像が容易に得られ、診療目的に最適な位置と方向から見た断層面画像の選定が容易な断層面画像の表示方法、表示装置、この方法を実現するプログラムを記録した記録媒体を提供することを目的とする。
【0006】
【課題を解決するための手段】
上記課題を解決するために、本出願人が提案する発明は、得られた3次元領域の3次元CTデータから予め複数方向の複数枚数の断層面画像を切り出しておき、術者の指示により関連する断層面画像を順次入れ換えて表示することにより、直感的に理解しやすい断層面画像を高速に表示できるもので、請求項1〜6、19、22で、その表示方法を、請求項7〜12、20、23で表示装置を、請求項13〜18、21、24で、その表示方法を実現するプログラムを記録した記録媒体を提案している。
【0007】
特に、請求項1に記載の断層面画像の表示方法は、CT撮影により得られた3次元領域の3次元CTデータを再構成し、前記3次元領域について、相互に直交するX断層面、Y断層面、Z断層面の断層面画像を表示する表示方法であって、予め前記X断層面、Y断層面、Z断層面に平行な断層面の断層面画像を所定の間隔で切り出して、X断層面画像、Y断層面画像、Z断層面画像として全て記憶しておき、前記3次元領域内の任意の点について、前記X断層面画像、Y断層面画像、Z断層面画像を前記X断層面、Y断層面、Z断層面のそれぞれの、他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルとともに画面上に配列表示し、これらのXカーソル、Yカーソル、Zカーソルが前記画面上で移動されるのに伴い、移動されたカーソルに対応した前記X断層面、Y断層面、Z断層面で切り出された前記X断層面画像、Y断層面画像、Z断層面画像を順次表示し、更に前記X断層面、Y断層面、Z断層面で規定されるxyz座標系に対し、このxyz座標系のそれぞれの座標軸回りの回転角度を指定することによって、座標軸回転処理を行い、その回転後のuvw座標系について、相互に直交するU断層面、V断層面、W断層面に平行な断層面の断層面画像を所定の間隔で切り出して、U断層面画像、V断層面画像、W断層面画像として全て記憶しておき、前記3次元領域内の任意の点について、前記U断層面画像、V断層面画像、W断層面画像を前記U断層面、V断層面、W断層面それぞれの、他の断層面への投影線であるUカーソル、Vカーソル、Wカーソルとともに画面上に配列表示し、これらのUカーソル、Vカーソル、Wカーソルが前記画面上で移動されるのに伴い移動されたカーソルに対応した断層面について切り出された断層面画像を順次表示する構成とし、前記回転角度の指定は、前記画面に配列表示された元のX断層面画像、Y断層面画像、Z断層面画像のいずれかの断層面画像上で所望の2点を指定し、その2点間を連結する直線を該断層面画像の中心点に対して回転させた角度によって該断層面画像に対する座標軸回りの回転角度を指定するものであることを特徴とする。
【0008】
この表示方法は、断層面画像を切り出す方向を、3次元領域について設定された直交座標系のx、y、z軸の方向とし、断層面を、これらの座標軸に直交する面、つまり、X、Y、Z座標面に平行なX断層面、Y断層面、Z断層面として、これらの断層面について予め所定間隔でX断層面画像、Y断層面画像、Z断層面画像を切り出して用意しておき、任意の1点、例えば、前記3次元領域の中心を含むX断層面画像、Y断層面画像、Z断層面画像を取り出して、通常の正面図、平面図、側面図のように配列表示するようにしている。
【0009】
したがって、任意の1点を正面、上面、側面から見た断層面画像が対比されて表示されるので直感的に解り易い。
【0010】
また、X断層面画像、Y断層面画像、Z断層面画像のそれぞれには、他の二つの断層面の投影線であるXカーソル、Yカーソル、Zカーソルが表示される。つまり、X断層面画像にはYカーソル、Zカーソル、Y断層面画像にはZカーソル、Xカーソル、Z断層面画像にはXカーソル、Yカーソルが表示される。
【0011】
つまり、それぞれ、X断層面画像に表示されたYカーソルは、X断層面を横切るY断層面の位置、ZカーソルはZ断層面の位置、Y断層面画像に表示されたZカーソルはZ断層面の位置、XカーソルはX断層面の位置、Z断層面画像に表示されたXカーソルはX断層面の位置、YカーソルはY断層面の位置を示している。したがって、3つのX断層面画像、Y断層面画像、Z断層面画像の相対的な関係が直感的に解り易い。
【0012】
また、このような配列表示された画面上で、Xカーソル、Yカーソル、Zカーソルを、マウスなどを用いて平行移動させることができ、その移動に併せて、移動させたカーソルに対応させた断層面画像が順次表示されるので、術者が欲しい最適の断層面画像を見つけ出すのが容易である。
【0014】
また、この表示方法は、X断層面画像、Y断層面画像、Z断層面画像が配列表示された画面で、術者が見たい方向の角度を指定することで、その方向から見た断層面画像を順次表示するようにしたもので、見たい方向が指定されると、その方向の断層面画像が得られるように、X断層面、Y断層面、Z断層面によって規定される直交座標系のxyz座標軸を回転させた新しいuvw座標軸を設定し、この座標系で、予めU断層面画像、V断層面画像、W断層面画像を切り出しておき、これを同様に順次表示させる。
【0016】
また、この表示方法は、座標系の回転方向と回転角度の指定方法を規定したもので、いずれかの断層面画像で、2点を指定し、その2点を結ぶ直線を回転させることで、この断層面画像に対する座標軸の回りに、その回転方向と回転角度だけ回転させる。この際、他の座標軸の回りには回転されない。全ての座標軸回りに回転させたい場合には、この手順を3回繰り返せばよい。
【0017】
このようにすると、一回の指定で、一つの回転角度だけを指定するので、指定操作が解りやすい。請求項2の表示方法は、請求項1において、前記回転角度の指定では、マウス操作によって、前記直線を回転させることを特徴とする。
【0018】
請求項に記載の断層面画像の表示方法は、請求項1または2に記載の断層面画像の表示方法において、前記回転角度の指定は、順序を指定して、複数の断層面画像について一括して行うものであることを特徴とする。
【0019】
この表示方法は、座標軸の回転方向の指定方法を規定したもので、請求項のように、一回に一つの座標軸の回転角度を指定するのではなく、座標回転の順序を指定して、複数の座標軸の回転角度を一括して指定するものである。
【0020】
このようにすると、一回の指定で、全ての回転角度を指定するので、指定操作を素早くすることができる。
【0021】
請求項に記載の断層面画像の表示方法は、請求項1〜3のいずれかに記載の断層面画像の表示方法において、前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像を、前記画面上に立体物の三面図の表示形式で配列表示するようにしたことを特徴とする。
【0022】
この表示方法は、画面への3つの断層面画像の表示方法として、立体物の平面的な表示方法として、通常用いられる三面図の表示形式、例えば、正面図、平面図、側面図のように配列表示を用いることを明確にしたもので、表示された立体物を把握するのが容易である。
【0023】
請求項に記載の断層面画像の表示方法は、請求項1〜4のいずれかに記載の断層面画像の表示方法において、前記画面に表示された前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像において、表示された二つのカーソルの交点を移動させることによって、これら二つのカーソルを同時に移動させ、これらの同時に移動された二つのカーソルに対応した二つの断層面について予め切り出された断層面画像をそれぞれ順次表示するようにしたことを特徴とする。
【0024】
この表示方法は、カーソルの移動方法を規定したもので、カーソルの一つだけを移動させるのではなく、カーソルの交点を保持し移動させることで、2つのカーソルを同時に移動させ、これに対応して、断層面画像も、移動された2つのカーソルに対応した断層面画像をそれぞれ順次表示するもので、二つの断層面画像を同時に順次表示させることができるので便利である。
【0025】
請求項に記載の断層面画像の表示方法は、請求項1〜5のいずれかに記載の断層面画像の表示方法において、前記画面に表示される前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像の画像表示条件、特に、画像のコントラスト、ブライトネスを同一にすることを特徴とする。
【0026】
ここで、画像のコントラストとは画像の明暗の度合い、ブライトネスとは画像全体の明るさの度合いをいう。
【0027】
この表示方法は、画面に表示される断層面画像の画像表示条件を、いずれの画像についても同一にするようにしたもので、特に、画像のコントラスト、ブライトネスを同一にしたものである。したがって、3つの画像が同じような明暗、明るさで表示されるので、画像が見やすく、診療用に適したものとなる。
【0028】
なお、このような画像表示条件を設定する画像条件設定手段は、CRT装置、LED装置などの表示装置には、通常備えられているものであり、もちろん、個々の画像毎にも、この画像表示条件を調整することのできるものである。
そして、請求項7〜12では、それぞれ、請求項1〜6に記載の方法に対応する表示装置を提案している。また、請求項13〜18では、それぞれ、請求項1〜6に記載の方法を実現するプログラムを記憶した記憶媒体を提案している。
【0029】
この表示装置は、請求項1の表示方法を実現する装置であって、請求項1と同様の効果を発揮する。
【0046】
請求項19では、請求項1〜6のいずれかにおいて、前記X断層面画像、Y断層面画像、Z断層面画像の一覧表示をするようにした断層面画像の表示方法を提案している。
【0047】
請求項20では、請求項1〜6のいずれかにおいて、所定の切替操作により、切り出されたX断層面画像、Y断層面画像、Z断層面画像の一覧表示をし、この一覧表示画面で選択された断層面画像を含む三断層面画像配列表示に戻ることができるようにしたことを特徴とする断層面画像の表示方法を提案している。
【0048】
ここで、三断層面画像配列表示とは、請求項1に記載されたX、Y、Z断層面画像をX、Y、Zカーソルと共に表示し、カーソルの移動に対応して断層面画像が順次表示される表示のことをいう。
【0049】
請求項21、22では、それぞれ、請求項19、20に記載した表示方法に従った装置を提案し、請求項23、24では、それぞれ、請求項19、20に記載した表示方法を実現するプログラムを記憶した記憶媒体を提案している。
【0058】
【発明の実施の形態】
以下、添付図とともに、本発明の実施の形態について説明する。
【0059】
図1、2、3は、本発明の断層面画像の表示方法によって表示された画面の例を示す図である。
【0060】
これらの図において、Sは、本発明の断層面画像を表示する対象となる3次元領域であり、ここでは、歯科診療の対象となる歯列弓の一部分を例として用いている。3は3次元領域Sの断層面画像などの画像が表示される画面、IX、IY、IZは、それぞれ、画面3に表示された3次元領域SのX断層面画像、Y断層面画像、Z断層面画像であり、cx、cy、czは、X断層面画像、Y断層面画像、Z断層面画像の画像を切り出す断層面であるX断層面、Y断層面、Z断層面のそれぞれの他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルである。Pは、3次元領域Sの中の任意の点であり、ここでは、この点Pに注目して、この点Pを含む断層面画像が表示されている。
【0061】
これらの図では、任意の1点Pを含むZ断層面画像IZ、Y断層面画像IY、X断層面画像IXが、通常の平面図、正面図、側面図のように配列表示されており、任意の1点を上面、正面、側面から見た断層面画像が対比されて表示されるので直感的に解り易い。
【0062】
Z断層面画像IZ、Y断層面画像IY、X断層面画像IXのそれぞれには、Xカーソルcx、Yカーソルcy、Zカーソルczが表示されている。つまり、Z断層面画像IZにはXカーソルcx、Yカーソルcy、Y断層面画像IYにはZカーソルcz、Xカーソルcx、X断層面画像IXにはYカーソルcy、Zカーソルczが表示されている。
【0063】
つまり、それぞれ、Z断層面画像IZに表示されたXカーソルcxはX断層面の位置、YカーソルcyはY断層面の位置、Y断層面画像IYに表示されたZカーソルczはZ断層面の位置、XカーソルcxはX断層面の位置、X断層面画像IXに表示されたYカーソルcyは、Y断層面の位置、ZカーソルczはZ断層面Yの位置を示している。
【0064】
こうして、3つのX断層面画像、Y断層面画像、Z断層面画像の相対的な関係が直感的に解り易い。
【0065】
図1、2、3の画面を比較すると、左上のZ断層面画像IZの画像だけが変化し、このZ断層面画像IZでは、Xカーソルcx、Yカーソルcyは変化していない。つまり、この3つの図では、X断層面画像IX、Y断層面画像IYは変化していない。
【0066】
一方、下のY断層面画像IYではZカーソルcz、X断層面画像IXではZカーソルczのみが上の位置から下の位置へと同期して移動しており、このカーソルczが、それぞれY断層面画像IY、X断層面画像IXの元となるY断層面、X断層面を横切るZ断層面の位置を示すものであることがよく解る。
【0067】
実際には、例えば、図1のY断層面画像IYにおいてZカーソルczをプレスして保持し、下の方向へ移動させると、これに伴い、X断層面画像IXのZカーソルczも同期して移動し、このカーソルczで規定されるZ断層面で切り出したZ断層面画像IZが順次表示される。図2はその途中の画面、図3は最後に両カーソルx、yをリリースした際に表示される画面を示している。
【0068】
このようなカーソル移動をさせながらの順次表示は、Y断層面画像IY、X断層面画像IXについても同じようにすることができる。
【0069】
こうして、配列表示された画面上で、X断層面の位置を示すXカーソル、Y断層面の位置を示すYカーソル、Z断層面の位置を示すZカーソルのいずれかを、マウスなどを用いて平行移動させることができ、その移動に併せて、移動させたカーソルに対応させた断層面画像が順次表示されるので、術者が欲しい最適の断層面画像を見つけ出すのが容易である。
【0070】
また、上記のようにカーソルを一つずつ移動させる代わりに、Z断層面画像IZ、Y断層面画像IY、X断層面画像IXのそれぞれで直交していXカーソルcxとYカーソルcy、ZカーソルczとXカーソルcx、YカーソルcyとZカーソルczの交点(図中の符号Pに相当する。)を掴んで移動させることによって、これらの二つのカーソルを同時に移動することができ、この移動される二つのカーソルに対応した二つの断層面について予め切り出された断層面画像をそれぞれ順次表示するようにすることもできる。
【0071】
この場合、同時に二つの断層面画像を順次表示させることができるので、便利である。
【0072】
さらに、画面3へのZ断層面画像IZ、Y断層面画像IY、X断層面画像IXの表示の際には、通常備えられている画像条件設定手段によって、画像表示条件を調整することができるが、この調整を、特に、画像のコントラスト、ブライトネスについて、3つの画像の条件が同一になるようにすると、画像の明暗、全体の明るさの統一がとれ、見やすく、診療用に適したものとなる。
【0073】
また、画像表示については、ガンマ係数、つまり、白黒あるいは光の三原色の各色のデータ上の濃淡と、表示された画像を人間が実際に見たときの見え方との関係を示す係数の調整も重要であり、画像の種類などに対応させて適正なガンマ係数を選択することで、人間の目に最も実物に近い画像を知覚させることができるが、この場合も、更に、ガンマ係数なども同一にすることができ、その場合、3つの画像が同じような実物への近さで表示されるので、診療用に適している。なお画面3で、「複数点でROIを設定」ボタンをクリックすると輪郭指定モードとなり、例えば、図1のX、Y、Z断層面画像で点Pの所属する歯牙の輪郭をマウスなどで適宜複数点指定すると、この複数点で指定された歯牙のデータがこの3次元領域から抽出され、この歯牙の立体的な斜視図を得ることができる。
【0074】
図4(a)は本発明の断層面画像の表示方法における断層面画像の切り出し方法を示す概念図、(b)は同表示方法における断層面画像の表示方法の一例を示す概念図である。これより、既に説明した部分には同じ符号を付して重複説明を省略する。
【0075】
図4(a)に示す3次元領域Sは、図1、2、3で説明したもので、この3次元領域Sについては、その3次元領域Sを構成する各点について3次元CTデータが得られており、この3次元領域Sについて、図のようにxyz座標系を設定すると、このxyz座標系において、ある点(x,y,z)のボクセル値V(x,y,z)が決まる。
【0076】
ここで、x軸に垂直な面、つまり、X断層面についてのX断層面画像の切り出しは、x座標(x=xm)を決めて、このx座標を持つX断層面上のボクセル値V(xm,y,z)を2次元平面状に並べれば良い。こうして得られたX断層面画像をX(y,z)xmと記述する。
【0077】
この方法で、X(y,z)x0、X(y,z)x1、・・・、X(y,z)xm、X(y,z)xm+1、X(y,z)xm+2、X(y,z)xm+3、・・・、X(y,z)xnを得る。
【0078】
同様にして、y軸に垂直な面、つまり、Y断層面についてY断層面画像、Y(z,x)y0、Y(z,x)y1、・・・、Y(z,x)ym、Y(z,x)ym+1、Y(z,x)ym+2、Y(z,x)ym+3、・・・、Y(z,x)ynを得、z軸に垂直な面、つまり、Z断層面についてZ断層面画像、Z(x,y)z0、Z(x,y)z1、・・・、Z(x,y)zm、Z(x,y)zm+1、Z(x,y)zm+2、Z(x,y)zm+3、・・・、Z(x,y)znを得る。
【0079】
こうして得られたX、Y、Z断層面画像の内、3次元領域S内の任意の一点Pを含むものを取り出し、更に、Xカーソルcx、Yカーソルcy、Zカーソルczと共に表示した画面の概要が図4(b)であり、その具体的な例が、図1、2、3に示したものである。
【0080】
このような断層面画像の3面表示は、図4(b)だけに限られず、図5(a)、(b)に示すような配置で表示してもよい。
【0081】
なお、この図5(a)、(b)において、「−IZ」、「−IX」と表示しているのは、図4(a)に示したように、断層面をそれに対応したz、x軸の負の方向から見た画像であることを示している。
【0082】
また、図4(a)から解るように、一つの断層面について、それを座標軸の正方向から見た断層面画像と、負方向から見た断層面画像との二種類があり、それをx、y、z軸の三方向について組み合わせることができるので、原理的には、図5のような表示態様は、2の三乗、つまり、8通りあり、診療目的に応じて、いずれの表示態様であってもよいことは言うまでもない。
【0083】
また、三つの断層面画像を配列表示させるのではなく、二つの断層面画像を配列表示させるようにしてもよい。
次いで、上述のような本発明の特徴とする断層面画像の表示を実現する表示装置について説明する。
【0084】
図6(a)は本発明の断層面画像の表示装置の一例を示す外観正面図、(b)は要部ブロック図である。
【0085】
この断層面画像の表示装置10は、装置全体を制御し処理する中央処理装置1、この中央処理装置1へのデータの入出力を管理する入出力部2、この入出力部2からのデータを受けて表示する画面3、データや操作指示の入力を受け入れるキーボード4Aとマウス4Bからなるキーボード/マウス4、外部から、まとまったプログラムや、CT撮影で得られた3次元領域の3次元CTデータなどのデータの入力を受け入れ、外部へ、装置10で作成したデータを出力する補助入出力装置5、装置10の制御に必要なプログラムや関連データを保存する記憶部6、3次元領域について与えられた3次元CTデータから所望の断層面の断層面画像を切り出す画像生成手段7、後述するように、断層面画像を切り出す際の座標軸を回転させる座標軸回転手段8、補助入出力装置5によって読み出し、あるいは、書き込みが可能であって、上述の表示方法を実現するプログラムなどを記憶保存し得る記録媒体9を備えている。
【0086】
画面3には、断層面画像などが表示されるが、この画面3上に表示された要素を、マウス4Bを用いて画面3上で移動させたりすることができる。
【0087】
記憶部6は、ハードディスクなどで構成され、データを書き換え可能に保存記憶することができ、3次元領域の3次元CTデータを記憶するCTデータメモリ6aと再構成された断層面画像を記憶する画像メモリ6bとを備えている。
【0088】
画像生成手段7、座標軸回転手段8の機能は、実際には、記憶部6に記憶されたプログラムに基づき、中央処理装置1によって関連機器が制御されることによって実現される。
【0089】
記録媒体9は、CD−ROM、CD−R、CD−RW、MO、DVD、DVD−R、DVD−RAMなど書き換え可能な、また、書き換え可能でない種々の記録媒体を含むものである。
【0090】
この断層面画像の表示装置10は、このような構成によって、記憶部6に保存された上記断層面画像の表示方法を実現するプログラムに従って、CTデータメモリ6aに保存された3次元領域の3次元CTデータを再構成して、所定の間隔で切り出したX断層面画像IX、Y断層面画像IY、Z断層面画像IZを画像メモリ6bに記憶しておき、図1、2、3で説明したように画面3に表示し、Xカーソルcx、Yカーソルcy、Zカーソルczが画面3上で移動されるのに伴い、移動されたカーソルに対応した断層面画像を順次表示することができる。
【0091】
この表示装置では、元のxyz座標系に対して、希望の角度回転させたuvz座標系についても、座標軸回転手段8によって、座標軸の回転処理を行うことによって、同様に、3つの断層面画像の配列表示や、カーソル移動に伴う断層面画像の順次表示をすることができるが、その詳細について以下に説明する。
【0092】
図7は本発明の断層面画像の表示方法において用いる回転角度の指定方法の一例を示す図、図8は図7で指定した回転をさせ再構成した画面で、更に、回転角度の指定を行う方法を示す図、図9は図8で指定した回転をさせ再構成した画面を示す図である。
【0093】
図7では、図1と同じ3次元領域Sについて、この3次元領域Sが、xyz座標系のZ座標面内で、幾分斜めになっている状態で、それぞれのX、Y、Z断層面画像IX、IY、IZが画面3に表示されている。こので、「2点でスライス角度を設定」のボタンをクリックし、座標軸の回転角度を指定するモードに入る。
【0094】
ここで、Z断層面画像IZで、2点P1、P2を指定すると、それを結ぶ直線P1−P2が表示され、この直線P1−P2をマウス4Bなどでプレスして保持し、例えば、Z断層面画像IZのYカーソルcyになるように回転させると、このZ断層面画像IZの中心点Rに対する直線P1−P2の回転角度θが決まる。
【0095】
次に、「再スライスを実行」ボタンをクリックすると、座標軸回転手段8によって、この回転角度θだけ、xyz座標が、Z断層面画像IZに垂直な座標軸、つまりz軸を中心として回転され、新しいuvw座標系が生成される。
【0096】
uvw座標系とxyz座標系の間には、次の座標変換式のような関係が成り立つ。
【0097】
Figure 0003854062
なお、x軸、y軸回りの座標変換式は、以下の通りである。
【0098】
Figure 0003854062
ついで、新しいuvw座標系について、元のxyz座標系と同じように、断層面画像の切り出しが行われ、図8で示すように画面3に表示される。
【0099】
図8において、cu、cv、cwは、回転された新しいuvw座標系のUカーソル、Vカーソル、Wカーソルを示し、IU、IV、IWは、この新しいuvw座標系におけるU断層面画像、V断層面画像、W断層面画像を示している。
【0100】
この図8を見ると解るように、W断層面画像IWで、3次元領域Sが座標系に沿うような方向となっており、この3次元領域Sについて術者が見たい部分の見たい方向からの断層面画像が表示されている。
【0101】
この画面3において、U断層面画像IUを見ると、歯牙の植え立て方向とVカーソルcvの方向とが幾分傾いた状態であるのが解る。この状態で、特に、この歯牙の植え立て方向に直交する方向から見た断層面画像を希望する場合、更に、「2点でスライス角度を設定」のボタンをクリックし、回転角度指定モードに入り、2点P3、P4を指定し、直線P3−P4をVカーソルcvになるように回転させると回転角度θが決定され、座標回転が行われ、新しいuvw座標系について同様に、断層面画像の切り出しが行われ、図9で示すように画面3に表示される。
【0102】
この画面3においても、図1、2、3で示したのと同様に、カーソルを移動させることによって、断層面画像を順次表示させることができるのは、もちろんである。
【0103】
こうして、本発明の断層面画像の表示方法や装置においては、初めの座標系においても、カーソルを移動させながら、断層面画像を順次表示できるので、見たい部分の画像が素早く、簡単に見つけ出せる上に、さらに、ここで述べたように、見たい方向に座標軸を回転させて、同様に、断層面画像を順次表示させることができるので、希望の部分を希望の方向から見た断層面画像をいち早く、簡単に得ることができる。
【0104】
図10は、本発明の断層面画像の表示方法において用いる回転角度の指定方法の他例を示す図である。
【0105】
この指定方法は、図7、8で説明したように、一回毎に一つのカーソルの回転方向と角度を指定して座標軸回転をするのでなく、一度に、元のxyz座標系の3つのx、y、x軸のうち複数の座標軸回りの回転角度を指定しようとするものである。
【0106】
その方法を、図7と同じxyz座標系によって表示された3次元領域Sについて、同じように回転させる場合について説明する。
【0107】
図7と同様に表示された画面3で、「2点でスライス角度を設定」をクリックすると、角度設定モードとなる。
【0108】
ここで、Z断層面画像IZで点P5、P6を指定し、直線P5−P6を同様に回転させ、回転角度θ1を得る。ついで、X断層面画像IXで点P7、P8を指定し、直線P7−P8を同様に回転させ、回転角度θ2を得る。この後に、「再スライスを実行」ボタンをクリックすると、座標軸回転手段8によって、この回転角度θ1だけ、まず、z軸回りの座標回転が行われ、次いで、回転角度θ2だけx軸回りの座標回転が行われ、その後に、新しいuvw座標系において、断層面画像の切り出しが行われ、画面3に表示されるが、その表示内容は図9と同じである。
これより、本発明の断層面画像の表示方法の更なる特徴である断層面画像の一覧表示について説明する。
【0109】
図11は、本発明の断層面画像の表示方法によって一覧表示された画面の一例を示す図、図12は、図11の画面で選択された断層面画像を含んで三断層面画像配列表示された画面の一例を示す図である。
【0110】
図1の画面において、所定の切替操作、例えば、Z断層面画像IZをダブルクリック、あるいは、Z断層面画像IZを選択した後に、マウスの左ボタンをクリックしてプルダウンメニューを表示させ、その中から「一覧表示」を選択するなどすると、図11に示すように、断層面画像一覧表示がなされる。
【0111】
この図では、3次元領域Sをz軸方向に所定の間隔で切り出したZ断層面画像IZ(1)〜IZ(40)が、一つの画面に納まるように、それぞれ縮小されて一覧表示されている。
【0112】
この例では、3次元領域Sをz軸方向に40等分して、z軸の正方向、つまり上方から見たZ断層面画像IZが、左から右、上から下へ順に40枚並べられており、Z断層面画像IZ(1)が最も下の断層面の画像で、順にカッコ内数字が増えるほど、上層の断層面の画像であり、Z断層面画像IZ(40)が最も上の断層面の画像となっている。
【0113】
術者は、このような一覧表示を見ることに、診療目的に合わせて、パッと希望するZ断層面画像IZを選ぶことができる。
【0114】
例えば、ここで、Z断層面画像IZ(10)を選択し、所定の切替操作、Z断層面画像IZ(10)をダブルクリック、あるいは、Z断層面画像IZ(10)を選択した後に、マウスの左ボタンをクリックしてプルダウンメニューを表示させ、その中から「配列表示」を選択するなどすると、図12の三断層面画像配列表示がされ、選択したZ断層面画像IZ(10)が拡大表示されると共に、Y、Z断層面画像IY、IZも合わせて配列表示されているのが解る。
【0115】
また、図12に示す画面では、図1の場合と全く同様に、X、Y、Zカーソルcx、cy、czを移動させてX、Y、Z断層面画像IX、IY、IZを順次表示させることができる。
【0116】
こうして、図11でだいたいの見当をつけた所望部分のより詳しい断層面画像を見ることができるので、縮小表示の問題も解消され、また、X、Y、Z断層面画像が配列表示されるので、直感的に理解しやすく、カーソル移動によって断層面画像が順次表示されるので、希望部位の立体的な画像がより見つけ易い。
【0117】
なお、この図12において、画像ICは、三断層面画像配列表示の基となるX、Y、Z断層面が、3次元領域Sに対してどのような関係にあるのかを立体的に示すガイド画像である。このようがガイド画像ICを参照することによって、X、Y、Z断層面画像IX、IY、IZが3次元領域Sをどのように切り出した画像であるかを、より明確に把握することができる。
【0118】
図11は、上述したように、図1のような画面から切り替えて表示するようにしてもよいが、X、Y、Z断層面画像IX、IY、IZの切り出しが終了した後に、まず、図11のような一覧表示をさせるようにして、先に、おおざっぱな見当をつけて選択しておいてから、その選択した断層面画像について、図1のような三断層面画像配列表示をさせるようにしてもよい。
【0119】
また、断層面画像の選択後に、単に、選択した断層面画像の拡大表示や、また、X、Y、Zカーソルのない単なるX、Y、Z断層面画像の三面表示をさせるようにしてもよい。
【0120】
さらに、一覧表示は、一種類の断層面画像、例えば、Z断層面画像IZだけのものに限られず、画面が許す限りは、二種類、三種類同時、例えば、X、Y、Z断層面画像IX、IY、IZの内、適宜選んだ二者、あるいは、三者の同時一覧表示をさせるようにしてもよい。このように、複数種類同時一覧表示させた場合には、断層面画像の選択も複数行い、その選択された複数種類の断層面画像を含んだ配列表示をさせるようにもできる。
上述したような断層面画像の表示方法を実現するプログラムは、記録媒体9(図6参照)に記録保存しておくことができ、このプログラムを記録保存した記録媒体9を、通常のコンピュータに読み込ませ処理させることで、本発明の断層面画像の表示方法を実現することができる。
【0121】
なお、ここでは、3次元領域の例として、歯科診療で用いられる歯列弓を示したが、本発明の表示方法などは、これに限らず、3次元領域の各点について物性データが与えられているものについて、その断層面画像を画像表示をする場合には、どの場合にでも用いることができるものである。
【0122】
【発明の効果】
本発明によれば、得られた3次元領域の3次元CTデータから予め複数方向の複数枚数の断層面画像を切り出しておき、術者の指示により関連する断層面画像を順次入れ換えて表示するので、直感的に理解しやすい断層面画像を高速に表示できる。
【0123】
特に、請求項1に記載の表示方法によれば、任意の1点、例えば、3次元領域の中心を含むX断層面画像、Y断層面画像、Z断層面画像を取り出して、通常の正面図、平面図、側面図のように配列表示し、任意の1点を正面、上面、側面から見た断層面画像が対比されて表示されるので直感的に解り易い。
【0124】
また、X断層面画像、Y断層面画像、Z断層面画像のそれぞれには、それぞれの他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルが表示されるので、3つのX断層面画像、Y断層面画像、Z断層面画像の相対的な関係が直感的に解り易い。
【0125】
また、このような配列表示された画面上で、Xカーソル、Yカーソル、Zカーソルを、マウスなどを用いて平行移動させることができ、その移動に併せて、移動させたカーソルに対応させた断層面画像が順次表示されるので、術者が欲しい最適の断層面画像を見つけ出すのが容易である。
【0126】
また、X断層面画像、Y断層面画像、Z断層面画像が配列表示された画面で、術者が見たい方向の角度を指定することで、その方向から見た断層面画像を順次表示するようにしたもので、見たい位置だけでなく、見たい方向からの断層面画像も簡単に得ることができる。
【0127】
また、いずれかの断層面画像で、2点を指定し、その2点を結ぶ直線を回転させることで、この断層面画像に対する座標軸の回りに、その回転方向と回転角度だけ回転させ、一回の指定で、一つの回転角度だけを指定するので、指定操作が解りやすい。
【0128】
特に請求項に記載の表示方法によれば、座標回転の順序を指定して、複数の座標軸の回転角度を一括して指定するので、指定操作を素早くすることができる。
【0129】
特に請求項に記載の表示方法によれば、画面への3つの断層面画像の表示方法として、通常用いられる三面図の表示形式、例えば、正面図、平面図、側面図のように配列表示を用いるので、表示された画像を把握するのが容易である。
【0130】
特に請求項に記載の表示方法によれば、カーソルの交点を保持し移動させることで、2つのカーソルを同時に移動させ、これに対応して、断層面画像も、移動された2つのカーソルに対応した断層面画像をそれぞれ順次表示するため、二つの断層面画像を同時に順次表示させることができるので便利である。
【0131】
特に請求項に記載の表示方法によれば、画面に表示される断層面画像の画像表示条件、特に、画像のコントラスト、ブライトネスを、いずれの画像についても同一にするようにしたので、3つの画像が同じような明暗、明るさで表示されるため、見やすく、診療用に適したものとなる。
【0132】
請求項7〜12に記載の表示装置は、それぞれ、請求項1〜6に記載の表示方法に従っているので、同様の効果を発揮する。また、請求項13〜18に記載のプログラムを記憶した記憶媒体も、それぞれ、請求項1〜6に記載の表示方法を実現するプログラムを記憶しているので、同様の効果を有する。
【0142】
特に、請求項19に記載の表示方法によれば、X断層面画像、Y断層面画像、Z断層面画像の一覧表示をするようにしたので、診療に必要な画像をパッと見つけることができ、より早く診療目的に合致した断層面画像に到達することができる。請求項21、23にそれぞれ記載の表示装置、プログラムを記憶した記憶媒体も同様である。
【0143】
特に、請求項20に記載の表示方法によれば、三断層面画像配列表示中に、所定の切替操作によって一覧表示をさせ、この一覧表示画面で目的の断層面画像を選択して、この選択された断層面画像を含む三断層面画像配列表示に戻ることができるので、一覧表示と三断層面画像配列表示の双方の効果が相乗的に発揮される。請求項22、24にそれぞれ記載の表示装置、プログラムを記憶した記憶媒体も同様である。
【図面の簡単な説明】
【図1】本発明の断層面画像の表示方法によって表示された画面の一例を示す図
【図2】本発明の断層面画像の表示方法によって表示された画面の他例を示す図
【図3】本発明の断層面画像の表示方法によって表示された画面の他例を示す図
【図4】(a)本発明の断層面画像の表示方法における断層面画像の切り出し方法を示す概念図、(b)同表示方法における断層面画像の表示方法の一例を示す概念図
【図5】(a)、(b)本発明の断層面画像の表示方法における断層面画像の表示方法の他例を示す概念図
【図6】(a)本発明の断層面画像の表示装置の一例を示す外観正面図、(b)は要部ブロック図
【図7】本発明の断層面画像の表示方法において用いる回転角度の指定方法の一例を示す図
【図8】図7で指定した回転をさせ再構成した画面で、更に、回転角度の指定を行う方法を示す図
【図9】図8で指定した回転をさせ再構成した画面を示す図
【図10】本発明の断層面画像の表示方法において用いる回転角度の指定方法の他例を示す図
【図11】本発明の断層面画像の表示方法によって一覧表示された画面の一例を示す図
【図12】図11の画面で選択された断層面画像を含んで三断層面画像配列表示された画面の一例を示す図
【符号の説明】
1 中央演算処理装置
2 入出力部
3 画面
4 キーボード/マウス
5 補助入力装置
6 記憶部
6a CTデータメモリ
6b 画像メモリ
7 画像生成手段
8 座標軸回転手段
9 記録媒体
10 断層面画像の表示装置
cx Xカーソル
cy Yカーソル
cz Zカーソル
cu Uカーソル
cv Vカーソル
cw Wカーソル
IX X断層面画像
IY Y断層面画像
IZ Z断層面画像
IU U断層面画像
IV V断層面画像
IW W断層面画像
P 任意の点
P1〜P8 所望の2点
R 画像の中心点
S 3次元領域

Claims (24)

  1. CT撮影により得られた3次元領域の3次元CTデータを再構成し、前記3次元領域について、相互に直交するX断層面、Y断層面、Z断層面の断層面画像を表示する表示方法であって、
    予め前記X断層面、Y断層面、Z断層面に平行な断層面の断層面画像を所定の間隔で切り出して、X断層面画像、Y断層面画像、Z断層面画像として全て記憶しておき、
    前記3次元領域内の任意の点について、前記X断層面画像、Y断層面画像、Z断層面画像を前記X断層面、Y断層面、Z断層面のそれぞれの他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルとともに画面上に配列表示し、
    これらのXカーソル、Yカーソル、Zカーソルが前記画面上で移動されるのに伴い、移動されたカーソルに対応した前記X断層面、Y断層面、Z断層面で切り出された前記X断層面画像、Y断層面画像、Z断層面画像を順次表示し、
    更に前記X断層面、Y断層面、Z断層面で規定されるxyz座標系に対し、このxyz座標系のそれぞれの座標軸回りの回転角度を指定することによって、座標軸回転処理を行い、
    その回転後のuvw座標系について、相互に直交するU断層面、V断層面、W断層面に平行な断層面の断層面画像を所定の間隔で切り出して、U断層面画像、V断層面画像、W断層面画像として全て記憶しておき、
    前記3次元領域内の任意の点について、前記U断層面画像、V断層面画像、W断層面画像を前記U断層面、V断層面、W断層面それぞれの、他の断層面への投影線であるUカーソル、Vカーソル、Wカーソルとともに画面上に配列表示し、
    これらのUカーソル、Vカーソル、Wカーソルが前記画面上で移動されるのに伴い移動されたカーソルに対応した断層面について切り出された断層面画像を順次表示する構成とし、
    前記回転角度の指定は、前記画面に配列表示された元のX断層面画像、Y断層面画像、Z断層面画像のいずれかの断層面画像上で所望の2点を指定し、その2点間を連結する直線を該断層面画像の中心点に対して回転させた角度によって該断層面画像に対する座標軸回りの回転角度を指定するものであることを特徴とする断層面画像の表示方法。
  2. 請求項1において、
    前記回転角度の指定では、マウス操作によって、前記直線を回転させることを特徴とする断層面画像の表示方法。
  3. 請求項1または2に記載の断層面画像の表示方法において、
    前記回転角度の指定は、順序を指定して、複数の断層面画像について一括して行うものであることを特徴とする断層面画像の表示方法。
  4. 請求項1〜3のいずれかに記載の断層面画像の表示方法において、
    前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像を、前記画面上に立体物の三面図の表示形式で配列表示するようにしたことを特徴とする断層面画像の表示方法。
  5. 請求項1〜4のいずれかに記載の断層面画像の表示方法において、
    前記画面に表示された前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像において、表示された二つのカーソルの交点を移動させることによって、これら二つのカーソルを同時に移動させ、これらの同時に移動された二つのカーソルに対応した二つの断層面について予め切り出された断層面画像をそれぞれ順次表示するようにしたことを特徴とする断層面画像の表示方法。
  6. 請求項1〜5のいずれかに記載の断層面画像の表示方法において、
    前記画面に表示される前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像の画像表示条件、特に、画像のコントラスト、ブライトネスを同一にすることを特徴とする断層面画像の表示方法。
  7. CT撮影により得られた3次元領域の3次元CTデータを再構成し、前記3次元領域について、相互に直交するX断層面、Y断層面、Z断層面の断層面画像を表示する表示装置であって、
    前記3次元領域の3次元CTデータを記憶するCTデータメモリと、再構成された断層面画像を記憶する画像メモリと、前記3次元領域について所望の断層面の断層面画像を切り出す画像生成手段と、断層面画像を表示するとともに、表示された要素を操作することが可能な画面とを備え、
    予め前記CTデータメモリに記憶された3次元CTデータから前記X断層面、Y断層面、Z断層面に平行な断層面の断層面画像を所定の間隔で切り出して、X断層面画像、Y断層面画像、Z断層面画像として全て前記画像メモリに記憶しておき、前記3次元領域内の任意の点について、前記X断層面画像、Y断層面画像、Z断層面画像を前記X断層面、Y断層面、Z断層面のそれぞれの他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルとともに前記画面上に配列表示し、
    これらのXカーソル、Yカーソル、Zカーソルが前記画面上で移動されるのに伴い、移動されたカーソルに対応した前記X断層面、Y断層面、Z断層面で切り出された前記X断層面画像、Y断層面画像、Z断層面画像を前記画像メモリから呼び出して順次表示し
    更に座標軸回転手段を備え、前記X断層面、Y断層面、Z断層面で規定されるxyz座標系に対し、このxyz座標系のそれぞれの座標軸回りの回転角度を指定することによって、前記座標軸回転手段は座標軸回転処理を行い、
    その回転後のuvw座標系について、相互に直交するU断層面、V断層面、W断層面に平行な断層面の断層面画像を所定の間隔で切り出して、U断層面画像、V断層面画像、W断層面画像として全て記憶しておき、前記3次元領域内の任意の点について、前記U断層面画像、V断層面画像、W断層面画像を前記U断層面、V断層面、W断層面のそれぞれの他の断層面への投影線であるUカーソル、Vカーソル、Wカーソルとともに画面上に配列表示し、
    これらのUカーソル、Vカーソル、Wカーソルが前記画面上で移動されるのに伴い移動されたカーソルに対応した断層面について切り出された断層面画像を前記画像メモリから呼び出して順次表示する構成とし
    前記回転角度の指定は、前記画面に配列表示された元のX断層面画像、Y断層面画像、Z断層面画像のいずれかの断層面画像上で所望の2点を指定し、その2点間を連結する直線を該断層面画像の中心点に対して回転させた角度によって該断層面画像に対する座標軸回りの回転角度を指定するものであることを特徴とする断層面画像の表示装置。
  8. 請求項7において、
    前記回転角度の指定では、マウス操作によって、前記直線を回転させることを特徴とする断層面画像の表示装置。
  9. 請求項7または8に記載の断層面画像の表示装置において、
    前記回転角度の指定は、順序を指定して、複数の断層面画像について一括して行うものであることを特徴とする断層面画像の表示装置。
  10. 請求項7〜9のいずれかに記載の断層面画像の表示装置において、
    前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像を、前記画面上に立体物の三面図の表示形式で配列表示するようにしたことを特徴とする断層面画像の表示装置。
  11. 請求項7〜10のいずれかに記載の断層面画像の表示装置において、
    前記画面に表示された前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像において、表示された二つのカーソルの交点を移動させることによって、これら二つのカーソルを同時に移動させ、これらの同時に移動された二つのカーソルに対応した二つの断層面について予め切り出された断層面画像をそれぞれ順次表示するようにしたことを特徴とする断層面画像の表示装置。
  12. 請求項7〜11のいずれかに記載の断層面画像の表示装置において、
    前記画面に表示される前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像の画像表示条件、特に、画像のコントラスト、ブライトネスを同一にすることを特徴とする断層面画像の表示装置。
  13. CT撮影により得られた3次元領域の3次元CTデータを再構成し、前記3次元領域について、相互に直交するX断層面、Y断層面、Z断層面の断層面画像を表示する表示方法を実現するプログラムを記録した記録媒体であって、
    予め前記X断層面、Y断層面、Z断層面に平行な断層面の断層面画像を所定の間隔で切り出して、X断層面画像、Y断層面画像、Z断層面画像として全て画像メモリに保存するステップと、
    前記3次元領域内の任意の点について、前記X断層面画像、Y断層面画像、Z断層面画像を前記X断層面、Y断層面、Z断層面のそれぞれの他の断層面への投影線であるXカーソル、Yカーソル、Zカーソルとともに画面上に配列表示するステップと、
    これらのXカーソル、Yカーソル、Zカーソルが前記画面上で移動されるのに伴い、移動されたカーソルに対応した前記X断層面、Y断層面、Z断層面で切り出された前記X断層面画像、Y断層面画像、Z断層面画像を前記画像メモリから呼び出して順次表示するステップと
    更に、前記X断層面、Y断層面、Z断層面で規定されるxyz座標系に対し、このxyz座標系のそれぞれの座標軸回りの回転角度を指定することによって、座標軸回転処理を行うステップと、
    その回転後のuvw座標系について、相互に直交するU断層面、V断層面、W断層面に平行な断層面の断層面画像を所定の間隔で切り出して、U断層面画像、V断層面画像、W断層面画像として全て前記画像メモリに保存するステップと、前記3次元領域内の任意の点について、前記U断層面画像、V断層面画像、W断層面画像を前記U断層面、V断層面、W断層面のそれぞれの他の断層面への投影線であるUカーソル、Vカーソル、Wカーソルとともに画面上に配列表示するステップと、
    これらのUカーソル、Vカーソル、Wカーソルが前記画面上で移動されるのに伴い移動されたカーソルに対応した断層面について予め切り出された断層面画像を前記画像メモリから呼び出して順次表示するステップとからなり、
    前記回転角度の指定は、前記画面に配列表示された元のX断層面画像、Y断層面画像、Z断層面画像のいずれかの断層面画像上で所望の2点を指定し、その2点間を連結する直線を該断層面画像の中心点に対して回転させた角度によって該断層面画像に対する座標軸回りの回転角度を指定するものであることを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  14. 請求項13において、
    前記回転角度の指定では、マウス操作によって、前記直線を回転させることを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  15. 請求項13または14に記載の記録媒体において、
    前記回転角度の指定は、順序を指定して、複数の断層面画像について一括して行うものであることを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  16. 請求項13〜15のいずれかに記載の記録媒体において、
    前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像を、前記画面上に立体物の三面図の表示形式で配列表示するようにしたことを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  17. 請求項13〜16のいずれかに記載の記録媒体において、
    前記画面に表示された前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像において、表示された二つのカーソルの交点を移動させることによって、これら二つのカーソルを同時に移動させ、これらの同時に移動された二つのカーソルに対応した二つの断層面について予め切り出された断層面画像をそれぞれ順次表示するようにしたことを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  18. 請求項13〜17のいずれかに記載の記録媒体において、
    前記画面に表示される前記X断層面画像、Y断層面画像、Z断層面画像、又は、U断層面画像、V断層面画像、W断層面画像の画像表示条件、特に、画像のコントラスト、ブライトネスを同一にすることを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  19. 請求項1〜6のいずれかにおいて、
    前記X断層面画像、Y断層面画像、Z断層面画像の一覧表示をするようにした断層面画像の表示方法。
  20. 請求項1〜6のいずれかにおいて、
    所定の切替操作により、切り出されたX断層面画像、Y断層面画像、Z断層面画像の一覧表示をし、この一覧表示画面で選択された断層面画像を含む三断層面画像配列表示に戻ることができるようにしたことを特徴とする断層面画像の表示方法。
  21. 請求項7〜12のいずれかにおいて、
    前記X断層面画像、Y断層面画像、Z断層面画像の一覧表示をするようにした断層面画像の表示装置。
  22. 請求項7〜12のいずれかにおいて、
    所定の切替操作により、切り出されたX断層面画像、Y断層面画像、Z断層面画像の一覧表示をし、この一覧表示画面で選択された断層面画像を含む三断層面画像配列表示に戻ることができるようにしたことを特徴とする断層面画像の表示装置。
  23. 請求項13〜18のいずれかにおいて、
    前記X断層面画像、Y断層面画像、Z断層面画像の一覧表示をするようにした断層面画像の表示方法を実現するプログラムを記録した記録媒体。
  24. 請求項13〜18のいずれかにおいて、
    所定の切替操作により、切り出されたX断層面画像、Y断層面画像、Z断層面画像の一覧表示をし、この一覧表示画面で選択された断層面画像を含む三断層面画像配列表示に戻ることができるようにしたことを特徴とする断層面画像の表示方法を実現するプログラムを記録した記録媒体。
JP2000374378A 2000-04-28 2000-12-08 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体 Expired - Fee Related JP3854062B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2000374378A JP3854062B2 (ja) 2000-04-28 2000-12-08 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体
CA002345217A CA2345217C (en) 2000-04-28 2001-04-26 Display method and apparatus for displaying three-dimensional data as a combination of three sectional images
DE10120649A DE10120649A1 (de) 2000-04-28 2001-04-27 Verfahren und Vorrichtung zum Anzeigen dreidimensionaler Daten als Kombination dreier Schnittbilder, Speichermedium auf welchem ein computerlesbares Programm zum Ausführen des Verfahrens gespeichert ist sowie computerlesbares Programm zum Ausführen des Verfahrens
US09/844,801 US6961911B2 (en) 2000-04-28 2001-04-27 Display method and apparatus for displaying three-dimensional data as a combination of three sectional images, recording medium in which a computer readable program is saved for executing the method, and computer readable for executing the method
FI20010897A FI20010897A (fi) 2000-04-28 2001-04-30 Näyttömenetelmä ja -laite kolmiulotteisen data esittämiseksi

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2000129629 2000-04-28
JP2000-129629 2000-04-28
JP2000374378A JP3854062B2 (ja) 2000-04-28 2000-12-08 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体

Publications (2)

Publication Number Publication Date
JP2002011000A JP2002011000A (ja) 2002-01-15
JP3854062B2 true JP3854062B2 (ja) 2006-12-06

Family

ID=26591121

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000374378A Expired - Fee Related JP3854062B2 (ja) 2000-04-28 2000-12-08 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体

Country Status (5)

Country Link
US (1) US6961911B2 (ja)
JP (1) JP3854062B2 (ja)
CA (1) CA2345217C (ja)
DE (1) DE10120649A1 (ja)
FI (1) FI20010897A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220051059A (ko) * 2020-10-16 2022-04-26 오스템임플란트 주식회사 치아 단면영상 제공방법 및 이를 위한 치과영상 처리장치

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8370231B2 (en) 2000-12-28 2013-02-05 Ip Strategy Incorporated Method for supporting an exchange transaction
JP3717505B2 (ja) 2001-10-31 2005-11-16 イマグノーシス株式会社 医用画像処理装置、方法および処理プログラム
JP4197108B2 (ja) * 2002-06-25 2008-12-17 テラリコン・インコーポレイテッド 医用画像複合観察装置
JP2004105256A (ja) * 2002-09-13 2004-04-08 Fuji Photo Film Co Ltd 画像表示装置
US7668285B2 (en) * 2004-02-16 2010-02-23 Kabushiki Kaisha Toshiba X-ray computed tomographic apparatus and image processing apparatus
JP5209175B2 (ja) * 2004-02-16 2013-06-12 株式会社東芝 X線コンピュータ断層撮影装置及び画像処理装置
US20090123892A1 (en) * 2004-09-24 2009-05-14 Cat Corporation Human Body Information Extraction Device, Human Body Imaging Information Reference Plane Conversion Method, and Cross Section Information Detection Device
US20060132508A1 (en) * 2004-12-16 2006-06-22 Navid Sadikali Multi-planar image viewing system and method
JP2006288720A (ja) * 2005-04-11 2006-10-26 Morita Mfg Co Ltd 画像及びプログラム書き出し装置及び方法
JP4319165B2 (ja) * 2005-04-28 2009-08-26 株式会社モリタ製作所 Ct画像表示方法および装置
JP4632851B2 (ja) * 2005-04-28 2011-02-16 株式会社モリタ製作所 Ct画像表示方法及び装置
JP4594844B2 (ja) * 2005-11-04 2010-12-08 朝日レントゲン工業株式会社 頭頸部用コーンビームx線ct撮影装置
US7731495B2 (en) * 2005-12-20 2010-06-08 3M Innovative Properties Company User interface having cross section control tool for digital orthodontics
DE102006024975B4 (de) * 2006-05-29 2009-01-29 Siemens Ag Bildverarbeitungsvorrichtung und Verfahren zum Erzeugen eines Zahn-Datensatzes
US20080088621A1 (en) * 2006-10-11 2008-04-17 Jean-Jacques Grimaud Follower method for three dimensional images
US7787586B2 (en) 2007-02-22 2010-08-31 J. Morita Manufacturing Corporation Display method of X-ray CT image of maxillofacial area, X-ray CT apparatus and X-ray image display apparatus
DE102007032291A1 (de) * 2007-07-11 2009-01-15 Aepsilon Rechteverwaltungs Gmbh Verfahren zum Darstellen von Restzahnbereichen und/oder geplanten Zahnersatzteilversorgungen sowie dazugehöriges computerlesbares Medium, Computer und Verfahren zum Versenden einer Datei
JP2009022476A (ja) * 2007-07-18 2009-02-05 Ziosoft Inc 画像表示装置、画像表示装置の制御方法、および画像表示装置の制御プログラム
US8601392B2 (en) * 2007-08-22 2013-12-03 9224-5489 Quebec Inc. Timeline for presenting information
JP5469819B2 (ja) * 2008-03-24 2014-04-16 日立メディカルコンピュータ株式会社 医用画像診断支援装置及び医用画像診断支援プログラム
JP2008224692A (ja) * 2008-06-23 2008-09-25 Shimadzu Corp X線ct装置
JP5308739B2 (ja) * 2008-08-22 2013-10-09 株式会社モリタ製作所 X線画像表示方法、及びx線撮影装置
JP5380231B2 (ja) * 2009-09-30 2014-01-08 富士フイルム株式会社 医用画像表示装置および方法ならびにプログラム
JP5618230B2 (ja) * 2010-01-25 2014-11-05 学校法人日本大学 画像生成装置、画像生成方法およびプログラム
JP5705452B2 (ja) * 2010-04-09 2015-04-22 株式会社モリタ製作所 医科歯科用画像表示装置、および医科歯科用プログラム
JP5087694B2 (ja) * 2011-04-14 2012-12-05 日立アロカメディカル株式会社 超音波診断装置
JP6599932B2 (ja) * 2011-11-29 2019-10-30 キヤノンメディカルシステムズ株式会社 X線診断装置及び医用画像処理装置
USRE48415E1 (en) 2012-11-08 2021-02-02 J. Morita Manufacturing Corporation X-ray photography apparatus
JP5709820B2 (ja) 2012-11-08 2015-04-30 株式会社モリタ製作所 X線撮影装置
DE102013216858A1 (de) * 2013-08-23 2015-02-26 Siemens Aktiengesellschaft Verfahren zur Darstellung eines in einem Volumendatensatz abgebildeten Objektes auf einem Bildschirm
JP6204891B2 (ja) * 2014-09-04 2017-09-27 富士フイルム株式会社 画像表示装置、方法、及びプログラム
US10192003B2 (en) * 2014-09-08 2019-01-29 3M Innovative Properties Company Method of aligning intra-oral digital 3D models
US20160169996A1 (en) * 2014-12-16 2016-06-16 General Electric Company Method and system for cardiac scan plane prescription
EP3452992B1 (en) 2016-05-03 2021-06-23 Affera, Inc. Anatomical model displaying
WO2017197114A1 (en) 2016-05-11 2017-11-16 Affera, Inc. Anatomical model generation
US11728026B2 (en) 2016-05-12 2023-08-15 Affera, Inc. Three-dimensional cardiac representation
CN110989884A (zh) * 2019-11-29 2020-04-10 北京市商汤科技开发有限公司 图像定位的操作显示方法及装置、电子设备和存储介质

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02205986A (ja) * 1989-02-03 1990-08-15 Toshiba Corp 画像表示装置
JPH03231643A (ja) * 1990-02-08 1991-10-15 Toshiba Corp 画像表示装置
US5454069A (en) * 1992-08-25 1995-09-26 University Of Kentucky Research Foundation Process for converting serial image to the sterolithography apparatus (SLA) slice file with automatic base and support generation
JPH07262412A (ja) * 1994-03-16 1995-10-13 Fujitsu Ltd 三次元モデル断面指示装置および指示方式
US5956028A (en) * 1995-09-14 1999-09-21 Fujitsu Ltd. Virtual space communication system, three-dimensional image display method, and apparatus therefor
US5821925A (en) * 1996-01-26 1998-10-13 Silicon Graphics, Inc. Collaborative work environment supporting three-dimensional objects and multiple remote participants
US5954414A (en) * 1996-08-23 1999-09-21 Tsao; Che-Chih Moving screen projection technique for volumetric three-dimensional display
US6095976A (en) * 1997-06-19 2000-08-01 Medinol Ltd. Method for enhancing an image derived from reflected ultrasound signals produced by an ultrasound transmitter and detector inserted in a bodily lumen
JP3788847B2 (ja) * 1997-06-23 2006-06-21 東芝医用システムエンジニアリング株式会社 画像処理装置
US6149592A (en) * 1997-11-26 2000-11-21 Picker International, Inc. Integrated fluoroscopic projection image data, volumetric image data, and surgical device position data
US6064904A (en) * 1997-11-28 2000-05-16 Picker International, Inc. Frameless stereotactic CT scanner with virtual needle display for planning image guided interventional procedures
US6115027A (en) * 1998-02-23 2000-09-05 Hewlett-Packard Company Synchronized cursor shared among a number of networked computer systems
JP3218216B2 (ja) * 1998-03-20 2001-10-15 アロカ株式会社 三次元画像処理装置
US6677944B1 (en) * 1998-04-14 2004-01-13 Shima Seiki Manufacturing Limited Three-dimensional image generating apparatus that creates a three-dimensional model from a two-dimensional image by image processing
WO2000013037A1 (fr) * 1998-08-31 2000-03-09 Osaka Gas Co., Ltd. Procede de recherche tridimensionnel, procede d'affichage de donnees de voxels tridimensionnelles, et dispositif de realisation de ces procedes
US6339440B1 (en) * 1998-11-05 2002-01-15 International Business Machines Corporation Method and apparatus for positioning a cursor
US6674449B1 (en) * 1998-11-25 2004-01-06 Ge Medical Systems Global Technology Company, Llc Multiple modality interface for imaging systems
US6342889B1 (en) * 1998-11-27 2002-01-29 Dicomit Dicom Information Technologies Corp. Method and system for selecting at least one optimal view of a three dimensional image
US6392675B1 (en) * 1999-02-24 2002-05-21 International Business Machines Corporation Variable speed cursor movement
US6525847B2 (en) * 1999-06-16 2003-02-25 Digilens, Inc. Three dimensional projection systems based on switchable holographic optics
US6671538B1 (en) * 1999-11-26 2003-12-30 Koninklijke Philips Electronics, N.V. Interface system for use with imaging devices to facilitate visualization of image-guided interventional procedure planning
US6313855B1 (en) * 2000-02-04 2001-11-06 Browse3D Corporation System and method for web browsing
US6614453B1 (en) * 2000-05-05 2003-09-02 Koninklijke Philips Electronics, N.V. Method and apparatus for medical image display for surgical tool planning and navigation in clinical environments

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220051059A (ko) * 2020-10-16 2022-04-26 오스템임플란트 주식회사 치아 단면영상 제공방법 및 이를 위한 치과영상 처리장치
KR102473722B1 (ko) 2020-10-16 2022-12-05 오스템임플란트 주식회사 치아 단면영상 제공방법 및 이를 위한 치과영상 처리장치

Also Published As

Publication number Publication date
US20020015006A1 (en) 2002-02-07
JP2002011000A (ja) 2002-01-15
CA2345217A1 (en) 2001-10-28
FI20010897A0 (fi) 2001-04-30
US6961911B2 (en) 2005-11-01
FI20010897A (fi) 2001-10-29
CA2345217C (en) 2009-03-03
DE10120649A1 (de) 2001-12-06

Similar Documents

Publication Publication Date Title
JP3854062B2 (ja) 断層面画像の表示方法、表示装置、この表示方法を実現するプログラムを記録した記録媒体
US7127091B2 (en) Method and apparatus for visualizing a limited part of a 3D medical image-point-related data set, through basing a rendered image on an intermediate region between first and second clipping planes, and including spectroscopic viewing of such region
US7978191B2 (en) System and method for locating anatomies of interest in a 3D volume
JP5021090B2 (ja) 3次元画像の一部を視覚化する方法及び装置
JP4632851B2 (ja) Ct画像表示方法及び装置
JP2013192939A (ja) 歯根破折のインタラクティブな検査の方法
GB2395880A (en) Curved multi-planar reformatting of 3D volume data sets
JP4018303B2 (ja) 医療用画像処理装置
JP2006527056A (ja) 3次元ボリューム空間クロップのユーザ制御
JP4581051B2 (ja) 多次元データ集合において予め決定可能な領域を表す方法及び装置
JP2006305203A (ja) Ct画像表示方法および装置
US6429861B1 (en) Method and apparatus for editing 3-D medical diagnostic ultrasound images
CN109427059A (zh) 解剖结构的平面可视化
JP2000200341A (ja) 画像表示装置
JP4313910B2 (ja) 画像表示装置
JP2006075216A (ja) 医用画像処理システム、医用画像処理プログラムおよび医用画像処理方法
JP2000287964A (ja) 三次元画像表示装置
JP4609960B2 (ja) 画像処理装置
US6710783B2 (en) Presentation device
JPH0526231B2 (ja)
JPH1153577A (ja) 3次元医用画像処理装置
JP2014050465A (ja) 画像処理装置及び関心領域設定方法
JP2001101449A (ja) 三次元画像表示装置
JPH0254381A (ja) 画像処理及び装置
Wang et al. An evaluation of using real-time volumetric display of 3D ultrasound data for intracardiac catheter manipulation tasks

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040126

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050427

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050719

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050916

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060424

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060907

R150 Certificate of patent or registration of utility model

Ref document number: 3854062

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090915

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100915

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100915

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110915

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120915

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130915

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees