JP2010042190A - 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム - Google Patents
医用画像処理装置、超音波診断装置、及び医用画像処理プログラム Download PDFInfo
- Publication number
- JP2010042190A JP2010042190A JP2008209664A JP2008209664A JP2010042190A JP 2010042190 A JP2010042190 A JP 2010042190A JP 2008209664 A JP2008209664 A JP 2008209664A JP 2008209664 A JP2008209664 A JP 2008209664A JP 2010042190 A JP2010042190 A JP 2010042190A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- image generation
- image data
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000002131 composite material Substances 0.000 claims abstract description 184
- 210000005242 cardiac chamber Anatomy 0.000 claims abstract description 171
- 238000000034 method Methods 0.000 claims description 60
- 230000008569 process Effects 0.000 claims description 51
- 210000002216 heart Anatomy 0.000 claims description 27
- 238000009877 rendering Methods 0.000 claims description 23
- 230000002194 synthesizing effect Effects 0.000 claims description 9
- 238000003384 imaging method Methods 0.000 claims description 7
- 239000000203 mixture Substances 0.000 abstract description 15
- 238000004441 surface measurement Methods 0.000 abstract description 15
- 230000000007 visual effect Effects 0.000 abstract description 3
- 230000002107 myocardial effect Effects 0.000 description 91
- 208000010125 myocardial infarction Diseases 0.000 description 67
- 210000004165 myocardium Anatomy 0.000 description 36
- 230000000747 cardiac effect Effects 0.000 description 25
- 230000004048 modification Effects 0.000 description 20
- 238000012986 modification Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 19
- 238000013500 data storage Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 15
- 230000008859 change Effects 0.000 description 11
- 210000005240 left ventricle Anatomy 0.000 description 11
- 230000000302 ischemic effect Effects 0.000 description 9
- 238000002604 ultrasonography Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 5
- 230000003902 lesion Effects 0.000 description 5
- 238000003786 synthesis reaction Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 4
- 208000031225 myocardial ischemia Diseases 0.000 description 4
- 239000002872 contrast media Substances 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000003759 clinical diagnosis Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 230000017531 blood circulation Effects 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 210000004351 coronary vessel Anatomy 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000010339 dilation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000001174 endocardium Anatomy 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/503—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0883—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/481—Diagnostic techniques involving the use of contrast agents
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/008—Cut plane or projection plane definition
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Surgery (AREA)
- Cardiology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- High Energy & Nuclear Physics (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
Abstract
【解決手段】心腔領域特定部4は、ボリュームデータに表わされている心腔領域の位置を特定する。画像生成面決定部12は、心腔領域に交差する回転軸を含む画像生成面を決定する。第1画像生成部14は、画像生成面に直交する方向を視線方向として、ボリュームデータのうち心腔領域に含まれるデータを除くデータに基づいて、心腔領域を除いた領域を立体的に表わす3次元画像データを生成する。第2画像生成部15は、ボリュームデータのうち、心腔領域に含まれるデータを除くデータに基づいて、画像生成面における領域を2次元的に表わす2次元画像データを生成する。画像合成部18は、3次元画像データと2次元画像データとを合成し、表示制御部17は、合成した画像を表示部8に表示させる。
【選択図】図1
Description
請求項11に記載の発明は、被検体の心臓を撮影対象にして、前記被検体に超音波を送信し、前記被検体からの反射波に基づいて、前記被検体の心臓を表すボリュームデータを取得する画像取得手段と、前記ボリュームデータに表わされている心腔領域の位置を特定する心腔領域特定手段と、前記心腔領域と交差する軸を設定する軸設定手段と、前記ボリュームデータに対して、前記軸を含む画像生成面を設定する画像生成面設定手段と、前記ボリュームデータに基づいて、前記心腔領域の境界であって、前記画像生成面によって分けられた前記心腔領域の一方の領域の境界を立体的に表わす3次元画像データを生成する第1画像生成手段と、前記ボリュームデータのうち、前記心腔領域に含まれるデータを除くデータに基づいて、前記画像生成面における領域を2次元的に表わす2次元画像データを生成する第2画像生成手段と、前記3次元画像データと前記2次元画像データとを合成することで合成画像データを生成して、前記合成画像データに基づく合成画像を表示手段に表示させる表示制御手段と、を有することを特徴とする超音波診断装置である。
請求項12に記載の発明は、コンピュータに、心臓を表すボリュームデータを受けて、前記ボリュームデータに表わされている心腔領域の位置を特定する心腔領域特定機能と、前記心腔領域と交差する軸を設定する軸設定機能と、前記ボリュームデータに対して、前記軸を含む画像生成面を設定する画像生成面設定機能と、前記ボリュームデータに基づいて、前記心腔領域の境界であって、前記画像生成面によって分けられた前記心腔領域の一方の領域の境界を立体的に表わす3次元画像データを生成する第1画像生成機能と、前記ボリュームデータのうち、前記心腔領域に含まれるデータを除くデータに基づいて、前記画像生成面における領域を2次元的に表わす2次元画像データを生成する第2画像生成機能と、前記3次元画像データと前記2次元画像データとを合成することで合成画像データを生成して、前記合成画像データに基づく合成画像を表示装置に表示させる表示制御機能と、を実行させるための医用画像処理プログラムである。
超音波診断装置100は超音波プローブを有して、被検体に超音波を送信し、被検体からの反射波を受信し、その反射波に基づいて超音波画像データを生成する。また、超音波診断装置100は、患者名、検査ID、及び検査年月日を含む付帯情報を超音波画像データに付帯させる。超音波診断装置100にて取得された超音波画像データは、図示しない画像保存装置に記憶される。また、医用画像処理装置1は、超音波診断装置100又は画像保存装置から超音波画像データを読み込み、画像データ記憶部3は読み込んだ超音波画像データを記憶する。
医用画像処理装置1は、データ送受信部2、画像データ記憶部3、心腔領域特定部4、回転軸特定部5、主制御部6、入力部7、表示部8、及び画像処理部10を備えている。医用画像処理装置1は、超音波診断装置100にて取得されたボリュームデータに基づいて、虚血部分の診断に適した画像データを生成する。
データ送受信部2は、ネットワークを介してボリュームデータを受信する。ネットワークには、ボリュームデータを供給することが可能な装置が接続されている。例えば、超音波診断装置100や図示しない画像保存装置が、ネットワークに接続されている。データ送受信部2は、そのネットワークに接続されて、ネットワークを介して、超音波診断装置100や画像保存装置からボリュームデータを受信する。ボリュームデータには、患者名、検査ID、及び検査年月日を含む付帯情報が付帯されている。データ送受信部2は、受信したボリュームデータを画像データ記憶部3に出力する。
画像データ記憶部3は、データ送受信部2から出力されたボリュームデータを記憶する。この実施形態では、超音波診断装置100によって、心臓の左心室を含む領域が表されたボリュームデータが取得されて、そのボリュームデータが画像データ記憶部3に記憶される。なお、画像データ記憶部3は、ハードディスクや半導体メモリなどの記憶装置で構成されている。また、画像データ記憶部3は、心腔領域特定部4から出力されたボリュームデータを記憶する。
心腔領域特定部4は、画像データ記憶部3からボリュームデータを読み込み、そのボリュームデータにおける左心室の心腔領域の位置を特定する。心腔領域の位置を特定する方法として、例えば、特開平7−320068号公報、特開平10−99328号公報、特開2000−217818号公報、特開2003−250804号公報、特開2005−161032号公報、又は、特開2000−210289号公報に記載されている方法を用いれば良い。
回転軸特定部5は、心腔領域に対してマスク処理が施されたボリュームデータを画像データ記憶部3から読み込む。そして、回転軸特定部5は、ボリュームデータに表わされている左心室の長軸の位置を特定する。回転軸特定部5は、特定した長軸を、画像を生成する画像生成面に対する回転軸として定義する。左心室の長軸の位置を特定する方法として、例えば、特開平7−320068号公報、特開平10−99328号公報、特開2000−217818号公報、特開2003−250804号公報、特開2005−161032号公報、又は、特開2000−210289号公報に記載されている方法を用いれば良い。1例として、回転軸特定部5は、ボリュームデータに表わされている立体的な左心室を、立体的な楕円体で近似する。回転軸特定部5は、この楕円体の長軸を左心室の長軸として特定し、特定した長軸を回転軸として定義する。例えば図2に示すように、回転軸特定部5は、3次元空間における左心室の長軸Aの位置を特定し、その長軸Aを回転軸Aとして定義する。回転軸特定部5は、3次元空間における回転軸A(長軸)の位置を示す情報(座標情報)を、画像処理部10の画像生成制御部11に出力する。また、回転軸特定部5は、左心室の短軸の位置を特定して、その短軸を回転軸として定義しても良い。例えば、回転軸特定部5は、長軸に直交する軸を短軸として特定する。なお、長軸に直交する軸は複数存在するため、回転軸特定部5は、複数の軸のうち、1つの軸を短軸として選択すれば良い。回転軸特定部5が、この発明の「軸設定手段」の1例に相当する。
画像処理部10は、画像生成制御部11、画像生成面決定部12、画像生成部13、マスク領域変更部16、及び、表示制御部17を備えている。画像生成部13は、第1画像生成部14と第2画像生成部15とを備えている。表示制御部17は、画像合成部18を備えている。画像処理部10は、マスク処理が施されたボリュームデータを画像データ記憶部3から読み込み、主制御部6から出力された画像生成条件に従って画像データを生成し、その画像データに基づく画像を表示部8に表示させる。以下、画像処理部10の各部について説明する。
画像生成制御部11は、マスク処理が施されたボリュームデータを画像データ記憶部3から読み込む。また、画像生成制御部11は、回転軸特定部5から出力された回転軸Aの座標情報を受ける。また、画像生成制御部11は、主制御部6から出力された画像生成条件を示す情報を受ける。画像生成条件には、生成する画像の種類と、画像を生成する方向を示す視線方向とが含まれている。画像の種類には、ボリュームレンダリングにより生成される3次元画像、MPR画像、又は、MIP画像などの種類が該当する。MPR画像は、MPR(Multi Planar Reconstruction)処理によって生成される任意の断面における画像である。画像の種類と視線方向とは、主制御部6に予め設定されている。また、画像の種類と視線方向とは、操作者が入力部7を用いて任意に変更することができる。
画像生成面決定部12は、画像生成制御部11から出力された回転軸Aの座標情報と視線方向の座標情報とを受ける。そして、画像生成面決定部12は、回転軸Aを通る複数の2次元の平面のうち、視線方向に直交する平面の位置を求める。画像生成面決定部12は、その平面を、画像を生成する対象となる面(画像生成面)として決定する。例えば図2に示すように、画像生成面決定部12は、回転軸Aを通り、視線方向Bに直交する平面Sを画像生成面Sとして定義する。そして、画像生成面決定部12は、回転軸Aを通り、視線方向に直交する画像生成面Sの座標情報を、第1画像生成部14と第2画像生成部15とに出力する。なお、画像生成面決定部12が、この発明の「画像生成面設定手段」の1例に相当する。
第1画像生成部14と第2画像生成部15は、マスク処理が施されたボリュームデータ、生成する画像の種類を示す情報、及び、視線方向を示す座標情報を画像生成制御部11から受ける。また、第1画像生成部14と第2画像生成部15は、画像生成面Sの座標情報を画像生成面決定部12から受ける。そして、第1画像生成部14と第2画像生成部15は、それぞれ、ボリュームデータに基づいて表示用の画像データを生成する。
表示制御部17は、第1画像生成部14から出力された3次元画像データと、第2画像生成部15から出力されたMPR画像データとを受けて、3次元画像とMPR画像とを表示部8に表示させる。また、表示制御部17は、画像合成部18を備えている。
画像合成部18は、第1画像生成部14によって生成された3次元画像データと、第2画像生成部15によって生成されたMPR画像データとを合成することで、合成画像データを生成する。この実施形態では、画像合成部18は、心筋領域が表されたMPR画像データにおいて、心腔領域が存在する領域に、心筋の内面が表された3次元画像データを合成する。または、画像合成部18は、心筋の内面が表された3次元画像データにおいて、心腔領域が存在する領域を除いて心筋領域が存在する領域に、心筋領域が表されたMPR画像データを合成しても良い。すなわち、画像合成部18は、心筋領域についてはMPR画像データを用い、心腔領域が存在する領域については心筋の内面を表す3次元画像データを用いて、MPR画像データと3次元画像データとを合成する。これにより、画像合成部18は、心筋領域が画像生成面SにおけるMPR画像によって表わされ、視線方向Bから見て画像生成面Sより奥側にある心筋の内膜が3次元画像によって表わされた合成画像データを生成する。なお、表示制御部17が、この発明の「表示制御手段」の1例に相当する。
なお、入力部7は、マウスやトラックボールなどのポインティングデバイス、スイッチ、各種ボタン、又はキーボードなどで構成されている。操作者は、入力部7を用いて、生成する画像の種類や視線方向などの画像生成条件を入力することができる。また、表示部8は、CRTや液晶ディスプレイなどのモニタで構成されている。表示部8の画面には、合成画像が表示される。
主制御部6は、データ送受信部2、心腔領域特定部4、回転軸特定部5、及び画像処理部10の動作を制御する。主制御部6には、生成する画像の種類を示す情報と、視線方向を示す情報とが予め設定されている。主制御部6は、画像の種類と視線方向とを含む画像生成条件を示す情報を画像処理部10の画像生成制御部11に出力し、画像生成制御部11に画像生成の指示を与える。また、マスク領域の大きさを画像生成条件に含ませても良い。この場合、主制御部6は、マスク領域の大きさを含む画像生成条件を示す情報を画像生成制御部11に出力する。画像生成制御部11は、マスク領域の大きさを示す情報と、マスク処理が施されたボリュームデータとをマスク領域変更部16に出力する。
次に、画像生成面Sの位置を変更する場合について説明する。操作者は、表示部8に表示されている合成画像220を観察しながら、入力部7を用いて、画像生成面を変更するための角度を入力することができる。具体的には、角度の入力は、マウスの移動、又はトラックボールの回転によって行うことができる。マウスの移動量を示す情報、又はトラックボールの回転量を示す情報が、入力部7から主制御部6に出力される。マウスの移動量、又はトラックボールの回転量が、角度の変更量に相当する。主制御部6は、予め設定された視線方向の向きと、入力部7から入力された角度の変更量とに基づいて、新たな視線方向を求める。主制御部6は、新たに求めた視線方向を示す座標情報を画像処理部10の画像生成制御部11に出力する。
マスク領域変更部16は、マスク領域の大きさを示す情報と、マスク処理が施されたボリュームデータとを画像生成制御部11から受ける。マスク領域変更部16は、マスク領域の大きさを示す情報に従って、ボリュームデータにおけるマスク領域の大きさを変更する。マスク領域変更部16は、公知技術に係る膨張処理(Dilation処理)又は縮小処理(Erosion処理)を施すことで、ボリュームデータにおけるマスクの大きさを変える。これにより、ボリュームデータにおいて、表示対象外となる領域の大きさが変更される。1例として、マスク領域変更部16は、ボリュームデータにおいて、大きさが変更されたマスクに含まれる領域内の画素値を一定の値に変更する。マスク領域変更部16は、新たなマスク処理が施されたボリュームデータを、第1画像生成部14と第2画像生成部15とに出力する。なお、マスク領域の大きさの変更がない場合は、マスク領域変更部16は、処理を実行しない。第1画像生成部14は、新たなマスク処理が施されたボリュームデータに基づいて、3次元画像データを生成する。また、第2画像生成部15は、新たなマスク処理が施されたボリュームデータに基づいて、MPR画像データを生成する。
変形例1では、複数の画像生成面を求めて、各画像生成面における合成画像データを生成する。1例として、2つの合成画像データを生成する場合について説明する。画像生成面決定部12は、上述したように、画像生成制御部11から出力された回転軸Aの座標情報と視線方向の座標情報とを受けて、回転軸Aを通る複数の平面のうち、視線方向に直交する平面を第1画像生成面として決定する。さらに、画像生成面決定部12は、第1画像生成面に直交し、回転軸Aを通る平面を第2画像生成面として決定する。画像生成面決定部12は、第1画像生成面の座標情報と第2画像生成面の座標情報とを、第1画像生成部14と第2画像生成部15とに出力する。
次に変形例2について、図9を参照して説明する。図9は、この発明の実施形態に係る医用画像処理装置によって生成された画像を模式的に示す図である。上述した変形例1と同様に、表示制御部17は、互いに直交する画像生成面における2つの合成画像を表示部8に表示させる。例えば図9に示すように、表示制御部17は、第1画像生成面に従って生成された第1合成画像700と、第2画像生成面に従って生成された第2合成画像710とを並べて表示部8に同時に表示させる。変形例1と同様に、第1画像生成面と第2画像生成面とは、互いに直交している。そのため、第1合成画像700と第2合成画像710とは、互いに直交する面における画像を表している。
変形例3では、互いに反対方向を向いている2つの視線方向を設定し、互いに反対側から見た画像データを生成する。変形例3に係る処理について図10を参照して説明する。図10は、超音波によって走査される領域を模式的に示す図である。第1画像生成部14は、マスク処理が施されたボリュームデータに対して、視線方向B1に沿ってボリュームレンダリングを施すことで、組織を立体的に表わす第1の3次元画像データを生成する。第1画像生成部14は、視線方向B1から見て画像生成面Sより手前側にある領域に含まれるデータと、マスク処理が施された領域に含まれるデータとを除いて、それ以外のデータに基づいて第1の3次元画像データを生成する。これにより、マスク処理が施された領域において、視線方向B1から見て画像生成面Sより奥側にある領域では、マスク処理が施された領域の境界に至るまでの領域において、3次元画像データは生成されない。
変形例4では、心腔領域の表面を立体的に表わす3次元画像を生成して表示する。画像生成部13は、心腔領域に対してマスク処理が施されたボリュームデータを受けて、そのボリュームデータにボリュームレンダリングを施すことで、マスク領域の表面を立体的に表わす3次元画像データを生成する。すなわち、画像生成部13は、心腔領域の表面を立体的に表わす3次元画像データを生成する。さらに、画像生成部13は、画像生成面Sの座標情報を画像生成面決定部12から受け、画像生成面Sの形状を模式的に表すフレーム状の画像データを生成する。画像生成部13は、心腔領域の表面を表す3次元画像データに、フレーム状の画像データを合成することで心腔画像データを生成する。画像生成部13は、心腔画像データを表示制御部17に出力する。表示制御部17は、画像合成部18によって生成された合成画像データに基づく合成画像と、心腔画像データに基づく心腔画像とを、並べて表示部8に同時に表示させる。
2 データ送受信部
3 画像データ記憶部
4 心腔領域特定部
5 回転軸特定部
6 主制御部
7 入力部
8 表示部
10 画像処理部
11 画像生成制御部
12 画像生成面決定部
13 画像生成部
14 第1画像生成部
15 第2画像生成部
16 マスク領域変更部
17 表示制御部
18 画像合成部
100 超音波診断装置
Claims (12)
- 心臓を表すボリュームデータを受けて、前記ボリュームデータに表わされている心腔領域の位置を特定する心腔領域特定手段と、
前記心腔領域と交差する軸を設定する軸設定手段と、
前記ボリュームデータに対して、前記軸を含む画像生成面を設定する画像生成面設定手段と、
前記ボリュームデータに基づいて、前記心腔領域の境界であって、前記画像生成面によって分けられた前記心腔領域の一方の領域の境界を立体的に表わす3次元画像データを生成する第1画像生成手段と、
前記ボリュームデータのうち、前記心腔領域に含まれるデータを除くデータに基づいて、前記画像生成面における領域を2次元的に表わす2次元画像データを生成する第2画像生成手段と、
前記3次元画像データと前記2次元画像データとを合成することで合成画像データを生成して、前記合成画像データに基づく合成画像を表示手段に表示させる表示制御手段と、
を有することを特徴とする医用画像処理装置。 - 前記第1画像生成手段は、前記画像生成面に直交する方向を視線方向として、前記ボリュームデータのうち前記心腔領域に含まれるデータを除くデータにレンダリング処理を施すことで、前記心腔領域を除いて、前記一方の領域の境界を立体的に表わす前記3次元画像データを生成することを特徴とする請求項1に記載の医用画像処理装置。
- 前記第1画像生成手段は、さらに、前記ボリュームデータのうち、前記心腔領域よりも大きい膨張領域に含まれるデータを除くデータにレンダリング処理を施すことで、前記膨張領域を除いた領域を立体的に表わす3次元画像データを生成することを特徴とする請求項2に記載の医用画像処理装置。
- 前記画像生成面設定手段は、前記画像生成面の角度の指定を受けて、前記指定された角度に従って前記軸の周りに前記画像生成面を回転させて、前記画像生成面に代わる新たな画像生成面を設定し、
前記第1画像生成手段は、前記新たな画像生成面に従って新たな3次元画像データを生成し、
前記第2画像生成手段は、前記新たな画像生成面における新たな2次元画像データを生成し、
前記表示制御手段は、前記新たな3次元画像データと前記新たな2次元画像データとを合成することで新たな合成画像データを生成して、前記新たな合成画像データに基づく合成画像を前記表示手段に表示させることを特徴とする請求項1から請求項3のいずれかに記載の医用画像処理装置。 - 前記画像生成面設定手段は、前記画像生成面と、前記軸を含み前記画像生成面に交差する第2画像生成面とを設定し、
前記第1画像生成手段は、前記画像生成面に従って第1の3次元画像データを生成し、前記第2画像生成面に従って第2の3次元画像データを生成し、
前記第2画像生成手段は、前記画像生成面における第1の2次元画像データを生成し、前記第2画像生成面における第2の2次元画像データを生成し、
前記表示制御手段は、前記第1の3次元画像データと前記第1の2次元画像データとを合成することで第1合成画像データを生成し、前記第2の3次元画像データと前記第2の2次元画像データとを合成することで第2合成画像データを生成し、前記第1合成画像データに基づく第1合成画像と前記第2合成画像データに基づく第2合成画像とを前記表示手段に表示させることを特徴とする請求項1から請求項3のいずれかに記載の医用画像処理装置。 - 前記画像生成面設定手段は、前記軸を含み前記画像生成面に直交する面を前記第2画像生成面に設定することを特徴とする請求項5に記載の医用画像処理装置。
- 前記画像生成面設定手段は、前記表示手段に表示されている前記合成画像上の任意の点の指定を受けて、前記指定された点を通り、前記画像生成面に直交する直線を求め、前記直線と前記心腔領域の境界との交点を求め、前記交点と前記軸とを含む面を前記画像生成面に代わる新たな画像生成面として設定し、
前記第1画像生成手段は、前記新たな画像生成面に従って新たな3次元画像データを生成し、
前記第2画像生成手段は、前記新たな画像生成面における新たな2次元画像データを生成し、
前記表示制御手段は、前記新たな3次元画像データと前記新たな2次元画像データとを合成することで新たな合成画像データを生成して、前記新たな合成画像データに基づく合成画像を前記表示手段に表示させることを特徴とする請求項1から請求項3のいずれかに記載の医用画像処理装置。 - 前記画像生成面設定手段は、前記新たな画像生成面と、前記軸を含み前記新たな画像生成面に直交する別の画像生成面とを設定し、
前記第1画像生成手段は、前記新たな画像生成面に従って前記新たな3次元画像データを生成し、前記別の画像生成面に従って別の3次元画像データを生成し、
前記第2画像生成手段は、前記新たな画像生成面における新たな2次元画像データを生成し、前記別の画像生成面における別の2次元画像データを生成し、
前記表示制御手段は、前記新たな3次元画像データと前記新たな2次元画像データとを合成することで前記新たな合成画像データを生成し、前記別の3次元画像データと前記別の2次元画像データとを合成することで別の合成画像データを生成し、前記新たな合成画像データに基づく合成画像と、前記別の合成画像データに基づく別の合成画像とを前記表示手段に表示させることを特徴とする請求項7に記載の医用画像処理装置。 - 前記第1画像生成手段は、前記画像生成面に直交する第1の視線方向と、前記第1の視線方向とは向きが反対となる第2の視線方向とを設定し、前記ボリュームデータのうち前記心腔領域に含まれるデータを除くデータに、前記第1の視線方向に従ってレンダリング処理を施すことで第1の3次元画像データを生成し、前記ボリュームデータのうち前記心腔領域に含まれるデータを除くデータに、前記第2の視線方向に従ってレンダリング処理を施すことで第2の3次元画像データを生成し、
前記表示制御手段は、前記第1の3次元画像データと前記2次元画像データとを合成することで第1合成画像データを生成し、前記第2の3次元画像データと前記2次元画像データとを合成することで第2合成画像データを生成し、前記第1合成画像データに基づく第1合成画像と、前記第2合成画像データに基づく第2合成画像とを前記表示手段に表示させることを特徴とする請求項2又は請求項3のいずれかに記載の医用画像処理装置。 - 前記ボリュームデータに基づいて、前記心腔領域の表面を立体的に表わす3次元画像データを生成し、前記画像生成面を枠状に表わす画像データを生成し、前記心腔領域を表す3次元画像データと前記画像生成面を表す画像データとを合成することで心腔画像データを生成する画像生成手段を更に有し、
前記表示制御手段は、前記心腔画像データに基づく心腔画像を更に前記表示手段に表示させることを特徴とする請求項1から請求項9のいずれかに記載の医用画像処理装置。 - 被検体の心臓を撮影対象にして、前記被検体に超音波を送信し、前記被検体からの反射波に基づいて、前記被検体の心臓を表すボリュームデータを取得する画像取得手段と、
前記ボリュームデータに表わされている心腔領域の位置を特定する心腔領域特定手段と、
前記心腔領域と交差する軸を設定する軸設定手段と、
前記ボリュームデータに対して、前記軸を含む画像生成面を設定する画像生成面設定手段と、
前記ボリュームデータに基づいて、前記心腔領域の境界であって、前記画像生成面によって分けられた前記心腔領域の一方の領域の境界を立体的に表わす3次元画像データを生成する第1画像生成手段と、
前記ボリュームデータのうち、前記心腔領域に含まれるデータを除くデータに基づいて、前記画像生成面における領域を2次元的に表わす2次元画像データを生成する第2画像生成手段と、
前記3次元画像データと前記2次元画像データとを合成することで合成画像データを生成して、前記合成画像データに基づく合成画像を表示手段に表示させる表示制御手段と、
を有することを特徴とする超音波診断装置。 - コンピュータに、
心臓を表すボリュームデータを受けて、前記ボリュームデータに表わされている心腔領域の位置を特定する心腔領域特定機能と、
前記心腔領域と交差する軸を設定する軸設定機能と、
前記ボリュームデータに対して、前記軸を含む画像生成面を設定する画像生成面設定機能と、
前記ボリュームデータに基づいて、前記心腔領域の境界であって、前記画像生成面によって分けられた前記心腔領域の一方の領域の境界を立体的に表わす3次元画像データを生成する第1画像生成機能と、
前記ボリュームデータのうち、前記心腔領域に含まれるデータを除くデータに基づいて、前記画像生成面における領域を2次元的に表わす2次元画像データを生成する第2画像生成機能と、
前記3次元画像データと前記2次元画像データとを合成することで合成画像データを生成して、前記合成画像データに基づく合成画像を表示装置に表示させる表示制御機能と、
を実行させるための医用画像処理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008209664A JP5637653B2 (ja) | 2008-08-18 | 2008-08-18 | 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム |
US12/497,984 US7991108B2 (en) | 2008-08-18 | 2009-07-06 | Medical image processing apparatus, ultrasound imaging apparatus, X-ray CT (computed tomography) apparatus, and method of processing medical image |
EP09008869.1A EP2157546B1 (en) | 2008-08-18 | 2009-07-07 | Medical image processing apparatus, ultrasound imaging apparatus, X-ray CT (Computed Tomography) apparatus, and method of processing medical image |
CN200910165187XA CN101653381B (zh) | 2008-08-18 | 2009-07-27 | 医用图像处理装置、超声波图像取得装置以及x射线ct装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008209664A JP5637653B2 (ja) | 2008-08-18 | 2008-08-18 | 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010042190A true JP2010042190A (ja) | 2010-02-25 |
JP5637653B2 JP5637653B2 (ja) | 2014-12-10 |
Family
ID=41334373
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008209664A Expired - Fee Related JP5637653B2 (ja) | 2008-08-18 | 2008-08-18 | 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US7991108B2 (ja) |
EP (1) | EP2157546B1 (ja) |
JP (1) | JP5637653B2 (ja) |
CN (1) | CN101653381B (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102805648A (zh) * | 2011-05-10 | 2012-12-05 | 通用电气公司 | 采用横切面图像进行超声成像的系统和方法 |
JP2014000393A (ja) * | 2012-05-22 | 2014-01-09 | Toshiba Corp | 医用画像診断装置及び画像表示装置 |
JP2017202125A (ja) * | 2016-05-12 | 2017-11-16 | 株式会社日立製作所 | 超音波撮像装置、画像処理装置、及びその方法 |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102008055132A1 (de) * | 2008-12-23 | 2010-07-01 | Tomtec Imaging Systems Gmbh | Verfahren und Vorrichtung zum Navigieren in einem mehrdimensionalen Bilddatensatz |
US8934686B2 (en) * | 2009-11-26 | 2015-01-13 | Algotec Systems Ltd. | User interface for selecting paths in an image |
JP5606076B2 (ja) * | 2010-01-08 | 2014-10-15 | 株式会社東芝 | 超音波診断装置、医用画像処理装置及び医用画像処理プログラム |
US9401047B2 (en) * | 2010-04-15 | 2016-07-26 | Siemens Medical Solutions, Usa, Inc. | Enhanced visualization of medical image data |
JP5798117B2 (ja) * | 2010-06-30 | 2015-10-21 | 富士フイルム株式会社 | 超音波診断装置及び超音波診断装置の作動方法 |
EP2589342A1 (en) * | 2010-06-30 | 2013-05-08 | FUJIFILM Corporation | Ultrasound diagnosis device and ultrasound diagnosis method |
JP5844093B2 (ja) * | 2010-09-15 | 2016-01-13 | 株式会社東芝 | 医用画像処理装置及び医用画像処理方法 |
WO2012053514A1 (ja) * | 2010-10-19 | 2012-04-26 | 株式会社 東芝 | 超音波診断装置、超音波画像処理装置及び超音波画像処理方法 |
JP5226887B2 (ja) * | 2011-06-09 | 2013-07-03 | 株式会社東芝 | 画像処理システム及び方法 |
JP5784379B2 (ja) * | 2011-06-15 | 2015-09-24 | 株式会社東芝 | 画像処理システム、装置及び方法 |
JP5846777B2 (ja) | 2011-06-28 | 2016-01-20 | 株式会社東芝 | 医用画像処理装置 |
JP6266217B2 (ja) * | 2012-04-02 | 2018-01-24 | 東芝メディカルシステムズ株式会社 | 医用画像処理システム、方法及びプログラム |
KR101538658B1 (ko) * | 2012-11-20 | 2015-07-22 | 삼성메디슨 주식회사 | 의료 영상 표시 방법 및 장치 |
KR102146851B1 (ko) * | 2013-02-08 | 2020-08-21 | 삼성전자주식회사 | 효율적인 진단 정보 제공을 통한 진단 지원 장치 및 방법과, 진단 시스템 |
US9865086B2 (en) * | 2014-03-21 | 2018-01-09 | St. Jude Medical, Cardiololgy Division, Inc. | Methods and systems for generating a multi-dimensional surface model of a geometric structure |
CN109671056B (zh) * | 2018-12-03 | 2020-10-27 | 西安交通大学 | 一种基于x射线图像的复合轨枕孔隙缺陷检测方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000210289A (ja) * | 1998-11-16 | 2000-08-02 | Toshiba Corp | 3次元超音波診断装置 |
WO2006033377A1 (ja) * | 2004-09-24 | 2006-03-30 | Hitachi Medical Corporation | 医用画像表示装置及び方法並びにプログラム |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5493595A (en) * | 1982-02-24 | 1996-02-20 | Schoolman Scientific Corp. | Stereoscopically displayed three dimensional medical imaging |
JPS6476374A (en) * | 1987-09-18 | 1989-03-22 | Toshiba Corp | Depth map producing device |
US4882679A (en) * | 1987-11-27 | 1989-11-21 | Picker International, Inc. | System to reformat images for three-dimensional display |
US5371778A (en) * | 1991-11-29 | 1994-12-06 | Picker International, Inc. | Concurrent display and adjustment of 3D projection, coronal slice, sagittal slice, and transverse slice images |
US5734384A (en) * | 1991-11-29 | 1998-03-31 | Picker International, Inc. | Cross-referenced sectioning and reprojection of diagnostic image volumes |
US5694530A (en) * | 1994-01-18 | 1997-12-02 | Hitachi Medical Corporation | Method of constructing three-dimensional image according to central projection method and apparatus for same |
JP3383072B2 (ja) | 1994-05-24 | 2003-03-04 | 株式会社東芝 | 画像処理方法及び画像処理装置 |
US6175655B1 (en) * | 1996-09-19 | 2001-01-16 | Integrated Medical Systems, Inc. | Medical imaging system for displaying, manipulating and analyzing three-dimensional images |
JPH1099328A (ja) | 1996-09-26 | 1998-04-21 | Toshiba Corp | 画像処理装置及び画像処理方法 |
JP3117665B2 (ja) * | 1997-08-26 | 2000-12-18 | ジーイー横河メディカルシステム株式会社 | 画像表示方法および画像表示装置 |
JP2000051202A (ja) * | 1998-08-14 | 2000-02-22 | Ge Yokogawa Medical Systems Ltd | 画像表示方法および画像表示装置 |
JP3668629B2 (ja) | 1999-01-29 | 2005-07-06 | 株式会社東芝 | 画像診断装置及び画像処理方法 |
JP2000250804A (ja) | 1999-03-04 | 2000-09-14 | Pfu Ltd | データベース登録システム及び方法 |
US6278767B1 (en) * | 1999-04-28 | 2001-08-21 | General Electric Company | Methods for measuring curved distances on 3D and MIP images |
GB2361396B (en) * | 2000-04-10 | 2002-04-03 | Voxar Ltd | Imaging volume data |
JP3442346B2 (ja) * | 2000-06-01 | 2003-09-02 | カナガワ アンド カンパニー株式会社 | 画像形成装置及びこれを用いた画像の構成方法 |
US6487432B2 (en) * | 2000-12-04 | 2002-11-26 | Ge Medical Systems Global Technologies Company Llc | Method and system for selecting and displaying medical image data |
JP4060615B2 (ja) | 2002-03-05 | 2008-03-12 | 株式会社東芝 | 画像処理装置及び超音波診断装置 |
US7154985B2 (en) * | 2003-05-13 | 2006-12-26 | Medical Insight A/S | Method and system for simulating X-ray images |
US7233329B2 (en) * | 2003-11-03 | 2007-06-19 | Siemens Corporate Research, Inc. | Rendering for coronary visualization |
JP2005161032A (ja) | 2003-11-10 | 2005-06-23 | Toshiba Corp | 画像処理装置 |
US7035371B2 (en) * | 2004-03-22 | 2006-04-25 | Siemens Aktiengesellschaft | Method and device for medical imaging |
US7428334B2 (en) * | 2004-08-27 | 2008-09-23 | General Electric Company | Methods and systems for 3D segmentation of ultrasound images |
JP4297869B2 (ja) * | 2004-12-07 | 2009-07-15 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 放射線撮影装置 |
JP4450786B2 (ja) * | 2005-11-15 | 2010-04-14 | ザイオソフト株式会社 | 画像処理方法および画像処理プログラム |
-
2008
- 2008-08-18 JP JP2008209664A patent/JP5637653B2/ja not_active Expired - Fee Related
-
2009
- 2009-07-06 US US12/497,984 patent/US7991108B2/en not_active Expired - Fee Related
- 2009-07-07 EP EP09008869.1A patent/EP2157546B1/en not_active Not-in-force
- 2009-07-27 CN CN200910165187XA patent/CN101653381B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000210289A (ja) * | 1998-11-16 | 2000-08-02 | Toshiba Corp | 3次元超音波診断装置 |
WO2006033377A1 (ja) * | 2004-09-24 | 2006-03-30 | Hitachi Medical Corporation | 医用画像表示装置及び方法並びにプログラム |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102805648A (zh) * | 2011-05-10 | 2012-12-05 | 通用电气公司 | 采用横切面图像进行超声成像的系统和方法 |
JP2014000393A (ja) * | 2012-05-22 | 2014-01-09 | Toshiba Corp | 医用画像診断装置及び画像表示装置 |
JP2017202125A (ja) * | 2016-05-12 | 2017-11-16 | 株式会社日立製作所 | 超音波撮像装置、画像処理装置、及びその方法 |
WO2017195540A1 (ja) * | 2016-05-12 | 2017-11-16 | 株式会社日立製作所 | 超音波撮像装置、画像処理装置、及びその方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101653381A (zh) | 2010-02-24 |
JP5637653B2 (ja) | 2014-12-10 |
US20100040200A1 (en) | 2010-02-18 |
CN101653381B (zh) | 2012-02-01 |
EP2157546B1 (en) | 2020-11-25 |
US7991108B2 (en) | 2011-08-02 |
EP2157546A3 (en) | 2014-03-26 |
EP2157546A2 (en) | 2010-02-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5637653B2 (ja) | 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム | |
JP5495357B2 (ja) | 画像表示方法及び医用画像診断システム | |
JP5433240B2 (ja) | 超音波診断装置及び画像表示装置 | |
US9173632B2 (en) | Ultrasonic diagnosis system and image data display control program | |
JP4786307B2 (ja) | 画像処理装置 | |
US10123780B2 (en) | Medical image diagnosis apparatus, image processing apparatus, and image processing method | |
JP2009018115A (ja) | 3次元超音波診断装置 | |
US20100007663A1 (en) | Medical image display control device and method for operating medical image display control device | |
US8781196B2 (en) | Methods and systems for defining a VOI in an ultrasound imaging space | |
JP2006223449A (ja) | 断面表示装置、及び、そのプログラム | |
JP2001084409A (ja) | 三次元画像処理方法及び三次元画像処理装置 | |
JP5454841B2 (ja) | 医用画像処理装置 | |
JP5942217B2 (ja) | 超音波診断装置、超音波画像処理装置及び超音波画像処理プログラム | |
JP5170993B2 (ja) | 画像処理装置及び該画像処理装置を備える医用診断装置 | |
JP2001128982A (ja) | 超音波画像診断装置および画像処理装置 | |
KR101014559B1 (ko) | 3차원 초음파 영상 제공 초음파 시스템 및 방법 | |
JP5305635B2 (ja) | 医用画像表示装置 | |
JP2011036474A (ja) | 画像処理装置及び超音波診断装置 | |
JP5487339B2 (ja) | 医用画像処理装置 | |
JP5583472B2 (ja) | 医用画像診断装置及び制御プログラム | |
JP2019170412A (ja) | 手術シミュレーション装置及び手術シミュレーションプログラム | |
JP2009225917A (ja) | 画像処理装置及び画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110805 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130123 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130502 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140401 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140528 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140924 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141021 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5637653 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |