JP5143333B2 - 異なる種類の画像において異常部を観察するための画像処理を行うシステム及び方法 - Google Patents
異なる種類の画像において異常部を観察するための画像処理を行うシステム及び方法 Download PDFInfo
- Publication number
- JP5143333B2 JP5143333B2 JP2004247905A JP2004247905A JP5143333B2 JP 5143333 B2 JP5143333 B2 JP 5143333B2 JP 2004247905 A JP2004247905 A JP 2004247905A JP 2004247905 A JP2004247905 A JP 2004247905A JP 5143333 B2 JP5143333 B2 JP 5143333B2
- Authority
- JP
- Japan
- Prior art keywords
- imaging system
- image
- roi
- ultrasound
- coordinates
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000002159 abnormal effect Effects 0.000 title claims description 19
- 238000012545 processing Methods 0.000 title claims description 6
- 238000003384 imaging method Methods 0.000 claims abstract description 79
- 239000000523 sample Substances 0.000 claims description 79
- 238000012285 ultrasound imaging Methods 0.000 claims description 31
- 238000003672 processing method Methods 0.000 claims 5
- 238000011960 computer-aided design Methods 0.000 claims 2
- 230000005856 abnormality Effects 0.000 abstract description 10
- 238000002604 ultrasonography Methods 0.000 description 73
- 230000006835 compression Effects 0.000 description 56
- 238000007906 compression Methods 0.000 description 56
- 210000000481 breast Anatomy 0.000 description 38
- 230000005855 radiation Effects 0.000 description 27
- 238000010586 diagram Methods 0.000 description 8
- 210000002445 nipple Anatomy 0.000 description 8
- 239000002131 composite material Substances 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 238000012937 correction Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000013461 design Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000002059 diagnostic imaging Methods 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 210000000779 thoracic wall Anatomy 0.000 description 4
- 238000001574 biopsy Methods 0.000 description 3
- 238000002591 computed tomography Methods 0.000 description 3
- 238000004195 computer-aided diagnosis Methods 0.000 description 3
- 208000031513 cyst Diseases 0.000 description 3
- 238000002595 magnetic resonance imaging Methods 0.000 description 3
- 238000009607 mammography Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 239000004033 plastic Substances 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 210000003484 anatomy Anatomy 0.000 description 2
- -1 but not limited to Substances 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 239000004417 polycarbonate Substances 0.000 description 2
- 229920000515 polycarbonate Polymers 0.000 description 2
- 238000002600 positron emission tomography Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 206010006187 Breast cancer Diseases 0.000 description 1
- 208000026310 Breast neoplasm Diseases 0.000 description 1
- 206010011732 Cyst Diseases 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 239000004793 Polystyrene Substances 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002547 anomalous effect Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 239000011230 binding agent Substances 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000007822 coupling agent Substances 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 210000003041 ligament Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000002480 mineral oil Substances 0.000 description 1
- 235000010446 mineral oil Nutrition 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000009206 nuclear medicine Methods 0.000 description 1
- 239000003921 oil Substances 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 229920000306 polymethylpentene Polymers 0.000 description 1
- 239000011116 polymethylpentene Substances 0.000 description 1
- 229920002223 polystyrene Polymers 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/04—Positioning of patients; Tiltable beds or the like
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/42—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with arrangements for detecting radiation specially adapted for radiation diagnosis
- A61B6/4208—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with arrangements for detecting radiation specially adapted for radiation diagnosis characterised by using a particular type of detector
- A61B6/4233—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with arrangements for detecting radiation specially adapted for radiation diagnosis characterised by using a particular type of detector using matrix detectors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
- A61B6/4417—Constructional features of apparatus for radiation diagnosis related to combined acquisition of different diagnostic modalities
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/50—Clinical applications
- A61B6/502—Clinical applications involving diagnosis of breast, i.e. mammography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/545—Control of apparatus or devices for radiation diagnosis involving automatic set-up of acquisition parameters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
Description
本発明は、一般的に云えば、イメージングに関するものであり、より具体的には、異なる種類の画像において異常部(abnormality) を観察するためのシステム及び方法に関するものである。
既知のイメージング・システムの少なくとも幾つかにおいては、放射線源から円錐形ビームを投射して、該ビームが撮像する患者のような被検体を通過して放射線検出器の矩形アレイ（配列体）に入射するようにしている。また既知のトモシンセシス・システムの少なくとも一つにおいては、ピボット点を中心としてガントリと共に放射線源を回転させて、異なる投影角度で被検体のビュー（投影データ）を取得することができる。
他の既知の医用イメージング・システムにおいては、被検体の器官を観察するために超音波診断装置が使用されている。従来の超音波診断装置は典型的には、超音波信号を被検体内に送信し且つ被検体からの反射超音波信号を受信するための超音波プローブを含んでいる。超音波プローブによって受信された反射超音波信号は処理されて、検査中の被検体の乳房のような対象物の画像が形成される。
放射線源及び検出器を使用して実行される投影型マンモグラフィ（乳房撮影法）では、Ｘ線ビームの経路内にある覆い被さる解剖学的構造からの構造化ノイズ(structured noise)のようなある特定の制約がある。従って、マンモグラムの検査中に、放射線技師が疑わしい領域を識別するとき、放射線技師は超音波及び／又は診断用Ｘ線による乳房の追跡検査を要求する。より詳しく述べると、疑いのある嚢胞を持つ女性は追跡超音波検査を受けることを通常要求される。
米国特許第５１３３０２０号
米国特許第５４９１６２７号
米国特許第５８０６５２１号
しかしながら、追跡超音波検査は、通常、被検体について同じ幾何学的構成で行われることはなく、従って、マンモグラムと空間的に相関させることが困難である。更に、超音波検査は、典型的には、フリーハンド走査によって行われ、これは本質的に走査を行うオペレータの熟練度に依存し、全く再現性がない。また更に、一般的に、超音波検査はマンモグラムとは別個に実行され、その結果、スケジュール作成、管理、弁済、及び保健計画についての問題が生じることがある。従って、追跡超音波検査が、マンモグラムによって特徴付けられたのと同じ領域を突き止めて特徴付けることに関して、幾分不確実さがある。
少なくとも幾種類かのＸ線及び超音波イメージング・モダリティを使用して作成された画像相互の整合(registration)が、Ｘ線及び超音波イメージング・モダリティの両方において観察可能になり且つ何らかの固定の座標系で既知の座標を持つ環境内に基準マークを設けることによって行われている。しかしながら、Ｘ線検査が典型的には患者を直立した姿勢にして、乳房を頭尾(cranio-caudal) 方向、横方向又は外内斜位(latero-medial-oblique) 方向に圧迫して行われるのに対して、超音波検査が典型的には患者を仰臥位姿勢にして、乳房を走査することにより行われるので、整合を行うことは難しい。その上、超音波検査は乳首から胸壁へ向かって放射方向に又は逆放射方向に走査することによって行われ、またＸ線検査が行われる際の圧迫状態とは異なる圧迫状態で行われる。
本発明の一面においては、異なる種類の画像において異常部を観察するための方法を提供する。本方法は、第１のイメージング・システムを使用して対象物を走査して、対象物の少なくとも１つの画像を得る段階と、第１の画像上で観察可能である関心領域（ＲＯＩ）の座標を決定する段階であって、該ＲＯＩが異常部を含んでいる段階と、ＲＯＩの座標を使用して、第２のイメージング・システムによって対象物を走査する段階とを含んでいる。
本発明の別の一面においては、異なる種類の画像において異常部を観察するためのシステムを提供する。本システムは、対象物を走査して、対象物の少なくとも１つのＸ線画像を得るように構成されたＸ線イメージング・システムと、制御装置とを含んでいる。制御装置は、第１の画像上で観察可能であって異常部を含んでいるＲＯＩの座標を決定し、またＲＯＩの座標を利用して、超音波イメージング・システムによって対象物を走査するように構成されている。
本発明の更に別の一面においては、異なる種類の画像において異常部を観察するための方法を提供する。本方法は、２次元（２Ｄ）データに対して３次元（３Ｄ）データを整合させる段階を含んでいる。３Ｄデータは、２Ｄデータを得るために使用されたイメージング・システムとは異なるイメージング・システムを使用して求められる。
本発明のまた更に別の一面においては、異なる種類の画像において異常部を観察するための方法を提供する。本方法は、Ｘ線イメージング・システムを使用して対象物を走査して、対象物の少なくとも１つのＸ線画像を得る段階と、Ｘ線画像上のＲＯＩの座標を決定する段階であって、該ＲＯＩが異常部を含んでいる段階と、対象物の特定の領域を走査するために、超音波プローブ移動装置に命令してプローブを前記座標へ移動させる段階であって、該特定の領域が前記座標によって規定されている段階と、超音波イメージング・システムに命令して対象物の特定の領域を走査させて、少なくとも１つの超音波画像を得る段階とを含んでいる。
本発明の別の一面においては、異なる種類の画像において異常部を観察するためのシステムを提供する。本システムは、対象物を走査して、対象物の少なくとも１つのＸ線画像を得るように構成されたＸ線イメージング・システムと、制御装置とを含んでいる。制御装置は、Ｘ線画像上で観察可能であって異常部を含んでいるＲＯＩの座標を決定し、またＲＯＩの座標を使用して、超音波イメージング・システムによって対象物を走査し、更にＸ線画像がそれから作成された２Ｄデータを、超音波イメージング・システムによって対象物を走査することによって得られた３Ｄデータと整合させるように構成されている。
図１は医用イメージング・システム１２の絵画図である。模範的な実施形態において、イメージング・システム１２は、超音波イメージング・システム１４と、プローブ移動装置組立体１６と、超音波プローブ１８と、Ｘ線イメージング・システム及びトモシンセシス・イメージング・システム２０のうちの少なくとも一方とを含んでいる。超音波イメージング・システム１４とプローブ移動装置組立体１６と超音波プローブ１８とトモシンセシス・イメージング・システム２０とは、イメージング・システム１２内に動作上一体化されている。別の実施形態においては、超音波イメージング・システム１４とプローブ移動装置組立体１６と超音波プローブ１８とトモシンセシス・イメージング・システム２０とは、単一のイメージング・システム１２内に物理的に一体化されている。
図２は、トモシンセシス・イメージング・システム２０の絵画図である。模範的な実施形態において、トモシンセシス・イメージング・システム２０は、患者の乳房のような撮像対象物２２を表す３次元データセットを作成するために使用される。システム２０は、Ｘ線源のような放射線源２４と、複数の投影角度２８からのビューを収集するための少なくとも１つの検出器アレイ２６とを含んでいる。詳しく述べると、システム２０は、円錐形Ｘ線ビームを投射する放射線源２４を含んでおり、該ビームは対象物２２を通過して検出器アレイ２６に衝突する。各角度２８において得られたビューは、複数のスライス、すなわち検出器２６に平行な平面（複数）３０内に位置する構造を表す画像、を再構成するために使用される。検出器アレイ２６は、乳房のような関心のある対象物２２全体についての画像が作成されるように、行及び列に配列された複数の画素（図示せず）を持つパネルの形に製造される。
各画素は、スイッチング・トランジスタ（図示せず）を介して２つの別々のアドレス線（図示せず）に結合されるフォトダイオード（図示せず）のような光センサを含んでいる。一実施形態では、これらの２つの線は走査線及びデータ線である。放射線がシンチレータ部材に入射し、画素の光センサはＸ線とシンチレータとの相互作用によって発生された光の量を、ダイオードを横切る電荷の変化によって測定する。より詳しく述べると、各々の画素は、対象物２２によって減衰した後で検出器アレイ２６に衝突するＸ線ビームの強度を表す電気信号を生成する。一実施形態では、検出器アレイ２６はほぼ１９ｃｍ×２３ｃｍであり、且つ乳房のような関心のある対象物２２全体についてのビューを生成するように構成されている。代替実施形態では、検出器アレイ２６はその寸法を意図した用途に依存して変えるようにすることができる。その上、検出器アレイ２６の個々の画素の寸法は検出器アレイ２６の意図した用途に基づいて選択する。
模範的な実施形態において、再構成された３次元データセットは、必ずしも検出器２６に平行な平面に対応するスライスとして配列する必要はなく、より一般的な態様に配列される。別の実施形態では、再構成されたデータセットは単一の２次元（２Ｄ）画像、又は１次元関数でのみ構成される。更に別の実施形態では、検出器２６は平面形状以外の形状とする。
模範的な実施形態において、放射線源２４は対象物２２に対して相対的に移動可能である。より詳しく述べると、放射線源２４は撮像容積についての投影角度２８が変更されるように並進可能である。放射線源２４は投影角度２８が鋭角になるように、すなわち、斜めの投影角度になるように並進可能である。
放射線源２４の動作は、イメージング・システム２０の制御機構３８によって管理される。制御機構３８は、放射線源２４に電力及びタイミング信号を供給する放射線制御装置４０と、放射線源２４及び検出器アレイ２６のそれぞれの並進速度及び位置を制御するモータ制御装置４２とを含んでいる。制御機構３８内のデータ収集システム（ＤＡＳ）４４が、検出器２６からのディジタル・データをその後の処理のためにサンプリングする。画像再構成装置４６がＤＡＳ４４からのサンプリングされディジタル化された投影データセットを受け取って、高速画像再構成を実行する。撮像対象物２２を表す再構成された３次元データセットがコンピュータ４８に入力として供給され、コンピュータ３８は３次元データセットを大容量記憶装置５０に記憶させる。画像再構成装置４６は本書で述べる機能を実行するようにプログラムされており、また本書で使用する用語「画像再構成装置」は、コンピュータ、プロセッサ、マイクロコントローラ、マイクロコンピュータ、プログラム可能な論理制御装置、特定用途向け集積回路及び他のプログラム可能な回路を表す。更に、コンピュータ４８は本書で述べる機能を実行するようにプログラムされており、また用語「コンピュータ」は、当該技術分野でコンピュータと呼ばれている集積回路のみに限定されず、広義に、コントローラ（制御装置）、プロセッサ、マイクロコントローラ、マイクロコンピュータ、プログラム可能な論理制御装置、特定用途向け集積回路及び他のプログラム可能な回路を表し、これらの用語は本書で相互に交換して使用される。
コンピュータ４８はまた、入力装置を持つコンソール５２を介してオペレータから命令及び走査パラメータを受け取る。陰極線管及び液晶表示装置（ＬＣＤ）のような表示装置５４により、オペレータはコンピュータ４８からの再構成された３次元データセット及び他のデータを観察することが可能になる。コンピュータ４８はオペレータにより供給された命令及びパラメータを使用して、ＤＡＳ４４、モータ制御装置４２及び放射線制御装置４０へ制御信号及び情報を供給する。
イメージング・システム２０はまた圧迫パドル５６（図３参照）を含んでおり、この圧迫パドル５６は、プローブ移動装置組立体１６及び圧迫パドル５６が機械的に整列するようにプローブ移動装置組立体１６に隣接して配置される。更に、プローブ移動装置組立体１６を用いて得られる超音波データセット、すなわち第２の３次元データセットが、機械的設計によって圧迫パドル５６を用いて得られるＸ線データセット、すなわち第１の３次元データセットと共整合させられる。一実施形態では、超音波プローブ１８がプローブ移動装置組立体１６と動作上結合されて、その超音波プローブ１８が超音波出力信号を放出して圧迫パドル５６及び乳房に通すようになっており、超音波出力信号の少なくとも一部分は乳房内の嚢胞のような界面に遭遇したときに反射される。別の実施形態では、超音波プローブ１８は、圧迫パドル５６に動作上結合された容量性の微細加工した超音波トランスデューサの２Ｄアレイであり、プローブ移動装置組立体１６は使用されない。
図３は圧迫パドル５６の側面図である。一実施形態では、圧迫パドル５６は音響的に透明（音波透過性）で且つＸ線に透明（放射線透過性）であり、また圧迫パドル５６は、例えば、それに限定するものではないが、表１に示す材料のようなプラスチック材料の複合体から製造して、イメージング・システム１２がほぼ１０ＭＨｚで動作しているときに圧迫パドル５６の減衰係数がほぼ５．０デシベル／センチメータ未満になるようにし、これにより圧迫パドル５６による超音波残響及び減衰を最小にする。別の実施形態では、圧迫パドル５６は単一の複合材料を使用して製造される。更に別の実施形態では、圧迫パドル５６は単一の非複合材料を使用して製造される。また更に別の実施形態では、圧迫パドル５６は厚さがほぼ２〜３ミリメータ（ｍｍ）であって、複数の層５８を含むようにすることができる。層５８は、例えば、それに限定するものではないが、ポリカーボネート、ポリメチルペンテン、及びポリスチレンのような、複数の剛性の複合材料を使用して製造される。圧迫パドル５６は、表１に示されている複数の設計パラメータを用いて設計される。圧迫パドル５６の設計パラメータには、それに限定されないが、Ｘ線減衰率、原子番号、光透過率、引張りモジュラス、音速、密度、伸び、ポアソン比、音響インピーダンス、及び超音波減衰度が含まれる。
圧迫パドル５６の製造には複数の複合層５８を使用することを含み、これは有効なＸ線減衰係数、及び典型的な乳房撮影用圧迫パドルにより得られるものと同様な点像分布関数が容易に得られるようにする。その上、複合層５８を使用することにより、８０％よりも大きい光透過率、及びほぼ１４ＭＨｚまでの超音波プローブ周波数において低い超音波減衰度（３ｄＢ未満）を達成することができる。更に、複合層５８により、界面反射の最大強度を最大ビーム強度の２％にし、２０ｄａＮの全圧縮力を加えたときの１９×２３ｃｍ2 にわたる水平からの撓みを１ｃｍ未満にし、また機械的剛性及び時間につれての複数の耐放射線特性をポリカーボネートと同様にするのが容易にできる。
図４はプローブ移動装置組立体１６の平面図である。一実施形態では、プローブ移動装置組立体１６は圧迫パドル５６に離脱可能に結合されており、またプローブ移動装置組立体１６は、プローブ移動装置組立体１６が圧迫パドル５６の上方に独立に位置決めできるように圧迫パドル５６から切り離すことができる。プローブ移動装置組立体１６は、複数の歩進モータ６２と、位置エンコーダ（図示せず）と、複数のリミット・スイッチ駆動キャリッジ（図示せず）とを含んでおり、それらのキャリッジのうちの少なくとも１つのキャリッジには、圧迫パドル５６の可変の垂直方向位置決め能力が得られるようにレセプタクル６４を介して超音波プローブ１８（図１参照）が装着される。一実施形態では、超音波プローブ１８は、圧迫パドル５６と接触するまでｚ方向に垂直に下降する。歩進モータ６２は、ユーザによって決定された可変の速度を使用してｘ及びｙ方向に細かい変分でキャリッジ６６に沿って超音波プローブ１８を駆動する。リミット・スイッチ６８は、バックラッシュ制御ナット（図示せず）と共に、超音波プローブ１８がプローブ移動装置組立体１６の所定の機械的設計の限界を越えて移動するのを防止するのに役立つ。超音波プローブ１８は、レセプタクル７２に取り付けられたＵ字形プレート７０上に装着される。一実施形態では、Ｕ字形プレート７０は、別個の組立体（図示せず）を介してＸ線イメージング・システム又はトモシンセシス・イメージング・システム２０上の複数の案内レール（図示せず）に取り付けられる。プローブ移動装置組立体１６のｘ及びｙ方向の寸法は、圧迫パドル５６の寸法と比べて超音波プローブ１８の所望の運動範囲に基づいて可変にして選択される。ｚ方向における寸法は、プローブ移動装置組立体１６の上方の放射線源２４のハウジングとその下方の圧迫パドル５６との間の垂直方向の隙間によって制限される。
図５は、関心のある対象物２２の画像を作成するための模範的な方法８０の流れ図である。この方法８０は、Ｘ線源２４及び検出器２６を使用して第１の位置で対象物２２の第１の３次元データセットを取得する段階８２と、超音波プローブ１８を使用して第１の位置で対象物２２の第２の３次元データセットを取得する段階８４と、第１の３次元データセットと第２の３次元データセットとを組み合わせて対象物２２の３次元画像を作成する段階８６とを含んでいる。
図６は、イメージング・システム１２の絵画図である。図６を参照して説明すると、使用に際して、圧迫パドル５６が圧迫パドル・レセプタクル１００を介してトモシンセシス・イメージング・システム２０に装着される。一実施形態では、プローブ移動装置組立体１６が、取付け具１０４を介して、圧迫パドル・レセプタクル（図示せず）の上方にあるＸ線位置決め装置１０２上の複数の案内レール（図示せず）上のレセプタクル（図示せず）に取り付けられる。別の実施形態では、プローブ移動装置組立体１６はトモシンセシス・イメージング・システム２０上の複数の側部ハンドレール（図示せず）を使用して取り付けられる。超音波プローブ１８が一端で超音波イメージング・システム１４に接続され、またプローブ・レセプタクル１０６を介してプローブ移動装置組立体１６に結合される。患者は、患者の乳房が圧迫パドル５６と検出器２６との間に位置決めされるように、トモシンセシス・イメージング・システム２０に接近して配置する。
超音波プローブ１８及びプローブ移動装置組立体１６の幾何学的配置（ジオメトリ）が圧迫パドル５６に対して較正される。一実施形態では、超音波プローブ１８の較正には、超音波プローブ１８がプローブ移動装置レセプタクル１０４に装着され、またプローブ移動装置組立体１６が圧迫パドル・レセプタクル１００を介してトモシンセシス・イメージング・システム２０に取り付けられていることを保証することが含まれる。イメージング・システム１２の較正は、座標系相互間の変換操作が有効であることを保証するのに役立つ。圧迫パドル５６による屈折効果を補正するのに役立てるために正しいビーム形成コード環境が超音波イメージング・システム１４にインストールされる。そこで、最適なパラメータが、患者や以前のＸ線又は超音波検査についての事前の知識に基づいて決定される。
患者は頭尾方向、内外(medial-lateral)方向及び斜位方向の位置のうちの少なくとも１つに位置決めして、乳房が圧迫パドル５６と検出器２６との間に位置決めされるようにする。一実施形態では、乳房２３は、例えば、それに限定されないが、鉱油のような音響結合剤で僅かに覆う。次いで圧迫パドル５６を使用することにより、レセプタクル１００の手動制御及びレセプタクル１００についての自動制御のうちの少なくとも一方を用いて適切な厚さまで乳房を圧迫する。
次いで、標準的な２Ｄ及びトモシンセシス・モードのうちの少なくとも一方で動作するトモシンセシス・イメージング・システム２０によりＸ線検査を行う。トモシンセシス・モードでは、Ｘ線管ハウジング１０８は、位置決め装置１１０とは独立に検出器２６の上方で垂直に軸線を中心として回転する能力が得られるように変更される。一実施形態では、患者及び検出器２６は固定し、Ｘ線管ハウジング１０８は回転させる。
次いで、乳房のビューを少なくとも２つの投影角度２８（図２参照）から取得することにより、関心のある容積の投影データセットを作成する。これらの複数のビューはトモシンセシス投影データセットを表す。次いで、収集された投影データセットを利用することにより、撮像される乳房２３の３次元Ｘ線写真表現を表す第１の３次元データセット、すなわち、走査された乳房についての複数のスライスを作成する。放射線ビームが第１の投影角度１１２（図２参照）で放出されるように放射線源２４を作動した後で、検出器アレイ２６を使用してビューを収集する。次いで、線源２４の位置を並進させることによってシステムの投影角度２８を変更して、放射線ビームの中心軸線１５０（図２参照）が第２の投影角度１１４（図２参照）へ変更されるようにすると共に、乳房２３をシステム２０の視野内に留めるように検出器アレイ２６の位置が変更されるようにする。放射線源２４を再度作動して、第２の投影角度１１４についてビューを収集する。その後、同じ手順を任意の数の後続の投影角度２８について繰り返す。
一実施形態では、複数の角度２８で放射線源２４及び検出器アレイ２６を使用して乳房の複数のビューを取得して、関心のある容積の投影データセットを作成する。別の実施形態では、一角度２８で放射線源２４及び検出器アレイ２６を使用して乳房の単一のビューを取得して、関心のある容積の投影データセットを作成する。次いで、収集された投影データセットを利用することにより、走査された乳房について２Ｄデータセット及び第１の３次元（３Ｄ）データセットのうちの少なくとも一方を作成する。その結果得られるデータはコンピュータ４８（図２参照）上の指定されたディレクトリに記憶させる。もしトモシンセシス走査が行われる場合、トモシンセシス・イメージング・システム２０のガントリはその垂直位置へ戻すべきである。
図７は、圧迫パドル５６並びに超音波イメージング・システム１４とトモシンセシス・イメージング・システム２０との間のインターフェースの絵画図である。図８は、イメージング・システム１２の一部分の側面図である。模範的な実施形態において、圧迫パドル５６には音響結合用ゲル１２０が圧迫パドル５６の上方にほぼ２ｍｍの高さまで充填される。別の実施形態では、音響シース(sheath)（図示せず）が圧迫パドル５６上に配置される。プローブ移動装置組立体１６は、プローブ移動装置組立体平面が圧迫パドル５６の平面に平行になるように、取付け具１０４（図６参照）を介してトモシンセシス・イメージング・システム２０のガントリ（図示せず）に取り付けられる。一実施形態では、超音波プローブ１８は音響シースに接触するまで降下させる。別の実施形態では、超音波プローブ１８は結合用ゲル１２０内に部分的に浸漬されるまで降下させる。超音波プローブ１８の高さはレセプタクル１０６（図６参照）を介して調節する。
超音波プローブ１８は、圧迫パドル５６の上方に垂直に装着されていて、胸壁１２６及び乳首領域１２８を含む乳房２３全体にわたって電気機械的に走査して、乳房２３についての第２の３Ｄデータセットを作成する。一実施形態では、コンピュータ１３０が歩進モータ制御装置１３２を駆動して、乳房２３をラスタ状の態様で走査する。別の実施形態では、コンピュータ４８（図２参照）が制御装置１３２を駆動して、乳房２３をラスタ状の態様で走査する。コンピュータ１３０は本書で述べる機能を実行するようにプログラムされており、本書で用いる用語「コンピュータ」とは、当該技術分野でコンピュータと呼ばれている集積回路のみに限定されず、広義には、コントローラ（制御装置）、プロセッサ、マイクロコントローラ、マイクロコンピュータ、プログラム可能な論理制御装置、特定用途向け集積回路及び他のプログラム可能な回路を表し、これらの用語は本書で相互に交換して使用される。プローブ１８を備えた超音波システム１４は、電子的ビーム・ステアリング及び仰角集束(elevation focusing)能力を含むソフトウエアを含んでいる。一実施形態では、実時間超音波データを超音波イメージング・システム１４のモニタで観察することができる。別の実施形態では、超音波データを任意の表示装置で、例えば、それに限定されないが、表示装置５４（図２参照）で観察することができる。更に別の代替実施形態では、超音波データ及びＸ線データをコンピュータ１３０でオフラインで観察し、このコンピュータはスタンドアロン型コンピュータであってよい。また更に別の代替実施形態では、超音波データ及びＸ線データを、患者の検査後に直ちに表示装置５４で観察する。プローブ移動装置組立体１６はトモシンセシス・イメージング・システム２０から離脱させ、また圧迫パドル５６は患者を解放するために位置決めし直す。
図８に示されているように、電子的ビーム・ステアリングにより、例えば、乳首領域１２８に注目することによって、胸壁１２６及び乳首領域１２８を撮像することが可能になる。もし超音波プローブ１８が乳首領域１２８の直ぐ上にある場合、圧迫された乳房２３と圧迫パドル５６との間の空隙により、音響エネルギが乳首領域１２８に伝達されない。しかしながら、図８に示されているようにステアリングされたビームが左から入射する場合、音響エネルギは効率よく伝達され、もって、乳首領域１２８を撮像できるように形状順応性のゲル・パッドを配置する必要性が低減する。更に、ビームを多数の角度にステアリングして、得られたデータセットを組み合わせることによって、クーパー靱帯のような構造に起因する音響陰影を最小にすることができるように、ビーム・ステアリングは制御することができる。
一実施形態では、第１のデータセットの座標系を第２のデータセットの座標系に変換して、これらのデータセットをハードウエア設計によって整合させ、且つ画像に基づいた整合方法を使用して間欠的な患者の動きについて整合を補正することができる。この代わりに、第２のデータセットの座標系を第１のデータセットの座標系に変換する。第１の３Ｄデータセット及び第２の３Ｄデータセットが同じ物理的構成の乳房２３で取得されるので、画像は機械的整合情報から直接的に整合させることができる。詳しく述べると、画像は乳房２３の解剖学的構造全体にわたって点毎に直接整合させることができ、これによって３Ｄ超音波画像と２ＤＸ線画像との整合に関連した曖昧さが除去される。代替実施形態では、個々のイメージング・モダリティの物理を使用して２つの画像の整合を改善することができる。２つのモダリティにおける空間分解能の差及び伝播特性の差を考慮することにより、２つの画像における小さな位置決めの差異を識別することができる。そこで、２つの画像における補正された位置に基づいて整合が行われる。いずれの画像データセットについての対応する関心領域を複数の方法で同時に観察することができ、これによって密閉された対象物又は局部的な領域の質的な視覚化及び量的な特徴付けが改善される。
図９は、１２ＭＨｚにおける模範的な屈折補正の効果を例示する画像である。図１０は、屈折補正が無い場合の図９と同じ画像である。一実施形態では、圧迫パドル５６による屈折補正が、図９及び１０に示されるようなビーム形成過程に組み込まれる。ワイヤが拡散して現れることが、３ｍｍのプラスチック材料での屈折補正により補正される。一実施形態では、超音波プローブ１８は、能動マトリクス・リニア・トランスデューサと、仰角集束及びビーム・ステアリング能力を含むフェーズド・アレイ・トランスデューサとの少なくとも一方を含んでいる。超音波プローブ１８が能動マトリクス・リニア・トランスデューサ又はフェーズド・アレイ・トランスデューサを含んでいるので、固有の空間分解能が標準的なプローブの場合よりも遥かに大きい深さにわたって維持される。更に、仰角集束及び注意深く選択された圧迫パドルのプラスチック材料により高周波プローブの使用が可能になり、ファントム及び臨床画像で有効とされるような超音波画像での２５０ミクロン程度の高分解能がこのシステムによって得られる。
一実施形態では、超音波イメージング・システム１４にインストールされているコンピュータ・ソフトウエア・プログラムを使用して、圧迫パドル５６上の所定の軌跡で超音波プローブ１８を駆動する。このプログラムはまた、歩進制御装置１３２及び超音波システム１４と連絡して、画像及びデータの収集及び記憶を開始させる。別の実施形態では、トモシンセシス・イメージング・システム２０にインストールされているコンピュータ・ソフトウエア・プログラムを使用して、圧迫パドル５６上の所定の軌跡で超音波プローブ１８を駆動する。このプログラムは超音波プローブ１８の位置決め精度をほぼ±１００ミクロン以内に改善するのに役立つ。
その上、イメージング・システム１２は、一検査に利用されるハードウエア、すなわち、Ｘ線源２４及び検出器２６が、超音波プローブ１８を使用して作成された他の画像の品質に及ぼす影響を最小にするように、画像収集過程を切り離すのに役立つ。更に、システム１２は、構造化ノイズの低減、嚢胞と密実な塊体との差別化、及び単一の自動化された組合せ検査における複数モダリティの整合したデータセットの完全な３Ｄ視覚化を容易にし、これによって乳房画像内の疑わしい領域の位置突止め及び特徴付けのための方法の改善を容易にし、その結果、不必要なバイオプシーを少なくし且つ乳房走査の効率を一層高くする。
臨床超音波並びに３Ｄ及び２ＤディジタルＸ線がシステム１２を使用して共に整合したフォーマットで利用できるので、システム１２は、例えば、これに限定されないが、複数モダリティ・コンピュータ支援診断（ＣＡＤ）アルゴリズム又は改良分類方式のような、追加の最新の用途のためのプラットフォームを提供する。システム１２は、深さ方向の情報により２ＤＸ線データセットで得られるものよりも高い精度で乳房バイオプシーを誘導するのに役立つ。乳癌について様々な形態の処置を受ける患者をシステム１２で監視して、超音波走査の自動化による治療に対する患者の反応を判断し、従って走査における変動性の影響の低減を判断することができる。例えば、システム１２を使用して、最初の検査の際、及び処置中に様々な時間間隔で生じる複数の後続の検査の際に、Ｘ線及び超音波画像データセットを取得することができる。後続の検査の際、患者はシステム１２を使用することによって最初の検査において位置決めしたのと同様な態様で位置決めして、第１のデータセットを取得したときに使用されたのと同じパラメータを用いて超音波により乳房２３を撮像することができる。次いで、相互の情報又は特徴に基づいた整合手法を使用することにより、２つの超音波データセット上の明確に識別可能な特徴物又は他の手段を用いて該２つの超音波データセットを互いに対してより良く整合させるために必要とされる反復的な患者再位置決めに必要なｘ，ｙ及びｚ方向変位を決定することができる。このような特徴物はまた、外科的処置が使用されている場合に可能性として埋め込むこともできる。これは、癌の再発があり得ないことではないので、互いに対して実質的に整合したデータセットを臨床医に提供でき、従って、システム１２は経過を追跡して、それに応じて治療計画を修正するために使用することができる。更に、システム１２は、圧迫を強めるための主要な要因である構造化ノイズを軽減するので、乳房２３の圧迫を低減するのに役立つ。システム１２はまた、立体マンモグラフィと３Ｄ超音波との組合せを可能にするように変更することができる。
図１１は、異なる種類の画像において異常部１５２を観察するための一実施形態のシステム１５０である。システム１５０は、超音波イメージング・システム１４と、超音波プローブ１８と、プローブ移動装置組立体１６と、イメージング・システム２０と、中央コンピュータ１３０と、ワークステーション１５４及び１５６を含んでいる。ワークステーション１５４及び１５６の各々は、本書で述べる機能を実行するようにプログラムされており、また本書で用いる用語「ワークステーション」とは、当該技術分野でコンピュータと呼ばれている集積回路のみに限定されず、広義に、コンピュータ、コントローラ（制御装置）、プロセッサ、マイクロコントローラ、マイクロコンピュータ、プログラム可能な論理制御装置、特定用途向け集積回路及び他のプログラム可能な回路を表し、これらの用語は本書で相互に交換して使用される。患者は、例えばオイルのような音響結合剤で覆った乳房２３がイメージング・システム２０上で圧迫パドル５６と検出器２６との間に圧迫されて配置されるように位置決めされる。Ｘ線画像１５８を得るためにＸ線を乳房２３に透過させ、Ｘ線画像１５８はワークステーション１５６上に表示される。ここで、異常部１５２のＸ線画像１５８は、超音波イメージング・システム１４の表示装置、表示装置５４、中央コンピュータ１３０の表示装置、又はワークステーション１５４の表示装置のような任意の表示装置で表示してよいことに留意されたい。その上、Ｘ線画像１５８は投影画像、又は上述のトモシンセシス収集法を使用して取得される画像であってよい。
放射線医師又は技師のようなユーザにより、Ｘ線画像１５８上に関心領域（ＲＯＩ）１６０を記入して、ユーザにとって疑わしく見える瘤塊の様な異常部を取り囲む。ＲＯＩ（１６０）の形状には、例えば、長方形、正方形、円、楕円、多角形が挙げられる。代替実施形態では、ＣＡＤアルゴリズムにより、閾値法を使用して異常部を取り囲むようにＲＯＩ（１６０）を表示する。閾値法では、Ｘ線画像１５８を表示する画素の強度又はハウンスフィールド番号が閾値以上である場合、それらの画素はＲＯＩ（１６０）に対応する画素として指定される。Ｘ線画像１５８を表示する画素の強度が閾値より低い場合、それらの画素はＲＯＩ（１６０）の外側にある領域に対応する画素として指定される。ＲＯＩ（１６０）に対応する画素は、異常部１５２を通過するＸ線が乳房２３の残りの領域を通過するＸ線よりも異なる減衰量を持っているので異なる強度を持つ。更に別の代替実施形態では、米国特許第５１３３０２０号又は米国特許第５４９１６２７号に記載されている任意の様々な既知の２Ｄアルゴリズムが使用される。ＲＯＩの座標がワークステーション１５６と中央コンピュータ１３０との間のインターフェースを介して帰還される。
超音波画像を得るために、前に述べたようにプローブ移動装置組立体１６をイメージング・システム２０に取り付け、プローブ１８をプローブ移動装置組立体１６のレセプタクル１００に係合させる。音響シース又は結合用ゲル１２０を、図８に示されているように圧迫パドル５６に適用する。ＲＯＩ（１６０）の座標が中央コンピュータ１３０によってプローブ移動装置ソフトウエアに転送され、該ソフトウエアは上記座標に対応する圧迫パドル５６上の位置に移動するように超音波プローブ１８に命令し、超音波パラメータの選択と共に超音波イメージング・システム１４を使用して超音波走査が実行される。一実施形態では、座標によって定められたＲＯＩ（１６０）が超音波イメージング・システム１４を使用して走査され、乳房２３の他の領域は何ら走査されない。代替実施形態では、患者の乳房２３の様な任意の部分が超音波イメージング・システム１４を使用して走査される。
ＲＯＩ（１６０）を走査した後に得られる異常部１５２の超音波画像は、超音波イメージング・システム１４のシネ・メモリ又はハードドライブから中央コンピュータ１３０を介して送られて、ワークステーション１５４で表示される。ここで、異常部１５２の超音波画像は、任意の表示装置で、例えば、超音波イメージング・システム１４の表示装置、表示装置５４、中央コンピュータ１３０の表示装置、又はワークステーション１５６の表示装置で表示してもよいことに留意されたい。一実施形態において、超音波画像はシネ・ループにおいて一度に一つずつＲＯＩ（１６２）に表示される。ＲＯＩ（１６２）の形状には、例えば、立方体、球又は楕円体のような３Ｄ形状が挙げられる。別の実施形態では、ワークステーション１５６上のＸ線画像１５８を、このＸ線画像１５８と超音波画像との比較のためにワークステーション１５４上にも表示する。別の実施形態では、異常部１５２の超音波画像をＸ線画像１５８に重畳して、ワークステーション１５４で表示する。更に別の代替実施形態では、超音波画像をワークステーション１５４で表示すると共に、Ｘ線画像１５８をワークステーション１５６で表示して、Ｘ線画像１５８と超音波画像とを比較するために両方のワークステーション１５４及び１５６を並べて配置する。ここで、ＲＯＩ（１６０）のような幾つかの関心領域をＸ線画像１５８上で選択できることに留意されたい。これらの関心領域に対応するデータセットは、後で評価するために記憶させておくか、或いは患者が位置決めされ且つユーザが検査室に居る間に実時間で表示することも可能である。
図１２は、異なる種類の画像において異常部を観察する方法を例示するためにＸＹＺ及びＸ’Ｙ’Ｚ’座標系を示す。本方法は、超音波イメージング・システム１４を使用して取得した超音波容積１８０内のデータのような容積測定３Ｄデータを、イメージング・システム２０を使用して取得したデータのような平面１８２上の２Ｄ画像データに対して整合させる段階を含んでいる。超音波容積１８０のデータは、図１２に示されているＺ軸の方向に超音波プローブ１８を一様に移動させることにより取得される。超音波プローブ１８は、超音波容積１８０のデータを取得するために、超音波プローブ１８の面を平面１８２に平行にして、平面１８２の１つの縁に平行に移動する。容積測定３Ｄデータの他の例としては、磁気共鳴イメージング（ＭＲＩ）システム、コンピュータ断層撮影（ＣＴ）システム、ポジトロン・エミッション断層撮影（ＰＥＴ）システム、及びＸ線イメージング・システムを使用して取得されるデータが挙げられる。２Ｄ画像データの他の例としては、ＭＲＩシステム、ＣＴシステム、ＰＥＴシステム、及び超音波イメージング・システムを使用して取得されるデータが挙げられる。
ＸＹＺは、イメージング・システム１４を使用して得られる２ＤＸ線画像の平面１８２の座標系である。ＯはＸＹＺ座標系の原点であり、Ｙ＝０は２ＤＸ線画像の平面１８２である。代替実施形態では、Ｙ＝ｎは２ＤＸ線画像の一平面であり、ここでｎは実数である。Ｘ線源のような放射線源２４はＸＹＺ座標系内の点Ｓ＝（ｑ1 ，ｑ2 ，ｑ3 ）に位置決めされる。Ｘ’Ｙ’Ｚ’は超音波イメージング・システム２０を使用して患者を走査することによって得られる超音波容積１８０の局部座標系である。
ここで、Ａが座標（ｘ1ｕ1，ｙ1ｕ1，ｚ1ｕ1）を持つ超音波容積１８０内の一点であるとすると、ＡはＸＹＺ座標系において座標（ｘ1 ，ｙ1 ，ｚ1 ）を持ち、
ｘ1 ＝ｃ1ｘ1ｕ1＋ｔ1 （１）
ｙ1 ＝ｃ2ｙ1ｕ1＋ｔ2 （２）
ｚ1 ＝ｃ3ｚ1ｕ1＋ｔ3 （３）
であり、ここで、係数ｃ3 は未知であり、並進(translation) 値ｔ1 、ｔ2 及びｔ3 は未知であり、ｃ1 は図１２に示されているＸＹＺ座標系のＸ軸に沿った方向における画素の長さであり、ｃ2 は図１２に示されているＸＹＺ座標系のＹ軸に沿った方向における画素の長さであり、ｃ3 は超音波容積１８０内の相次ぐスライス相互の間の距離を表す。Ｘ軸に沿った方向における長さｃ1 及びＹ軸に沿った方向における長さｃ2 を持つ画素は、超音波容積１８０の超音波画像の一平面上の画素である。
ｘ1 ＝ｃ1ｘ1ｕ1＋ｔ1 （１）
ｙ1 ＝ｃ2ｙ1ｕ1＋ｔ2 （２）
ｚ1 ＝ｃ3ｚ1ｕ1＋ｔ3 （３）
であり、ここで、係数ｃ3 は未知であり、並進(translation) 値ｔ1 、ｔ2 及びｔ3 は未知であり、ｃ1 は図１２に示されているＸＹＺ座標系のＸ軸に沿った方向における画素の長さであり、ｃ2 は図１２に示されているＸＹＺ座標系のＹ軸に沿った方向における画素の長さであり、ｃ3 は超音波容積１８０内の相次ぐスライス相互の間の距離を表す。Ｘ軸に沿った方向における長さｃ1 及びＹ軸に沿った方向における長さｃ2 を持つ画素は、超音波容積１８０の超音波画像の一平面上の画素である。
点Ｂは、投影中心Ｓから平面Ｙ＝０への点Ａの投影である。点Ｓ、Ａ及びＢが同一直線上にあることから、Ｂ−Ｓ＝γ1 （Ａ−Ｓ）は、座標の形態では、
ｘ1ｘ1−ｑ1 ＝γ1（ｃ1ｘ1ｕ1＋ｔ1−ｑ1） （４）
ｙ1ｘ1−ｑ2 ＝γ1（ｃ2ｙ1ｕ1＋ｔ2−ｑ2） （５）
ｚ1ｘ1−ｑ3 ＝γ1（ｃ3ｚ1ｕ1＋ｔ3−ｑ3） （６）
となる。ここで、γ1 は未知の実数であり、（ｘ1ｘ1，ｙ1ｘ1，ｚ1ｘ1）はＸＹＺ座標系における点Ｂの座標である。点Ｂが平面Ｙ＝０上にあるので、ｙ1ｘ1＝０である。しかしながら、点ＢがＹ＝０以外の任意の平面上にある場合、Ｙはゼロに等しくない。
ｘ1ｘ1−ｑ1 ＝γ1（ｃ1ｘ1ｕ1＋ｔ1−ｑ1） （４）
ｙ1ｘ1−ｑ2 ＝γ1（ｃ2ｙ1ｕ1＋ｔ2−ｑ2） （５）
ｚ1ｘ1−ｑ3 ＝γ1（ｃ3ｚ1ｕ1＋ｔ3−ｑ3） （６）
となる。ここで、γ1 は未知の実数であり、（ｘ1ｘ1，ｙ1ｘ1，ｚ1ｘ1）はＸＹＺ座標系における点Ｂの座標である。点Ｂが平面Ｙ＝０上にあるので、ｙ1ｘ1＝０である。しかしながら、点ＢがＹ＝０以外の任意の平面上にある場合、Ｙはゼロに等しくない。
式（４）、（５）及び（６）の系は、５つの未知の変数があり且つ３つの式（４）、（５）及び（６）しかないので、不明瞭である。別の一対の対応する点Ｃ及びＤが追加されると、３つの追加の式が得られ、１つの未知の実数γ2 が追加され、ｃ3 、ｔ1 、ｔ2 及びｔ3 は同じままである。Ｃは超音波容積１８０内の一点である。点Ｄは、投影中心Ｓから平面Ｙ＝０への点Ｃの投影である。従って、３つの追加の式を用いることによって、係数ｃ3 と並進値ｔ1 、ｔ2 及びｔ3 を求めることができる。係数ｃ3 、並進値ｔ1 、ｔ2 及びｔ3 、並びにｃ1 及びｃ2 はＸＹＺ座標系（これは、Ｘ線座標系でもある）に対する超音波容積１８０の整合を規定する。このような３つの追加の式は、
ｘ2ｘ2−ｑ1 ＝γ2（ｃ1ｘ2ｕ2＋ｔ1−ｑ1） （７）
ｙ2ｘ2−ｑ2 ＝γ2（ｃ2ｙ2ｕ2＋ｔ2−ｑ2） （８）
ｚ2ｘ2−ｑ3 ＝γ2（ｃ3ｚ2ｕ2＋ｔ3−ｑ3） （９）
である。ここで、（ｘ2ｕ2，ｙ2ｕ2，ｚ2ｕ2）はＸ’Ｙ’Ｚ’座標系における点Ｃの座標であり、（ｘ2 ，ｙ2 ，ｚ2 ）はＸＹＺ座標系における点Ｃの座標であり、
ｘ2 ＝ｃ1ｘ2ｕ2＋ｔ1 （１０）
ｙ2 ＝ｃ2ｙ2ｕ2＋ｔ2 （１１）
ｚ2 ＝ｃ3ｚ2ｕ2＋ｔ3 （１２）
である。
ｘ2ｘ2−ｑ1 ＝γ2（ｃ1ｘ2ｕ2＋ｔ1−ｑ1） （７）
ｙ2ｘ2−ｑ2 ＝γ2（ｃ2ｙ2ｕ2＋ｔ2−ｑ2） （８）
ｚ2ｘ2−ｑ3 ＝γ2（ｃ3ｚ2ｕ2＋ｔ3−ｑ3） （９）
である。ここで、（ｘ2ｕ2，ｙ2ｕ2，ｚ2ｕ2）はＸ’Ｙ’Ｚ’座標系における点Ｃの座標であり、（ｘ2 ，ｙ2 ，ｚ2 ）はＸＹＺ座標系における点Ｃの座標であり、
ｘ2 ＝ｃ1ｘ2ｕ2＋ｔ1 （１０）
ｙ2 ＝ｃ2ｙ2ｕ2＋ｔ2 （１１）
ｚ2 ＝ｃ3ｚ2ｕ2＋ｔ3 （１２）
である。
点Ｓ、Ｃ及びＤが同一直線上にあることから、Ｄ−Ｓ＝γ2 （Ｃ−Ｓ）は、座標の形態では、上記の式（７）、（８）及び（９）のように書き表される。
γ1 、γ2 、ｃ3 、ｔ1 、ｔ2 及びｔ3 に対する６つの式（４）、（５）、（６）、（７）、（８）及び（９）の系は非線形であり、ここで、γ1 は一対の対応する点Ａ及びＢについてのものであり、γ2 は別の一対の対応する点Ｃ及びＤについてのものである。３つの式（４）、（５）及び（６）のうちの１つからγ1 を表現して、その結果得られた式を他の２つの式に代入し、また３つの式（７）、（８）及び（９）のうちの１つからγ2 を表現して、その結果得られた式を他の２つの式に代入することによって、線形系を得ることができる。
異なる種類の画像において異常部を観察するための方法の一実施形態を例示するために、図１３及び図１４はイメージング・システム１４を使用して取得したＸ線画像を示し、また図１５は超音波画像１９０、１９２、１９４及び１９６を示している。この方法は、対応する点Ａ及びＢ又は対応する点Ｃ及びＤのような対応する点を選択する段階を含んでいる。
点Ａ及びＢのような対応する点は次のようにして選択される。超音波容積１８０の３Ｄ特徴部は、２Ｄ平面における２ＤＸ線画像の丸い形状の特徴部のような２Ｄ特徴部として投影される。２Ｄ及び３Ｄ特徴部の境界上の対応する点を見つけるため、２ＤＸ線画像内の２Ｄ特徴部の境界上の４つの端点１８４、１８５、１８６及び１８７が識別される。この代わりに、４つの端点よりも多い又は少ない端点が識別される。
更に、平面ｙ1ｕ1＝０に対して直角である超音波容積１８０の２Ｄスライス、例えば、ｘ1ｕ1＝Ｕ又はｚ1ｕ1＝Ｖであるスライスが識別される。この代わりに、ｍを実数として、平面ｙ1ｕ1＝ｍに対して直角である超音波容積１８０の２Ｄスライスが識別される。図１４に示されているようにＶの値を減少させることによって、最初に２Ｄ特徴部の一部が現れるスライスｚ1ｕ1＝Ｖの値が識別される。スライスｚ1ｕ1＝Ｖが最初に２Ｄ特徴部の一部を示しているとき、第１の対応する一対の点が求められる。端点１８４に対応する座標（ｘ1ｕ1，ｙ1ｕ1，ｚ1ｕ1）＝（１１９，１０７，６９）を持つ点の例を、図１５の超音波画像１９０、１９２及び１９４に示している。より低いＶの値で開始して逆方向に進むことによって、第２の一対の対応する点が求められ、この第２の一対の対応する点の一方は端点１８５である。端点１８６に対応する点及び端点１８７に対応する点が、スライスｚ1ｕ1＝Ｖを操作したのと同じ態様でスライスｘ1ｕ1＝Ｕを操作することによって求められる。
３対以上の対応する点を求めることによって、ｃ3 、ｔ1 、ｔ2 及びｔ3 についての平均値を計算して、任意の整合エラーを低減するようにすることができる。例えば、ｃ3 、ｔ1 、ｔ2 及びｔ3 は対の対応する点Ａ及びＢと対応する点Ｃ及びＤから求める。この例で、ｃ4 、ｔ5 、ｔ6 及びｔ7 は他の対の対応する点、例えば、一対の対応する点Ｅ及びＦと一対の対応する点Ｇ及びＨとから求める。ｃ3 及びｃ4 を平均することによりｃ5 を求めることができる。対応する点の選択は手動で又は自動的に行う。自動的な選択は、中央コンピュータ１３０、超音波イメージング・システム２０又はコンピュータ４８によって実行する。対応する点の自動的な選択は、J.B. Antoine Maintz 及びMax Ａ. Viergeverによる「An Overview of Medical Image Registration Methods, Medical Image Analysis(1998)」第２巻，第１号，第１〜３７頁に、またIsaac N. Nankenmanによる「Handbook of Medical Imaging Processing and Analysis (2000)」に「自動特徴部検出方法及び特徴部対応アルゴリズム(methods for automatic feature detection and feature matching algorithms) 」として記述されている。
従って、異なる種類の画像において異常部を観察するためのシステム及び方法の技術的な効果は、プローブ移動装置組立体１６を使用して異常部１５２を取り囲むＲＯＩを超音波プローブ１８で操作することによって、Ｘ線画像１５８上の異常部１５２を３Ｄでより厳密に観察できることである。その上、異なる種類の画像において異常部を観察するためのシステム及び方法の別の技術的な効果は、マンモグラムで識別された任意の疑わしい領域を、患者が同じやり方で位置決めされた状態で、マンモグラムの数分以内に共整合した超音波走査により実時間で半自動的に撮像することである。このようなシステム及び方法の更に別の技術的な効果は、放射線医師がＸ線画像データ内の関心のある面領域と３Ｄ超音波データ内の関心のある対応する容積とを同時に分析することを可能にすることである。また、本書で述べたシステム及び方法はバイオプシーの誘導のために及び核医学において使用できることに留意されたい。更に、本書で述べたシステム及び方法は磁気共鳴イメージング（ＭＲＩ）システムのような他のモダリティでも使用できることに留意されたい。その上、本書で述べたシステム及び方法は破損や亀裂を識別することのような非破壊イメージングにも適用できる。また更に、超音波イメージング・システム１４及びトモシンセシス・イメージング・システム２０は異なるベンダーによって供給されるものであってよい。
本発明を様々な特定の実施形態について説明したが、当業者には本発明を特許請求の範囲に記載の精神及び範囲内で変更して実施できることが認められよう。
１２ 医用イメージング・システム
１４ 超音波イメージング・システム
１６ プローブ移動装置組立体
１８ 超音波プローブ
２０ トモシンセシス・イメージング・システム
２２ 撮像対象物
２３ 乳房
２４ 放射線源
２６ 検出器アレイ
２８ 投影角度
３０ 平面
３８ 制御機構
５４ 表示装置
５６ 圧迫パドル
５８ 層
６２ 歩進モータ
６４ レセプタクル
６６ キャリッジ
６８ リミット・スイッチ
７０ Ｕ字形プレート
７２ レセプタクル
８０ 関心のある対象物の画像を作成するための模範的な方法
１００ 圧迫パドル・レセプタクル
１０２ Ｘ線位置決め装置
１０４ 取付け具
１０６ プローブ・レセプタクル
１０８ Ｘ線管ハウジング
１１０ 位置決め装置
１１２ 第１の投影角度
１１４ 第２の投影角度
１２０ 音響結合用ゲル
１２６ 胸壁
１２８ 乳首領域
１３０ コンピュータ
１３２ 歩進モータ制御装置
１５０ システム
１５２ 異常部
１５４ ワークステーション
１５６ ワークステーション
１５８ Ｘ線画像
１６０ 関心領域
１６２ 関心領域
１８０ 超音波容積
１８２ 平面
１８４ 端点
１８５ 端点
１８６ 端点
１８７ 端点
１９０ 超音波画像
１９２ 超音波画像
１９４ 超音波画像
１９６ 超音波画像
１４ 超音波イメージング・システム
１６ プローブ移動装置組立体
１８ 超音波プローブ
２０ トモシンセシス・イメージング・システム
２２ 撮像対象物
２３ 乳房
２４ 放射線源
２６ 検出器アレイ
２８ 投影角度
３０ 平面
３８ 制御機構
５４ 表示装置
５６ 圧迫パドル
５８ 層
６２ 歩進モータ
６４ レセプタクル
６６ キャリッジ
６８ リミット・スイッチ
７０ Ｕ字形プレート
７２ レセプタクル
８０ 関心のある対象物の画像を作成するための模範的な方法
１００ 圧迫パドル・レセプタクル
１０２ Ｘ線位置決め装置
１０４ 取付け具
１０６ プローブ・レセプタクル
１０８ Ｘ線管ハウジング
１１０ 位置決め装置
１１２ 第１の投影角度
１１４ 第２の投影角度
１２０ 音響結合用ゲル
１２６ 胸壁
１２８ 乳首領域
１３０ コンピュータ
１３２ 歩進モータ制御装置
１５０ システム
１５２ 異常部
１５４ ワークステーション
１５６ ワークステーション
１５８ Ｘ線画像
１６０ 関心領域
１６２ 関心領域
１８０ 超音波容積
１８２ 平面
１８４ 端点
１８５ 端点
１８６ 端点
１８７ 端点
１９０ 超音波画像
１９２ 超音波画像
１９４ 超音波画像
１９６ 超音波画像
Claims (6)
- 観察対象の複数の異常部（１５２）の画像を異なる種類の画像により観察するための画像処理方法であって、
第１のイメージング・システム（２０）を使用して対象物を走査して得たところの、該対象物の少なくとも第１の画像（１５８）を前記第１のイメージング・システム（２０）のメモリが記憶する段階と、
前記メモリに記憶された前記第１の画像（１５８）上で観察可能で、前記複数の異常部（１５２）を含む関心領域（ＲＯＩ）（１６０）の座標を、画像処理によりコンピュータが自動的に決定する段階と、
前記得られたＲＯＩ（１６０）の座標を使用して、第２のイメージング・システム（１４）が走査することにより得た前記対象物の画像を前記第２のイメージング・システム（１４）のメモリが記憶する段階と
を含み、更に、前記第２の画像の複数の異常部（１５２）の画像が、前記第１のイメージング・システム（２０）の前記ＲＯＩ（１６０）に整合する前記第２のイメージング・システム（１４）のＲＯＩ（１６２）に一度に一つずつ表示されるように、前記第１のイメージング・システム（２０）が作成した前記第１の画像（１５８）の２次元（２Ｄ）データを、コンピュータが、前記第２のイメージング・システム（１４）により前記対象物を走査することによって得られた３次元（３Ｄ）データと整合させる段階を含んでいる画像処理方法。 - 前記第１の画像（１５８）上で観察可能であるＲＯＩ（１６０）の座標をコンピュータが自動的に決定する前記段階は、コンピュータ支援設計（ＣＡＤ）アルゴリズムを使用することによって前記ＲＯＩ（１６０）をコンピュータが自動的に記入することを含むことを特徴とする請求項１記載の画像処理方法。
- 前記ＲＯＩ（１６０）の座標を使用した、第２のイメージング・システム（１４）による前記対象物の走査は、
前記対象物の特定の領域を走査するために、超音波プローブ移動装置がプローブ（１８）を前記座標へ移動させる段階であって、該特定の領域が前記座標によって規定されている、段階と、
前記第２のイメージング・システム（１４）が前記対象物の特定の領域を走査して、少なくとも１つの第２の画像を得る段階と、
を含むことを特徴とする請求項１記載の画像処理方法。 - 更に、前記第１及び第２の画像を表示装置が同時に表示して、ユーザが前記複数の異常部（１５２）を観察できるようにする段階を含むことを特徴とする請求項３記載の画像処理方法。
- 前記第１の画像（１５８）が作成された２Ｄデータの３Ｄデータとの整合は、
少なくとも６つの未知数を持つ少なくとも６つの式をコンピュータが求める段階であって、各々の式が、前記第１のイメージング・システム（２０）から取得された２Ｄデータの座標と前記第２のイメージング・システム（１４）から取得された３Ｄデータの座標と間の関係を設定する、段階と、
前記６つの式を解いて前記６つの未知数をコンピュータが求める段階と、
を含むことを特徴とする請求項１記載の画像処理方法。 - 異なる種類の画像において複数の異常部（１５２）を観察するためのシステムであって、
対象物を走査して該対象物の少なくとも１つのＸ線画像（１５８）を得るように構成されているＸ線イメージング・システム（２０）と、
このシステムの制御装置（１３０）であって、
ａ）前記Ｘ線画像（１５８）上で観察可能であって複数の異常部（１５２）を含む関心領域（ＲＯＩ）（１６０）の座標を画像処理により自動的に決定し、
ｂ）前記ＲＯＩ（１６０）の座標を利用して、超音波イメージング・システム（１４）によって前記対象物を走査し、
ｃ）前記超音波イメージング・システム（１４）が作成した前記複数の異常部（１５２）の画像が、前記Ｘ線画像（１５８）の前記ＲＯＩ（１６０）に整合する前記超音波イメージング・システム（１４）のＲＯＩ（１６２）に一度に一つずつ表示されるように、前記Ｘ線画像（１５８）が作成された２次元（２Ｄ）データを、前記超音波イメージング・システム（１４）により前記対象物を走査することによって得られた３次元（３Ｄ）データと整合させるように構成されている前記制御装置（１３０）と、
を有しているシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US10/692,450 | 2003-10-23 | ||
| US10/692,450 US20050089205A1 (en) | 2003-10-23 | 2003-10-23 | Systems and methods for viewing an abnormality in different kinds of images |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005125080A JP2005125080A (ja) | 2005-05-19 |
| JP5143333B2 true JP5143333B2 (ja) | 2013-02-13 |
Family
ID=34522129
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004247905A Active JP5143333B2 (ja) | 2003-10-23 | 2004-08-27 | 異なる種類の画像において異常部を観察するための画像処理を行うシステム及び方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20050089205A1 (ja) |
| JP (1) | JP5143333B2 (ja) |
| DE (1) | DE102004043793A1 (ja) |
Families Citing this family (88)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7760924B2 (en) * | 2002-11-27 | 2010-07-20 | Hologic, Inc. | System and method for generating a 2D image from a tomosynthesis data set |
| US10638994B2 (en) * | 2002-11-27 | 2020-05-05 | Hologic, Inc. | X-ray mammography with tomosynthesis |
| US7577282B2 (en) * | 2002-11-27 | 2009-08-18 | Hologic, Inc. | Image handling and display in X-ray mammography and tomosynthesis |
| FR2855292B1 (fr) * | 2003-05-22 | 2005-12-09 | Inst Nat Rech Inf Automat | Dispositif et procede de recalage en temps reel de motifs sur des images, notamment pour le guidage par localisation |
| EP1738407B1 (en) | 2004-04-20 | 2014-03-26 | Visualsonics Inc. | Arrayed ultrasonic transducer |
| JP5156376B2 (ja) * | 2004-07-30 | 2013-03-06 | フィッシャー イメイジング コーポレイション | イメージング装置及び方法 |
| DE102004051401A1 (de) * | 2004-10-21 | 2006-05-24 | Siemens Ag | Verfahren zur Befundung in der dreidimensionalen Bildgebung, insbesondere in der Mammographie |
| EP2602743B1 (en) * | 2004-11-15 | 2014-11-05 | Hologic, Inc. | Matching geometry generation and display of mammograms and tomosynthesis images |
| EP3106094B1 (en) | 2004-11-26 | 2021-09-08 | Hologic, Inc. | Integrated multi-mode mammography/tomosynthesis x-ray system |
| CN101138010B (zh) * | 2005-03-10 | 2011-05-18 | 皇家飞利浦电子股份有限公司 | 用于将二维和三维图像数据对准的图像处理系统和方法 |
| DE102005017337B4 (de) * | 2005-04-14 | 2008-06-19 | Siemens Ag | Verfahren, Vorrichtung und Datenträger mit einem Computerprogrammprodukt zur Analyse von dreidimensionalen digitalen Bilddaten |
| EP2289453B1 (en) * | 2005-06-06 | 2015-08-05 | Intuitive Surgical Operations, Inc. | Laparoscopic ultrasound robotic surgical system |
| EP1741469A1 (en) * | 2005-07-08 | 2007-01-10 | Engineers & Doctors Wallstén Medical A/S | Method of guiding an irradiation equipment |
| JP5630958B2 (ja) * | 2005-11-02 | 2014-11-26 | ビジュアルソニックス インコーポレイテッド | 高周波数アレイ超音波システム |
| EP1986548B1 (en) | 2006-02-15 | 2013-01-02 | Hologic, Inc. | Breast biopsy and needle localization using tomosynthesis systems |
| US8044972B2 (en) * | 2006-12-21 | 2011-10-25 | Sectra Mamea Ab | Synchronized viewing of tomosynthesis and/or mammograms |
| US7992100B2 (en) * | 2006-12-21 | 2011-08-02 | Sectra Ab | Dynamic slabbing to render views of medical image data |
| US8051386B2 (en) * | 2006-12-21 | 2011-11-01 | Sectra Ab | CAD-based navigation of views of medical image data stacks or volumes |
| DE102006061320B4 (de) * | 2006-12-22 | 2017-08-31 | Siemens Healthcare Gmbh | Verfahren zum Betrieb einer hybriden medizinischen Bildgebungseinheit, umfassend einer erste Bildgebungseinrichtung mit hoher Ortsauflösung und eine zweite nuklearmedizinische Bildgebungseinrichtung mit hoher Sensitivität |
| DE102007009183A1 (de) * | 2007-02-26 | 2008-08-28 | Siemens Ag | Verfahren und Vorrichtung zur Bilddarstellung von Objekten |
| US20080242979A1 (en) * | 2007-03-30 | 2008-10-02 | Rayette Ann Fisher | Combined X-ray detector and ultrasound imager |
| JP4924249B2 (ja) * | 2007-07-06 | 2012-04-25 | コニカミノルタホールディングス株式会社 | 透過像撮影システム、および透過像撮影方法 |
| FR2919747B1 (fr) * | 2007-08-02 | 2009-11-06 | Gen Electric | Procede et systeme d'affichage d'images de tomosynthese |
| US8126226B2 (en) * | 2007-09-20 | 2012-02-28 | General Electric Company | System and method to generate a selected visualization of a radiological image of an imaged subject |
| US7630533B2 (en) | 2007-09-20 | 2009-12-08 | Hologic, Inc. | Breast tomosynthesis with display of highlighted suspected calcifications |
| JP5134897B2 (ja) * | 2007-09-25 | 2013-01-30 | 株式会社東芝 | 乳房検査システム |
| JP5641676B2 (ja) * | 2007-11-02 | 2014-12-17 | 株式会社東芝 | Ｘ線診断装置 |
| FR2925707B1 (fr) * | 2007-12-20 | 2010-02-05 | Gen Electric | Procede d'estimation d'un masque digital tridimensionnel a partir d'une serie de masques bidimensionnels et dispositif le mettant en oeuvre |
| DE102008009967A1 (de) * | 2008-02-20 | 2009-09-17 | Siemens Aktiengesellschaft | Mammographieanlage und Verfahren zur sono- und röntgenograpischen Untersuchung einer Brust |
| US8452613B2 (en) * | 2008-06-11 | 2013-05-28 | Koninklijke Philips Electronics N.V. | Multiple modality computer aided diagnostic system and method |
| JP5486182B2 (ja) * | 2008-12-05 | 2014-05-07 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
| JP5641723B2 (ja) | 2008-12-25 | 2014-12-17 | キヤノン株式会社 | 被検体情報取得装置 |
| JP5692986B2 (ja) * | 2008-12-25 | 2015-04-01 | キヤノン株式会社 | 被検体情報取得装置 |
| US8942342B2 (en) * | 2008-12-29 | 2015-01-27 | Analogic Corporation | Multi-modality image acquisition |
| US8223916B2 (en) * | 2009-03-31 | 2012-07-17 | Hologic, Inc. | Computer-aided detection of anatomical abnormalities in x-ray tomosynthesis images |
| US9545242B2 (en) | 2009-07-31 | 2017-01-17 | Samsung Medison Co., Ltd. | Sensor coordinate calibration in an ultrasound system |
| KR101121286B1 (ko) | 2009-07-31 | 2012-03-23 | 한국과학기술원 | 센서의 교정을 수행하는 초음파 시스템 및 방법 |
| WO2011043838A1 (en) * | 2009-10-08 | 2011-04-14 | Hologic, Inc . | Needle breast biopsy system and method of use |
| US10603007B2 (en) * | 2009-11-27 | 2020-03-31 | Qview Medical, Inc. | Automated breast ultrasound equipment and methods using enhanced navigator aids |
| JP5546230B2 (ja) * | 2009-12-10 | 2014-07-09 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
| FR2957514B1 (fr) * | 2010-03-17 | 2013-03-22 | Gen Electric | Dispositif d'imagerie medicale comprenant des moyens d'acquisition radiographique et des moyens de guidage d'une sonde ultrasonore |
| JP2012005665A (ja) * | 2010-06-25 | 2012-01-12 | Fujifilm Corp | 放射線画像撮影表示方法およびシステム |
| US11439362B2 (en) * | 2010-07-19 | 2022-09-13 | Qview Medical, Inc. | Automated ultrasound equipment and methods using enhanced navigator aids |
| EP2640267A1 (en) * | 2010-11-16 | 2013-09-25 | Analogic Corporation | Multi-modality image acquisition |
| US9075903B2 (en) | 2010-11-26 | 2015-07-07 | Hologic, Inc. | User interface for medical image review workstation |
| WO2012082861A2 (en) * | 2010-12-14 | 2012-06-21 | Hologic, Inc. | System and method for fusing three dimensional image data from a plurality of different imaging systems for use in diagnostic imaging |
| FR2972132B1 (fr) | 2011-03-02 | 2014-05-09 | Gen Electric | Dispositif d'assistance a la manipulation d'un instrument ou outil |
| CN103477346A (zh) | 2011-03-08 | 2013-12-25 | 霍洛吉克公司 | 用于筛查、诊断和活检的双能和/或造影增强乳房成像的系统和方法 |
| KR102109588B1 (ko) | 2011-11-27 | 2020-05-12 | 홀로직, 인크. | 유방 조직 이미지를 프로세싱하고, 디스플레잉하고, 네비게이팅하기 위한 방법 |
| US9805507B2 (en) | 2012-02-13 | 2017-10-31 | Hologic, Inc | System and method for navigating a tomosynthesis stack using synthesized image data |
| EP2634748B1 (de) * | 2012-02-28 | 2019-06-12 | Siemens Healthcare GmbH | Bilddatenbestimmungsverfahren |
| JP2013215523A (ja) * | 2012-04-12 | 2013-10-24 | Toshiba Corp | 乳房撮影装置及び方法 |
| JP6081093B2 (ja) * | 2012-07-09 | 2017-02-15 | 東芝メディカルシステムズ株式会社 | 画像表示装置 |
| US20140135623A1 (en) * | 2012-11-15 | 2014-05-15 | General Electric Company | Systems and methods for x-ray and ultrasound imaging |
| JP6388347B2 (ja) | 2013-03-15 | 2018-09-12 | ホロジック, インコーポレイテッドHologic, Inc. | 腹臥位におけるトモシンセシス誘導生検 |
| JP6309376B2 (ja) * | 2013-07-03 | 2018-04-11 | キヤノンメディカルシステムズ株式会社 | 医用情報処理システム、医用情報処理プログラム及び超音波診断装置 |
| EP4278977A3 (en) | 2013-10-24 | 2024-02-21 | Hologic, Inc. | System and method for navigating x-ray guided breast biopsy |
| JP5701362B2 (ja) * | 2013-10-24 | 2015-04-15 | キヤノン株式会社 | 画像診断装置、画像診断方法 |
| KR101604812B1 (ko) | 2014-01-15 | 2016-03-18 | 삼성전자주식회사 | 의료 영상 처리 장치 및 그에 따른 의료 영상 처리 방법 |
| JP6506769B2 (ja) | 2014-02-28 | 2019-04-24 | ホロジック, インコーポレイテッドHologic, Inc. | トモシンセシス画像スラブを生成し表示するためのシステムおよび方法 |
| WO2016024236A2 (en) | 2014-08-14 | 2016-02-18 | Koninklijke Philips N.V. | Acoustic streaming for fluid pool detection and identification |
| US9949719B2 (en) | 2014-12-16 | 2018-04-24 | General Electric Company | Breast imaging method and system |
| US9855014B2 (en) | 2014-12-16 | 2018-01-02 | General Electric Company | Compression paddle for use in breast imaging |
| JP6971555B2 (ja) | 2015-11-11 | 2021-11-24 | キヤノンメディカルシステムズ株式会社 | 医用画像処理装置及び超音波診断装置 |
| EP3203440A1 (en) * | 2016-02-08 | 2017-08-09 | Nokia Technologies Oy | A method, apparatus and computer program for obtaining images |
| WO2017205386A1 (en) | 2016-05-27 | 2017-11-30 | Hologic, Inc. | Synchronized surface and internal tumor detection |
| US11653897B2 (en) * | 2016-07-07 | 2023-05-23 | Canon Medical Systems Corporation | Ultrasonic diagnostic apparatus, scan support method, and medical image processing apparatus |
| JP6849462B2 (ja) * | 2017-02-06 | 2021-03-24 | キヤノンメディカルシステムズ株式会社 | 医用情報処理システム及び医用画像処理装置 |
| JP7169986B2 (ja) | 2017-03-30 | 2022-11-11 | ホロジック， インコーポレイテッド | オブジェクトグリッド増強を用いて高次元画像データから低次元画像データを合成するためのシステムおよび方法 |
| WO2018183548A1 (en) | 2017-03-30 | 2018-10-04 | Hologic, Inc. | System and method for hierarchical multi-level feature image synthesis and representation |
| JP7174710B2 (ja) | 2017-03-30 | 2022-11-17 | ホロジック， インコーポレイテッド | 合成乳房組織画像を生成するための標的オブジェクト増強のためのシステムおよび方法 |
| WO2018209193A1 (en) * | 2017-05-11 | 2018-11-15 | Verathon Inc. | Probability map-based ultrasound scanning |
| EP3641635A4 (en) | 2017-06-20 | 2021-04-07 | Hologic, Inc. | DYNAMIC SELF-LEARNING MEDICAL IMAGING PROCESS AND SYSTEM |
| WO2019035064A1 (en) | 2017-08-16 | 2019-02-21 | Hologic, Inc. | PATIENT MOVEMENT ARTIFACT COMPENSATION TECHNIQUES IN BREAST IMAGING |
| EP3510930B1 (en) | 2018-01-15 | 2021-07-14 | Hologic, Inc. | Automated and configurable magnification stand |
| US10796430B2 (en) | 2018-04-24 | 2020-10-06 | General Electric Company | Multimodality 2D to 3D imaging navigation |
| US11100659B2 (en) * | 2018-07-13 | 2021-08-24 | Apple Inc. | Object detection using multiple three dimensional scans |
| JP7078487B2 (ja) * | 2018-08-02 | 2022-05-31 | 富士フイルムヘルスケア株式会社 | 超音波診断装置及び超音波画像処理方法 |
| US11090017B2 (en) | 2018-09-13 | 2021-08-17 | Hologic, Inc. | Generating synthesized projection images for 3D breast tomosynthesis or multi-mode x-ray breast imaging |
| JP6742458B2 (ja) * | 2019-02-08 | 2020-08-19 | 富士フイルム株式会社 | 硬さ導出装置、医用撮影システム、硬さ導出方法、及び硬さ導出プログラム |
| US10881353B2 (en) * | 2019-06-03 | 2021-01-05 | General Electric Company | Machine-guided imaging techniques |
| US11883206B2 (en) | 2019-07-29 | 2024-01-30 | Hologic, Inc. | Personalized breast imaging system |
| KR20220069946A (ko) | 2019-09-27 | 2022-05-27 | 홀로직, 인크. | 2d/3d 유방 영상들을 검토하는 판독 시간 및 판독 복잡도를 예측하기 위한 ai 시스템 |
| EP3832689A3 (en) | 2019-12-05 | 2021-08-11 | Hologic, Inc. | Systems and methods for improved x-ray tube life |
| US11471118B2 (en) | 2020-03-27 | 2022-10-18 | Hologic, Inc. | System and method for tracking x-ray tube focal spot position |
| US11481038B2 (en) | 2020-03-27 | 2022-10-25 | Hologic, Inc. | Gesture recognition in controlling medical hardware or software |
| US11786191B2 (en) | 2021-05-17 | 2023-10-17 | Hologic, Inc. | Contrast-enhanced tomosynthesis with a copper filter |
| US11911274B2 (en) * | 2021-10-27 | 2024-02-27 | Joon Bu Park | Artificial heart valves incorporating negative poisson's ratio materials |
Family Cites Families (47)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3971950A (en) * | 1975-04-14 | 1976-07-27 | Xerox Corporation | Independent compression and positioning device for use in mammography |
| DE3019435A1 (de) * | 1980-05-21 | 1981-11-26 | SIEMENS AG AAAAA, 1000 Berlin und 8000 München | Verfahren zur verarbeitung von ultraschall-echosignalen von sowohl gerichtet reflektierenden als auch ungerichtet streuenden objekten, insbesondere zur ultraschall-bildverarbeitung auf dem gebiet der stoff- oder gewebeuntersuchung |
| DE3019436A1 (de) * | 1980-05-21 | 1981-11-26 | SIEMENS AG AAAAA, 1000 Berlin und 8000 München | Verfahren zur verarbeitung von ultraschall-echosignalen von sowohl gerichtet reflektierenden als auch ungerichtet streuenden objektiven, insbesondere zur ultraschall-bildverarbeitung auf dem gebiet der stoff- oder gewebsuntersuchung |
| FI64282C (fi) * | 1981-06-04 | 1983-11-10 | Instrumentarium Oy | Diagnosapparatur foer bestaemmande av vaevnadernas struktur oc sammansaettning |
| EP0081527A4 (en) * | 1981-06-22 | 1985-11-25 | Commw Of Australia | IMPROVEMENTS IN OR RELATING TO ULTRASOUND TOMOGRAPHY. |
| DE3426398C1 (de) * | 1984-07-18 | 1987-11-12 | Dornier System Gmbh, 7990 Friedrichshafen | Vorrichtung zum räumlichen Orten und Positionieren von Konkrementen |
| US5133020A (en) * | 1989-07-21 | 1992-07-21 | Arch Development Corporation | Automated method and system for the detection and classification of abnormal lesions and parenchymal distortions in digital medical images |
| US5415169A (en) * | 1989-11-21 | 1995-05-16 | Fischer Imaging Corporation | Motorized mammographic biopsy apparatus |
| EP0488987B1 (de) * | 1990-11-26 | 1996-01-31 | Michael Dr. Truppe | Verfahren zur Darstellung beweglicher Körper |
| US6229145B1 (en) * | 1992-01-22 | 2001-05-08 | Pem Technologies, Inc. | Dedicated apparatus and method emission mammography |
| US5603318A (en) * | 1992-04-21 | 1997-02-18 | University Of Utah Research Foundation | Apparatus and method for photogrammetric surgical localization |
| US5361767A (en) * | 1993-01-25 | 1994-11-08 | Igor Yukov | Tissue characterization method and apparatus |
| DE4309596A1 (de) * | 1993-03-22 | 1994-09-29 | Kari Dr Richter | Verfahren zur bildgebenden Darstellung mittels Echosignalen |
| DE4309597A1 (de) * | 1993-03-22 | 1994-09-29 | Kari Dr Richter | Verfahren zur bildgebenden Darstellung einer Partie des menschlichen Körpers |
| US5491627A (en) * | 1993-05-13 | 1996-02-13 | Arch Development Corporation | Method and system for the detection of microcalcifications in digital mammograms |
| US6434262B2 (en) * | 1993-09-29 | 2002-08-13 | Shih-Ping Wang | Computer-aided diagnosis system and method |
| CA2173154C (en) * | 1993-10-29 | 2010-03-23 | Ascher Shmulewitz | Methods and apparatus for performing sonomammography and enhanced x-ray imaging |
| US5474072A (en) * | 1993-10-29 | 1995-12-12 | Neovision Corporation | Methods and apparatus for performing sonomammography |
| US5983123A (en) * | 1993-10-29 | 1999-11-09 | United States Surgical Corporation | Methods and apparatus for performing ultrasound and enhanced X-ray imaging |
| US5803082A (en) * | 1993-11-09 | 1998-09-08 | Staplevision Inc. | Omnispectramammography |
| US5810742A (en) * | 1994-10-24 | 1998-09-22 | Transcan Research & Development Co., Ltd. | Tissue characterization based on impedance images and on impedance measurements |
| US5630426A (en) * | 1995-03-03 | 1997-05-20 | Neovision Corporation | Apparatus and method for characterization and treatment of tumors |
| US5660185A (en) * | 1995-04-13 | 1997-08-26 | Neovision Corporation | Image-guided biopsy apparatus with enhanced imaging and methods |
| US5640956A (en) * | 1995-06-07 | 1997-06-24 | Neovision Corporation | Methods and apparatus for correlating ultrasonic image data and radiographic image data |
| JPH0924034A (ja) * | 1995-07-13 | 1997-01-28 | Toshiba Corp | 超音波及び核磁気共鳴複合診断装置 |
| JP3601878B2 (ja) * | 1995-07-13 | 2004-12-15 | 株式会社東芝 | 超音波及び核磁気共鳴複合診断装置 |
| US5806521A (en) * | 1996-03-26 | 1998-09-15 | Sandia Corporation | Composite ultrasound imaging apparatus and method |
| US5851180A (en) * | 1996-07-12 | 1998-12-22 | United States Surgical Corporation | Traction-inducing compression assembly for enhanced tissue imaging |
| US5820552A (en) * | 1996-07-12 | 1998-10-13 | United States Surgical Corporation | Sonography and biopsy apparatus |
| US5776062A (en) * | 1996-10-15 | 1998-07-07 | Fischer Imaging Corporation | Enhanced breast imaging/biopsy system employing targeted ultrasound |
| US6314310B1 (en) * | 1997-02-14 | 2001-11-06 | Biosense, Inc. | X-ray guided surgical location system with extended mapping volume |
| US5855554A (en) * | 1997-03-17 | 1999-01-05 | General Electric Company | Image guided breast lesion localization device |
| US5984870A (en) * | 1997-07-25 | 1999-11-16 | Arch Development Corporation | Method and system for the automated analysis of lesions in ultrasound images |
| US5999639A (en) * | 1997-09-04 | 1999-12-07 | Qualia Computing, Inc. | Method and system for automated detection of clustered microcalcifications from digital mammograms |
| US6120447A (en) * | 1998-12-31 | 2000-09-19 | General Electric Company | Ultrasound image data wireless transmission techniques |
| JP2000262511A (ja) * | 1999-03-12 | 2000-09-26 | Toshiba Iyo System Engineering Kk | 断層撮影装置 |
| US6421454B1 (en) * | 1999-05-27 | 2002-07-16 | Litton Systems, Inc. | Optical correlator assisted detection of calcifications for breast biopsy |
| US6396940B1 (en) * | 1999-05-27 | 2002-05-28 | Litton Systems, Inc. | Optical correlator based automated pathologic region of interest selector for integrated 3D ultrasound and digital mammography |
| US6584205B1 (en) * | 1999-08-26 | 2003-06-24 | American Technology Corporation | Modulator processing for a parametric speaker system |
| FR2797978B1 (fr) * | 1999-08-30 | 2001-10-26 | Ge Medical Syst Sa | Procede de recalage automatique d'images |
| JP3662835B2 (ja) * | 2000-10-25 | 2005-06-22 | アロカ株式会社 | 超音波診断装置 |
| US7556602B2 (en) * | 2000-11-24 | 2009-07-07 | U-Systems, Inc. | Breast cancer screening with adjunctive ultrasound mammography |
| JP2002330951A (ja) * | 2001-05-11 | 2002-11-19 | Canon Inc | 画像符号化装置及び復号装置及び方法及びコンピュータプログラム及び記憶媒体 |
| US20030149364A1 (en) * | 2002-02-01 | 2003-08-07 | Ajay Kapur | Methods, system and apparatus for digital imaging |
| US7203350B2 (en) * | 2002-10-31 | 2007-04-10 | Siemens Computer Aided Diagnosis Ltd. | Display for computer-aided diagnosis of mammograms |
| US6846289B2 (en) * | 2003-06-06 | 2005-01-25 | Fischer Imaging Corporation | Integrated x-ray and ultrasound medical imaging system |
| US7756567B2 (en) * | 2003-08-29 | 2010-07-13 | Accuray Incorporated | Image guided radiosurgery method and apparatus using registration of 2D radiographic images with digitally reconstructed radiographs of 3D scan data |
-
2003
- 2003-10-23 US US10/692,450 patent/US20050089205A1/en not_active Abandoned
-
2004
- 2004-08-27 JP JP2004247905A patent/JP5143333B2/ja active Active
- 2004-09-08 DE DE102004043793A patent/DE102004043793A1/de not_active Withdrawn
Also Published As
| Publication number | Publication date |
|---|---|
| US20050089205A1 (en) | 2005-04-28 |
| JP2005125080A (ja) | 2005-05-19 |
| DE102004043793A1 (de) | 2005-06-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5143333B2 (ja) | 異なる種類の画像において異常部を観察するための画像処理を行うシステム及び方法 | |
| JP4934263B2 (ja) | ディジタル・イメージング方法、システム及び装置 | |
| US11730442B2 (en) | System and method for fusing three dimensional image data from a plurality of different imaging systems for use in diagnostic imaging | |
| US5776062A (en) | Enhanced breast imaging/biopsy system employing targeted ultrasound | |
| US10646178B2 (en) | System and method for cabinet radiography incorporating ultrasound | |
| US9730659B2 (en) | Multi-modality image acquisition | |
| US20090088637A1 (en) | Medical image diagnostic system, medical imaging apparatus, medical image storage apparatus, and medical image display apparatus | |
| JP2006102494A (ja) | デュアル・マンモグラフィ画像検出のためのシステム、方法及び装置 | |
| JP2010259604A (ja) | 画像診断装置、画像診断方法 | |
| US20110230759A1 (en) | Medical imaging device comprising radiographic acquisition means and guide means for ultrasound probe | |
| KR20210064210A (ko) | 유방 맵핑 및 비정상부 위치결정 | |
| US20230098305A1 (en) | Systems and methods to produce tissue imaging biomarkers | |
| JP2009077780A (ja) | 乳房検査システム | |
| US11744537B2 (en) | Radiography system, medical imaging system, control method, and control program | |
| JP7411109B2 (ja) | 超音波診断装置および超音波診断装置の制御方法 | |
| US20230124481A1 (en) | Systems and methods for identifying regions of interest in multiple imaging modalities |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070822 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100511 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20100811 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20100816 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101111 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20101111 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20101111 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110208 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20110422 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20110427 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110711 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110823 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20111012 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20111017 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120126 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120605 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120911 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120918 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121030 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121121 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151130 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5143333 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |