JP5373749B2 - 医用画像表示装置及びその制御プログラム - Google Patents

医用画像表示装置及びその制御プログラム Download PDF

Info

Publication number
JP5373749B2
JP5373749B2 JP2010266394A JP2010266394A JP5373749B2 JP 5373749 B2 JP5373749 B2 JP 5373749B2 JP 2010266394 A JP2010266394 A JP 2010266394A JP 2010266394 A JP2010266394 A JP 2010266394A JP 5373749 B2 JP5373749 B2 JP 5373749B2
Authority
JP
Japan
Prior art keywords
image
display
elasticity
physical quantity
elastic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010266394A
Other languages
English (en)
Other versions
JP2012115383A (ja
Inventor
俊一郎 谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GE Medical Systems Global Technology Co LLC
Original Assignee
GE Medical Systems Global Technology Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GE Medical Systems Global Technology Co LLC filed Critical GE Medical Systems Global Technology Co LLC
Priority to JP2010266394A priority Critical patent/JP5373749B2/ja
Priority to CN201110462166.1A priority patent/CN102525559B/zh
Priority to US13/307,509 priority patent/US9188665B2/en
Publication of JP2012115383A publication Critical patent/JP2012115383A/ja
Application granted granted Critical
Publication of JP5373749B2 publication Critical patent/JP5373749B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52053Display arrangements
    • G01S7/52057Cathode ray tube displays
    • G01S7/52074Composite displays, e.g. split-screen displays; Combination of multiple images or of images and alphanumeric tabular information
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5261Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from different diagnostic modalities, e.g. ultrasound and X-ray
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R33/00Arrangements or instruments for measuring magnetic variables
    • G01R33/20Arrangements or instruments for measuring magnetic variables involving magnetic resonance
    • G01R33/44Arrangements or instruments for measuring magnetic variables involving magnetic resonance using nuclear magnetic resonance [NMR]
    • G01R33/48NMR imaging systems
    • G01R33/54Signal processing systems, e.g. using pulse sequences ; Generation or control of pulse sequences; Operator console
    • G01R33/56Image enhancement or correction, e.g. subtraction or averaging techniques, e.g. improvement of signal-to-noise ratio and resolution
    • G01R33/5608Data processing and visualization specially adapted for MR, e.g. for feature analysis and pattern recognition on the basis of measured MR data, segmentation of measured MR data, edge contour detection on the basis of measured MR data, for enhancing measured MR data in terms of signal-to-noise ratio by means of noise filtering or apodization, for enhancing measured MR data in terms of resolution by means for deblurring, windowing, zero filling, or generation of gray-scaled images, colour-coded images or images displaying vectors instead of pixels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/485Diagnostic techniques involving measuring strain or elastic properties
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R33/00Arrangements or instruments for measuring magnetic variables
    • G01R33/20Arrangements or instruments for measuring magnetic variables involving magnetic resonance
    • G01R33/44Arrangements or instruments for measuring magnetic variables involving magnetic resonance using nuclear magnetic resonance [NMR]
    • G01R33/48NMR imaging systems
    • G01R33/54Signal processing systems, e.g. using pulse sequences ; Generation or control of pulse sequences; Operator console
    • G01R33/56Image enhancement or correction, e.g. subtraction or averaging techniques, e.g. improvement of signal-to-noise ratio and resolution
    • G01R33/563Image enhancement or correction, e.g. subtraction or averaging techniques, e.g. improvement of signal-to-noise ratio and resolution of moving material, e.g. flow contrast angiography
    • G01R33/56358Elastography
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52023Details of receivers
    • G01S7/52036Details of receivers using analysis of echo signal for target characterisation
    • G01S7/52042Details of receivers using analysis of echo signal for target characterisation determining elastic properties of the propagation medium or of the reflective target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52053Display arrangements
    • G01S7/52057Cathode ray tube displays
    • G01S7/52071Multicolour displays; using colour coding; Optimising colour or information content in displays, e.g. parametric imaging

Description

本発明は、生体組織の医用画像を表示する医用画像表示装置及びその制御プログラムに関し、特に前記医用画像として生体組織の弾性画像を表示させる医用画像表示装置及びその制御プログラムに関する。
生体組織の弾性に応じた表示形態からなる弾性画像を表示させる超音波画像表示装置が、例えば特許文献1などに開示されている。また、MRI(Magnetic Resonance Imaging)装置においても、生体組織の弾性画像を表示させることができる装置が、例えば特許文献2などに開示されている。前記超音波画像表示装置で表示される超音波弾性画像及び前記MRI装置で表示されるMRI弾性画像は、例えば生体組織の弾性に応じた色からなる画像である。
特開2005−118152号公報 特開2004−283372号公報
ところで、前記MRI弾性画像は、前記超音波弾性画像よりも広範囲の画像である。一方、前記超音波弾性画像は、一般的に前記MRI弾性画像よりも空間分解能に優れている。そこで、両方の画像の特性を生かした画像診断として、例えば超音波画像表示装置において前記MRI弾性画像を表示させ、このMRI弾性画像で肝臓などの臓器全体の画像を見ながら、病変部と思われる部分を特定した後、その部分を空間分解能に優れるリアルタイムの超音波弾性画像で確認し診断を行ないたい場合がある。
しかし、前記MRI弾性画像及び前記超音波弾性画像は、MRI装置及び超音波診断装置によってそれぞれのカラーマップを用いて作成されているため、生体組織において同一の弾性を有する部分が、それぞれの弾性画像で互いに異なる色で表示される。従って、第一の弾性画像を表示させる医用画像表示装置において、他の医用画像表示装置で作成された第二の弾性画像を表示させる場合に、同一の弾性を有する部分については、前記第一の弾性画像と前記第二の弾性画像とで同一の表示形態で表示させることができ、診断に有用な画像を表示させることができる医用画像表示装置が望まれている。
上述の課題を解決するためになされた第1の観点の発明は、生体組織の医用画像を表示させる医用画像表示装置であって、生体組織の弾性に関する第一の物理量を算出する物理量算出部と、前記医用画像として、前記物理量算出部で算出された第一の物理量に応じた表示形態を有する第一弾性画像と、他の医用画像表示装置で算出された生体組織の弾性に関する第二の物理量に応じた表示形態を有する第二弾性画像とを表示させる表示画像制御部と、を備え、前記表示画像制御部は、前記第一弾性画像及び前記第二弾性画像として、生体組織において同一の弾性を有する部分が同一の表示形態で表示されている画像を表示させることを特徴とする医用画像表示装置である。
上記観点の発明によれば、前記第一画像及び前記第二画像は、生体組織において同一の弾性を有する部分が同一の表示形態で表示されているので、診断に有用な画像を表示させることができる。
本発明に係る超音波画像表示装置の実施形態の概略構成の一例を示すブロック図である。 物理量データの作成の説明図である。 図1に示す超音波画像表示装置における表示制御部の構成を示すブロック図である。 図3に示す表示制御部における弾性画像データ作成部の構成を示すブロック図である。 医用画像が表示された表示部の一例を示す図である。 超音波画像表示装置の作用を示すフローチャートである。 Bモード画像が表示された表示部の一例を示す図である。 Bモード画像とMRI画像とが表示された表示部の一例を示す図である。 超音波弾性画像を作成する対象となる関心領域の歪みの分布と色情報変換グラフとを示す図である。 図9に示す色情報変換グラフを説明する図である。 MRI弾性画像を作成する対象となる関心領域の硬さの分布と色情報変換グラフとを示す図である。 図11に示す色情報変換グラフを説明する図である。 対応する硬さと歪みとを定めたテーブルを示す図である。 実施形態の第一変形例における表示制御部の構成を示すブロック図である。 実施形態の第一変形例における超音波弾性画像データ作成部の構成を示すブロック図である。 実施形態の第一変形例における超音波画像表示装置の作用を示すフローチャートである。 実施形態の第一変形例において、Bモード画像に任意の点が設定された表示部の一例を示す図である。 第一変形例において歪みと硬さとの対応関係情報のグラフを示す図である。 実施形態の第二変形例における超音波画像表示装置の作用を示すフローチャートである。 第三変形例における超音波画像表示装置の超音波弾性画像データ作成部の構成を示すブロック図である。 第三変形例における超音波画像表示装置の作用を示すフローチャートである。 第三変形例において歪みと硬さとの対応関係情報のグラフを示す図である。 第四変形例における超音波画像表示装置の表示制御部の構成を示すブロック図である。 第四変形例における超音波画像表示装置の超音波弾性画像データ作成部の構成を示すブロック図である。 第四変形例における超音波画像表示装置の作用を示すフローチャートである。 実施の形態における超音波画像表示装置の表示制御部の構成の他例を示すブロック図である。 計測部位が設定された表示部の一例を示す図である。 計測部位が設定された表示部の他例を示す図である。
以下、本発明の実施形態について図面に基づいて詳細に説明する。図1に示す超音波画像表示装置1は、超音波プローブ2、送受信部3、Bモードデータ作成部4、物理量データ作成部5、表示制御部6、表示部7、操作部8、制御部9、HDD(Hard Disk Drive)10、磁気発生部11及び磁気センサ12を備える。前記超音波画像表示装置1は、本発明における医用画像表示装置の実施の形態の一例である。
前記超音波プローブ2は、生体組織に対して超音波を送信しそのエコーを受信する。この超音波プローブ2を生体組織の表面に当接させた状態で圧迫と弛緩を繰り返したり、前記超音波プローブ2から音響放射圧を加えたりして、生体組織を変形させながら超音波の送受信を行なって取得されたエコー信号に基づいて、後述のように超音波弾性画像が作成される。
また、前記超音波プローブ2には、例えばホール素子で構成される前記磁気センサ12が設けられている。そして、この磁気センサ12により、磁気発生コイルからなる前記磁気発生部11から発生する磁気が検出されるようになっている。前記磁気センサ12における検出信号は、前記表示制御部6へ入力されるようになっている。前記磁気センサ12における検出信号は、図示しないケーブルを介して前記表示制御部6へ入力されるようになっていてもよいし、無線で入力されるようになっていてもよい。
前記送受信部3は、前記制御部9からの制御信号に基づいて前記超音波プローブ2を所定の走査条件で駆動させて音線毎の超音波の走査を行なう。また、前記送受信部3は、前記超音波プローブ2で受信したエコー信号について、整相加算処理等の信号処理を行なう。前記送受信部3で信号処理されたエコー信号は、前記Bモードデータ作成部4及び前記物理量データ作成部5に出力される。
前記Bモードデータ作成部4は、前記送受信部3から出力されたエコー信号に対し、対数圧縮処理、包絡線検波処理等のBモード処理を行い、Bモードデータを作成する。このBモードデータは、前記Bモードデータ作成部4から前記表示制御部6へ出力される。
前記物理量データ作成部5は、前記送受信部3から出力されたエコー信号に基づいて、生体組織における弾性に関する物理量データを作成する(物理量データ作成機能)。前記物理量データ作成部5は、図2に示すように、時間的に異なる二つのフレーム(i),(ii)に属する同一音線上の二つのエコー信号に基づいて生体組織の各部における弾性に関する物理量を算出し、前記物理量データを作成する(例えば、特開2008−126079号公報参照)。前記物理量データ作成部5は、後述する超音波弾性画像UEGの作成対象となる関心領域R1,R2内を対象にして前記物理量データを作成する。
前記物理量データ作成部5は、前記物理量として、生体組織の変形による歪みSを算出する。前記物理量データは、生体組織における各部の歪みSからなるデータである。前記物理量データ作成部5は、本発明における物理量データ作成部の実施の形態の一例であり、前記物理量データ作成機能は本発明における物理量算出機能の実施の形態の一例である。また、前記歪みSは本発明における第一の物理量の実施の形態の一例である。
前記表示制御部6には、前記Bモードデータ作成部4からのBモードデータ及び前記物理量データ作成部5からの物理量データが入力されるようになっている。前記表示制御部6は、図3に示すように位置算出部61、メモリ62、Bモード画像データ作成部63、超音波弾性画像データ作成部64、MRI弾性画像データ作成部65、表示画像制御部66を有している。
前記位置算出部61は、前記磁気センサ12からの磁気検出信号に基づいて、前記磁気発生部11を原点とする三次元空間における前記超音波プローブ2の位置及び傾きの情報(以下、「プローブ位置情報」と云う)を算出する。さらに、前記位置算出部61は、前記プローブ位置情報に基づいてエコーデータの前記三次元空間における位置情報を算出する。
前記メモリ62には、前記Bモードデータ及び前記物理量データが記憶される。前記Bモードデータ及び前記物理量データは、音線毎のデータとして前記メモリ62に記憶される。 前記メモリ62は、RAM(Random Access Memory)やROM(Read Only Memory)などの半導体メモリで構成されている。ちなみに、前記Bモードデータ及び前記物理量データは、前記HDD10にも記憶されるようになっていてもよい。
ここで、後述のBモード画像データ及び弾性画像データに変換される前のエコー信号(エコー信号に基づいて作成されるデータを含む)をローデータ(Raw Data)と云うものとする。前記メモリ62又は前記HDD10に記憶されるBモードデータ及び物理量データは、ローデータである。
前記HDD10には、ローデータとして前記送受信部3で整相加算されたエコー信号が記憶されるようになっていてもよい。
前記メモリ62には、MRI装置100で作成されたMRI弾性画像データが前記制御部9を介して記憶される。前記メモリ62に記憶されるMRI弾性画像データは、ボリュームデータであり、生体組織の弾性に応じた色情報からなる。前記メモリ62に記憶される前記MRI弾性画像データには、前記MRI装置100で算出された生体組織の硬さHの情報(nPa(n:任意の数値、Pa:パスカル))が含まれていてもよい。前記MRI弾性画像データは、本発明における第二弾性表示データの実施の形態の一例である。また、前記MRI装置100は、本発明における他の医用画像表示装置の実施の形態の一例であり、前記硬さHの情報は、本発明における第二の物理量の実施の形態の一例である。
また、前記メモリ62には、前記MRI装置100で作成されたT1強調画像やT2強調画像などのMRI画像の画像データ(MRI画像データ)も記憶される。
ちなみに、前記MRI弾性画像データや前記MRI画像データは、前記HDD100にも記憶されていてもよい。
前記Bモード画像データ作成部63は、前記Bモードデータを、スキャンコンバータにより走査変換して、エコーの信号強度に応じた輝度情報を有するBモード画像データを作成する。前記Bモード画像データにおける輝度情報は所定の階調(例えば256階調)からなる。
前記超音波弾性画像データ作成部64は、図4に示すように色データ作成部641及び走査変換部642を有する。前記色データ作成部641は、後述するように、前記物理量データに基づいて色データCDを作成する。この色データCDは、生体組織の弾性に応じた色情報を有する。前記色データは、本発明における第一弾性表示データの実施の形態の一例であり、前記色データ作成部64は、本発明における第一弾性表示データ作成部の実施の形態の一例である。また、前記色情報は、本発明における表示形態情報の実施の形態の一例である。
前記走査変換部642は、前記色データCDを走査変換して超音波弾性画像データを作成する。
前記MRI弾性画像データ作成部65は、前記MRI装置100で算出された生体組織の硬さHの情報に基づいて、前記表示部7に表示されるMRI弾性画像の色情報からなるMRI弾性画像データを作成する。このMRI弾性画像データ作成部65で作成されたMRI弾性画像データは、前記MRI装置100によって作成されて前記メモリ62に記憶されたMRI弾性画像データとは異なる色情報を有する。詳細は後述する。前記MRI弾性画像データは、本発明における第二弾性表示データの実施の形態の一例であり、前記MRI弾性画像データ作成部65は、本発明における第二弾性表示データ作成部の実施の形態の一例である。
前記表示画像制御部66は、前記Bモード画像データ、前記超音波弾性画像データ及び前記MRI弾性画像データ作成部65によって作成された前記MRI弾性画像データに基づいて、図5に示すように、医用画像G1,G2,G3を表示させる(表示画像制御機能)。前記医用画像G1はBモード画像BGからなり、前記医用画像G2はBモード画像BGと超音波弾性画像UEGとが合成された画像からなり、前記医用画像G3はMRI弾性画像MEGと前記超音波弾性画像UEGとが合成された画像からなる。ちなみに、前記医用画像G3において、符号Liは肝臓を示している。前記医用画像G3は、前記医用画像G1,G2と後述するように生体組織において同一断面であるが、前記MRI弾性画像MEGは、前記超音波弾性画像UEGや前記Bモード画像BGよりも広範囲の画像になっている。
前記超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織の弾性に応じた表示形態を有する画像であり、本例では生体組織の弾性に応じた色からなる画像である。前記超音波弾性画像UEGは本発明における第一弾性画像の実施の形態の一例であり、前記MRI弾性画像MEGは本発明における第二弾性画像の実施の形態の一例である。また、前記表示画像制御部66は本発明における表示画像制御部の実施の形態の一例であり、前記表示画像制御機能は本発明における表示画像制御機能の実施の形態の一例である。
前記表示画像制御部66は、前記Bモード画像データと前記超音波弾性画像データとを加算処理することによって合成して得られたデータを、前記医用画像G2として表示させる。この医用画像G2において、前記超音波弾性画像UEGは、Bモード画像BG上に設定された関心領域R1内に背景のBモード画像BGが透けるようにして表示されている。前記関心領域R1は、本発明における第一弾性画像の表示領域の実施の形態の一例である。
また、前記表示画像制御部66は、前記医用画像G3として、MRI弾性画像MEGの一部に前記超音波弾性画像UEGが重畳された画像を表示させる。ここで、「重畳」とは背景の画像が表示されないことを意味する。前記超音波弾性画像UEGは、前記MRI弾性画像MEG上に設定された関心領域R2内に表示される。
ちなみに、前記医用画像G1〜G3は、生体組織における同一断面についての画像であり、前記ROI1及び前記ROI2は、生体組織の同一位置に設定される。
前記表示画像制御部66は、前記Bモード画像データに基づいてBモード画像BGのみを表示してもよく(図7参照)、前記MRI画像データに基づいてMRI画像MGを表示させてもよい(図8参照)。
前記表示部7は、例えばLCD(Liquid Crystal Display)やCRT(Cathode Ray Tube)などで構成される。また、前記操作部8は、操作者が指示や情報を入力するためのキーボード及びポインティングデバイス(図示省略)などを含んで構成されている。前記操作部8は、本発明における入力部の実施の形態の一例である。
前記制御部9は、CPU(Central Processing Unit)で構成され、前記HDD10に記憶された制御プログラムを読み出し、前記物理量データ作成機能及び前記表示画像制御機能をはじめとする前記超音波画像表示装置1の各部における機能を実行させる。
さて、本例の超音波画像表示装置1において前記医用画像G1〜G3を表示させる際の作用について図6のフローチャートに基づいて説明する。前記医用画像G1〜G3を表示させるにあたっては、ステップS1〜S3の処理を行なって、超音波画像(前記Bモード画像BG及び前記超音波弾性画像UEG)の座標系と前記MRI弾性画像MEGや前記MRI画像MGの座標系との位置合わせを行なう。具体的には、先ずステップS1では、前記超音波プローブ2が生体組織に対して超音波の送信を行なってエコー信号を受信し、前記表示画像制御部66は、前記エコー信号に基づくリアルタイムのBモード画像BGを、図7に示すように前記表示部7に表示させる。
次に、ステップS2では、前記表示画像制御部66は前記HDD10又は前記メモリ62に記憶されたMRI画像データに基づくMRI画像MGを、図8に示すように前記Bモード画像BGと並べるようにして前記表示部7に表示させる。前記表示画像制御部66は、操作者による前記操作部8の指示入力があるとMRI画像MGを表示させる。
次に、ステップS3では、前記Bモード画像BGの座標系と前記MRI画像MGの座標系との位置合わせを行なう。具体的には、操作者は前記表示部7に表示されたBモード画像BGとMRI画像MGとを見比べながら、前記操作部8を操作して、リアルタイムの前記Bモード画像BGと同じ断面のMRI画像MGを表示させる。同一断面か否かは、例えば操作者が特徴的な部位を参照するなどして判断する。ちなみに、ここでは前記超音波プローブ2によるスキャン面は、MRI画像MGのスライス面と平行であるものとする。
操作者は、同一断面のBモード画像BGとMRI画像MGとが表示されると、前記操作部8のトラックボール等を用いて、Bモード画像BGの任意の点を前記表示部7上において指定する。また、操作者は、前記Bモード画像BGにおいて指定された点と同一位置と思われる点を、前記MRI画像MGにおいても指定する。ここで、MRI画像データは位置情報を有している。従って、上述のように、前記Bモード画像BGと前記MRI画像MGとで同一位置と思われる点を指定すると、これらBモード画像BGの座標系とMRI画像MGの座標系の対応位置が特定され、超音波画像の座標系とMRI画像MGやMRI弾性画像MEGの座標系との座標変換が可能になる。以上の位置合わせが終了すると、前記位置算出部61で算出された位置情報に基づいて、現在の超音波の送受信面と同一断面のMRI画像MGやMRI弾性画像MEGを自動的に表示することが可能になる。
ステップS1〜S3の位置合わせをする処理が終わると、ステップS4では、前記表示画像制御部66は、図5に示すように医用画像G1〜G3を前記表示部7に表示させる。このステップS4では、操作者が前記超音波プローブ2によって生体組織への圧迫と弛緩を繰り返したり、前記超音波プローブ2が音響放射圧を加えたりすることにより、生体組織を変形させ、この変形を繰り返す生体組織に対して前記超音波プローブ2が超音波の送受信を行なう。そして、前記表示画像制御部66は前記超音波プローブ2による超音波の送受信面についてのリアルタイムの前記Bモード画像BGからなる前記医用画像G1を表示させるとともに、前記送受信面についてのリアルタイムの前記Bモード画像BG及びリアルタイムの前記超音波弾性画像UEGからなる前記医用画像G2を表示させる。また、前記表示画像制御部66は、前記送受信面についての前記超音波弾性画像UEG及び前記送受信面と生体組織において同一断面についてのMRI弾性画像MEGからなる前記医用画像G3を表示させる。
前記超音波弾性画像UEGは、前記Bモード画像BGに設定された関心領域R1内と、前記MRI弾性画像MEGに設定された関心領域R2内とに表示される。前記関心領域R1,R2は、生体組織において同一位置及び同一範囲となるように設定されている。前記関心領域R1,R2は、操作者が前記操作部8を操作することによって設定される。より詳細には、前記関心領域R1,R2のいずれか一方が設定されると、その設定位置と生体組織において同一位置に他方が設定される。例えば、前記Bモード画像BGにおいて前記関心領域R1が設定されると、この関心領域R1が設定された位置と、生体組織において同一の位置となるように、前記MRI弾性画像MGに前記関心領域R2が設定される。
前記超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分は同一の表示形態、すなわち本例では同一の色で表示されている。
詳細に説明すると、前記色データ作成部641は、前記物理量データを構成する歪みのデータを色情報に変換して色データを作成する。前記色データ作成部641は、図9に示すように、前記関心領域R1内の歪みの分布X1に対して、歪みSに対応する所定数の色情報が割り当てられた色情報変換グラフGRH1を設定し、この色情報変換グラフGRH1に基づいて色情報への変換を行なう。
前記色情報変換グラフGRH1について説明すると、この色情報変換グラフGRH1は歪みSと色との対応情報であり、図10に示すように、横軸は歪みSを表わし、縦軸は色情報を表わす。本例では、色情報として色相が用いられており、色相1〜色相MのM個(例えばM=256)の色相情報を有している。前記色情報変換グラフGRH1は、本発明における第一対応情報の実施の形態の一例である。
ここで、前記色相情報変換グラフGRH1において傾きを有する部分をダイナミックレンジDRと云うものとする。このダイナミックレンジDRの範囲では、歪みSがその値に応じて段階的に異なる色相情報(色相1〜色相M)に変換される。例えば、歪みS1以上S2未満については色相1に変換され、歪みS2以上S3未満については色相2に変換され、歪みS(n−1)以上Sn以下については色相Mに変換される。
ちなみに、前記ダイナミックレンジDRの範囲外の歪みが存在する場合、この歪みは一律に同じ色相に変換される。本例では、前記色情報変換グラフGRHにおいて水平部分にあたる歪みSnよりも大きい歪みについては色相Mに変換される。
前記ダイナミックレンジDRは、前記関心領域R1内の歪みSの平均値SAVを基準として設定される。具体的には、前記色データ作成部641は、先ず前記関心領域R1内の歪みSの平均値SAVを算出する。そして、図9に示すように、前記平均値SAVを基準として±ΔSの歪みの範囲に前記ダイナミックレンジDRを設定する。
このようにして設定される前記色情報変換グラフGRH1に基づいて、前記色データ作成部641は、前記物理量データにおける歪みSのデータを色相情報に変換して色データを作成する。そして、この色データを前記走査変換部642が走査変換して超音波弾性画像データを作成する。
また、前記MRI弾性画像データ作成部65は、硬さHの情報を色情報に変換してMRI弾性画像データを作成する。前記MRI弾性画像データ作成部65は、図11に示すように、前記関心領域R2内の硬さHの分布X2に対して、硬さHに対応する所定数の色情報が割り当てられた色情報変換グラフGRH2を設定し、この色情報変換グラフGRH2に基づいて色情報への変換を行なってMRI弾性画像データを作成する。前記色情報変換グラフGRH2は、本発明における第二対応情報の実施の形態の一例である。
前記色情報変換グラフGRH2は、硬さHと色との対応情報であり、図12に示すように、横軸は硬さHを表わし縦軸は色情報を表わしている。ここでも、色情報は色相情報である。前記色情報変換グラフGRH2は、前記色情報変換グラフGRH1と同一の色相情報(すなわち、色相1〜色相M)を有している。
前記色情報変換グラフGRH2のダイナミックレンジDRにおいて、硬さH1以上H2未満については色相1に変換され、硬さH2以上H3未満については色相2に変換され、硬さH(n−1)以上Hn未満については色相Mに変換される。
前記色情報変換グラフGRH2の前記ダイナミックレンジDRは、前記関心領域R2内の硬さHの平均値HAVを基準として設定される。具体的には、前記MRI弾性画像データ作成部65は、先ず前記関心領域R2内の硬さHの平均値HAVを算出する。そして、図11に示すように、前記平均値HAVを基準として±ΔHの硬さの範囲に前記ダイナミックレンジDRを設定する。
ここで、硬さの範囲である前記ΔHと歪みの範囲である前記ΔSは、生体組織の弾性が同一である範囲になっている。前記HDD10や前記メモリ62には、図13に示すように、対応する硬さHと歪みSとを定めたテーブルTaが記憶されている。このテーブルTaは、生体組織の弾性が同一である歪みSと硬さHとが定められた対応関係情報である。このテーブルTaは、硬さが予め分かっているファントムを用いて歪みSと硬さHとを測定することによって作成される。前記MRI弾性画像データ作成部65は、前記テーブルTaに基づいて前記ΔSに対応する前記ΔHを求め前記ダイナミックレンジDRを設定し前記色情報変換グラフGRH2を設定する。
硬さH1以上H2未満の範囲は、歪みS1以上S2未満の範囲と生体組織の弾性が同一になっている。硬さH2以上H3未満の範囲は、歪みS2以上S3未満の範囲と生体組織の弾性が同一になっている。硬さH(n−1)以上Hn以下の範囲は、歪みS(n−1)以上Sn以下の範囲と生体組織の弾性が同一になっている。従って、前記色情報変換グラフGRH2に基づいて作成されたMRI弾性画像データと、前記超音波弾性画像データとにおいて、生体組織の弾性が同一の部分については、同一の色情報を有する。
ちなみに、前記ダイナミックレンジDRの設定は上述に限られず、例えば前記関心領域R1内における歪みSの最小値と最大値の間に前記ダイナミックレンジDRを設定して前記色情報変換グラフGRH1を作成し、前記関心領域R2内における硬さHの最小値と最大値の間に前記ダイナミックレンジDRを設定して前記色情報変換グラフGRH2を作成してもよい。このようにして前記色情報変換グラフGRH1,2を作成した場合であっても、前記関心領域R1及び前記関心領域R2は、生体組織において同一の部分であるので、生体組織において同一の弾性を有する部分は、前記色情報変換グラフGRH1,GRH2に基づいて作成された色データ及びMRI弾性画像データにおいて、同一の色情報になる。
以上説明した本例の超音波画像表示装置1によれば、前記超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分が同一の色で表示されているので、診断に有用な画像を表示させることができる。
次に、第一実施形態の変形例について説明する。先ず、第一変形例について説明する。この第一変形例では、図14に示すように、前記表示制御部6は前記MRI弾性画像データ作成部65を有しておらず、前記位置算出部61、前記メモリ62、前記Bモード画像データ作成部63、前記超音波弾性画像データ作成部64及び前記表示画像制御部66を有している。また、図15に示すように、前記超音波弾性画像データ作成部64は、前記色データ作成部641及び前記走査変換部642の他、対応関係情報作成部643を有している。
本例の作用について図16のフローチャートに基づいて説明する。ステップS11〜S13までは、図6のステップS1〜S3までと同一の処理であり説明を省略する。ステップS13の処理が終了すると、ステップS14では、操作者は変形を繰り返す生体組織に対して前記超音波プローブ2による超音波の送受信を開始し、得られたエコー信号に基づいて前記物理量データ作成部4が物理量データを作成する。
次に、ステップS15では、操作者は前記操作部8を操作して所望の断面のBモード画像BGを表示させた後、前記操作部8のトラックボール等を用いて、図17に示すように前記Bモード画像BGにおいて、任意の点p1,p2を設定する。ちなみに、前記物理量データに基づいて作成された超音波弾性画像データに基づく超音波弾性画像UEGとBモード画像BGとが合成された画像において前記点p1,p2が設定されてもよい。
次に、ステップS16では、歪みSと硬さHとの対応関係を表わす対応関係情報を作成する。前記対応関係情報とは、生体組織の弾性が同一である歪みSと硬さHとが定められた情報である。ちなみに、本例では、上述とは異なり、歪みSと硬さHとの対応関係情報が分かっていないものとする。
ちなみに、対応関係情報の作成について具体的に説明すると、対応関係情報作成部643は、先ずMRI画像MGにおいて点p1,p2と対応する点p1′,p2′(図示省略)を特定する。前記点p1,p2と対応する点とは、生体組織において同一位置の点を意味する。
点p1における歪みSaと点p1′における硬さHaとが同一の弾性を有し、点p2における歪みSbと点p2′における硬さHbとが同一の弾性を有する。従って、前記対応関係情報特定部643は、図18に示すように、横軸が歪みS、縦軸が硬さHの座標平面において、点q1(Sa,Ha)、点q2(Sb,Hb)をプロットし、これら点q1,q2を通る直線からなるグラフGRH3を対応関係情報とする。このグラフGRH3からなる対応関係情報は、本発明における物理量対応情報の実施の形態の一例である。
次に、ステップS17では、前記色データ作成部641は、前記物理量データの歪みSを色情報に変換して色データを作成する。具体的には、前記色データ作成部641は、先ず前記物理量データにおける歪みSに対応する硬さHを前記対応関係情報のグラフGRH3に基づいて特定し、次に特定された硬さHに対応する色情報を色情報変換グラフGRH4(図示省略)に基づいて特定して、この特定された色情報に前記第一の物理量を変換する。前記色データは、本発明における第一弾性表示データの実施の形態の一例である。また、前記色情報変換グラフGRH4は、本発明における対応情報の実施の形態の一例である。
前記色情報変換グラフGRH4は、前記MRI装置100が、硬さHを色情報に変換してMRI弾性画像を作成するときに用いたものである。従って、生体組織において同一の弾性を有する部分は、前記色データ作成部641が作成した前記色データと、前記MRI装置100が作成したMRI弾性画像データとにおいて、同一の色情報である。
ちなみに、前記色情報変換グラフGRH4のデータは、前記MRI装置100から前記HDD10又は前記メモリ62に記憶される。
次に、ステップS18では、前記走査変換部642が前記色データを走査変換して超音波弾性画像データを作成する。そして、ステップS19では、前記表示画像制御部66は、前記医用画像G1〜G3を前記表示部7に表示させる(図5参照)。
前記医用画像G2及びG3における超音波弾性画像UEGは、前記超音波弾性画像データ作成部64において作成された超音波弾性画像データに基づいて表示される画像であり、前記医用画像G3におけるMRI弾性画像MEGは、前記MRI装置100で作成され、前記メモリ62又は前記HDD10に記憶されたMRI弾性画像データに基づいて表示される画像である。従って、前記表示部7に表示された超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分が同一の色情報で表示される。
本例において、前記HDD10又は前記メモリ62に記憶され、前記MRI装置100で作成されたMRI弾性画像データは、本発明における第二弾性表示データの実施の形態の一例である。前記HDD10及び前記メモリ62は、本発明における記憶部の実施の形態の一例である。
ちなみに、前記医用画像G1及びG2におけるBモード画像BG及び前記医用画像G2における超音波弾性画像UEGは、リアルタイムの画像である。そして、前記Bモード画像BG及び前記超音波弾性画像UEGと前記MRI弾性画像MEGとは同一断面の画像である。以下の各変形例においても同様である。
なお、前記点p1,p2はMRI画像MGにおいて設定されてもよい。この場合、前記点p1′,p2′は前記Bモード画像BGにおいて特定される。
また、前記点p1,p2の設定が行なわれて前記グラフGRH3からなる対応関係情報が作成される場合には限られず、前記対応関係情報として、対応する硬さHと歪みSとを定めた前記テーブルTaを用いてもよい。
また、この第一変形例において、前記Bモード画像BGにおいて前記点p1のみが設定されるようになっていてもよい。この場合、前記色データ作成部641は、前記点p1と前記MRI画像MGにおいて対応する前記p1′を特定して、前記点p1における前記歪みSaに対応する前記硬さHaに応じた色情報を前記色情報変換グラフGRH4に基づいて特定し、前記物理量データにおいて、前記点p1における歪みSaと同一の歪みSのデータを、前記特定された色情報に変換する。これにより、超音波弾性画像UEGにおいて、前記点p1の弾性と同じ弾性を有する部分が、前記MRI弾性画像MEGにおいて、前記点p1′と同じ弾性を有する部分の色相と同一の色相で表示される。従って、本発明における第一弾性画像及び第二弾性画像において、生体組織において同一の弾性を有する部分のうち、一部分のみが同一の表示形態で表示されている場合が、本発明に含まれる。
また、前記点p1のみが設定されると、この点p1の弾性よりも硬い部分の超音波弾性画像UEGを、MRI弾性画像MEGにおいて前記点p1′よりも硬い部分の色相と同じ色相で表示させるようにしてもよい。
次に、第一実施形態の第二変形例について説明する。この第二変形例では、前記表示制御部6は図3に示す構成を有し、前記超音波弾性画像データ作成部64は図に示す構成を有する。
本例の作用について図19のフローチャートに基づいて説明する。ステップS21〜S26までは、図16のステップS11〜S16と同一の処理であり説明を省略する。ステップS27では、前記超音波弾性画像データ作成部64が、前記ステップS24において作成された前記物理量データに基づいて超音波弾性画像データを作成し、前記MRI弾性画像データ作成部65が、硬さHの情報を色情報に変換してMRI弾性画像データを作成する。
前記超音波弾性画像データの作成について説明すると、先ず前記色データ作成部641が、図6のフローチャートにおけるステップS4と同様にして、歪みSに対応する所定数の色情報が割り当てられた色情報変換グラフGRH5(図示省略、前記色情報変換グラフGRH1と同一でもよい)に基づいて色データを作成する。この色データは、本発明における第一弾性表示データの実施の形態の一例であり、前記色データ作成部641は、本発明における第一弾性表示データ作成部の実施の形態の一例である。そして、前記走査変換部642は、前記色データを走査変換して超音波弾性画像データを作成する。
次に、前記MRI弾性画像データの作成について説明すると、前記MRI弾性画像データ作成部65は、前記MRI装置100で算出されて前記メモリ62や前記HDD10に記憶された硬さHに対応する歪みSを前記対応関係情報のグラフGRH3(図18)に基づいて特定する。次に前記MRI弾性画像データ作成部65は、特定された歪みSに対応する色情報を前記色情報変換グラフGRH5に基づいて特定し、この特定された色情報に前記硬さHを変換してMRI弾性画像データを作成する。従って、生体組織において同一の弾性を有する部分は、このステップS27で作成された前記超音波弾性画像データと前記MRI弾性画像データとにおいて、同一の色情報である。
ちなみに、前記ステップS27で作成された前記MRI弾性画像データは、本発明における第二弾性表示データの実施の形態の一例であり、前記MRI弾性画像データ作成部65は、本発明における第二弾性表示データ作成部の実施の形態の一例である。
ステップS27で超音波弾性画像データ及びMRI弾性画像データが作成されると、ステップS28の処理へ移行する。このステップS28では、前記表示画像制御部66は、前記医用画像G1〜G3を前記表示部7に表示させる。
前記医用画像G2及びG3における超音波弾性画像UEGは、前記ステップS27において作成された超音波弾性画像データに基づいて表示される画像であり、前記医用画像G3におけるMRI弾性画像MEGは、前記ステップS27において作成されたMRI弾性画像データに基づいて表示される画像である。従って、前記表示部7に表示された超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分が同一の色情報で表示される。
なお、この第二変形例においても、第一変形例と同様に前記Bモード画像BGにおいて前記点p1のみが設定されるようになっていてもよい。この場合、前記MRI弾性画像データ作成部65は、前記点p1と前記MRI画像MGにおいて対応する前記点p1′を特定し、この点p1′における前記硬さHaに対応する前記歪みSaに応じた色情報を前記色情報変換グラフGRH5に基づいて特定して、前記点p1′における硬さHaと同一の硬さHのデータを、前記特定された色情報に変換する。これにより、MRI弾性画像MEGにおいて、前記点p1′と同じ弾性を有する部分が、前記超音波弾性画像UEGにおいて、前記点p1と同じ弾性を有する部分の色相と同一の色相で表示される。
また、前記点p1のみが設定されると、この点p1の弾性よりも硬い部分のMRI弾性画像MEGを、超音波弾性画像UEGにおいて前記点p1′の弾性よりも硬い部分の色相と同じ色相で表示させるようにしてもよい。
次に、第三変形例について説明する。この第三変形例では、前記表示制御部6は、図14と同一の構成になっている。また、前記超音波弾性画像データ作成部64は、図20に示すように前記色データ作成部641及び前記走査変換部642の他、対応関係情報作成部643′及び再作成色データ作成部644を有する。この再作成色データ作成部644は、本発明における第三弾性表示データ作成部の実施の形態の一例である。
本例の作用について図21のフローチャートに基づいて説明する。ステップS31〜S35までは、図16のステップS11〜S15及び図19のステップS21〜S25と同一の処理であり説明を省略する。ステップS35において点p1,p2の設定が行なわれると、ステップS36では、前記対応関係情報作成部643′が、色データの色情報とMRI弾性画像データの色情報との対応関係を表わす対応関係情報を作成する。この対応関係情報は、本発明における表示形態対応情報の実施の形態の一例である。
前記色データは、前記ステップS34において作成された前記物理量データに基づいて、前記色データ作成部641が作成する。この色データ作成部641は、前記色情報変換グラフGRH5に基づいて色データを作成する。この色データは、本発明における第一弾性表示データの実施の形態の一例であり、前記色データ作成部641は、本発明における第一弾性表示データ作成部の実施の形態の一例である。
前記MRI弾性画像データは、前記MRI装置100で作成され前記メモリ62又は前記HDD10に記憶されたデータである。
ちなみに、前記色データ作成部641によって作成された色データを、前記走査変換部642が走査変換して超音波弾性画像データを作成してもよい。そして、前記ステップS35において、前記超音波弾性画像データに基づく超音波弾性画像UEGとBモード画像BGとが合成された画像において前記点p1,p2が設定されてもよい。この場合の前記超音波弾性画像UEGは、本発明における第一弾性表示データに基づく生体組織の弾性画像の実施の形態の一例である。
本例の前記対応関係情報は、前記色データと前記MRI弾性画像データとで、生体組織の弾性が同一である色情報が定められた情報である。具体的には、前記対応関係情報作成部643′は、上述のステップS16(図16参照)及びステップS26と同様に、先ず前記MRI画像MGにおいて前記点p1,p2と対応する点p1′,p2′を特定する。
ちなみに、前記表示部7に超音波弾性画像UEG及びMRI弾性画像MEGを表示させ、点p1,p2が前記超音波弾性画像UEGに設定され、前記MRI弾性画像MEGにおいて前記点p1,p2と対応する点p1′,p2′が特定されるようにしてもよい。この場合、ここで表示される前記超音波弾性画像UEGは、前記色データ作成部641において作成された色データに基づく画像である。また、ここで表示される前記MRI弾性画像MEGは、前記MRI装置100で作成されたMRI弾性画像データに基づく画像である。
点p1及び点p1′は生体組織において同一位置なので同一の弾性を有する。従って、点p1における色情報C1と点p1′における色情報C1′とが同一の弾性を有する。また、点p2及び点p2′は生体組織において同一位置なので同一の弾性を有する。従って、点p2における色情報C2と点p2′における色情報C2′とが同一の弾性を有する。前記対応関係情報特定部643′は、図22に示すように、横軸が前記色データの色情報、縦軸が前記MRI弾性画像データの色情報である座標平面において、点q3(C1,C1′)、点q4(C2,C2′)をプロットし、これら点q3,q4を通る直線からなるグラフGRH6を対応関係情報とする。
次に、ステップS37では、前記超音波弾性画像データ作成部64が超音波弾性画像データを作成する。詳しく説明すると、先ず前記再作成色データ作成部644が、前記色データ作成部641で作成された色データに基づいて再作成色データを作成する。具体的には、先ず前記再作成色データ作成部644が、前記色データの色情報に対応する前記MRI弾性画像データの色情報を前記対応関係情報のグラフGRH6に基づいて特定する。そして、前記再作成色データ作成部644は、前記色データの色情報を、前記グラフGRH6に基づいて特定された対応する前記MRI弾性画像データの色情報に変換して再作成色データを作成する。この再作成色データは、本発明における第三弾性表示データの実施の形態の一例である。
生体組織において同一の弾性を有する部分は、前記再作成色データと前記MRI弾性画像データとにおいて、同一の色情報である。
次に、前記走査変換部642は、前記再作成色データを走査変換して前記超音波弾性画像データを作成する。
ステップS37において超音波弾性画像データが作成されると、ステップS38では、前記表示画像制御部66は、前記医用画像G1〜G3を前記表示部7に表示させる(図5参照)。
前記医用画像G2及びG3における超音波弾性画像UEGは、前記ステップS37において作成された超音波弾性画像データに基づいて表示される画像であり、前記医用画像G3におけるMRI弾性画像MEGは、前記MRI装置100で作成され、前記メモリ62又は前記HDD10に記憶されたMRI弾性画像データに基づいて表示される画像である。従って、前記表示部7に表示された超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分が同一の色情報で表示される。
なお、この第三変形例においても、前記点p1のみが設定されるようになっていてもよい。この場合、前記再作成色データ作成部644は、前記点p1と前記MRI画像MGにおいて対応する点p1′を特定し、前記色データにおいて、前記点p1の色情報と同一の色情報を、前記点p1′における前記MRI弾性画像データの色情報に変換する。これにより、超音波弾性画像UEGにおいて、前記点p1の弾性と同じ弾性を有する部分が、前記MRI弾性画像MEGにおいて、前記点p1′と同じ弾性を有する部分の色相と同一の色相で表示される。
また、前記点pのみが設定されると、この点p1の弾性よりも硬い部分の超音波弾性画像UEGを、MRI弾性画像MEGにおいて前記点p1′よりも硬い部分の色相と同じ色相で表示させるようにしてもよい。
次に、第四変形例について説明する。この第四変形例では、前記表示制御部6は、図23に示すように、前記位置算出部61、前記メモリ62、前記Bモード画像データ作成部63、前記超音波弾性画像データ作成部64及び前記表示画像制御部66の他、再作成MRI弾性画像データ作成部67を有している。前記再作成MRI弾性画像データ作成部67は、本発明における第四弾性表示データ作成部の実施の形態の一例である。また、前記超音波弾性画像データ作成部64は、図24に示すように、前記色データ作成部641、前記走査変換部642及び前記対応関係情報作成部643′を有している。
本例の作用について図25のフローチャートに基づいて説明する。ステップS41〜S46までは、図21のステップS31〜S36と同一の処理であり説明を省略する。ステップS47では、前記超音波弾性画像データ作成部64が超音波弾性画像データを作成し、前記再作成MRI弾性画像データ作成部67が、前記MRI装置100で作成され、前記メモリ62又は前記HDD10に記憶されたMRI弾性画像データに基づいて、再作成MRI弾性画像データを作成する。
前記超音波弾性画像データ作成部64においては、前記色データ作成部641によって作成された前記色データを前記走査変換部642が走査変換して前記超音波弾性画像データを作成する。また、前記再作成MRI弾性画像データ作成部67は、前記MRI弾性画像データの色情報に対応する前記色データの色情報を前記対応関係情報のグラフGRH6(図22参照)に基づいて特定する。そして、前記再作成MRI弾性画像データ作成部67は、前記MRI弾性画像データの色情報を、前記グラフGRH6に基づいて特定された前記色データの色情報に変換して再作成MRI弾性画像データを作成する。この再作成MRI弾性画像データは、本発明における第四弾性表示データの実施の形態の一例である。
生体組織において同一の弾性を有する部分は、前記再作成MRI弾性画像データと前記色データとにおいて、同一の色情報である。
次に、ステップS48では、前記表示画像制御部66は、前記医用画像G1〜G3を前記表示部7に表示させる(図5参照)。
前記医用画像G2及びG3における超音波弾性画像UEGは、前記ステップS47において作成された超音波弾性画像データに基づいて表示される画像であり、前記医用画像G3におけるMRI弾性画像MEGは、前記ステップS47において作成された再作成MRI弾性画像データに基づいて表示される画像である。従って、前記表示部7に表示された超音波弾性画像UEG及び前記MRI弾性画像MEGは、生体組織において同一の弾性を有する部分が同一の色情報で表示される。
ちなみに、本例においても第三変形例と同様に前記MRI装置100で作成されたMRI弾性画像データに基づくMRI弾性画像MEGを表示させてもよい。この場合のMRI弾性画像MEGは、本発明における第二弾性表示データに基づく生体組織の弾性画像の実施の形態の一例である。
なお、この第四変形例においても、前記点pのみが設定されるようになっていてもよい。この場合、前記再作成MRI弾性画像データ作成部67は、前記点p1と前記MRI画像MGにおいて対応する点p1′を特定し、前記MRI弾性画像データにおいて、前記点p1′の色情報と同一の色情報を、前記点p1における前記色データの色情報に変換する。これにより、MRI弾性画像MEGにおいて、前記点p1′と同じ弾性を有する部分が、前記超音波弾性画像UEGにおいて、前記点p1と同じ弾性を有する部分の色相と同一の色相で表示される。
以上、本発明を前記各実施形態によって説明したが、本発明はその主旨を変更しない範囲で種々変更実施可能なことはもちろんである。例えば、前記物理量データ作成部5は、生体組織の弾性に関する物理量として、歪みの代わりに生体組織の変形による変位や弾性率などを算出してもよい。また、生体組織に対して音響放射圧を加えることによって生体組織にせん断波(shear wave)を発生させ、このせん断波の速度に基づいて、生体組織の弾性に関する物理量として、生体組織の硬さ(Pa:パスカル)を算出してもよい。ちなみに、せん断波の速度は、超音波のエコー信号に基づいて算出することができる。さらに、他の公知の手法によって生体組織の弾性に関する物理量を算出してもよい。
また、図26に示すように、前記表示制御部6は、MRI装置100で算出された硬さHの値Nを前記表示部7に表示させる数値表示制御部68を有していてもよい。この場合、図27に示すように、前記医用画像G2における前記超音波弾性画像UEGにおいて、操作者が前記操作部8のトラックボール等を用いて計測部位R3を設定すると、前記数値表示制御部68は、MRI弾性画像MUGにおいて前記計測用領域R3と生体組織において同一位置を特定し、その位置の硬さHの値Nを前記表示部7に表示させる。前記数値表示制御部68は本発明における数値表示制御部の実施の形態の一例である。
ちなみに、図26に示す表示制御部6は、図3に示す表示制御部6の構成に前記数値表示制御部68を加えた構成になっているが、図14、図23における表示制御部6の構成に前記数値表示制御部68を加えた構成になっていてもよい(図示省略)。
また、図28に示すように、前記表示画像制御部66が、超音波弾性画像UEGとMRI弾性画像MEGとを並べて表示させてもよく、操作者が前記操作部8を用いて前記MRI弾性画像MEGに前記計測部位R3を設定し、前記数値表示制御部67は、前記計測部位R3の硬さHの値Nを表示させるようにしてもよい。
また、前記表示画像制御部66は、前記Bモード画像BGからなる医用画像G1、前記Bモード画像BGと前記超音波弾性画像UEGとが合成された画像からなる医用画像G2及び前記MRI弾性画像MEGと前記超音波弾性画像UEGとが合成された画像からなる医用画像G3と並べて、特に図示しないがMRI画像を前記表示部7に表示させてもよい。
1 超音波画像表示装置
5 物理量データ作成部(物理量算出部)
8 操作部(入力部)
10 HDD(記憶部)
62 メモリ(記憶部)
65 MRI弾性画像データ作成部(第二弾性表示データ作成部)
66 表示画像制御部
67 再作成MRI弾性画像データ作成部(第四弾性表示データ作成部)
68 数値表示制御部
100 MRI装置
641 色データ作成部(第一弾性表示データ作成部)
644 再作成色データ作成部(第三弾性表示データ作成部)

Claims (17)

  1. 生体組織の医用画像を表示させる医用画像表示装置であって、
    生体組織の弾性に関する第一の物理量を算出する物理量算出部と、
    前記医用画像として、前記物理量算出部で算出された第一の物理量に応じた表示形態を有する第一弾性画像と、他の医用画像表示装置で算出された生体組織の弾性に関する第二の物理量に応じた表示形態を有する第二弾性画像とを表示させる表示画像制御部と、
    を備え、
    前記表示画像制御部は、前記第一弾性画像及び前記第二弾性画像として、生体組織の弾性が同一である前記第一の物理量と前記第二の物理量とを定めた物理量対応情報に基づいて、生体組織において同一の弾性を有する部分が同一の表示形態で表示されている画像を表示させる
    ことを特徴とする医用画像表示装置。
  2. 前記第一の物理量を前記第一弾性画像における表示形態情報に変換して、該表示形態情報からなる第一弾性表示データを作成する第一弾性表示データ作成部と、
    前記第二の物理量を前記第二弾性画像における表示形態情報に変換して、該表示形態情報からなる第二弾性表示データを作成する第二弾性表示データ作成部と、
    を備え、
    前記第一弾性表示データ作成部及び第二弾性表示データ作成部は、生体組織において同一の弾性を有する部分が前記第一弾性表示データ及び前記第二弾性表示データにおいて同一の表示形態情報になるように、前記第一弾性表示データ及び前記第二弾性表示データの作成を行ない、
    前記表示画像制御部は、前記第一弾性表示データに基づいて前記第一弾性画像を表示させ、前記第二弾性表示データに基づいて前記第二弾性画像を表示させる
    ことを特徴とする請求項1に記載の医用画像表示装置。
  3. 前記第一弾性表示データ作成部は、前記物理量算出部で算出された前記第一の物理量の分布に基づいて、該第一の物理量と前記第一弾性画像における表示形態情報との第一対応情報を設定し、該第一対応情報に基づいて前記第一の物理量から前記表示形態情報への変換を行ない、
    前記第二弾性表示データ作成部は、前記他の医用画像表示装置で算出された前記第二の物理量の分布に基づいて、該第二の物理量と前記第二弾性画像における表示形態情報との第二対応情報を設定し、該第二対応情報に基づいて前記第二の物理量から前記表示形態情報への変換を行ない、
    前記第一弾性表示データ作成部及び前記第二弾性表示データ作成部は、生体組織において同一の弾性である前記第一の物理量と前記第二の物理量とが、同一の表示形態情報に変換されるように、前記物理量対応情報に基づいて、前記第一対応情報及び前記第二対応情報を設定する
    ことを特徴とする請求項2に記載の医用画像表示装置。
  4. 前記第二の物理量に応じた表示形態情報からなり、前記他の医用画像表示装置において作成された第二弾性表示データを記憶する記憶部と、
    前記物理量対応情報に基づいて、前記第一の物理量に対応する前記第二の物理量を特定して、該第二の物理量に応じた前記表示形態情報に前記第一の物理量を変換して、第一の物理量に応じた表示形態情報からなる前記第一弾性表示データを作成する第一弾性表示データ作成部と、
    を備え、
    前記表示画像制御部は、前記第一弾性表示データに基づいて前記第一弾性画像を表示させ、前記第二弾性表示データに基づいて前記第二弾性画像を表示させる
    ことを特徴とする請求項1に記載の医用画像表示装置。
  5. 前記第一弾性表示データ作成部は、前記第二の物理量と前記第二弾性画像における表示形態情報との対応情報に基づいて、前記第二の物理量に対応する前記第一の物理量から前記表示形態情報への変換を行なうことを特徴とする請求項4に記載の医用画像表示装置。
  6. 前記対応情報は、前記他の医用画像表示装置から取得されて前記記憶部に記憶されたものであることを特徴とする請求項に記載の医用画像表示装置。
  7. 前記第一の物理量を前記第一の弾性画像における表示形態情報に変換して、該表示形態情報からなる第一弾性表示データを作成する第一弾性表示データ作成部と、
    前記物理量対応情報に基づいて、前記第二の物理量に対応する前記第一の物理量を特定して、該第一の物理量に応じた前記表示形態情報に前記第二の物理量を変換して、第二の物理量に応じた表示形態情報からなる前記第二弾性表示データを作成する第二弾性表示データ作成部と、
    を備え、
    前記表示画像制御部は、前記第一弾性表示データに基づいて前記第一弾性画像を表示させ、前記第二弾性表示データに基づいて前記第二弾性画像を表示させる
    ことを特徴とする請求項1に記載の医用画像表示装置。
  8. 前記第二弾性表示データ作成部は、前記第一の物理量と前記第一弾性画像における表示形態情報との対応情報に基づいて、前記第一の物理量に対応する前記第二の物理量から前記表示形態情報への変換を行なうことを特徴とする請求項7に記載の医用画像表示装置。
  9. 前記物理量対応情報は、前記医用画像表示装置で得られた前記生体組織の画像及び前記他の医用画像表示装置で得られた前記生体組織の画像において特定された前記生体組織における同一位置の前記第一の物理量と前記第二の物理量とに基づいて作成されることを特徴とする請求項1〜8のいずれか一項に記載の医用画像表示装置。
  10. 生体組織の医用画像を表示させる医用画像表示装置であって、
    生体組織の弾性に関する第一の物理量を算出する物理量算出部と、
    前記医用画像として、前記物理量算出部で算出された第一の物理量に応じた表示形態を有する第一弾性画像と、他の医用画像表示装置で算出された生体組織の弾性に関する第二の物理量に応じた表示形態を有する第二弾性画像とを表示させる表示画像制御部と、
    前記第二の物理量に応じた第二表示形態情報からなり、前記他の医用画像表示装置において作成された第二弾性表示データを記憶する記憶部と、
    前記第一の物理量に応じた第一表示形態情報からなる第一弾性表示データを作成する第一弾性表示データ作成部と、
    生体組織の弾性が同一である前記第一表示形態情報と前記第二表示形態情報とを定めた表示形態対応情報に基づいて、前記第一表示形態情報を、該第一表示形態情報が表わす生体組織の弾性と同一である前記第二表示形態情報に変換して第三弾性表示データを作成する第三弾性表示データ作成部と、
    を備え、
    前記表示画像制御部は、前記第一弾性画像及び前記第二弾性画像として、生体組織において同一の弾性を有する部分が同一の表示形態で表示されている画像を表示させるものであり、前記第一弾性画像として、前記第三弾性表示データに基づく画像を表示させ、前記第二弾性画像として、前記第二弾性表示データに基づく画像を表示させる
    ことを特徴とする医用画像表示装置。
  11. 前記表示画像制御部は、前記第一弾性表示データに基づく生体組織の弾性画像を表示させることを特徴とする請求項10に記載の医用画像表示装置。
  12. 生体組織の医用画像を表示させる医用画像表示装置であって、
    生体組織の弾性に関する第一の物理量を算出する物理量算出部と、
    前記医用画像として、前記物理量算出部で算出された第一の物理量に応じた表示形態を有する第一弾性画像と、他の医用画像表示装置で算出された生体組織の弾性に関する第二の物理量に応じた表示形態を有する第二弾性画像とを表示させる表示画像制御部と、
    前記第二の物理量に応じた第二表示形態情報からなり、前記他の医用画像表示装置において作成された第二弾性表示データを記憶する記憶部と、
    前記第一の物理量に応じた第一表示形態情報からなる第一弾性表示データを作成する第一弾性表示データ作成部と、
    生体組織の弾性が同一である前記第一表示形態情報と前記第二表示形態情報とを定めた表示形態対応情報に基づいて、前記第二表示形態情報を、該第二表示形態情報が表わす生体組織の弾性と同一である前記第一表示形態情報に変換して第四弾性表示データを作成する第四弾性表示データ作成部と、
    を備え、
    前記表示画像制御部は、前記第一弾性画像及び前記第二弾性画像として、生体組織において同一の弾性を有する部分が同一の表示形態で表示されている画像を表示させるものであり、前記第一弾性画像として、前記第一弾性表示データに基づく画像を表示させ、前記第二弾性画像として、前記第四弾性表示データに基づく画像を表示させる
    ことを特徴とする医用画像表示装置。
  13. 前記表示画像制御部は、前記第二弾性表示データに基づく生体組織の弾性画像を表示させることを特徴とする請求項12に記載の医用画像表示装置。
  14. 前記表示形態対応情報は、前記医用画像表示装置で得られた前記生体組織の画像及び前記他の医用画像表示装置で得られた前記生体組織の画像において特定された前記生体組織における同一位置の前記第一表示形態情報と前記第二表示形態情報とに基づいて作成されることを特徴とする請求項10〜13のいずれか一項に記載の医用画像表示装置。
  15. 前記表示画像制御部は、前記第一画像と前記第二画像とを合成した画像を表示させることを特徴とする請求項1〜14のいずれか一項に記載の医用画像表示装置。
  16. 前記第一弾性画像又は前記第二弾性画像において計測部位を設定する入力を行なう入力部と、
    該入力部において設定された計測部位における前記第二の物理量の数値を表示させる数値表示制御部と、
    を備えることを特徴とする請求項1〜15のいずれか一項に記載の医用画像表示装置。
  17. 生体組織の医用画像を表示させる医用画像表示装置の制御プログラムであって、
    コンピュータに、
    生体組織の弾性に関する第一の物理量を算出する物理量算出機能と、
    前記医用画像として、前記物理量算出機能で算出された第一の物理量に応じた表示形態を有する第一弾性画像と、他の医用画像表示装置で算出された生体組織の弾性に関する第二の物理量に応じた表示形態を有する第二弾性画像とを表示させる表示画像制御機能と、を実行させ、
    前記表示画像制御機能は、前記第一弾性画像及び前記第二弾性画像として、生体組織の弾性が同一である前記第一の物理量と前記第二の物理量とを定めた物理量対応情報に基づいて、生体組織において同一の弾性を有する部分が同一の表示形態で表示されている画像を表示させる
    ことを特徴とする医用画像表示装置の制御プログラム。
JP2010266394A 2010-11-30 2010-11-30 医用画像表示装置及びその制御プログラム Active JP5373749B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2010266394A JP5373749B2 (ja) 2010-11-30 2010-11-30 医用画像表示装置及びその制御プログラム
CN201110462166.1A CN102525559B (zh) 2010-11-30 2011-11-30 用于显示医学图像的医学图像显示装置和方法
US13/307,509 US9188665B2 (en) 2010-11-30 2011-11-30 Medical image display apparatus and method for displaying medical images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010266394A JP5373749B2 (ja) 2010-11-30 2010-11-30 医用画像表示装置及びその制御プログラム

Publications (2)

Publication Number Publication Date
JP2012115383A JP2012115383A (ja) 2012-06-21
JP5373749B2 true JP5373749B2 (ja) 2013-12-18

Family

ID=46126312

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010266394A Active JP5373749B2 (ja) 2010-11-30 2010-11-30 医用画像表示装置及びその制御プログラム

Country Status (3)

Country Link
US (1) US9188665B2 (ja)
JP (1) JP5373749B2 (ja)
CN (1) CN102525559B (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5147656B2 (ja) * 2008-11-20 2013-02-20 キヤノン株式会社 画像処理装置、画像処理方法、プログラム、及び記憶媒体
DE102011085894B4 (de) * 2011-11-08 2014-03-27 Siemens Aktiengesellschaft Verfahren und elektronische Recheneinrichtung zur Bildgebung und Bildgebungssystem
JP6235583B2 (ja) * 2012-07-11 2017-11-22 ユニバーシティー オブ ミシシッピ メディカル センター 画像獲得データから肝線維症を検出及びステージ決定する方法
JP5879230B2 (ja) * 2012-08-21 2016-03-08 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波診断装置及びその制御プログラム
JP5863628B2 (ja) 2012-11-30 2016-02-16 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波診断装置及びその制御プログラム
EP2938282B1 (en) * 2012-12-31 2018-04-11 Mako Surgical Corporation Systems of registration using an ultrasound probe
BR112015032724B1 (pt) * 2013-06-26 2022-03-08 Koninklijke Philips N.V. Sistema de elastografia ultrassônica e método de elastografia ultrassônica para inspecionar um sítio anatômico
CN105392428B (zh) * 2013-06-26 2019-06-04 皇家飞利浦有限公司 用于映射超声剪切波弹性成像测量的系统和方法
JP6293429B2 (ja) * 2013-07-24 2018-03-14 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー データ解析装置、データ解析装置のプログラム及び超音波診断装置
JP6462340B2 (ja) * 2013-12-13 2019-01-30 キヤノンメディカルシステムズ株式会社 超音波診断装置、画像処理装置及び画像処理方法
CN104224233B (zh) * 2014-09-16 2017-05-24 无锡海斯凯尔医学技术有限公司 影像引导型弹性检测系统及其检测方法
KR102406937B1 (ko) * 2014-11-07 2022-06-10 삼성메디슨 주식회사 초음파 영상장치 및 그 제어 방법
JP6361528B2 (ja) * 2015-03-03 2018-07-25 コニカミノルタ株式会社 超音波処理装置
JP6290336B2 (ja) * 2016-08-25 2018-03-07 株式会社日立製作所 超音波診断装置
CN113811355A (zh) 2019-03-08 2021-12-17 美国迈胜医疗系统有限公司 穿过柱体输送辐射并为其产生治疗计划
WO2021241634A1 (ja) * 2020-05-26 2021-12-02 キヤノンメディカルシステムズ株式会社 超音波診断装置及び画像処理装置
CN114269256A (zh) * 2020-05-26 2022-04-01 佳能医疗系统株式会社 超声波诊断装置及图像处理装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61209643A (ja) * 1985-03-15 1986-09-17 株式会社東芝 超音波診断治療装置
US5524636A (en) * 1992-12-21 1996-06-11 Artann Corporation Dba Artann Laboratories Method and apparatus for elasticity imaging
JP4257696B2 (ja) * 2002-10-28 2009-04-22 株式会社日立メディコ 超音波装置
JP4342197B2 (ja) 2003-03-20 2009-10-14 株式会社東芝 磁気共鳴弾性イメージング装置及びこの装置に用いるプローブ
JP4455003B2 (ja) 2003-10-14 2010-04-21 株式会社日立メディコ 超音波診断装置
WO2005006978A1 (ja) * 2003-07-17 2005-01-27 Hitachi Medical Corporation 磁気共鳴イメージング装置を用いた硬性分布画像取得方法及び磁気共鳴イメージング装置
WO2005117712A1 (ja) * 2004-06-03 2005-12-15 Hitachi Medical Corporation 画像診断支援方法及び画像診断支援装置
JP4363644B2 (ja) 2004-08-18 2009-11-11 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波画像表示方法および超音波診断装置
WO2007083745A1 (ja) 2006-01-20 2007-07-26 Hitachi Medical Corporation 弾性画像表示方法及び弾性画像表示装置
US8380286B2 (en) * 2006-06-05 2013-02-19 The Johns Hopkins University Compression device for enhancing normal/abnormal tissue contrast in MRI including devices and methods related thereto
JP2008086400A (ja) 2006-09-29 2008-04-17 Gifu Univ 乳房画像診断システム
US8100831B2 (en) 2006-11-22 2012-01-24 General Electric Company Direct strain estimator for measuring elastic properties of tissue
JP5147656B2 (ja) * 2008-11-20 2013-02-20 キヤノン株式会社 画像処理装置、画像処理方法、プログラム、及び記憶媒体
JP5356140B2 (ja) 2009-07-22 2013-12-04 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波診断装置及びその制御プログラム
JP5484826B2 (ja) 2009-08-26 2014-05-07 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波診断装置

Also Published As

Publication number Publication date
US9188665B2 (en) 2015-11-17
CN102525559B (zh) 2015-06-03
JP2012115383A (ja) 2012-06-21
CN102525559A (zh) 2012-07-04
US20120133663A1 (en) 2012-05-31

Similar Documents

Publication Publication Date Title
JP5373749B2 (ja) 医用画像表示装置及びその制御プログラム
JP4314035B2 (ja) 超音波診断装置
JP4733938B2 (ja) 超音波診断装置および超音波画像処理装置
JP5203605B2 (ja) 超音波診断装置
JP5366612B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP5730196B2 (ja) 超音波診断装置、超音波画像処理装置、超音波画像生成方法
JP2010525850A (ja) ひずみ画像表示システム
WO2010024023A1 (ja) 超音波診断装置及び超音波画像表示方法
JP2011255082A (ja) 超音波診断装置
JP2011239974A (ja) 超音波診断装置
JPWO2010098233A1 (ja) 超音波診断装置及び弾性画像表示方法
JPWO2009063691A1 (ja) 超音波撮像システム
JP2011240131A (ja) スライス映像および付加情報を提供する超音波システムおよび方法
JP5225158B2 (ja) 超音波診断装置
JP5802790B2 (ja) 超音波診断装置
JP5345477B2 (ja) 超音波診断装置及びその制御プログラム
JP4754838B2 (ja) 超音波診断装置
JP5394693B2 (ja) 超音波診断装置
JP5879230B2 (ja) 超音波診断装置及びその制御プログラム
KR20120059418A (ko) 의료용 화상 디스플레이 장치 및 의료용 화상 디스플레이 방법
JP5405509B2 (ja) 超音波診断装置および超音波画像処理装置
JP5725732B2 (ja) 超音波診断装置及びその制御プログラム
JP5555286B2 (ja) 超音波診断装置
JP5922521B2 (ja) 超音波診断装置及びその制御プログラム
JP5626986B2 (ja) 超音波診断装置及びその制御プログラム

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121022

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121025

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130121

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130826

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130919

R150 Certificate of patent or registration of utility model

Ref document number: 5373749

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250