JP2007296336A - 超音波システム内で情報を表示するためのユーザ・インターフェース及び方法 - Google Patents

超音波システム内で情報を表示するためのユーザ・インターフェース及び方法 Download PDF

Info

Publication number
JP2007296336A
JP2007296336A JP2007116344A JP2007116344A JP2007296336A JP 2007296336 A JP2007296336 A JP 2007296336A JP 2007116344 A JP2007116344 A JP 2007116344A JP 2007116344 A JP2007116344 A JP 2007116344A JP 2007296336 A JP2007296336 A JP 2007296336A
Authority
JP
Japan
Prior art keywords
distortion
information
regions
strain
image display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007116344A
Other languages
English (en)
Other versions
JP5100193B2 (ja
Inventor
Zvi Friedman
ジヴィ・フリードマン
Sergei Goldenberg
セルゲイ・ゴールデンバーグ
Peter Lysyansky
ピーター・リシヤンスキー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
General Electric Co
Original Assignee
General Electric Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Electric Co filed Critical General Electric Co
Publication of JP2007296336A publication Critical patent/JP2007296336A/ja
Application granted granted Critical
Publication of JP5100193B2 publication Critical patent/JP5100193B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/485Diagnostic techniques involving measuring strain or elastic properties
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/488Diagnostic techniques involving Doppler signals
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Primary Health Care (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

【課題】超音波システム内の情報を表示するためのユーザ・インターフェース及び方法を提供する。
【解決手段】超音波システムの医学的画像表示装置(110)が複数の区分された領域(112)を含み、該複数の領域の各々がイメージング対象の心臓の一領域に対応する。医学的画像表示装置(110)は更に、前記複数の区分された領域(112)の内の、所定のレベルよりも低い追跡品質を持つ1つ以上の領域に関連して表示される追跡品質インジケータを含む。
【選択図】図3

Description

本発明の実施形態は、一般的に云えば、医学的イメージング・システムに関するものであり、より具体的には、イメージング対象の心臓に関係した歪み情報を表示する医学的イメージング・システムに関するものである。
超音波システムは様々な用途で、様々な熟練度の個人によって使用されている。多くの検査では、超音波システムのオペレータがシステムによって使用される入力を供給して、その後の分析のために情報を処理する。その情報は、処理された後、異なるフォーマットで表示することができる。例えば、処理後の情報は、量的なパラメータ又は値を示す異なる図表又はグラフで表示することができる。例えば、心臓の駆出及び/又は充満に起因した心筋の変形(例えば、心臓壁の収縮期及び/又は拡張期の圧縮/膨張)に基づいた歪み値を、ブルズアイ(bullseye)表示装置上に描画することができる。典型的には複数のセグメントに区分されているブルズアイ表示装置を使用して、局所的心筋機能の量的評価を行うことができる。複数のセグメントは、半径方向、縦方向及び円周方向の座標を持つ心臓の区分化モデルに対応させることができる。
局部的な変形を測定することにより、例えば心臓壁の延伸/短縮及び肥大化/薄小化に基づいた駆出及び/又は充満に対する局部的寄与分を決定することができ、しかもこれは歪み率(strain rate)を規定する。従って、局部的な歪み速度(strain velocity)を測定することにより、心臓壁の局部的な短縮及び延伸についての情報が提供される。また、歪み速度を決定することにより、筋肉の局部的な肥大化についての情報が提供される。
筋肉組織に関連した歪みは、一般に、初期長さに対する或る期間中の筋肉組織の長さの変化の比に対応する。超音波イメージングでは、歪みの変化率(例えば、歪み率、歪み速度など)は、ブルズアイ描画のようなカラー化した区分化画像として医師に対して視覚的に提示することができ、この場合、色の変化は異なる歪み速度に対応する。例えば、歪み速度は、収縮し弛緩する心筋の能力の直接的な量的測度を提供する。心尖ビューから心筋に沿ってイメージングすることによって、心臓の長軸に沿った局部的歪み速度成分を測定することができる。胸骨傍ビューからイメージングすることによって、心臓壁に垂直な歪み速度成分を決定することができる。
米国特許第6352507号
従って、歪み及び歪み率超音波イメージングを使用して、心筋機能の評価を行うことができる。組織の歪み及び歪み速度のような組織の変形特性に基づいて心臓の変形を推定する異なる既知の方法を使用して、歪みの測定を行うことができる。しかしながら、歪みの値の決定、例えば、心臓機能の追跡が、画像品質(例えば、画像中のノイズ)に起因すること等により悪い場合、計算値は信頼できないことがある。従って、再検討及び評価のために提示された表示が許容可能でない心臓機能追跡に基づいた数値を含むことがあり、その結果、評価とその後の処置に誤りが生じる可能性がある。
本発明の一実施形態によれば、各々がイメージング対象の心臓の一領域に対応している複数の区分された領域を含む医学的画像表示装置を提供する。表示装置は更に、前記複数の区分された領域の内の、所定のレベルよりも低い追跡品質(tracking quality)を持つ1つ以上の領域に関連して表示される追跡品質インジケータを含む。
本発明の別の実施形態によれば、各々がイメージング対象の心臓の一領域に対応していて、ブルズアイ配列を形成する複数のセグメントを含む区分化描画表示装置を提供する。複数のセグメントの各々は、その中に、イメージング対象の心臓に関係した歪み情報を含み、該情報は数値及びカラー符号化情報の内の少なくとも1つを含む。区分化描画表示装置は更に、心臓の複数のイメージングされたビューの各々についての平均歪み値のために表示される複数のグローバル歪み値を含む。
本発明のまた別の実施形態によれば、区分化表示部上に心臓歪み情報を供給するための方法を提供する。本方法は、心臓歪み情報に関する測定情報が、イメージング対象の心臓の複数の領域の各々について所定の閾値よりも大きいかどうか判定する段階を含む。複数の領域は区分化表示部の複数のセグメントに対応する。本方法は更に、測定情報が所定の閾値よりも大きい場合に複数のセグメントの各々に歪み情報を表示する段階を含む。
情報を表示するための超音波システム及び方法の模範的な実施形態を以下に詳しく説明する。具体的に述べると、最初に模範的な超音波システムの詳しい説明を行い、その後で心臓活動に関連した歪み値情報を表示するための方法及びシステムの様々な実施形態についての詳しい説明を行う。本書で述べるシステム及び方法の様々な実施形態の技術的効果は、少なくとも、潜在的に信頼性のない歪み値情報の識別を容易にすることを含む。
様々な実施形態を超音波システムに関連して説明することがあるが、本書で述べる方法及びシステムが超音波イメージングに制限されないことに留意されたい。具体的に述べると、様々な実施形態は、例えば、磁気共鳴イメージング(MRI)及びコンピュータ断層撮影(CT)イメージングを含む異なるタイプの医学的イメージングに関連させて具現化することができる。更に、様々な実施形態は、例えば、非破壊試験システムなどの他の非医学的イメージング・システムにおいて具現化することができる。
図1は、超音波システム20、より具体的に述べると、本発明の一実施形態に従って形成された診断用超音波システム20のブロック図である。超音波システム20は、身体又はボリュームの中にパルス状超音波信号を放出するためにトランスデューサ26内の素子24(例えば、圧電結晶)のアレイを駆動する送信器22を含む。様々な幾何学的配置を用いることができ、またトランスデューサ26は、例えば、異なるタイプの超音波プローブの一部分として設けることができる。超音波信号は、身体内の構造、例えば、血球又は筋肉組織から後方散乱されて、素子24へ戻るエコーを生じさせる。エコーは受信器28で受け取る。受け取ったエコーはビームフォーマ30に供給され、ビームフォーマ30はビーム形成するを行って、RF信号を出力する。RF信号は、このRF信号を処理するRFプロセッサ32に供給される。代替態様として、RFプロセッサ32は、エコー信号を表すIQデータ対を形成するようにRF信号を復調する複素復調器(図示せず)を含むことができる。RF又はIQ信号は、次いで、保存(例えば、一時的な保存)のためにメモリ34に直接に供給することができる。
超音波システム20はまた、取得した超音波情報(例えば、RF信号データ又はIQデータ対)を処理し且つ表示装置38で表示するために超音波情報のフレームを用意するプロセッサ・モジュール36を含む。プロセッサ・モジュール36は、取得した超音波情報について複数の選択可能な超音波モダリティに従って1つ以上の処理動作を行うように構成されている。取得した超音波情報は、エコー信号を受け取ったときに走査期間中に実時間で処理することができる。追加として又は代替として、超音波情報は走査期間中にメモリ34に一時的に記憶し、且つ生の又はオフライン動作において実時間ではなく処理することができる。直ちに表示する予定になっていない取得超音波情報の処理済みのフレームを記憶するために画像メモリ40が含まれる。画像メモリ40は、任意の既知のデータ記憶媒体、例えば、永久記憶媒体、着脱可能な記憶媒体などを含むことができる。
プロセッサ・モジュール36はユーザ・インターフェース42に接続されており、ユーザ・インターフェース42は、以下により詳しく説明するようにプロセッサ・モジュール36の動作を制御し、またオペレータから入力を受け取るように構成されている。表示装置38は、再検討、診断及び分析のためにユーザに対して診断用超音波画像を含む患者情報を提示する1つ以上のモニタを含んでいる。表示装置38は、例えば、メモリ34又は40に記憶されている3次元(3D)超音波データ・セットから複数の平面を自動的に表示することができる。メモリ34及びメモリ40の内の一方又は両方は超音波データの3Dデータ・セットを保存することができ、このような3Dデータ・セットは2D及び3D画像を提示するためにアクセスされる。例えば、3D超音波データ・セットは対応するメモリ34又は40に、並びに1つ以上の基準平面にマッピングすることができる。データ・セットを含むデータの処理は、部分的にユーザの入力、例えば、ユーザ・インターフェース42で受け取られるユーザ選択に基づいてなされる。
動作について説明すると、システム20はデータ、例えば、ボリューム・データ・セットを様々な手法(例えば、3D走査、実時間3Dイメージング、ボリューム・イメージング、ボリューム走査、位置決めセンサを持つトランスデューサによる2D走査、ボクセル相関手法を使用するフリーハンド走査、2D又はマトリクス・アレイ・トランスデューサを使用する走査など)によって取得する。データは、トランスデューサ26を直線又は弓形経路のような経路に沿って動かしながら、関心領域(ROI)を走査することによって取得される。各々の直線上の又は弓形上の位置において、トランスデューサ26は走査平面を求め、これらの平面はメモリ34に記憶される。
図2は、本発明の一実施形態に従って形成された図1の超音波プロセッサ・モジュール36の模範的なブロック図を示す。超音波プロセッサ・モジュール36はサブモジュールの集合として概念的に例示されているが、専用のハードウエア・ボード、DSP、プロセッサなどの任意の組合せを利用して具現化することができる。代替態様として、図2のサブモジュールは、市販のPCを単一のプロセッサ又は複数のプロセッサと共に利用し、機能動作をプロセッサ間で分散させることにより、具現化することができる。更なるオプションとして、図2のサブモジュールは、或る特定の機能を専用のハードウエアにより遂行すると共に、残りの機能を市販のPCなどにより遂行するようにしたハイブリッド構成を利用して具現化することができる。これらのサブモジュールはまた、1つの処理装置内の複数のソフトウエア・モジュールとして具現化することができる。
図2に示したサブモジュールの動作は、局部的な超音波制御装置50又はプロセッサ・モジュール36によって制御することができる。サブモジュール52〜68は中間プロセッサ動作を遂行する。超音波プロセッサ・モジュール36は超音波データ70を幾つかの形態の内の1つの形態で受け取ることができる。図2の実施形態では、受信した超音波データ70は、各データ・サンプルに関連した実数及び虚数成分を表すI,Qデータ対を構成する。I,Qデータ対は、カラーフロー・サブモジュール52、パワー・ドップラー・サブモジュール54、Bモード・サブモジュール56、スペクトル・ドップラー・サブモジュール58及びMモード・サブモジュール60の内の1つ以上に供給される。オプションとして、とりわけ、音響放射力インパルス(ARFI)サブモジュール62、歪みモジュール64、歪み率サブモジュール66、組織ドップラー(TDE)サブモジュール68のような、他のサブモジュールを含むことができる。歪みサブモジュール62、歪み率サブモジュール66及びTDEサブモジュール68は共に、心エコー処理部分を規定することができる。
サブモジュール52〜68の各々は、対応する態様でI,Qデータ対を処理して、カラーフロー・データ72、パワー・ドップラー・データ74、Bモード・データ76、スペクトル・ドップラー・データ78、Mモード・データ80、ARFIデータ82、心エコー歪みデータ84、心エコー歪み率データ86及び組織ドップラー・データ88を生成するような構成されており、これらのデータの全てはその後の処理の前に一時的にメモリ90(又は図1に示されたメモリ34又は画像メモリ40)に記憶させることができる。データ72〜88は、例えば、各セットが個別の超音波画像フレームを規定するようにした複数セットのベクトル・データ値として記憶することができる。ベクトル・データ値は一般に極座標系に基づいて編成される。
走査変換器サブモジュール92がメモリ90にアクセスして、メモリ90から画像フレームに関連したベクトル・データ値を取得し、次いで該ベクトル・データ値のセットをデカルト座標系に変換して、表示用のフォーマットにした超音波画像フレーム94を生成する。走査変換器モジュール92によって生成された超音波画像フレーム94はその後の処理のためにメモリ90に戻してもよく、或いはメモリ34又は画像メモリ40に供給してもよい。
走査変換器サブモジュール92が、例えば、歪みデータ、歪み率データなどに関連した超音波画像フレーム94を生成したとき、これらの画像フレームはメモリ90に再記憶させるか、又は母線96を介してデータベース(図示せず)、メモリ34、画像メモリ40及び/又は他のプロセッサ(図示せず)に伝送することができる。
一例として、心エコー機能に関する異なるタイプの超音波画像を(図1に示した)表示装置38で実時間で観察することが望ましいことがある。そうするために、走査変換器サブモジュール92がメモリ90に記憶されている画像についての歪み又は歪み率ベクトル・データ・セットを得る。ベクトル・データは必要な場合に補間され、ビデオ表示のためにX、Yフォーマットに変換されて超音波画像フレームを生成する。走査変換後の超音波画像フレームは表示制御装置(図示せず)に供給される。表示制御装置は、ビデオをマッピングしてビデオ表示のためのグレースケール・マッピングを得るビデオ・プロセッサを含むことができる。グレースケール・マッピングは、生の画像データから、表示されるグレー・レベルへの伝達関数を表すことができる。ビデオ・データがグレースケール値にマッピングされたとき、表示制御装置は表示装置38(これは表示装置の1つ以上のモニタ又はウィンドウを含むことができる)を制御して、画像フレームを表示させる。表示装置38で表示される心エコー画像は、画像フレームのデータから生成され、その場合、各データは表示装置内のそれぞれの画素の強度又は輝度を指示する。この例で、表示画像は、イメージングしている関心領域内の筋肉の動きを表す。
再び図2について説明すると、2Dビデオ・プロセッサ・サブモジュール94が、異なるタイプの超音波情報から生成された1つ以上のフレームを組み合わせる。例えば、2Dビデオ・プロセッサ・サブモジュール94は、一タイプのデータをグレー・マップへマッピングし且つ他のタイプのデータをビデオ表示のためのカラー・マップにマッピングすることによって、異なる画像フレームを組み合わせることができる。最終的な表示画像では、カラー画素データがグレースケール画素データに重畳されて、単一のマルチモード画像フレーム98を形成し、この画像フレーム98は再びメモリ90に再記憶されるか又は母線96を介して伝送される。相次ぐ画像フレームをメモリ90又はメモリ40(図1に示す)にシネ・ループとして記憶することができる。シネ・ループは、ユーザに対して実時間で表示される画像データを取得する先入れ先出し環状画像バッファを表す。ユーザはユーザ・インターフェース42に凍結指令を入力することによってシネループを凍結(動作中止)させることができる。ユーザ・インターフェース42は、例えば、超音波システム20(図1に示す)に情報を入力することに関連してキーボード及びマウス並びに全ての他の入力制御部を含むことができる。
また、3Dプロセッサ・サブモジュール100がユーザ・インターフェース42によって制御されて、メモリ90にアクセスすることにより、空間的に連続した超音波画像フレーム群を取得して、既知であるボリューム・レンダリング又は表面レンダリング・アルゴリズム等を介してその3次元画像表現を作成する。3次元画像は、レイ・キャスティング、最大強度画素投影などのような様々なイメージング手法を利用して、作成することができる。
本発明の様々な実施形態は、測定された心臓活動から計算された歪み情報を表示すると共に、表示部上に歪み情報の信頼性の表示を行う。具体的に述べると、図3に示すような区分化表示部(segmented display) 110を提供し、これはブルズアイ配列で構成することができる。例えば、区分化表示部110は一般的に区分された区域又は領域を形成する複数のセグメント112を含み、これらのセグメント112は一緒に円形の表示部を規定し、この円形の表示部は心臓の心筋表面全体のパラメトリック表示として構成することができる。パラメトリック表示は任意の既知の態様で、例えば、3つの標準的な心尖ビュー(心尖長軸(APLAX)、四腔及び二腔)のような異なるビューにおいて取得されて処理された心臓の心筋壁に沿ったピーク収縮期値の補間によって、作成することができる。区分化表示部110は異なる数のセグメント112、例えば、17又は16個のセグメントを含むように修正できることに留意されたい。セグメント112の数は一般に図示の18個のセグメントよりも多くしても少なくしてもよく、また、例えば、図4に示すような心臓の区分化モデル120に基づいて定めることができる。
また、区分化モデル120に基づいて、そこから表示される情報を取得した位置/向きを示す位置ラベル114(例えば、後部(POS)、前部(ANT)など)を設けることができる。位置ラベル114は一般に区分化表示部の異なるスライスに関連する。セグメント112の順序は、例えば、任意の既知の又は通常の/標準的な番号付け及び順序付けを使用して、図3では数字で識別されており、例えば、番号を付けたセグメント112は対応する壁(例えば、中隔、側部、前部、後部など)に沿った様々な心臓セグメント(例えば、尖端部、中間部及び基底部)を表す。しかしながら、セグメント112の配列、位置決め及び順序付けは、希望に応じて又は必要に応じて変更することができる。
一般に、区分化表示部110は、心臓活動の測定された歪みから導き出された量的パラメータを表示する。例えば、各々のセグメント112は、関連した歪みから導き出したパラメータ(これは、一実施形態では、ピーク収縮期歪みである)を示すために数値で及び/又は図形でラベル付けすることができる。組織の変形から測定された計算された歪みは、任意の既知の態様で、例えば、一画像フレームから次の画像フレームへと心臓内の構造を追跡することに基づいて各々の区分された領域について速度場を決定することによって、決定することができる。局部の速度は、例えば、フレームのマップから決定することができる。超音波イメージングを使用して組織の変形を計算する方法の一例が、「超音波イメージングで組織の変形の実時間計算及び表示を行うための方法及び装置」と題する米国特許第6352507号に記載されている。
区分化表示部110は、表示装置38(図1に示す)のスクリーン又はその一部(例えば、ウィンドウ)に提示することができる。詳しく述べると、図5に示されているように、区分化表示部110はカラー符号化領域130を持つように表示することができ、カラー符号化領域130は、区分化表示部110内に、歪みレベル凡例132によって規定されるような範囲に対応する歪み値を持つ区域を定める。歪みレベル凡例132は、例えば、一範囲内の複数のピーク収縮期壁肥大化パーセントを規定する連続的スケールであってよい。様々なパラメータを、例えば、異なる応力レベルに対して描画することができ、また、カラー符号化領域130をより多くのセグメント112の中へ延在させることができ、又は単一のセグメント112の中に含まれるようにすることができる。カラー符号化領域130はセグメント112の境界とは無関係に表示することができ、また1つ以上の境界を横切ることができる。更に、歪み値134が各セグメント112内に表示され、且つ該歪み値はそのセグメント112についての計算された平均ピーク収縮期歪みに対応する。
更に、平均歪み情報136をスクリーン上に、例えば、スクリーンの別のウィンドウ又は一部の中に表示することができる。平均歪み情報136は、心臓の異なる領域にわたって又は異なるビューについて平均化した歪み値を含むことができる。例えば、APLAX平均歪み値138(GLPSS_LAX)、心尖四腔平均歪み値140(GLPSS_A4C)、心尖二腔平均歪み値142(GLPSS_A2C)、及び心筋壁全体についての平均歪みを表す全体歪み値144(GLPSS_Avg)を含んでいるグローバル・ピーク収縮期歪み(GLPSS)値のような、心筋壁全体についての平均歪み値は、複数のビューの各々について別々に提供することができる。
区分化表示部110はまた、計算された歪み値がエラーを含んでいると決定されたセグメント112、又は正確な測定値を取得するには不十分な情報が存在する結果として信頼性のないデータが生じる虞のあるセグメント112が、所定のレベルよりも低い、例えば、許容可能な又は貧弱な追跡レベルよりも低い追跡情報を持つものとして示されるように設けられる。この決定は、例えば、画像品質、画像ノイズなど含む複数の因子のいずれかに基づくものであってよい。所定のレベルよりも低い取得データに基づくものである計算された歪み値を持つセグメント112は、例えば、追跡品質インジケータ(例えば、そのセグメント112内のグレー充填区域146のようなマスク)を設けることによって、対応してマークされる。更に、歪み値134はそのセグメント112には表示されない。従って、グレー充填区域146は、歪みデータを取得するために使用される追跡品質又は他の処理が、それより低い場合に取得された歪み情報が不正確になることのある許容可能なレベルのような、所定のレベルよりも低くなるセグメント112を規定する。
ここで、グレー充填区域146は、他のセグメント112に隣接するか又は他のセグメント112によって分離することのできる2つ以上のセグメント112に設けることができることに留意されたい。様々な実施形態では、単一のグレー充填区域146が設けられたとき、平均歪み情報136は表示され続ける。グレー充填区域146の数が所定の数、例えば、2を超えたとき、平均歪み情報136はもはや表示されない。
様々な実施形態では、心臓歪み情報を区分化表示部上に、例えば、超音波システムの表示装置上に表示するために、図6に示されるような方法200を提供する。詳しく述べると、段階202で、測定された心臓活動情報を受け取る。例えば、心臓の心筋壁に沿ったピーク収縮期値を受け取る。ピーク収縮期値は、任意の既知の方法によって、例えば、異なる組織変形パラメータ(例えば、膨張/収縮及び/又は延伸/短縮)を得るための組織速度イメージング又は歪み率イメージングを使用して、得ることができる。心臓活動は、或る期間にわたる歪み率推定値を決定するために幾つかの画像フレーム(例えば、幾つかの相次ぐフレーム)をサンプリングすることによって取得することができる。本質的に、毎フレームに異なる特性を測定する(例えば、構造を追跡する)ために追跡機能を遂行することができる。この追跡は、例えば、歪み値を得るために毎フレームの追跡によって生成される速度場を測定することを含むことができる。その後、段階204で、例えば、心筋壁に沿って心筋表面の異なるセグメントについての歪み値を計算する。これは、3つの標準的な心尖ビュー(心尖長軸(APLAX)、四腔及び二腔)のような異なるビューにおける取得されたピーク収縮期値を処理することを含むことができる。
次いで、段階206で、各セグメントについての測定された心臓活動の追跡品質を決定する。このプロセスは一般に、信頼性レベルを決定すること、例えば、取得されたデータを使用し且つ信頼できると見なすことのできる所定の許容可能なレベルを決定することを含む。追跡のために使用されるフレームの画像品質に関して決定を行うことができる。例えば、フレームについてのノイズ・レベルを決定して、ノイズの許容可能な閾値レベルと比較することができる。しかしながら、追跡品質は、規定された設定値に基づいて取得されたデータが信頼できるかどうか可能であるかどうか判定するための任意の方法を使用して、測定することができる。別の例として、測定された区域における速度の分散を評価することができる。例えば、区域内の隣り合う点についての計算された速度場を比較して、分散を決定することができる。それより上では取得されたデータが信頼できない又は許容可能であると決定される閾値分散差を設定することができる。別の追跡法として、一区域内の座標を追跡して、画像フレーム間を行き来するときに該座標が同じ点に対応しているがどうか決定することができる。再び、許容可能な分散を設定することができる。
その後、段階208で、セグメント(例えば、区分化表示部のセグメントの1つ)についての追跡品質が所定のレベルよりも低いかどう判定し、すなわち追跡品質が所定のレベルを満足していないので品質は許容可能でない又は信頼できないと決定する。例えば、追跡品質を決定するために上述の異なる閾値を使用することができる。追跡品質が所定の閾値よりも低くない場合、段階210で、決定された歪み値、例えば、ピーク収縮期歪み値を表示する。例えば、区分化表示部110の各セグメント112内に歪み値134を表示することができ、歪み値134はそのセグメント112についての計算されたピーク収縮期歪みに対応する(図5には全て示されている)。また、段階212で、計算された歪み値に基づいてカラー符号化歪みマップを作成する。例えば、計算された歪み値を、(図4に示すような)心臓モデルの座標又はイメージング対象の心臓の特定の画素と共に、該歪み値に関連するデータベースに記憶させることができる。これらの歪み値を使用することにより、カラー符号化歪みマップを作成することができる。マップは任意の既知の方法を使用して作成することができる。カラー符号化歪みマップは次いで、例えば、区分化表示部110の上に重畳する。表示部の着色は区分化表示部110内の規定された場所に基づいて定められ、例えば、様々なセグメント112の配置方向と該セグメント112が関係する心臓の対応する部分とに基づいて定められる。
次いで、段階216で、異なるビューについて平均歪み値を決定する。例えば、心筋壁全体にわたる平均歪みと等価なグローバル歪み値を複数のビューの各々について決定する。測定された歪み値の平均を決定するために任意の平均化手法を使用することができる。次いで、段階218で、平均歪み値を、例えば、区分化表示部110とは別個のウィンドウ内に表示する。
再び、セグメントについての追跡品質が所定のレベルよりも低いかどうかについて判定する段階208について説明すると、追跡品質が所定のレベルよりも低い場合、段階220で、許容できない追跡品質状態であることを表示部上に表す。例えば、一実施形態では、所定のレベルよりも低い追跡レベルを持つセグメント112にマスク、例えば、グレー充填区域146(図に示す)を設けて、何らマッピング又は値情報がそのセグメント112に表示されないようにする。また、段階222で、2つ以上のセグメントについて追跡品質が所定の閾値よりも低いかどうかについて判定する。2つ以上のセグメントについての追跡品質が所定のレベルよりも低い場合、段階224で、その状態を、例えば、グレー充填区域146によって追加のセグメント112に表す。更に、異なるビューについての平均歪み値は計算及び表示を行わない。2つ以上のセグメントについて追跡品質が所定のレベルよりも低くない場合、異なるビューについての平均歪み値を段階216で決定して段階218で表示する。
ここで、ピーク収縮期歪みは心臓サイクル内の全ての歪み値の汎関数(PSS=F{S(t)})のほんの一例に過ぎないことに留意されたい。様々な実施形態では、各心筋位置について異なる及び/又は追加の汎関数を演算することができ、また異なる及び/又は追加の汎関数を表すために多色方式を使用することが可能である。
以上のように、本発明の様々な実施形態では、歪み情報を与える区分化表示部を提供すると共に、歪み値が許容可能な品質レベル(例えば、許容可能な追跡レベル)であるかどうかの表示を行う。区分化表示部はまた、区分化表示部の異なるセグメントにまたがって延在するカラー符号化歪みマップを提供する。歪みの全体の平均値もまた表示することができる。
本発明を様々な特定の実施形態について説明したが、当業者には本発明の様々な実施形態が特許請求の範囲の精神及び範囲内で変更して実施できることが認められよう。また、図面の符号に対応する特許請求の範囲中の符号は、単に本願発明の理解をより容易にするために用いられているものであり、本願発明の範囲を狭める意図で用いられたものではない。そして、本願の特許請求の範囲に記載した事項は、明細書に組み込まれ、明細書の記載事項の一部となる。
本発明の一実施形態に従って形成された診断用超音波システムのブロック図である。 本発明の一実施形態に従って形成された図1の診断用超音波システムの超音波プロセッサ・モジュールのブロック図である。 それに関連して本発明の様々な実施形態を具現化するこのとのできる区分化表示部の略図である。 図3の区分化表示部に対応する心臓の区分化モデルの斜視図である。 本発明の一実施形態に従って形成された区分化表示部を持つ表示ウィンドウの略図である。 区分化表示部上に心臓歪み情報を表示するための本発明の一実施形態による方法の流れ図である。
符号の説明
20 超音波システム
24 素子
26 トランスデューサ
34 メモリ
40 画像メモリ
70: 超音波データ
72: カラーフロー・データ
74: パワー・ドップラー・データ
76: Bモード・データ
78: スペクトル・ドップラー・データ
80: Mモード・データ
82: ARFIデータ
84: 心エコー歪みデータ
86: 心エコー歪み率データ
88: 組織ドップラー・データ
94: 超音波画像フレーム
96: 母線
98: 単一のマルチモード画像フレーム
110: 区分化表示部
112: セグメント
114: 位置ラベル
120: 心臓の区分化モデル
130: カラー符号化領域
132: 歪みレベル凡例
134: 歪み値
136: 平均歪み情報
138: APLAX平均歪み値
140: 心尖四腔平均歪み値
142: 心尖二腔平均歪み値
144: 全体歪み値
146: グレー充填区域
200: 方法

Claims (10)

  1. 各々がイメージング対象の心臓の一領域に対応している複数の区分された領域(112)と、
    前記複数の区分された領域(112)の内の、所定のレベルよりも低い追跡品質を持つ1つ以上の領域に関連して表示される追跡品質インジケータと、
    を有している医学的画像表示装置(110)。
  2. 前記追跡品質インジケータは、前記複数の区分された領域(112)の内の、所定のレベルよりも低い追跡品質を持つ前記1つ以上の領域を覆うように構成されている充填区域(146)を有している、請求項1記載の医学的画像表示装置(110)。
  3. 更に、複数のセグメント(112)の上に重ねたカラー符号化歪みマップを有している請求項1記載の医学的画像表示装置(110)。
  4. 前記カラー符号化歪みマップは、歪み値範囲に対応する歪み値を持つ区域を規定するカラー符号化領域(130)を有している、請求項3記載の医学的画像表示装置(110)。
  5. 前記カラー符号化領域(130)は前記複数の区分された領域(112)の内の2つ以上の領域を横切っている、請求項4記載の医学的画像表示装置。
  6. 更に、イメージング対象の心臓の複数のビューの各々について表示される平均歪み値(134)を有している、請求項1記載の医学的画像表示装置(110)。
  7. 前記複数の区分された領域(112)の内の2つ以上の領域が所定のレベルよりも低い追跡品質を持っている場合には、前記平均歪み値(134)が表示されない、請求項6記載の医学的画像表示装置(110)。
  8. 区分化表示部上に心臓歪み情報を供給するための方法(200)であって、
    心臓歪み情報に関する測定情報が、イメージング対象の心臓の複数の領域の各々について所定の閾値よりも大きいかどうか判定する段階(208)であって、前記複数の領域が区分化表示部(110)の複数のセグメント(112)に対応している、当該段階(208)と、
    測定情報が所定の閾値よりも大きい場合に前記複数のセグメント(112)の各々に歪み情報を表示する段階(210)と、
    を有している方法(200)。
  9. 前記歪み情報は、歪み値情報(134)及びカラー符号化歪みマッピング情報(130)の内の少なくとも一方を有している、請求項8記載の方法(200)。
  10. 更に、前記複数のセグメント(112)の内の2つよりも少ないセグメントが所定の閾値よりも低い測定情報を含んでいる場合に、グローバル歪み情報(138,140,142,144)を表示する段階(218)を有している請求項8記載の方法(200)。
JP2007116344A 2006-05-05 2007-04-26 超音波システム内で情報を表示するためのユーザ・インターフェース及び方法 Active JP5100193B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/418,612 US8081806B2 (en) 2006-05-05 2006-05-05 User interface and method for displaying information in an ultrasound system
US11/418,612 2006-05-05

Publications (2)

Publication Number Publication Date
JP2007296336A true JP2007296336A (ja) 2007-11-15
JP5100193B2 JP5100193B2 (ja) 2012-12-19

Family

ID=38608270

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007116344A Active JP5100193B2 (ja) 2006-05-05 2007-04-26 超音波システム内で情報を表示するためのユーザ・インターフェース及び方法

Country Status (4)

Country Link
US (1) US8081806B2 (ja)
JP (1) JP5100193B2 (ja)
CN (1) CN101066211B (ja)
DE (1) DE102007020862A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016204447A1 (ko) * 2015-06-16 2016-12-22 삼성메디슨 주식회사 초음파 장치 및 그 동작 방법
KR20160148441A (ko) * 2015-06-16 2016-12-26 삼성메디슨 주식회사 초음파 장치 및 그 동작 방법

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10295638B2 (en) * 2007-06-28 2019-05-21 Toshiba Medical Systems Corporation Image processing apparatus, image diagnostic apparatus and image processing method
JP5448328B2 (ja) * 2007-10-30 2014-03-19 株式会社東芝 超音波診断装置及び画像データ生成装置
WO2009079344A1 (en) * 2007-12-14 2009-06-25 The Cleveland Clinic Foundation System and method to characterize cardiac function
JP5199690B2 (ja) * 2008-02-07 2013-05-15 株式会社日立メディコ 超音波診断装置
US8394023B2 (en) * 2008-05-12 2013-03-12 General Electric Company Method and apparatus for automatically determining time to aortic valve closure
US20100249589A1 (en) * 2009-03-25 2010-09-30 Peter Lysyansky System and method for functional ultrasound imaging
CN102753103B (zh) * 2010-02-09 2015-09-30 株式会社日立医疗器械 超声波诊断装置以及超声波图像显示方法
KR101511084B1 (ko) * 2012-10-11 2015-04-10 삼성메디슨 주식회사 의료 화상 표시 방법, 장치 및 사용자 인터페이스 화면 생성 방법
WO2013027526A1 (ja) * 2011-08-19 2013-02-28 株式会社 日立メディコ 医用画像装置及び医用画像構成方法
DE102011081480B4 (de) * 2011-08-24 2014-11-20 Tomtec Imaging Systems Gmbh Verfahren zur Bestimmung der intrinsischen Anisotropie eines Gewebes
CN103845076B (zh) * 2012-12-03 2019-07-23 深圳迈瑞生物医疗电子股份有限公司 超声系统及其检测信息的关联方法和装置
US10076313B2 (en) 2012-12-06 2018-09-18 White Eagle Sonic Technologies, Inc. System and method for automatically adjusting beams to scan an object in a body
US9529080B2 (en) 2012-12-06 2016-12-27 White Eagle Sonic Technologies, Inc. System and apparatus having an application programming interface for flexible control of execution ultrasound actions
US10499884B2 (en) 2012-12-06 2019-12-10 White Eagle Sonic Technologies, Inc. System and method for scanning for a second object within a first object using an adaptive scheduler
US9773496B2 (en) 2012-12-06 2017-09-26 White Eagle Sonic Technologies, Inc. Apparatus and system for adaptively scheduling ultrasound system actions
US9983905B2 (en) 2012-12-06 2018-05-29 White Eagle Sonic Technologies, Inc. Apparatus and system for real-time execution of ultrasound system actions
JP6462340B2 (ja) * 2013-12-13 2019-01-30 キヤノンメディカルシステムズ株式会社 超音波診断装置、画像処理装置及び画像処理方法
WO2015166311A1 (en) * 2014-05-02 2015-11-05 B-K Medical Aps Elastography visualization
KR102531117B1 (ko) * 2015-10-07 2023-05-10 삼성메디슨 주식회사 대상체를 나타내는 영상을 디스플레이하는 방법 및 장치.
EP3448253B1 (en) * 2016-04-27 2024-06-12 Myocardial Solutions, Inc. Rapid quantitative evaluations of heart function with strain measurements from mri
CN108257080B (zh) * 2017-12-27 2021-02-23 长江地球物理探测(武汉)有限公司 电磁波ct纵剖面图中不良地质体异常快速平面映射方法
US10631791B2 (en) 2018-06-25 2020-04-28 Caption Health, Inc. Video clip selector for medical imaging and diagnosis
US10726548B2 (en) 2018-06-25 2020-07-28 Bay Labs, Inc. Confidence determination in a medical imaging video clip measurement based upon video clip image quality
CN116777858A (zh) * 2018-08-24 2023-09-19 深圳迈瑞生物医疗电子股份有限公司 超声图像处理设备及方法及计算机可读存储介质
CN110136804B (zh) * 2019-04-25 2021-11-16 深圳向往之医疗科技有限公司 一种心肌质量计算方法、系统及电子设备
US11872019B2 (en) 2019-06-05 2024-01-16 Myocardial Solutions, Inc. MRI-derived strain-based measurements and related image data acquisitions, image data processing, patient evaluations and monitoring methods and systems
CN112438755A (zh) * 2019-08-30 2021-03-05 无锡祥生医疗科技股份有限公司 心脏参数获取方法、装置和存储介质
US20210077061A1 (en) * 2019-09-18 2021-03-18 GE Precision Healthcare LLC Method and system for analyzing ultrasound scenes to provide needle guidance and warnings

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006026151A (ja) * 2004-07-16 2006-02-02 Toshiba Corp 超音波診断装置および超音波画像処理装置
JP2007526016A (ja) * 2003-06-25 2007-09-13 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド 心撮像の自動局所心筋評価を行うシステム及び方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5709206A (en) 1995-11-27 1998-01-20 Teboul; Michel Imaging system for breast sonography
US6099471A (en) * 1997-10-07 2000-08-08 General Electric Company Method and apparatus for real-time calculation and display of strain in ultrasound imaging
MXPA01010656A (es) * 1999-04-22 2002-06-04 Univ Johns Hopkins Rastreo del movimiento cardiaco usando imagenes de resonancia magnetica de fase armonica de cine (marp).
US6352507B1 (en) * 1999-08-23 2002-03-05 G.E. Vingmed Ultrasound As Method and apparatus for providing real-time calculation and display of tissue deformation in ultrasound imaging
US6546276B1 (en) 2000-09-12 2003-04-08 Claudio I. Zanelli Ultrasonic based detection of interventional medical device contact and alignment
US6638221B2 (en) * 2001-09-21 2003-10-28 Kabushiki Kaisha Toshiba Ultrasound diagnostic apparatus, and image processing method
US7054679B2 (en) * 2001-10-31 2006-05-30 Robert Hirsh Non-invasive method and device to monitor cardiac parameters
WO2004068406A2 (en) * 2003-01-30 2004-08-12 Chase Medical, L.P. A method and system for image processing and contour assessment
US20060004291A1 (en) 2004-06-22 2006-01-05 Andreas Heimdal Methods and apparatus for visualization of quantitative data on a model
US8965487B2 (en) * 2004-08-24 2015-02-24 The General Hospital Corporation Process, system and software arrangement for measuring a mechanical strain and elastic properties of a sample
US7678050B2 (en) * 2004-08-24 2010-03-16 General Electric Company Method and apparatus for detecting cardiac events
US9713458B2 (en) 2004-10-08 2017-07-25 Koninklijke Philips N.V. Ultrasonic imaging system with body marker annotations
US7751874B2 (en) * 2005-04-25 2010-07-06 Charles Olson Display for ECG diagnostics
US7650181B2 (en) * 2005-09-14 2010-01-19 Zoll Medical Corporation Synchronization of repetitive therapeutic interventions

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007526016A (ja) * 2003-06-25 2007-09-13 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド 心撮像の自動局所心筋評価を行うシステム及び方法
JP2006026151A (ja) * 2004-07-16 2006-02-02 Toshiba Corp 超音波診断装置および超音波画像処理装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016204447A1 (ko) * 2015-06-16 2016-12-22 삼성메디슨 주식회사 초음파 장치 및 그 동작 방법
KR20160148441A (ko) * 2015-06-16 2016-12-26 삼성메디슨 주식회사 초음파 장치 및 그 동작 방법
CN107809956A (zh) * 2015-06-16 2018-03-16 三星麦迪森株式会社 超声设备及其操作方法
KR102582540B1 (ko) 2015-06-16 2023-09-25 삼성메디슨 주식회사 초음파 장치 및 그 동작 방법

Also Published As

Publication number Publication date
US8081806B2 (en) 2011-12-20
CN101066211A (zh) 2007-11-07
CN101066211B (zh) 2014-12-24
US20070258631A1 (en) 2007-11-08
JP5100193B2 (ja) 2012-12-19
DE102007020862A1 (de) 2007-11-22

Similar Documents

Publication Publication Date Title
JP5100193B2 (ja) 超音波システム内で情報を表示するためのユーザ・インターフェース及び方法
US9024971B2 (en) User interface and method for identifying related information displayed in an ultrasound system
US6994673B2 (en) Method and apparatus for quantitative myocardial assessment
US10792009B2 (en) Ultrasonic diagnostic apparatus, ultrasonic image display apparatus, and medical image diagnostic apparatus
US20070259158A1 (en) User interface and method for displaying information in an ultrasound system
EP3213108B1 (en) Imaging methods and apparatuses for performing shear wave elastography imaging
EP2919033B1 (en) Method and apparatus for displaying a plurality of different images of an object
US20070249935A1 (en) System and method for automatically obtaining ultrasound image planes based on patient specific information
CN110678129B (zh) 用于使用矢量流数据对湍流血流的自动检测和可视化的系统和方法
US20120116218A1 (en) Method and system for displaying ultrasound data
US9390546B2 (en) Methods and systems for removing occlusions in 3D ultrasound images
US20080051661A1 (en) Ultrasonic diagnostic apparatus and ultrasonic diagnostic method
CN109310399B (zh) 医学超声图像处理设备
US20100249589A1 (en) System and method for functional ultrasound imaging
US20070255138A1 (en) Method and apparatus for 3D visualization of flow jets
US20180192987A1 (en) Ultrasound systems and methods for automatic determination of heart chamber characteristics
CA2326596A1 (en) Echocardiography workstation
US8636662B2 (en) Method and system for displaying system parameter information
JP7346266B2 (ja) 超音波撮像システムおよび対象物体品質レベルを表示するための方法
CN111317508B (zh) 超声波诊断装置、医用信息处理装置、计算机程序产品
US20120230575A1 (en) Quantification results in multiplane imaging
US8394023B2 (en) Method and apparatus for automatically determining time to aortic valve closure
CN115460989A (zh) 用于超声体积流量测量的三维彩色多普勒
US20170213380A1 (en) Methods and systems for visualization of flow jets
CN113662579A (zh) 超声波诊断装置、医用图像处理装置及方法、存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100423

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100423

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120522

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120710

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120911

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120925

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151005

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5100193

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250