JP2004016268A - Ultrasonic diagnostic equipment, ultrasonic probe, and method for providing navigation information in ultrasonography - Google Patents

Ultrasonic diagnostic equipment, ultrasonic probe, and method for providing navigation information in ultrasonography Download PDF

Info

Publication number
JP2004016268A
JP2004016268A JP2002171367A JP2002171367A JP2004016268A JP 2004016268 A JP2004016268 A JP 2004016268A JP 2002171367 A JP2002171367 A JP 2002171367A JP 2002171367 A JP2002171367 A JP 2002171367A JP 2004016268 A JP2004016268 A JP 2004016268A
Authority
JP
Japan
Prior art keywords
ultrasonic
image
ultrasonic probe
information
navigation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002171367A
Other languages
Japanese (ja)
Other versions
JP4088104B2 (en
Inventor
Takashi Takeuchi
武内 俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2002171367A priority Critical patent/JP4088104B2/en
Priority to US10/459,560 priority patent/US7074185B2/en
Priority to CNB031255663A priority patent/CN100525710C/en
Publication of JP2004016268A publication Critical patent/JP2004016268A/en
Priority to US11/311,484 priority patent/US8241215B2/en
Application granted granted Critical
Publication of JP4088104B2 publication Critical patent/JP4088104B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • A61B8/14Echo-tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0883Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42Details of probe positioning or probe attachment to the patient
    • A61B8/4245Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • A61B8/4254Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient using sensors mounted on the probe
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references
    • G16H70/60ICT specially adapted for the handling or processing of medical references relating to pathologies

Abstract

<P>PROBLEM TO BE SOLVED: To provide ultrasonic diagnostic equipment and an ultrasonic probe which can easily and properly be operated by a medical doctor, an engineer who is not a specialist or who does not have much experience and to provide a method for providing navigation information in ultrasonography. <P>SOLUTION: A previously obtained reference image 42, an ultrasonic image 41 photographed presently and positional information 44 showing a relation between a position of the ultrasonic probe in transmission and reception of ultrasonic waves for generating the reference image 42 and a present position of the ultrasonic probe are displayed in a display section as navigation information.A moving position of the ultrasonic probe for obtaining a next diagnostic image is displayed on a display section as movement information 46. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、例えば医療等に用いられる超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法に関する。
【0002】
【従来の技術】
超音波画像診断装置は、超音波を使用した無侵襲検査法により組織の断層像を表示するものである。この超音波画像診断装置は、臨床の場においても実用性が高く、例えば、超音波プローブを体表から当てるだけの簡単な操作で心臓の拍動や胎児の動きの様子がリアルタイム表示で得られる。また、X線等を使用しないため、被曝の心配がなく繰り返して検査が行える。さらに、システムの規模がX線、CT、MRIなど他の診断機器に比べて小さく、ベッドサイドヘ移動して検査することも可能であり、さらに小型化された超音波診断装置も開発されている。
【0003】
ところで、一般に、医療機器の操作には、高度な技術と知識が必要である。従って、医療機器は、特定の専門医師や技師のみによって操作される場合が多い。しかし、近年の技術進歩により、医療機器は専門外又は経験の浅い医師や技師も操作可能なものとなりつつある。また、超音波診断装置の上述の特性から、将来的には、遠隔医療や在宅医療等において、患者が自分で超音波診断装置を操作することも考えられる。
【0004】
しかしながら、従来の超音波装置により好適な診断画像を撮影するためには、超音波画像の読影能力、解剖学的把握力等が必要である。従って、専門外若しくは経験の浅い医師や技師、又は患者等にとっては操作が容易でなく、好適な診断画像を撮影することができない。
【0005】
【発明が解決しようとする課題】
本発明は、上記事情を鑑みてなされたもので、専門外若しくは経験の浅い医師や技師等であっても、容易かつ適切に操作することができる超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法を提供することを目的としている。
【0006】
【課題を解決するための手段】
本発明は、上記目的を達成するため、次のような手段を講じている。
【0007】
本発明の第1の視点は、被検体に対し超音波を送信し、当該被検体からの反射波を受信する超音波プローブと、前記超音波プローブの位置情報を検出する位置検出手段と、前記受信した反射波に基づいて、超音波画像を生成する画像生成手段と、参照画像と前記参照画像に複数の参照位置情報をナビゲーション情報として記憶する記憶手段と、前記超音波画像と前記参照画像を同時に表示する手段と、前記位置情報及び前記参照位置情報に基づいて、操作支援情報を提供する情報提供手段とを具備することを特徴とする超音波診断装置である。
【0008】
本発明の第2の視点は、超音波診断装置に接続され、被検体に対し超音波を送信し、当該被検体からの反射波を受信するための超音波プローブであって、前記超音波装置からの制御に従って、所望の超音波画像を取得するための当該超音波プローブの移動方向又は移動位置を表示する表示手段を具備することを特徴とする超音波プローブである。
【0009】
本発明の第3の視点は、超音波によって被検体内部を走査し、超音波画像を生成するステップと、前記超音波プローブの位置を検出するステップと、前記超音波画像と、当該超音波画像を生成するための前記走査時における前記超音波プローブの前記位置情報とを、同時に表示するステップと、超音波画像を撮影する場合、超音波画像を撮影する場合に参照される参照画像と当該参照画像と対応付けられた超音波プローブの位置参照情報とを含むナビゲーション情報と、前記位置検出手段が検出する位置情報とに基づいて、前記超音波プローブの位置制御に関するナビゲーションを行うステップとを具備することを特徴とする超音波診断におけるナビゲーション情報提供方法である。
【0010】
このような構成によれば、専門外若しくは経験の浅い医師や技師等であっても、容易かつ適切に操作することができる超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法を実現することができる。
【0011】
【発明の実施の形態】
以下、本発明の第1実施形態〜第3実施形態を図面に従って説明する。なお、以下の説明において、略同一の機能及び構成を有する構成要素については、同一符号を付し、重複説明は必要な場合にのみ行う。
【0012】
(第1実施形態)
図1は、本実施形態に係る超音波診断装置10の概略構成を示したブロック図である。同図に示すように、超音波診断装置10は、超音波プローブ12、位置センサ13、位置検出プロセッサ14、超音波送信ユニット21、超音波受信ユニット22、Bモード処理部23、ドプラ処理部24、DSC(デジタルスキャンコンバータ)25、画像合成部26、表示部28、音声出力部29、記憶媒体30、ネットワーク回路31、コントローラ32、ナビゲーションプロセッサ33、操作パネル40を具備している。
【0013】
超音波プローブ12は、圧電セラミック等の音響/電気可逆的変換素子としての複数の圧電振動子を有する。これらの圧電振動子は並列され、超音波プローブ12の先端に装備される。本超音波プローブ12の構成については、後で詳しく説明する。
【0014】
位置センサ13は、超音波プローブ12の内部に設けられ、又はアタッチメント等にて超音波プローブ12に固定されており、当該超音波プローブ12の位置及び姿勢(向き)を特定するための位置情報を検出する。この位置センサ13には、例えば磁場等によって位置を検出するセンサであり、超音波プローブ12の少なくとも二点の位置情報を取得するために、少なくとも二個以上設置される。位置センサ13によって検出された位置情報は、位置検出プロセッサ14へ随時送信される。
【0015】
位置検出プロセッサ14は、位置センサ13が検出した位置情報に基づいて、超音波プローブ12の位置及び姿勢を特定する。具体的には、位置検出プロセッサ14は、例えば以下の様にして超音波プローブ12の位置及び姿勢を特定する。
【0016】
図2は、位置センサ13及び位置検出プロセッサ14による超音波プローブ12の位置及び姿勢の特定手法を説明するための図である。同図に示す様に、超音波プローブ12の内部の二箇所に、位置センサ13aと位置センサ13bとが設けられている。各センサ13a、13bは、点P1と点P2との二点の位置を検出する。この点P1と点P2の位置情報は、位置検出プロセッサ14に随時送信される。位置検出プロセッサ14は、例えば点P1又は点P2の位置により超音波プローブ12の位置を検出し、点P1と点P2との関係により超音波プローブ12の姿勢(向き)を検出する。
【0017】
また、位置センサ13aの中心と位置センサ13bの中心は、超音波プローブ12の中心軸(超音波照射方向に沿った方向の軸)に沿っていない形態にて設置されている。位置検出プロセッサ14は、位置センサ13aの中心と位置センサ13bの中心とを結ぶ直線と超音波プローブ12の中心軸とのなす角度から、上記中心軸中心に当該超音波プローブ12がどれくらい回転しているかを特定する。
【0018】
超音波送信ユニット21は、図示しないが、トリガ発生器、遅延回路およびパルサ回路からなり、パルス状の超音波を生成して超音波プローブ12の振動素子に送ることで収束超音波パルスを生成する。被検体内の組織で散乱したエコー信号は再び超音波プローブ12で受信される。
【0019】
超音波プローブ12から素子毎に出力されるエコー信号は、超音波受信ユニット22に取り込まれる。ここでエコー信号は、図示しないが、チャンネル毎にプリアンプで増幅され、A/D変換後に受信遅延回路により受信指向性を決定するのに必要な遅延時間を与えられ、加算器で加算される。この加算により受信指向性に応じた方向からの反射成分が強調される。この送信指向性と受信指向性とにより、エコー信号強度データが形成される。
【0020】
超音波受信ユニット22からの出力は、Bモード処理部23に送られる。ここでエコー信号対数増幅、包絡線検波処理などが施され、信号強度が輝度の明るさで表現されるデータとなる。ドプラ処理部24は、エコー信号から速度情報を周波数解析し、解析結果をDSC25に送る。
【0021】
DSC25では、超音波スキャンの走査線信号列から、テレビなどに代表される一般的なビデオフォーマットの走査線信号列に変換される。
【0022】
画像合成部26は、DSC25から出力されるリアルタイム画像、種々の設定パラメータの文字情報や目盛、または後述する他のモダリティの画像等を含むナビゲーション画像を合成し、ビデオ信号として表示部28に出力する。
【0023】
表示部28は、超音波画像、後述するナビゲーション画像を表示する他、種々の解析プログラムを実行する際のコンソールウィンドウとしても機能するCRT等である。
【0024】
音声出力部29は、後述するナビゲーション実行時における各種ナビゲーション情報を音声にて操作者に提供する。
【0025】
記憶媒体30は、予め定義された診断解析プログラム、本装置10又は他の装置にて収集された超音波画像、X線CT画像等の他のモダリティによる診断画像、及び超音波プローブ位置情報を患者毎に記憶する。また、後述するナビゲーションシステムに関する種々のソフトウェアプログラム、音声・画像などのライブラリが保管されている。この記憶媒体30には、例えばPROM(EPROM、EEPROM、Flash、EPROM)、DRAM、SRAM、SDRAM等のその他のICメモリ、光ディスク、磁気ディスク、光磁気ディスク、半導体記憶装置等が使用できる。また、記憶媒体30に格納されたデータは、ネットワーク回路31を経由して外部周辺装置ヘ有線あるいは無線ネットワーク転送することも可能となっている。
【0026】
ネットワーク回路31は、病院内LAN、WAN、インターネット等のネットワークを介して、他の装置と各種データの送受信を行う。
【0027】
コントローラ32は、情報処理装置(計算機)としての機能を持ち、本超音波診断装置本体の動作を制御する制御手段である。
【0028】
ナビゲーションプロセッサ33は、所定のプログラムに従って、ナビゲーションのための画像表示又は音声出力等に関する処理を行う。
【0029】
操作パネル40は、この装置10に接続されかつオペレータからの指示情報を入力するための装置であり、診断装置の制御や様々な画質条件設定を行うことが可能な、ボタン、キーボード、マウス、トラックボール、TCS(Touch Command Screen)等である。操作者は、この操作パネル40から、後述するナビゲーションシステムの開始・終了指示や、リファレンス画像の取り込み指示等を入力する。
【0030】
(ナビゲーションシステム)
次に、本超音波診断装置10によって提供されるナビゲーションシステムについて説明する。ナビゲーションシステムとは、例えば経験の浅い技師等や患者自身であっても、当該超音波診断装置を容易に操作できるようなナビゲーション情報を、ユーザーフレンドリーな形態にて提供するものである。ナビゲーション情報は、例えば豊富な経験を持つ技師等の作業を参考に、予め取得される。以下、超音波プローブ12の位置制御に関するナビゲーションを行う場合を例に、豊富な経験を持つ技師等の超音波画像取得に関するナビゲーション情報の取得、当該ナビゲーション情報の提供について、図3乃至図5を参照しながら説明する。
【0031】
図3は、豊富な経験を持つ技師等が、ナビゲーション情報として使用されるリファレンス画像を取得する場合の処理の流れを示したフローチャートである。まず、技師等は、リアルタイムで表示部28に表示される超音波画像を見ながら、例えば心臓の長軸断層像を適切に取得するための超音波プローブ12の位置を決定する(ステップS1)。このとき、表示部28には、リアルタイムで取得される超音波画像と、現在の超音波プローブ12の位置情報とが表示される。
【0032】
図4は、現在取得している超音波画像と、現在の超音波プローブ12の位置とを表示した表示部28の表示画面を示した図である。技師等は、同図に示すような超音波画像及び位置情報を観察しながら、所望の画像を取得するための超音波プローブ12の位置合わせを行う。
【0033】
操作者は、例えば心臓検査の場合は長軸断層像が表示されるように超音波プローブ12の位置合わせを行い、超音波プローブ12の位置が決まった時に操作パネルのリファレンス保存ボタンを押す。ナビゲーションプロセッサ33は、リファレンス保存ボタンが押されると、この時得られた超音波画像をリファレンス画像として記憶媒体30に記憶する(ステップS2)。このとき、位置センサ13からの位置情報に基づいて位置検出プロセッサ14が検出した当該超音波プローブ12の位置情報及び収集した順番も、当該リファレンス画像に対応付けて記憶される。これにより、当該患者のリファレンス画像と超音波プローブ12との位置関係を記憶したことになる。 続いて、さらに他のリファレンス画像、例えば超音波プローブ12の位置を変更した他のリファレンス画像を必要とする場合には取得する場合には、ステップS1及びステップS2の処理が繰り返し実行され、他のリファレンス画像を必要としない場合には、リファレンス画像の取得を終了する。この時収集された複数のリファレンス画像は互いに関連付けられて1つのナビゲーション情報として記憶される。
【0034】
次に、例えば経験の浅い技師等が診断する場合に、上記ナビゲーション情報に従って実行されるナビゲーションシステムについて説明する。なお、超音波診断においては、超音波プローブ12を適宜移動させ、複数の異なる断面画像を取得するのが一般的である。従って、上記ナビゲーション情報としてのリファレンス画像は複数存在するものとし、当該情報としてのリファレンス画像のそれぞれを参照しながら、複数の診断画像を取得する場合のナビゲーションについて以下説明を行う。
【0035】
図5は、本ナビゲーションシステムの動作を説明するためのフローチャートである。図5において、まず、操作パネル40からナビゲーションシステムの実行指示、使用するナビゲーション情報の選択指示等が入力されると、ナビゲーションプロセッサ33は、記憶媒体30から選択されたナビゲーション情報を読み出し、一枚目のリファレンス画像を表示部28に表示する(ステップS4)。
【0036】
図6は、表示部28におけるリファレンス画像の表示形態を示した図である。図6に示すように、リファレンス画像42は、リアルタイム表示されている超音波画像41及び現在の超音波プローブ12の位置情報44とともに表示される。先ず、表示部28は1つのナビゲーション情報として関連付けられている複数のリファレンス画像の内で収集順番が1のリファレンス画像を表示部28に表示する。
【0037】
操作者(この場合、経験の浅い技師等)は表示部28に表示された超音波画像とリファレンス画像を参照しながら、このリファレンス画像と同じ超音波画像が得られる位置に超音波プローブ12の位置を合わせる(ステップS5)。
【0038】
決定された超音波プローブ位置において、リファレンス画像参照ボタンを押すことで、表示されたリファレンス画像42と現在の超音波プローブ位置によって取得され表示されている診断画像とが、一致しているか否か判別される(ステップS6)。この判別は、ナビゲーションプロセッサ33において、例えば画像処理や画像認識等によって両画像の類似度を求め、類似度が所定の値より高い場合は一致と判定する。尚、このような判定は行わずに、リファレンス画像参照ボタンが押された時点で次ステップのリセット動作を行うようにしても良い。
【0039】
診断画像とリファレンス画像とが一致すると判別された場合には、所定の操作に応じて又は自動的に、位置センサ13の検出値がリセットされる(ステップS7)。すなわち、診断画像とリファレンス画像とが一致すると判別された場合には、位置センサ13をリセットすることにより、図6に示した超音波超音波プローブ12の位置情報44は全て「0」になり、リファレンス画像と現在収集している超音波画像との基準位置合わせが行われたことになる。従って、当該リセット以後の位置情報44は、このリファレンス画像からのずれを示すこととなる。その結果、操作者は、この位置情報44によって望ましい超音波プローブ12の配置位置(すなわち、リファレンス画像についての超音波プローブ位置)から、自身が操作する超音波プローブ12の位置がどれだけずれているかを定量的に把握することができる。一方、診断画像とリファレンス画像とが一致しないと判別された場合には、一致するまで超音波プローブ12の位置決めを実行する。 超音波プローブ12の位置が決まると、所定の操作に応じて画像が取り込まれ、記憶媒体30に記憶される(ステップS8)。このとき、位置センサ13からの位置情報に基づいて位置検出プロセッサ14が検出した当該超音波プローブ12の位置情報も、当該リファレンス画像に対応付けて記憶される。
【0040】
続いて、次の診断画像の取得に移行する。このとき、ナビゲーションプロセッサ33は、ナビゲーション情報に基づいて、次の診断画像取得のためのリファレンス画像と、超音波プローブをどのように動かすべきかを表した操作支援情報を表示する(ステップS9)。
【0041】
図7は表示部28の表示例であり、操作支援情報として超音波プローブ移動情報46を表示している。超音波プローブ移動情報46は、現在の超音波プローブ12の位置と、リファレンス画像を収集するための超音波プローブ12の位置関係を表した図である。
【0042】
図7に示す超音波プローブ移動情報46は、現在ある超音波プローブ12の位置を実線にて、移動すべき超音波プローブ12の位置を点線にて表している。この超音波プローブ移動情報により、経験の浅い技師等であっても、次に移動すべき超音波プローブ12の位置を容易に把握することができる。なお、移動すべき超音波プローブ12の位置は、音声出力部29から音声によって提供する構成であってもよい。音声による出力の場合は、リファレンス画像が得られる位置に超音波プローブ12を移動させるため、プローブを平行移動する方向、プローブを傾ける方向、プローブを捻る方向を音声で出力する。
【0043】
続いて、操作者は、当該超音波プローブ移動情報に基づいて位置決めを行い(ステップS10)、参照するリファレンス画像42と現在の超音波プローブ位置によって取得され表示されている診断画像とが、一致しているか否かが判別される(ステップS11)。一致していないと判断された場合には、一致するまで超音波プローブ12の位置決めを実行し、一方、一致すると判断された場合には、所定の操作に応じて画像が取り込まれ、記憶媒体30に記憶される(ステップS12)。
【0044】
続いて、他の診断画像を取得する場合には、ステップS9〜ステップS12までの処理が再び繰り返される。一方、準備されたリファレンス画像分の診断画像の撮影を終えると、当該ナビゲーションシステムの動作を終了する(ステップS13)。
【0045】
なお、当該ナビゲーションシステムにおいては、必ずしも準備された全てのリファレンス画像分の診断画像を撮影する必要はなく、また、捜査中に所定のリファレンス画像をスキップすることも可能である。
【0046】
以上述べた構成によれば、参照すべき超音波画像及び超音波プローブ12の配置位置が、ナビゲーション情報として提供される。操作者は、このナビゲーション情報を参照しながら、例えばナビゲーション情報としてのリファレンス画像と現在撮影している超音波画像との差等を把握しながら、診断画像を撮影することができる。従って、経験の浅い技師や患者自身が画像を撮影する場合であっても、診断部位に関する適切な診断画像を取得することができる。
【0047】
また、本ナビゲーションシステムによれば、現在取得している超音波画像及び現在の超音波プローブ12の位置と、リファレンス画像等とを同時に表示する形態にて提供されるから、操作者は現在の画像、超音波プローブ位置とリファレンス画像等との対応を容易に把握することができる。また、次の診断画像を取得するために移動すべき超音波プローブ位置が指示されるから、経験の浅い技師や患者自身が画像を撮影する場合であっても、迅速に処理を進めることが出来る。
【0048】
さらに、ナビゲーション情報は、ネットワーク回路31によりネットワークを介して基幹病院等から受信することができる。従って、例えば遠隔地や患者自宅等においても、ナビゲーション情報に従って超音波画像を撮影することができる。当該患者は、ナビゲーション情報に従って適切に撮影された超音波画像を基幹病院等に転送することで、好適な診断画像にて質の高い診断を受けることができる。
【0049】
(第2実施形態)
第2の実施形態は、異なるモダリティ(X線CT装置、磁気共鳴診断装置、核医学診断装置等)にて取得された画像、例えば三次元的X線CT画像やMRI画像等をナビゲーション情報として使用する例である。
【0050】
図8は、第2の実施形態に係るナビゲーションシステムの動作を説明するためのフローチャートであり、ナビゲーション情報の生成を行う場合の処理の流れを表している。図8において、まず、他のモダリティ、例えばX線CT装置によって診断画像が収集され、ボリュームデータが生成される(ステップS21)。
【0051】
次に、このボリュームデータ中に基準断面を設定する(ステップS22)。例えば、MPR(multi plane reconstruction)等の手法により、ボリュームデータから断面画像を生成し表示する。操作者は、この断面画像の位置を移動させ、所望の位置に基準となる断面画像(以下、「基準断面」と称する)を設定する。なお、当該基準断面像は、超音波画像と同じ形状、例えば扇状の形状となるのが好ましい。この形状の対応は、所定の座標変換により実現することができる。
【0052】
次に、上記基準断面と超音波画像との対応付け(位置合わせ)を行う(ステップS23)。具体的には、超音波プローブ12を動かし、上記基準断面と同じ位置に超音波画像が表示されるようにする。一致したと思われる位置において、リセット等の所定の操作により上記基準断面と超音波画像との対応付け(位置合わせ)を行う。当該対応付けの後は、超音波画像とMPR画像とは、超音波プローブ12の動きに連動して移動することになる。
【0053】
なお、上記対応付けは、より精度の高い対応を取るため、画像認識や画像処理等によって両画像の類似度を求め、類似度が閾値以上である場合にのみ可能とする構成であってもよい。
【0054】
次に、超音波プローブ12の位置決めを行う(ステップS24)。すなわち、超音波プローブ12の位置に対応した超音波画像及びMPR画像が生成され、当該超音波プローブ12の動きに連動した超音波画像及びMPR画像が表示される。操作者は、連動する両画像を参照しながら、リファレンス画像を取得するための位置決めを行うことができる。
【0055】
次に、決定された超音波プローブ位置において操作パネルのリファレンス保存ボタンを押すことで、リファレンス画像としてのMPR画像を取得する(ステップS25)。ナビゲーションプロセッサ33は、リファレンス保存ボタンが押されると、この時得られたMPR像をリファレンス画像として記憶媒体30に記憶する。このとき、位置センサ13からの位置情報に基づいて位置検出プロセッサ14が検出した当該超音波プローブ12の位置情報、MPR画像の位置情報及び収集した順番を、当該リファレンス画像に対応付けて記憶される。これにより、当該患者のリファレンス画像と超音波プローブ12との位置関係を記憶したことになる。なお、このとき、同時に超音波画像もサブリファレンス画像として記憶する構成であってもよい。
【0056】
続いて、さらに他のリファレンス画像、例えば超音波プローブ12の位置を変更した他のリファレンス画像を必要とする場合には取得する場合には、ステップS24及びステップS25の処理が繰り返し実行され、他のリファレンス画像を必要としない場合には、リファレンス画像の取得を終了する。この時収集された複数のリファレンス画像は、互いに関連付けられて1つのナビゲーション情報として記憶される。
【0057】
こうして得られたナビゲーション情報による診断画像は、第1の実施形態と同様の手順にて取得することができる(図5参照)。
【0058】
この様な構成によれば、他のモダリティにて取得された画像をナビゲーション情報として使用でき、第1の実施形態と同様の効果を得ることが出来る。また、本実施形態においては、CT画像と超音波が像とを同時に観察しながら超音波プローブの位置決めができるので、より質の高いリファレンス画像を取得することができる。さらに、CT画像のリファレンス画像、超音波画像のリファレンス画像を同時に取得することができるから、リファレンス画像生成における作業負担を軽減させることができる。
【0059】
(第3実施形態)
第3の実施形態は、異なるモダリティ(X線CT装置、磁気共鳴診断装置、核医学診断装置等)にて取得された画像、例えば三次元的X線CT画像やMRI画像等をナビゲーション情報として使用する他の例である。
【0060】
すなわち、第2の実施形態では、超音波プローブと連動する超音波画像及びCT画像を参照して、リファレンス画像としてのCT画像を取得する構成であった。これに対し、本実施形態では、CT画像のみを参照しながらリファレンス画像としてのCT画像を取得する。
【0061】
図9は、第3の実施形態に係るナビゲーションシステムの動作を説明するためのフローチャートであり、ナビゲーション情報の生成を行う場合の処理の流れを表している。図9において、まず、他のモダリティ、例えばX線CT装置によって診断画像が収集され、ボリュームデータが生成される(ステップS31)
次に、生成したボリュームデータの位置情報に基づいて、操作者によってマニュアル設定された基準画像から、例えば所定のスライス幅や角度間隔にて設定されるリファレンス画像としての断面像(例えば、MPR像)を、三次元位置計算により自動的に設定する(ステップS32)。設定された断面像、及びその位置情報は、記憶媒体30に記憶される(ステップS33)。このリファレンス画像とその位置情報の取得は、必要な分だけ繰り返される(ステップS34)。なお、上記リファレンス画像としての断面像、及びその位置情報の取得は、操作者がマニュアル操作にて設定する構成であってもよい。
【0062】
こうして得られたナビゲーション情報による診断画像は、第1の実施形態と同様の手順にて取得することができる(図5参照)。
【0063】
この様な構成によれば、他のモダリティにて取得された画像をナビゲーション情報として使用でき、第1の実施形態と同様の効果を得ることが出来る。
【0064】
以上、本発明を実施形態に基づき説明したが、本発明の思想の範疇において、当業者であれば、各種の変更例及び修正例に想到し得るものであり、それら変形例及び修正例についても本発明の範囲に属するものと了解される。例えば以下に示す(1)、(2)のように、その要旨を変更しない範囲で種々変形可能である。
【0065】
(1)上記各実施形態においては、実際の被検体から取得された診断画像をナビゲーション情報として使用した。しかし、これに限らず、例えば予め作成されたアニメーション画像をナビゲーション情報として使用する構成であってもよい。
【0066】
(2)上記各実施形態においては、画像表示又は音声にて適切な超音波プローブの配置位置を提供する構成であった。しかし、適切な超音波プローブの配置位置の提供形態は、これに限定する趣旨ではない。例えば、超音波プローブ12自体に液晶や発光ダイオード等の表示装置を設け、位置検出プロセッサ14からの情報に基づいて、当該表示装置に移動方向や移動量を表示する構成であってもよい。
【0067】
【発明の効果】
以上本発明によれば、専門外若しくは経験の浅い医師や技師等であっても、容易かつ適切に操作することができる超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法を実現できる。
【図面の簡単な説明】
【図1】図1は、第1の実施形態に係る超音波診断装置10の概略構成を示したブロック図である。
【図2】図2は、位置センサ13及び位置検出プロセッサ14による超音波プローブ12の位置及び姿勢の特定手法を説明するための図である。
【図3】図3は、豊富な経験を持つ技師等が、ナビゲーション情報として使用されるリファレンス画像を取得する場合の処理の流れを示したフローチャートである。
【図4】図4は、現在取得している超音波画像と、現在の超音波プローブ12の位置とを表示した表示部28の表示画面を示した図である。
【図5】図5は、本ナビゲーションシステムの動作を説明するためのフローチャートである。
【図6】図6は、表示部28におけるリファレンス画像の表示形態を示した図である。
【図7】図7は、表示部28に表示された、現在ある超音波プローブ12の位置から移動すべき超音波プローブ12の位置を表示した超音波プローブ移動情報46を示した図である。
【図8】図8は、第2の実施形態に係るナビゲーションシステムの動作を説明するためのフローチャートである。
【図9】図9は、第3の実施形態に係るナビゲーションシステムの動作を説明するためのフローチャートである。
【符号の説明】
10…超音波診断装置
12…超音波プローブ
13…位置センサ
14…位置検出プロセッサ
21…超音波送信ユニット
22…超音波ユニット
22…超音波受信ユニット
23…Bモード処理部
25…DSC
26…画像合成部
28…表示部
29…音声出力部
30…記憶媒体
31…ネットワーク回路
32…コントローラ
33…ナビゲーションプロセッサ
40…操作パネル
41…超音波画像
42…リファレンス画像
44…位置情報
46…超音波プローブ移動情報
46…移動情報
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an ultrasonic diagnostic apparatus, an ultrasonic probe, and a method for providing navigation information in ultrasonic diagnosis, for example, used for medical treatment and the like.
[0002]
[Prior art]
An ultrasonic image diagnostic apparatus displays a tomographic image of a tissue by a noninvasive inspection method using ultrasonic waves. This ultrasonic diagnostic imaging apparatus is highly practical even in a clinical setting. For example, the heartbeat and the movement of the fetus can be obtained in a real-time display by a simple operation of simply applying an ultrasonic probe from the body surface. . In addition, since X-rays and the like are not used, the inspection can be performed repeatedly without fear of exposure. Furthermore, the size of the system is smaller than other diagnostic equipment such as X-ray, CT, and MRI, and it is possible to move to the bedside for inspection, and a more compact ultrasonic diagnostic apparatus has been developed. .
[0003]
By the way, generally, the operation of medical equipment requires advanced technology and knowledge. Therefore, medical equipment is often operated only by a specific specialist doctor or technician. However, due to recent technological advances, medical devices are becoming operable even by non-specialized or inexperienced doctors and technicians. Further, from the above-described characteristics of the ultrasonic diagnostic apparatus, it is conceivable that the patient will operate the ultrasonic diagnostic apparatus by himself in telemedicine or home medical care in the future.
[0004]
However, in order to capture a suitable diagnostic image with a conventional ultrasonic device, it is necessary to have a capability of reading an ultrasonic image, an anatomical grasping power, and the like. Therefore, the operation is not easy for non-specialized or inexperienced doctors, technicians, patients, and the like, and it is not possible to capture a suitable diagnostic image.
[0005]
[Problems to be solved by the invention]
The present invention has been made in view of the above circumstances, and can be easily and appropriately operated by an ultrasonic diagnostic apparatus, an ultrasonic probe, and an ultrasonic wave even by a non-specialized or inexperienced doctor or technician. It is intended to provide a navigation information providing method in diagnosis.
[0006]
[Means for Solving the Problems]
The present invention employs the following means to achieve the above object.
[0007]
A first aspect of the present invention is an ultrasonic probe that transmits an ultrasonic wave to a subject and receives a reflected wave from the subject, a position detecting unit that detects position information of the ultrasonic probe, Based on the received reflected wave, an image generation unit that generates an ultrasonic image, a storage unit that stores a plurality of reference position information in the reference image and the reference image as navigation information, and the ultrasonic image and the reference image. An ultrasonic diagnostic apparatus comprising: means for displaying simultaneously; and information providing means for providing operation support information based on the position information and the reference position information.
[0008]
A second aspect of the present invention is an ultrasonic probe connected to an ultrasonic diagnostic apparatus, for transmitting an ultrasonic wave to a subject and receiving a reflected wave from the subject, wherein the ultrasonic probe The ultrasonic probe according to claim 1, further comprising display means for displaying a moving direction or a moving position of the ultrasonic probe for acquiring a desired ultrasonic image under the control of the ultrasonic probe.
[0009]
According to a third aspect of the present invention, a step of scanning an inside of a subject with an ultrasonic wave to generate an ultrasonic image, a step of detecting a position of the ultrasonic probe, the ultrasonic image, and the ultrasonic image Simultaneously displaying the position information of the ultrasonic probe at the time of the scanning for generating an ultrasonic image, and, when capturing an ultrasonic image, a reference image referred to when capturing an ultrasonic image and the reference. Performing navigation related to position control of the ultrasonic probe based on navigation information including position reference information of the ultrasonic probe associated with an image, and position information detected by the position detecting unit. This is a navigation information providing method in ultrasonic diagnosis.
[0010]
According to such a configuration, a non-specialized or inexperienced doctor or technician can easily and appropriately operate an ultrasonic diagnostic apparatus, an ultrasonic probe, and a navigation information providing method in ultrasonic diagnosis. Can be realized.
[0011]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, first to third embodiments of the present invention will be described with reference to the drawings. In the following description, components having substantially the same functions and configurations are denoted by the same reference numerals, and repeated description will be made only when necessary.
[0012]
(1st Embodiment)
FIG. 1 is a block diagram showing a schematic configuration of an ultrasonic diagnostic apparatus 10 according to the present embodiment. As shown in FIG. 1, the ultrasonic diagnostic apparatus 10 includes an ultrasonic probe 12, a position sensor 13, a position detection processor 14, an ultrasonic transmission unit 21, an ultrasonic reception unit 22, a B-mode processing unit 23, and a Doppler processing unit 24. , A DSC (digital scan converter) 25, an image synthesizing unit 26, a display unit 28, an audio output unit 29, a storage medium 30, a network circuit 31, a controller 32, a navigation processor 33, and an operation panel 40.
[0013]
The ultrasonic probe 12 has a plurality of piezoelectric vibrators as acoustic / electric reversible conversion elements such as piezoelectric ceramics. These piezoelectric vibrators are arranged in parallel and mounted on the tip of the ultrasonic probe 12. The configuration of the ultrasonic probe 12 will be described later in detail.
[0014]
The position sensor 13 is provided inside the ultrasonic probe 12 or is fixed to the ultrasonic probe 12 with an attachment or the like, and outputs position information for specifying the position and orientation (direction) of the ultrasonic probe 12. To detect. The position sensor 13 is, for example, a sensor that detects a position using a magnetic field or the like, and is provided with at least two or more position sensors in order to acquire position information of at least two points of the ultrasonic probe 12. The position information detected by the position sensor 13 is transmitted to the position detection processor 14 as needed.
[0015]
The position detection processor 14 specifies the position and orientation of the ultrasonic probe 12 based on the position information detected by the position sensor 13. Specifically, the position detection processor 14 specifies the position and the posture of the ultrasonic probe 12 as described below, for example.
[0016]
FIG. 2 is a diagram for explaining a method of specifying the position and orientation of the ultrasonic probe 12 by the position sensor 13 and the position detection processor 14. As shown in the figure, a position sensor 13a and a position sensor 13b are provided at two places inside the ultrasonic probe 12. Each of the sensors 13a and 13b detects the position of two points P1 and P2. The position information of the points P1 and P2 is transmitted to the position detection processor 14 as needed. The position detection processor 14 detects the position of the ultrasonic probe 12 based on, for example, the position of the point P1 or the point P2, and detects the attitude (direction) of the ultrasonic probe 12 based on the relationship between the points P1 and P2.
[0017]
The center of the position sensor 13a and the center of the position sensor 13b are installed so as not to be along the center axis of the ultrasonic probe 12 (the axis in the direction along the ultrasonic irradiation direction). The position detection processor 14 determines how much the ultrasonic probe 12 rotates about the center axis from the angle formed between the center axis of the ultrasonic probe 12 and the straight line connecting the center of the position sensor 13a and the center of the position sensor 13b. To identify
[0018]
Although not shown, the ultrasonic transmission unit 21 includes a trigger generator, a delay circuit, and a pulser circuit, and generates a converged ultrasonic pulse by generating a pulsed ultrasonic wave and sending it to the vibration element of the ultrasonic probe 12. . The echo signal scattered by the tissue in the subject is received by the ultrasonic probe 12 again.
[0019]
An echo signal output from the ultrasonic probe 12 for each element is captured by the ultrasonic receiving unit 22. Here, although not shown, the echo signal is amplified by a preamplifier for each channel, given a delay time necessary for determining a reception directivity by a reception delay circuit after A / D conversion, and added by an adder. By this addition, a reflection component from a direction corresponding to the reception directivity is emphasized. Echo signal intensity data is formed by the transmission directivity and the reception directivity.
[0020]
The output from the ultrasonic receiving unit 22 is sent to the B-mode processing unit 23. Here, logarithmic amplification of the echo signal, envelope detection processing, and the like are performed, and the signal intensity becomes data expressed by brightness. The Doppler processing unit 24 frequency-analyzes the speed information from the echo signal, and sends the analysis result to the DSC 25.
[0021]
In the DSC 25, a scanning line signal sequence of an ultrasonic scan is converted into a scanning line signal sequence of a general video format represented by a television or the like.
[0022]
The image synthesizing unit 26 synthesizes a real-time image output from the DSC 25, character information and scales of various setting parameters, or a navigation image including an image of another modality described later, and outputs the synthesized image to the display unit 28 as a video signal. .
[0023]
The display unit 28 is a CRT or the like that displays an ultrasonic image and a navigation image, which will be described later, and also functions as a console window when executing various analysis programs.
[0024]
The voice output unit 29 provides the operator with various types of navigation information at the time of performing navigation described below by voice.
[0025]
The storage medium 30 stores a diagnostic analysis program defined in advance, diagnostic images obtained by other modalities such as an ultrasonic image and an X-ray CT image collected by the present apparatus 10 or another apparatus, and ultrasonic probe position information into a patient. Remember every time. In addition, a library of various software programs related to a navigation system, which will be described later, and a sound / image library is stored. As the storage medium 30, for example, other IC memories such as PROM (EPROM, EEPROM, Flash, EPROM), DRAM, SRAM, and SDRAM, an optical disk, a magnetic disk, a magneto-optical disk, and a semiconductor storage device can be used. Further, the data stored in the storage medium 30 can be transferred to an external peripheral device via a network circuit 31 via a wired or wireless network.
[0026]
The network circuit 31 transmits and receives various data to and from other devices via a network such as a hospital LAN, WAN, or the Internet.
[0027]
The controller 32 has a function as an information processing device (computer), and is a control unit that controls the operation of the ultrasonic diagnostic apparatus main body.
[0028]
The navigation processor 33 performs processing related to image display or audio output for navigation according to a predetermined program.
[0029]
The operation panel 40 is a device connected to the device 10 and for inputting instruction information from an operator. The operation panel 40 is capable of controlling a diagnostic device and setting various image quality conditions. Ball, TCS (Touch Command Screen) and the like. The operator inputs, from the operation panel 40, a start / end instruction of a navigation system to be described later, an instruction to capture a reference image, and the like.
[0030]
(Navigation system)
Next, a navigation system provided by the ultrasonic diagnostic apparatus 10 will be described. The navigation system provides navigation information in a user-friendly form so that even an inexperienced technician or a patient can easily operate the ultrasonic diagnostic apparatus. The navigation information is acquired in advance with reference to, for example, the work of a technician or the like who has abundant experience. Hereinafter, referring to FIGS. 3 to 5 regarding the acquisition of navigation information related to acquisition of ultrasound images by a technician or the like with a wealth of experience, and the provision of the navigation information, taking as an example the case of performing navigation related to position control of the ultrasound probe 12. It will be explained while doing so.
[0031]
FIG. 3 is a flowchart showing the flow of processing when a technician or the like with abundant experience acquires a reference image used as navigation information. First, a technician or the like determines a position of the ultrasonic probe 12 for appropriately acquiring, for example, a long-axis tomographic image of the heart while watching an ultrasonic image displayed on the display unit 28 in real time (step S1). At this time, the display unit 28 displays the ultrasonic image acquired in real time and the current position information of the ultrasonic probe 12.
[0032]
FIG. 4 is a diagram showing a display screen of the display unit 28 displaying the currently acquired ultrasonic image and the current position of the ultrasonic probe 12. A technician or the like adjusts the position of the ultrasonic probe 12 for obtaining a desired image while observing the ultrasonic image and the position information as shown in FIG.
[0033]
For example, in the case of cardiac examination, the operator performs positioning of the ultrasonic probe 12 so that a long-axis tomographic image is displayed, and presses a reference save button on the operation panel when the position of the ultrasonic probe 12 is determined. When the reference save button is pressed, the navigation processor 33 stores the obtained ultrasonic image in the storage medium 30 as a reference image (step S2). At this time, the position information of the ultrasonic probe 12 detected by the position detection processor 14 based on the position information from the position sensor 13 and the collection order are also stored in association with the reference image. As a result, the positional relationship between the reference image of the patient and the ultrasonic probe 12 is stored. Subsequently, in a case where another reference image, for example, another reference image in which the position of the ultrasonic probe 12 is changed is obtained when it is necessary, the processes of Step S1 and Step S2 are repeatedly executed, and If the reference image is not required, the acquisition of the reference image ends. The plurality of reference images collected at this time are stored as one piece of navigation information in association with each other.
[0034]
Next, a description will be given of a navigation system that is executed in accordance with the above-mentioned navigation information, for example, when an inexperienced engineer or the like makes a diagnosis. In the ultrasonic diagnosis, it is general that the ultrasonic probe 12 is appropriately moved to acquire a plurality of different cross-sectional images. Therefore, it is assumed that there are a plurality of reference images as the navigation information, and the navigation when acquiring a plurality of diagnostic images will be described below with reference to each of the reference images as the information.
[0035]
FIG. 5 is a flowchart for explaining the operation of the navigation system. In FIG. 5, when an instruction to execute a navigation system, an instruction to select navigation information to be used, and the like are input from the operation panel 40, the navigation processor 33 reads the selected navigation information from the storage medium 30, and Is displayed on the display unit 28 (step S4).
[0036]
FIG. 6 is a diagram showing a display mode of the reference image on the display unit 28. As shown in FIG. 6, the reference image 42 is displayed together with the ultrasonic image 41 displayed in real time and the current position information 44 of the ultrasonic probe 12. First, the display unit 28 displays, on the display unit 28, a reference image whose collection order is 1 among a plurality of reference images associated as one piece of navigation information.
[0037]
The operator (in this case, an inexperienced technician or the like) refers to the ultrasonic image and the reference image displayed on the display unit 28 and moves the ultrasonic probe 12 to a position where the same ultrasonic image as the reference image is obtained. (Step S5).
[0038]
By pressing the reference image reference button at the determined ultrasonic probe position, it is determined whether or not the displayed reference image 42 matches the diagnostic image acquired and displayed based on the current ultrasonic probe position. Is performed (step S6). In this determination, the similarity between the two images is obtained in the navigation processor 33 by, for example, image processing or image recognition, and if the similarity is higher than a predetermined value, it is determined that they match. Note that the reset operation of the next step may be performed when the reference image reference button is pressed without performing such determination.
[0039]
When it is determined that the diagnostic image matches the reference image, the detection value of the position sensor 13 is reset in response to a predetermined operation or automatically (step S7). That is, when it is determined that the diagnostic image and the reference image match, by resetting the position sensor 13, the position information 44 of the ultrasonic probe 12 shown in FIG. This means that reference alignment between the reference image and the currently acquired ultrasonic image has been performed. Therefore, the position information 44 after the reset indicates a deviation from the reference image. As a result, the operator determines from the position information 44 how much the position of the ultrasonic probe 12 operated by the operator deviates from the desired position of the ultrasonic probe 12 (that is, the ultrasonic probe position for the reference image). Can be grasped quantitatively. On the other hand, when it is determined that the diagnostic image and the reference image do not match, the positioning of the ultrasonic probe 12 is performed until the diagnostic image and the reference image match. When the position of the ultrasonic probe 12 is determined, an image is captured according to a predetermined operation and stored in the storage medium 30 (Step S8). At this time, the position information of the ultrasonic probe 12 detected by the position detection processor 14 based on the position information from the position sensor 13 is also stored in association with the reference image.
[0040]
Subsequently, the process proceeds to the acquisition of the next diagnostic image. At this time, the navigation processor 33 displays, based on the navigation information, a reference image for acquiring the next diagnostic image and operation support information indicating how to move the ultrasonic probe (step S9).
[0041]
FIG. 7 shows a display example of the display unit 28, in which ultrasonic probe movement information 46 is displayed as operation support information. The ultrasonic probe movement information 46 is a diagram showing a current position of the ultrasonic probe 12 and a positional relationship of the ultrasonic probe 12 for collecting a reference image.
[0042]
The ultrasonic probe movement information 46 shown in FIG. 7 indicates the current position of the ultrasonic probe 12 by a solid line and the position of the ultrasonic probe 12 to be moved by a dotted line. With this ultrasonic probe movement information, even an inexperienced technician or the like can easily grasp the position of the ultrasonic probe 12 to be moved next. Note that the position of the ultrasonic probe 12 to be moved may be provided by voice from the voice output unit 29. In the case of audio output, in order to move the ultrasonic probe 12 to a position where a reference image can be obtained, a direction in which the probe is translated, a direction in which the probe is tilted, and a direction in which the probe is twisted are output as audio.
[0043]
Subsequently, the operator performs positioning based on the ultrasonic probe movement information (step S10), and the reference image 42 to be referred to matches the diagnostic image acquired and displayed based on the current ultrasonic probe position. It is determined whether or not it is (step S11). When it is determined that they do not match, the positioning of the ultrasonic probe 12 is executed until they match, and when it is determined that they match, an image is captured according to a predetermined operation, and the storage medium 30 (Step S12).
[0044]
Subsequently, when acquiring another diagnostic image, the processing from step S9 to step S12 is repeated again. On the other hand, when the imaging of the diagnostic images for the prepared reference image is finished, the operation of the navigation system is finished (step S13).
[0045]
In the navigation system, it is not always necessary to capture diagnostic images for all prepared reference images, and it is also possible to skip a predetermined reference image during a search.
[0046]
According to the configuration described above, the ultrasonic image to be referred to and the arrangement position of the ultrasonic probe 12 are provided as navigation information. The operator can take a diagnostic image while referring to the navigation information and grasping, for example, a difference between the reference image as the navigation information and the currently taken ultrasonic image. Therefore, even when an inexperienced technician or the patient himself takes an image, it is possible to obtain an appropriate diagnostic image related to a diagnostic site.
[0047]
Further, according to the present navigation system, since the currently acquired ultrasonic image and the current position of the ultrasonic probe 12 and the reference image and the like are provided at the same time, the operator is provided with the current image. In addition, the correspondence between the ultrasonic probe position and the reference image or the like can be easily grasped. In addition, since the position of the ultrasonic probe to be moved to obtain the next diagnostic image is specified, even when an inexperienced technician or the patient himself takes an image, the processing can be promptly performed. .
[0048]
Further, the navigation information can be received from the main hospital or the like via the network by the network circuit 31. Therefore, for example, even at a remote place or a patient's home, an ultrasonic image can be taken according to the navigation information. The patient can receive a high-quality diagnosis with a suitable diagnostic image by transferring an ultrasonic image appropriately captured in accordance with the navigation information to a basic hospital or the like.
[0049]
(2nd Embodiment)
The second embodiment uses images acquired by different modalities (such as an X-ray CT device, a magnetic resonance diagnostic device, and a nuclear medicine diagnostic device), such as a three-dimensional X-ray CT image and an MRI image, as navigation information. This is an example.
[0050]
FIG. 8 is a flowchart for explaining the operation of the navigation system according to the second embodiment, and shows a flow of processing when generating navigation information. In FIG. 8, first, a diagnostic image is collected by another modality, for example, an X-ray CT apparatus, and volume data is generated (step S21).
[0051]
Next, a reference section is set in the volume data (step S22). For example, a cross-sectional image is generated from volume data and displayed by a method such as MPR (multi plane reconstruction). The operator moves the position of the cross-sectional image and sets a reference cross-sectional image (hereinafter, referred to as a “reference cross-section”) at a desired position. Note that the reference cross-sectional image preferably has the same shape as the ultrasonic image, for example, a fan shape. This correspondence of the shape can be realized by a predetermined coordinate transformation.
[0052]
Next, the reference section and the ultrasonic image are associated (positioned) (step S23). Specifically, the ultrasonic probe 12 is moved so that an ultrasonic image is displayed at the same position as the reference section. At the position where it is considered to be coincident, the reference section and the ultrasonic image are associated (positioned) by a predetermined operation such as reset. After the association, the ultrasonic image and the MPR image move in conjunction with the movement of the ultrasonic probe 12.
[0053]
Note that the association may be configured such that the similarity between the two images is obtained by image recognition, image processing, or the like in order to obtain a more accurate association, and is possible only when the similarity is equal to or greater than a threshold. .
[0054]
Next, the ultrasonic probe 12 is positioned (Step S24). That is, an ultrasonic image and an MPR image corresponding to the position of the ultrasonic probe 12 are generated, and the ultrasonic image and the MPR image linked to the movement of the ultrasonic probe 12 are displayed. The operator can perform positioning for acquiring a reference image while referring to both linked images.
[0055]
Next, an MPR image as a reference image is acquired by pressing a reference save button on the operation panel at the determined ultrasonic probe position (step S25). When the reference save button is pressed, the navigation processor 33 stores the MPR image obtained at this time in the storage medium 30 as a reference image. At this time, the position information of the ultrasonic probe 12 detected by the position detection processor 14 based on the position information from the position sensor 13, the position information of the MPR image, and the collection order are stored in association with the reference image. . Thus, the positional relationship between the reference image of the patient and the ultrasonic probe 12 is stored. Note that, at this time, a configuration in which the ultrasonic image is also stored as the sub-reference image at the same time may be adopted.
[0056]
Subsequently, in a case where another reference image, for example, another reference image in which the position of the ultrasonic probe 12 is changed is obtained when it is necessary, the processes of Step S24 and Step S25 are repeatedly executed, and If the reference image is not required, the acquisition of the reference image ends. The plurality of reference images collected at this time are stored as one piece of navigation information in association with each other.
[0057]
The diagnostic image based on the navigation information thus obtained can be obtained in the same procedure as in the first embodiment (see FIG. 5).
[0058]
According to such a configuration, an image acquired by another modality can be used as navigation information, and the same effect as in the first embodiment can be obtained. In the present embodiment, the ultrasonic probe can be positioned while simultaneously observing the CT image and the ultrasonic image, so that a higher quality reference image can be obtained. Furthermore, since the reference image of the CT image and the reference image of the ultrasonic image can be obtained at the same time, the work load in generating the reference image can be reduced.
[0059]
(Third embodiment)
The third embodiment uses images acquired by different modalities (such as an X-ray CT apparatus, a magnetic resonance diagnostic apparatus, and a nuclear medicine diagnostic apparatus), such as a three-dimensional X-ray CT image and an MRI image, as navigation information. This is another example.
[0060]
That is, in the second embodiment, the configuration is such that a CT image as a reference image is acquired by referring to an ultrasonic image and a CT image that are linked with the ultrasonic probe. On the other hand, in the present embodiment, a CT image as a reference image is acquired while referring to only the CT image.
[0061]
FIG. 9 is a flowchart for explaining the operation of the navigation system according to the third embodiment, and shows a flow of processing when generating navigation information. In FIG. 9, first, a diagnostic image is collected by another modality, for example, an X-ray CT apparatus, and volume data is generated (step S31).
Next, a cross-sectional image (for example, an MPR image) as a reference image set at, for example, a predetermined slice width or an angle interval from a reference image manually set by the operator based on the position information of the generated volume data Is automatically set by three-dimensional position calculation (step S32). The set cross-sectional image and its position information are stored in the storage medium 30 (Step S33). The acquisition of the reference image and its position information is repeated as necessary (step S34). The cross-sectional image as the reference image and the acquisition of the position information may be configured to be manually set by the operator.
[0062]
The diagnostic image based on the navigation information thus obtained can be obtained in the same procedure as in the first embodiment (see FIG. 5).
[0063]
According to such a configuration, an image acquired by another modality can be used as navigation information, and the same effect as in the first embodiment can be obtained.
[0064]
As described above, the present invention has been described based on the embodiments. However, in the scope of the concept of the present invention, those skilled in the art can come up with various modified examples and modified examples. It is understood that it belongs to the scope of the present invention. For example, as shown in (1) and (2) below, various modifications can be made without changing the gist.
[0065]
(1) In each of the above embodiments, a diagnostic image obtained from an actual subject is used as navigation information. However, the present invention is not limited to this. For example, a configuration may be used in which an animation image created in advance is used as navigation information.
[0066]
(2) In each of the above embodiments, the configuration is such that an appropriate ultrasonic probe placement position is provided by image display or sound. However, the form of providing the appropriate arrangement position of the ultrasonic probe is not limited to this. For example, a configuration may be employed in which a display device such as a liquid crystal or a light emitting diode is provided on the ultrasonic probe 12 itself, and the direction and amount of movement are displayed on the display device based on information from the position detection processor 14.
[0067]
【The invention's effect】
According to the present invention, there is provided an ultrasonic diagnostic apparatus, an ultrasonic probe, and a navigation information providing method in ultrasonic diagnosis that can be easily and appropriately operated even by a non-specialized or inexperienced doctor or technician. realizable.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a schematic configuration of an ultrasonic diagnostic apparatus 10 according to a first embodiment.
FIG. 2 is a diagram for explaining a method of specifying the position and orientation of the ultrasonic probe 12 by a position sensor 13 and a position detection processor 14.
FIG. 3 is a flowchart showing the flow of processing when a technician or the like with abundant experience acquires a reference image used as navigation information.
FIG. 4 is a diagram showing a display screen of a display unit displaying a currently acquired ultrasonic image and a current position of the ultrasonic probe.
FIG. 5 is a flowchart for explaining the operation of the navigation system.
FIG. 6 is a diagram showing a display mode of a reference image on a display unit 28;
FIG. 7 is a diagram showing ultrasonic probe movement information 46 displayed on the display unit 28 and displaying the position of the ultrasonic probe 12 to be moved from the current position of the ultrasonic probe 12;
FIG. 8 is a flowchart for explaining an operation of the navigation system according to the second embodiment.
FIG. 9 is a flowchart for explaining an operation of the navigation system according to the third embodiment.
[Explanation of symbols]
10 Ultrasonic diagnostic equipment
12 Ultrasonic probe
13 Position sensor
14. Position detection processor
21 ... Ultrasonic transmission unit
22 ... Ultrasonic unit
22 ... Ultrasonic receiving unit
23 B-mode processing unit
25 ... DSC
26 ... Image synthesis unit
28 Display unit
29 ... Audio output unit
30 ... Storage medium
31 Network circuit
32 ... Controller
33 ... Navigation processor
40 ... Operation panel
41 ... Ultrasonic image
42 ... Reference image
44… Location information
46 ... Ultrasonic probe movement information
46 ... Moving information

Claims (6)

被検体に対し超音波を送信し、当該被検体からの反射波を受信する超音波プローブと、
前記超音波プローブの位置情報を検出する位置検出手段と、
前記受信した反射波に基づいて、超音波画像を生成する画像生成手段と、
参照画像と前記参照画像に複数の参照位置情報をナビゲーション情報として記憶する記憶手段と、
前記超音波画像と前記参照画像を同時に表示する手段と、
前記位置情報及び前記参照位置情報に基づいて、操作支援情報を提供する情報提供手段と、
を具備することを特徴とする超音波診断装置。
An ultrasonic probe that transmits an ultrasonic wave to the subject and receives a reflected wave from the subject,
Position detecting means for detecting position information of the ultrasonic probe,
Image generating means for generating an ultrasonic image based on the received reflected wave,
Storage means for storing a plurality of reference position information as navigation information in the reference image and the reference image,
Means for simultaneously displaying the ultrasound image and the reference image,
Information providing means for providing operation support information based on the position information and the reference position information,
An ultrasonic diagnostic apparatus comprising:
前記超音波画像及び前記超音波画像を収集した時の前記位置情報に基づいて、前記ナビゲーション情報を生成する手段を生成することを特徴とする請求項1記載の超音波診断装置。2. The ultrasonic diagnostic apparatus according to claim 1, wherein a unit that generates the navigation information is generated based on the ultrasonic image and the position information when the ultrasonic image is collected. 前記参照画像は、アニメーション画像、又はX線CT装置、磁気共鳴診断装置、核医学診断装置の何れかによって取得された診断画像から生成され、超音波画像を撮影する場合に参照される疑似超音波画像であり、
前記位置参照情報は、前記参照画像としてのアニメーション画像又は疑似超音波画像を、超音波診断装置にて取得すると仮想した場合の超音波送受信時における超音波プローブの位置情報であること、
を特徴とする請求項1記載の超音波診断装置。
The reference image is generated from an animation image or a diagnostic image obtained by any of an X-ray CT apparatus, a magnetic resonance diagnostic apparatus, and a nuclear medicine diagnostic apparatus, and is referred to when an ultrasonic image is captured. Image
The position reference information is an animation image or a pseudo ultrasonic image as the reference image, that is, position information of the ultrasonic probe at the time of ultrasonic transmission and reception when it is imagined to be acquired by an ultrasonic diagnostic apparatus,
The ultrasonic diagnostic apparatus according to claim 1, wherein:
前記ナビゲーション手段は、前記位置情報と前記ナビゲーション情報とに基づいて、前記超音波プローブの移動方向又は移動量を音声出力する音声出力手段と有することを特徴とする請求項1乃至3のうちいずれか一項記載の超音波診断装置。4. The navigation device according to claim 1, wherein the navigation unit has a voice output unit that outputs a voice of a moving direction or a moving amount of the ultrasonic probe based on the position information and the navigation information. An ultrasonic diagnostic apparatus according to claim 1. 超音波診断装置に接続され、被検体に対し超音波を送信し、当該被検体からの反射波を受信するための超音波プローブであって、
前記超音波装置からの制御に従って、所望の超音波画像を取得するための当該超音波プローブの移動方向又は移動位置を表示する表示手段を具備すること、
を特徴とする超音波プローブ。
An ultrasonic probe connected to the ultrasonic diagnostic apparatus, transmitting an ultrasonic wave to the subject, and receiving a reflected wave from the subject,
According to the control from the ultrasonic device, comprising a display unit that displays a moving direction or a moving position of the ultrasonic probe for acquiring a desired ultrasonic image,
An ultrasonic probe characterized by the above.
超音波によって被検体内部を走査し、超音波画像を生成するステップと、
前記超音波プローブの位置を検出するステップと、
前記超音波画像と、当該超音波画像を生成するための前記走査時における前記超音波プローブの前記位置情報とを、同時に表示するステップと、
超音波画像を撮影する場合、超音波画像を撮影する場合に参照される参照画像と当該参照画像と対応付けられた超音波プローブの位置参照情報とを含むナビゲーション情報と、前記位置検出手段が検出する位置情報とに基づいて、前記超音波プローブの位置制御に関するナビゲーションを行うステップと、
を具備することを特徴とする超音波診断におけるナビゲーション情報提供方法。
Scanning the inside of the subject with ultrasonic waves to generate an ultrasonic image,
Detecting the position of the ultrasonic probe,
The ultrasonic image and the position information of the ultrasonic probe at the time of the scan for generating the ultrasonic image, simultaneously displaying,
When capturing an ultrasound image, navigation information including a reference image referred to when capturing the ultrasound image and position reference information of an ultrasound probe associated with the reference image, and the position detection unit detects Performing navigation related to position control of the ultrasonic probe, based on
A navigation information providing method in ultrasonic diagnosis, comprising:
JP2002171367A 2002-06-12 2002-06-12 Ultrasonic diagnostic equipment Expired - Fee Related JP4088104B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2002171367A JP4088104B2 (en) 2002-06-12 2002-06-12 Ultrasonic diagnostic equipment
US10/459,560 US7074185B2 (en) 2002-06-12 2003-06-12 Ultrasonic diagnostic apparatus, ultrasonic probe and navigation method for acquisition of ultrasonic image
CNB031255663A CN100525710C (en) 2002-06-12 2003-06-12 Supersonic diagnostic device and supersonic image photographic support method
US11/311,484 US8241215B2 (en) 2002-06-12 2005-12-20 Ultrasonic diagnosis apparatus and method providing navigation information for positioning an ultrasonic probe

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002171367A JP4088104B2 (en) 2002-06-12 2002-06-12 Ultrasonic diagnostic equipment

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007312820A Division JP5134932B2 (en) 2007-12-03 2007-12-03 Ultrasonic diagnostic apparatus and control program for ultrasonic diagnostic apparatus

Publications (2)

Publication Number Publication Date
JP2004016268A true JP2004016268A (en) 2004-01-22
JP4088104B2 JP4088104B2 (en) 2008-05-21

Family

ID=30767639

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002171367A Expired - Fee Related JP4088104B2 (en) 2002-06-12 2002-06-12 Ultrasonic diagnostic equipment

Country Status (3)

Country Link
US (2) US7074185B2 (en)
JP (1) JP4088104B2 (en)
CN (1) CN100525710C (en)

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004089362A (en) * 2002-08-30 2004-03-25 Hitachi Medical Corp Ultrasonic diagnostic apparatus
WO2006059668A1 (en) * 2004-12-03 2006-06-08 Hitachi Medical Corporation Ultrasonic device, ultrasonic imaging program, and ultrasonic imaging method
WO2006068103A1 (en) * 2004-12-20 2006-06-29 Hitachi Medical Corporation Ultrasonographic system and method
WO2006085571A1 (en) * 2005-02-09 2006-08-17 Hitachi Medical Corporation Ultrasonographic device and ultrasonographic method
JP2006271588A (en) * 2005-03-29 2006-10-12 Hitachi Medical Corp Ultrasonic apparatus
JP2006317344A (en) * 2005-05-13 2006-11-24 Olympus Corp Ultrasonic flaw detector
JP2007000439A (en) * 2005-06-24 2007-01-11 Toshiba Corp Ultrasonic diagnostic apparatus
JP2007275588A (en) * 2006-03-31 2007-10-25 Siemens Medical Solutions Usa Inc Cross reference measurement for diagnostic medical imaging
JP2007296330A (en) * 2006-04-27 2007-11-15 General Electric Co <Ge> User interface for automatic multi-plane imaging ultrasound system
JP2007319467A (en) * 2006-06-01 2007-12-13 Toshiba Corp Ultrasonic diagnostic apparatus, and diagnostic program for the same
JP2008142151A (en) * 2006-12-07 2008-06-26 Matsushita Electric Ind Co Ltd Ultrasonic diagnostic apparatus and ultrasonic diagnostic system
JP2008188193A (en) * 2007-02-05 2008-08-21 Hitachi Medical Corp Medical image diagnostic apparatus
JP2009034225A (en) * 2007-07-31 2009-02-19 Olympus Medical Systems Corp Medical guiding system
JP2009056125A (en) * 2007-08-31 2009-03-19 Canon Inc Ultrasonic image diagnostic system and its control method
JP2009112388A (en) * 2007-11-02 2009-05-28 Toshiba Corp X-ray diagnostic apparatus
JP2010017556A (en) * 2008-07-11 2010-01-28 General Electric Co <Ge> System and method for visualization of ultrasound probe relative to object
JP2010119625A (en) * 2008-11-20 2010-06-03 Toshiba Corp Ultrasonic diagnostic imaging apparatus
WO2010064348A1 (en) * 2008-12-05 2010-06-10 キヤノン株式会社 Information processing apparatus, information processing method, and program for positioning medical image
JP2010201049A (en) * 2009-03-05 2010-09-16 Aloka Co Ltd Ultrasonic diagnostic apparatus
JP2011011001A (en) * 2009-07-06 2011-01-20 Toshiba Corp Ultrasonic diagnostic apparatus and processing program therefor
JP2011200655A (en) * 2010-03-17 2011-10-13 General Electric Co <Ge> Medical imaging device including radiographic acquisition means and guide means for ultrasonic probe
JP2011217927A (en) * 2010-04-08 2011-11-04 Toshiba Corp Ultrasonic diagnostic apparatus
JP4897492B2 (en) * 2004-10-08 2012-03-14 株式会社日立メディコ Ultrasonic diagnostic equipment
JP2012223416A (en) * 2011-04-21 2012-11-15 Ge Medical Systems Global Technology Co Llc Ultrasonic diagnosis apparatus and program for controlling the same
JP2012245230A (en) * 2011-05-30 2012-12-13 Ge Medical Systems Global Technology Co Llc Ultrasound diagnostic apparatus and control program of the same
JP2013017870A (en) * 2012-10-31 2013-01-31 Canon Inc Ultrasonic image diagnostic system and control method thereof
JP2013090968A (en) * 2013-02-18 2013-05-16 Toshiba Corp X-ray diagnostic apparatus
WO2014027679A1 (en) * 2012-08-17 2014-02-20 株式会社 東芝 Ultrasound diagnostic device
JP2015016390A (en) * 2014-10-29 2015-01-29 キヤノン株式会社 Ultrasonic image diagnostic system and control method thereof
JPWO2013035393A1 (en) * 2011-09-08 2015-03-23 株式会社日立メディコ Ultrasonic diagnostic apparatus and ultrasonic image display method
JP2015084898A (en) * 2013-10-30 2015-05-07 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Ultrasonic diagnostic device and image analysis device
JP5939601B1 (en) * 2015-03-12 2016-06-22 学校法人早稲田大学 Ultrasonic probe position and orientation presentation system, image generation apparatus and program thereof
JP2016522074A (en) * 2013-06-28 2016-07-28 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Ultrasound acquisition feedback guidance for target view
JP2017502729A (en) * 2013-12-09 2017-01-26 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Image guidance using model-based segmentation
JP2017104751A (en) * 2017-03-27 2017-06-15 キヤノン株式会社 Ultrasonic diagnostic imaging system, and control method of the same
JP2018518226A (en) * 2015-05-07 2018-07-12 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. System and method for motion compensation in medical procedures
WO2018159347A1 (en) * 2017-02-28 2018-09-07 富士フイルム株式会社 Processor device, endoscope system, and method of operating processor device
JP2018139846A (en) * 2017-02-28 2018-09-13 富士フイルム株式会社 Endoscope system and operation method thereof
JP2018139847A (en) * 2017-02-28 2018-09-13 富士フイルム株式会社 Endoscope system and operation method thereof
CN109069103A (en) * 2016-04-19 2018-12-21 皇家飞利浦有限公司 ultrasound imaging probe positioning
JP2020518937A (en) * 2017-05-04 2020-06-25 エムアイエム ソフトウェア, インコーポレイテッド Predictive fusion system and method
CN111551180A (en) * 2020-05-22 2020-08-18 桂林电子科技大学 Smart phone indoor positioning system and method capable of identifying LOS/NLOS acoustic signals
EP4011297A1 (en) 2020-12-08 2022-06-15 Fujifilm Healthcare Corporation Ultrasonic diagnosis system and operation support method

Families Citing this family (81)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4167162B2 (en) * 2003-10-14 2008-10-15 アロカ株式会社 Ultrasonic diagnostic equipment
JP4263579B2 (en) 2003-10-22 2009-05-13 アロカ株式会社 Ultrasonic diagnostic equipment
US7604595B2 (en) * 2004-06-22 2009-10-20 General Electric Company Method and system for performing real time navigation of ultrasound volumetric data
CN101152094B (en) * 2004-08-31 2010-09-29 株式会社东芝 Ultrasound probe diagnosing apparatus, ultrasound diagnostic apparatus, and ultrasound probe diagnosing method
EP1787586B1 (en) 2004-08-31 2008-06-25 Kabushiki Kaisha Toshiba Ultrasound probe diagnosing apparatus, ultrasound diagnostic apparatus, and ultrasound probe diagnosing method
JP4681857B2 (en) * 2004-11-25 2011-05-11 オリンパス株式会社 Ultrasonic diagnostic equipment
US7732768B1 (en) * 2006-03-02 2010-06-08 Thermoteknix Systems Ltd. Image alignment and trend analysis features for an infrared imaging system
EP2015105B1 (en) * 2007-07-13 2011-06-08 eZono AG Opto-electrical ultrasound sensor and system
US20110196235A1 (en) * 2008-04-22 2011-08-11 Allan Dunbar Ultrasound imaging system and method for providing assistance in an ultrasound imaging system
JP5416109B2 (en) * 2008-07-22 2014-02-12 株式会社日立メディコ Ultrasonic diagnostic apparatus and method for calculating coordinates of scan surface thereof
US20160206292A1 (en) * 2008-08-05 2016-07-21 Guardsman Scientific, Inc. Systems and methods for managing a patient
US20220370041A1 (en) * 2008-08-05 2022-11-24 Guardsman Scientific, Inc. Systems and methods for managing a patient
CN102144234A (en) * 2008-09-03 2011-08-03 皇家飞利浦电子股份有限公司 Ultrasound imaging
US8348846B2 (en) * 2008-09-30 2013-01-08 Mediri Gmbh 3D motion detection and correction by object tracking in ultrasound images
US20120278144A1 (en) * 2009-12-21 2012-11-01 Koninklijke Philips Electronics N.V. Imaging apparatus electronic assistant
US20110184284A1 (en) * 2010-01-28 2011-07-28 Warsaw Orthopedic, Inc. Non-invasive devices and methods to diagnose pain generators
US20110301460A1 (en) * 2010-06-04 2011-12-08 Doris Nkiruka Anite Self-administered medical ultrasonic imaging systems
BR112013009972A2 (en) * 2010-10-27 2019-09-24 Koninl Philips Electronics Nv system and method for controlling an imaging equipment to scan a patient
US9498185B2 (en) 2010-11-12 2016-11-22 Konica Minolta, Inc. Ultrasound diagnostic apparatus and ultrasound diagnostic system
JP5835903B2 (en) * 2011-02-03 2015-12-24 株式会社東芝 Ultrasonic diagnostic equipment
WO2012111012A1 (en) 2011-02-17 2012-08-23 Eon Medical Ltd. System and method for performing an automatic and self-guided medical examination
EP3957242A1 (en) 2011-02-17 2022-02-23 Tyto Care Ltd. System, handheld diagnostics device and methods for performing an automatic and remote trained personnel guided non-invasive medical examination
US8953837B2 (en) 2011-02-17 2015-02-10 Tyto Care Ltd. System and method for performing an automatic and self-guided medical examination
EP2491865A1 (en) 2011-02-24 2012-08-29 Samsung Medison Co., Ltd. Ultrasound system for providing image indicator
JP6071282B2 (en) 2011-08-31 2017-02-01 キヤノン株式会社 Information processing apparatus, ultrasonic imaging apparatus, and information processing method
JP6104543B2 (en) * 2011-09-16 2017-03-29 東芝メディカルシステムズ株式会社 Ultrasonic diagnostic apparatus, ultrasonic image display apparatus, and ultrasonic image display method
CN102499715A (en) * 2011-11-23 2012-06-20 东南大学 Identical-trajectory ultrasonic image dynamic contrast system and contrast method thereof
JP5743329B2 (en) * 2012-01-19 2015-07-01 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Ultrasonic diagnostic apparatus and control program therefor
CN102551807A (en) * 2012-02-23 2012-07-11 东南大学 Intelligent ultrasonic diagnostic navigation device based on three-axis gyroscope
JP5926990B2 (en) * 2012-03-16 2016-05-25 シスメックス株式会社 Sample processing equipment
JP2014023715A (en) * 2012-07-26 2014-02-06 Sharp Corp Measurement support device, measurement support method, control program, and recording medium
WO2014065386A1 (en) * 2012-10-26 2014-05-01 株式会社 東芝 Ultrasonic wave diagnostic device
US20140153358A1 (en) * 2012-11-30 2014-06-05 General Electric Company Medical imaging system and method for providing imaging assitance
BR112015014308B1 (en) * 2012-12-21 2022-10-11 Koninklijke Philips N.V APPARATUS AND METHOD FOR GUIDING A USER HANDLING AN IMAGING PROBE
KR101563506B1 (en) * 2013-01-16 2015-10-27 삼성메디슨 주식회사 Ultrasound apparatus and method for providing information using the ultrasound apparatus
JP6342164B2 (en) * 2013-01-23 2018-06-13 キヤノンメディカルシステムズ株式会社 Ultrasonic diagnostic equipment
WO2014136016A1 (en) * 2013-03-05 2014-09-12 Koninklijke Philips N.V. Consistent sequential ultrasound acquisitions for intra-cranial monitoring
KR20150000261A (en) * 2013-06-24 2015-01-02 삼성메디슨 주식회사 Ultrasound system and method for providing reference images corresponding to ultrasound image
EP3013240B1 (en) * 2013-06-28 2017-02-15 Koninklijke Philips N.V. Lung tissue identification in anatomically intelligent echocardiography
KR20150021781A (en) * 2013-08-21 2015-03-03 한국디지털병원수출사업협동조합 An inspection device of three dimensional ultrasound image by patient information and its method of operation
WO2015039302A1 (en) * 2013-09-18 2015-03-26 Shenzhen Mindray Bio-Medical Electronics Co., Ltd Method and system for guided ultrasound image acquisition
US20150359517A1 (en) * 2014-06-11 2015-12-17 Covidien Lp Swipe to see through ultrasound imaging for intraoperative applications
CN105326527B (en) * 2014-08-13 2020-10-30 通用电气公司 Method and device for controlling display of reference image in fused ultrasonic image
TWI605795B (en) * 2014-08-19 2017-11-21 鈦隼生物科技股份有限公司 Method and system of determining probe position in surgical site
KR101705120B1 (en) * 2014-08-28 2017-02-09 삼성전자 주식회사 Untrasound dianognosis apparatus and operating method thereof for self-diagnosis and remote-diagnosis
US9451170B2 (en) * 2014-11-17 2016-09-20 Ricoh Company, Ltd. Image acquisition and management using a reference image
US9558553B2 (en) * 2014-11-17 2017-01-31 Ricoh Company, Ltd. Image acquisition and management using a reference image
KR20160066927A (en) * 2014-12-03 2016-06-13 삼성전자주식회사 Apparatus and method for supporting computer aided diagnosis
CN104546006A (en) * 2015-01-28 2015-04-29 湖北科技学院 Accurately-positioning three-dimensional medical ultrasonic image workstation and system
KR20160107528A (en) * 2015-03-04 2016-09-19 삼성전자주식회사 Apparatus and method for providing reliability for computer aided diagnosis
US10217022B2 (en) 2015-03-06 2019-02-26 Ricoh Company, Ltd. Image acquisition and management
US10136050B2 (en) 2015-03-06 2018-11-20 Ricoh Company, Ltd. Image acquisition and management using a reference image
WO2016201637A1 (en) * 2015-06-17 2016-12-22 Covidien Lp Guided ultrasound breast cancer screening system
US10709416B2 (en) * 2015-06-30 2020-07-14 Wisconsin Alumni Research Foundation Obstetrical imaging at the point of care for untrained or minimally trained operators
US10646199B2 (en) * 2015-10-19 2020-05-12 Clarius Mobile Health Corp. Systems and methods for remote graphical feedback of ultrasound scanning technique
CN109362221A (en) 2016-03-09 2019-02-19 安科诺思公司 Utilize the ultrasound image identifying system and method for smart network
WO2017182417A1 (en) * 2016-04-19 2017-10-26 Koninklijke Philips N.V. Ultrasound imaging probe positioning
US20170360411A1 (en) * 2016-06-20 2017-12-21 Alex Rothberg Automated image analysis for identifying a medical parameter
WO2018105366A1 (en) * 2016-12-06 2018-06-14 富士フイルム株式会社 Ultrasonic diagnosis apparatus and method for controlling ultrasonic diagnosis apparatus
FR3059541B1 (en) * 2016-12-07 2021-05-07 Bay Labs Inc GUIDED NAVIGATION OF AN ULTRASONIC PROBE
US20210295048A1 (en) * 2017-01-24 2021-09-23 Tienovix, Llc System and method for augmented reality guidance for use of equipment systems
CA3049148A1 (en) 2017-01-24 2018-08-02 Tietronix Software, Inc. System and method for three-dimensional augmented reality guidance for use of medical equipment
US20210327304A1 (en) * 2017-01-24 2021-10-21 Tienovix, Llc System and method for augmented reality guidance for use of equpment systems
US20210327303A1 (en) * 2017-01-24 2021-10-21 Tienovix, Llc System and method for augmented reality guidance for use of equipment systems
WO2019046521A1 (en) 2017-08-31 2019-03-07 Butterfly Network, Inc. Methods and apparatus for collection of ultrasound data
WO2019059784A1 (en) * 2017-09-22 2019-03-28 Castaneda Aphan Benjamin System and method for providing a remote assessment using echographic images in an area that does not have a health specialist
JP7290281B2 (en) * 2017-10-03 2023-06-13 株式会社Stroly Information processing device, information system, information processing method, and program
JP2021514695A (en) 2018-02-27 2021-06-17 バタフライ ネットワーク,インコーポレイテッド Methods and equipment for telemedicine
US20190307425A1 (en) * 2018-04-10 2019-10-10 B-K Medical Aps Ultrasound imaging tracking controlled presentation
EP3777700B1 (en) 2018-04-13 2023-03-29 FUJIFILM Corporation Ultrasonic system and method of controlling ultrasonic system
EP3590436A1 (en) 2018-07-06 2020-01-08 Koninklijke Philips N.V. Identifying an optimal image from a number of ultrasound images
US11235178B2 (en) * 2018-09-04 2022-02-01 General Electric Company Neuromodulation energy application techniques
KR20200089000A (en) * 2019-01-16 2020-07-24 삼성메디슨 주식회사 Ultrasound image apparatus and method for controlling thereof
CN110248302B (en) * 2019-05-29 2021-06-08 苏州佳世达电通有限公司 Ultrasonic probe inspection system and ultrasonic probe inspection method
EP3777695A1 (en) 2019-08-13 2021-02-17 Koninklijke Philips N.V. Systems and methods for guiding the acquisition of ultrasound data
US11844654B2 (en) 2019-08-19 2023-12-19 Caption Health, Inc. Mid-procedure view change for ultrasound diagnostics
US11561204B2 (en) 2019-08-28 2023-01-24 Kabushiki Kaisha Toshiba Display control system, inspection control system, display control method, and storage medium
CN110960262B (en) * 2019-12-31 2022-06-24 上海杏脉信息科技有限公司 Ultrasonic scanning system, method and medium
US20210275040A1 (en) * 2020-03-05 2021-09-09 Koninklijke Philips N.V. Ultrasound-based guidance for photoacoustic measurements and associated devices, systems, and methods
CN112237443A (en) * 2020-11-11 2021-01-19 深圳开立生物医疗科技股份有限公司 Ultrasonic imaging data acquisition method and related device
US20220338836A1 (en) * 2021-04-21 2022-10-27 Ultrasight Ltd System and method for guiding positioning and orienting of an ultrasound probe

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5454484A (en) * 1977-10-08 1979-04-28 Tokyo Shibaura Electric Co Ultrasonic wave diagnosis device
JPS57160444A (en) * 1981-03-26 1982-10-02 Aloka Co Ltd Scanner of ultrasonic probe
JPS60199439A (en) 1984-03-26 1985-10-08 富士通株式会社 Ultrasonic diagnostic apparatus
JP3265511B2 (en) 1992-04-24 2002-03-11 株式会社日立メディコ Ultrasound diagnostic equipment
JP3601878B2 (en) 1995-07-13 2004-12-15 株式会社東芝 Ultrasound and nuclear magnetic resonance combined diagnostic equipment
JP3871747B2 (en) 1996-11-25 2007-01-24 株式会社日立メディコ Ultrasonic diagnostic equipment
US6095976A (en) 1997-06-19 2000-08-01 Medinol Ltd. Method for enhancing an image derived from reflected ultrasound signals produced by an ultrasound transmitter and detector inserted in a bodily lumen
JPH1147133A (en) 1997-08-07 1999-02-23 Nippon Telegr & Teleph Corp <Ntt> Ultrasonograph
US6014580A (en) * 1997-11-12 2000-01-11 Stereotaxis, Inc. Device and method for specifying magnetic field for surgical applications
JP4443672B2 (en) * 1998-10-14 2010-03-31 株式会社東芝 Ultrasonic diagnostic equipment
JP2000139905A (en) 1998-11-06 2000-05-23 Olympus Optical Co Ltd Ultrasonograph
JP3645727B2 (en) 1999-01-28 2005-05-11 株式会社日立製作所 Ultrasonic diagnostic apparatus, program for synthesizing panoramic image, and recording medium thereof
JP3016024B1 (en) 1999-02-03 2000-03-06 農林水産省家畜衛生試験場長 Large animal operating table equipment
JP4248091B2 (en) 1999-07-19 2009-04-02 株式会社日立メディコ Slice plane setting mechanism of tomographic image of subject
US6390982B1 (en) * 1999-07-23 2002-05-21 Univ Florida Ultrasonic guidance of target structures for medical procedures
US6379302B1 (en) * 1999-10-28 2002-04-30 Surgical Navigation Technologies Inc. Navigation information overlay onto ultrasound imagery
JP4619481B2 (en) 2000-03-29 2011-01-26 株式会社東芝 Ultrasound diagnostic imaging equipment

Cited By (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004089362A (en) * 2002-08-30 2004-03-25 Hitachi Medical Corp Ultrasonic diagnostic apparatus
JP4897492B2 (en) * 2004-10-08 2012-03-14 株式会社日立メディコ Ultrasonic diagnostic equipment
JP2010051817A (en) * 2004-12-03 2010-03-11 Hitachi Medical Corp Ultrasonic device, ultrasonic imaging program and ultrasonic imaging method
WO2006059668A1 (en) * 2004-12-03 2006-06-08 Hitachi Medical Corporation Ultrasonic device, ultrasonic imaging program, and ultrasonic imaging method
JPWO2006059668A1 (en) * 2004-12-03 2008-06-05 株式会社日立メディコ Ultrasonic device, ultrasonic imaging program, and ultrasonic imaging method
JP5117051B2 (en) * 2004-12-20 2013-01-09 株式会社日立メディコ Ultrasonic diagnostic system and method
JPWO2006068103A1 (en) * 2004-12-20 2008-06-12 株式会社日立メディコ Ultrasonic diagnostic system and method
WO2006068103A1 (en) * 2004-12-20 2006-06-29 Hitachi Medical Corporation Ultrasonographic system and method
US8617075B2 (en) 2005-02-09 2013-12-31 Hitachi Medical Corporation Ultrasonic diagnostic apparatus and ultrasonic imaging method
WO2006085571A1 (en) * 2005-02-09 2006-08-17 Hitachi Medical Corporation Ultrasonographic device and ultrasonographic method
JP2006271588A (en) * 2005-03-29 2006-10-12 Hitachi Medical Corp Ultrasonic apparatus
JP4699062B2 (en) * 2005-03-29 2011-06-08 株式会社日立メディコ Ultrasonic device
JP2006317344A (en) * 2005-05-13 2006-11-24 Olympus Corp Ultrasonic flaw detector
JP4658680B2 (en) * 2005-05-13 2011-03-23 オリンパス株式会社 Ultrasonic flaw detector
JP2007000439A (en) * 2005-06-24 2007-01-11 Toshiba Corp Ultrasonic diagnostic apparatus
JP2007275588A (en) * 2006-03-31 2007-10-25 Siemens Medical Solutions Usa Inc Cross reference measurement for diagnostic medical imaging
JP2007296330A (en) * 2006-04-27 2007-11-15 General Electric Co <Ge> User interface for automatic multi-plane imaging ultrasound system
JP2007319467A (en) * 2006-06-01 2007-12-13 Toshiba Corp Ultrasonic diagnostic apparatus, and diagnostic program for the same
JP2008142151A (en) * 2006-12-07 2008-06-26 Matsushita Electric Ind Co Ltd Ultrasonic diagnostic apparatus and ultrasonic diagnostic system
JP2008188193A (en) * 2007-02-05 2008-08-21 Hitachi Medical Corp Medical image diagnostic apparatus
JP2009034225A (en) * 2007-07-31 2009-02-19 Olympus Medical Systems Corp Medical guiding system
JP2009056125A (en) * 2007-08-31 2009-03-19 Canon Inc Ultrasonic image diagnostic system and its control method
JP2009112388A (en) * 2007-11-02 2009-05-28 Toshiba Corp X-ray diagnostic apparatus
JP2010017556A (en) * 2008-07-11 2010-01-28 General Electric Co <Ge> System and method for visualization of ultrasound probe relative to object
JP2010119625A (en) * 2008-11-20 2010-06-03 Toshiba Corp Ultrasonic diagnostic imaging apparatus
US8165372B2 (en) 2008-12-05 2012-04-24 Canon Kabushiki Kaisha Information processing apparatus for registrating medical images, information processing method and program
WO2010064348A1 (en) * 2008-12-05 2010-06-10 キヤノン株式会社 Information processing apparatus, information processing method, and program for positioning medical image
JP2010131269A (en) * 2008-12-05 2010-06-17 Canon Inc Information processor and information processing method
JP2010201049A (en) * 2009-03-05 2010-09-16 Aloka Co Ltd Ultrasonic diagnostic apparatus
JP2011011001A (en) * 2009-07-06 2011-01-20 Toshiba Corp Ultrasonic diagnostic apparatus and processing program therefor
JP2011200655A (en) * 2010-03-17 2011-10-13 General Electric Co <Ge> Medical imaging device including radiographic acquisition means and guide means for ultrasonic probe
JP2011217927A (en) * 2010-04-08 2011-11-04 Toshiba Corp Ultrasonic diagnostic apparatus
JP2012223416A (en) * 2011-04-21 2012-11-15 Ge Medical Systems Global Technology Co Llc Ultrasonic diagnosis apparatus and program for controlling the same
US9259204B2 (en) 2011-05-30 2016-02-16 General Electric Company Ultrasound diagnostic apparatus and method of displaying medical image thereof
JP2012245230A (en) * 2011-05-30 2012-12-13 Ge Medical Systems Global Technology Co Llc Ultrasound diagnostic apparatus and control program of the same
JPWO2013035393A1 (en) * 2011-09-08 2015-03-23 株式会社日立メディコ Ultrasonic diagnostic apparatus and ultrasonic image display method
WO2014027679A1 (en) * 2012-08-17 2014-02-20 株式会社 東芝 Ultrasound diagnostic device
JP2014036754A (en) * 2012-08-17 2014-02-27 Toshiba Corp Ultrasonograph
JP2013017870A (en) * 2012-10-31 2013-01-31 Canon Inc Ultrasonic image diagnostic system and control method thereof
JP2013090968A (en) * 2013-02-18 2013-05-16 Toshiba Corp X-ray diagnostic apparatus
JP2016522074A (en) * 2013-06-28 2016-07-28 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Ultrasound acquisition feedback guidance for target view
JP2015084898A (en) * 2013-10-30 2015-05-07 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Ultrasonic diagnostic device and image analysis device
JP2017502729A (en) * 2013-12-09 2017-01-26 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Image guidance using model-based segmentation
US11540718B2 (en) 2013-12-09 2023-01-03 Koninklijke Philips N.V. Imaging view steering using model-based segmentation
JP2015016390A (en) * 2014-10-29 2015-01-29 キヤノン株式会社 Ultrasonic image diagnostic system and control method thereof
JP5939601B1 (en) * 2015-03-12 2016-06-22 学校法人早稲田大学 Ultrasonic probe position and orientation presentation system, image generation apparatus and program thereof
JP2018518226A (en) * 2015-05-07 2018-07-12 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. System and method for motion compensation in medical procedures
JP2019514476A (en) * 2016-04-19 2019-06-06 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Positioning of ultrasound imaging probe
CN109069103A (en) * 2016-04-19 2018-12-21 皇家飞利浦有限公司 ultrasound imaging probe positioning
JP2018139846A (en) * 2017-02-28 2018-09-13 富士フイルム株式会社 Endoscope system and operation method thereof
JP2018139847A (en) * 2017-02-28 2018-09-13 富士フイルム株式会社 Endoscope system and operation method thereof
WO2018159347A1 (en) * 2017-02-28 2018-09-07 富士フイルム株式会社 Processor device, endoscope system, and method of operating processor device
JPWO2018159347A1 (en) * 2017-02-28 2019-12-19 富士フイルム株式会社 Processor device, endoscope system, and method of operating processor device
JP2017104751A (en) * 2017-03-27 2017-06-15 キヤノン株式会社 Ultrasonic diagnostic imaging system, and control method of the same
JP2020518937A (en) * 2017-05-04 2020-06-25 エムアイエム ソフトウェア, インコーポレイテッド Predictive fusion system and method
US11580651B2 (en) 2017-05-04 2023-02-14 Mim Software, Inc. System and method for predictive fusion
CN111551180A (en) * 2020-05-22 2020-08-18 桂林电子科技大学 Smart phone indoor positioning system and method capable of identifying LOS/NLOS acoustic signals
CN111551180B (en) * 2020-05-22 2022-08-26 桂林电子科技大学 Smart phone indoor positioning system and method capable of identifying LOS/NLOS acoustic signals
EP4011297A1 (en) 2020-12-08 2022-06-15 Fujifilm Healthcare Corporation Ultrasonic diagnosis system and operation support method
US11744545B2 (en) 2020-12-08 2023-09-05 Fujifilm Healthcare Corporation Ultrasonic diagnosis system configured to generate probe operation support information, and operation support method

Also Published As

Publication number Publication date
CN1494873A (en) 2004-05-12
JP4088104B2 (en) 2008-05-21
US7074185B2 (en) 2006-07-11
US20040019270A1 (en) 2004-01-29
US8241215B2 (en) 2012-08-14
US20060100521A1 (en) 2006-05-11
CN100525710C (en) 2009-08-12

Similar Documents

Publication Publication Date Title
JP4088104B2 (en) Ultrasonic diagnostic equipment
JP5689662B2 (en) Ultrasonic diagnostic apparatus, ultrasonic image processing apparatus, ultrasonic image processing program, medical image diagnostic apparatus, medical image processing apparatus, and medical image processing program
KR101705120B1 (en) Untrasound dianognosis apparatus and operating method thereof for self-diagnosis and remote-diagnosis
US11653897B2 (en) Ultrasonic diagnostic apparatus, scan support method, and medical image processing apparatus
US9192356B2 (en) Ultrasound diagnosis apparatus
JP2011255165A (en) Diagnostic imaging apparatus, diagnostic ultrasonic apparatus, and medical image displaying apparatus
JP6309282B2 (en) Medical diagnostic imaging equipment
JP5134932B2 (en) Ultrasonic diagnostic apparatus and control program for ultrasonic diagnostic apparatus
JP5897674B2 (en) Ultrasonic diagnostic apparatus, image processing apparatus, and image processing program
JP5417048B2 (en) Ultrasonic diagnostic apparatus and ultrasonic diagnostic program
JP6162493B2 (en) Ultrasonic diagnostic equipment
US20100286526A1 (en) Ultrasonic diagnostic apparatus, ultrasonic image processing apparatus and ultrasonic image processing method
JP6956483B2 (en) Ultrasonic diagnostic equipment and scanning support program
JP2018198856A (en) Ultrasonic diagnostic device and ultrasonic diagnosis support device
JP6720001B2 (en) Ultrasonic diagnostic device and medical image processing device
JP2001276061A (en) Ultrasonic image diagnostic device and method for setting diagnostic protocol from remote to ultrasonic image diagnostic device
JP2012075794A (en) Ultrasonic diagnostic apparatus, medical image processor, and medical image processing program
JP2011050625A (en) Treatment support system
JP5597497B2 (en) Ultrasonic diagnostic apparatus, medical image processing apparatus, and medical image processing program
JP2010000198A (en) Ultrasonic diagnosing apparatus and program for controlling ultrasonic diagnosing apparatus
JP5159086B2 (en) Ultrasonic diagnostic apparatus and catheter navigation system
JP2019193778A (en) Ultrasonic diagnostic apparatus and medical information processing device
US20210251606A1 (en) Ultrasonic diagnostic apparatus, operating method of ultrasonic diagnostic apparatus, and storage medium
JP2022012486A (en) Medical image processing apparatus and medical image processing system
JP2015012977A (en) Medical image diagnostic system and medical image diagnostic device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050602

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061121

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070122

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071002

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071203

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20071219

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080222

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110228

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4088104

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120229

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130228

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140228

Year of fee payment: 6

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

Free format text: JAPANESE INTERMEDIATE CODE: R313111

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

Free format text: JAPANESE INTERMEDIATE CODE: R313117

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees