JP2006021043A - 超音波スキャナ間でやり取りさせるシステムおよび方法 - Google Patents

超音波スキャナ間でやり取りさせるシステムおよび方法 Download PDF

Info

Publication number
JP2006021043A
JP2006021043A JP2005194547A JP2005194547A JP2006021043A JP 2006021043 A JP2006021043 A JP 2006021043A JP 2005194547 A JP2005194547 A JP 2005194547A JP 2005194547 A JP2005194547 A JP 2005194547A JP 2006021043 A JP2006021043 A JP 2006021043A
Authority
JP
Japan
Prior art keywords
scanner
ultrasound
ultrasonic
scanners
probe
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005194547A
Other languages
English (en)
Other versions
JP5188013B2 (ja
Inventor
Prakash Parayil Mathew
プラカシュ・パライル・マシュー
Sastry V S Chilukuri
サストリー・ヴイ・エス・チルクリ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
General Electric Co
Original Assignee
General Electric Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Electric Co filed Critical General Electric Co
Publication of JP2006021043A publication Critical patent/JP2006021043A/ja
Application granted granted Critical
Publication of JP5188013B2 publication Critical patent/JP5188013B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/56Details of data transmission or power supply
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4411Device being modular

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

【課題】連結超音波スキャナ(206)用のシステムおよび方法を提供する。
【解決手段】システムは、ネットワークとして構成されている複数の超音波スキャナ(206)と、ただ1つの超音波プローブ(202)を複数の超音波スキャナ(206)に接続する少なくとも1つのコネクタ(104)とを含む。コネクタ(104)は、複数の超音波スキャナ(206)と、超音波プローブ(202)との間でやり取りさせるように構成されている。他の模範的な実施形態では、超音波プローブの動作を制御する方法が提供される。この方法は、複数の超音波スキャナを、やり取りさせて、ただ1つの超音波プローブを制御するように構成していることと、複数の超音波スキャナを用いて、超音波プローブの動作を制御することを含む。
【選択図】図2

Description

本発明は、一般に医用イメージング・システムに関し、詳細には、医用イメージング・システムにおいて、超音波スキャナ間でやり取りさせることに関する。
医用イメージング・システムは、より高画質の画像を提供するスキャンを実行するために、さらに大きな計算能力とメモリを必要としている。特に医用の超音波診断イメージングでは、イメージング処理は、さらに大きい計算処理能力を必要としている。イメージング処理は、超音波イメージングで必要となる画像処理を実行するために、さらに大きいCPU、メモリ、記憶容量を必要とする。画質を向上させるためには、処理されるべきデータ・サイズを大きくする必要がある。さらに、三次元(3D)画像および時変3D動画(4D画像として知られている)として表示される出力は、このようにさらに複雑な生データを処理するために、さらに多くの量の生データと追加処理能力も必要とする。
画質の向上した画像を提供するために、プローブ、または他の医用検査装置は、さらに大きいサイズのデータを捕捉するように構成されなければならない。このようなプローブは、一般に、さらに多くのチャネルを必要とするであろう。さらに良い画質を得るか、あるいはスキャンタイムを短くするために、これらのチャネルを並行して処理することが多い。
米国特許第6753873号
画質を向上させるには、医用イメージング・スキャナの計算能力を高める必要があろう。しかしながら、このためには、現行スキャナを改造したり、現行スキャナを取り替えたり、あるいは、現行スキャナの処理能力が、ただ1回の工程においてデータを処理するのが不充分であれば、段階的にスキャンを実行することが必要となろう。
模範的な一実施形態では、ネットワークとして構成されている複数の超音波スキャナと、これらの複数の超音波スキャナに、ただ1つの超音波プローブを接続する少なくとも1つのコネクタとを含む超音波システムが提供される。このコネクタは、これらの複数の超音波スキャナと、超音波プローブとの間でやり取りさせるように構成されている。
他の模範的な実施形態では、超音波プローブの動作を制御する方法が提供される。この方法は、複数の超音波スキャナを、やり取りさせて、ただ1つの超音波プローブを制御するように構成していることと、複数の超音波スキャナを用いて、超音波プローブの動作を制御することを含む。
本発明の様々な実施形態は、医用イメージング装置を組み合わせるシステムおよび方法を提供する。これらの実施形態は、アプリケーションが高度の計算リソースを必要とするようなアプリケーションの流れにおいて、並行処理を利用している。複数のデータ・チャネルが、トランスジューサ要素を介して、このシステムに流れ込み、かつ、これらの複数のデータ・チャネルの様々な部分が、それぞれ異なるスキャナで処理される。
具体的に言えば、図1は、本発明の模範的な一実施形態による医用イメージング・システムのブロック図である。医用イメージング・システム100は、生入力データを収集する医用検査装置102を含む。このデータは、例えば、超音波プローブからのエコー、あるいは、心電計(ECG)向けデータなどのデータであることもある。医用検査装置102は、例えば、超音波プローブまたは脳波(EEG)針(ニードル、needle)など、どんな医用検査装置であってもよい。医用検査装置102は、コネクタ104を介して、複数の医用イメージング装置106に接続される。コネクタ104は、様々な実施形態において、1つの医用検査装置102を、複数の医用イメージング装置106に接続するインターフェースを提供するように構成されている。コネクタ104はまた、様々な実施形態において、医用検査装置102からのデータを、様々な医用イメージング装置106の間で分けるように構成されることもある。複数の医用イメージング装置(例えば、超音波スキャナ)は、同一タイプのものか、あるいは異なるタイプのものである場合もあり、同一の、または異なる処理特性、通信特性、制御特性を持っていることに留意されたい。
作動しているときは、捕捉されたデータが、コネクタ104を介して医用イメージング装置106に伝えられる。このデータを、医用イメージング装置106で処理して、画像を生成することがある。医用イメージング装置106は、連結配列において、例えば、医用イメージング装置106それぞれの処理能力および/または計算能力を組み合わせるように構成されている。それぞれの医用イメージング装置106は、医用イメージング装置106により受け取られた捕捉データの一部を、本明細書中にさらに詳しく述べられるように処理する。このデータは、例えば、医用イメージング装置106に記憶されたイメージング・アプリケーションまたはイメージング・アルゴリズムを用いて処理される。それにより、それぞれの医用イメージング装置106は、部分結果を生成することがある。これらの部分結果は、例えば、スキャン変換されたデータであることもあり、これらのデータが、通信インターフェース108を介して伝えられ、次に、反対方向に向けられるか、あるいは組み合わされる。次に、これらの併合された、または組み合わされた結果は、例えば、ディスプレイに提供されて、表示させるか、あるいは、要望通りに、または必要に応じて(例えば、画質を高める)、さらに処理されることがある。
制御信号などの情報だけでなく、部分結果も伝えるために、医用イメージング装置106は、通信インターフェース108を介して、やり取りする。本発明の一実施形態では、通信インターフェース108は、有線ネットワークまたは無線ネットワークであるかもしれない通信ネットワーク(例えば、イーサネット(イーサネットは商標。以下同様)またはファイバ・チャネル・ネットワークなど)の一部である。この通信ネットワークは、図4に関連して、さらに詳しく説明する。他の様々なネットワークは、例えば、医用イメージング装置106の通信要件に基づいて、実現されることもある。
図2は、本発明の模範的な実施形態による超音波システム200のブロック図である。超音波システム200は、入力データを捕捉するシステム・プローブ202を含む。例えば、プローブ202は、所定の周波数レンジ内で、人体からのエコーを受け取るように構成されている超音波プローブであることもある。高さフォーカシング(elevational focusing)、画質、または他の要件では、例えば512チャネル型プローブなどの大容量プローブが利用されることがある。プローブ202のすべてのチャネルを、同時に処理する必要がある場合があり、したがって、超音波システム200に対して、512の入力部が必要となる。ブローブ202は、例えば128、256、512、1024、2048などの任意のチャネル数を持つ場合がある。さらに、プローブ202は、例えば、リニア形プローブ、2Dマトリックス形プローブ、または曲線アレイ形プローブなどの任意タイプのプローブであることもある。
作動しているときは、プローブ202は、超音波信号を送って、それらのエコーを受け取る。超音波スキャナ206向けデータを得るために、複数のビームが同時に送られ、かつ受け取られる。同時に送られるビームの使用は、MLT(Multi Line Transmit)として知られている。同時に送られるビームの所要の間隔が、空間的に、あるいは符号の使用により、維持される。このような間隔に符号を使用することは、周知の通り、「Coded Excitation」法と呼ばれている。ビームを送るために生成されたexcitation信号が、符号といっしょに提供される。この符号を送波器で使用して、送波器に伝えられる信号を識別する。送波器は、他のどんな信号も無視し、上記の信号しか受け入れない。本発明の他の実施形態により、収集された入力データは、MLA(Multi Line Acquisition)を用いて受け取られる。
捕捉されたデータ、例えばエコーは、収集された入力データを形成する。この収集された入力データは、プローブ・インターフェースを介して、超音波スキャナ206に伝えられる。このプローブ・インターフェースは、様々な実施形態において、コネクタ204として構成されている。コネクタ204は、超音波プローブ202から受け取られた信号を分割して、その分割された信号の一部を、超音波スキャナ206のそれぞれに提供する。コネクタ204は、図3に関連して、さらに詳しく説明する。
本発明の模範的な一実施形態により、超音波スキャナ206のそれぞれは、例えば128チャネル、256チャネル、または512チャネルなどのデータ処理用の複数のチャネルをサポートしている。それぞれの超音波スキャナ206には、このデータの一部だけを提供して、超音波スキャナ206に、このデータの該当部分だけを処理させるようにしている。
超音波スキャナ206は、イメージング・システム200に接続され、また、通信インターフェース208を介して互いに接続される。通信インターフェース208は、例えば、生データ、処理されたデータ、結果、制御信号などの情報の伝送を可能にする。本発明の一実施形態では、通信インターフェース208は、2つ以上の通信ネットワークを含む。これらの通信ネットワークは、高速または低速の有線ネットワークまたは無線ネットワークであってもよい。さらに、超音波スキャナ206が2つだけ図示されているが、追加の超音波スキャナ206を相互接続してもよい。
作動しているときは、これらの複数のスキャナ206のうちの1つが選択されて、「マスター」スキャナとして構成されている。一実施形態では、このただ1つのマスター・スキャナのユーザ・コントロールは、操作可能であって、ユーザが利用できる。さらに、データの処理から得られた画像はまた、この実施形態において、このマスター・スキャナに関連するディスプレイ上でのみ表示される。他のスキャナ206は、「スレーブ」として構成されている。本発明の様々な実施形態では、異なる組合せおよび異なる数のスキャナ206が提供される場合がある。このような場合、ただ1つのスキャナがマスター・スキャナとして構成されており、残りのスキャナは、マスター・スキャナ206で制御されるスレーブ・スキャナとして構成されている。本発明の一実施形態により、マスター・スキャナ206は、利用されるプローブ202上に設けられて、かつアクセスされるチャネルの数に基づいて、データを処理するのに必要なスキャナの数を決定し、かつ/または、必要とされるスキャナ206だけと接続し/やり取りする。
それぞれのスキャナ206のバックエンド・プロセッサ(例えば、コンピュータ)上にあるソフトウェアにより、スキャナ206は、周知のように、マスターとして、あるいはスレーブとして構成できる。スキャナ206のプロセッサを構成することにより、スキャナ206を構成して、必要なマスター・スレーブ・モードを形成できる。マスター・スキャナ206は、例えば、スレーブ・スキャナ206のIPアドレスなど、スレーブ・スキャナ206のそれぞれに関する情報を受け取ることになる。マスター・スキャナ206はさらに、例えば、スキャナ206の中にマスター・スキャナ206が2つあるといった矛盾がないことも保証している。このような矛盾は、ユーザ構成に基づいて、解決されることがある。
それぞれのスキャナ206(マスター・スキャナ206を含む)は、プローブ202上で利用できるチャネルの一部だけを動作させ、制御する。したがって、それぞれのスキャナ206は、その収集された入力データの一部だけを、スキャナ206が制御しているチャネルから、受け取る。例えば、超音波プローブ202が512チャネル型プローブであり、かつスキャナ206が2つある場合には、マスター・スキャナ206がプローブ202のチャネル1〜256を制御し、またスレーブ・スキャナ206がプローブ202のチャネル257〜512を制御するか、あるいは、その逆が行われる。
一実施形態では、データのフロントエンドの信号伝送・処理は、すべてのスキャナ206によって、並行して行われる。したがって、ビームパラメータの計算、スキャン順序付け、送波、受波、アナログ/ディジタル変換とビームフォーミングEQフィルタリング、ビットマップ(BMP)処理、およびスキャン制御バス機能などのそれぞれのスキャナ206の機能は、プローブ202を制御するのに利用できる。それぞれのスキャナ206は、スキャナが捕捉するか、または受け取るデータに基づいて、部分結果を生成する。例えば、結果として、それぞれのスキャナ206から、処理またはスキャン変換されたB−Mモードのベクトル・データまたはIQ(カラー・ドップラー用)は、その部分結果を表わす。複合型スキャンでは、すべての部分結果は併合されるか、または組み合わされて、例えば、集合体画像(例えば、高画質の画像)を得る。本発明の様々な実施形態では、マスター・スキャナ206は、これらの部分結果を併合するか、あるいは組み合わせて、1つの完全な画像を形成する。しかしながら、これらの部分結果は、他の場所、例えば、スレーブ・スキャナ206、または専用処理機にて、併合される場合もある。
図3は、本発明の模範的な一実施形態により、コネクタ204として構成されているプローブ・インターフェースを示すブロック図である。コネクタ204は、512チャネルを持つ超音波プローブ202など、複数の出力チャネルを持つ1つのプローブ202を、それよりも少ないチャネルをそれぞれが持つ2つ以上のスキャナ206、例えば、それぞれが256チャネルを持つ2つの超音波スキャナ206に接続する。それゆえ、コネクタ204は、512チャネルを、2組の256チャネルに分ける。しかしながら、コネクタ204は、これらのチャネルを、異なるサイズの組のチャネル(例えば、4組の128チャネル)に分割するように構成される場合があることに留意されたい。
例えば、それぞれの超音波スキャナ206は、256チャネルのメス・コネクタを含むが、ただし、超音波プローブ202は、512チャネルのオス・コネクタを持つことがある。次に、コネクタ204は、512チャネルの1つのメス・コネクタと、256チャネルの2つのオス・コネクタを持つように構成されていて、コネクタ204のコネクタが、プローブ202のコネクタと、スキャナ206のコネクタにそれぞれ嵌まるようにしている。
ケーブル302とケーブル304(例えば、撓みケーブル)は、超音波プローブ202を超音波スキャナ206に接続するために提供される。ケーブル304は、コネクタ204の2つの脚部(leg)を形成しており、一実施形態において、その長さが等しい。ケーブル304の長さが等しいことから、これら2つの脚部に沿って送られるだけでなく、受け取られるもするそれぞれの超音波パルスの伝搬距離が等しくなる。ケーブル304は、超音波スキャナ206上のコネクタ・ポートに到達するような長さに合わせて形成されている。ケーブル302とケーブル304は、複数の電線またはケーブルを含む場合があることに留意されたい。本発明の模範的な一実施形態により、これらのケーブルの数は、「CMUT(Capacitive Micromachined Ultrasound Technology)」(CMUT技術)を用いて減らされる。
本発明の模範的な一実施形態では、発光ダイオード(LED)などのインジケータを備えて、電気機械式接続の状態を表示することがある。これらのLEDを駆動するための給電は、超音波スキャナ206の1つから得られる。この給電は、ケーブル・バンドル中の専用線を通じて、提供されることもある。
入力データは、コネクタ204を介して、ケーブル302とケーブル304によって、スキャナ206に提供される。しかしながら、以下に述べられるように、部分結果をやり取りするために、他の通信手段が提供されることもある。さらに、スレーブ・スキャナ206は、以下に述べられるように、マスター・スキャナ206のユーザ・コントロールを通じて、ユーザ向けユーザ・コマンド入力も受け取る。
図4は、本発明の模範的な一実施形態による通信インターフェースのブロック図である。超音波プローブ202(図2に示される)に接続された(例えば、連結通信において)スキャナ206は、互いにやり取りするように構成されている。2つのタイプの通信ネットワークが提供される。一方は、通信時間が重要ではない通信ネットワークであり、また、他方は、通信時間が重要である(例えば、超音波プローブ202の要素の並行制御の同期動作のために)高速通信ネットワークである。
作動しているときに、いかなるユーザも、例えばゲインなどのコントロールを変更することができる。一実施形態では、このような変更は、マスター・スキャナ206のユーザ・コントロールを介して入力される(例えば、GUI)。このユーザ入力(例えば、変更)は、スレーブ・スキャナ206に伝えられる。スレーブ・スキャナ206に伝えられる上記のユーザ・コマンドは、一般に、時間について重要でなく、ゆえに、高速通信リンクを介して伝えられることはない。さらに、超音波ビームフォーミング・パラメータおよび幾何形状に関するプローブ・セットアップなどのセットアップ・データを超音波システムにプレロードできるか、あるいは、これらのパラメータを、それぞれのユニットを用いて、リアルタイムで計算できるので、このようなリンクは、小さい帯域幅を持つことができる。この通信は、一般に、例えばTCP/IP(Transmission Control Protocol/Internet Protocol)を用いて、イーサネット・リンクを介するように設計されている。スキャナ206は、例えば病院ネットワークなどのサイト・ネットワークの一部であることもある。次に、スキャナ206のネットワークは、このサイト・ネットワークのインフラ上で、バーチャル・サブグループとして構成されることがある。本発明の様々な実施形態により、イーサネット・インフラ402は、このようなやりとりを提供する。例えば、プローブまたはモード設定の変更、アプリケーションの変更、一般に、他のリアルタイムのユーザ処置または入力などの制御信号は、イーサネット・インフラ402を用いて、スレーブ・スキャナに伝えられる。このイーサネット・リンクはまた、データ・トラフィックをやり取りして、スキャナ206の状態を維持する。スキャナ206の状態はまた、絶えず監視され、また、アラームは、イーサネット・インフラ402を用いてチェックされる。チェックされるアラームは、例えば、スキャナ206の電源オフ、電源リセット、ビームフォーマ・フロントエンドのリセット、温度障害状態、通信リンクのダウン、コネクタ障害などのアラームであることもある
スキャナ206は、コネクション404を通じて、イーサネット・インフラ402に接続される。コネクション404は、例えば有線または無線であることもある。例えば、コネクション404は、ケーブルが使えない場所で、壁を通して、あるいは遠距離にわたって、やり取りするために、無線であってもよい。本発明の様々な実施形態により、二次ネットワーク・ケーブル406が、例えば、NIC(Network Interface Card)カードおよびハブを介して、スキャナ206のそれぞれに接続される。例えば、二次ネットワーク・ケーブル406は、カテゴリ5(ISO(国際標準化機構)規格による)のケーブル(CAT−5ケーブル)であることもある。
ユーザ・コマンドの伝送は、帯域幅集約型のものではなく、したがって、イーサネット・インフラ402上で、かつネットワーク・ケーブル406を介して伝えられる。結果データの伝送は、さらに多くの時間がかかり、かつ帯域幅集約型のものである。例えば、1024フレームで、かつ512ポイント/フレームでは、Bモードのフレームに対して、約2MBのデータが生成される。60フレーム/秒(fps)では、約120MB/sのデータが生成される。したがって、それぞれのスレーブ・スキャナ206から、約60MB/sの転送速度が必要とされることがある。マスター・スキャナ206と、必要とされる転送速度(例えば、少なくとも60MB/s)で転送できるそれぞれのスレーブ・スキャナ206との間に、標準またはメーカー独自仕様(プロプライエタリ)のインターフェース408が提供される。
メーカー独自仕様または標準のインターフェース408は、一実施形態において、データ集合体リンクとして構成されている高速シリアル・リンクを含む。メーカー独自仕様または標準の高速シリアル・リンクは、少なくとも60MB/sの代表的なデータ転送速度を持つ同期高速リンクである。これらのリンクは、スキャナ206間を接続するために、機械的にたわみ、かつ展開できるケーブルとして提供される場合もある。
一実施形態では、メーカー独自仕様または標準のインターフェース408は、GigE(ギガビット・イーサネット)である。マスター・スレーブ構成を維持するのに使用されるGigEリンクは、部分結果をマスター・スキャナ206に伝えるためにも使用される。GigEは、例えば、スキャナのバックエンド上に電気光学式トランシーバを持つ光ファイバを使って、物理的に実現されることがある。GigEは、70MB/sまでの全二重データ・レートを提供する。それよりも低いフレーム・レートでは、スキャナ206を、イーサネット・インフラ402などのサイト通信インフラに接続するのに用いられるイーサネット・コネクション404を使用する。それぞれのスキャナ206上に別のNICカードを用いて、専用の二次GigEコネクションも提供される場合がある。TCP/IP処理を可能にするために、それぞれのスキャナ206は、専用のCPUカードを含むTOE(TCP Offload Engine)を使用して、TCPパケットをパックしてリフォームする(編成し直す)ことがある。Remote Direct Memory Accessを用いて、データを、それぞれの側のDMA(Direct Memory Access)フレーム・バッファから読み出して、それを、じかにスレーブ側のデュアル・ポート・メモリに入れる。
データがマスター・バックエンド・プロセッサに伝えられると、このデータを処理して、最終集合画像(例えば、高解像度/高画質の画像)を形成する。マスター・スキャナ206のバックエンド・プロセッサは、大容量のプロセッサであることもある。本発明の様々な実施形態により、マスター・プロセッサ・バックエンドにデュアルCPUアーキテクチャを使用している。このバックエンドでは、スレーブ・スキャナ206(および、マスター・スキャナ206)のそれぞれからスキャン変換されたデータを処理する。このような処理は、このデータの外挿と、これを処理してピクセル空間を形成することを含む場合もある。このピクセル空間は、最終画像を表現できる空間である。次に、この画像を、マスター・スキャナ206のディスプレイ上に表示することがある。本発明の他の様々な実施形態では、マスター・スキャナ206のバックエンドに、ただ1つの大容量CPUを使用することがある。
様々な実施形態では、最終表示画像は、個々の部分結果を併合し、処理することで生成される。これらの部分結果を併合している間、2つの部分結果間の境界は不連続であることもある。2つの部分結果が、異なるスキャナのエッジ・ベクトルからもたらされた結果として、このような不連続が発生することがある。
図5と図6は、部分結果を組み合わせるための処理を例示したブロック図である。本発明の様々な実施形態により、図5に示されるように、プローブ202(図2に示される)のいくつかの中心チャネルは、2つ以上のスキャナ206(図2に示される)により、共用されて、制御されることがある。図示されるように、一方のスキャナ206は、チャネル1〜256を制御し、また、他方のスキャナ206は、チャネル250〜506を制御する。しかしながら、それぞれのチャネルは、いつでも、ただ1つのスキャナ206により制御されるべきである。コネクタ204(図2に示される)は、所与の時間に、ただ1つのスキャナ206で、それぞれのチャネルを確実に制御できるようにするハードウェア保護を含む場合がある。他の実施形態では、この重なり合ったチャネル・データは、それらの共用されたチャネルに対応する領域にわたって平均を取ることで、併合されることがある。本発明の他の実施形態では、小さな重なり領域に沿って、図6に示される遷移重みグラフ(transition weighting profile)を使用して、このデータを併合することがある。この重なり領域は、2つの部分結果の境界に対応する。
本発明の一実施形態により、中央バックエンド・プロセッサを持つ医用超音波イメージング・システムが提供される。図7は、中央バックエンド・プロセッサを持つ医用超音波イメージング・システムを示すブロック図である。
医用超音波イメージング・システム600は、例えば、キーボードやコントロールなどのユーザ入力を持つ大容量の専用コンピュータまたはサーバー・スタンドアロン・バックエンド・プロセッサ602を含む。スタンドアロン・バックエンド・プロセッサ602は、送受波ボードなどのフロントエンド構成要素を持っていない。スタンドアロン・バックエンド・プロセッサ602は、2つの標準連結スキャナ604を制御するマスター・スキャナとして構成されることがある。このバックエンド・リソースは、グリッド・コンピューティング(grid computing)を用いて実施されることがある。
スキャナ604は、スレーブ・モードにある。本発明の様々な実施形態では、3つ以上のスキャナ604が提供されて、スレーブ・モードで構成されることがある。これらのスキャナ604は、スタンドアロン・バックエンド・プロセッサ602に連結される。スキャナ604は、標準のスキャナよりも少ないハードウェアを含むことがある。例えば、モニタやキーボードなどのハードウェアは、スキャナ604の一部として提供されることはない。
本明細書中に述べられる実施形態の様々な構成要素および動作は、要望通りに、または必要に応じて変更される場合があることに留意されたい。例えば、メーカー独自仕様または標準のインターフェース408(図4に示される)は、10ギガビット・イーサネット(Xaui)であることもある。10ギガビット・イーサネットは、光ファイバの物理リンク上でやり取りされる4つの3.125GB/sシリアル・データストリームを持っている。10ギガビット・イーサネットは、120MBの全バックエンドIQデータなどの大量のデータをやり取りすることがある。例えば、3つ以上のスキャナ206(図2に示される)を互いに連結しているときに、10ギガビット・イーサネットを使用することがある。
さらに、例えば、外挿などの処理の一部は、それぞれの連結スキャナ206により実行されることがある。よって、スキャン変換されたデータを、部分結果として、マスター・スキャナ206のバックエンド、またはバックエンド・プロセッサ602に転送するのではなく、部分画像部分(例えば、処理されたデータ)を、バックエンド・プロセッサ602としてマスター・スキャナ206のバックエンドに転送することがある。例えば、12ビットのコントラスト深度にて、1024×768のピクセル解像度のディスプレイを持つスキャナ206が2つある場合には、1フレームにつき、約1.5MBの非圧縮データを転送する必要があろう。これは、前述のスキャン変換されたデータの約2MB/sというレートに匹敵する。転送されるデータは、ハードウェアまたはソフトウェアの無損失圧縮を用いて圧縮されることがある。
本発明の様々な実施形態を使用して、ノートブック型/ラップトップ型のイメージング装置を連結することで、システム全体のスペース要件を減らすことがある。
本発明の様々な実施形態は、例えば、さらに安価で、かつ処理能力のさらに低い複数のプラットフォームを使用して、複雑な画像処理を実行する医用イメージング・システムを提供する。変更は、例えば、データ転送スキャナをスキャナ高速I/Oインターフェースに変更することなど、ハードウェア変更のように、要望通りに、または必要に応じて、スキャナ206に対して行われる場合がある。
本発明の実施形態の技術的な効果は、生データを分割して、それを、それぞれの連結スキャナにおいて、並行して処理することで、医用イメージング・システムで生データを処理する(例えば、リアルタイムのデータまたは後処理されるデータとして処理する)速度が高められることである。
本発明のいくつかの実施形態の他の技術的効果は、スキャナの柔軟性が高められることである。計算リソースを増やせば、例えば、EQプロセッサ、Bモード・プロセッサ、カラー・プロセッサ、ドップラー・プロセッサなどのスキャナの処理アルゴリズムが、ハードウェアではなくて、ソフトウェアで実現されることがある。これは、処理アルゴリズムのすぐ適応できる改良だけでなく、ルールベースの、学習され、かつ決定論的な再構成などのさらに容易な再構成も可能にする。このような目的で、専用のバックエンド・プロセッサが用いられる。これらの処理アルゴリズムは、このプロセッサにおいて、ソフトウェアで実現され、それにより、再構成および改良が容易に行われる。
本発明は、様々な具体的な実施形態の点から述べられてきたが、当業者であれば、本発明は、併記の特許請求の範囲の精神および範囲に入る変更を加えて実施できることが理解されよう。また、図面の符号に対応する特許請求の範囲中の符号は、単に本願発明の理解をより容易にするために用いられているものであり、本願発明の範囲を狭める意図で用いられたものではない。そして、本願の特許請求の範囲に記載した事項は、明細書に組み込まれ、明細書の記載事項の一部となる。
本発明の模範的な一実施形態による医用イメージング・システムのブロック図である。 本発明の模範的な一実施形態による超音波システムのブロック図である。 本発明の模範的な一実施形態によるコネクタを示すブロック図である。 本発明の模範的な一実施形態による通信インターフェースのブロック図である。 本発明の模範的な一実施形態により、部分結果を組み合わせる処理を示す図である。 本発明の模範的な一実施形態により、部分結果を組み合わせる処理を示す図である。 本発明の模範的な一実施形態による中央バックエンド・プロセッサを持つ医用超音波イメージング・システムのブロック図である。
符号の説明
100 医用イメージング・システム
102 医用検査装置
104 コネクタ
106 医用イメージング装置
200 超音波システム
202 超音波プローブ
206 超音波スキャナ
304 ケーブル

Claims (10)

  1. ネットワークとして構成されている複数の超音波スキャナ(206)と、
    ただ1つの超音波プローブ(202)を前記複数の超音波スキャナ(206)に接続する少なくとも1つのコネクタ(104)であって、前記複数の超音波スキャナ(206)と、前記超音波プローブ(202)との間でやり取りするように構成されているコネクタ(104)と、
    を備える超音波システム(200)。
  2. 前記複数の超音波スキャナ(206)が、前記超音波プローブ(202)に関連して使用する複合型コンピューティング・リソースを提供するように構成されている請求項1に記載の超音波システム(200)。
  3. 前記少なくとも1つのコネクタ(104)が、前記複数の超音波スキャナ(206)を前記コネクタ(104)に接続するケーブル(304)をさらに備え、かつ、前記ケーブル(304)のそれぞれが、ほぼ同じ長さを持つ請求項1に記載の超音波システム(200)。
  4. 前記複数の超音波スキャナ(206)が、マスター・スレーブ配置にて構成されて、1つの超音波スキャナがマスターとして構成されており、また少なくとも1つの超音波スキャナがスレーブとして構成されている請求項1に記載の超音波システム(200)。
  5. 前記マスター超音波スキャナ(206)が、スキャン変換されたデータを前記スレーブ超音波スキャナから受け取り、また、前記マスター超音波スキャナ(206)が、前記受け取られたスキャン変換されたデータを処理して、画像を生成するように構成されている請求項4に記載の超音波システム(200)。
  6. 前記マスター超音波スキャナ(206)が、画像データを前記スレーブ超音波スキャナから受け取り、また、前記マスター超音波スキャナ(206)が、前記受け取られた画像データを処理して、画像を生成するように構成されている請求項4に記載の超音波システム(200)。
  7. 前記複数の超音波スキャナ(206)のそれぞれが、前記超音波プローブ(202)のスキャン部分の少なくとも一部を制御するように構成されている請求項1に記載の超音波システム(200)。
  8. 前記超音波プローブ(202)の前記スキャン部分のうち、前記複数の超音波スキャナ(206)のそれぞれにより制御される部分が異なる請求項7に記載の超音波システム(200)。
  9. 互いにやり取りするように構成されている複数の医用イメージング装置(106)と、
    ただ1つの医用検査装置(102)を前記複数の医用イメージング装置(106)に接続するコネクタ(104)であって、前記複数の医用イメージング装置(106)と、前記医用検査装置(102)との間でやり取りするように構成されているコネクタ(104)と、
    を備える医用イメージング・システム(100)。
  10. 超音波プローブ(202)の動作を制御する方法であって、
    複数の超音波スキャナ(206)を、互いにやり取りするように構成して、ただ1つの超音波プローブを制御するステップと、
    前記複数の超音波スキャナを用いて、前記超音波プローブの動作を制御するステップと、
    を含む方法。
JP2005194547A 2004-07-07 2005-07-04 超音波スキャナ間でやり取りさせるシステムおよび方法 Active JP5188013B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/885,870 2004-07-07
US10/885,870 US7955264B2 (en) 2004-07-07 2004-07-07 System and method for providing communication between ultrasound scanners

Publications (2)

Publication Number Publication Date
JP2006021043A true JP2006021043A (ja) 2006-01-26
JP5188013B2 JP5188013B2 (ja) 2013-04-24

Family

ID=35542310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005194547A Active JP5188013B2 (ja) 2004-07-07 2005-07-04 超音波スキャナ間でやり取りさせるシステムおよび方法

Country Status (3)

Country Link
US (1) US7955264B2 (ja)
JP (1) JP5188013B2 (ja)
DE (1) DE102005031830A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012522570A (ja) * 2009-04-01 2012-09-27 アナロジック コーポレイション 超音波プローブ

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7496695B2 (en) * 2005-09-29 2009-02-24 P.A. Semi, Inc. Unified DMA
US7620746B2 (en) * 2005-09-29 2009-11-17 Apple Inc. Functional DMA performing operation on DMA data and writing result of operation
US7624242B2 (en) * 2006-03-31 2009-11-24 Intel Corporation Operating system agnostic sharing of proteced memory using memory identifiers
EP2086400A4 (en) * 2006-07-17 2010-05-05 Signostics Pty Ltd IMPROVED MEDICAL DIAGNOSTIC DEVICE
US8069279B2 (en) * 2007-03-05 2011-11-29 Apple Inc. Data flow control within and between DMA channels
EP2934323A4 (en) * 2012-12-21 2016-08-17 Andrew Hancock SYSTEM AND METHOD FOR MULTI-PASS PROCESSING OF IMAGE SIGNALS
US10275375B2 (en) 2013-03-10 2019-04-30 Mellanox Technologies, Ltd. Network interface controller with compression capabilities
AU2014235032B2 (en) 2013-03-15 2017-11-09 Butterfly Network, Inc. Monolithic ultrasonic imaging devices, systems and methods
US9667889B2 (en) 2013-04-03 2017-05-30 Butterfly Network, Inc. Portable electronic devices with integrated imaging capabilities
EP3024594A2 (en) 2013-07-23 2016-06-01 Butterfly Network Inc. Interconnectable ultrasound transducer probes and related methods and apparatus
CN106456115B (zh) 2014-04-18 2020-03-20 蝴蝶网络有限公司 超声成像压缩方法及设备
WO2015161157A1 (en) 2014-04-18 2015-10-22 Butterfly Network, Inc. Architecture of single substrate ultrasonic imaging devices, related apparatuses, and methods
TWI536015B (zh) * 2015-03-24 2016-06-01 佳世達科技股份有限公司 超音波掃描系統及超音波掃描方法

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02283358A (ja) * 1989-04-25 1990-11-20 Yokogawa Medical Syst Ltd 並列処理超音波診断装置
JPH0316560A (ja) * 1989-06-14 1991-01-24 Matsushita Electric Ind Co Ltd 超音波診断装置の信号処理方法
JPH04319340A (ja) * 1991-04-19 1992-11-10 Toshiba Corp 超音波診断装置
JPH05188138A (ja) * 1991-11-13 1993-07-30 Hitachi Constr Mach Co Ltd 計測装置の検査方法、超音波検査装置の検査方法、電子走査式超音波検査装置、力覚センサシステムの検査方法および力覚センサシステム
JPH0981021A (ja) * 1995-09-19 1997-03-28 Yamashita Denshi Sekkei:Kk 学習システム
JP2000028589A (ja) * 1998-07-10 2000-01-28 Toshiba Corp 3次元超音波画像化装置
JP2001258888A (ja) * 2000-03-15 2001-09-25 Toshiba Corp 超音波診断の装置及びその方法、画像診断のシステム及びその方法、並びに課金方法
JP2001526928A (ja) * 1997-12-31 2001-12-25 アナロジック コーポレーション 超音波信号を遅延させるための方法および装置
JP2002336241A (ja) * 2001-05-02 2002-11-26 Terarikon Inc ネットワーク環境における三次元画像表示装置
JP2002360570A (ja) * 2001-06-06 2002-12-17 Aloka Co Ltd 超音波診断装置
JP2003233674A (ja) * 2002-02-06 2003-08-22 Hitachi Medical Corp 医用情報管理システム
WO2003094712A2 (en) * 2002-05-08 2003-11-20 Philips Intellectual Property & Standards Gmbh System for point of care diagnosis and/or analysis
JP2004120094A (ja) * 2002-09-24 2004-04-15 Fuji Photo Film Co Ltd 画像情報処理システム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4209852A (en) * 1974-11-11 1980-06-24 Hyatt Gilbert P Signal processing and memory arrangement
US5361385A (en) 1992-08-26 1994-11-01 Reuven Bakalash Parallel computing system for volumetric modeling, data processing and visualization
US5492125A (en) * 1995-02-10 1996-02-20 University Of Washington Ultrasound signal processing apparatus
US5787889A (en) * 1996-12-18 1998-08-04 University Of Washington Ultrasound imaging with real time 3D image reconstruction and visualization
US5853367A (en) * 1997-03-17 1998-12-29 General Electric Company Task-interface and communications system and method for ultrasound imager control
US6171244B1 (en) * 1997-12-31 2001-01-09 Acuson Corporation Ultrasonic system and method for storing data
US6526163B1 (en) * 1998-11-23 2003-02-25 G.E. Diasonics Ltd. Ultrasound system with parallel processing architecture
US6578002B1 (en) * 1998-11-25 2003-06-10 Gregory John Derzay Medical diagnostic system service platform
JP3391301B2 (ja) 1999-07-09 2003-03-31 ウシオ電機株式会社 加工用レーザ装置
US6325759B1 (en) * 1999-09-23 2001-12-04 Ultrasonix Medical Corporation Ultrasound imaging system
US6440071B1 (en) * 1999-10-18 2002-08-27 Guided Therapy Systems, Inc. Peripheral ultrasound imaging system
US6350239B1 (en) * 1999-12-28 2002-02-26 Ge Medical Systems Global Technology Company, Llc Method and apparatus for distributed software architecture for medical diagnostic systems
US6753873B2 (en) 2001-01-31 2004-06-22 General Electric Company Shared memory control between detector framing node and processor
AU2002362438A1 (en) * 2001-10-04 2003-04-14 Case Western Reserve University Systems and methods for noninvasive electrocardiographic imaging (ecgi) using generalized minimum residual (gmres)
US6633833B2 (en) * 2001-12-14 2003-10-14 Ge Medical Systems Global Technology Company, Llc Method and apparatus for remote diagnosis of an ultrasound scanner
US7998072B2 (en) * 2003-12-19 2011-08-16 Siemens Medical Solutions Usa, Inc. Probe based digitizing or compression system and method for medical ultrasound

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02283358A (ja) * 1989-04-25 1990-11-20 Yokogawa Medical Syst Ltd 並列処理超音波診断装置
JPH0316560A (ja) * 1989-06-14 1991-01-24 Matsushita Electric Ind Co Ltd 超音波診断装置の信号処理方法
JPH04319340A (ja) * 1991-04-19 1992-11-10 Toshiba Corp 超音波診断装置
JPH05188138A (ja) * 1991-11-13 1993-07-30 Hitachi Constr Mach Co Ltd 計測装置の検査方法、超音波検査装置の検査方法、電子走査式超音波検査装置、力覚センサシステムの検査方法および力覚センサシステム
JPH0981021A (ja) * 1995-09-19 1997-03-28 Yamashita Denshi Sekkei:Kk 学習システム
JP2001526928A (ja) * 1997-12-31 2001-12-25 アナロジック コーポレーション 超音波信号を遅延させるための方法および装置
JP2000028589A (ja) * 1998-07-10 2000-01-28 Toshiba Corp 3次元超音波画像化装置
JP2001258888A (ja) * 2000-03-15 2001-09-25 Toshiba Corp 超音波診断の装置及びその方法、画像診断のシステム及びその方法、並びに課金方法
JP2002336241A (ja) * 2001-05-02 2002-11-26 Terarikon Inc ネットワーク環境における三次元画像表示装置
JP2002360570A (ja) * 2001-06-06 2002-12-17 Aloka Co Ltd 超音波診断装置
JP2003233674A (ja) * 2002-02-06 2003-08-22 Hitachi Medical Corp 医用情報管理システム
WO2003094712A2 (en) * 2002-05-08 2003-11-20 Philips Intellectual Property & Standards Gmbh System for point of care diagnosis and/or analysis
JP2004120094A (ja) * 2002-09-24 2004-04-15 Fuji Photo Film Co Ltd 画像情報処理システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012522570A (ja) * 2009-04-01 2012-09-27 アナロジック コーポレイション 超音波プローブ

Also Published As

Publication number Publication date
JP5188013B2 (ja) 2013-04-24
US7955264B2 (en) 2011-06-07
DE102005031830A1 (de) 2006-02-16
US20060009695A1 (en) 2006-01-12

Similar Documents

Publication Publication Date Title
JP5188013B2 (ja) 超音波スキャナ間でやり取りさせるシステムおよび方法
US20160030003A1 (en) Ultrasonic diagnostic device and method for supporting synchronous scanning with multiple probes
EP3748965B1 (en) Ultra low latency video communication
US20060058655A1 (en) Ultrasonic transducer having a thin wire interface
KR20170001175A (ko) 고속 단거리 인터페이스용 안드로이드 시스템을 위한 다중 영상 장치 및 이미지 처리 방법
WO2015088054A1 (ko) 초음파 영상에 대한 설정치 조정 방법 및 장치
CN101569539B (zh) 远程图像传输方法、远程超声波诊断系统及装置
WO2020168853A1 (zh) 超声成像设备
WO2016065766A1 (zh) 一种超声装置
KR102186739B1 (ko) 저속 장거리 인터페이스용 안드로이드 시스템을 위한 다중 영상 장치 및 이미지 처리 방법
CN113208653A (zh) 一种超声图像采集处理系统
US10292569B2 (en) Signal processing device and medical observation system
CN103153194A (zh) 超声诊断设备
WO2019112256A1 (ko) 광간섭단층영상 시스템 및 그 처리방법
CN103036822A (zh) 超声成像系统数据传输装置及方法
CN209821622U (zh) 信号采集系统
WO2015080316A1 (ko) 초음파 영상 재구성을 위한 데이터 처리 방법 및 장치
EP3751798A1 (en) System controller, network system, and method in network system
CN211723086U (zh) 一种医疗设备系统
CN220439252U (zh) 一种斜视智能分析终端
CN113180730B (zh) 一种分布式波束成像方法
US11284865B2 (en) Ultrasonic diagnostic apparatus and method for controlling pulse repetition frequency
KR200283044Y1 (ko) 교환기 가입자 보드의 직렬 데이터 통신 장치
KR20090058447A (ko) Bc-모드 영상을 형성하는 초음파 시스템 및 방법
KR100935036B1 (ko) 카운터 내장형 모듈을 구비한 스프리터

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080701

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101130

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110215

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110215

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110215

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110512

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120627

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130122

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160201

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5188013

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250