JP2004181240A - 超音波撮像により撮像される対象物の境界を生成するシステム及び方法 - Google Patents

超音波撮像により撮像される対象物の境界を生成するシステム及び方法 Download PDF

Info

Publication number
JP2004181240A
JP2004181240A JP2003401517A JP2003401517A JP2004181240A JP 2004181240 A JP2004181240 A JP 2004181240A JP 2003401517 A JP2003401517 A JP 2003401517A JP 2003401517 A JP2003401517 A JP 2003401517A JP 2004181240 A JP2004181240 A JP 2004181240A
Authority
JP
Japan
Prior art keywords
search
image data
tracking
gui
search area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003401517A
Other languages
English (en)
Inventor
Tan Guo
タン グオ
Cedric Chenal
シュナル セドリック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of JP2004181240A publication Critical patent/JP2004181240A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/04Analysing solids
    • G01N29/06Visualisation of the interior, e.g. acoustic microscopy
    • G01N29/0609Display arrangements, e.g. colour displays

Landscapes

  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Investigating Or Analyzing Materials By The Use Of Ultrasonic Waves (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】撮像される関心の対象物の実際の境界を正確に検出し、追跡し検索領域を生成する方法及びシステムを提供する。
【解決手段】関心対象物の超音波画像を追跡する際、実際の境界の検索方法で、少なくとも1つの画像データ素子のアレイを含む入力画像データの受信段階と、画像データの処理段階と、処理画像データとグラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含むGUIの生成段階と、GUI上に含まれる関心対象物の境界追跡に関連付けられるユーザ入力カーソル動作コマンドの受信段階と、カーソルで示されるGUI上の場所に関連付けられる一連の追跡点を制しえする段階と、各追跡点に関連付けられ、且つ、少なくとも1つの選択可能なパラメータを有する検索領域の生成段階と、実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データの検索段階を含む。
【選択図】図5

Description

本発明は一般的に、超音波撮像に関り、特に、追跡においてユーザを支援するシステム及び方法に係る。この支援には、境界を追跡する際に、対象物の実際の境界を見つけるべく選択可能なサイズを有する検索領域を供給することを含む。
患者の診断撮像を行う超音波撮像システムは、一般的に、ディスプレイモニタを有するディスプレイモジュールに接続する、変換器を収容するプローブと、プローブから受信した信号を処理し、且つ、ディスプレイモニタ上で表示される画像を生成するようその信号を更に処理する処理モジュールとを含む。技師は、プローブを患者の上に置いて、患者の体内の関心領域を撮像する。変換器は、患者の体内に音響エネルギーを送り、また、体内からの音響エネルギーを受け取り、受信した超音波を、ディスプレイモジュールに供給される電気信号に変換する。技師は、表示画像をフリーズさせ得る、即ち、プローブからの信号のライブ捕捉を、及び/又は、信号の処理を止め得る。従来において、超音波撮像システムにおいて、測定ツールとして知られるソフトウェアモジュールが設けられ、本願では、追跡ツールとも称する。追跡ツールは、表示画像と共に表示されるカーソルといった位置インジケータを与える。技師は、トラックボールといったポインティングデバイスを用いてカーソルを動かし得る。追跡ツールを用いて、技師は、開始点を選択し、カーソルを動かして、撮像される関心領域内の関心の対象物の輪郭を追跡し、それにより、ディスプレイモニタ上に関心の対象物の輪郭を描く追跡線が生成される。そして、測定及び他の解析を関心の対象物に行うことができる。
しかし、関心の対象物の正確な解析は、関心の対象物の輪郭を決める追跡線の精度に依存する。正確な追跡線を生成する能力は、関心の対象物を正確に見る技師の能力と、ディスプレイモニタ上で表示される画像の精度及び解像度と、追跡を行う際の技師の調整力と、人間によるエラー等により制限される。
従って、超音波撮像により撮像される関心の対象物の実際の境界を正確に追跡する方法及びシステムが必要である。
更に、追跡をする際に、関心の対象物の実際の境界を正確に検出する追跡手順の高速処理を行う方法及びシステムが必要である。
更に、撮像される関心の対象物の実際の境界を検索するための検索領域を生成する方法及びシステムが必要である。
最後に、撮像される関心の対象物の実際の境界を検索するための検索領域を生成し、且つ、その検索領域のサイズを選択可能に制御する方法及びシステムが必要である。
本発明の1つの面は、追跡においてユーザを支援するシステム及び方法を提供する。この支援には、境界を追跡する際に、対象物の実際の境界を見つけるべく選択可能なパラメータを有する検索領域を供給することを含む。超音波撮像システムによって撮像される関心の対象物を追跡する際に、検索機能を行うために、少なくとも1つのプロセッサ上で実行可能な検索ソフトウェアモジュールを提供する。超音波撮像システムは、少なくとも1つのプロセッサに動作可能に接続し、少なくとも1つのプロセッサに、少なくとも1つの画像データ素子のアレイを含む画像データを供給するプローブと、少なくとも1つのプロセッサに動作可能に接続し、処理された画像データとグラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含むGUIを表示するディスプレイ手段と、少なくとも1つのプロセッサに動作可能に接続し、GUI上に表示される関心の対象物の境界に沿ってカーソルを動かすことにより、追跡のためのGUI上の所望の場所を指し示すようカーソルを操作することをユーザに可能にするユーザ入力手段を含む。超音波撮像システムは更に、少なくとも1つのプロセッサ上で実行可能であり、GUIを生成するために画像データ及びユーザカーソル動作を処理し、GUIをディスプレイ手段に供給するディスプレイソフトウェアモジュールと、少なくとも1つのプロセッサ上で実行可能であり、関心の対象物の境界を追跡する際に、カーソルにより指し示されるGUI上の場所に関連付けられる一連の追跡点を生成する追跡ツールソフトウェアモジュールと含む。検索ソフトウェアモジュールは、一連の追跡点の各追跡点に関連付けられる検索領域を生成し、各検索領域は、少なくとも1つの選択可能なパラメータを有する。このモジュールは、関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データを検索し、少なくとも1つの画像データ素子は、各検索領域に関連付けられる少なくとも1つの修正点を画成する。
関心の対象物の超音波画像を追跡する際に、関心の対象物の実際の境界を検索する方法を開示する。この方法は、少なくとも1つの画像データ素子のアレイを含む入力画像データを受信する段階と、画像データを処理する段階と、処理された画像データと、グラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含むGUIを生成する段階と、GUIに含まれる関心の対象物の境界の追跡に関連付けられるユーザ入力カーソル動作コマンドを受信する段階と、カーソルにより指し示されるGUI上の場所に関連付けられる一連の追跡点を生成する段階と、各追跡点に関連付けられ、且つ、少なくとも1つの選択可能なパラメータを有する検索領域を生成する段階と、追跡される関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データを検索する段階を含む。
超音波撮像システムの少なくとも1つのプロセッサにより実行されるよう構成されるプログラム可能な命令のセットを格納するコンピュータ可読媒体を更に提供する。プロセッサは、少なくとも1つの画像データ素子のアレイを含む入力画像データを受信する段階と、超音波撮像システムにより撮像される関心の対象物の境界の追跡に対応する画像データ素子のアレイの一連の画像データ素子を取得する段階と、一連の画像データ素子の各画像データ素子に関連付けられ、画像データ素子のアレイのサブセットを含み、画像データ素子のアレイのサブセットを決める少なくとも1つの選択可能なパラメータを有する検索領域を生成する段階と、追跡される関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データのアレイのサブセットを検索する段階を含む。
図面を参照しながら本発明の様々な実施例を以下に説明する。
図1を参照するに、本発明による超音波画像を生成且つ表示する超音波撮像システムを示すブロック図を示す。ここでは、超音波撮像システムには、参照番号10を付ける。システム10は、プローブ14、モニタ16、及び、ユーザ入力装置18に接続するコンソール12を含む。コンソール12は、ディスプレイモジュール22と、関連付けられる検索モジュール25を有する追跡ツールモジュール24とを有する1つ以上のプロセッサ20を含む。
プローブ14は、コンソール12に、ケーブル26により接続して、プローブデータ28をコンソール12に供給する。プローブ14は、撮像される患者の体内に音響エネルギーを送り、また、体内からの音響エネルギーを受け取り、受信波を電気信号に変換する変換器(図示せず)を含む。電気信号は、1つ以上の信号プロセッサ34により処理され、デジタル画像データ32が生成される。この処理には、例えば、アナログ‐デジタル変換、ビームフォーミング処理、及び/又は、フィルタリング処理等が含まれる。1つ以上の信号プロセッサ34は、プローブ14又はコンソール12内に収容されても、又は、電気信号を受信し画像データ32を出力するようケーブル26に接続されてもよい。
ユーザ入力装置18は、1つ以上のボタン、キーボード、マイクロホン、タッチパッド、及び/又は、1つ以上のスイッチといったユーザデータ捕捉手段や、マウス、ジョイスティック、キー等のポインティングデバイスを含み、コンソール12にデータ及びコマンドを供給するよう、技師によるデータ入力及びユーザコマンドを得る。モニタ16は、コンソール12から表示画像データを受信し、技師に対し、取得した超音波画像と、追跡ツールモジュール24の出力と、他の情報を表示するためのグラフィカルユーザインタフェース(CUI)17を表示する。GUI17は、カーソルも画面上に表示されることが好適であり、カーソルの場所及び動作は、ポインティングデバイスの1つを用いることにより制御することができる。ユーザ入力装置18及び追跡ツールスイッチ40は、インタフェース52及び54をそれぞれ介してプロセッサ20に接続する。
ディスプレイモジュール22、追跡ツールモジュール24、及び、検索モジュール25は、全て、プロセッサ20によって実行可能なソフトウェアモジュールであり、それぞれ、1つ以上のプロセッサにより実行可能である。ディスプレイモジュール22と、追跡ツールモジュール24と、検索モジュール25のそれぞれの少なくとも一部は、同一のプロセッサ上で実行されることが可能である。検索モジュール25は、追跡ツールモジュール24内に含まれても、別個であってもよく、また、追跡ツールモジュール24によって起動されることが可能である。ディスプレイモジュール22、追跡ツールモジュール24、及び、検索モジュール25は、1つ以上のプロセッサのモジュールの当該技術において知られているように互いに通信する。
ディスプレイモジュール22、追跡ツールモジュール24、及び、検索モジュール25は、コンピュータハードドライブといったメモリ記憶装置、RAM又はROMモジュールといったメモリモジュール、及び/又は、CD−ROMといったコンピュータ可読媒体内に格納され、プロセッサ20によって実行のためにアクセスされることが可能であることが好適である。
技師は、超音波撮像システム10の一人以上のユーザであり得る。技師は、プローブ14を操作して、撮像される関心の領域の画像データを取得する。画像データは、例えば、画像画素の二次元アレイの各画素に対応する輝度値を含む。技師は更に、ユーザデータ及び/又はコマンドを入力することによりコンソールを操作し、画像データを表示するようコンソールに命令する。ディスプレイモジュールは、画像データを処理して、表示画像データを生成し、この表示画像データは、GUI17を介して表示のためにモニタに供給される。画像データは、例えば、表示画素の2次元アレイの座標に対応するグレイスケール値を含む。画像に関連付けられる表示データの各表示画素は、画像データの少なくとも1つの画像画素に対応する。
撮像される関心領域の表示は、スナップショット、又は、仮想リアルタイムで生成される一連のフレームとして供給され得る。技師は、撮像される関心の領域に含まれ、GUI17上で表示される関心の特定の対象物に関連付けられる更なるデータを入手するよう選択し得る。例えば、技師は、寸法及び/又は容積といった測定を得ること、関心の対象物内における所望の特徴を見つけ出す及び/又は調査すること、及び/又は、関心の対象物に関連付けられる特性を調査することに興味を抱く場合がある。従って、技師は、例えば、ディスプレイ自体をフリーズすることによって、関心の対象物が表示される画像、及び/又は、フレームに関連付けられる表示画像データを保存する。
ポインティングデバイスにより制御されるカーソルといった追跡ツールを用いて、技師は、GUI17上に表示される関心の対象物の輪郭を追跡する。ユーザ入力装置18を介して、技師は、追跡モードに入るために追跡ツールを作動させ、これは、追跡ツールモジュール24を作動させる。技師は、(所望される場合には)追跡設定を入力し(所望されない場合は、デフォルト値が用いられる)、ポインティングデバイスを用いてGUI17上に表示されるカーソルで1つの場所を指し示し且つ選択して追跡開始点を選択し、ポインティングデバイスを、関心の対象物の境界に沿って輪郭を描くよう案内することにより、カーソルでGUI17上に表示される関心の対象物の輪郭を追跡し、それにより関心の対象物の境界に沿っての輪郭を描く。追跡処理時のカーソルの動作は、追跡データを生成し、追跡データには、カーソルで追跡した追跡輪郭の座標と、好適には、カーソル動作の速度と、カーソルの動作に関連付けられる動きベクトルの加速度及び向きが含まれる。
図2Aを参照するに、従来の追跡ツールを用いて生成される例示的なGUI17aを示す。実際の境界202aを有する関心の対象物200aを示す。技師が追跡した輪郭204aをGUI17a上に表示する。図示するように、技師により追跡される輪郭204aは、実際の境界202aと一致しない。技師により追跡される輪郭204aと実際の境界202aの格差は、例えば、人間のエラー、正確な輪郭を作成するためのポインティングデバイスを介したカーソルの案内を技師が調整できないこと、実際の境界202aを表示したGUI上の画面が明瞭ではないことといった要因により引き起こされる。
図2Bは、本発明による、検索モジュール25を介して与えられる検索機能を有する追跡ツールを用いながら生成される例示的なGUI17bを示す。図2Aに示すGUI17aと同様に、GUI17bも、実際の境界202bを有する関心の対象物200bと、技師により追跡される輪郭204bを表示する。修正された輪郭206が、GUI17b上に表示され、照準線として示す修正輪郭206は、検索モジュール25によって生成される。図示するように、修正輪郭206は、実際の境界202bに略重なる。
修正輪郭は、技師が追跡を行っている際に、又は、技師が追跡を終了した後に、或いは、それらの組合わせで生成される。追跡が行われているときの修正輪郭206の生成を、図3を参照しながら以下に説明する。関心の対象物の実際の境界を示す。技師は、ユーザ入力装置18を介して追跡モードを選択し、追跡を開始するGUI17c上の開始場所を選択することにより、追跡を開始する。また、追跡は、ポインティングデバイスを用いて開始場所を指し示す又はクリックすることにより始められる。追跡ツールモジュール24は、開始場所にある追跡開始点304aを生成する。追跡ツールモジュール24は、検索モジュール25を作動させる又は起動させることによって追跡開始点304aを処理する。検索モジュール25は、追跡開始点304aに関連付けられる検索領域306aを生成する。検索モジュール25は、検索領域306aにおいて検索を行い、実際の境界302上の1つ以上の点を探す。このことは、検索領域306a内の最も明るい点又は鋭いエッジを見つける従来のエッジ検出アルゴリズムを用いて、エッジ検出処理を行うことにより行われる。検索領域306a内で行われる検索の結果見つかった点が、修正点308aとなる。修正点308aは、1つ以上の点であり得る。
技師が、ポインティングデバイスを操作することによってカーソルを動かすと、追跡ツールモジュール24は、追跡線に沿って一連の追跡点304b−304nnを生成する。例えば、各追跡点304b−304nnについて、検索モジュール25が起動され、それぞれの検索領域306b−306nnが生成される。各検索領域306は、例えば、エッジ検出方法を用いて、実際の境界302上の1つ以上の点を見つけるべく連続的に検索され、各検索の結果が、修正点、又は、修正点のセット308b−308nnとして指定される。1つの修正点308b−nnが生成されると、前に生成される修正点308a−nnは、精巧な輪郭310により接続される。この精巧な輪郭310は、実際の境界302と略一致する又は重なる。
或いは、技師は、関心の対象物の完全な追跡又は一部の追跡を行い、その後に、指示が追跡ツールモジュール24に自動的に又は技師によって送られ、それまでに生成される追跡点に関して処理が始められるべきことを指示される。指示を受信すると、追跡ツールモジュール24は、検索ツール25を起動して、各追跡点304a−nnを処理する。即ち、各追跡点304a−nnについて検索領域306a−nnを生成し、各検索領域306a−nn内でエッジ検出アルゴリズムを実行して、実際の境界302に実質的にある、又は、近接する修正点308a−nnを見つける。各修正点308a−nnは接続されて、修正輪郭310を形成する。追跡点304a−nnは、特に、高速処理が優先される場合には、並列で処理され得る。追跡点304a−nnは、少なくとも1つの追跡点304a−nnの処理の結果が次なる追跡点304b−nnの処理に用いられる場合、直列で処理され得る。
検索領域306内のエッジ検出処理は、エッジ、即ち、関心の対象物の境界を表す強い輝度コントラストを有する画像データにおける点を見つけるために用いられる。当該技術において周知であるエッジ検出処理は、例えば、フーリエドメインにおいて高域周波数フィルタを適用するか、又は、空間ドメインにおいて適切なカーネルで画像データを畳み込み演算することにより行われ得る。エッジは、画像データ中の強い照明勾配に対応し、これは、画像データの導関数に対応する。エッジ検出方法は、画像データの第1の導関数、即ち、勾配、又は、画像データの第2の導関数、即ち、ヘッセ(Hessian)の生成と、それの処理が関連し得る。2次元画像における第1の導関数を生成するために用いる方法は、例えば、プレウィット(Prewitt)、ソーベル(Sobel)、キルシュ(Kirsch)、及び、ロビンソン(Robinson)カーネルといったカーネルを用いるプレウィットコンパスエッジ検出法と、ソーベル、ロバートクロス(Roberts Cross)、カニー(Canny)、及びプレウィットオペレータといったカーネルを用いる勾配エッジ検出法を含む。画像の第2の導関数を生成する方法は、例えば、ガウス(LoG)フィルターのラプラシアンを含む。
エッジ検出処理の間に、当該技術において知られるフィルタリング及び/又は平滑化アルゴリズムを画像データ及び抽出された勾配データに用いて、ノイズ感度を最小限にする、ノイズの拡大を最小限にする、また、コヒーレントな勾配データを確実にし得る。フィルタリング及び平滑化は、例えば、ガウスフィルタリング、及び/又は、強い曲率制約を用いる平滑化により、画像データに行われ得る。更に、例えば、エッジ検出処理により検出されたエッジといったように複数のエッジの候補から、修正輪郭310に含まれるべきエッジを選択するアルゴリズムを用い得る。例えば、ダイクストラ(Dijkstra)のアルゴリズムといった最短経路処理を行うアルゴリズムを用い得る。
図4A乃至4Eに関連して、それぞれ、検索領域400a−eの例示的な構成を示す。生成される検索領域の少なくとも1つのパラメータは選択可能であり、その選択は、技師により行われるか、検索モジュール25により自動的に行われるか、又は、それらの組合わせによって行われる。選択可能なパラメータは、例えば、幅、高さ、又は、直径といった検索領域の寸法「d」か、及び/又は、検索精度であることが好適である。
図4Aにおいて、例示的な検索領域400aは、選択可能な幅「d」を有する矩形に構成される。矩形検索領域400aの高さ「h」は、固定されるか、又は、技師及び/又は追跡ツールモジュール24によって選択可能であり得る。図4Bにおいて、例示的な検索領域400bは、長さ「l」と、長さ「l」の中間点において選択可能な幅「d」を有する正三角形に構成され、ここにおいて、長さ「l」は、固定されるか、技師及び/又は追跡ツールモジュール24によって選択可能であり得る。図4Cにおいて、例示的な検索領域400cは、選択可能な直径「d」を有する円形に構成される。図4Dにおいて、例示的な検索領域400dは、短軸が選択可能な直径「d」を有する楕円形に構成され、ここにおいて、例えば、主軸の直径といった楕円形の他のパラメータは固定されるか、技師及び/又は追跡ツールモジュール24によって選択可能であり得る。図4Eにおいて、例示的な検索領域400eは、選択可能な幅「d」を有する正方形に構成される。
更に、いずれかの追跡点304a−nnの位置に対する検索領域400a−eの位置に関して、検索領域400a−eの構成は、固定されるか、又は、技師及び/又は追跡ツールモジュール24によって選択可能であり得る。例えば、各例示的な検索領域400a−eは、点「a」又は点「b」のいずれかに位置付けられる追跡点304a−nnに対して位置付けられる。
図3を参照するに、検索領域306a−nnの構成は、同一であっても、選択可能に可変であってもよい。検索領域306a−nnのパラメータの可変性の選択、及び、可変パラメータの変化の制御は、技師及び/又は検索モジュール25によって行われる。例えば、技師又は検索モジュール25は、連続的に検索領域306a−nnが生成されるに従って、検索領域306a−nnのサイズ及び形状が変わるよう選択し得る。
検索領域306の生成には、1つ以上の前に生成された修正点308の位置を含む履歴データの処理が関連し得る。処理された履歴データを用いて検索領域306を生成することにより、技師及び/又は追跡ツールモジュール24は、特に、履歴データが、実際の境界302は、予測可能な曲線に従い、実際の境界302の検出するには小さい検索領域で十分であり、検索領域306は、検索領域306の周辺位置に最後の追跡点304が置かれて位置付けられるよう順方向にされる。同様に、技師及び/又は追跡ツールモジュール24は、実際の境界302は、予測することが困難な曲線に従っていることを判断すると、大きい検索領域306の生成を保証し、検索領域306は、最後の追跡点304が、検索領域306の中心に置かれて位置付けられる。更に、履歴データを用いて、検索領域が方向付けられる。検索領域306は、開始追跡点304aに関連して生成され、開始追跡点304には、利用可能な履歴データがなく、比較的大きい寸法を有し、追跡点304aは、中間点に置かれて位置付けられる。
処理が最小限にされる1つの実施例では、検索領域306の構成は、検索を開始する前に技師によって選択される。ここでは、検索領域306b−nnは、不変の順方向検索領域である。検索領域は、開始追跡点304aについて生成されるのではなく、追跡ツールモジュール24は、技師により入力される開始追跡点304aが比較的正確であることに依存する。
検索領域306が一度生成されると、検索モジュール25は、上述したようなエッジ検出方法を用いて検索アルゴリズムを行う。検索される検索領域306に用いられる解像度と、行われる検索の精度は、技師、及び/又は、検索モジュール25により選択可能であり得る。選択される解像度は、全ての検索領域306a−nnについて固定されても、又は、解像度は、検索領域306a−nnについて選択可能に可変であり得る。更に、検索領域内の領域は重み付けられることが可能であり、それにより、各領域は異なる解像度を有する。検索領域306、又は、比較的高い解像度を有する領域において、検索は、より綿密に行われ、比較的大量の処理を必要とし、また、その反対も可能である。処理速度を最大限にするために、検索領域及び解像度が一度選択されると、各検索領域306における検索処理は、他の検索領域306に行われる検索処理とは別個のローカル処理であることが好適である。
上述したように、検索領域306の解像度及び/又は構成の選択は、技師及び/又は検索モジュール25により行われる。例えば、技師及び/又は検索モジュール25は、例えば、検索領域のサイズを小さくし、順方向検索をテーパ検索領域において用い、及び/又は、解像度を減少することにより、検索の始まりの部分が検索され処理された後には、検索の精度を減少するよう選択し得る。同様に、技師及び/又は検索モジュール25は、追跡される実際の境界302の部分が、比較的予測可能でない曲線により形成されると判断すると、方向付けられていない正方形、矩形、又は、円形の検索領域を用いて、検索領域306のサイズを増加して、及び/又は、解像度を増加することによって、検索の精度を増加するよう選択し得る。検索の精度の変更は、選択される関数に応じて連続的に行われるか、又は、例えば、所定の条件を満たすと増分するように行われ得る。
1つの実施例では、検索モジュール25は、追跡を行っている際に技師がカーソルを動かす速度を判断し、そして、検索モジュール25は、カーソル動作の速度に比例して検索の精度を選択する。検索の精度は、カーソル動作の速度に反比例する。従って、技師は、例えば、ポインティングデバイスを操作する際の自分の動作の速度を制御することによりカーソルを動かす速度を制御して、検索の精度を制御し得る。1つの実施例では、検索モジュール25は、修正点308の生成に戻る前に、技師による有効化及び/又は補正のために一次停止し、且つ、待機する。
1つの実施例では、マルチ解像度処理を用いて、よりロバストな超音波画像の解析を提供する。この実施例では、サブバンド及びダウンサンプリング画像が、異なる解像度で生成され、互いに別個に解析される。ダウンサンプリングの度合いと解像度は、技師及び/又は検索モジュール25により選択可能である。各サブバンドについての解析の結果の知識(例えば、単純な輝度又は勾配推定)は、解析により抽出される情報のレベルを飛躍的に増加する。入力画像は、マルチ解像度ラプラシアンピラミッドを用いて分解される。この演算が、異なる解像度におけるサブバンド画像とダウンサンプリング画像を提供し、これらの画像は、全体として、画像データと比較してデータ量が減少される。抽出されるサブバンドの数は、ユーザ及び/又は検索モジュールの選択に応じて、調節可能である。従って、マルチ解像度処理は、選択されるサブバンド画像及びダウンサンプリング画像の解像度を減少することによって処理されるデータ量を最小限にし、一方で、正確な実際の境界検出の精度を維持する。処理が最小限にされると、処理速度が増加し、技師による追跡の高速なカーソル動作に追いつくよう修正境界310の高速生成が可能となり、実際の境界302の検出と修正境界310の生成を実質的にリアルタイムで行うことを可能にする。
1つの実施例では、検索モジュール25には、撮像される組織の種類、関心の対象物の性質、及び/又は、関心の対象物に関連付けられる組織のプリセットに関するデータが供給される。検索モジュール25は、最適な検索を行うよう関連するデータに応じて、検索のパラメータを設定するよう選択し得る。
検索モジュール25により行われる検索機能は、追跡ツールモジュール24及び/又は技師により、実行可能又は実行不可能にされ得る。検索機能の実行可能化は、例えば、当該技術において知られているように、セットアップメニュ、コンテキストに合わせて変化するメニュ、キー又はボタンの組合わせを介して、又は、右マウスクリックを用いて制御され得る。更に、ゼロの値の直径の選択といった検索パラメータの値の選択は、検索機能を実行不可能にし得る。検索機能が実行不可能にされると、追跡は、従来の追跡ツールと同様に、検索無しで行われる。
別の実施例では、ユーザが、実際の境界302を追跡するのを支援するために、カーソルが、最近に生成された修正点に自動的に動かされるオプションが与えられる。ユーザは、手動により入力するカーソル位置によって、自動的に選択されるカーソル位置を無効にし得る。
更なる実施例において、技師及び/又は検索モジュール25は、ユーザが、所望の場所において、関心の対象物の輪郭に対応しない追跡線を追跡するよう追跡ツールを用いることを可能にするよう選択し得る。検索モジュール25は、上述したように、実際の境界302に対する、技師が位置付けたカーソルの距離に応じて、実際の境界302の検索、検出における追跡支援の度合い、及び/又は、追跡点304を修正点308に置き換えることを重み付けし得る。
追跡モジュール24と検索モジュール25は、表示データを、表示モジュール22に供給して、ディスプレイモジュール22は、修正輪郭310を表示する。ディスプレイは、更に、追跡点304、及び/又は、検索領域306を表示し得る。これらを表示することは、技師及び/又は検索モジュール25により選択可能である。
追跡を行う際にGUI上に表示される、追跡に用いられるカーソルの形状、色等は、検索領域のサイズ、形状、向き、検索の方向、及び、検索の解像度といった検索の精度に関連付けられる1つ以上のパラメータを示し得る。例えば、検索領域の直径は、カーソルの直径により示され得る。
画像データは、3次元で提供され得ることが考えられる。この3次元データは、3次元画像を生成するよう2次元ディスプレイ上で表示される。カーソルは、3次元ポインティングデバイスにより動作され、それにより、追跡を行い、3次元における追跡点を生成する。検索モジュール25は、各追跡点に関連付けられる選択可能なパラメータを有する3次元検索領域を生成し、検索モジュール25は、3次元における修正点を見つけるべく各検索領域で検索を行う。3次元の修正輪郭は、修正点を用いて生成される。
本発明による追跡ツールを用いる超音波撮像システム10の動作を、図5の動作フローチャートを参照しながら説明する。段階502において、追跡ツールモジュール24は、技師が追跡ツールを実行可能にするまで待機する。段階504において、追跡ツールモジュール24は、データの一部が与えられてデータの一部を追跡し、追跡点を生成する。段階506において、追跡ツールモジュール24は、検索モジュール25を起動させる。段階508において、検索モジュール25は、検索領域パラメータデータを取得する、及び/又は、検索領域パラメータデータを生成する。段階510において、検索モジュール25は、検索領域パラメータデータに応じて、追跡点に関連付けられる検索領域を生成する。段階512において、検索モジュール25は、検索パラメータを取得する、及び/又は、検索パラメータを生成する。段階514において、検索モジュール25は、検索領域306内に位置付けられる表示データに対応する画像データにフィルタリング及び/又は平滑化を行う。段階516において、検索モジュール25は、検索パラメータに応じてフィルタリングされ平滑化された画像データ内の実際の境界302の検索を行い、修正点を生成する。段階518において、修正点は、表示モジュールに供給されて、GUI上に表示される。段階520において、表示される修正点は、最も近い前の修正点と接続される。当該技術において既知である補間方法を用いて、滑らかな修正境界310を生成することが好適である。段階520を終了した後、制御は、処理段階504に戻る。
本願に開示した実施例に様々な変更を加え得ることを理解するものとする。従って、上述した説明は制限的ではなく、好適な実施例の説明に過ぎない。当業者は、本発明の特許請求の範囲及び技術的思想内の変形を考えることができるであろう。
本発明のシステムを示すブロック図である。 従来技術のシステムにおけるグラフィカルユーザインタフェースの画面を示す図である。 図1のシステムのグラフィカルユーザインタフェースの画面を示す図である。 本発明に従い関心の対象物を追跡する際に生成されるデータ素子を示す図である。 本発明に従い生成される検索領域を示す図である。 本発明に従い生成される検索領域を示す図である。 本発明に従い生成される検索領域を示す図である。 本発明に従い生成される検索領域を示す図である。 本発明に従い生成される検索領域を示す図である。 本発明の演算方法を説明するフローチャートである。
符号の説明
10 超音波撮像システム
12 コンソール
14 プローブ
16 モニタ
17、17a、17b グラフィカルユーザインタフェース
18 ユーザ入力装置
20 プロセッサ
22 ディスプレイモジュール
24 追跡ツールモジュール
25 検索モジュール
26 ケーブル
28 プローブデータ
32 デジタル画像データ
34 信号プロセッサ
40 追跡ツールスイッチ
52、54 インタフェース
200a、200b 関心の対象物
202a、202b 実際の輪郭
204a、204b 追跡された輪郭
206 修正された輪郭
302 実際の境界
304 追跡点
306 検索領域
308 修正点
400 検索領域

Claims (28)

  1. 超音波撮像システムによって撮像される関心の対象物を追跡する際に、検索機能を行うために、少なくとも1つのプロセッサ上で実行可能な検索ソフトウェアモジュールであって、
    上記超音波撮像システムは、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記少なくとも1つのプロセッサに、少なくとも1つの画像データ素子のアレイを含む画像データを供給するプローブと、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記処理された画像データとグラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含む上記GUIを表示するディスプレイ手段と、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記GUI上に表示される関心の対象物の境界に沿って上記カーソルを動かすことにより、追跡のための上記GUI上の所望の場所を指し示すよう上記カーソルを操作することをユーザに可能にするユーザ入力手段と、
    上記少なくとも1つのプロセッサ上で実行可能であり、上記GUIを生成するために上記画像データ及びユーザカーソル動作を処理し、上記GUIを上記ディスプレイ手段に供給するディスプレイソフトウェアモジュールと、
    上記少なくとも1つのプロセッサ上で実行可能であり、上記関心の対象物の上記境界を追跡する際に、上記カーソルにより指し示される上記GUI上の場所に関連付けられる一連の追跡点を生成する追跡ツールソフトウェアモジュールと、を含み、
    上記検索ソフトウェアモジュールは、
    上記一連の追跡点の各追跡点に関連付けられる検索領域を生成する手段と、
    上記関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データを検索する手段と、を含み、
    各検索領域は、少なくとも1つの選択可能なパラメータを有し、
    上記少なくとも1つの画像データ素子は、各検索領域に関連付けられる少なくとも1つの修正点を画成する、検索ソフトウェアモジュール。
  2. 上記選択可能なパラメータは、上記検索領域のサイズである請求項1記載の検索ソフトウェアモジュール。
  3. 上記選択可能なパラメータは、上記検索領域の形状である請求項1記載の検索ソフトウェアモジュール。
  4. 上記選択可能なパラメータは、上記追跡点の場所に対する上記検索領域の位置である請求項1記載の検索ソフトウェアモジュール。
  5. 上記選択可能なパラメータの現在の選択の指示は、上記GUI上に表示される請求項1記載の検索ソフトウェアモジュール。
  6. 上記画像データを検索する手段は、エッジ検出を行う手段を含む請求項1記載の検索ソフトウェアモジュール。
  7. 上記画像データを検索する手段は、マルチ解像度処理を行う手段を含み、
    上記マルチ解像度処理を行う手段は、上記検索領域を、少なくとも第1及び第2のサブ検索領域に分割する手段を含み、
    上記少なくとも第1及び第2のサブ検索領域に行われる検索は、少なくとも第1及び第2の解像度を用いる請求項1記載の検索ソフトウェアモジュール。
  8. 上記画像データを検索する手段は、上記ユーザが上記境界を追跡する際に、上記検索領域の1つに関連付けられる画像データを検索する請求項1記載の検索ソフトウェアモジュール。
  9. 上記画像データを検索する手段は、検出されるエッジに最短費用の経路処理を行う手段を更に含む請求項6記載の検索ソフトウェアモジュール。
  10. 上記一連の追跡点の追跡点に関連付けられる検索領域の上記少なくとも1つの選択可能なパラメータは、少なくとも1つの前の追跡点に関連付けられる検索領域に関連付けられる少なくとも1つの修正点の場所に応じて選択される請求項1記載の検索ソフトウェアモジュール。
  11. 上記少なくとも1つの選択可能なパラメータは、追跡時の上記カーソルの動作の速度に応じて選択される請求項1記載の検索ソフトウェアモジュール。
  12. 上記検索手段は、選択可能な解像度を用いて各検索領域に関連付けられる上記画像データを検索する請求項1記載の検索ソフトウェアモジュール。
  13. 上記一連の追跡点の追跡点に関連付けられる検索領域に関連付けられる画像データに行われる検索の選択可能な解像度は、少なくとも1つの前の追跡点に関連付けられる上記検索領域について生成される上記修正点に応じて選択される請求項12記載の検索ソフトウェアモジュール。
  14. 上記選択可能な解像度は、追跡時の上記カーソルの動作の速度に応じて選択される請求項12記載の検索ソフトウェアモジュール。
  15. 上記ユーザ入力手段は更に、撮像される組織のタイプに対応するタイプを上記ユーザが入力することを可能にし、
    上記検索手段は更に、上記タイプに関連付けられるデータにアクセスする手段と、上記アクセスしたデータに応じて、上記画像データの検索を調整する手段とを含む請求項1記載の検索ソフトウェアモジュール。
  16. 上記GUIは、上記一連の追跡点の追跡点と、各追跡点に関連付けられる上記検索領域と、各検索領域について生成される少なくとも1つの修正点とを、選択的に表示する請求項1記載の検索ソフトウェアモジュール。
  17. 上記検索ソフトウェアモジュールは更に、一連の追跡点に関連付けられる検索領域について生成される少なくとも1つの修正点を接続した表示可能な輪郭を生成する手段を含む請求項1記載の検索ソフトウェアモジュール。
  18. 少なくとも1つのプロセッサと、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記少なくとも1つのプロセッサに、少なくとも1つの画像データ素子のアレイを含む画像データを供給するプローブと、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記処理された画像データとグラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含む上記GUIを表示するディスプレイ手段と、
    上記少なくとも1つのプロセッサに動作可能に接続し、上記GUI上に表示される関心の対象物の境界に沿って上記カーソルを動かすことにより、追跡のための上記GUI上の所望の場所を指し示すよう上記カーソルを操作することをユーザに可能にするユーザ入力手段と、
    上記少なくとも1つのプロセッサ上で実行可能であり、上記GUIを生成するために上記画像データ及びユーザカーソル動作を処理し、上記GUIを上記ディスプレイ手段に供給するディスプレイソフトウェアモジュールと、
    上記少なくとも1つのプロセッサ上で実行可能であり、上記関心の対象物の上記境界を追跡する際に、上記カーソルにより指し示される上記GUI上の場所に関連付けられる一連の追跡点を生成する追跡ツールソフトウェアモジュールと、
    上記プロセッサ上で実行可能な検索ソフトウェアモジュールと、を含み、
    上記検索ソフトウェアモジュールは、
    上記一連の追跡点の各追跡点に関連付けられる検索領域を生成する手段と、
    上記関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データを検索する手段と、を含み、
    各検索領域は、少なくとも1つの選択可能なパラメータを有し、
    上記少なくとも1つの画像データ素子は、各検索領域に関連付けられる少なくとも1つの修正点を画成する、超音波撮像システム。
  19. 上記選択可能なパラメータは、上記検索領域のサイズである請求項18記載の超音波撮像システム。
  20. 上記選択可能なパラメータは、上記検索領域の形状である請求項18記載の超音波撮像システム。
  21. 上記パラメータは、上記追跡点の場所に対する上記検索領域の位置である請求項18記載の超音波撮像システム。
  22. 上記画像データを検索する手段は、エッジ検出を行う手段を含む請求項18記載の超音波撮像システム。
  23. 上記画像データを検索する手段は、マルチ解像度処理を行う手段を含み、
    上記マルチ解像度処理を行う手段は、上記検索領域を、少なくとも第1及び第2のサブ検索領域に分割する手段を含み、
    上記少なくとも第1及び第2のサブ検索領域に行われる検索は、少なくとも第1及び第2の解像度を用いる請求項18記載の超音波撮像システム。
  24. 上記画像データを検索する手段は、検出されるエッジに最短費用の経路処理を行う手段を更に含む請求項22記載の超音波撮像システム。
  25. 上記画像を検索する手段は、選択可能な解像度を用いて各検索領域に関連付けられる上記画像データを検索する請求項18記載の超音波撮像システム。
  26. 関心の対象物の超音波画像を追跡する際に、上記関心の対象物の実際の境界を検索する方法であって、
    少なくとも1つの画像データ素子のアレイを含む入力画像データを受信する段階と、
    上記画像データを処理する段階と、
    上記処理された画像データと、グラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含む上記GUIを生成する段階と、
    上記GUIに含まれる関心の対象物の境界の追跡に関連付けられるユーザ入力カーソル動作コマンドを受信する段階と、
    上記カーソルにより指し示される上記GUI上の場所に関連付けられる一連の追跡点を生成する段階と、
    各追跡点に関連付けられ、且つ、少なくとも1つの選択可能なパラメータを有する検索領域を生成する段階と、
    追跡される上記関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる画像データを検索する段階と、を含む方法。
  27. 少なくとも1つの画像データ素子のアレイを含む入力画像データを受信する段階と、
    超音波撮像システムにより撮像される関心の対象物の境界の追跡に対応する上記画像データ素子のアレイの一連の画像データ素子を取得する段階と、
    上記一連の画像データ素子の各画像データ素子に関連付けられ、上記画像データ素子のアレイのサブセットを含み、上記画像データ素子のアレイの上記サブセットを決める少なくとも1つの選択可能なパラメータを有する検索領域を生成する段階と、
    追跡される上記関心の対象物の実際の境界を表す少なくとも1つの画像データ素子を見つけるべく各検索領域に関連付けられる上記画像データ素子のアレイの上記サブセットを検索する段階と、を含む方法を行うために、上記超音波撮像システムの少なくとも1つのプロセッサにより実行されるよう構成されるプログラム可能な命令のセットを格納するコンピュータ可読媒体。
  28. 上記画像データを処理する段階と、
    上記処理された画像データと、グラフィカルユーザインタフェース(GUI)上の場所を指し示すカーソルを含む上記GUIを生成する段階と、
    上記追跡に関連付けられるユーザ入力カーソル動作コマンドを受信する段階と、
    上記入力カーソル動作コマンドに従い上記カーソルにより指し示される上記GUI上の場所に応じて上記一連の画像データ素子を生成する段階を更に含む請求項27記載のコンピュータ可読媒体。
JP2003401517A 2002-12-03 2003-12-01 超音波撮像により撮像される対象物の境界を生成するシステム及び方法 Pending JP2004181240A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US43039502A 2002-12-03 2002-12-03

Publications (1)

Publication Number Publication Date
JP2004181240A true JP2004181240A (ja) 2004-07-02

Family

ID=32771723

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003401517A Pending JP2004181240A (ja) 2002-12-03 2003-12-01 超音波撮像により撮像される対象物の境界を生成するシステム及び方法

Country Status (1)

Country Link
JP (1) JP2004181240A (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005152647A (ja) * 2003-11-25 2005-06-16 Ge Medical Systems Global Technology Co Llc 対象物の輪郭を検出するためのユーザ対話式方法およびユーザ・インターフェース
JP2006116307A (ja) * 2004-10-18 2006-05-11 Medison Co Ltd 後処理を通じた2次元超音波映像の画質改善方法及び装置
CN102034256A (zh) * 2010-11-15 2011-04-27 拓维信息系统股份有限公司 一种基于边界跟踪和伪彩着色的手机动漫人物创作方法
JP2015509628A (ja) * 2012-02-24 2015-03-30 コーニンクレッカ フィリップス エヌ ヴェ ポインタ動きを処理するためのシステムおよび方法
JP2016506809A (ja) * 2013-02-11 2016-03-07 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 超音波画像化システム及び方法
EP3170144B1 (en) * 2014-07-15 2020-11-18 Koninklijke Philips N.V. Device, system and method for segmenting an image of a subject
JP7457096B2 (ja) 2019-11-21 2024-03-27 株式会社東芝 処理装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005152647A (ja) * 2003-11-25 2005-06-16 Ge Medical Systems Global Technology Co Llc 対象物の輪郭を検出するためのユーザ対話式方法およびユーザ・インターフェース
JP2006116307A (ja) * 2004-10-18 2006-05-11 Medison Co Ltd 後処理を通じた2次元超音波映像の画質改善方法及び装置
CN102034256A (zh) * 2010-11-15 2011-04-27 拓维信息系统股份有限公司 一种基于边界跟踪和伪彩着色的手机动漫人物创作方法
CN102034256B (zh) * 2010-11-15 2012-08-22 拓维信息系统股份有限公司 一种基于边界跟踪和伪彩着色的手机动漫人物创作方法
JP2015509628A (ja) * 2012-02-24 2015-03-30 コーニンクレッカ フィリップス エヌ ヴェ ポインタ動きを処理するためのシステムおよび方法
JP2016506809A (ja) * 2013-02-11 2016-03-07 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 超音波画像化システム及び方法
EP3170144B1 (en) * 2014-07-15 2020-11-18 Koninklijke Philips N.V. Device, system and method for segmenting an image of a subject
EP3748581A1 (en) * 2014-07-15 2020-12-09 Koninklijke Philips N.V. Device, system and method for segmenting an image of a subject
JP7457096B2 (ja) 2019-11-21 2024-03-27 株式会社東芝 処理装置

Similar Documents

Publication Publication Date Title
CN112215843B (zh) 超声智能成像导航方法、装置、超声设备及存储介质
US11730447B2 (en) Haptic feedback for ultrasound image acquisition
US11992369B2 (en) Intelligent ultrasound system for detecting image artefacts
JP5209213B2 (ja) 超音波診断装置及び超音波画像生成プログラム
US11839514B2 (en) Methods and apparatuses for guiding collection of ultrasound data
JP7193979B2 (ja) 医用撮像装置、画像処理装置、および、画像処理方法
JP7022217B2 (ja) 超音波システムのためのエコー窓のアーチファクト分類及び視覚的インジケータ
US11638572B2 (en) Methods and apparatus for performing measurements on an ultrasound image
JP2011104194A (ja) 超音波診断装置、超音波診断装置用のプローブ状態検出装置及びプログラム
US20240081680A1 (en) Acoustic wave measurement apparatus and operation method of acoustic wave measurement apparatus
US10664977B2 (en) Apparatus and method for image-based control of imaging system parameters
CN113116386B (zh) 超声成像引导方法、超声设备及存储介质
CN112867444B (zh) 用于引导对超声图像的采集的系统和方法
JP2004181240A (ja) 超音波撮像により撮像される対象物の境界を生成するシステム及び方法
US7559896B2 (en) Physiological definition user interface
JP2011104191A (ja) 超音波診断システム、超音波診断装置用ロボット、及びプログラム
WO2015104607A1 (en) Ultrasound imaging modes for automated real time quantification and analysis
US10884124B2 (en) Method and ultrasound imaging system for adjusting a value of an ultrasound parameter
JP2002318344A (ja) 光学機器のオートフォーカシング方法および装置
JP2007512042A (ja) 診断画像形成における特徴検出のためにユーザ入力を利用する方法
KR20200130653A (ko) 사용자 입력 디바이스를 통해 제공되는 존재 신호에 응답하여 메인 디스플레이에서 사용자 입력 디바이스와 연관된 기능 데이터를 제시하기 위한 방법 및 시스템
US20240225605A1 (en) Methods and apparatus for performing measurements on an ultrasound image
CN112672696A (zh) 用于跟踪超声图像中的工具的系统和方法
JP7376201B1 (ja) 情報処理システム、情報処理方法及びプログラム
CN117062570A (zh) 用于便携式超声方法和装置的基于深度学习的实时眼睛注视跟踪