JP2023524870A - マルチベンダ設定における撮像システムからの情報の抽出及び処理のためのシステム及び方法 - Google Patents

Abstract

医療撮像検査中に医療撮像デバイス２のローカルオペレータＬＯにリモートエキスパートＲＥからの支援を与える方法１００を実行するための少なくとも１つの電子プロセッサ２０によって実行可能な命令を記憶する非一時的コンピュータ可読媒体２６である。本方法は、医療撮像検査中にローカルオペレータによって動作可能な医療撮像デバイスのコントローラ１０のディスプレイデバイス２４´上に表示された画像フレームから画像特徴を抽出するステップと、抽出された画像特徴を医療撮像検査の現在のステータスの表現４３に変換するステップと、リモートエキスパートによって動作可能なワークステーション１２上に医療撮像検査の現在のステータスの表現を表示するユーザインターフェース（ＵＩ）２８を与えるステップとを有する。

Description

[0001] 以下は、一般に、撮像技術と、リモート撮像支援技術と、リモート撮像検査監視技術と、関連技術とに関する。

[0002] 複雑な医療撮像検査を実行するための高度の資格を有するスタッフを得る問題の高まりにより、リモートサービスセンターにおいて医療専門知識を束ねる概念が推進されている。基本的なアイデアは、医療撮像検査を実行する技術者又はオペレータが、スケジュールされた検査の支援を必要とするか、又は予想外の困難に遭遇した場合に、オンコールエキスパートとしてのシニア技術者の仮想上の利用可能性を与えることである。いずれの場合にも、リモートエキスパートは、スクリーンミラーリングを介した状況のリアルタイムビューと、撮像ベイ（ｉｍａｇｉｎｇ ｂａｙ）の１つ又は複数のビデオフィードとを受信することによって、オンサイトオペレータをリモートで支援する。リモートエキスパートは、一般に、医療撮像デバイスを直接動作させないが、ローカル技術者を支援するための助言又は他の入力を与える。

[0003] そのようなリモートサービスセンターを商業的に存立可能にするためには、リモートエキスパートが、場合によっては同時の医療撮像検査を実行する何人かの異なるローカル技術者を同時に支援する（又は支援するためにオンコール状態になる）ことを可能にすることが有利である。多くの病院は撮像システムの異種フリートを維持しているので、好ましくは、リモートサービスセンターは、異なるモデルの撮像システム及び／又は異なるベンダーによって製造された撮像システムにエキスパートを接続することが可能である。このことは、撮像ベイのビュー、及び、随意に、撮像デバイスのボア又は他の検査領域の内側のビューを与えるためのビデオカメラとともに、撮像デバイスコントローラディスプレイのリアルタイムコピーをリモートエキスパートに与えるスクリーン共有又はスクリーンミラーリング技術によって達成することができる。

[0004] リモートエキスパートは、そのエキスパートがそれらについての支援を与えるための資格を有する、異なる医療撮像システム及びベンダーの異なるユーザインターフェースの経験及び専門技術を有すると仮定される。複数の撮像ベイに（潜在的に同時の）支援を与えるときに、エキスパートは、各撮像ベイにおける状況を速やかに評価するための必要とされるいくつかの情報を抽出するために、異なる撮像システムのスクリーンビューを迅速に切り替えることが期待される。必要とされるいくつかの情報は、異なって設計されたユーザインターフェース上に異なって位置することがあるので、このことは難しい。

[0005] これらの問題などを克服するためのいくつかの改善点を以下で開示する。

[0006] 一態様では、非一時的コンピュータ可読媒体は、医療撮像検査中に医療撮像デバイスのローカルオペレータにリモートエキスパートからの支援を与える方法を実行するための少なくとも１つの電子プロセッサによって実行可能な命令を記憶する。本方法は、医療撮像検査中にローカルオペレータによって動作可能な医療撮像デバイスのコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップと、抽出された画像特徴を医療撮像検査の現在のステータスの表現に変換するステップと、リモートエキスパートによって動作可能なワークステーション上に医療撮像検査の現在のステータスの表現を表示するユーザインターフェース（ＵＩ）を与えるステップとを有する。

[0007] 別の態様では、医療撮像デバイスを使用して実行される医療撮像検査中にローカルオペレータにリモートエキスパートからの支援を与えるための装置が、リモートエキスパートによって動作可能なワークステーションを備える。少なくとも１つの電子プロセッサが、医療撮像検査中にローカルオペレータによって動作可能な医療撮像デバイスのコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出することと、医療撮像検査の現在の状態を示す撮像検査ワークフローモデル中に、抽出された画像特徴を入力することによって、抽出された画像特徴を医療撮像検査の現在のステータスの表現に変換することと、リモートエキスパートによって動作可能なワークステーション上に医療撮像検査の現在のステータスの表現と撮像検査ワークフローモデルとのうちの少なくとも１つを表示するＵＩを与えることとを行うようにプログラムされる。

[0008] 別の態様では、医療撮像検査中にローカルオペレータにリモートエキスパートからの支援を与える方法は、医療撮像検査中にローカルオペレータによって動作可能なコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップと、医療撮像検査中に走査されるべき患者の個人識別可能な情報として、画像フレームから、抽出された画像特徴のうちの１つ又は複数を識別するステップと、画像フレームから、識別された個人識別可能な情報特徴を削除すること、又は画像フレーム中の個人識別可能な情報をテキスト、シンボル、又は色と置き換えることのうちの１つによって、コントローラのディスプレイデバイス上に表示された画像フレームから、修正された画像フレームを生成するステップとによって、抽出された画像特徴を、医療撮像検査の現在のステータスを示す表現に変換するステップと、医療撮像検査の現在の状態を示す撮像検査ワークフローモデル中に、医療撮像検査の現在のステータスを示す表現を入力するステップと、リモートエキスパートによって動作可能なワークステーション上に、ビデオフィードとしての修正された画像フレーム、アブストラクト表現、及び撮像検査ワークフローモデルを表示するＵＩを与えるステップとを有する。

[0009] １つの利点は、医療撮像検査を行う際に技術者を支援するリモートエキスパート又は放射線技師に、異なる施設において１人又は複数のローカルオペレータに効果的な支援を与えることを容易にするローカル撮像検査の状況認識を与えることにある。

[0010] 別の利点は、医療撮像検査を行う際に１人又は複数の技術者を支援するリモートエキスパート又は放射線技師に、リモートエキスパート又は放射線技師によって支援されている技術者によって動作させられる異なる医療撮像システムの共有スクリーンからの、関連がある抽出された情報のリスト又は他の要約を与えることにある。

[0011] 別の利点は、技術者によって動作させられる共有スクリーンの、リモートエキスパート又は放射線技師のための一貫性があるユーザインターフェースを与えることにある。

[0012] 別の利点は、リモートエキスパート又は放射線技師に送信されるデータ中の、技術者によって撮像されている患者に関する情報を削除又はブロックすることにある。

[0013] 所与の実施形態が、上記のいずれの利点も与えないこともあり、上記の利点の１つ、２つ、３つ以上、若しくはすべてを与えることもあり、及び／又は本開示を読み、理解すると、当業者に明らかになるであろう他の利点を与えることもある。

[0014] 本開示は、様々な構成要素及び構成要素の構成において、並びに様々なステップ及びステップの構成において具体化される。図面は、好ましい実施形態を例示するためのものにすぎず、本開示を限定するものとして解釈されるべきでない。

[0015] 本開示による、リモート支援を与えるための例示的な装置を概略的に示す図である。 [0016] 図１の装置によって実装されるモジュールを概略的に示す図である。 [0017] 図１の装置によって生成される出力の一例を示す図である。 [0018] 図１の装置によって好適に実行される動作の例示的なフローチャートを示す図である。

[0019] 以下は、撮像検査を実行するローカル技術者に、より詳細には、複数のベンダーからの撮像デバイスをもつクライアントに支援を与えるセンターに、リモート「スーパーテク」支援を与える、放射線医療オペレーションズコマンドセンター（ＲＯＣＣ）システム及び方法に関する。この場合、所与のスーパーテクに割り当てられた異なる撮像デバイスのステータスは、異なるデバイスコントローラユーザインターフェース（ＵＩ）フォーマットを使用して提示され、情報はスクリーン上に異なって構成され、異なるＵＩタブの中にあり、定量的情報は、時々、異なるベンダーの撮像デバイスによって異なる単位で提示されるので、それらのステータスを追跡することは困難であることがある。さらに、すべての情報が常に表示されるのではなく、例えば、ユーザは、患者と撮像される生体構造とについての情報を入力するためにＵＩのセットアップタブに進み、走査リストをセットアップするために走査タブに進み、現在の走査をセットアップし、実行するために現在の走査タブに進む。

[0020] 本明細書で開示するいくつかの実施形態では、システムは、スクリーンキャプチャを与え、ベンダー固有テンプレート及びモダリティ固有テンプレートが立ち上げられた際に、ＵＩの表示されたタブからの情報を識別し、抽出するために光学式文字認識（ＯＣＲ）とともにそれらのテンプレートを使用する。抽出された情報は、単位の共通の（ベンダーアグノスティックな）セットを使用してベンダーアグノスティックな表現中に記憶される。抽出された情報はまた、撮像検査の現在の状態を追跡する撮像プロセスの撮像検査ワークフローモデル（例えば、ステートマシン又はＢＰＭＮモデル）に入力される。抽出された情報は、任意の抽出された警告、アラートなどをも含む。スーパーテクに割り当てられた各撮像ベイについてのベンダーアグノスティックな表現と撮像検査ワークフローモデルとの出力は、ベンダーアグノスティックなフォーマットで、任意の所与の時間における各撮像ベイの状態の簡明な評価をそのスーパーテクに与えるリストとして表示される。

[0021] このリストは有用であるが、特定の撮像ベイに支援を与えるためには、スーパーテクは詳細なコントローラディスプレイを参照する必要がある。しかしながら、いくつかの企図される商用設定では、スーパーテクは、コントローラディスプレイ上に示されているすべての情報を参照するべきでない。例えば、患者識別情報（ＰＩＩ）は匿名化されることがあり、非撮像制御関係コンテンツを示す任意のウィンドウ（例えば、そのコントローラ上で動作する別のプログラムのディスプレイを示すウィンドウ）は遮断されることがある。このことを実施するために、ベンダー固有テンプレート及びモダリティ固有テンプレート並びにＯＣＲ処理は、修正される必要があるＰＩＩ又は他の情報を示すスクリーンの領域を識別し、キャプチャされたスクリーンフレームは、スーパーテクに提示する前に適切に修正される。

[0022] 本明細書で開示する様々な実施形態では、画像処理がクライアント側で及び／又はＲＯＣＣ側で実施される。クライアント側の実施は、データストリームがオフサイトで送られる前にＰＩＩの削除を保証する見地から好ましく、一方、ＲＯＣＣ側の実施はソフトウェア更新の見地からより有用である。混合型手法も企図され、例えば、ＰＩＩ削除がクライアント側で実行され、残りの処理がＲＯＣＣ側で実施されることがある。

[0023] ＲＯＣＣは必ずしも単一の地理的ロケーションに集中化されるとは限らないことに留意されたい。いくつかの実施形態では、例えば、ＲＯＣＣは、州、国、大陸全体から選び出されたリモートエキスパート、又はさらには世界中から選び出されたリモートエキスパートを備え、ＲＯＣＣは、様々なエキスパートと、それらのエキスパートによって支援される撮像ベイとの間のデータ転送（例えば、スクリーン共有及びビデオフィード転送）並びに電話及び／又はビデオ通信接続性を与え、所与の商用実装において求められる、与えられた支援の時間、成果、及び／又は請求若しくは監査目的のための他のメトリクスを追跡する、分散型インターネットベースのインフラストラクチャとして実装される。さらに、ＲＯＣＣ適用例に加えて、開示するシステム及び方法は、より大きい医療機関又はネットワークのための中央監視ステーションを与える際に使用することができる。そのような設定では、開示する手法は、放射線医療管理者にすべての撮像ベイの概観を与えるために使用され得る。本出願では、ＰＩＩ削除は不要になることがある（又はならないことがある）。

[0024] 図１を参照すると、ローカル技術者オペレータＬＯにリモート医療撮像エキスパートＲＥ（又はスーパーテク）からの支援を与えるための装置が示されている。図１に示されているように、（画像収集デバイス、撮像デバイスなどとも呼ばれる）医療撮像デバイス２を動作させるローカルオペレータＬＯは医療撮像デバイスベイ３に位置し、リモートオペレータＲＥはリモートサービスロケーション又はセンター４に配置されている。「リモートオペレータ」ＲＥは、必ずしも医療撮像デバイス２を直接動作させるとは限らず、むしろ、助言、指導、命令などの形態のローカルオペレータＬＯへの支援を与えることに留意されたい。リモートロケーション４は、リモートサービスセンター、放射線技師のオフィス、放射線科などであり得る。リモートロケーション４は、医療撮像デバイスベイ３と同じ建物の中にある（これは、例えば、検査画像検討周辺の任務を負う放射線技師である「リモートオペレータ」ＲＥの場合である）こともあるが、より一般的には、リモートサービスセンター４と医療撮像デバイスベイ３とは異なる建物の中にあり、実際には、異なる都市、異なる国、及び／又は異なる大陸に位置することもある。一般に、リモートオペレータＲＥは撮像デバイスベイ３中の撮像デバイス２を直接視覚的に観測することができないという意味で、リモートロケーション４は撮像デバイスベイ３からリモートにある（したがって、本明細書でさらに説明するように、随意に、ビデオフィード又はスクリーン共有プロセスを与える）。

[0025] 画像収集デバイス２は、磁気共鳴（ＭＲ）画像収集デバイス、コンピュータ断層撮影（ＣＴ）画像収集デバイス、陽電子放出断層（ＰＥＴ）画像収集デバイス、単一光子放出コンピュータ断層撮影（ＳＰＥＣＴ）画像収集デバイス、Ｘ線画像収集デバイス、超音波（ＵＳ）画像収集デバイス、又は別のモダリティの医療撮像デバイスであることがある。撮像デバイス２はまた、ＰＥＴ／ＣＴ又はＳＰＥＣＴ／ＣＴ撮像システムなど、ハイブリッド撮像デバイスであり得る。図１には例として単一の画像収集デバイス２が示されているが、より一般的には、医療撮像ラボラトリーは、同じ及び／又は異なる撮像モダリティの画像収集デバイスである複数の画像収集デバイスを有するであろう。例えば、ある病院が、多くのＣＴ撮像検査と、比較的少ないＭＲＩ検査と、さらに少ないＰＥＴ検査とを実行する場合、その病院の（「放射線医療ラボ」又は何らかの他の同様の名称で呼ばれることがある）撮像ラボラトリーは、３つのＣＴスキャナと、２つのＭＲＩスキャナと、１つだけのＰＥＴスキャナとを有し得る。これは一例にすぎない。その上、リモートサービスセンター４は複数の病院にサービスを与え得、単一のリモートエキスパートＲＥは、同時に、複数のローカルオペレータによって動作させられる複数の撮像ベイを監視し、（必要とされるときに）それらの撮像ベイのための支援を与え得、図１には、代表的な例としてそれらのローカルオペレータのうちの１人のみが示されている。ローカルオペレータは撮像デバイスコントローラ１０を介して医療撮像デバイス２を制御する。リモートオペレータはリモートワークステーション１２（又は、より一般的には、電子コントローラ１２）に配置される。

[0026] 本明細書で使用する際、「医療撮像デバイスベイ」という用語（及びそれの変形態）は、医療撮像デバイス２を収容する部屋を指し、医療撮像デバイスを制御するための医療撮像デバイスコントローラ１０を収容する隣接する制御室をも指す。例えば、ＭＲＩデバイスに関して、医療撮像デバイスベイ３は、ＭＲＩデバイス及び手順の技術分野で理解されるように、ＭＲＩデバイス２を収容する無線周波数（ＲＦ）遮蔽室、並びに、医療撮像デバイスコントローラ１０を格納する隣接する制御室を含むことがある。一方、ＣＴなど、他の撮像モダリティの場合、撮像デバイスコントローラ１０は、撮像デバイス２と同じ部屋に位置し、したがって、隣接する制御室がなく、医療ベイ３が、医療撮像デバイス２を収容する唯一の部屋であることがある。さらに、図１は単一の医療撮像デバイスベイ３を示しているが、リモートサービスセンター４（より詳細には、リモートワークステーション１２）は通信リンク１４を介して複数の医療ベイと通信しており、通信リンク１４は、一般に、電子データ通信のためにリモートオペレータＲＥエンド及びローカルオペレータＬＯエンドにおいてローカルエリアネットワークによって拡張されたインターネットを含むことが理解されよう。

[0027] 図１に概略的に示されているように、いくつかの実施形態では、ローカルオペレータＬＯがそこで患者と対話する、撮像デバイス２の領域を少なくとも含み、随意に、撮像デバイスコントローラ１０をさらに含む、医療撮像デバイスベイ３の一部分のビデオストリーム１７を収集するために、カメラ１６（例えばビデオカメラ）が配置される。ビデオストリーム１７は、例えば、安全なインターネットリンクを介して受信されたストリーミングビデオフィードとして、通信リンク１４を介してリモートワークステーション１２に送られる。

[0028] 他の実施形態では、ライブビデオフィード１７は、例示的な実施形態では、ビデオケーブルスプリッタ１５（例えば、ＤＶＩスプリッタ、ＨＤＭＩ（登録商標）スプリッタなど）によって与えられる。他の実施形態では、ライブビデオフィード１７は、撮像デバイスコントローラ１０の補助ビデオ出力（例えば、ａｕｘ ｖｉｄ ｏｕｔ）ポートを、リモートエキスパートＲＥによって動作させられるリモートワークステーション１２に接続するビデオケーブルによって与えられる。

[0029] 追加又は代替として、スクリーンミラーリングデータストリーム１８が、スクリーン共有又はキャプチャデバイス１３によって生成され、撮像デバイスコントローラ１０からリモートワークステーション１２に送られる。通信リンク１４は、ローカルオペレータとリモートオペレータとの間の口頭の通信及び／又はテキスト通信のための自然言語通信経路１９をも与える。例えば、自然言語通信リンク１９は、ボイスオーバーインターネットプロトコル（ＶＯＩＰ）電話接続、オンラインビデオチャットリンク、コンピュータ化インスタントメッセージングサービスなどである。代替的に、自然言語通信経路１９は、データ通信１７、１８を与える通信リンク１４とは別個である専用通信リンクによって与えられ、例えば、自然言語通信経路１９は固定電話を介して与えられる。

[0030] 図１はまた、カメラ１６からの医療撮像デバイスベイ３のビデオ１７を受信し、提示し、スクリーンキャプチャデバイス１３からのミラーリングされたスクリーンとしてスクリーンミラーリングデータストリーム１８を提示するために動作可能に接続された、電子処理デバイス、ワークステーションコンピュータ、又はより一般的にはコンピュータなど、リモートワークステーション１２を含むリモートサービスセンター４を示す。追加又は代替として、リモートワークステーション１２は、１つのサーバコンピュータとして、又は、例えば、サーバクラスタ、クラウドコンピューティングリソースなどを形成するために相互接続された複数のサーバコンピュータとして実施することができる。ワークステーション１２は、電子プロセッサ２０（例えばマイクロプロセッサ）、少なくとも１つのユーザ入力デバイス（例えば、マウス、キーボード、トラックボールなど）２２、少なくとも１つのディスプレイデバイス２４（例えば、ＬＣＤディスプレイ、プラズマディスプレイ、陰極線管ディスプレイなど）など、一般的な構成要素を含む。いくつかの実施形態では、ディスプレイデバイス２４はワークステーション１２とは別個の構成要素であり得る。ディスプレイデバイス２４はまた、２つ以上のディスプレイデバイスを備えることがあり、例えば、一方のディスプレイがビデオ１７を提示し、他方のディスプレイが、スクリーンミラーリングデータストリーム１８から生成された撮像デバイスコントローラ１０の共有スクリーンを提示する。代替的に、ビデオ及び共有スクリーンはそれぞれのウィンドウ中の単一のディスプレイ上に提示される。電子プロセッサ２０は１つ又は複数の非一時的記憶媒体２６と動作可能に接続される。非一時的記憶媒体２６は、非限定的な例示的な例として、磁気ディスク、ＲＡＩＤ、又は他の磁気記憶媒体、ソリッドステートドライブ、フラッシュドライブ、電子的に消去可能な読取り専用メモリ（ＥＥＲＯＭ）又は他の電子メモリ、光ディスク又は他の光ストレージ、それらの様々な組合せなどのうちの１つ又は複数を含み、例えば、ネットワークストレージ、ワークステーション１２の内蔵ハードドライブ、それらの様々な組合せなどであり得る。本明細書における１つ又は複数の非一時的媒体２６への言及は、同じ又は異なるタイプの単一の媒体又は複数の媒体を包含するものとして広義に解釈されるべきであることを理解されたい。同様に、電子プロセッサ２０は単一の電子プロセッサとして又は２つ以上の電子プロセッサとして実施され得る。非一時的記憶媒体２６は、少なくとも１つの電子プロセッサ２０によって実行可能な命令を記憶する。それらの命令は、リモートオペレータディスプレイデバイス２４上での表示のためのグラフィカルユーザインターフェース（ＧＵＩ）２８を生成するための命令を含む。

[0031] 医療撮像デバイスベイ３中の医療撮像デバイスコントローラ１０も、リモートサービスセンター４中に配設されたリモートワークステーション１２と同様の構成要素を含む。本明細書で別段に示されている場合を除いて、リモートサービスセンター４中に配設されたリモートワークステーション１２の特徴と同様の、医療撮像デバイスベイ３中に配設されたローカルワークステーション１２´を含む医療撮像デバイスコントローラ１０の特徴は、共通の参照番号とそれに続く「プライム」シンボルとを有し、医療撮像デバイスコントローラ１０の構成要素についての説明は繰り返さない。特に、医療撮像デバイスコントローラ１０は、構成設定を調整するための構成表示、医療撮像検査に関するステータス情報が撮像デバイス２のアラート基準を満たすときにリモートロケーションにおいて感知できるアラート３０、撮像収集監視情報、収集された医療画像の提示など、医療撮像デバイス２の制御に関する情報を提示するディスプレイデバイス又はコントローラディスプレイ２４´上にＧＵＩ２８´を表示するように構成される。スクリーンミラーリングデータストリーム１８は、医療撮像デバイスコントローラ１０のディスプレイデバイス２４’上に提示されるコンテンツを搬送することが理解されよう。通信リンク１４は、リモートサービスセンター４中のディスプレイデバイス２４と医療撮像デバイスベイ３中のディスプレイデバイス２４´との間のスクリーン共有を可能にする。ＧＵＩ２８´は、例えば、とりわけ、検査／走査選択ダイアログスクリーン、走査設定ダイアログスクリーン、収集監視ダイアログスクリーンを含む、１つ又は複数のダイアログスクリーンを含む。ＧＵＩ２８´は、ビデオフィード１７又はミラーリングデータストリーム１８中に含め、リモートロケーション４におけるリモートワークステーションディスプレイ２４上に表示することができる。

[0032] 図１は、例示的なローカルオペレータＬＯと、例示的なリモートエキスパートＲＥ（すなわちエキスパート、例えばスーパーテク）とを示す。しかしながら、本明細書で企図される放射線医療オペレーションズコマンドセンター（ＲＯＣＣ）では、ＲＯＣＣは、異なる病院、放射線医療ラボなどにおけるローカルオペレータＬＯを支援するために利用可能であるスーパーテクのスタッフを提供する。ＲＯＣＣは、単一の物理的ロケーション中に格納されるか、又は地理的に分散させられる。例えば、企図される一実装形態では、様々な撮像されるアナトミーをターゲットにする、様々な撮像モダリティと様々な撮像手順との広範囲の専門技術をもつスーパーテクのスタッフを提供するために、米国全土から及び／又は国際的にリモートオペレータＲＯが募集される。言い換えれば、ＲＯＣＣは、対応する数のリモートエキスパートＲＥによって動作させられる複数のリモートワークステーション１２をもつリモートサービスセンター４に位置し得る。さらに、任意の所与のリモートエキスパートＲＥが、場合によっては、異なる型式の（すなわち、異なるベンダーによって製造された）及び／又は異なるモデルの撮像デバイスを収容する、複数の撮像ベイを同時に監視／支援している。この作業環境では、リモートエキスパートＲＥは、そのリモートエキスパートに割り当てられた任意の特定の撮像ベイのステータスを迅速に評価することと、リモートエキスパートＲＥが特定の割り当てられた撮像ベイに与えることが可能である任意の適切な支援を迅速に決定することとが可能であることが重要である。従来、そのようなマルチタスキングは、異なる型式／モデルの撮像デバイスのユーザインターフェースの差異によってより困難になる。例えば、関連情報が異なる型式／モデルの撮像デバイスのユーザインターフェースの異なるスクリーン上に提示されることがある。従来、そのようなマルチタスキングはまた、撮像デバイスコントローラを介して処理される情報量が大きいことにより、すべての情報が同時に表示されないことによって、より困難になる。結果として、リモートエキスパートＲＥによって使用されるワークステーション１２における撮像デバイスコントローラディスプレイのミラーは、リモートエキスパートＲＥが撮像検査のステータスを完全に評価するのに十分な情報を与えないことがある。

[0033] そのような問題に対処するために、本明細書で開示するように、医療撮像検査中にローカルオペレータに支援を与える方法又はプロセス１００の一部分として、医療撮像デバイス２によって収集された画像を処理するための画像処理モジュール３２が与えられる。画像は、通信リンク１４を介して（ローカルオペレータＬＯによって動作可能な）医療撮像デバイスコントローラ１０から（リモートエキスパートＲＥによって動作可能な）リモートワークステーション１２に転送される。一実施形態では、収集された画像は、リモートワークステーション１２への送信の前に、医療撮像デバイスコントローラ１０の少なくとも１つの電子プロセッサ２０´によって処理される。すなわち、画像処理モジュール３２は医療撮像デバイスコントローラ１０において実装される。別の実施形態では、収集された画像は、医療撮像デバイスコントローラ１０からの送信の後に、リモートワークステーション１２の少なくとも１つの電子プロセッサ２０によって処理される。すなわち、画像処理モジュール３２はリモートワークステーション１２において実装される。簡潔のために、本明細書では、図１に示されているように、リモートワークステーション１２において実装されている画像処理モジュール３２に関して、支援方法１００について説明する。

[0034] 次に図２を参照し、引き続き図１を参照すると、画像処理モジュール３２の一例が示されている。キャプチャされたスクリーン画像３１（例えば、ビデオフィード１７又はスクリーンミラーリングデータストリーム１８からのビデオフレーム）が画像処理モジュール３２に入力される。スクリーン識別モジュール３４は、キャプチャされたスクリーン画像３１のスクリーン又はビューを識別するように構成される。医療撮像デバイスコントローラ１０のＧＵＩ２８´上の多くのスクリーン画像３１が異なるスクリーン若しくはビューを提供するか、又はウィンドウ及びダイアログがＧＵＩの上部に表示され得る。例えば、ＭＲコンソール（すなわち医療撮像デバイス２）上で、ローカル技術者ＬＯは、異なる情報を表示する複数のスクリーン３１のうちの１つを選択し得る。１つのスクリーンは患者情報を示し、一方、別のスクリーンは医療撮像検査の詳細を示し得る。スクリーン識別モジュール３４は、例えば、キャプチャされたスクリーン画像３１の固有識別子として働く、キャプチャされたスクリーン画像３１の特定の領域をピックすることによって、キャプチャされたスクリーン画像３１中に提示される特定のスクリーンを検出するように構成される。例えば、キャプチャされたスクリーン画像３１の特定の領域は、例えば、色、又は画像中の特定の要素であり得る。いくつかの例では、スクリーン識別モジュール３４は、スクリーンを識別するように構成された機械学習モジュールを含み得、異なる情報を表示するそれらのスクリーンの複数のインスタンスがトレーニングデータとして使用される。いくつかの実施形態では、医療撮像デバイス２のベンダー、医療撮像デバイスのモダリティ、及び／又はＵＩのバージョンもスクリーン識別モジュール３４によって検出される。しかしながら、これらのいくつかの情報は、（例えば、ローカルオペレータとリモートエキスパートとの間の接続を開始したＲＯＣＣのワークフロースケジューラによって与えられる）いくつかの事例ではすでに利用可能であり、したがって、これらの事例では、スクリーン識別モジュール３４は、（これらの事例ではアプリオリに知られている）撮像デバイス２の型式及びモデルによって与えられる比較的少数の異なるスクリーンを区別するだけでよい。

[0035] 画像要素検出モジュール３６は、所望の情報を含んでいる識別されたスクリーンのスクリーン領域を識別するように構成される。そうするために、画像要素検出モジュール３６は、パターン及び記述データベース３８から、スクリーンからの情報の１つ又は複数のテンプレート３９を取り出す。テンプレート３９は、スクリーン上の情報の位置とともに、スクリーンのコンテンツに関する情報を含む。画像要素検出モジュール３６は、識別されたスクリーンに属する、パターン及び記述データベース３８からのテンプレート３９を事前選択するために、スクリーン識別モジュール３４からの識別されたスクリーンを使用する。パターン及び記述データベース３８に記憶されたテンプレート３９のタイプは、表示されるユーザインターフェースの各タイプ（例えば、医療撮像デバイス２のベンダー及びソフトウェアバージョン）についての、例えば、キャプチャされたスクリーン３１上の情報の可能な位置を含む、多項目の情報、情報のラベル（例えば、残りの検査時間、走査の回数、使用される無線周波数（ＲＦ）コイルのタイプなど）、情報のタイプ（例えば、抽出されるべき、削除／修正されるべき、ハイライトされるべきなど）、情報の符号化のタイプ（例えば、テキスト、数、アイコン、プログレスバー、色など）、テキスト又は数についての、この情報のフォーマッティング（例えば、秒又は分を使用して表示される時間、小数を使用して表示される時間など）及びテキストスタイル（フォントタイプ及びサイズ、文字列合わせ及び改行など）、アイコン又はシンボルについての、アイコン／パターンから意味への変換テーブル、プログレスバーについての、プログレスバー及び周囲のボックスの形状及び色、色についての、色から意味への変換テーブルなどを含むことがある。これらは、例にすぎず、限定的なものとして解釈されるべきでない。パターン及び記述データベース３８のテンプレート３９は、新しいユーザインターフェースが含められるたびに更新することができる。

[0036] 情報抽出モジュール４０は、画像データのそれぞれのパッチから画像要素検出モジュール３６によって検出された画像要素を抽出するように構成される。そうするために、一例では、情報抽出モジュール４０は、テキスト又は数を識別するために使用され得る光学式文字認識（ＯＣＲ）プロセスを実行することができる。色について、情報抽出モジュール４０は、キャプチャされたスクリーン画像３１の画像パッチの平均値、赤値、緑値、及び青値を抽出することができる。アイコン又はシンボルについて、情報抽出モジュール４０は、パターン及び記述データベース３８に記憶された画像とのパターン比較を実行することができる。パターン及び記述データベース３８は、例えば、色／アイコンから意味への変換テーブルを与えることによって、抽出された情報をどのように解釈するかについての情報をさらに含む。情報抽出モジュール４０は、抽出されたいくつかの情報を正しい形式に変換するように構成され、パターン及び記述データベース３８中の情報に従ってラベル付けされる。

[0037] 画像要素検出３６の使用と、それに続く画像要素４０からの情報の抽出とは１つの手法である。しかしながら、領域識別（すなわち画像要素検出モジュール３６）を省略すること、及びキャプチャされたスクリーン画像３１全体に適用されるＯＣＲ及び／又は画像マッチングを採用することなど、情報を抽出するために他の手法を使用することができる。

[0038] 画像処理モジュール３２は、連続的なキャプチャされたスクリーン画像３１から（例えば、ビデオフィード１７又はスクリーンミラーリングデータストリーム１８の連続的なビデオフレームから）情報を（ほぼ）リアルタイムで抽出するために動作する。このことは、ビデオフィードのあらゆるビデオフレーム、又はビデオフレームのサブセットを分析することを伴うことがある。例えば、ビデオが３０フレーム／秒（３０ｆｐｓ）のフレームレートを有する場合、６番目のフレームごとに処理を行えば十分であり、それにより、処理の総量が大幅に低減されるとともに１／５秒の時間分解能が与えられることがある。連続的な画像フレームのそのような処理によって、画像処理モジュール３２は、ローカルオペレータＬＯがこれらの様々なスクリーンの間をナビゲートする際に、医療撮像デバイスコントローラ１０のＧＵＩ２８´の様々なスクリーンから情報を抽出する。例えば、一般的なワークフローでは、ローカルオペレータＬＯは、最初に１つ又は複数の撮像検査セットアップスクリーンを立ち上げ、１つ又は複数の撮像検査セットアップスクリーンを介して、撮像されるアナトミーと特定の撮像シーケンス／走査とが選択／入力される。その後、ローカルオペレータは、撮像走査又はシーケンスのパラメータを設定するために走査／シーケンスセットアップスクリーンに移動する。その後、ローカルオペレータは、撮像ボリュームを決定するためのスカウト走査を収集するためにスカウト走査スクリーンに移動する。その後、ローカルオペレータは画像収集スクリーンなどに移動する。ユーザが、これらの様々なスクリーンをナビゲートし、関連データを入力する際に、画像処理モジュール３２は、各連続的にナビゲートされたスクリーンから情報を抽出するために動作３４、３６、４０を連続的に適用する。抽出された情報のこの集合から、アブストラクト生成モジュール４２は、変換されたいくつかの情報を、すべてのタイプの撮像モダリティ、システム、及びユーザインターフェースについて同一であるジェネリックなデータ構造中に挿入することによって、抽出された特徴の表現４３を作成するように構成される。データ構造は、走査の回数、残りの走査時間、患者の体重、検査の開始からの時間、再走査の回数、走査プロトコルの名称、実行中の検査の進捗状況、心拍数、呼吸数などの要素を含んでいる。必要とされる情報がユーザインターフェース上で利用可能でない場合、データ構造の対応する要素は、空のままにされるか、「利用可能でない」とマーキングされるか、又はデフォルト値で満たされる。

[0039] 一実施形態では、アブストラクト表現４３は撮像検査の現在の状態の持続的な表現として働く。代替的に、さらなる処理が実行され得る。図２の例示的な例では、このさらなる処理において、医療撮像検査のステータス（すなわち状態）の撮像検査ワークフローモデル４５を生成するために、ステータス情報のアブストラクト表現４３がステートマシンモジュール４４への入力として使用される（より一般的には、ワークフローモデル４５は、ビジネスプロセスモデル表記法（ＢＰＭＮ）モデルなど、任意の他の好適なモデルであり得る）。ステートマシンモジュール４４は、すべての情報が常にディスプレイデバイス２４´上で可視であるとは限らないときでも、医療撮像デバイス２及び医療撮像デバイスコントローラ１０の現在のステータスとパラメータとを記憶する。例えば、ステートマシンモジュール４４は、医療撮像デバイスコントローラ１０上に表示されたユーザインターフェースの１つのスクリーン中に新しい患者症例が作成されたという情報を受信する。それの後に、ローカルオペレータＬＯは、プロトコル情報を入力するために医療撮像デバイスコントローラ１０上のスクリーンを変更する。ステートマシンモジュール４４は、患者情報と、医療撮像検査が開始されたときの時点とを記憶する。ステートマシンモジュール４４は、後で、データ収集の進捗状況と残りの走査時間とについての情報を受信する。ローカルオペレータＬＯが、上部の異なるウィンドウを閲覧しているか、又はユーザインターフェーススクリーンを切り替えたときでも、進捗情報及び検査ステータスは依然としてステートマシンモジュール４４に記憶されている。ステートマシンモジュール４４は、撮像検査ワークフローモデル４５を生成するためにこのデータを使用する。

[0040] いくつかの実施形態では、同時に、又は異なる時間において、キャプチャされたスクリーン画像３１が画像要素検出モジュール３６によって処理された後に、検出された画像要素はまた、キャプチャされたスクリーン画像３１から１つ又は複数の修正された画像４７を生成するために画像修正モジュール４６によって使用される。画像要素は、修正された画像４７を作成するために、画像修正モジュール４６によって、キャプチャされたスクリーン画像３１から削除されるか、キャプチャされたスクリーン画像３１中で修正されるか、キャプチャされたスクリーン画像３１中でハイライト付けされるか、さもなければ注釈を付けられる。削除は、好ましくはリモートエキスパートＲＥに示されない患者識別情報（ＰＩＩ）又は他の情報を取り除くために使用することができる。ハイライト付け又は他の注釈は、スクリーン中に示された選択されたアイテムに注意を引くために使用することができる。１つの手法では、テンプレート３９によって識別されたスクリーン領域が、どのように修正が行われるべきであるかに関してマーキングされる。例えば、画像修正モジュール４６は、（ｉ）（「削除されるべき」とマーキングされている場合に）キャプチャされたスクリーン画像３１から画像要素を削除すること、（ｉｉ）（「修正されるべき」とマーキングされている場合に）画像要素を他の情報と置き換えること、又は（ｉｉｉ）（「ハイライト付けされるべき」とマーキングされている場合に）キャプチャされたスクリーン画像上の情報をハイライト付けすることのいずれかを行うように構成される。修正の例では、この修正がどのように行われるべきであるか、及び要素が何と置き換えられるべきであるかに関する命令が、（テンプレート３９に関連付けられ得る）修正命令データベース４８から読み取られる。修正命令についてのいくつかの例は、「「患者名」とラベル付けされた要素を「匿名」というテキストと置き換える」を含むことができる。固定されたテキスト又はシンボルに加えて、アブストラクト表現４３から置換要素を引き出すこともできる。ハイライト付けの場合、キャプチャされたスクリーン画像３１の対応する一部がフレーム又はハイライト色によってマーキングされるか、又はキャプチャされたスクリーン画像の残りが暗くされるか若しくはゆがめられる。ハイライト付けは、トレーニング目的のために、又はオペレータを次のアクション若しくは現在重要な情報に導くために使用することができる。これらの動作は、修正された画像４７を生成するために使用される。

[0041] 可視化５０は、リモートワークステーション１２のディスプレイデバイス２４上での表示のために画像処理モジュール３２によって生成される。可視化は、アブストラクト表現モジュール４２によって生成された表現４３、ステートマシンモジュール４４によって生成されたステートマシン４５の表現、及び画像修正モジュール４６によって生成された修正された画像４７のうちの１つ又は複数、或いはこれらのオプションのいずれかの任意のオーバーレイを含む。リモートエキスパートＲＥは、可視化５０がワークステーション１２上でどのように表示されるかを選択することができる。ステートマシンモジュール４４の表現は、異なる種類の可視化を作成するために使用することができる。さらに、アブストラクト表現４２を生成するために使用されるデータ構造は、ローカル医療撮像デバイス２のすべての異なるユーザインターフェースについて同じであるので、情報は、リモートエキスパートＲＥが医療撮像検査のステータスを迅速に理解することを可能にするジェネリックな形で表示することができる。

[0042] いくつかの例では、医療撮像デバイスコントローラ１０からのステータス情報は、例えば、表示要素のテーブルとして又は複数の行若しくは列として、リモートワークステーション１２における可視化５０において構造化された形式で同時に表示することができる。図３は可視化５０の一例を示す。図３に示されているように、可視化５０は、医療撮像デバイス２のロケーション、モダリティ、及び識別情報を示すロケーションフィールド５２、医療撮像検査を受けている患者の性別及び年齢を示す患者フィールド５４、医療撮像検査のタイプを示すプロトコルフィールド５６、医療撮像検査の経過時間を示す経過時間フィールド５８、及び医療撮像検査の残りの時間を示す残り時間フィールド６０の５つのフィールドを表示する。いくつかの例では、残り時間フィールド６０のエントリは、残り時間が０に近づいたときに注釈を付ける（例えばハイライト付けする）ことができ、その場合、医療撮像検査は完了している。

[0043] 再び図２を参照すると、他の例では、アブストラクト表現４２は、自動アクション及び／又はプロセスをトリガするために使用することができる。例えば、抽出された情報は、取られるべき次のアクションについて、あり得るスケジュールの競合について、次のアクションについての予想される遅延について、アクションの順序の変更について、次のアクションまでの時間についてなど、リモートエキスパートＲＥ（又はプロセスに関与する任意の他の人）に自動的に警告するために使用することができる。別の例では、アブストラクト表現４２は、自動予測又は適応スケジューリングエンジン（図示せず）にさらに転送することができる。例えば、いくつかの異なる医療撮像デバイス２から抽出された残りの走査時間は、放射線科のために又はリモートエキスパートＲＥのために、自動的にスケジュールを再構成し、タスク優先度付けを作成するために使用することができる。さらなる一例では、アブストラクト表現４２は、標準的な手順からの逸脱を検出し、品質保証の理由での逸脱をドキュメント化するか、又は逸脱についてリモートエキスパートＲＥに警告するために使用することができる。例えば、医療撮像検査のプロトコルからの逸脱は、ローカルオペレータＬＯが、実行中の検査のための撮像シーケンスを削除若しくは追加するか、又は画像コントラスト設定のいずれかを変更したときに起こる。

[0044] リモートワークステーション１２の非一時的コンピュータ可読媒体２６は、医療撮像検査中に医療撮像デバイス２のローカルオペレータＬＯにリモートエキスパートＲＥからの支援を与える方法１００を実行するための少なくとも１つの電子プロセッサ２０によって実行可能な命令を記憶することができる。言い換えれば、リモートワークステーション１２の非一時的コンピュータ可読媒体２６は画像処理モジュール３２の実装に関係する命令を記憶する。

[0045] 図４を参照し、引き続き図１～図３を参照すると、支援方法１００の例示的な一実施形態がフローチャートとして概略的に示されている。支援方法１００を開始するために、患者の１つ又は複数の画像が、医療撮像検査中にローカルオペレータＬＯによって動作させられる医療撮像デバイス２によって収集される。医療撮像検査に関係する画像及び／又は設定は医療撮像デバイスコントローラ１０のディスプレイデバイス２４´上に示されている。動作１０２において、医療撮像デバイスコントローラ１０上に表示された画像フレームからの画像特徴が抽出される。動作１０２は、スクリーン識別モジュール３４、（パターン及び記述データベース３８とともに）画像要素検出モジュール３６、及び情報抽出モジュール４０によって実行することができる。

[0046] 一例では、医療撮像デバイスコントローラ１０の、リモートワークステーション１２とのスクリーン共有デバイス１３を使用して（すなわち、スクリーン共有ソフトウェアを動作させて）画像特徴を抽出することができる。別の例では、医療撮像デバイスコントローラ１０のビデオフィード１７がカメラ１６によってキャプチャされ、リモートワークステーション１２に送信される。画像特徴は、受信されたビデオフィード１７からリモートワークステーション１２によって抽出される。画像特徴からの抽出された情報は、医療撮像デバイスコントローラ１０のディスプレイデバイス２４´上の画像特徴の位置、画像特徴のテキストラベル、画像特徴の情報のタイプ、画像特徴の符号化のタイプ、画像特徴のフォーマッティングのタイプ、画像特徴の変換テーブル又はアイコン、及び画像特徴の形状又は色などのうちの１つ又は複数を含む。

[0047] 抽出動作１０２は様々な様式で実行することができる。一例では、抽出は、テキスト情報を抽出するために画像フレーム上でＯＣＲプロセスを実行することを含む。別の例では、色情報を抽出するために画像フレームの平均色値が抽出される。さらなる一例では、画像特徴を抽出するために、データベース（例えばパターン及び記述データベース３８）に記憶された画像を用いて、パターン比較動作が画像に対して実行される。また別の例では、画像フレーム中に示されているダイアログスクリーンに対応する、対応するダイアログスクリーンテンプレート３９が識別される。対応するダイアログスクリーンテンプレート３９は、１つ又は複数のスクリーン領域を識別し、それらの１つ又は複数のスクリーン領域を医療撮像検査の設定と関連付ける。抽出された画像特徴は、対応するダイアログスクリーンテンプレート３９によって与えられた関連付けを使用した医療撮像検査の設定を用いて、１つ又は複数のスクリーン領域中の画像フレームと、関連する抽出された情報とから抽出される。

[0048] 動作１０４において、抽出された画像特徴が医療撮像検査の現在のステータスの表現４３（すなわちアブストラクト表現）に変換される。動作１０４はアブストラクト表現モジュール４２によって実行される。表現４３を生成するために、抽出された画像特徴が、医療撮像デバイスコントローラ１０のディスプレイデバイス２４´上に表示された画像特徴のフォーマットとは無関係であるジェネリックな撮像検査ワークフローモデル中に入力される。表現４３は、走査の回数、残りの走査時間、走査されるべき患者の体重値、医療撮像検査の開始から経過した時間、再走査の回数、走査プロトコルの名称、現在の医療撮像検査の進捗状況、走査されるべき患者の心拍数、及び走査されるべき患者の呼吸数のうちの１つ又は複数を含む。

[0049] いくつかの例では、動作１０４は、画像修正モジュール４６によって実行される動作を含むことができる。そうするために、画像フレームからの抽出された特徴のうちの１つ又は複数が、医療撮像検査中に走査されるべき患者の個人識別可能な情報として識別される。医療撮像デバイスコントローラ１０のディスプレイデバイス２４´上に表示された修正された画像４７を含む１つ又は複数の修正された画像フレームは、画像フレームから、識別された個人識別可能な情報特徴を削除すること、又は画像フレーム中の個人識別可能な情報をテキスト、シンボル、又は色と置き換えることのうちの１つによって生成される。修正された画像フレーム４７はワークステーション１２上のＧＵＩ２８上にビデオフィードとして表示される。

[0050] 動作１０６において、表現４３が、医療撮像検査の現在の状態を示す撮像検査ワークフローモデル４５中に入力される。動作１０６はステートマシンモジュール４４によって実行される。撮像検査ワークフローモデル４５が、次いで、リモートワークステーション１２上に与えられる。いくつかの例では、抽出された画像特徴は、医療撮像デバイスコントローラ１０に入力され、ディスプレイデバイス２４´上に表示される、データを含む。撮像検査ワークフローモデル４５が、次いで、この入力されたデータを用いて更新される。別の例では、リモートエキスパートＲＥ及び／又はローカルオペレータＬＯによってアクションがそれにおいて取られる必要がある、撮像検査ワークフローモデル４５中のトリガイベントが識別され得る。トリガイベントを示すアラート３０が、次いで、リモートワークステーション１２のＧＵＩ２８を介して出力され得る。

[0051] 動作１０８において、ＧＵＩ２８は、可視化５０（例えば、アブストラクト表現モジュール４２によって生成された表現４３、ステートマシンモジュール４４によって生成されたステートマシンの表現４５、及び画像修正モジュール４６によって生成された修正された画像４７のうちの１つ又は複数、又はこれらのオプションのいずれかの任意のオーバーレイ）を表示するように構成される。可視化５０は、医療撮像検査中にローカルオペレータＬＯによって動作させられる医療撮像デバイス２とは無関係である標準表示フォーマットを使用して表示することができる。

[0052] 単一の医療撮像デバイス２を格納する単一の医療撮像デバイスベイ３に関して主に説明したが、方法１００は、対応する数のローカルオペレータによって動作させられる医療撮像デバイスを含む複数のサイトにおいて実行することができ、可視化５０は複数のサイトのうちのサイトからの情報を含むことができる。可視化５０は、図３に示されたものなど、対応するサイトにおける医療撮像検査のステータスを示す、リモートワークステーション１２において表示されるリストを含む。このことは、場合によっては異なる型式及び／又はモデルの撮像デバイスを有する、複数の撮像ベイを同時に監視及び／又は支援するリモートエキスパートＲＥにとって特に有益である。表現４３は、各撮像ベイにおいて行われている撮像検査の状態についての関連情報のデバイス非依存性の概要をリモートエキスパートＲＥに与え、一方、（画像処理モジュール３２が連続的なキャプチャされたスクリーン画像３１を処理する際の時系列で示される）修正された画像フレーム４７は、撮像デバイスコントローラの（修正された）ミラーリングされたビデオを与える。一般的な実装形態では、表現４３は、すべての監視される撮像ベイに関するステータス情報を与えるために常に示され、一方、リモートエキスパートＲＥが現在それに支援を与えている１つの特定の撮像ベイについての、修正された画像フレーム４７を含むビデオが示される。このようにして、リモートエキスパートＲＥは、支援されているベイの詳細な現在の状況認識を有するとともに、リモートエキスパートＲＥは、そのリモートエキスパートに割り当てられたすべての撮像ベイのステータスの認識をも維持する。

[0053] 好ましい実施形態を参照しながら本開示について説明した。改変及び変更は、前述の発明を実施するための形態を読み、理解すれば想到し得る。例示的な実施形態は、そのような改変及び変更が添付の特許請求の範囲又はそれの等価物の範囲内に入る限り、すべてのそれらの改変及び変更を含むものとして解釈されるものとする。

Claims (20)

1. 医療撮像検査中に医療撮像デバイスのローカルオペレータにリモートエキスパートからの支援を与える方法を実行するための少なくとも１つの電子プロセッサによって実行可能な命令を記憶する非一時的コンピュータ可読媒体であって、前記方法が、
   前記医療撮像検査中に前記ローカルオペレータによって動作可能な前記医療撮像デバイスのコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップと、
   抽出された前記画像特徴を前記医療撮像検査の現在のステータスの表現に変換するステップと、
   前記リモートエキスパートによって動作可能なワークステーション上に前記表現を表示するユーザインターフェースを与えるステップと
   を有する、非一時的コンピュータ可読媒体。
2. 抽出された前記画像特徴を前記医療撮像検査の前記現在のステータスの前記表現に変換するステップが、
   前記表現を生成するために、前記ローカルオペレータによって動作可能な前記コントローラの前記ディスプレイデバイス上に表示された前記画像特徴のフォーマットとは無関係であるジェネリックな撮像検査ワークフローモデル中に、抽出された前記画像特徴を入力するステップ
   をさらに有する、請求項１に記載の非一時的コンピュータ可読媒体。
3. 前記表現が、走査の回数、残りの走査時間、走査されるべき患者の体重値、前記医療撮像検査の開始から経過した時間、再走査の回数、走査プロトコルの名称、現在の医療撮像検査の進捗状況、走査されるべき前記患者の心拍数、走査されるべき前記患者の呼吸数のうちの１つ又は複数を含む、請求項１又は２に記載の非一時的コンピュータ可読媒体。
4. 前記方法が、
   前記医療撮像検査の現在の状態を示す撮像検査ワークフローモデル中に前記表現を入力するステップと、
   前記リモートエキスパートによって動作可能な前記ワークステーション上に前記撮像検査ワークフローモデルを与えるステップと
   をさらに有する、請求項１から３のいずれか一項に記載の非一時的コンピュータ可読媒体。
5. 抽出された前記画像特徴が、前記ローカルオペレータによって前記コントローラに入力されるデータであって、前記コントローラの前記ディスプレイデバイス上に表示されるデータを含み、前記方法が、
   前記ローカルオペレータによって入力された前記データを用いて、前記リモートエキスパートによって動作可能な前記ワークステーション上に与えられた前記撮像検査ワークフローモデルを更新するステップ
   をさらに有する、請求項４に記載の非一時的コンピュータ可読媒体。
6. 前記方法が、
   前記リモートエキスパート及び／又は前記ローカルオペレータによってアクションがそれにおいて取られる必要がある、前記撮像検査ワークフローモデル中のトリガイベントを識別するステップと、
   前記リモートエキスパートによって動作可能な前記ユーザインターフェースを介して、前記トリガイベントを示すアラートを出力するステップと
   をさらに有する、請求項４又は５に記載の非一時的コンピュータ可読媒体。
7. 抽出された前記画像特徴を前記医療撮像検査の現在のステータスの表現に変換する前記ステップが、
   前記医療撮像検査中に走査されるべき患者の個人識別可能な情報として、前記画像フレームから、抽出された前記画像特徴のうちの１つ又は複数を識別するステップと、
   前記画像フレームから、識別された前記個人識別可能な情報特徴を削除すること、又は前記画像フレーム中の前記個人識別可能な情報をテキスト、シンボル、若しくは色と置き換えることのうちの１つによって、前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレームから、修正された画像フレームを生成するステップと、
   前記リモートエキスパートによって動作させられる前記ワークステーション上の前記ユーザインターフェース上で提示されるビデオフィードとして、修正された前記画像フレームを表示するステップと
   をさらに有する、請求項の１から６いずれか一項に記載の非一時的コンピュータ可読媒体。
8. 前記医療撮像検査中に前記ローカルオペレータによって動作可能な前記コントローラの前記ディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップが、
   １つの画像フレーム中に示されているダイアログスクリーンに対応するダイアログスクリーンテンプレートを識別するステップであって、前記対応するダイアログスクリーンテンプレートが、１つ又は複数のスクリーン領域を識別し、前記１つ又は複数のスクリーン領域を前記医療撮像検査の設定と関連付ける、対応するダイアログスクリーンテンプレートを識別するステップと、
   前記１つの画像フレームから情報を抽出し、前記対応するダイアログスクリーンテンプレートによって与えられる関連付けを使用して、前記１つ又は複数のスクリーン領域中の抽出された前記情報を前記医療撮像検査の設定と関連付けるステップと
   をさらに有する、請求項１から７のいずれか一項に記載の非一時的コンピュータ可読媒体。
9. 抽出された前記情報が、前記ディスプレイデバイス上の画像特徴の位置、前記画像特徴のテキストラベル、前記画像特徴の情報のタイプ、前記画像特徴の符号化のタイプ、前記画像特徴のフォーマッティングのタイプ、前記画像特徴の変換テーブル又はアイコン、及び前記画像特徴の形状又は色のうちの１つ又は複数を含む、請求項１から８のいずれか一項に記載の非一時的コンピュータ可読媒体。
10. 前記医療撮像検査中に前記ローカルオペレータによって動作可能な前記医療撮像デバイスの前記コントローラの前記ディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップが、
    テキスト情報を抽出するために、前記ローカルオペレータによって動作可能な前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレーム上で光学式文字認識を実行するステップと、
    色情報を抽出するために、前記ローカルオペレータによって動作可能な前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレーム上の平均色値を抽出するステップと、
    データベースに記憶された画像を用いて、前記ローカルオペレータによって動作可能な前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレーム上でパターン比較動作を実行するステップと
    のうちの少なくとも１つを有する、請求項１から９のいずれか一項に記載の非一時的コンピュータ可読媒体。
11. 前記方法が、
    前記コントローラ上で動作するスクリーン共有ソフトウェアを使用して、前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレームから前記画像特徴を抽出するステップをさらに有する、請求項１から１０のいずれか一項に記載の非一時的コンピュータ可読媒体。
12. 前記方法が、
    前記リモートエキスパートによって動作させられる前記ワークステーションにおいて、前記ローカルオペレータによって動作させられる前記コントローラの前記ディスプレイデバイスをキャプチャするビデオフィードを受信するステップと、
    前記リモートエキスパートによって動作させられる前記ワークステーションにおいて前記ビデオフィードを表示するステップと、
    受信された前記ビデオフィードから前記画像特徴を抽出するステップと
    をさらに有する、請求項１から１０のいずれか一項に記載の非一時的コンピュータ可読媒体。
13. 前記方法が、
    前記医療撮像検査中に前記ローカルオペレータによって動作させられる前記医療撮像デバイスとは無関係である標準表示フォーマットを使用して、前記リモートエキスパートによって動作させられる前記ワークステーションにおいて前記医療撮像検査の前記現在のステータスの前記表現を表示するステップ
    をさらに有する、請求項１から１２のいずれか一項に記載の非一時的コンピュータ可読媒体。
14. 前記方法が、対応する数のローカルオペレータによって動作させられる医療撮像デバイスを含む複数のサイトにおいて実行され、前記表現が前記複数のサイトのうちのサイトからの情報を含む、請求項１から１３のいずれか一項に記載の非一時的コンピュータ可読媒体。
15. 前記表現が、対応するサイトにおける前記医療撮像検査のステータスを示すリストを含む、請求項１４に記載の非一時的コンピュータ可読媒体。
16. 医療撮像デバイスを使用して実行される医療撮像検査中にローカルオペレータにリモートエキスパートからの支援を与えるための装置であって、前記装置は、
    前記リモートエキスパートによって動作可能なワークステーションと、
    前記医療撮像検査中に前記ローカルオペレータによって動作可能な前記医療撮像デバイスのコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出することと、
    前記医療撮像検査の現在の状態を示す撮像検査ワークフローモデル中に、抽出された前記画像特徴を入力することによって、抽出された前記画像特徴を前記医療撮像検査の現在のステータスの表現に変換することと、
    前記リモートエキスパートによって動作可能な前記ワークステーション上に前記表現と前記撮像検査ワークフローモデルとのうちの少なくとも１つを表示するユーザインターフェースを与えることと
    を行うようにプログラムされた少なくとも１つの電子プロセッサと
    を備える、装置。
17. 前記少なくとも１つの電子プロセッサが、
    前記表現を生成するために、前記ローカルオペレータによって動作可能な前記ディスプレイデバイス上に表示された前記画像特徴のフォーマットとは無関係である標準フォーマットを有する撮像検査ワークフローモデル中に、抽出された前記画像特徴を入力する
    ようにさらにプログラムされた、請求項１６に記載の装置。
18. 前記少なくとも１つの電子プロセッサは、
    前記撮像検査ワークフローモデルが、前記リモートエキスパート又は前記ローカルオペレータのいずれかによってアクションがそこで取られる必要がある、前記医療撮像検査中の手順に到達したときに、アラートを出力する
    ようにさらにプログラムされた、請求項１６又は１７に記載の装置。
19. 前記少なくとも１つの電子プロセッサが、
    前記医療撮像検査中に走査されるべき患者の個人識別可能な情報として、前記画像フレームから、抽出された前記画像特徴のうちの１つ又は複数を識別することと、
    前記画像フレームから、識別された前記個人識別可能な情報特徴を削除すること、又は前記画像フレーム中の前記個人識別可能な情報をテキスト、シンボル、又は色と置き換えることのうちの１つによって、前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレームから、修正された画像フレームを生成することと、
    前記リモートエキスパートによって動作させられる前記ワークステーション上の前記ユーザインターフェース上で提示されるビデオフィードとして、前記修正された画像フレームを表示することと
    によって、抽出された前記画像特徴を前記医療撮像検査の現在のステータスの表現に変換するようにさらにプログラムされた、請求項１６から１８のいずれか一項に記載の装置。
20. 医療撮像検査中にローカルオペレータにリモートエキスパートからの支援を与える方法であって、前記方法は、
    前記医療撮像検査中に前記ローカルオペレータによって動作可能なコントローラのディスプレイデバイス上に表示された画像フレームから画像特徴を抽出するステップと、
    前記医療撮像検査中に走査されるべき患者の個人識別可能な情報として、前記画像フレームから、抽出された前記画像特徴のうちの１つ又は複数を識別することと、
    前記画像フレームから、識別された前記個人識別可能な情報特徴を削除すること、又は前記画像フレーム中の前記個人識別可能な情報をテキスト、シンボル、又は色と置き換えることのうちの１つによって、前記コントローラの前記ディスプレイデバイス上に表示された前記画像フレームから、修正された画像フレームを生成することとと
    によって、抽出された前記画像特徴を、前記医療撮像検査の現在のステータスを示す表現に変換するステップと、
    前記医療撮像検査の現在の状態を示す撮像検査ワークフローモデル中に、前記医療撮像検査の前記現在のステータスを示す前記表現を入力するステップと、
    前記リモートエキスパートによって動作可能なワークステーション上に、ビデオフィードとしての前記修正された画像フレーム、アブストラクト表現、及び前記撮像検査ワークフローモデルを表示するユーザインターフェース（ＵＩ）を与えるステップと
    を有する、方法。

Images