JP7080932B2 - ワークフロー管理のための方法およびシステム - Google Patents

ワークフロー管理のための方法およびシステム Download PDF

Info

Publication number
JP7080932B2
JP7080932B2 JP2020122769A JP2020122769A JP7080932B2 JP 7080932 B2 JP7080932 B2 JP 7080932B2 JP 2020122769 A JP2020122769 A JP 2020122769A JP 2020122769 A JP2020122769 A JP 2020122769A JP 7080932 B2 JP7080932 B2 JP 7080932B2
Authority
JP
Japan
Prior art keywords
workflow
diagnostic
patient
previous
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020122769A
Other languages
English (en)
Other versions
JP2021039742A (ja
Inventor
シャシ・クマール
アヴィナシュ・ジャ
キランジェーヴィ・ラマナタ
Original Assignee
ジーイー・プレシジョン・ヘルスケア・エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ジーイー・プレシジョン・ヘルスケア・エルエルシー filed Critical ジーイー・プレシジョン・ヘルスケア・エルエルシー
Publication of JP2021039742A publication Critical patent/JP2021039742A/ja
Application granted granted Critical
Publication of JP7080932B2 publication Critical patent/JP7080932B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0633Workflow analysis
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Biomedical Technology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Educational Administration (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Pathology (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本明細書に開示される主題の実施形態は、ヘルスケアおよび診断プロトコルにおけるワークフローの管理に関する。
病院または診療所などのヘルスケア環境は、患者の処置中に収集されたデータを記憶するための記憶システムを含む。記憶システムに記憶された情報は、例えば、患者の病歴、撮像データ、試験結果、診断情報、管理情報、および/またはスケジューリング情報を含み得る。情報は、中央に記憶され、複数のローカルおよび遠隔の場所からアクセス可能であり得る。ヘルスケアワークフローは、医療開業医による分析のための記憶システムからの、画像保管通信システム(「PACS」)に記憶された以前の患者スキャンなどの患者データの抽出および分析を含み得る。例えば、放射線技師は、現在のスキャンと比較するために前のスキャンを抽出する場合がある。ヘルスケアワークフローはまた、患者の現在のスキャンと比較して信頼できる診断を行うために、開業医が関連のある文献参照および関連のある以前に診断された症例を識別することを指示する場合もある。
米国特許出願公開第2018/0364879号明細書
一実施形態では、方法は、1つまたは複数の医療画像を含む診断検査に関連する1つまたは複数の検査パラメータを自動的に識別することと、1つまたは複数の医療画像を分析するためのワークフローを自動的に生成することであって、ワークフローは、診断プロトコル、ツールセット、以前の撮像スキャン、以前の所見、および参照画像の1つまたは複数を含み、ワークフローは、1つまたは複数の検査パラメータに基づいて生成されることとを含む。このようにして、ワークフローの選択におけるユーザの疲労およびエラーを軽減し、診断成果の生産性および効率を向上させることができる。
上記の簡単な説明は、詳細な説明でさらに説明される概念の選択を簡略化した形で紹介するために提供されていることを理解されたい。特許請求される主題の重要なまたは本質的な特徴を識別することは意図されておらず、その主題の範囲は詳細な説明に添付される特許請求の範囲によって一義的に定義される。さらに、特許請求される主題は、上記のまたは本開示の任意の部分に記載の欠点を解決する実施態様に限定されない。
本開示は、添付の図面を参照しながら、以下の非限定的な実施形態の説明を読むことからよりよく理解されるであろう。
一実施形態による、撮像システムの絵図である。 一実施形態による、例示的な撮像システムのブロック概略図である。 ヘルスケアシステムPACSに結合されたオンライン中央学習プラットフォームの例示的な実施形態を示す図である。 複数のヘルスケア環境と統合された図3のオンライン中央学習プラットフォームの例示的な実施形態を示す図である。 1つまたは複数のワークフローモデルからの出力に基づいて診断検査のワークフローを自動的に生成するための例示的な方法を示す図である。 1つまたは複数のワークフローモデルを訓練するための例示的な方法を示す図である。 1つまたは複数のワークフローモデルの訓練および実行の例示的な概要を示す図である。 最適化されたワークフローに関連するオプションを表示する例示的なワークフローインターフェースを示す図である。 最適化されたワークフローに従って選択された患者画像の事前情報を表示する例示的なインターフェースを示す図である。 最適化されたワークフローに従って選択された参照画像を表示する例示的なインターフェースを示す図である。
以下の説明は、プロトコル管理および臨床意思決定支援システムを含むワークフロー管理の様々な実施形態に関する。特に、診断撮像スキャン中に取得された画像のより簡単で改善された分析、および疑わしい状態のより信頼できる診断を可能にするワークフローを臨床医に提供することができるシステムおよび方法が提供される。
撮像システムで患者の撮像データを取得した後、放射線技師などの臨床医は、検査または研究において、取得された画像の分析を実施することができる。そこで、臨床医は、現在のスキャンで取得された画像に少なくとも部分的に基づいて疑わしい状態を診断または除外することができる。分析は、現在の患者スキャンで取得された画像を、同じ患者の1つまたは複数の前のスキャン、参照画像、参照文献などと比較することを含み得る。ただし、臨床医は、現在のスキャンと比較する前のスキャンのいずれかを選択しなければならない。加えて、臨床医は、診断に最も良く到達するようにスキャンを閲覧する順序を決定しなければならない。臨床医はまた、診断される状態に関係する参照文献および画像を識別および抽出しなければならない場合もある。例えば、臨床医は、同じヘルスケア施設の他の患者または別の施設の患者からの確認された症例を含む確認された症例、公開された文献からの確認された症例、参考図書からの画期的な確認された症例、正常な解剖学的特徴を示す参照画像などからスキャンを識別しなければならない場合がある。検査中、臨床医はまた、スキャン時に患者に関係する臨床データ(例えば、血液試験結果、体温測定値、血圧測定値など)を抽出する必要がある場合もある。これらは、診断中に考慮する必要があり得る。またさらに、画像を分析するために、臨床医は、1つまたは複数のツールセットを選択しなければならない場合がある。1つまたは複数のツールセットは、選択されると、ウィンドウレベリング、パン、ズーム、画像分析機能の適用などのある特定のタスクの実施を可能にするユーザインターフェースメニューオプション/制御ボタンを含むことができる。ツールセットの選択は撮像モダリティに基づき得るが、診断される疑わしい状態、ユーザ嗜好などに基づいてもよい。例えば、マンモグラムの分析時に所与のヘルスケア施設での使用が推奨される具体的なツールセットがある場合がある。追加的または代替的に、所与の臨床医が、臨床医のマンモグラム分析の履歴に基づいてマンモグラムを分析するときに有用である具体的なツールセット(例えば、ズーム、パン、回転、スライスなど)がある場合がある。いくつかの例では、臨床医が診断された状態に到達するために検査を実施したら、最終的な診断結果が患者に伝達される前に、診断された状態の治療に特化した医師などの別の臨床医によって検査がさらにレビューされることがある。
上述のように、画像分析時において、臨床医にかなりの認知負荷が存在し得る。上述のパラメータのいずれかが変更された場合、診断に影響が出る可能性がある。例えば、臨床医が比較のために正しい参照画像を選択しなかった場合(例えば、サイズが間違っている、向きが間違っている、状態が間違っている、身体部分が間違っているなど)、根本的な状態が診断されないことがある。別の例として、臨床医が正しいセットの以前の患者スキャンを選択しなかった場合、または特定の順序で以前の患者スキャンを分析しなかった場合、疑わしい状態が誤診される可能性がある。臨床医が疲れている、または疲労している場合、誤った選択が行われ、診断精度に影響が出る可能性が大きくなる。
したがって、本明細書に開示される実施形態によれば、臨床医が患者の診断医療画像を分析することを含む検査を実施しているときにガイド付き診断ワークフローが自動的に生成され、臨床医の認知負荷を軽減することができる。患者の新しい検査の記憶および/または抽出時、コンピューティングシステムは、自動的に、かつユーザ入力なしで、検査に関する様々なパラメータを検出および識別することができる。これらは、例えば、患者のID、検査で分析される患者画像を取得するために使用される撮像モダリティ、疑わしい患者状態などに関するパラメータを含み得る。様々なパラメータの自動検出に続いて、コンピューティングシステムは、診断ワークフローを自動的に生成し得る。そこで、識別されたパラメータに基づいて、コンピューティングシステムは、関連のある前の患者のスキャン、ならびに現在の検査に最も関係する参照画像および文献結果を自動的に選択および抽出することができる。コンピューティングシステムは、人工知能ベースのモデルを使用して、疑わしい状態を診断する際に臨床医を支援することができる以前のデータを識別、抽出、および表示するように構成することができ、それによって臨床医の認知負荷を軽減し、また診断効率も向上させる。関連のある以前のスキャンおよび参照を識別することに加えて、診断ワークフローはまた、疑わしい患者状態、撮像モダリティ、および/または臨床医に基づいて、現在の検査に最も適したツールセットをディスプレイに表示することができる。さらに、以前のスキャンおよび参照は、選択された診断ワークフローに対応して選択されたハンギングプロトコルに従って表示されてもよい。
さらに、コンピューティングシステムは、診断ワークフローのデータベースを含むことができ、反復的に学習される診断精度に基づいてデータベースからワークフローを選択することができる。例えば、臨床医は、特定のハンギングプロトコル、特定のツールセット、特定のセットの参照画像、特定のセットの以前の患者スキャンなどを使用して、患者スキャンの検査のためのワークフローを実行することができる。ワークフローの詳細は、データベースに保存される。臨床医は、実行されたワークフローに従って分析された患者スキャンの画像、患者に関する臨床情報、以前のスキャンなどに基づいて初期診断を行うことができる。初期診断は、ワークフローの詳細と共にデータベースに記憶され得る。さらに、いくつかの例では、初期診断の確証がなされた場合、これもまたデータベースに記憶することができる。確証には、検査を閲覧したときに別の臨床医によって行われた診断、患者に実施されたフォローアップ処置からの追加の情報などが含まれ得る。初期診断が確証される場合、次に関連するワークフローに高いスコアが割り当てられ得、ワークフローによって臨床医が疑わしい状態を確実に識別することができたことを示す。初期診断が確証されない場合、または他の臨床医もしくは処置が初期診断で行われた以外の状態を示す場合、次に関連するワークフローに低いスコアが割り当てられ得、ワークフローによって臨床医が疑わしい状態を確実に識別することができなかったことを示す。スコアは、診断効率ならびにユーザによるワークフローの修正(例えば、ユーザが大幅にワークフローを修正した場合、ユーザが修正を加えなかったワークフローよりもスコアが低くなり得る)、診断までの時間、またはワークフローの効率および/もしくは有用性を示し得る他の要因に基づいて割り当てることができる。ワークフローが閾値スコアよりも高いスコアを有し、診断の信頼性および/または効率が高いワークフローを示す場合、ワークフローは、患者ID、診断された状態、撮像モダリティ、臨床医IDなどを含む様々なワークフローパラメータの関数としてワークフローデータベースに記憶され得る。その後、同じモダリティ、状態、および/または患者の別のスキャンの分析が実施されているとき、ワークフローはオプションとして同じ臨床医、または別の臨床医に提供することができる。これにより、信頼できるワークフローを共有することが可能である。
スキャン技術者が患者の画像を取得するために使用することができるCT撮像システムの形態の例示的な医療撮像システムが、図1に提示されている。撮像システムは、図2に示すように、撮像システムで取得された画像を記憶するためにPACSシステムに通信可能に結合されてもよく、PACSは、臨床医による取得された画像の分析を含む診断検査中のワークフロー生成を支援するために推論サービスに結合されてもよい。図3は、ユーザが診断分析(例えば、検査の実行)のためにスキャンを抽出するとき、ワークフローの生成のためにヘルスケアシステムPACSおよび推論サービスに結合された中央学習プラットフォームの例示的な実施形態を示す。図4は、異なる病院などの複数の異なるヘルスケア環境のヘルスケアシステムと統合された中央学習プラットフォームを示し、それにより信頼できる診断成果を生成するワークフローを、異なる病院間で共有することができる。図5は、1つまたは複数のワークフローモデルからの出力に基づいて医療画像の診断検査中に診断ワークフローを自動的に生成および適用するためのフローチャートを示す。図6は、中央学習プラットフォームを介して1つまたは複数のワークフローモデルを訓練するための方法を示す。図7は、中央学習プラットフォームのスマートエンジンを通るデータの例示的なフローを示し、エンジンは、様々なソースからデータ入力を受信し、最適化されたワークフローの一部としてディスプレイ上での選択されたデータの表示を容易にする。図8は、ユーザに表示され得る例示的な最適化されたワークフローを示す。図9は、関連のある事前情報(例えば、関連のある撮像スキャンおよび/またはレポート)が自動的に識別されるワークフローインターフェースを示す。図10は、関連のある参照画像が自動的に選択され、ユーザに表示するためにロードされるワークフローインターフェースを示す。
CTシステムが例として説明されているが、本技法は、陽電子放出断層撮影撮像システム、核医学撮像システム、磁気共鳴撮像システム、X線ラジオグラフィ撮像システム、X線透視撮像システム、インターベンショナル撮像システム(例えば、血管造影、生検)、超音波撮像システムなど、他の撮像モダリティを用いた撮像セッションに適用されるときにも有用であり得ることを理解されたい。CT撮像モダリティに関する本説明は、1つの適切な撮像モダリティの一例としてのみ提供される。
図1は、様々な構成要素の相対的な位置決めの例示的な構成を示す。互いに直接接触して、または直接結合して示される場合、そのような要素は、少なくとも一例では、それぞれ直接接触しているまたは直接結合していると称することができる。同様に、互いに連続してまたは隣接して示される要素は、少なくとも一例では、それぞれ互いに連続しているまたは隣接していてもよい。一例として、互いに面を共有して接触している構成要素は、面共有接触と称されることがある。別の例として、それらの間のスペースのみを有し、他の構成要素が存在しない互いに離れて位置決めされた要素は、少なくとも一例では、そのように称されてもよい。さらに別の例として、互いに上/下に、互いに反対側に、または互いに左/右に示される要素は、互いに対してそのように称されてもよい。さらに、図に示すように、少なくとも一例では、要素の最上部の要素または点は、構成要素の「上部」と称されることがあり、要素の最下部の要素または点は、構成要素の「下部」と称されることがある。本明細書で使用する場合、上部/下部、上側/下側、上/下は、図の垂直軸に相対的であり、図の要素の互いに対する位置決めを説明するために使用され得る。このように、他の要素の上に示される要素は、一例では、他の要素の上に垂直方向に位置決めされる。さらに別の例として、図内に示される要素の形状は、それらの形状(例えば、円形、直線状、平面状、湾曲状、球形、面取り、角度付きなど)を有すると称されてもよい。さらに、互いに交差して示される要素は、少なくとも一例では、交差している要素または互いに交差していると称されてもよい。またさらに、別の要素内に示される要素または別の要素の外側に示される要素は、一例では、そのように称されてもよい。
図1は、例示的なCTシステム100を示している。特に、CTシステム100は、患者、無生物物体、1つまたは複数の製造部品、ならびに/または体内に存在する歯科用インプラント、ステント、および/もしくは造影剤などの異物などの対象112を撮像するように構成される。本開示を通して、対象および患者という用語は互換的に使用されることがあり、少なくともいくつかの例では、患者はCTシステムによって撮像され得る対象の一種であり、対象は患者を含み得ることを理解されたい。一実施形態では、CTシステム100は、ガントリ102を含み、ガントリ102は、患者の撮像に使用するためにX線放射線106のビームを投影するように構成された少なくとも1つのX線放射線源104をさらに含むことができる。具体的には、放射線源104は、X線106をガントリ102の反対側に位置決めされた検出器アレイ108に向けて投影するように構成される。図1は単一の放射線源104のみを図示しているが、ある特定の実施形態では、異なるエネルギーレベルで患者に対応する投影データを取得するために、複数の放射線源を用いて複数のX線106を投影することができる。
いくつかの例では、CTシステム100は、ガントリ102の上または外側に位置決めされた撮像センサ114を含み得る。示すように、撮像センサ114は、ガントリ102の外側に位置決めされ、対象がガントリ102の少なくとも部分的に外側にあるときに対象112を撮像するように配向される。撮像センサ114は、可視光センサ、および/または赤外線(IR)光源を含むIRセンサを含み得る。IRセンサは、飛行時間型(TOF)、ステレオ、または三次元深度画像を生成するように動作可能な構造化光深度センサなどの三次元深度センサであってもよく、他の実施態様では、赤外線センサは、二次元IR画像を生成するように動作可能な二次元IRセンサであってもよい。いくつかの実施態様では、二次元IRセンサを使用して、IR反射現象の知識から深度を推測して三次元深度を推定することができる。IRセンサが三次元深度センサであるか二次元IRセンサであるかにかかわらず、IRセンサは、IR画像を符号化する信号を適切なIRインターフェースに出力するように構成されてもよく、IRインターフェースは、IRセンサからのIR画像を符号化する信号を受信するように構成されてもよい。他の例では、撮像センサは、観察される対象および/または他のソースから到来する指向性および/または無指向性の音の受信および分析を可能にするためのマイクロフォンなどの他の構成要素をさらに含み得る。
ある特定の実施形態では、CTシステム100は、逐次近似または分析的画像再構成方法などの適切な再構成方法を使用して、患者のターゲットボリュームの画像を再構成するように構成された画像処理ユニット110をさらに含む。例えば、画像処理ユニット110は、フィルタ補正逆投影(FBP)などの分析的画像再構成手法を使用して、患者のターゲットボリュームの画像を再構成することができる。別の例として、画像処理ユニット110は、患者のターゲットボリュームの画像を再構成するために、高度統計的逐次近似再構成(ASIR)、共役勾配(CG)、最尤期待値最大化(MLEM)、およびモデルベース逐次近似再構成(MBIR)などの逐次近似画像再構成手法を使用することができる。
CTシステム100は、テーブル115をさらに含み、その上に撮像される対象を位置決めすることができる。テーブル115は、テーブルの垂直方向および/または横方向位置を調整することができるように電動化され得る。したがって、テーブル115は、モータ116と、モータコントローラ118とを含み得る。テーブルモータコントローラ118は、対象のターゲットボリュームに対応する投影データを取得するために、対象をガントリ102に適切に位置決めするようにモータ116を調整することによってテーブル115を移動させる。テーブルモータコントローラ118は、テーブル115の高さ(例えば、テーブルが設置されている地面に対する垂直方向位置)とテーブル115の横方向位置(例えば、ガントリの回転軸に平行な軸に沿ったテーブルの水平位置)の両方を調整することができる。
図2は、図1のCTシステム100と同様の例示的な撮像システム200を示している。一実施形態では、システム200は、検出器アレイ108(図1参照)を含む。検出器アレイ108は、対応する投影データを取得するために対象112を通過するX線ビーム106(図1参照)を共に収集する複数の検出器素子202をさらに含む。したがって、一実施形態では、検出器アレイ108は、セルまたは検出器素子202の複数の行を含むマルチスライス構成で製作される。そのような構成では、検出器素子202の1つまたは複数の追加の行が、投影データを取得するための並列構成に配置される。
ある特定の実施形態では、システム200は、所望の投影データを取得するために、対象112の周りの異なる角度位置を横切るように構成される。したがって、ガントリ102およびそれに取り付けられた構成要素は、例えば、異なるエネルギーレベルで投影データを取得するために、回転中心206を中心に回転するように構成されてもよい。代替的に、対象204に対する投影角度が時間の関数として変化する実施形態では、取り付けられている構成要素は、円弧に沿ってではなく、一般的な曲線に沿って移動するように構成されてもよい。
一実施形態では、システム200は、ガントリ102の回転およびX線放射線源104の動作などの構成要素の移動を制御する制御機構208を含む。ある特定の実施形態では、制御機構208は、電力およびタイミング信号を放射線源104に提供するように構成されたX線コントローラ210をさらに含む。加えて、制御機構208は、撮像要件に基づいてガントリ102の回転速度および/または位置を制御するように構成されたガントリモータコントローラ212を含む。
ある特定の実施形態では、制御機構208は、検出器素子202から受信されたアナログデータをサンプリングし、その後の処理のためにアナログデータをデジタル信号に変換するように構成されたデータ取得システム(DAS)214をさらに含む。DAS214によってサンプリングされデジタル化されたデータは、コンピューティングデバイス(またはコンピュータ)216に送信される。一例では、コンピューティングデバイス216は、データを記憶デバイス218に記憶する。記憶デバイス218は、例えば、ハードディスクドライブ、フロッピーディスクドライブ、コンパクトディスク読み出し/書き込み(CD-R/W)ドライブ、デジタル多用途ディスク(DVD)ドライブ、フラッシュドライブ、および/またはソリッドステート記憶デバイスを含んでもよい。記憶デバイスは、コンピューティングデバイス216の内部または外部であり得る。さらに別の例では、データは、コンピューティングデバイスによってクラウドベースのサーバに送信されて記憶することができる。図2には単一のコンピューティングデバイス216のみが示されているが、いくつかの例では、コンピューティングデバイス216は、複数の物理的デバイスにわたって分散されてもよい。
加えて、コンピューティングデバイス216は、データ取得および/または処理などのシステム動作を制御するために、コマンドおよびパラメータをDAS214、X線コントローラ210、およびガントリモータコントローラ212の1つまたは複数に提供する。ある特定の実施形態では、コンピューティングデバイス216は、オペレータ入力に基づいてシステム動作を制御する。コンピューティングデバイス216は、コンピューティングデバイス216に動作可能に結合されたオペレータコンソール220を介して、例えば、コマンドおよび/またはスキャンパラメータを含むオペレータ入力を受信する。オペレータコンソール220は、オペレータがコマンドおよび/またはスキャンパラメータを指定することを可能にするキーボード(図示せず)またはタッチスクリーンを含むことができる。
図2は、1つのオペレータコンソール220のみを示しているが、2つ以上のオペレータコンソールをシステム200に結合し、例えば、システムパラメータを入力もしくは出力すること、検査を要求すること、および/または画像を閲覧することができる。さらに、ある特定の実施形態では、システム200は、例えば、施設もしくは病院内で、またはインターネットおよび/もしくは仮想プライベートネットワークなどの1つまたは複数の構成可能な有線および/もしくは無線ネットワークを介して完全に異なる場所において、ローカルにまたは遠隔に位置する複数のディスプレイ、プリンタ、ワークステーション、および/もしくは同様のデバイスに結合されてもよい。
いくつかの実施形態では、システム200は、画像保管通信システム(PACS)224を含むか、またはそれに結合される。例示的な実施態様では、PACS224は、放射線科情報システム、病院情報システム、および/または内部もしくは外部ネットワーク(図示せず)などの1つまたは複数の他の記憶システムにさらに結合され、異なる場所(例えば、撮像システムと同じ医療施設内および/または異なる医療施設)にいるユーザが画像データへのアクセスを得ることを可能にする。
本明細書でさらに説明するように、コンピューティングデバイス216は、オペレータ供給のおよび/またはシステム定義のコマンドおよびパラメータを使用してテーブルモータコントローラ118を動作させ、テーブルモータコントローラ118は、電動テーブル115を制御することができる。例えば、コンピューティングデバイス216は、モータ116を介してテーブル115の垂直方向および/または横方向位置を調整するように、モータコントローラ118に命令するコマンドをモータコントローラ118に送出することができる。
前述のように、DAS214は、検出器素子202によって取得された投影データをサンプリングしてデジタル化する。その後、画像再構成器230がサンプリングされデジタル化されたX線データを使用して、高速再構成を実施する。図2は別個のエンティティとして画像再構成器230を示しているが、ある特定の実施形態では、画像再構成器230は、コンピューティングデバイス216の一部を形成してもよい。代替的に、画像再構成器230は、システム200に存在しなくてもよく、代わりに、コンピューティングデバイス216が、画像再構成器230の1つまたは複数の機能を実施してもよい。さらに、画像再構成器230は、ローカルにまたは遠隔に位置してもよく、有線または無線ネットワークを使用してシステム100に動作可能に接続されてもよい。特に、1つの例示的な実施形態は、画像再構成器230のための「クラウド」ネットワーククラスタ内の算出資源を使用することができる。
一実施形態では、画像再構成器230は、再構成された画像を記憶デバイス218に記憶する。代替的に、画像再構成器230は、診断および評価のために有用な患者情報を生成するために、再構成された画像をコンピューティングデバイス216に送信する。ある特定の実施形態では、コンピューティングデバイス216は、再構成された画像および/または患者情報を、コンピューティングデバイス216および/または画像再構成器230に通信可能に結合されたディスプレイ232に送信する。一実施形態では、ディスプレイ232は、オペレータが撮像された解剖学的構造を評価することを可能にする。ディスプレイ232はまた、オペレータがその後のスキャンまたは処理のために、例えば、グラフィカルユーザインターフェース(GUI)を介して関心ボリューム(VOI)を選択すること、および/または患者情報を要求することを可能にすることができる。
いくつかの例では、コンピューティングデバイス216は、撮像プロトコルに従ってコマンドおよび/または制御パラメータをDAS214、X線コントローラ210、ガントリモータコントローラ212、およびテーブルモータコントローラ226の1つまたは複数に送出するために実行可能なコンピュータ可読命令を含み得る。さらに、コンピューティングデバイス216は、撮像プロトコルに従って様々なスキャンパラメータ(例えば、線量、ガントリ回転角度、kV、mA、減衰フィルタ)を設定および/または調整することができる。撮像プロトコルは、コンピューティングデバイス216および/または遠隔コンピューティングデバイス上のメモリに記憶された複数の撮像プロトコルの中からオペレータによって選択されてもよく、または撮像プロトコルは、例えば、受信された患者情報に従ってコンピューティングデバイス216によって自動的に選択されてもよい。
加えて、いくつかの例では、コンピューティングデバイス216は、図1のセンサ114などの撮像センサから受信された撮像情報を処理するための命令を含む画像センサデータプロセッサ215を含み得る。深度情報および/または可視光情報を含むことができる撮像センサから受信された情報を処理し、対象のID、対象のサイズ、現在の対象の位置、対象の移動などの様々な対象パラメータを決定することができる。これらの対象パラメータは、コンピューティングデバイス216または別の適切なデバイスによって使用され、対象の移動が検出されたときの画像取得の一時停止ならびに/または対象および/もしくはオペレータへの通知の出力など、医療撮像セッションの様々なパラメータを調整することができる。さらに、撮像センサからのビデオストリームがディスプレイ232を介して表示されてもよい。
画像センサからの情報は、画像センサデータプロセッサ215によって、画像センサの視野内の1つまたは複数の対象の追跡を実施するために使用可能であり得る。一例では、画像情報(例えば、深度情報)を使用して骨格追跡を実施することができ、対象の複数の関節は、識別および分析されて対象の移動、姿勢、位置などを決定する。骨格追跡中の関節の場所は、上述の対象パラメータを決定するために使用され得る。
図1~図2の撮像システムは、撮像プロトコルに従って動作されてもよい。コンピュータ216は、(大容量記憶装置218などの)メモリに記憶された1つまたは複数のデフォルトのおよび/またはカスタマイズされた撮像プロトコルを含むことができる。一例では、メモリに記憶された撮像プロトコルの1つまたは複数は、撮像プロトコルのライブラリとして提供される、製造業者がインストールした撮像プロトコルであってもよい。撮像プロトコルは、関連する撮像モダリティのために(コンピュータ断層撮影撮像、磁気共鳴撮像、陽電子放出断層撮影などのために)選択的に構成されてもよい。異なる撮像プロトコルは、評価される医学的状態、スキャンされる身体部分、患者の特性、およびそれらの組み合わせなどの様々な撮像パラメータに関連付けられてもよい。例えば、脳震盪の兆候などについて子供の頭部をスキャンするのと比較して、出血の兆候について中型の成人の腹部をスキャンするための個別の撮像プロトコルが提供される。各撮像プロトコルは、ガントリモータ、X線、テーブルモータなどの設定など、撮像システム(例えば、図2の撮像システム200)の設定を含むことができる。
また、図2には、撮像システム200および/または他の撮像システムで取得された画像に基づいて診断検査を実施するために使用され得る診断検査システム250が示されている。診断検査システム250は、PACS224および/または推論サービス234に通信可能に結合されたビューア236を含む。ビューア236は、コンピューティングデバイス216およびディスプレイ232と同様に、メモリ、プロセッサ、およびディスプレイデバイス237を含むコンピューティングデバイスであり得る。同様に、推論サービス234は、コンピューティングデバイス216に関して上述したメモリおよびプロセッサと同様のメモリおよびプロセッサを各々が含む1つまたは複数のコンピューティングデバイスを備える。推論サービス234は、本明細書ではワークフローインターフェース235と呼ばれるインターフェースを生成し、例えば、撮像システム200を使用するスキャン中に取得された画像の診断検査中にユーザのワークフロー管理を支援することができる。インターフェース235は、診断検査中にディスプレイデバイス237に表示するために出力されてもよい。
推論サービス234は、ビューア236とは別個のデバイスであり、PACS224から(通信可能に結合されているが)別個であるように示されているが、いくつかの例では、推論サービス234は、ビューア236、コンピューティングデバイス216、またはPACS224の一部であるコンピューティングデバイスなどの異なるコンピューティングデバイス上に記憶され、実行されてもよい。さらに、1つまたは複数の追加のコンピューティングデバイスをPACS224および/または推論サービス234に結合し、ユーザがPACS224に保存された画像を閲覧し、本明細書に開示される実施形態に従って診断検査を実行することを可能にすることができる。
診断検査中、推論サービス234は、ユーザ入力に基づいて、および/または人工知能ベースのモデルに従ってワークフローを生成することができる。ワークフローは、画像の診断検査が実施されるときに適用され得るプロトコル、ツールセットなどを含み得る。推論サービス234は、診断検査ごとにワークフローを生成することができ、ワークフローは、画像のタイプ、検査の診断目標、検査を実行するユーザなどのために最適化されたワークフローが生成され得るように異なる場合がある。例えば、中型の成人の腹部に出血の兆候が見られるかどうかを決定するための検査に対して、第1のワークフローを提供することができる。脳震盪の兆候などについて子供の頭部を診断するために、異なるワークフローが提供されてもよい。各ワークフローは、所与のモダリティおよび/または撮像された身体領域に固有のツールセットを含む場合がある。さらに、ツールセットは、ユーザ設定および嗜好(ユーザが頻繁に使用するツールセット、ユーザの左利きまたは右利きなど)に基づいてカスタマイズされてもよい。ワークフローはまた、検査中の画像の提示の順序を示すことができるハンギングプロトコルを含み得る。ワークフローの複数のアクションアイテムを介して、ユーザは、初期診断評価を実施することができる。例えば、ユーザは、スキャン中に取得された患者の画像を分析し、患者の疑わしい状態を診断することができる。
さらに、推論サービス234は、ワークフローの一部としてビューア236に関連するディスプレイデバイス237上でユーザに表示するために、関連のある患者臨床データ、関連のある以前の画像、関連のある参照文献、および関連のある参照画像を自動的または半自動的に(例えば、ユーザ要求に応じて)抽出することができる。このようにして識別された参照、画像、および事前情報は、CT撮像システム200が位置するヘルスケア環境からのデータソースなどのローカルデータであり得る。非限定的な例として、推論サービス234は、現在のスキャンと同じ身体領域の前の患者スキャン、疑わしい状態が確認された別の患者からの同じ身体領域のスキャン、ならびに参照画像を抽出することができる。
推論サービス234はまた、遠隔ソースからデータを抽出するように構成することができる。例えば、推論サービス234は、中央学習プラットフォーム242に通信可能に結合され得る。図3で詳述されるように、中央学習プラットフォーム242は、クラウドネットワーク240上に記憶され得、病院1~Nのサーバ244などの複数の他のヘルスケア環境のコンピューティングデバイス(例えば、サーバおよび/またはPACS)、ならびに参照画像ライブラリおよび参照文献ライブラリなどの遠隔サービスと通信することができる。結果として、参照画像および/または参照文献は、これらの場所のいずれかから選択され、最適化されたワークフローの一部としてディスプレイ237でユーザに表示される。さらに、ワークフローの使用状況データを他のヘルスケア環境から収集し、中央学習プラットフォームを介して1つまたは複数のモデルを訓練するために使用することができる。1つまたは複数のモデルは、上記で説明され、以下でより詳細に説明されるように、診断ワークフローの生成を支援するために展開されてもよい。
図3に関して詳述されるように、中央学習プラットフォーム242および/または推論サービス234は、ワークフロー推論を生成し、関連のある事前情報の選択を支援し、ツールセット、所見、および参照の選択を支援するために使用され得る。関連のある画像、事前情報、および参照を自動的に識別、抽出、および表示することを可能にすることによって、ユーザ(例えば、臨床医)の認知負荷および疲労が軽減され、同時に検査の診断の信頼性を向上させる。例えば、場合によっては識別されなかった診断を含む誤診を減らすことができる。
次に図3を参照すると、1つまたは複数のオンサイトコンピューティングデバイス304と通信するオンライン中央学習プラットフォーム302を含む、スマートワークフローシステム300の例示的な実施形態が示されている。一例では、中央学習プラットフォーム302は、クラウドネットワーク(図2参照)などの1つまたは複数の集中型サーバ上に設けられ、それにより中央学習プラットフォーム302は、1つまたは複数のヘルスケア環境(例えば、病院)にあるコンピューティングデバイスを含むことができる、1つまたは複数のオンサイトコンピューティングデバイス304によってアクセスすることができる。プラットフォーム302は、患者の1つまたは複数の診断画像に基づく診断検査の実行中、最適なワークフロープロトコル、以前の選択、ツールセットの予測、所見、参照などの提案を予測/提供するために、1つまたは複数のオンサイトコンピューティングデバイス304によって展開され得る1つまたは複数のワークフローモデルを訓練するために割り当てられたリソース(例えば、メモリおよびプロセッサ)を含み得る。
プラットフォーム302は、訓練データ318を使用して1つまたは複数のワークフローモデルを訓練するように構成された訓練アルゴリズム308を含む。訓練データは、複数の患者の各々の入力-出力ペアを含み得る。訓練アルゴリズム308への入力-出力ペアの入力セグメントとして含まれ得る訓練データは、例えば、臨床データ310(血液試験結果、血圧および体温測定値など)、以前のレポート312(以前のスキャンまたは他の診断テストから診断された状態など)、および画像データ314(前のスキャンからの画像など)を含む。入力-出力ペアの出力セグメントは、各患者について、専門家の使用状況データ316(専門家、例えば、臨床医によって行われた診断の確認、ならびにオンサイトコンピューティングデバイス304または他のデバイスのユーザが様々なワークフローとどのように対話したかに関する使用状況データなど)を含むことができる。アルゴリズムは、機械学習(ML)方法などの人工知能(AI)を使用して、モデルリポジトリ306に保存することができる1つまたは複数のワークフローモデルを訓練する。次に、モデルは、臨床医が診断検査を実施するためのスキャンを抽出する場所などのオンサイト場所にあるオンサイトコンピューティングデバイス304に展開される。
ワークフローモデルは、例えば、ワークフロー推論モデル320を含む。ワークフロー推論モデル320は、放射線技師などの臨床医によって抽出および実施される診断検査に最も適したワークフローを推測するように構成される。ワークフロー推論モデル320は、疑わしい状態(状態の関数として、身体部分、撮像モダリティなど)を診断するために、取得された画像の分析を含み得る、診断検査のプロトコルの一部として実施されるアクションアイテムの順序およびIDを提案/予測することができる。ワークフロー推論モデル320は、事前情報、ツールセット、参照などが表示されるビューポート、ビューポートのサイズ、ビューポートの位置、ならびに診断検査中に画像および他の情報をユーザに提示するために使用される、グラフィカルユーザインターフェースのレイアウトおよび外観の他の側面を提案/予測する。さらに、ワークフロー推論モデル320は、現在の検査で分析される画像のハンギングプロトコルを提案/予測することができる。一例として、臨床医が患者のマンモグラム検査を抽出して腫瘍の存在を診断した場合、ワークフロー推論モデル320を使用して、乳房腫瘍を確実に診断するように、現在取得されている画像を閲覧する必要があるハンギング順序を含むワークフローを提案し得る。このようにして、ワークフロー推論モデルは、ユーザ(例えば、臨床医)が検査で画像を読み取るプロセスをナビゲートすることを可能にするワークフローを提案することができる。モデル307はまた、以前のデータ、以前の画像などの識別および選択を含む、事前情報の選択のために展開され得る事前情報選択モデル322を含むことができる。以前の画像は、現在の患者について収集された以前の画像、ならびに診断が確認された所与のオンサイト場所で他の患者から収集された以前の画像を含み得る。モデル307はまた、疑わしい状態の信頼できる診断を可能にするように決定されたツールセット、ならびにユーザ設定に基づいて選択されたツールセットの選択および表示のために展開され得るツールセット予測モデル324を含むことができる。例えば、ツールセット予測モデル324は、所与の臨床医によるマンモグラム分析に使用されるツールセット、ならびに確認された以前の症例の診断中に使用されたツールセットを自動的に予測および提案し得る。予測されたツールセットは、選択されたセットのツール、ならびにツールの定義された相対的な位置決めを含んでもよい。例えば、ズームツールが確認された以前の症例のほとんどの診断ワークフローで使用された場合、ユーザの利き手(例えば、左または右)に基づいて位置が調整されたズームツールを提案することができる。
モデル307はまた、関連のある所見の識別を可能にするために展開され得る所見モデル326と、関連のある参照(例えば、参照画像、参照文献)の識別を可能にするために展開され得る参照モデル328とを含むことができる。所見モデル326は、例えば、以前の検査からの関連のある所見を予測または提案し得る。その後、所見は現在の検査にコピーされ得、現在の患者の臨床データ、現在の検査の診断目標(例えば、以前に識別された病変のサイズの変化を決定するため)などに基づいて適合させることができる。参照モデル328は、例えば、確認された診断(例えば、腫瘍の存在の確認、および腫瘍の欠如の確認)の以前の画像および/または正常な参照画像(例えば、診断された異常を含まない画像)を予測または提案し得る。参照モデル328はまた、診断される状態に関する様々な問題に関係する参照文献(例えば、文献からの画像および/または要約)を予測または提案してもよい。
次いで、モデルの出力(例えば、モデルを介して生成された予測/提案)は、推論サービス234にリレーされ、推論サービス234は、PACS224に送出され得る現在の検査について事前算出された予測を出力する。例えば、診断撮像セッションが完了し、診断画像がPACS224に送出されると、ワークフロー、ツールセット、および事前情報などの検査パラメータの一部またはすべてについて予測を決定することができる。ユーザが検査を選択すると(例えば、ビューア236のディスプレイデバイスに表示されるグラフィカルユーザインターフェースに提示される未解決の検査のメニューから)、検査および事前算出された予測は、ビューア236を介して自動的にユーザに表示される。言い換えると、検査がPACS224で作成されると、推論サービス234は、モデルの各々から提案および予測を受信し、モデルからの出力に基づいてワークフローを組み立てることができ、これは検査のワークフローに含める提案および予測の側面の決定、ならびに既知のユーザ嗜好、既知の患者情報などに基づくワークフローへの提案および予測のカスタマイズを含む。検査が開始されると、分析される画像がワークフローに従ってフォーマットされたグラフィカルユーザインターフェースに表示され、事前情報およびツールセットがモデルおよび推論サービス234の出力によって決定されるワークフローに従って選択および表示される。さらに、ビューア236は、検査中に要求および/またはオンデマンド予測に関係する情報を推論サービス234に送出してもよい。例えば、ユーザ要求に応じて、または検査がワークフローの特定の段階に達すると、所見モデルからの出力をフェッチして表示することができる。このようにして、臨床医が疑わしい患者状態をよりよく理解すると(例えば、いくつかの診断指標が画像で識別されたらなど)、過去の検査から最も関連性が高い所見を抽出することができる。同様に、参照モデルからの関連のある参照は、ユーザ要求に応じて、または検査がワークフローの特定の段階に達したときに抽出されてもよい。
モデル307は、診断検査中に収集されたデータに基づいて更新されてもよい。例えば、フィードバックエンジン330は、検査を実施するときにユーザによって選択された設定を監視するように構成され得る。設定は、提案された/適用されたワークフロー、およびユーザがワークフローに行った修正、ユーザが提案された事前情報、所見、および/または参照の閲覧を選んだかどうか(またはユーザが閲覧する追加または代替の事前情報、所見、および/または参照を選択したかどうか)、ツールセットからユーザが対話したツール(およびユーザが追加または代替のツールを追加したか)などを含んでもよい。フィードバックエンジン330は、ユーザによって選択されたツールセット、ユーザによって選択された(またはユーザに提案された)ハンギングプロトコル、ならびにユーザによって選択された参照を監視することができる。
さらに、フィードバックエンジン330は、各組み立てられたワークフローが患者状態の診断を容易にすることにおいてどれほど効果的および/または正確であるかを示すフォローアップデータを記憶することができる。例えば、ワークフローがモデル307からの出力に基づいて推論サービス234によって生成されると、ワークフローは、撮像モダリティ、診断目標、および撮像された解剖学的特徴などの様々な検査パラメータによって分類され得る。一例として、第1のワークフローは、乳房の病変を検出するためのCTワークフローとして分類されてもよく、第2のワークフローは、小児患者における脳出血を監視するためのMRIワークフローとして分類されてもよい。各ワークフローに関連する検査が実施された後、検査で臨床医によって保存された所見/診断評価は、別の臨床医、追加の診断テスト(例えば、生検領域の病理検査、異なる撮像モダリティによる異なる診断検査など)、患者の症状、および/またはさらなる臨床医ベースの診断評価によって確証されてもよいし、確証されなくてもよい。検査の所見が確証されたかどうかの指標は、上述の他のデータと共にフィードバックエンジンに記憶され得る。フォローアップデータおよび確証の指標を使用して、可能な場合、診断精度スコアを各ワークフローに割り当てることができ、また、各ワークフローが検査パラメータに基づいて分類されるため、フィードバックエンジンは、異なるワークフロー分類ごとに比較的高い診断精度を有するワークフローを決定するように構成することができる。例えば、CTスキャンで乳房の病変を検出するための複数の異なるワークフローを生成することができ、その各々には、各異なるワークフローが異なる検査ごとに複数回利用されるときに更新され得る診断精度スコアが割り当てられてもよい。高精度のワークフローが識別されると(例えば、閾値を超える精度スコアを有する)、高精度のワークフローは、将来の乳房病変のCT検査で優先的に適用され得、図4に関して以下でより詳細に説明されるように、乳房病変のCT検査のために他の医療施設に提案されてもよい。検査効率についても同様の手法をとることができ、検査の期間が決定され、フィードバックエンジンに記憶され、効率(例えば、速度)に基づいて異なるワークフローのランク付けに使用されてもよい。診断精度を損なうことなく、高速ワークフローが所与の分類に対して識別される場合、そのワークフローは優先的に適用され、かつ/または他の施設と共有される場合がある。
いくつかの例では、フィードバックエンジン330に記憶された情報は、フィードバックエンジン330から中央学習プラットフォームに送出され、訓練データ318として使用されてもよい。フィードバックデータの閾値量が収集されると、モデルを訓練アルゴリズム308を介して更新/再訓練し、リポジトリ306に記憶されたモデル307を更新することができる。さらに、いくつかの例では、モデルがオンサイトデバイス304にローカルに記憶されている場合、フィードバックエンジン330を使用してモデル307をローカルに再訓練することができる。例えば、病院ごとに異なる規制、好ましいワークフローを有し、異なる患者の人口統計などを提供する場合があり、したがって、病院固有の方法でモデルを訓練することが有利であることがある。ただし、特に最適なワークフローが病院で識別される場合、ワークフローは、中央学習プラットフォームを介して他の病院と共有されてもよい。
このようにして、中央学習プラットフォーム302は、ユーザが診断検査を開始したときに診断ワークフロー設定を提案または適用するために、1つまたは複数のオンサイトコンピューティングデバイスによって展開され得るリポジトリに記憶された複数のモデルを含むことができる。ワークフロー設定は、検査中に実行されるアクションアイテムの選択および順序付け、検査中に画像および他の情報を提示するために使用されるグラフィカルユーザインターフェースのフォーマット、検査中に表示されるツールセット、検査中に提示される患者の以前のスキャン、検査中に提示される関連のある所見、ならびに検査中に提示される関連のある参照を含み得る。複数のモデルは、複数の患者に対する以前の検査からの情報を使用して訓練されるAIベースのモデル(例えば、機械学習、ニューラルネットワーキングなど)であってもよい。訓練データは、各患者について、検査時に記憶された関連のある臨床データ(例えば、血圧、心拍数、体温、投薬、過去の診断)、以前のレポート/所見(例えば、診断画像に加えられた注釈、記憶された所見、診断された状態を含む、患者の検査中に文書化された所見)、画像データ(例えば、検査のために取得および分析された画像)、および専門家の使用状況データ(例えば、確証された診断、ならびに限定はしないが、選択された事前情報、選択された参照、選択されたツールセット、画像のハンギングプロトコル、ならびに選択された事前情報、参照、およびビューポート内の画像の配置/表示を含む、検査中に適用されたワークフローに関係するワークフロー情報)を含み得る。
いくつかの例では、中央学習プラットフォームは、単一の医療施設(例えば、病院)によって収集された訓練データを用いてモデルを訓練し、訓練されたモデルを単一の医療施設でのみ展開してもよい。ただし、他の例では、中央学習プラットフォームは、以下でより詳細に説明されるように、複数の異なる医療施設から訓練データを引き出し、かつ/または複数の異なる医療施設で訓練されたモデルを展開し得る。
上述のモデル307などの1つまたは複数のワークフローモデルは、モデルリポジトリ306に記憶され得、中央学習プラットフォーム302上に展開され得る。そのような例では、オンサイトデバイスは、検査のパラメータを中央学習プラットフォームに送出してもよく、モデルからの出力(例えば、上述の予測/提案)は、オンサイトデバイスに送り返されてもよく、出力がワークフローを生成するために推論サービス234によって使用され得る。他の例では、モデルは、オンサイトデバイス304上に記憶されて展開されてもよく、中央学習プラットフォームがモデルを再訓練するときに定期的に更新されてもよく、かつ/またはフィードバックエンジンを介してローカルに再訓練されてもよい。そのような例では、推論サービス234は、検査パラメータをモデルに供給することができ、モデルからの出力は、図3に示すように、すべてオンサイトデバイス内の推論サービス234に供給することができる。
示すように、推論サービス234は、病院などの医療施設のサーバであり得るオンサイトデバイス304上に記憶されて実行される。モデル307は、オンサイトデバイス上に記憶されて実行され得る。モデルの更新は、例えば、中央学習プラットフォームから送出される通知を介して提供されてもよい。他の例では、推論サービス234がオンサイトデバイス上に記憶されて実行されるが、モデルは、中央学習プラットフォーム上で訓練されて更新されてもよい。さらに別の例では、推論サービスおよびモデルは、中央学習プラットフォーム上に記憶されて実行することができる。
次に図4を参照すると、図3のスマートエンジンシステムと複数のヘルスケアシステムとの例示的な統合が示されている。実施形態400は、本明細書では病院1~Nまでの複数のヘルスケア環境414に結合された訓練モデルリポジトリ306および訓練エンジン408を有する中央学習プラットフォーム302を示す。各病院は、ビューア432などの複数のビューアを含み得る。ビューアは、疑わしい状態の患者画像を閲覧および分析するスキャン技術者、医師、または他のヘルスケア専門家によって利用される異なるコンピューティングデバイスである場合がある。各病院は、上述の推論サービス234の非限定的な例であるスマートエンジン推論サービス420をさらに含み得、これはビューア432に表示され得るスマートなカスタマイズされた診断検査ワークフローを生成し得る。推論サービス420は、上述のように、集中型学習プラットフォーム302で訓練された1つまたは複数のワークフローモデルを利用することができる。いくつかの例では、1つまたは複数のワークフローモデルは、スマートエンジンデータリポジトリ416に記憶され得る。検査がビューア432を介して実施されるとき、使用状況データは、ユーザ入力収集サービス418で収集される。使用状況データは、分析された個々の患者データ、診断中に使用されたツールセット、診断中に適用されたワークフローおよびハンギングプロトコル、ならびに所与の病院で個々のヘルスケアプロバイダによって伝達された診断およびフォローアップデータ(例えば、診断を確証するか、または診断を確証しない)を含む。例えば、データは、分析された個々の患者データおよび所与の病院の複数のヘルスケアプロバイダによって伝達された診断を含み、各々が同じデータをレビューする。データならびに関連する成果は、スマートエンジンデータリポジトリ416に保存され、モデルをローカルに訓練するために使用されてもよく、および/またはデータならびに関連する成果は、訓練されたモデルを更新するように中央学習プラットフォームのスマートエンジン訓練およびモデル更新モジュール408に通信されてもよい。
各病院は(例えば、それぞれのスマートエンジンデータリポジトリから)情報を中央学習プラットフォームに送出することができ、各病院からの情報は、中央学習プラットフォームのモデルを更新するために使用することができる。いくつかの例では、中央学習プラットフォーム302は、すべての病院から受信された情報に基づいて更新され得るデータリポジトリ306に保存された共通のセットのモデルを含んでもよく、モデルは、すべての病院に展開されてもよい。そうすることで、大量の更新/訓練情報が収集され得、モデルの精度を向上させることができる。他の例では、中央学習プラットフォームは、病院固有の方法でモデルを更新してもよく、それにより、例えば病院1からの情報は病院1に展開されたモデルの更新にのみ使用され、病院2からの情報は病院2に展開されたモデルの更新にのみ使用される。このようにして、モデルは個々に医療施設/病院ごとに訓練することができ、これにより、特に病院の地理的な場所または平均的な患者の人口統計が大幅に異なる場合、モデルの精度を向上させることができる。前に説明したように、各ワークフローは、診断精度および/または効率に基づいて評価することができる。高い診断精度および/または高レベルの効率を有するワークフローが識別される場合、それらのワークフローは、例えば、中央学習プラットフォームからのレポートまたは通知の形式で、すべての病院に提案されてもよい。このようにして、高精度および/または高効率のワークフローが他の病院で開発されるときにすべての病院に通知され得、病院は、ワークフローの側面の一部またはすべてに従うことを選ぶことができる。
次に図5を参照すると、診断検査ワークフローを生成するための例示的な方法500が示されている。方法500は、ヘルスケア環境のユーザに、診断画像の検査中にツールセット、ハンギングプロトコル、ならびに関連のある事前情報および参照を含むワークフローを提供し、診断画像に基づいて患者状態の信頼できる診断を行う際にユーザを支援することを可能にする。方法500を実行するための命令は、推論サービス234などのコンピューティングデバイスのメモリ上に記憶された命令に基づいて、コンピューティングデバイスによって実行され得る。
502において、診断画像が検査の一部として保存されたという通知が受信される。例えば、診断画像は、図1のCT撮像システム100および/または図2の撮像システム200などの適切な撮像システムで取得され、PACS224などのPACSのメモリに保存され得る。画像は、臨床医によって実施される診断検査の一部として保存することができ、臨床医は、画像をレビューし、画像から決定された所見を保存する。所見は、診断された患者状態(腫瘍の有無など)を示したり、疑わしい患者状態を除外したり、治療の進行を示したり、または他の医学的に関連のある指標を示し得る。診断検査を実施するために、臨床医は、取得された画像を分析することができ、画像を以前の撮像スキャン中に取得された患者の以前の画像、正常な組織の参照画像、および/または同じもしくは同様の疑わしい患者状態を有する他の患者の検査(例えば、検査が実施される理由)と比較することを選ぶことができる。臨床医はまた、ズームインまたはズームアウト、画像のコントラストの調整、画像処理/分析フィルタの適用(例えば、背景の除去、血管の強調表示、血流分析など)など、画像を閲覧しながら診断画像を調整することを選んでもよい。さらに、臨床医は、疑わしい患者状態または撮像された解剖学的特徴に関する以前に公開された/準備された文献を参照することを選ぶことができる。そうすることで、所見の精度を高めることができる。ただし、関連のある以前の撮像スキャン、参照画像、以前の関連検査、参照文献、所望の画像調整を実施するための所望のツールセットなどを選択することは、時間がかかる場合がある。さらに、臨床医は、すべての利用可能なリソース、特に利用可能な以前の検査および参照文献を認識していない場合がある。またさらに、上述の選択および調整のすべては、臨床医の認知負荷を増加させることがあり、臨床医の疲労および誤診をする可能性を増加させる場合がある。
したがって、検査の表示フォーマット(ある特定の画像/情報が表示される場所)、表示されるツールセット、および表示される追加の情報などの検査の1つまたは複数の側面は、以前の撮像スキャン、検査、レポート、所見、参照画像、参照文献、ツールセットなどを検査中に臨床医に提示する必要があることを予測するように訓練された人工知能ベースのモデルに依存することによって、自動的にかつ明示的なユーザ入力なしで選択することができる。予測は、現在の検査のパラメータに基づき得る。したがって、504において、方法500は、検査に関連するパラメータを識別することを含む。識別されたパラメータは、例えば、画像がCT、超音波、MRIなどを介して取得されたかどうかなど、検査で分析される画像を取得するために使用される撮像モダリティ505を含み得る。別の例として、スキャンされた身体部分または領域506が識別される(例えば、乳房、頭部、胸部、腹部など)。さらに別の例として、検査の診断目標507が決定される(例えば、マンモグラム、病変検出、腫瘍進行、脳震盪など)。さらなる例として、検査を実施する臨床医が508で決定される。臨床医は、患者の電子医療記録から得られた情報に基づいて決定することができ、検査は、(例えば、事前設定されたルールに基づいて)臨床医に自動的に割り当てることができ、または臨床医は、検査が実際に実施されたときに決定することができる。検査に関連するパラメータは、例えば、PACSから受信された情報に基づいて識別されてもよい。
510において、検査を実施するためのワークフローが生成され、これは検査の一部として表示されるツールセットおよび事前情報の選択を含む。図3に関して上記で説明したように、ワークフローは、検査を実行するために実施されるアクションアイテムの選択および/または順序付けを含み得、ワークフローは、どの選択された情報(例えば、事前情報、参照など)を表示するか、それらを表示する場所、検査中に診断画像および他の情報を提示するために使用されるグラフィカルユーザインターフェースのフォーマットなどを含んでもよい。検査中に画像を分析するときに臨床医が使用すると予測されるツールへの素早いアクセスを提供するために、検査中にツールセットを表示することができる。さらに、関連のある事前情報は、患者および検査の診断目標に基づいて選択することができ、それにより関連のある撮像スキャンは提示されなくなる。例えば、検査がマンモグラフィ検査の場合、患者のすべての以前のマンモグラムが選択されてもよく、他の非関連スキャン(半月板が裂けているかどうかを決定するために実施される膝検査など)は選択されなくてもよい。上記で説明したように、ワークフロー、ツールセット、および/または事前情報は、識別されたパラメータおよび1つまたは複数のワークフローモデル(例えば、図3に関して上記で説明したワークフロー推論モデル、事前情報選択モデル、およびツールセット予測モデル)に基づいて選択することができる。例えば、識別されたパラメータ(例えば、画像を取得するために使用される撮像モダリティ、検査の診断目標、撮像された解剖学的特徴、および検査を実施する臨床医)は、1つまたは複数のモデルへの入力として入力されてもよく、1つまたは複数のモデルは、ワークフロー、ツールセット、および事前情報の提案または予測を出力することができ、それらは検査の一部として保存され得る。モデルによって出力された提案または予測は、PACSに送出され、検査の一部として保存することができる。
512において、実施される検査を選択するユーザ入力が受信される。例えば、臨床医は、臨床医に割り当てられた検査のメニューから検査を選択することができる。検査が選択されると、取得された画像、選択された事前情報、および選択されたツールセットは、514に示されるように、選択されたワークフローに従って表示される。このようにして、1つまたは複数のモデルによって出力される予測/提案は、検査がPACSでロードされる/最初に作成されるときに事前に決定され、そして臨床医が検査の実施を要求するときに臨床医に提示され得る。ユーザ/臨床医が検査を実施するとき、臨床医は、ある特定の画像、事前情報などが表示されている場所への移動、ツールセットからのツールの選択(例えば、パン、チルト、ズーム、コントラストなど)を介した画像の表示アスペクトの調整、追加の事前情報またはツールセットの表示の要求など、ワークフローへの調整を行うことができる。本明細書に開示される実施形態に従って自動的に組み立てられるスマートワークフローが臨床医を実際に支援して検査効率を高めることを確実にするために、ワークフロー/検査とのユーザ対話が516で追跡される。ユーザがワークフローを修正するか、場合によってはワークフロー、事前情報、および/またはツールセット(または以下で説明されるように、所見および/または参照)が適切ではないまたは十分ではないことを示す場合、この情報は記憶され、モデルを再訓練するために使用することができる。
518において、方法500は、所見および/または参照が要求されているかどうかを決定する。所見および/もしくは参照は、ユーザによって要求される場合があり、または所見および/もしくは参照は、自動的にワークフローによって要求される場合がある。例えば、臨床医がワークフローのある特定の段階(例えば、予備的所見の入力、特定の解剖学的特徴または異常の識別など)に進むと、ワークフローは、所見および/または参照を得る要求をトリガし得る。ただし、いくつかの例では、所見および/または参照は、ワークフロー、事前情報、およびツールセットと同時に、または他の適切な時間に得られる場合がある。所見および/または参照が要求されていない場合、方法500は522に進み、これは以下でより詳細に説明される。
所見および/または参照が要求されている場合、方法500は520に進んで識別されたパラメータおよび1つまたは複数のモデルに基づいて所見および/または参照を選択し、ワークフローに従って所見および/または参照を表示する。例えば、識別されたパラメータは、1つまたは複数のモデル(例えば、図3に関して上記で説明したような所見モデルおよび参照モデル)に入力され得、提案された所見および/または参照を出力し得る。いくつかの例では、検査中に臨床医によって入力された追加の関連のある情報(例えば、識別された解剖学的特徴または異常、予備的所見など)もまた、1つまたは複数のモデルへの入力として使用することができる。提案された所見は、同様のパラメータ(例えば、同様の診断目標、同様の撮像モダリティ、同様の予備的所見または識別された解剖学的特徴など)を有する他の以前の検査からコピーおよび/または適合された所見を含む場合がある。その後、ユーザは所見を受け入れるか拒否することができ、これにより、検査で所見を記録するプロセスが迅速化され得る。参照は、検査に関連のある正常な(例えば、非病理学的な)解剖学的特徴の画像および/または検査に関連のある文献を含み得る。所見および/または参照は、ワークフローおよび/または1つまたは複数のモデルによって示されるビューポートに表示することができる。
522において、方法500は、検査が完了したかどうかを決定する。例えば、ユーザは、検査が完了したこと、例えば、すべての画像が分析されたこと、および臨床医によって識別された所見が保存されたことを示す入力を入力することができる。検査が完了していない場合、方法500は514に戻り、選択されたワークフローに従って取得された画像、事前情報、ツールセット、所見、および/または参照を表示し続け、ワークフローとのユーザ対話を追跡し、要求されたときに所見および/または参照をフェッチする。検査が完了した場合、方法500は524に進み、追跡されたユーザ対話に関する情報を中央学習プラットフォームに送出する。例えば、識別されたパラメータ、検査中のワークフローとのユーザ対話、最終所見などを含むワークフローの詳細が保存され、中央学習プラットフォームに送出され得る。中央学習プラットフォームは、情報を使用してモデルを微調整または再訓練することができる。さらに、いくつかの例では、追跡されたユーザ対話に関する情報、ならびにワークフローの診断精度(例えば、検査の初期所見を確認するまたは確認しないフォローアップ情報に基づく)および/またはワークフローの効率は、コンピューティングデバイス(または方法500を実行するコンピューティングデバイスと同じ医療施設にある別のコンピューティングデバイス)および/または中央学習プラットフォームによって使用され、施設固有の方法でモデルを再訓練することができる。このようにして、ワークフローは、好ましい医療施設のガイドライン/プロトコルに従って生成することができ、これは例えば、各施設が適切な管轄区域固有の規制に準拠し続けるのに役立ち得る。ただし、生成されたワークフロー、ならびに各ワークフローの診断精度および/または効率は、中央学習プラットフォームによって分析され、他の場所に展開されているモデルの訓練、および/または他の医療施設への提案に役立つことができ、それにより複数の異なるワークフロー最適化が異なる医療施設を介して実施することが可能であり、これはすべての医療施設で共有される可能性のある高精度および/または高効率のワークフローの識別の迅速化に役立ち得る。その後、方法500は終了する。
方法500は、取得された画像、事前情報、ツールセット、所見、および/または参照を表示し、検査を選択するユーザ入力を受信し、ワークフローとのユーザ対話を追跡するものとして上記で説明されたが、いくつかの例では、ワークフローを生成し、事前情報、ツールセット、所見、および/または参照を選択するコンピューティングデバイスは、検査中に画像、事前情報、ツールセット、所見、および/または参照を表示するコンピューティングデバイスとは異なる場合があることを理解されたい。例えば、検査がPACSコンピューティングデバイスに結合されたビューアコンピューティングデバイスを介して選択されると、PACSコンピューティングデバイス(例えば、推論サービスを記憶および実行する)は、画像、事前情報、ツールセット、所見、および/または参照を推論サービスによって生成されたワークフローパラメータに従ってビューアコンピューティングデバイスに送出してもよく、検査は、ビューアコンピューティングデバイスを用いて実施されてもよい。
図6を参照すると、図3に関して上述したモデルなど、1つまたは複数の診断ワークフローモデルを訓練および実行するための例示的な方法600が示されている。方法600は、1つまたは複数のコンピューティングデバイスの非一時的メモリ上に記憶された命令に従って、図3の中央学習プラットフォーム302などの中央学習プラットフォームの一部である1つまたは複数のコンピューティングデバイスのプロセッサによって実行され得る。602において、複数の訓練データセットが受信される。各訓練データセットは、604に示されるように、それぞれの患者の検査のための臨床データ、以前のレポート、および画像データを含み得る。各々が異なる患者の異なる検査に対応する、200または500のデータセットなど、適切な数の訓練データセットを受信することができる。臨床データは、検査時の測定された/記録された患者パラメータ(例えば、バイタルサイン、投薬、患者情報)を含む場合があり、以前のレポートは、患者の以前の撮像スキャン、以前の診断ラボ試験結果、または患者に関する他の臨床所見を含む場合があり、画像データは、患者の検査の一部として取得および保存された診断画像を含む場合がある。各訓練データセットは、606に示されるように、それぞれの患者の検査のためのワークフローの使用状況データおよびパラメータをさらに含み得る。例えば、検査のためのワークフローの使用状況データおよびパラメータは、検査の画像のハンギングプロトコル、各事前情報、参照画像または文献などが表示されたビューポート、検査中に表示された臨床データ、検査中に使用されたツール、検査で記録された所見、検査期間、および関連のあるフォローアップ情報(例えば、患者の診断の確認、誤診の確認)を含み得る。
608において、ワークフロー推論モデル、事前情報選択モデル、ツールセット予測モデル、所見モデル、および参照モデルが訓練データセットに基づいて生成される。モデルは、実施される機械学習/人工知能の方法に応じて、任意の適切な形式をとることができる。例えば、モデルがランダムフォレスト学習アルゴリズムを使用して訓練される場合、モデルは各々、決定木を含んでもよい。別の例では、モデルが人工ニューラルネットワークを使用して訓練される場合、モデルは各々、接続された人工ニューロンの層を含んでもよい(図7に示され、以下でより詳細に説明される)。モデルは、検査のパラメータに基づいて、その後の検査中に表示されるワークフロー、事前情報、所見、ツールセット、および参照を含む、その後の検査の予測または提案を出力するように構成することができる。
610において、モデルは、ユーザまたは中央学習プラットフォームと通信する別のコンピューティングデバイスによって要求されたとき、検査パラメータに基づいて予測/提案を出力することができる。例えば、モデルは、中央学習プラットフォームによって展開されてもよく、要求されたときに予測/提案をPACSと通信するオンサイトコンピューティングデバイスに送出してもよい。他の例では、モデルは、オンサイトコンピューティングデバイスによって展開されてもよい。
612において、モデルは、受信されたワークフローの使用状況データに基づいて更新することができる。例えば、上記で説明したように、モデルによって出力された予測/提案を使用して、検査中のワークフローのフォーマット/選択、事前情報の選択、ツールセットの選択、所見の選択、および/または表示される参照の選択を行うと、ユーザ対話を追跡し、所見の受け入れ/拒否、画像/所見/参照が表示されている場所の周りへの移動、異なる事前情報または参照の検索など、ユーザが修正をワークフローに加えたかどうかを決定することができる。これらの対話のいずれかは、予測/提案が最適ではなかったことを示している可能性があるため、モデルを再訓練するために使用することができる。さらに、いくつかの例では、所与のセットの予測/提案の診断精度は、検査で臨床医によって提出された所見が確証されたかどうかに基づいて計算されてもよく、モデルは、診断精度に基づいて訓練されてもよい(例えば、診断精度が時間と共に高められるように)。またさらに、所与のセットの予測/提案の検査期間を決定することができ、モデルを検査期間に基づいて訓練することができる(例えば、検査期間が時間と共に短縮されるように)。
いくつかの例では、614に示されるように、高精度および/または高効率のワークフローを示す通知が生成され、学習プラットフォームと通信する医療施設に送出されてもよい。前に説明したように、高精度のワークフローが所与のワークフロー分類(例えば、CTの乳房病変)に対して生成されると、そのワークフローのパラメータ(例えば、画像の提示方法、提示されたツールセット、使用された事前情報、および使用された参照)は、各医療施設のそれぞれのデバイスに送出される通知に含めることができる。次に、医療施設の推論サービスまたは他の管理グループは、それらのパラメータをその医療施設のワークフロー/モデルに組み込んでもよいかを選ぶことができる。その後、方法600は終了する。
このようにして、診断精度を高め、検査時間を短縮するために、診断検査/研究の様々な側面を学習することができる。例えば、より最適なワークフローで使用されるツールセット、ならびにインターフェース上のそれらの相対的な位置が学習される。別の例として、以前の患者のスキャンおよび参照に対する現在のスキャンのハンギングプロトコルを学習することができる。さらに別の例として、ワークフロー中に実施されるアクションアイテムの順序を学習することができる。
図7は、図5~図6の方法による、図3~図4のスマートエンジンを通るデータの例示的なフロー700を示す。データフローにより、診断効率、検査効率、ユーザによる検査の修正の削減などの関数として診断ワークフローを学習させることを可能にする。その後ワークフローは、ユーザが診断時に患者の検査をレビューするために生成およびロードすることができる。
702において、多種の入力がスマートエンジン(すなわち、本明細書で説明されるモデルを訓練および/または実行するように構成されたコンピューティングデバイス)に提供される。コンピューティングデバイスで受信された入力は、臨床データ、以前のレポート、以前の撮像データ、および専門家の使用状況データを含む。一例では、データは、ローカルのヘルスケア環境で供給および保存される。例えば、入力は、所与の病院のすべての患者の患者臨床データ、それらの以前の撮像データ、ならびにその場所の専門家からの参照および専門家の使用状況データ(複数の検査の各々についての診断、疑わしい状態の進行度などのコメント、ならびに検査中のワークフローインターフェースの対話など)であり得る。撮像データは、病院の撮像システムから供給され得る。所与の場所で収集されたデータは、病院の中央PACSならびにサーバの中央データリポジトリに保存することができる。そこから、データは、クラウドネットワーク上の中央学習プラットフォームのスマートエンジンで抽出することができる。同様に、データは、クラウドネットワークに通信可能に結合された複数の病院から収集することが可能である。
704において、スマートエンジンで機械学習および人工知能のアルゴリズムおよびモデルを使用してデータ処理を実施することができる。特に、様々なヘルスケア環境から(702で)受信された入力を使用して、ワークフロー推論、以前の選択、ツールセット予測、ならびに関連のある所見および参照の識別に関する予測を行うことができる。例えば、モデルは、各患者スキャンおよび関連する診断を分析し得る。そこで、診断時に臨床医によって選択された事前情報を監視することができる。加えて、臨床医によって使用された具体的なツールを含むツールセット、および画像に対するそれらの位置決めを学習することができる。さらに、臨床医によって行われた診断を学習し、専門家の使用状況データと比較して初期診断が確証されたかどうかを学習することが可能である。初期診断が確証された場合、モデルは、状態、撮像モダリティ、臨床医ID、ヘルスケア環境、および他のそのようなパラメータの関数としてワークフローを学習してもよい。ワークフローの学習には、スキャンが分析される順序、診断で使用された特定のツール、診断の確認で使用された具体的な参照などの学習が含まれる。
706において、704で実施された学習は、最適化されたワークフローを自動的に生成してユーザに表示するために使用される。本明細書におけるユーザは、放射線技師などの臨床医であり得、ワークフローは、少なくとも部分的に、PACSなどの記憶システムに診断検査として保存されている患者で取得されたセットの診断画像に応じて生成される。他の例では、ワークフローは、疑わしい状態の診断のためにディスプレイデバイス上で患者の診断検査を抽出するユーザに応じて生成されてもよい。最適化されたワークフローは、ワークフローのセットの予測/提案、ワークフローインターフェース、および検査中に提示される情報に基づいて生成することができ、セットの予測/提案は、スキャンが実施された所与のヘルスケア環境のPACSでなど、クラウドネットワーク上の中央学習プラットフォームによって、またはローカルに生成され得る。最適化されたワークフローは、ワークフローインターフェースに表示することができる。ワークフローは、診断中に実施されるアクションアイテムの最適化された順序を含み得る。例えば、最適化されたワークフローは、信頼できる診断を実施するためにユーザが行うことができる段階的な命令を含んでもよい。最適化されたワークフローはまた、関連のある参照画像へのリンクを含んでもよい。
したがって、スマートエンジン(例えば、中央学習プラットフォーム)は、診断検査ワークフローパラメータを予測または提案するために展開され得る1つまたは複数のワークフローモデルを訓練することができる。モデルは、上述の入力によって訓練することができ、これは所与の過去の診断検査について、検査のパラメータ、患者撮像履歴(事前情報)、患者臨床データ(現在および過去)、患者個人データ(年齢、病気、病気の履歴など)、および以前のレポート/診断を含み得る。入力はまた、ユーザ(例えば、臨床医)が検査を実行したときにユーザによって使用された様々なツール(例えば、パン、ズーム、ウィンドウレベリングなど、ユーザが試験を実行したときに選択したユーザインターフェースツール)、検査中に関連のある画像をハンギングする(例えば、表示する)異なるステップ、および検査中に比較のために表示された異なる事前情報を含んでもよい。複数の過去の診断検査に対する同じまたは同様の入力を使用して、モデルを訓練することができる。
次に、新しい検査が実施されるとき、診断が撮像データ(例えば、適切な撮像モダリティによって取得された診断医療画像)に基づいて臨床医によって行われ得る一方で、患者に関する以下の臨床データ:患者の詳細(性別、年齢、習慣)、病気および履歴、現在/過去の治療および投薬、様々な臨床試験の結果なども考慮する。撮像データは、1つまたは複数のモデルによって提案されたワークフローに従って表示されてもよい。さらに、検査中に臨床医に提示される臨床データは、1つまたは複数のモデルによって提案され得る。このようにして、専門家ユーザがこれらの事実をすべて組み合わせて診断を行う方法と同様に、スマートエンジンは、これらの要素をすべてシステムに組み込むことができる。
図8は、診断検査の選択後にディスプレイ802に表示される例示的なユーザインターフェース800を示す。例えば、ユーザインターフェース800は、ビューア236のディスプレイデバイス237に表示されるインターフェース235の一例であり得る。特に、ユーザインターフェース800を介して実行される診断検査は、プロトコル選択メニュー804によって示すように、デジタル乳房トモシンセシス(DBT)プロトコルである。
検査およびプロトコルを選択すると、撮像スキャン中に(例えば、CT撮像システム100で)得られた診断画像は、上記で説明した1つまたは複数のモデルによって提供される提案/予測を介して生成されたワークフローに従って、ユーザインターフェース800を介して表示することができる。例えば、ワークフローに従って、第1の画像806および第2の画像808が表示される。ワークフローの複数のアクションアイテムは、ワークフローメニュー810を介して表示される。これらは、診断を確実に実施するために、ユーザが従う可能性のあるステップと、従う必要がある順序とを含む。ワークフローのアクションアイテムは、1つまたは複数のモデルによって予測されたステップのリストを含み得る。典型的には、ユーザは、ステップの各々を行って検査を完了する。スマートエンジン/推論サービスがステップのシーケンスを生成する一方で、メニューは、ユーザにステップのシーケンスを変更するオプションを提供する。これが行われる場合、使用状況およびシーケンス生成の最適化に関するフィードバックを保存し、後で使用することができる。ユーザは、個々のアクションアイテム812を選択することができ、選択に応じて、そのアクションアイテムで表示される画像が表示される。いくつかの例では、通知(図示せず)がポップアップし得、使用するツール、ズームする領域、画像で探す特徴などのアクションアイテムの詳細が表示される。示すように、選択された個々のアクションアイテム812は、従来のデジタルマンモグラフィシステムで撮られた乳房の頭尾方向(CC)および内外斜位方向(MLO)ビューが示されることを指示し、したがって第1の画像806および第2の画像808は、それぞれCCおよびMLOビューで乳房を示して表示される。ユーザが検査を進めるにつれて、DBT画像が示されたり(CCおよびMLOビューが横並びで個々に)、デジタルマンモグラフィ画像が示されたりなどしてもよい。
ユーザは、ワークフローアイコン814を作動させることによって、ワークフローの異なるステップを通過することができる。これにより、ユーザはガイド付きワークフローを進めることが可能である。また、ユーザは、事前情報アイコン816を作動させることによって、以前の研究をナビゲートすることができる。事前情報アイコンの作動により、1つまたは複数のモデルによって最も関連性が高いと既に識別されている同じ患者の以前の乳房スキャン、ならびに1つまたは複数のモデルによって提案される参照画像をワークフローインターフェースにロードすることができる。
図9は、本明細書で説明される1つまたは複数のモデル(例えば、図3の事前情報選択モデル322)によって選択された関連のある事前情報の例示的な実証を示す。臨床医などのユーザが患者の検査を実施しているとき、従来、ユーザは、患者に対して実施されたすべての以前の撮像スキャンがリストされている事前情報選択ページ902にナビゲートすることを強いられる。検査セレクタ特徴はスキャンをモダリティ(例えば、MRI、超音波、CTなど)によってフィルタリングすることを可能にし得るが、臨床医は、複数の関連および非関連スキャンを並べ替えてから関連のあるスキャンを手動で選択する必要があり、したがって現在の検査を実施しているときに閲覧しなければならない(904に示す)。事前情報選択モデル322など、本明細書で説明される1つまたは複数のモデルは、事前情報選択ページ902にリストされたスキャンのどの以前のスキャンが現在の検査に関連しているかを自動的に決定し、検査のワークフローに含まれるスキャンを識別するように訓練することができる。例えば、事前情報選択モデル322によって識別された以前のスキャンは、検査の1つまたは複数のビューポートに含まれてもよい。本明細書で使用する場合、ビューポートは、インターフェースの表示領域を指し得る。例えば、904に示す検査は、第1のビューポート906(検査に関連のある参照文献のページが表示される)などの11のビューポートを含み得る。識別された関連のある以前のスキャンは、ボックス908などのボックスで囲まれたスキャンである。例えば、現在の検査はデジタルマンモグラフィ検査であるため、患者の最新のスキャンである2016年12月27日に実施された骨密度スキャンは、現在の検査に関連しているとは識別されない。ボックス908のスキャンは、両方ともデジタルマンモグラフィスキャンであり、したがって関連のあるスキャンであると識別される。
図10は、ディスプレイ802上の例示的なワークフローインターフェース1000を示す。ここで、スマートエンジンは、検査中にユーザが閲覧するための関連のある参照画像を提案している。特に、インターフェース1000を介して表示される検査ワークフローは、現在の患者画像1002のグループおよび参照画像1004のグループを含む。現在の患者画像1002は、提案されたワークフローに従って閲覧するために定義された順序で配置されてもよい。参照画像1004は、現在の患者画像1002のグループに示される画像と同じ解剖学的構造および同じ向きの画像に対応することができ、さらに、参照画像も同じ定義された順序でロードすることができる。図示の例では、参照画像1004は、比較および読み取りのための基礎をユーザに与えるように、疾患のない解剖学的構造のものである。ただし、他の例では、参照画像は、疑わしい状態の存在が確認され、状態の程度が変化する解剖学的構造の画像であり得、その結果ユーザは、状態の進行を比較および評価することができる。図示の例は、最適化されたワークフローの読み取りプロトコルの一部として参照ビューを含むが、他の例では、参照画像は、ポップアップ表示として提供されてもよい。例えば、現在の患者スキャンのグループから画像を選択すると、対応する参照画像が比較のためにポップアップされ得る。さらに、他の表示オプションが可能である。
図示されていないが、さらなる例では、同様の症例に対する追加の関連文献リソースおよび行われた診断がデータベースから抽出され、参照として示される場合がある。
深層学習技法を使用してスキャン分析および診断のワークフローを最適化する技術的効果は、診断成果を向上させることによって正確な健康状態を提供することができることである。コンピューティングデバイスが患者データを自動的に検索し、専門家の使用状況ならびに同様の研究およびワークフローからの推論と共に患者のデータの様々な側面を考慮に入れて結果をロードすることを可能にすることによって、診断の信頼性が向上し、ユーザ(放射線技師など)の認知負荷および疲労が軽減される。AIアルゴリズムを活用してデータを検索することによって、多元的で算出量の多い分析をより正確に実施することができるため、他の方法では見逃されていた潜在的な問題を識別することが可能になる。さらに、中央学習プラットフォームでワークフローを共有することによって、クラス最高の読み取りプロトコルおよび実践が、様々なヘルスケア環境のすべてのユーザに利用可能となり得る。さらに、不要なユーザアクションを削除し、生産性を向上させることができる。
本明細書で使用する場合、単数形で列挙され、「1つの(a)」または「1つの(an)」という単語に続けられる要素またはステップは、除外することが明示的に述べられない限り、複数の前記要素またはステップを除外しないと理解されたい。さらに、本発明の「一実施形態」への言及は、列挙された特徴をも組み込む追加の実施形態の存在を除外するものとして解釈されることを意図しない。さらに、明示的に反対の記載がない限り、特定の性質を有する要素または複数の要素を「備える(comprising)」、「含む(including)」、または「有する(having)」実施形態は、その性質を有さない追加のそのような要素を含むことができる。「含む(including)」および「そこにある(in which)」という用語は、それぞれの用語「備える(comprising)」および「その(wherein)」の明示的な均等物として使用される。さらに、「第1の」、「第2の」、および「第3の」などの用語は、単にラベルとして使用され、それらの物体に数値的要件または特定の位置的順序を課すことを意図しない。
本明細書は、最良の態様を含めて本発明を開示すると共に、いかなる当業者も、任意のデバイスまたはシステムの作製および使用ならびに任意の組み込まれた方法の実施を含め、本発明を実施することを可能にするために実施例を使用する。本発明の特許可能な範囲は、特許請求の範囲によって定義されると共に、当業者に想起される他の実施例を含んでもよい。そのような他の実施例は、特許請求の範囲の文言と異ならない構造要素を有する場合、または特許請求の範囲の文言と実質的な差のない等価の構造要素を含む場合、特許請求の範囲内にあることが意図されている。
[実施態様1]
1つまたは複数の医療画像を含む診断検査に関連する1つまたは複数の検査パラメータを自動的に識別すること(504)と、
前記1つまたは複数の医療画像を分析するためのワークフローを自動的に生成することであって、前記ワークフローは、診断プロトコル、ツールセット、以前の撮像スキャン、以前の所見、および参照画像(1004)の1つまたは複数を含み、前記ワークフローは、前記1つまたは複数の検査パラメータに基づいて生成されることと
を含む、方法(500、600)。
[実施態様2]
前記1つまたは複数の検査パラメータは、前記1つまたは複数の医療画像を取得するために使用される撮像モダリティ(505)、前記診断検査の診断目標(507)、前記1つまたは複数の医療画像に撮像された解剖学的特徴、前記1つまたは複数の医療画像に撮像された患者の患者情報、および前記診断検査を実施する臨床医(508)のIDの1つまたは複数を含む、実施態様1に記載の方法(500、600)。
[実施態様3]
ユーザからの要求を受信すると、ディスプレイデバイス(237)に表示するために前記ワークフローを出力することをさらに含む、実施態様1に記載の方法(500、600)。
[実施態様4]
前記診断プロトコルは、前記診断検査中に実施されるアクションアイテム(812)のリストを含む、実施態様1に記載の方法(500、600)。
[実施態様5]
前記ワークフローは、前記1つまたは複数の医療画像、前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および前記参照画像(1004)が介して表示されるワークフローインターフェース(235、1000)のフォーマットをさらに含む、実施態様1に記載の方法(500、600)。
[実施態様6]
前記ワークフローを自動的に生成することは、1つまたは複数のワークフローモデル(307)によって出力されたセットの提案されたワークフローパラメータに従って前記ワークフローを自動的に生成すること(510)を含む、実施態様1に記載の方法(500、600)。
[実施態様7]
前記1つまたは複数のワークフローモデル(307)は、前記1つまたは複数の検査パラメータを、異なるそれぞれの患者に関連する複数の以前の診断検査の各々について、患者臨床データ(310)、以前のレポート(312)、画像データ(314)、および診断検査ワークフローの使用状況データ(316)を含む訓練データセットに基づいて前記セットの提案されたワークフローパラメータと相関させるように訓練される、実施態様6に記載の方法(500、600)。
[実施態様8]
前記生成されたワークフローを介して前記診断検査の実行中にユーザ対話データを収集することをさらに含み、前記ユーザ対話データは、前記1つまたは複数のワークフローモデル(307)を再訓練するために使用可能である、実施態様7に記載の方法(500、600)。
[実施態様9]
前記診断検査の完了後、前記診断検査で保存された1つまたは複数の所見を確認するまたは確認しないフォローアップデータを収集することをさらに含み、前記フォローアップデータは、前記生成されたワークフローの診断精度を決定するために使用可能である、実施態様1に記載の方法(500、600)。
[実施態様10]
記憶システム(224)と、
コンピューティングデバイス(216、304)であって、
1つまたは複数の医療画像、診断検査、および前記記憶システム(224)に記憶された前記1つまたは複数の医療画像を含む前記診断検査に関連する1つまたは複数の検査パラメータを自動的に識別し、
前記1つまたは複数の医療画像を分析するためのワークフローを自動的に生成し、前記ワークフローは、診断プロトコル、ツールセット、以前の撮像スキャン、以前の所見、および参照画像(1004)の1つまたは複数を含み、前記ワークフローは、前記1つまたは複数の検査パラメータに基づいて生成され、
前記診断検査の一部として、前記ワークフローを前記記憶システム(224)に送出して前記1つまたは複数の医療画像を保存する
ための、前記コンピューティングデバイス(216、304)のプロセッサ(215)によって実行可能な命令を記憶するコンピューティングデバイス(216、304)と
を備える、システム(200)。
[実施態様11]
ディスプレイデバイス(237)を含むビューア(236、432)をさらに備え、前記ビューア(236、432)は、前記1つまたは複数の医療画像および前記ワークフローを含む前記診断検査を抽出する要求を前記記憶システム(224)に送出し、前記ワークフローの前記診断プロトコルに従って前記1つまたは複数の医療画像を前記ディスプレイデバイス(237)を介して表示し、前記ワークフローに従って前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および/または前記参照画像(1004)を表示するように構成される、実施態様10に記載のシステム(200)。
[実施態様12]
前記1つまたは複数の検査パラメータは、前記1つまたは複数の医療画像を取得するために使用される撮像モダリティ(505)、前記診断検査の診断目標(507)、前記1つまたは複数の医療画像に撮像された解剖学的特徴、前記1つまたは複数の医療画像に撮像された患者の患者情報、および前記診断検査を実施する臨床医(508)のIDの1つまたは複数を含む、実施態様10に記載のシステム(200)。
[実施態様13]
前記診断プロトコルは、前記診断検査中に実施されるアクションアイテム(812)のリストを含み、前記ワークフローは、前記1つまたは複数の医療画像、前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および前記参照画像(1004)が介して表示されるワークフローインターフェース(235、1000)のフォーマットをさらに含む、実施態様10に記載のシステム(200)。
[実施態様14]
前記ワークフローを自動的に生成することは、1つまたは複数のワークフローモデル(307)によって出力されたセットの提案されたワークフローパラメータに従って前記ワークフローを自動的に生成すること(510)を含む、実施態様10に記載のシステム(200)。
[実施態様15]
前記1つまたは複数のワークフローモデル(307)は、前記1つまたは複数の検査パラメータを、異なるそれぞれの患者に関連する複数の以前の診断検査の各々について、患者臨床データ(310)、以前のレポート(312)、画像データ(314)、および診断検査ワークフローの使用状況データ(316)を含む訓練データセットに基づいて前記セットの提案されたワークフローパラメータと相関させるように訓練される、実施態様14に記載のシステム(200)。
[実施態様16]
前記命令は、
前記生成されたワークフローを介して前記診断検査の実行中にユーザ対話データを収集し、前記ユーザ対話データは、前記1つまたは複数のワークフローモデル(307)を再訓練するために使用可能であり、
前記診断検査の完了後、前記診断検査で保存された1つまたは複数の所見を確認するまたは確認しないフォローアップデータを収集し、前記フォローアップデータは、前記生成されたワークフローの診断精度を決定するために使用可能である
ように実行可能である、実施態様15に記載のシステム(200)。
[実施態様17]
各々が異なる医療施設に位置する複数のコンピューティングデバイス(216、304)に通信可能に結合された中央学習プラットフォーム(242、302)のための方法(500、600)であって、
前記中央学習プラットフォーム(242、302)において、1つまたは複数の診断検査パラメータを、異なるそれぞれの患者に関連する複数の以前の診断検査の各々について、患者臨床データ(310)、以前のレポート(312)、画像データ(314)、および診断検査ワークフローの使用状況データ(316)を含む訓練データセットに基づいてセットの提案されたワークフローパラメータと相関させるように1つまたは複数のワークフローモデル(307)を訓練することと、
要求されると、前記1つまたは複数のワークフローモデル(307)を前記複数のコンピューティングデバイス(216、304)の少なくとも第1のコンピューティングデバイス(216、304)に送出することと、
前記中央学習プラットフォーム(242、302)において、前記1つまたは複数のモデル(307)からの出力に基づいて生成されたワークフローに従って実行された診断検査の完了後に前記第1のコンピューティングデバイス(216、304)で生成されたフォローアップデータを受信することであって、前記フォローアップデータは、前記診断検査の1つまたは複数の所見を確認するまたは確認しないことと、
前記中央学習プラットフォーム(242、302)において、前記フォローアップデータに基づいて前記ワークフローの診断精度を決定することと、
前記診断精度が閾値精度よりも高い場合、前記ワークフローを前記複数のコンピューティングデバイス(216、304)の第2のコンピューティングデバイス(216、304)に送出することと
を含む、方法(500、600)。
[実施態様18]
前記1つまたは複数の診断検査パラメータは、撮像モダリティ(505)、診断目標(507)、および解剖学的特徴の1つまたは複数を含み、前記セットの提案されたワークフローパラメータは、提案された診断プロトコル、提案されたワークフローインターフェースフォーマット、提案された以前の撮像スキャン、提案された参照画像(1004)、および提案された所見の1つまたは複数を含む、実施態様17に記載の方法(500、600)。
[実施態様19]
前記ワークフローに従って実行された前記診断検査の実行中に前記第1のコンピューティングデバイス(216、304)で収集されたユーザ対話データを受信することと、前記ユーザ対話データで前記1つまたは複数のワークフローモデル(307)を再訓練することとをさらに含む、実施態様17に記載の方法(500、600)。
100 コンピュータ断層撮影(CT)システム
102 ガントリ
104 X線放射線源
106 X線/X線ビーム/X線放射線
108 検出器アレイ
110 画像処理ユニット
112 対象
114 撮像センサ
115 電動テーブル
116 モータ
118 テーブルモータコントローラ
200 撮像システム/CT撮像システム
202 検出器素子
204 対象
206 回転中心
208 制御機構
210 X線コントローラ
212 ガントリモータコントローラ
214 データ取得システム(DAS)
215 画像センサデータプロセッサ
216 コンピュータ/コンピューティングデバイス
218 記憶デバイス/大容量記憶装置
220 オペレータコンソール
224 画像保管通信システム(PACS)
226 テーブルモータコントローラ
230 画像再構成器
232 ディスプレイ
234 推論サービス
235 ワークフローインターフェース
236 ビューア
237 ディスプレイデバイス/ディスプレイ
240 クラウドネットワーク
242 中央学習プラットフォーム
244 サーバ
250 診断検査システム
300 スマートワークフローシステム
302 オンライン中央学習プラットフォーム/集中型学習プラットフォーム
304 オンサイトコンピューティングデバイス/オンサイトデバイス
306 モデルリポジトリ/データリポジトリ/訓練モデルリポジトリ
307 モデル
308 訓練アルゴリズム
310 臨床データ
312 以前のレポート
314 画像データ
316 専門家の使用状況データ
318 訓練データ
320 ワークフロー推論モデル
322 事前情報選択モデル
324 ツールセット予測モデル
326 所見モデル
328 参照モデル
330 フィードバックエンジン
400 実施形態
404 病院
408 スマートエンジン訓練およびモデル更新モジュール
414 ヘルスケア環境
416 スマートエンジンデータリポジトリ
418 ユーザ入力収集サービス
420 スマートエンジン推論サービス
432 ビューア
500 方法
502 フローチャート
504 フローチャート
505 撮像モダリティ
506 身体部分/領域
507 診断目標
508 臨床医
510 フローチャート
512 フローチャート
514 フローチャート
516 フローチャート
518 フローチャート
520 フローチャート
522 フローチャート
524 フローチャート
600 方法
602 フローチャート
604 フローチャート
606 フローチャート
608 フローチャート
610 フローチャート
612 フローチャート
614 フローチャート
700 フロー
702 フローチャート
704 フローチャート
706 フローチャート
800 ユーザインターフェース
802 ディスプレイ
804 プロトコル選択メニュー
806 第1の画像
808 第2の画像
810 ワークフローメニュー
812 アクションアイテム
814 ワークフローアイコン
816 事前情報アイコン
902 事前情報選択ページ
904 検査
906 第1のビューポート
908 ボックス
1000 ワークフローインターフェース
1002 現在の患者画像
1004 参照画像

Claims (15)

  1. 1つまたは複数の医療画像を含む診断検査に関連する1つまたは複数の検査パラメータをプロセッサが自動的に識別すること(504)と、
    前記1つまたは複数の医療画像を分析するためのワークフローをプロセッサが自動的に生成することであって、前記ワークフローは、診断プロトコル、ツールセット、以前の撮像スキャン、以前の所見、および参照画像(1004)の1つまたは複数を含み、前記ワークフローは、前記1つまたは複数の検査パラメータに基づいて生成され、前記ツールセットは、少なくとも1つのユーザインターフェースメニューオプションまたは、選択されたときにタスクを実行する少なくとも1つの制御ボタンを含むことと、
    1つまたは複数のビューポートのどれが前記以前の撮像スキャン、前記ツールセット、または前記参照画像(1004)を表示するかを示す推測に少なくとも部分的に基づいて、ユーザインターフェースの少なくとも1つのビューポート前記ワークフローを表示することと、
    前記ワークフローに従ってフォーマットされた前記1つまたは複数の医療画像を前記ユーザーインターフェイス表示することと
    を含み、
    前記推測は、前記参照画像(1004)の取得に使用されたモダリティに少なくとも部分的に基づく人工知能ベースのモデルを使用して、明示的なユーザー入力なしでプロセッサが自動的に生成
    前記1つまたは複数のビューポートのサイズまたは前記1つまたは複数のビューポートの位置は、少なくとも部分的に、前記以前の撮像スキャン、前記ツールセット、前記参照画像(1004)、またはそれらの組み合わせに基づいて予測される、方法(500、600)。
  2. 前記1つまたは複数の検査パラメータは、前記1つまたは複数の医療画像を取得するために使用される撮像モダリティ(505)、前記診断検査の診断目標(507)、前記1つまたは複数の医療画像に撮像された解剖学的特徴、前記1つまたは複数の医療画像に撮像された患者の患者情報、および前記診断検査を実施する臨床医(508)のIDの1つまたは複数を含む、請求項1に記載の方法(500、600)。
  3. ユーザからの要求を受信すると、ディスプレイデバイス(237)に表示するために前記ワークフローをプロセッサが出力すること(514)をさらに含む、請求項1または2に記載の方法(500、600)。
  4. 前記診断プロトコルは、前記診断検査中に実施されるアクションアイテム(812)のリストを含み、
    前記アクションアイテム(812)は、前記モデルによって予測されたステップのリストを含み、
    ユーザは、前記ステップの各々を行って検査を実行し、
    前記推測に基づいて、前記ステップのシーケンスが自動的に生成される一方で、ユーザに前記ステップのシーケンスを変更するオプションが提供される、請求項1乃至3のいずれかに記載の方法(500、600)。
  5. 前記ワークフローは、前記1つまたは複数の医療画像、前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および前記参照画像(1004)が介して表示されるワークフローインターフェース(235、1000)のフォーマットをさらに含み、
    前記方法はさらに、ユーザが選択可能な前記以前の撮像スキャンのリストをプロセッサが表示することを含み、
    前記以前の撮像スキャンの前記リストは、前記1つまたは複数の医療画像に撮像された患者の前記1つまたは複数の医療画像に関連のあると前記推測に基づいて自動的に認識された前記患者の関連する以前の撮像スキャンを含み、前記1つまたは複数の医療画像に関連していないと前記推測に基づいて自動的に認識された前記患者の関連しない以前の撮像スキャンを含まない、請求項1乃至4のいずれかに記載の方法(500、600)。
  6. 前記ワークフローを自動的に生成することは、1つまたは複数のワークフローモデル(307)によって出力されたセットの提案されたワークフローパラメータに従って前記ワークフローをプロセッサが自動的に生成すること(510)を含む、請求項1乃至5のいずれかに記載の方法(500、600)。
  7. 前記1つまたは複数のワークフローモデル(307)は、前記1つまたは複数の検査パラメータを、異なるそれぞれの患者に関連する複数の以前の診断検査の各々について、患者臨床データ(310)、以前のレポート(312)、画像データ(314)、および診断検査ワークフローの使用状況データ(316)を含む訓練データセットに基づいて前記セットの提案されたワークフローパラメータと相関させるように訓練される、請求項6に記載の方法(500、600)。
  8. 前記生成されたワークフローを介して前記診断検査の実行中にユーザ対話データをプロセッサが収集すること(516)をさらに含み、前記ユーザ対話データは、前記1つまたは複数のワークフローモデル(307)を再訓練するために使用可能である、請求項7に記載の方法(500、600)。
  9. 前記診断検査の完了後、前記診断検査で保存された1つまたは複数の所見を確認するまたは確認しないフォローアップデータをプロセッサが収集すること(524)をさらに含み、前記フォローアップデータは、前記生成されたワークフローの診断精度を決定するために使用可能である、請求項1乃至8のいずれかに記載の方法(500、600)。
  10. 記憶システム(224)と、
    コンピューティングデバイス(216、304)であって、
    1つまたは複数の医療画像、診断検査、および前記記憶システム(224)に記憶された前記1つまたは複数の医療画像を含む前記診断検査に関連する1つまたは複数の検査パラメータを自動的に識別し(504)、
    前記1つまたは複数の医療画像を分析するためのワークフローを自動的に生成し、前記ワークフローは、診断プロトコル、ツールセット、以前の撮像スキャン、以前の所見、および参照画像(1004)の1つまたは複数を含み、前記ワークフローは、前記1つまたは複数の検査パラメータに基づいて生成され、前記ツールセットは、少なくとも1つのユーザインターフェースメニューオプションまたは、選択されたときにタスクを実行する少なくとも1つの制御ボタンを含み、
    1つまたは複数のビューポートのどれが前記以前の撮像スキャン、前記ツールセット、または前記参照画像(1004)を表示するかを示す推測に少なくとも部分的に基づいて、ユーザインターフェースの少なくとも1つのビューポートに前記ワークフローを表示し、
    前記ワークフローに従ってフォーマットされた前記1つまたは複数の医療画像を前記ユーザーインターフェイスに表示し、
    前記推測は、前記参照画像(1004)の取得に使用されたモダリティに少なくとも部分的に基づく人工知能ベースのモデルを使用して、明示的なユーザー入力なしで自動的に生成され、
    前記1つまたは複数のビューポートのサイズまたは前記1つまたは複数のビューポートの位置は、少なくとも部分的に、前記以前の撮像スキャン、前記ツールセット、前記参照画像(1004)、またはそれらの組み合わせに基づいて予測され、
    前記診断検査の一部として、前記ワークフローを前記記憶システム(224)に送出して前記1つまたは複数の医療画像を保存する
    ための、前記コンピューティングデバイス(216、304)のプロセッサ(215)によって実行可能な命令を記憶するコンピューティングデバイス(216、304)と
    を備える、システム(200)。
  11. ディスプレイデバイス(237)を含むビューア(236、432)をさらに備え、前記ビューア(236、432)は、前記1つまたは複数の医療画像および前記ワークフローを含む前記診断検査を抽出する要求を前記記憶システム(224)に送出し、前記ワークフローの前記診断プロトコルに従って前記1つまたは複数の医療画像を前記ディスプレイデバイス(237)を介して表示し、前記ワークフローに従って前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および/または前記参照画像(1004)を表示するように構成される、請求項10に記載のシステム(200)。
  12. 前記1つまたは複数の検査パラメータは、前記1つまたは複数の医療画像を取得するために使用される撮像モダリティ(505)、前記診断検査の診断目標(507)、前記1つまたは複数の医療画像に撮像された解剖学的特徴、前記1つまたは複数の医療画像に撮像された患者の患者情報、および前記診断検査を実施する臨床医(508)のIDの1つまたは複数を含む、請求項10または11に記載のシステム(200)。
  13. 前記診断プロトコルは、前記診断検査中に実施されるアクションアイテム(812)のリストを含み、
    前記アクションアイテム(812)は、前記モデルによって予測されたステップのリストを含み、
    ユーザは、前記ステップの各々を行って検査を実行し、
    前記推測に基づいて、前記ステップのシーケンスが自動的に生成される一方で、ユーザに前記ステップのシーケンスを変更するオプションが提供され、
    前記ワークフローは、前記1つまたは複数の医療画像、前記ツールセット、前記以前の撮像スキャン、前記以前の所見、および前記参照画像(1004)が介して表示されるワークフローインターフェース(235、1000)のフォーマットをさらに含み、
    前記システムはさらに、ユーザが選択可能な前記以前の撮像スキャンのリストを表示することを含み、
    前記以前の撮像スキャンの前記リストは、前記1つまたは複数の医療画像に撮像された患者の前記1つまたは複数の医療画像に関連のあると前記推測に基づいて自動的に認識された前記患者の関連する以前の撮像スキャンを含み、前記1つまたは複数の医療画像に関連していないと前記推測に基づいて自動的に認識された前記患者の関連しない以前の撮像スキャンを含まない、請求項10乃至12のいずれかに記載のシステム(200)。
  14. 前記ワークフローを自動的に生成することは、1つまたは複数のワークフローモデル(307)によって出力されたセットの提案されたワークフローパラメータに従って前記ワークフローを自動的に生成すること(510)を含み、
    前記1つまたは複数のワークフローモデル(307)は、前記1つまたは複数の検査パラメータを、異なるそれぞれの患者に関連する複数の以前の診断検査の各々について、患者臨床データ(310)、以前のレポート(312)、画像データ(314)、および診断検査ワークフローの使用状況データ(316)を含む訓練データセットに基づいて前記セットの提案されたワークフローパラメータと相関させるように訓練される、請求項10乃至13のいずれかに記載のシステム(200)。
  15. 前記命令は、
    前記生成されたワークフローを介して前記診断検査の実行中にユーザ対話データを収集し(516)、前記ユーザ対話データは、前記1つまたは複数のワークフローモデル(307)を再訓練するために使用可能であり、
    前記1つまたは複数のワークフローモデル(307)は、異なる病院間で共有され、
    前記診断検査の完了後、前記診断検査で保存された1つまたは複数の所見を確認するまたは確認しないフォローアップデータを収集し(524)、前記フォローアップデータは、前記生成されたワークフローの診断精度を決定するために使用可能である
    ように実行可能である、請求項14に記載のシステム(200)。
JP2020122769A 2019-07-25 2020-07-17 ワークフロー管理のための方法およびシステム Active JP7080932B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/522,554 US11393579B2 (en) 2019-07-25 2019-07-25 Methods and systems for workflow management
US16/522,554 2019-07-25

Publications (2)

Publication Number Publication Date
JP2021039742A JP2021039742A (ja) 2021-03-11
JP7080932B2 true JP7080932B2 (ja) 2022-06-06

Family

ID=71607724

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020122769A Active JP7080932B2 (ja) 2019-07-25 2020-07-17 ワークフロー管理のための方法およびシステム

Country Status (4)

Country Link
US (1) US11393579B2 (ja)
EP (1) EP3770914A1 (ja)
JP (1) JP7080932B2 (ja)
CN (1) CN112309548A (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11449996B2 (en) * 2019-08-19 2022-09-20 Merative Us L.P. Intelligent automatic selection of a prior comparison study
JP2021183017A (ja) * 2020-05-21 2021-12-02 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US11659029B2 (en) * 2020-05-29 2023-05-23 Vmware, Inc. Method and system for distributed multi-cloud diagnostics
US20210375437A1 (en) * 2020-06-01 2021-12-02 Radial Analytics, Inc. Systems and methods for discharge evaluation triage
US11847598B2 (en) * 2021-08-13 2023-12-19 Edgeverve Systems Limited Method and system for analyzing process flows for a process performed by users
US20230121619A1 (en) * 2021-10-19 2023-04-20 GE Precision Healthcare LLC System and methods for exam suggestions using a clustered database
WO2024083311A1 (en) * 2022-10-17 2024-04-25 Smart Reporting Gmbh Generation of and search for medical reference image data
CN116051546B (zh) * 2023-03-07 2023-06-13 吉林大学 一种用于医学检查结果互认的专用影像诊断系统及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070106633A1 (en) 2005-10-26 2007-05-10 Bruce Reiner System and method for capturing user actions within electronic workflow templates
JP2012501015A (ja) 2008-08-21 2012-01-12 テラリコン インコーポレイテッド 医療画像データ処理のためのワークフローテンプレート管理
JP2013106951A (ja) 2011-11-23 2013-06-06 General Electric Co <Ge> ユーザからの明示的な学習により駆動されるスマートpacsワークフローシステムおよび方法
US20160350919A1 (en) 2015-06-01 2016-12-01 Virtual Radiologic Corporation Medical evaluation machine learning workflows and processes

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6275869B1 (en) * 1994-11-22 2001-08-14 Eastman Kodak Company System for network communication of image information between imaging devices according to multiple protocols
US6678669B2 (en) 1996-02-09 2004-01-13 Adeza Biomedical Corporation Method for selecting medical and biochemical diagnostic tests using neural network-related applications
US6674449B1 (en) * 1998-11-25 2004-01-06 Ge Medical Systems Global Technology Company, Llc Multiple modality interface for imaging systems
US6381576B1 (en) 1998-12-16 2002-04-30 Edward Howard Gilbert Method, apparatus, and data structure for capturing and representing diagnostic, treatment, costs, and outcomes information in a form suitable for effective analysis and health care guidance
US8538770B2 (en) 2000-08-01 2013-09-17 Logical Images, Inc. System and method to aid diagnoses using cross-referenced knowledge and image databases
US7418119B2 (en) 2002-10-31 2008-08-26 Siemens Computer Aided Diagnosis Ltd. Display for computer-aided evaluation of medical images and for establishing clinical recommendation therefrom
US7244230B2 (en) 2002-11-08 2007-07-17 Siemens Medical Solutions Usa, Inc. Computer aided diagnostic assistance for medical imaging
US7458936B2 (en) 2003-03-12 2008-12-02 Siemens Medical Solutions Usa, Inc. System and method for performing probabilistic classification and decision support using multidimensional medical image databases
US8712798B2 (en) 2003-11-26 2014-04-29 Koninklijke Philips N.V. Workflow optimization for high throughput imaging environments
US6955433B1 (en) 2004-06-17 2005-10-18 Johnson & Johnson Vision Care, Inc. Methods for designing composite ophthalmic lens surfaces
US20060242143A1 (en) * 2005-02-17 2006-10-26 Esham Matthew P System for processing medical image representative data from multiple clinical imaging devices
US8520978B2 (en) 2007-10-31 2013-08-27 Mckesson Technologies Inc. Methods, computer program products, apparatuses, and systems for facilitating viewing and manipulation of an image on a client device
US8107700B2 (en) * 2007-11-21 2012-01-31 Merge Cad Inc. System and method for efficient workflow in reading medical image data
US20210401456A1 (en) * 2007-11-26 2021-12-30 C. R. Bard, Inc. Apparatus for Use with Needle Insertion Guidance System
US8151188B2 (en) * 2008-07-23 2012-04-03 General Electric Company Intelligent user interface using on-screen force feedback and method of use
US20100082365A1 (en) * 2008-10-01 2010-04-01 Mckesson Financial Holdings Limited Navigation and Visualization of Multi-Dimensional Image Data
US9152760B2 (en) * 2011-11-23 2015-10-06 General Electric Company Smart 3D PACS workflow by learning
US20130293481A1 (en) * 2012-05-03 2013-11-07 Tuming You Method, electronic device, and computer readable medium for accessing data files
US20140006926A1 (en) 2012-06-29 2014-01-02 Vijaykalyan Yeluri Systems and methods for natural language processing to provide smart links in radiology reports
JP6438395B2 (ja) * 2012-08-22 2018-12-12 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 効果的な表示及び報告のための画像資料に関連する以前の注釈の自動検出及び取り出し
EP3105694A2 (en) * 2014-02-13 2016-12-21 The Cleveland Clinic Foundation Predicting and mitigating risk of ectasia and optimizing therapeutic outcomes
US9953136B2 (en) * 2014-02-20 2018-04-24 Siemens Healthcare Gmbh System for displaying and editing data for a medical device
DE102015225543B4 (de) * 2015-12-17 2024-02-08 Siemens Healthcare Gmbh Verfahren zum Betrieb eines Bildsystems einer medizinischen bildgebenden Modalität und medizinische bildgebende Modalität
US11056243B2 (en) * 2015-12-21 2021-07-06 Elekta Ab (Publ) Systems and methods for optimizing treatment planning
WO2017129564A1 (en) * 2016-01-27 2017-08-03 Koninklijke Philips N.V. Predictive model for optimizing clinical workflow
JP6540603B2 (ja) * 2016-05-27 2019-07-10 京セラドキュメントソリューションズ株式会社 表示装置及び表示方法
US20200043583A1 (en) * 2016-10-17 2020-02-06 Koninklijke Philips N.V. System and method for workflow-sensitive structured finding object (sfo) recommendation for clinical care continuum
EP3395405B1 (en) * 2017-04-24 2021-10-13 RaySearch Laboratories AB System and method for radiation therapy treatment planning
US10628001B2 (en) 2017-06-16 2020-04-21 General Electric Company Adapting user interfaces based on gold standards
CN107582097A (zh) * 2017-07-18 2018-01-16 中山大学附属第医院 一种基于多模态超声组学的智能辅助决策系统
EP3506279A1 (en) * 2018-01-02 2019-07-03 Koninklijke Philips N.V. Automatic diagnosis report preparation
CN108492885B (zh) * 2018-02-26 2022-05-24 上海联影医疗科技股份有限公司 检查工作流推荐方法、装置及终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070106633A1 (en) 2005-10-26 2007-05-10 Bruce Reiner System and method for capturing user actions within electronic workflow templates
JP2012501015A (ja) 2008-08-21 2012-01-12 テラリコン インコーポレイテッド 医療画像データ処理のためのワークフローテンプレート管理
JP2013106951A (ja) 2011-11-23 2013-06-06 General Electric Co <Ge> ユーザからの明示的な学習により駆動されるスマートpacsワークフローシステムおよび方法
US20160350919A1 (en) 2015-06-01 2016-12-01 Virtual Radiologic Corporation Medical evaluation machine learning workflows and processes

Also Published As

Publication number Publication date
JP2021039742A (ja) 2021-03-11
CN112309548A (zh) 2021-02-02
US20210027883A1 (en) 2021-01-28
US11393579B2 (en) 2022-07-19
EP3770914A1 (en) 2021-01-27

Similar Documents

Publication Publication Date Title
JP7080932B2 (ja) ワークフロー管理のための方法およびシステム
JP5478328B2 (ja) 診断支援システム、診断支援プログラムおよび診断支援方法
US10361002B2 (en) Method and apparatus for setting imaging environment by using signals transmitted by plurality of clients
JP5309187B2 (ja) 医用情報表示装置およびその動作方法、並びに医用情報表示プログラム
CN108475540A (zh) 用于使用来自过程的信息进行解剖建模的系统和方法描述
JP4786246B2 (ja) 画像処理装置及び画像処理システム
JP2004105728A (ja) コンピュータを利用した医療用画像の収集
WO2019200349A1 (en) Systems and methods for training a deep learning model for an imaging system
JP6771986B2 (ja) 医用情報処理装置
WO2020129541A1 (ja) 医用画像をaiの判断で症状度合いごと画像に表示する診断方法
WO2019200351A1 (en) Systems and methods for an imaging system express mode
US20220399107A1 (en) Automated protocoling in medical imaging systems
WO2021112141A1 (ja) 文書作成支援装置、方法およびプログラム
JP5337091B2 (ja) 医療情報の利用促進システムおよび方法
JP4651271B2 (ja) コンピュータ援用患者診断決定支援システム
JP7330744B2 (ja) 医用情報処理装置、オーダリングシステム及びプログラム
JP7223539B2 (ja) 乳がん診断支援装置、乳がん診断支援システム、および乳がん診断支援方法
WO2019200346A1 (en) Systems and methods for synchronization of imaging systems and an edge computing system
JP7144129B2 (ja) 医用画像診断装置及び医用情報管理装置
JP6878022B2 (ja) 医用画像診断装置、サーバおよびプログラム
JP7341686B2 (ja) 医用情報収集装置
JP7474568B2 (ja) 医用情報表示装置、及び医用情報表示システム
JP6966403B2 (ja) 診断支援装置
WO2019200353A1 (en) Systems and methods for deploying deep learning applications to an imaging system
JP2024070317A (ja) 処理装置、処理プログラム、処理方法及び処理システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201202

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210526

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210528

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220427

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220525

R150 Certificate of patent or registration of utility model

Ref document number: 7080932

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150