JP7568439B2 - 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム - Google Patents

医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム Download PDF

Info

Publication number
JP7568439B2
JP7568439B2 JP2020128499A JP2020128499A JP7568439B2 JP 7568439 B2 JP7568439 B2 JP 7568439B2 JP 2020128499 A JP2020128499 A JP 2020128499A JP 2020128499 A JP2020128499 A JP 2020128499A JP 7568439 B2 JP7568439 B2 JP 7568439B2
Authority
JP
Japan
Prior art keywords
image
ray
event
medical
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020128499A
Other languages
English (en)
Other versions
JP2022025590A (ja
Inventor
真己 秋山
智史 山下
和夫 今川
正志 平澤
富一 小野
光宣 菅野
久人 竹元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to JP2020128499A priority Critical patent/JP7568439B2/ja
Priority to CN202110863215.6A priority patent/CN114052756A/zh
Priority to US17/388,541 priority patent/US11793477B2/en
Publication of JP2022025590A publication Critical patent/JP2022025590A/ja
Application granted granted Critical
Publication of JP7568439B2 publication Critical patent/JP7568439B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/465—Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/44—Constructional features of apparatus for radiation diagnosis
    • A61B6/4429—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
    • A61B6/4435—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
    • A61B6/4441—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/464—Displaying means of special interest involving a plurality of displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/48—Diagnostic techniques
    • A61B6/486—Diagnostic techniques involving generating temporal series of image data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5294—Devices using data or image processing specially adapted for radiation diagnosis involving using additional data, e.g. patient information, image labeling, acquisition parameters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/464—Displaying means of special interest involving a plurality of displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/465—Displaying means of special interest adapted to display user selection data, e.g. icons or menus

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本明細書等に開示の実施形態は、医用情報処理装置、Ｘ線診断装置及び医用情報処理プログラムに関する。
被検体に対する治療手技においては、治療手技を実行する医師等のユーザをサポートするため、当該治療手技において収集された医用画像の表示が行なわれる。このような医用画像は、当該ユーザ又は他のスタッフにより、当該治療手技において収集された多数の医用画像の中から探索される。
特開２０１９－１１７６６３号公報
本明細書等に開示の実施形態が解決しようとする課題の一つは、医用画像をより有効に活用することである。ただし、本明細書等に開示の実施形態により解決される課題は上記課題に限られない。後述する実施形態に示す各構成による各効果に対応する課題を、本明細書等に開示の実施形態が解決する他の課題として位置付けることもできる。
実施形態の医用情報処理装置は、画像取得部と、イベント取得部と、管理部と、出力部とを備える。画像取得部は、被検体に対する治療手技中において医用画像を順次取得する。イベント取得部は、前記医用画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得する。管理部は、前記医用画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する。出力部は、前記医用画像を前記イベントとの関係を識別可能なように出力する。
図１は、第１の実施形態に係る医用情報処理システムの構成の一例を示すブロック図である。 図２は、第１の実施形態に係るＸ線診断装置の構成の一例を示すブロック図である。 図３Ａは、第１の実施形態に係るイベント取得処理の一例を示す図である。 図３Ｂは、第１の実施形態に係るイベント取得処理の一例を示す図である。 図３Ｃは、第１の実施形態に係るイベント取得処理の一例を示す図である。 図４は、第１の実施形態に係るイベント取得処理の一例を示す図である。 図５は、第１の実施形態に係る表示例を示す図である。 図６は、第１の実施形態に係る関連画像取得処理の一例を示す図である。 図７は、第１の実施形態に係る表示例を示す図である。 図８は、第１の実施形態に係るイベントの階層表示について説明するための図である。 図９Ａは、第１の実施形態に係る表示例を示す図である。 図９Ｂは、第１の実施形態に係る表示例を示す図である。 図１０Ａは、第１の実施形態に係る表示例を示す図である。 図１０Ｂは、第１の実施形態に係る表示例を示す図である。 図１１は、第２の実施形態に係る表示例を示す図である。 図１２は、第３の実施形態に係る表示例を示す図である。 図１３は、第４の実施形態に係る表示例を示す図である。
以下、図面を参照しながら、医用情報処理装置、Ｘ線診断装置及び医用情報処理プログラムの実施形態について詳細に説明する。
（第１の実施形態）
第１の実施形態では、医用情報処理装置３０を含んだ医用情報処理システム１を例として説明する。また、第１の実施形態では、医用画像の一例として、Ｘ線診断装置１０により収集されるＸ線画像について説明する。例えば、医用情報処理システム１は、図１に示すように、Ｘ線診断装置１０、画像保管装置２０及び医用情報処理装置３０を備える。なお、図１は、第１の実施形態に係る医用情報処理システム１の構成の一例を示すブロック図である。
図１に示すようにＸ線診断装置１０、画像保管装置２０及び医用情報処理装置３０は、ネットワークＮＷを介して接続される。ここで、ネットワークＮＷは、院内で閉じたローカルネットワークにより構成されてもよいし、インターネットを介したネットワークでもよい。即ち、画像保管装置２０は、Ｘ線診断装置１０及び医用情報処理装置３０と同一の施設内に設置されてもよいし、異なる施設に設置されてもよい。ただし、医用情報処理装置３０は、典型的には、Ｘ線診断装置１０が設置された検査室に、又は、Ｘ線診断装置１０を操作するための操作室に配置される。
Ｘ線診断装置１０は、例えば、被検体Ｐに対する治療手技中においてＸ線画像を順次収集し、収集したＸ線画像を画像保管装置２０又は医用情報処理装置３０に対して送信する。なお、Ｘ線診断装置１０については後述する。
画像保管装置２０は、各種の医用画像を保管する。例えば、画像保管装置２０は、Ｘ線診断装置１０によって収集されたＸ線画像を受け付けて保管する。例えば、画像保管装置２０は、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅm）のサーバである。
医用情報処理装置３０は、Ｘ線診断装置１０又は画像保管装置２０から取得したＸ線画像に基づく各種の処理を実行する。例えば、医用情報処理装置３０は、図１に示すように、入力インタフェース３１と、ディスプレイ３２と、メモリ３３と、処理回路３４とを有する。
入力インタフェース３１は、ユーザからの各種の入力操作を受け付け、受け付けた入力操作を電気信号に変換して処理回路３４に出力する。例えば、入力インタフェース３１は、マウスやキーボード、トラックボール、スイッチ、ボタン、ジョイスティック、操作面へ触れることで入力操作を行うタッチパッド、表示画面とタッチパッドとが一体化されたタッチスクリーン、光学センサを用いた非接触入力回路、音声入力回路等により実現される。なお、入力インタフェース３１は、医用情報処理装置３０本体と無線通信可能なタブレット端末等で構成されることにしても構わない。また、入力インタフェース３１は、モーションキャプチャによりユーザからの入力操作を受け付ける回路であっても構わない。一例を挙げると、入力インタフェース３１は、トラッカーを介して取得した信号やユーザについて収集された画像を処理することにより、ユーザの体動や視線等を入力操作として受け付けることができる。また、入力インタフェース３１は、マウスやキーボード等の物理的な操作部品を備えるものだけに限られない。例えば、医用情報処理装置３０とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を処理回路３４へ出力する電気信号の処理回路も入力インタフェース３１の例に含まれる。
ディスプレイ３２は、各種の情報を表示する。例えば、ディスプレイ３２は、処理回路３４による制御の下、被検体Ｐに対する治療手技中に収集されたＸ線画像の表示を行なう。なお、ディスプレイ３２における医用画像の表示については後述する。また、例えば、ディスプレイ３２は、入力インタフェース３１を介してユーザから各種の指示や設定等を受け付けるためのＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を表示する。例えば、ディスプレイ３２は、液晶ディスプレイやＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイである。ディスプレイ３２は、デスクトップ型でもよいし、医用情報処理装置３０本体と無線通信可能なタブレット端末等で構成されることにしても構わない。
なお、図１においては医用情報処理装置３０がディスプレイ３２を備えるものとして説明するが、医用情報処理装置３０は、ディスプレイ３２に代えて又は加えて、プロジェクタを備えてもよい。プロジェクタは、処理回路３４による制御の下、スクリーンや壁、床、被検体Ｐの体表面等に対して投影を行なうことができる。一例を挙げると、プロジェクタは、プロジェクションマッピングによって、任意の平面や物体、空間等への投影を行うこともできる。また、医用情報処理装置３０は、表示対象の画像を、ディスプレイ３２に代えて、又は、ディスプレイ３２に加えて、Ｘ線診断装置１０のディスプレイ１０８に表示させてもよい。
メモリ３３は、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等により実現される。例えば、メモリ３３は、医用情報処理装置３０に含まれる回路がその機能を実現するためのプログラムを記憶する。また、メモリ３３は、Ｘ線診断装置１０又は画像保管装置２０から取得したＸ線画像を記憶する。なお、メモリ３３は、医用情報処理装置３０とネットワークＮＷを介して接続されたサーバ群（クラウド）により実現されることとしてもよい。
処理回路３４は、制御機能３４ａ、画像取得機能３４ｂ、イベント取得機能３４ｃ、管理機能３４ｄ及び出力機能３４ｅを実行することで、医用情報処理装置３０全体の動作を制御する。ここで、画像取得機能３４ｂは、画像取得部の一例である。また、イベント取得機能３４ｃは、イベント取得部の一例である。また、管理機能３４ｄは、管理部の一例である。また、出力機能３４ｅは、出力部の一例である。
例えば、処理回路３４は、制御機能３４ａに対応するプログラムをメモリ３３から読み出して実行することにより、入力インタフェース３１を介してユーザから受け付けた各種の入力操作に基づいて、画像取得機能３４ｂ、イベント取得機能３４ｃ、管理機能３４ｄ及び出力機能３４ｅといった各種の機能を制御する。
また、例えば、処理回路３４は、画像取得機能３４ｂに対応するプログラムをメモリ３３から読み出して実行することにより、被検体Ｐに対する治療手技中においてＸ線画像を順次取得する。また、例えば、処理回路３４は、イベント取得機能３４ｃに対応するプログラムをメモリ３３から読み出して実行することにより、Ｘ線画像に基づいて、治療手技におけるイベントを治療手技中に順次取得する。また、例えば、処理回路３４は、管理機能３４ｄに対応するプログラムをメモリ３３から読み出して実行することにより、Ｘ線画像及びイベントを治療手技における時間情報と関連付けて管理する。また、例えば、処理回路３４は、出力機能３４ｅに対応するプログラムをメモリ３３から読み出して実行することにより、Ｘ線画像をイベントとの関係を識別可能なように出力する。なお、画像取得機能３４ｂ、イベント取得機能３４ｃ、管理機能３４ｄ及び出力機能３４ｅによる処理については後述する。
図１に示す医用情報処理装置３０においては、各処理機能がコンピュータによって実行可能なプログラムの形態でメモリ３３へ記憶されている。処理回路３４は、メモリ３３からプログラムを読み出して実行することで各プログラムに対応する機能を実現するプロセッサである。換言すると、プログラムを読み出した状態の処理回路３４は、読み出したプログラムに対応する機能を有することとなる。
なお、図１においては単一の処理回路３４にて、制御機能３４ａ、画像取得機能３４ｂ、イベント取得機能３４ｃ、管理機能３４ｄ及び出力機能３４ｅが実現するものとして説明したが、複数の独立したプロセッサを組み合わせて処理回路３４を構成し、各プロセッサがプログラムを実行することにより機能を実現するものとしても構わない。また、処理回路３４が有する各処理機能は、単一又は複数の処理回路に適宜に分散又は統合されて実現されてもよい。
また、処理回路３４は、ネットワークＮＷを介して接続された外部装置のプロセッサを利用して、機能を実現することとしてもよい。例えば、処理回路３４は、メモリ３３から各機能に対応するプログラムを読み出して実行するとともに、医用情報処理装置３０とネットワークＮＷを介して接続されたサーバ群（クラウド）を計算資源として利用することにより、図１に示す各機能を実現する。
次に、図２を用いて、Ｘ線診断装置１０について説明する。図２は、第１の実施形態に係るＸ線診断装置１０の構成の一例を示すブロック図である。図２に示すように、Ｘ線診断装置１０は、Ｘ線高電圧装置１０１と、Ｘ線管１０２と、Ｘ線絞り器１０３と、天板１０４と、Ｃアーム１０５と、Ｘ線検出器１０６と、メモリ１０７と、ディスプレイ１０８と、入力インタフェース１０９と、処理回路１１０とを備える。
Ｘ線高電圧装置１０１は、処理回路１１０による制御の下、Ｘ線管１０２に高電圧を供給する。例えば、Ｘ線高電圧装置１０１は、変圧器（トランス）及び整流器等の電気回路を有し、Ｘ線管１０２に印加する高電圧を発生する高電圧発生装置と、Ｘ線管１０２が照射するＸ線に応じた出力電圧の制御を行うＸ線制御装置とを有する。なお、高電圧発生装置は、変圧器方式であってもよいし、インバータ方式であってもよい。
Ｘ線管１０２は、熱電子を発生する陰極（フィラメント）と、熱電子の衝突を受けてＸ線を発生する陽極（ターゲット）とを有する真空管である。Ｘ線管１０２は、Ｘ線高電圧装置１０１から供給される高電圧を用いて、陰極から陽極に向けて熱電子を照射することにより、Ｘ線を発生する。
Ｘ線絞り器１０３は、Ｘ線管１０２により発生されたＸ線の照射範囲を絞り込むコリメータと、Ｘ線管１０２から曝射されたＸ線を調節するフィルタとを有する。
Ｘ線絞り器１０３におけるコリメータは、例えば、スライド可能な４枚の絞り羽根を有する。コリメータは、絞り羽根をスライドさせることで、Ｘ線管１０２が発生したＸ線を絞り込んで被検体Ｐに照射させる。ここで、絞り羽根は、鉛などで構成された板状部材であり、Ｘ線の照射範囲を調整するためにＸ線管１０２のＸ線照射口付近に設けられる。
Ｘ線絞り器１０３におけるフィルタは、被検体Ｐに対する被曝線量の低減とＸ線画像データの画質向上を目的として、その材質や厚みによって透過するＸ線の線質を変化させ、被検体Ｐに吸収されやすい軟線成分を低減したり、Ｘ線画像データのコントラスト低下を招く高エネルギー成分を低減したりする。また、フィルタは、その材質や厚み、位置などによってＸ線の線量及び照射範囲を変化させ、Ｘ線管１０２から被検体Ｐへ照射されるＸ線が予め定められた分布になるようにＸ線を減衰させる。
例えば、Ｘ線絞り器１０３は、モータ及びアクチュエータ等の駆動機構を有し、後述する処理回路１１０による制御の下、駆動機構を動作させることによりＸ線の照射を制御する。例えば、Ｘ線絞り器１０３は、処理回路１１０から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、コリメータの絞り羽根の開度を調整して、被検体Ｐに対して照射されるＸ線の照射範囲を制御する。また、例えば、Ｘ線絞り器１０３は、処理回路１１０から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、フィルタの位置を調整することで、被検体Ｐに対して照射されるＸ線の線量の分布を制御する。
天板１０４は、被検体Ｐを載せるベッドであり、図示しない寝台の上に配置される。なお、被検体Ｐは、Ｘ線診断装置１０に含まれない。例えば、寝台は、モータ及びアクチュエータ等の駆動機構を有し、後述する処理回路１１０による制御の下、駆動機構を動作させることにより、天板１０４の移動・傾斜を制御する。例えば、寝台は、処理回路１１０から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、天板１０４を移動させたり、傾斜させたりする。
Ｃアーム１０５は、Ｘ線管１０２及びＸ線絞り器１０３と、Ｘ線検出器１０６とを、被検体Ｐを挟んで対向するように保持する。例えば、Ｃアーム１０５は、モータ及びアクチュエータ等の駆動機構を有し、後述する処理回路１１０による制御の下、駆動機構を動作させることにより、回転したり移動したりする。例えば、Ｃアーム１０５は、処理回路１１０から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、Ｘ線管１０２及びＸ線絞り器１０３と、Ｘ線検出器１０６とを被検体Ｐに対して回転・移動させ、Ｘ線の照射位置や照射角度を制御する。なお、図２では、Ｘ線診断装置１０がシングルプレーンの場合を例に挙げて説明しているが、実施形態はこれに限定されるものではなく、バイプレーンの場合であってもよい。
Ｘ線検出器１０６は、例えば、マトリクス状に配列された検出素子を有するＸ線平面検出器（Ｆｌａｔ Ｐａｎｅｌ Ｄｅｔｅｃｔｏｒ：ＦＰＤ）である。Ｘ線検出器１０６は、Ｘ線管１０２から照射されて被検体Ｐを透過したＸ線を検出して、検出したＸ線量に対応した検出信号を処理回路１１０へと出力する。なお、Ｘ線検出器１０６は、グリッド、シンチレータアレイ及び光センサアレイを有する間接変換型の検出器であってもよいし、入射したＸ線を電気信号に変換する半導体素子を有する直接変換型の検出器であっても構わない。
メモリ１０７は、例えば、ＲＡＭ、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等により実現される。例えば、メモリ１０７は、処理回路１１０によって読み出されて実行される各種機能に対応するプログラムを記憶する。なお、メモリ１０７は、クラウドにより実現されることとしてもよい。
ディスプレイ１０８は、各種の情報を表示する。例えば、ディスプレイ１０８は、処理回路１１０による制御の下、ユーザの指示を受け付けるためのＧＵＩや、各種のＸ線画像を表示する。例えば、ディスプレイ１０８は、液晶ディスプレイやＣＲＴディスプレイである。なお、ディスプレイ１０８はデスクトップ型でもよいし、処理回路１１０と無線通信可能なタブレット端末等で構成されることにしても構わない。
なお、図２においてはＸ線診断装置１０がディスプレイ１０８を備えるものとして説明するが、Ｘ線診断装置１０は、ディスプレイ１０８に代えて又は加えて、プロジェクタを備えてもよい。プロジェクタは、処理回路１１０による制御の下、スクリーンや壁、床、被検体Ｐの体表面等に対して投影を行なうことができる。一例を挙げると、プロジェクタは、プロジェクションマッピングによって、任意の平面や物体、空間等への投影を行うこともできる。
入力インタフェース１０９は、ユーザからの各種の入力操作を受け付け、受け付けた入力操作を電気信号に変換して処理回路１１０に出力する。例えば、入力インタフェース１０９は、マウスやキーボード、トラックボール、スイッチ、ボタン、ジョイスティック、操作面へ触れることで入力操作を行うタッチパッド、表示画面とタッチパッドとが一体化されたタッチスクリーン、光学センサを用いた非接触入力回路、音声入力回路等により実現される。なお、入力インタフェース１０９は、処理回路１１０と無線通信可能なタブレット端末等で構成されることにしても構わない。また、入力インタフェース１０９は、モーションキャプチャによりユーザからの入力操作を受け付ける回路であっても構わない。一例を挙げると、入力インタフェース１０９は、トラッカーを介して取得した信号やユーザについて収集された画像を処理することにより、ユーザの体動や視線等を入力操作として受け付けることができる。また、入力インタフェース１０９は、マウスやキーボード等の物理的な操作部品を備えるものだけに限られない。例えば、Ｘ線診断装置１０とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を処理回路１１０へ出力する電気信号の処理回路も入力インタフェース１０９の例に含まれる。
処理回路１１０は、制御機能１１０ａ、収集機能１１０ｂ及び出力機能１１０ｃを実行することで、Ｘ線診断装置１０全体の動作を制御する。
例えば、処理回路１１０は、制御機能１１０ａに対応するプログラムをメモリ１０７から読み出して実行することにより、入力インタフェース１０９を介してユーザから受け付けた各種の入力操作に基づいて、収集機能１１０ｂ、出力機能１１０ｃといった各種の機能を制御する。
例えば、処理回路１１０は、メモリ１０７から収集機能１１０ｂに相当するプログラムを読み出して実行することにより、被検体ＰからＸ線画像を収集する。例えば、収集機能１１０ｂは、被検体Ｐに対する治療手技中において、被検体Ｐを透過したＸ線に基づいてＸ線画像を順次収集する。
例えば、収集機能１１０ｂは、Ｘ線高電圧装置１０１を制御し、Ｘ線管１０２に供給する電圧を調整することで、被検体Ｐに対して照射されるＸ線量やオン／オフを制御する。また、収集機能１１０ｂは、Ｘ線絞り器１０３の動作を制御し、コリメータが有する絞り羽根の開度を調整することで、被検体Ｐに対して照射されるＸ線の照射範囲を制御する。また、収集機能１１０ｂは、Ｘ線絞り器１０３の動作を制御し、フィルタの位置を調整することで、Ｘ線の線量の分布を制御する。また、収集機能１１０ｂは、Ｃアーム１０５の動作を制御し、被検体Ｐに対するＣアーム１０５の位置及び角度を変化させることで、撮影位置及び撮影角度を制御する。なお、Ｃアーム１０５の位置及び角度については、アームポジション情報とも記載する。また、収集機能１１０ｂは、Ｘ線検出器１０６から受信した検出信号に基づいてＸ線画像を生成し、生成したＸ線画像をメモリ１０７に格納する。
また、処理回路１１０は、メモリ１０７から出力機能１１０ｃに相当するプログラムを読み出して実行することにより、ネットワークＮＷを介したデータの送受信や、ディスプレイ３２における表示を制御する。例えば、出力機能１１０ｃは、収集機能１１０ｂが収集したＸ線画像を、ネットワークＮＷを介して医用情報処理装置３０に送信したり、ディスプレイ３２に表示させたりする。また、例えば、出力機能１１０ｃは、ユーザからの入力操作を受け付けるためのＧＵＩをディスプレイ３２に表示させる。
図２に示すＸ線診断装置１０においては、各処理機能がコンピュータによって実行可能なプログラムの形態でメモリ１０７へ記憶されている。処理回路１１０は、メモリ１０７からプログラムを読み出して実行することで各プログラムに対応する機能を実現するプロセッサである。換言すると、プログラムを読み出した状態の処理回路１１０は、読み出したプログラムに対応する機能を有することとなる。
なお、図２においては単一の処理回路１１０にて、制御機能１１０ａ、収集機能１１０ｂ及び出力機能１１０ｃが実現するものとして説明したが、複数の独立したプロセッサを組み合わせて処理回路１１０を構成し、各プロセッサがプログラムを実行することにより機能を実現するものとしても構わない。また、処理回路１１０が有する各処理機能は、単一又は複数の処理回路に適宜に分散又は統合されて実現されてもよい。
また、処理回路１１０は、ネットワークＮＷを介して接続された外部装置のプロセッサを利用して、機能を実現することとしてもよい。例えば、処理回路１１０は、メモリ１０７から各機能に対応するプログラムを読み出して実行するとともに、Ｘ線診断装置１０とネットワークＮＷを介して接続されたサーバ群（クラウド）を計算資源として利用することにより、図２に示す各機能を実現する。
以上、Ｘ線診断装置１０、画像保管装置２０及び医用情報処理装置３０を含んだ医用情報処理システム１について説明した。以下、医用情報処理システム１において行なわれる処理について説明する。
例えば、被検体Ｐに対する治療手技において、Ｘ線診断装置１０は、被検体ＰからＸ線画像を順次収集する。また、医用情報処理装置３０は、Ｘ線画像をＸ線診断装置１０から順次取得し、取得したＸ線画像をディスプレイ３２に順次リアルタイムに表示させる。これにより、ユーザは、被検体Ｐの体内構造や、被検体Ｐの体内に挿入された医療デバイス等を確認しつつ、円滑に治療手技を進行させることができる。即ち、医用情報処理システム１は、Ｘ線画像の収集及び表示を行なうことで、治療手技を実行するユーザ（担当医）をサポートすることができる。
ここで、治療手技は、担当医を含んだ複数人のチームで実行される場合が多いところ、担当医以外のメンバーが、リアルタイムのＸ線画像を参照して治療手技における現在の局面を把握しようとする場合がある。また、治療手技の実行中において、担当医又は他のメンバーが当該治療手技における収集済みのＸ線画像を参照する場合がある。
しかしながら、例えば、リアルタイムのＸ線画像には治療手技における現在の局面に特有の特徴が描出されているとは限らず、また、現在の状況に至る過程をリアルタイムのＸ線画像のみから判断することは困難な場合もある。したがって、治療手技においてリアルタイムのＸ線画像を参照しても、チーム内のメンバーが治療手技の現在の局面を把握することができず、チーム内の意思疎通が難しくなる場合があった。また、例えば、治療手技の実行中に、チーム内のメンバーが、当該治療手技における収集済みのＸ線画像をディスプレイ１０８に参照画像として表示しようとした際、必要な画像を探すのに手間がかかってしまう場合があった。
そこで、医用情報処理装置３０は、処理回路３４による処理によって、Ｘ線画像等の医用画像をより有効に活用することを可能とする。以下、処理回路３４が行なう処理について詳細に説明する。
まず、被検体Ｐに対する治療手技中において、画像取得機能３４ｂは、Ｘ線画像を順次取得する。なお、画像取得機能３４ｂは、画像保管装置２０を介してＸ線画像を取得してもよいし、Ｘ線診断装置１０から直接的にＸ線画像を取得してもよい。また、イベント取得機能３４ｃは、治療手技におけるイベントを治療手技中に順次取得する。
ここで、イベント取得機能３４ｃによるイベント取得処理の例について、図３Ａ、図３Ｂ及び図３Ｃを用いて説明する。図３Ａ、図３Ｂ及び図３Ｃは、第１の実施形態に係るイベント取得処理の一例を示す図である。
まず、図３Ａについて説明する。図３Ａに示す場合、イベント取得機能３４ｃは、治療手技の開始に先立って、患者情報の入力を受け付け（ステップＳ１０１）、また、手技の選択を受け付ける（ステップＳ１０２）。例えば、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、ステップＳ１０１及びステップＳ１０２を実行することができる。なお、ステップＳ１０１及びステップＳ１０２については適宜省略することとして構わない。
また、イベント取得機能３４ｃは、イベントフローの選択を受け付ける（ステップＳ１０３）。図３Ａにおいては一例として、イベントＥ１、イベントＥ２及びイベントＥ３を含んだイベントフローが選択された場合について説明する。例えば、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、ステップＳ１０３を実行することができる。一例を挙げると、メモリ３３は、複数種類のイベントフローを含んだデータベースを予め記憶しておき、イベント取得機能３４ｃは、かかるデータベースの中からいずれかのイベントフローを選択する操作を、ユーザから受け付けることができる。或いは、イベント取得機能３４ｃは、ステップＳ１０１にて受け付けた患者情報や、ステップＳ１０２にて選択された手技に基づいて、イベントフローを自動で選択することとしても構わない。
ステップＳ１０３の後、イベント取得機能３４ｃは、治療手技が最初のイベントＥ１の局面にあると判断する（ステップＳ１０４）。また、治療手技の開始後、画像取得機能３４ｂは、Ｘ線診断装置１０において収集されたＸ線画像を取得する（ステップＳ１０５）。ここで、イベント取得機能３４ｃは、ステップＳ１０５にて取得したＸ線画像について、イベントＥ１を取得することができる。
また、管理機能３４ｄは、ステップＳ１０５にて取得したＸ線画像及びイベントＥ１を、治療手技における時間情報と関連付けて管理する。例えば、管理機能３４ｄは、ステップＳ１０５にて取得したＸ線画像に対して、イベントＥ１及び時間情報を付帯情報として付加し、メモリ３３に記憶させる。一例を挙げると、管理機能３４ｄは、Ｘ線画像のＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ ｉｎ Ｍｅｄｉｃｉｎｅ）タグに、イベントＥ１及び時間情報を記憶させる。なお、時間情報は、Ｘ線診断装置１０においてＸ線画像の収集が行われた日時の情報であってもよいし、医用情報処理装置３０がＸ線診断装置１０からＸ線画像を取得した日時の情報であってもよい。また、管理機能３４ｄは、ステップＳ１０１にて受け付けた患者情報や、ステップＳ１０２にて選択された手技などを、Ｘ線画像における付帯情報として更に記憶させてもよい。
次に、イベント取得機能３４ｃは、イベントＥ１が終了したか否かを判定し（ステップＳ１０６）、終了していない場合には（ステップＳ１０６否定）、再度ステップＳ１０５に移行する。例えば、イベント取得機能３４ｃは、収集されたＸ線画像に基づいて、イベントＥ１が終了したか否かを自動で判定する。例えば、イベントＥ１が「被検体Ｐの大腿部から医療デバイスを挿入して治療対象部位の心臓まで到達させる」とうイベントであった場合、イベント取得機能３４ｃは、Ｘ線画像に現れた医療デバイスと被検体Ｐの心臓との位置関係に基づいて、イベントＥ１が終了したか否かを自動で判定することができる。そして、イベントＥ１が終了していない場合、イベント取得機能３４ｃは、再度ステップＳ１０５に移行し、新たに取得したＸ線画像についてイベントＥ１を取得する。即ち、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントを取得することができる。したがって、当該Ｘ線画像自体にイベントＥ１に特有の特徴が描出されていない場合であっても、当該Ｘ線画像にイベントＥ１の情報を付与することができる。
或いは、イベント取得機能３４ｃは、周辺機器の位置情報とデータベースとの比較により、イベントＥ１が終了したか否かを自動で判定することとしてもよい。例えば、医療デバイスの先端位置に追従するようにＣアーム１０５が移動される場合、イベント取得機能３４ｃは、Ｃアーム１０５の位置情報に基づいて、イベントＥ１が終了したか否かを自動で判定することができる。或いは、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、イベントＥ１が終了したか否かを判定することとしてもよい。
一方で、イベントＥ１が終了した場合（ステップＳ１０６肯定）、イベント取得機能３４ｃは、治療手技がイベントＥ２の局面に移行したと判断する（ステップＳ１０７）。また、画像取得機能３４ｂは、Ｘ線診断装置１０において収集されたＸ線画像を取得する（ステップＳ１０８）。ここで、イベント取得機能３４ｃは、ステップＳ１０８にて取得したＸ線画像について、イベントＥ２を取得することができる。例えば、イベント取得機能３４ｃは、ステップＳ１０５で取得したＸ線画像に基づいてイベントＥ１が終了したか否かを判定し、終了した場合には治療手技がイベントＥ２の局面に移行したと判断して、ステップＳ１０８で新たに取得したＸ線画像についてイベントＥ２を取得する。また、管理機能３４ｄは、ステップＳ１０８にて取得したＸ線画像及びイベントＥ２を、治療手技における時間情報と関連付けて管理する。なお、ステップＳ１０６のイベントＥ１の終了判定は、イベントＥ１の終了に特有の特徴を検出することで行われてもよいし、イベントＥ２に特有の特徴を検出することによりイベントＥ２の開始判定を以て行われてもよい。この判定の手法は、ステップＳ１０９等においても同様に適用されてもよい。
次に、イベント取得機能３４ｃは、イベントＥ２が終了したか否かを判定し（ステップＳ１０９）、終了していない場合には（ステップＳ１０９否定）、再度ステップＳ１０８に移行する。例えば、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントＥ２が終了したか否かを判定し、終了していない場合には再度ステップＳ１０８に移行して、新たに取得したＸ線画像についてイベントＥ２を取得する。一方で、イベントＥ２が終了した場合（ステップＳ１０９肯定）、イベント取得機能３４ｃは、治療手技がイベントＥ３の局面に移行したと判断する（ステップＳ１１０）。また、画像取得機能３４ｂは、Ｘ線診断装置１０において収集されたＸ線画像を取得する（ステップＳ１１１）。ここで、イベント取得機能３４ｃは、ステップＳ１１１にて取得したＸ線画像について、イベントＥ３を取得することができる。例えば、イベント取得機能３４ｃは、ステップＳ１０８で取得したＸ線画像に基づいてイベントＥ２が終了したか否かを判定し、終了した場合には治療手技がイベントＥ３の局面に移行したと判断して、ステップＳ１１１で新たに取得したＸ線画像についてイベントＥ３を取得する。また、管理機能３４ｄは、ステップＳ１１１にて取得したＸ線画像及びイベントＥ３を、治療手技における時間情報と関連付けて管理する。
次に、イベント取得機能３４ｃは、イベントＥ３が終了したか否かを判定し（ステップＳ１１２）、終了していない場合には（ステップＳ１１２否定）、再度ステップＳ１１１に移行する。例えば、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントＥ３が終了したか否かを判定し、終了していない場合には再度ステップＳ１１１に移行して、新たに取得したＸ線画像についてイベントＥ３を取得する。一方で、イベントＥ３が終了した場合（ステップＳ１１２肯定）、イベント取得機能３４ｃは、処理を終了する。
即ち、図３Ａに示した処理によれば、画像取得機能３４ｂは、被検体Ｐに対する治療手技中においてＸ線画像を順次取得し、イベント取得機能３４ｃは、治療手技におけるイベントを治療手技中に順次取得する。例えば、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントフローに含まれる各イベントが終了したか否かを判定することで、新たに取得したＸ線画像についてのイベントを順次取得することができる。また、管理機能３４ｄは、Ｘ線画像及びイベントを治療手技における時間情報と関連付けて管理することができる。
次に、図３Ｂについて説明する。図３Ｂに示す場合、イベント取得機能３４ｃは、治療手技の開始に先立って、患者情報の入力を受け付け（ステップＳ２０１）、また、手技の選択を受け付ける（ステップＳ２０２）。例えば、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、ステップＳ２０１及びステップＳ２０２を実行することができる。なお、ステップＳ２０１及びステップＳ２０２については適宜省略することとして構わない。
また、イベント取得機能３４ｃは、イベント名の設定を行なう。例えば、ステップＳ２０２の後、イベント取得機能３４ｃは、治療手技における最初のイベント名の設定を行なう（ステップＳ２０３）。例えば、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、イベント名の設定を行なうことができる。一例を挙げると、イベント取得機能３４ｃは、音声入力により、イベント名の設定を行なうことができる。或いは、イベント取得機能３４ｃは、ステップＳ２０１にて受け付けた患者情報や、ステップＳ２０２にて選択された手技に基づいて、イベント名を自動で設定することとしても構わない。
次に、イベント取得機能３４ｃは、イベント名の修正を行なうか否かを判定する（ステップＳ２０４）。例えば、計画変更や、自動認識とユーザ認識との不一致があった場合、イベント取得機能３４ｃは、イベント名の修正を行なうと判定し（ステップＳ２０４肯定）、イベント名を修正することができる（ステップＳ２０５）。ここで、イベント取得機能３４ｃは、ユーザからの入力操作を受け付けることによりイベント名を修正してもよいし、イベント名を自動で再設定してもよい。
一方で、イベント名の修正を行わない場合（ステップＳ２０４否定）、画像取得機能３４ｂは、Ｘ線診断装置１０において収集されたＸ線画像を取得する（ステップＳ２０６）。ここで、イベント取得機能３４ｃは、ステップＳ２０６にて取得したＸ線画像について、ステップＳ２０３で設定し又はステップＳ２０５で修正したイベント名を取得することができる。また、管理機能３４ｄは、Ｘ線画像及びイベントを、治療手技における時間情報と関連付けて管理する。
次に、イベント取得機能３４ｃは、ステップＳ２０３で設定し又はステップＳ２０５で修正したイベント名のイベントが終了したか否かを判定し（ステップＳ２０７）、終了していない場合には（ステップＳ２０７否定）、再度ステップＳ２０６に移行する。例えば、イベント取得機能３４ｃは、収集されたＸ線画像に基づいて、イベントが終了したか否かを自動で判定する。そして、イベントが終了していない場合、イベント取得機能３４ｃは、再度ステップＳ２０６に移行し、新たに取得したＸ線画像について、ステップＳ２０３で設定し又はステップＳ２０５で修正したイベント名のイベントを取得する。即ち、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントを取得することができる。
或いは、イベント取得機能３４ｃは、ステップＳ２０７において、周辺機器の位置情報とデータベースとの比較により、イベントが終了したか否かを自動で判定することとしてもよい。また、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、イベントが終了したか否かを判定することとしてもよい。
一方で、イベントが終了した場合（ステップＳ２０７肯定）、イベント取得機能３４ｃは、次のイベントがあるか否かを判定する（ステップＳ２０８）。次のイベントがある場合（ステップＳ２０８肯定）、イベント取得機能３４ｃは、再度ステップＳ２０３に移行し、次のイベントについてイベント名を設定する。一方で、次のイベントがない場合（ステップＳ２０８否定）、イベント取得機能３４ｃは、処理を終了する。
即ち、図３Ｂに示した処理によれば、画像取得機能３４ｂは、被検体Ｐに対する治療手技中においてＸ線画像を順次取得し、イベント取得機能３４ｃは、治療手技におけるイベントを治療手技中に順次取得する。例えば、イベント取得機能３４ｃは、Ｘ線画像に基づいて、ステップＳ２０３で設定し又はステップＳ２０５で修正したイベント名のイベントが終了したか否かを判定することで、新たに取得したＸ線画像についてのイベントを順次取得することができる。また、管理機能３４ｄは、Ｘ線画像及びイベントを治療手技における時間情報と関連付けて管理することができる。
次に、図３Ｃについて説明する。図３Ｃに示す場合、イベント取得機能３４ｃは、治療手技の開始に先立って、患者情報の入力を受け付け（ステップＳ３０１）、また、手技の選択を受け付ける（ステップＳ３０２）。例えば、イベント取得機能３４ｃは、入力インタフェース３１を介してユーザからの入力操作を受け付けることにより、ステップＳ３０１及びステップＳ３０２を実行することができる。なお、ステップＳ３０１及びステップＳ３０２については適宜省略することとして構わない。
次に、画像取得機能３４ｂは、Ｘ線診断装置１０において収集されたＸ線画像を取得する（ステップＳ３０３）。次に、イベント取得機能３４ｃは、ステップＳ３０３にて取得したＸ線画像を用いた処理により、イベント名を設定する（ステップＳ３０４）。例えば、イベント取得機能３４ｃは、ステップＳ３０３にて取得したＸ線画像から医療デバイスを検出し、検出した医療デバイスの種類及び被検体Ｐの体内における位置を特定する。例えば、医療デバイスとして、血管狭窄部の拡張に使用されるバルーンが検出され、また、前後のフレームからそのバルーンがフレームごとに拡大していることを検出した場合、イベント取得機能３４ｃは、「バルーン拡張」というイベントを取得することができる。即ち、イベント取得機能３４ｃは、Ｘ線画像に基づいてイベントを取得することができる。また、管理機能３４ｄは、Ｘ線画像及びイベントを、治療手技における時間情報と関連付けて管理する。
次に、イベント取得機能３４ｃは、次のＸ線画像があるか否かを判定し（ステップＳ３０５）、次のＸ線画像がある場合には（ステップＳ３０５肯定）、再度ステップＳ３０３に移行する。一方で、次のＸ線画像がない場合（ステップＳ３０５否定）、イベント取得機能３４ｃは、処理を終了する。即ち、図３Ｃに示した処理によれば、画像取得機能３４ｂは、被検体Ｐに対する治療手技中においてＸ線画像を順次取得し、イベント取得機能３４ｃは、Ｘ線画像に基づいて治療手技におけるイベントを治療手技中に順次取得し、管理機能３４ｄは、Ｘ線画像及びイベントを治療手技における時間情報と関連付けて管理することができる。
なお、図３Ａ、図３Ｂ及び図３Ｃはあくまで一例であり、イベント取得機能３４ｃは、種々の手法によりイベントの取得を行なうことができる。例えば、イベント取得機能３４ｃは、Ｘ線診断装置１０と異なる医用画像診断装置（モダリティ）によって収集された画像に基づいて、イベントの取得を行なうこともできる。例えば、イベント取得機能３４ｃは、図３ＣのステップＳ３０４において、Ｘ線画像と並行して収集された超音波画像に基づいて、イベント名の設定を行こともできる。
イベント取得機能３４ｃは、例えば、図４に示すように、イベント種別を記憶したデータベースに基づいて、上述した各種のイベント取得方法を実行することができる。なお、かかるデータベースは、例えばメモリ３３において保管され、適宜読み出しを行なうことができる。例えば、イベント取得機能３４ｃは、保持装置や寝台の制御情報、入力端末からの入力情報、マイクやカメラからの入力情報、ＩＶＵＳ（血管内超音波検査）により収集された超音波画像といった各種の情報をデータベース上に登録されたイベント名と比較し、一致又は類似するイベント名を取得する。なお、図４の保持装置は、例えば、図２に示したＣアーム１０５である。また、図４の寝台は、例えば、図２に示した天板１０４の移動・傾斜を制御する装置である。また、図４の入力端末は、図１に示した入力インタフェース３１の一例であり、例えばマウスやキーボード等である。また、図４のマイク及びカメラは、図１に示した入力インタフェース３１の一例である。また、ＩＶＵＳによる超音波画像は、例えばメモリ３３において保管され、適宜読み出しを行なうことができる。即ち、予めデータベース上にイベント名を登録し、これを用いてイベントを取得することにより、イベント取得機能３４ｃは、同種のイベントについては同じイベント名を取得し、効率的にイベントを管理することができる。なお、図４は、第１の実施形態に係るイベント取得処理の一例を示す図である。
次に、出力機能３４ｅは、Ｘ線画像をイベントとの関係を識別可能なように出力する。例えば、出力機能３４ｅは、Ｘ線画像及びイベントに関連付けられた時間情報に基づいて、イベントを時系列に配置したタイムラインをディスプレイ３２に表示させる。更に、出力機能３４ｅは、タイムラインに表示されるイベントとの時系列的な関係を識別可能なように、Ｘ線画像をディスプレイ３２に表示させる。
一例を挙げると、出力機能３４ｅは、図５に示すように、領域Ｒ１１、領域Ｒ１２及び領域Ｒ１３を含んだ表示画面をディスプレイ３２に表示させる。例えば、出力機能３４ｅは、治療手技中において、図５の表示画面をディスプレイ３２に表示させる。なお、図５は、第１の実施形態に係る表示例を示す図である。
具体的には、出力機能３４ｅは、領域Ｒ１１において、イベントを時系列に配置したタイムラインを表示させる。図５においては一例として、イベントＥ１１（対象部位到達）、イベントＥ１２（Ｌ－ＩＣＭ バルーン造影）、イベントＥ１３（ステント留置）をタイムラインで示す場合を示す。更に、図５は、イベントＥ１２について、イベントＥ１２１（狭窄部位の確認（造影剤の注入））、イベントＥ１２２（バルーンの拡張）、イベントＥ１２３（狭窄部位の確認（造影剤の注入））といった詳細イベントから構成されることを示す。
更に、出力機能３４ｅは、領域Ｒ１１において、現在のイベントをラインＬ１で表示する。即ち、図５においては、イベントＥ１２１を含んだイベントＥ１２は現在イベントであり、イベントＥ１１は過去イベントであり、イベントＥ１３は次イベントである。更に、出力機能３４ｅは、領域Ｒ１２や領域Ｒ１３において、イベントＥ１２１に関連付いたＸ線画像を表示させることができる。例えば、出力機能３４ｅは、イベントＥ１２１が行われている間に収集されたＸ線画像Ｉ１１を、領域Ｒ１２においてサムネイル表示するとともに、領域Ｒ１３において拡大して表示させる。即ち、出力機能３４ｅは、タイムライン上にラインＬ１を表示させることで、タイムラインに表示されるイベントとの時系列的な関係を識別可能なようにＸ線画像Ｉ１１を表示させることができる。例えば、治療手技におけるチームのメンバーは、図５の表示を参照することで治療手技の現在の局面を把握することができ、容易に意思疎通を図ることが可能となる。
なお、出力機能３４ｅは、治療手技に含まれるイベントの全てを表示してもよいし、その一部のみを表示してもよい。例えば、出力機能３４ｅは、表示対象イベントのリストに基づいて表示するイベントを選択し、リストに含まれないイベントは非表示としてもよい。これにより、出力機能３４ｅは、表示するイベントの数を低減し、過度に多くの情報が表示されることによるユーザの混乱を回避することができる。
また、ラインＬ１が現在のイベントを表示するものとして説明したが、ラインＬ１は、タイムライン上で任意に移動可能としてもよい。例えば、治療手技中において、ユーザは、ラインＬ１を、過去イベントであるイベントＥ１１の位置に移動させることができる。この場合、出力機能３４ｅは、移動後のラインＬ１が位置するイベントＥ１１に関連付いたＸ線画像を、ディスプレイ３２に表示させる。これにより、治療手技の実行中に収集済みのＸ線画像を参照画像として表示する場合に、治療手技における局面の情報を用いて候補を絞り込むことができるため、必要な画像を探すための手間を軽減することができる。
ここで、出力機能３４ｅは、ラインＬ１が位置するイベントに関連付いたＸ線画像の他、そのＸ線画像に関連する関連画像を更に表示させることとしてもよい。例えば、図５に示すようにラインＬ１がイベントＥ１２１に位置している場合において、出力機能３４ｅは、イベントＥ１２１に関連付いたＸ線画像Ｉ１１の他、画像Ｉ１２、画像Ｉ１３、画像Ｉ１４等の関連画像を領域Ｒ１２に表示させることができる。また、ユーザによってこれら関連画像のうちいずれかが選択された場合、出力機能３４ｅは、領域Ｒ１３において関連画像を拡大して表示させることとしてもよい。
なお、Ｘ線画像Ｉ１１に関連する関連画像とは、例えば、Ｘ線画像Ｉ１１と同一又は類似の付帯情報を有する画像である。例えば、出力機能３４ｅは、メモリ３３や画像保管装置２０に記憶されている医用画像の中から、患者情報やイベントといった付帯情報がＸ線画像Ｉ１１に類似する医用画像を検索し、関連画像としてディスプレイ３２に表示させる。一例を挙げると、出力機能３４ｅは、過去イベントであるイベントＥ１１において被検体Ｐから収集されたＸ線画像を、Ｘ線画像Ｉ１１に関連する関連画像としてディスプレイ３２に表示させる。
また、例えば、Ｘ線画像Ｉ１１に関連する関連画像とは、Ｘ線画像Ｉ１１と画像の特徴が類似する画像である。一例を挙げると、出力機能３４ｅは、メモリ３３や画像保管装置２０に記憶されている医用画像の中から、Ｘ線画像Ｉ１１と同一又は類似の医療デバイスが現れている画像や、Ｘ線画像Ｉ１１と同じ臓器について収集された画像などを検索し、関連画像としてディスプレイ３２に表示させる。
また、例えば、Ｘ線画像Ｉ１１に関連する関連画像とは、Ｘ線画像Ｉ１１と同一又は類似のアームポジション情報を有するＸ線画像である。即ち、出力機能３４ｅは、メモリ３３や画像保管装置２０に記憶されている医用画像の中から、Ｘ線画像Ｉ１１と撮影位置や撮影角度が同一又は類似となるＸ線画像を検索し、関連画像としてディスプレイ３２に表示させる。これにより、例えば、治療手技中に表示を行なう場合において、出力機能３４ｅは、表示される関連画像をリアルタイムのアーム角度近傍に絞り込むことができる。
なお、アームポジション情報に基づいて関連画像を選択する場合、アームポジション情報が類似しないＸ線画像は関連画像から除外されることとなる。ここで、出力機能３４ｅは、アームポジション情報が類似しないことにより表示が省略されたＸ線画像があることをユーザに通知してもよい。例えば、出力機能３４ｅは、アームポジション情報が類似しないことにより表示が省略されたＸ線画像があることをタイムライン上にテキストで表示してもよい。
また、Ｘ線画像Ｉ１１に関連する関連画像は、Ｘ線画像Ｉ１１に基づいて生成された処理済み画像であってもよい。一例を挙げると、出力機能３４ｅは、メモリ３３や画像保管装置２０に記憶されている医用画像の中から、Ｘ線画像Ｉ１１に基づいて生成されたＰＩ（Ｐａｒａｍｅｔｒｉｃ Ｉｍａｇｉｎｇ）画像を検索し、Ｘ線画像Ｉ１１に関連する関連画像としてディスプレイ３２に表示させてもよい。なお、ＰＩ画像とは、血管を造影した複数フレーム分のＸ線画像から血流到達時刻等のパラメータを算出し、パラメータの値に応じた色を各画素に割り当てて生成されるカラー画像である。
ここで、出力機能３４ｅは、生成済みの処理済み画像を読み出してもよいし、処理済み画像を作成するために使用されたアプリケーションを読み出してもよい。例えば、出力機能３４ｅは、メモリ３３や画像保管装置２０に記憶されているＰＩ画像を読み出してもよいし、ＰＩ画像を作成するために使用されるアプリケーションを読み出してもよい。ここで、アプリケーションを読み出した場合、出力機能３４ｅは、例えば、Ｘ線画像Ｉ１１を含む複数のフレーム分のＸ線画像からＰＩ画像を生成し、関連画像としてディスプレイ３２に表示させることができる。
また、出力機能３４ｅは、関連画像を、Ｘ線画像Ｉ１１に応じて加工又は生成して表示させることとしてもよい。例えば、Ｘ線画像Ｉ１１に基づくＰＩ画像を読み出した場合、出力機能３４ｅは、Ｘ線画像Ｉ１１との比較がしやすいように、ＰＩ画像のＷＬ（Ｗｉｎｄｏｗ Ｌｅｖｅｌ）やＷＷ（Ｗｉｎｄｏｗ Ｗｉｄｔｈ）等の表示態様を加工した後、関連画像として表示させることができる。また、例えば、ＰＩ画像を作成するために使用されるアプリケーションを読み出した場合、出力機能３４ｅは、Ｘ線画像Ｉ１１との比較がしやすいようにＷＬやＷＷを設定してＰＩ画像を生成し、関連画像として表示させることができる。
なお、Ｘ線画像Ｉ１１に基づいて生成された処理済み画像の例としてＰＩ画像について説明したが、実施形態はこれに限定されるものではない。例えば、出力機能３４ｅは、Ｘ線画像Ｉ１１から血管壁のみを抽出した血管壁画像や、Ｘ線画像Ｉ１１上にガイド線などをマーキングしたスケッチ画像を、Ｘ線画像Ｉ１１に関連する関連画像としてディスプレイ３２に表示させることもできる。また、例えば、出力機能３４ｅは、Ｘ線画像Ｉ１１より前に収集されたＸ線画像に基づいて生成された血管壁画像やスケッチ画像とＸ線画像Ｉ１１との重畳画像を、Ｘ線画像Ｉ１１に関連する関連画像としてディスプレイ３２に表示させることもできる。
ここで、出力機能３４ｅは、処理済み画像を元画像の近傍に表示させることとしてもよい。例えば、出力機能３４ｅは、Ｘ線画像Ｉ１１に基づいて生成された処理済み画像を、タイムライン上のＸ線画像Ｉ１１に隣接した位置に表示させることができる。或いは、出力機能３４ｅは、タイムライン上、処理済み画像の作成日時に対応した位置に、処理済み画像を表示させることとしても構わない。
また、Ｘ線画像Ｉ１１に関連する関連画像は、Ｘ線画像に限られるものではなく、Ｘ線診断装置１０と異なる装置を用いて収集された画像であってもよい。例えば、出力機能３４ｅは、イベントＥ１２１が行われている間に収集された超音波画像を、Ｘ線画像Ｉ１１に関連する関連画像としてディスプレイ３２に表示させることとしてもよい。また、例えば、出力機能３４ｅは、被検体Ｐから過去に収集された超音波画像を、関連画像としてディスプレイ３２に表示させることとしてもよい。一例を挙げると、出力機能３４ｅは、被検体Ｐから収集されたＩＶＵＳ画像やＴＥＥ（Ｔｒａｎｓｅｓｏｐｈａｇｅａｌ Ｅｃｈｏｃａｒｄｉｏｇｒａｐｈｙ）画像を、関連画像としてディスプレイ３２に表示させることとしてもよい。その他、出力機能３４ｅは、Ｘ線ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）画像や、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像、ＳＰＥＣＴ（Ｓｉｎｇｌｅ Ｐｈｏｔｏｎ Ｅｍｉｓｓｉｏｎ Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）画像、ＰＥＴ（Ｐｏｓｉｔｒｏｎ Ｅｍｉｓｓｉｏｎ ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）画像、ＯＣＴ（Ｏｐｔｉｃａｌ Ｃｏｈｅｒｅｎｃｅ Ｔｏｍｏｇｒａｐｈｙ）画像といった各種の医用画像を、関連画像としてディスプレイ３２に表示させることとしてもよい。
また、Ｘ線画像Ｉ１１に関連する関連画像は、３次元医用画像から生成した２次元医用画像であってもよい。例えば、出力機能３４ｅは、術前ＣＴやＣＢＣＴ（Ｃｏｎｅ－Ｂｅａｍ Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）画像といった３次元医用画像に対するレンダリング処理を行なって２次元医用画像を生成し、関連画像としてディスプレイ３２に表示させることとしてもよい。ここで、出力機能３４ｅは、Ｘ線画像Ｉ１１に付加されたアームポジション情報に基づいて、２次元医用画像を生成することとしてもよい。即ち、出力機能３４ｅは、Ｘ線画像Ｉ１１に関連する関連画像として、撮影位置や撮影角度をＸ線画像Ｉ１１に近似させた２次元医用画像を生成して、ディスプレイ３２に表示させることとしてもよい。これにより、出力機能３４ｅは、例えば、治療手技中に表示を行なう場合において、表示される関連画像をリアルタイムのアーム角度近傍に絞り込むことができる。
なお、上述したように関連画像には複数の種類があるところ、出力機能３４ｅは、ユーザからの指示に基づいて表示させる関連画像を絞り込んでもよい。例えば、出力機能３４ｅは、図５に示すように、アイコンＢ１１やアイコンＢ１２等を表示させ、これらのアイコンに対する操作に応じて、表示させる関連画像を絞り込んでもよい。一例を挙げると、アイコンＢ１１は「超音波画像」に対応する。ここで、ユーザがアイコンＢ１１に対する操作を行なった場合、出力機能３４ｅは、Ｘ線画像Ｉ１１に関連する関連画像として超音波画像の表示を行なうか否かを切り替えることができる。
例えば、出力機能３４ｅは、図６に示すように、データベースを使用して関連画像の検索を行なうことができる。例えば、イベント取得機能３４ｃは、入力端末から入力されたキーワードや、Ｘ線画像Ｉ１１等の収集画像に付加された付帯情報、収集画像の画像特徴などに基づいてデータベース内の検索を行ない、収集画像に関連する関連画像としてディスプレイ３２等のモニタに表示させることができる。なお、図６は、第１の実施形態に係る関連画像取得処理の一例を示す図である。
また、図５においては、イベントＥ１２に含まれる詳細イベント（イベントＥ１２１、イベントＥ１２２、イベントＥ１２３）についても表示させるものとして説明したが、出力機能３４ｅは、図７に示すように、これら詳細イベントの表示を省略することとしてもよい。即ち、出力機能３４ｅは、表示させるイベントの階層を制限することとしてもよい。これにより、出力機能３４ｅは、ユーザに対して提供する情報量を制御することができる。なお、図７は、第１の実施形態に係る表示例を示す図である。
以下、イベントの階層表示について説明する。まず、管理機能３４ｄは、例えば図８に示すように、イベント取得機能３４ｃが取得したイベントを階層化させて管理する。図８に示す場合、治療手技には「手技開始」、「患部造影」、「ステント手技」、「手技終了」の４つの大イベントが含まれる。なお、図８は、第１の実施形態に係るイベントの階層表示について説明するための図である。
ここで、「手技開始」のイベントには、画像Ｉ２１、画像Ｉ２２、画像Ｉ２３及び画像Ｉ２４が関連付けられている。また、「手技開始」には、より詳細なイベントとして、「ガイドワイヤー挿入」が含まれる。ここで、「ガイドワイヤー挿入」のイベントには、「手技開始」のイベントに関連付けられた画像のうち、画像Ｉ２２及び画像Ｉ２４が関連付けられている。また、「ガイドワイヤー挿入」には、より詳細なイベントとして、「分岐確認」が含まれる。ここで、「分岐確認」のイベントには、「ガイドワイヤー挿入」のイベントに関連付けられた画像のうち、画像Ｉ２２が関連付けられている。このように、より上位の階層のイベント（大イベント）ほど多くの画像が関連付けられ、より下位の階層のイベント（詳細イベント）ほど、関連付けられる画像の数は絞り込まれることとなる。同様に、「患部造影」には、より詳細なイベントとして、「患部造影」が含まれる。また、「ステント手技」には、より詳細なイベントとして、「ステント留置」が含まれる。
また、「ステント留置」には、より詳細なイベントとして、「ステント位置あわせ」、「拡張実施」及び「拡張後確認」が含まれる。
出力機能３４ｅは、図８に示したように階層管理されたイベントに基づいて、表示の制御を行なう。例えば、出力機能３４ｅは、図９Ａ及び図９Ｂに示すように、ユーザから受け付けた入力操作に応じた階層のイベントを表示させる。なお、図９Ａ及び図９Ｂは、第１の実施形態に係る表示例を示す図である。
具体的には、出力機能３４ｅは、まず、図９Ａに示すように、「手技開始」、「患部造影」、「ステント手技」、「手技終了」の４つの大イベントの表示を行なう。ここで、例えばユーザが「ステント手技」を選択する操作を行なった場合、出力機能３４ｅは、「ステント手技」に含まれる詳細イベントである「ステント留置」を更に表示させる。これにより、出力機能３４ｅは、ユーザに対して過剰な情報を提供することを回避しつつも、詳細イベントをユーザの希望に応じて提供することができる。
別の例を挙げると、出力機能３４ｅは、図１０Ａ及び図１０Ｂに示すように、所定の階層のイベントを表示させる。なお、図１０Ａ及び図１０Ｂは、第１の実施形態に係る表示例を示す図である。
例えば、所定の階層として「４層」が設定されていた場合、出力機能３４ｅは、図１０Ａに示すように、１層目に含まれる「手技開始」、「患部造影」、「ステント手技」、「手技終了」といったイベント、２層目に含まれる「ガイドワイヤー挿入」、「患部造影」、「ステント留置」、「拡張後確認」といったイベント、３層目に含まれる「分岐確認」、「ステント位置あわせ」、「拡張実施」といったイベント、４層目に含まれる「造影確認」といったイベントのそれぞれを表示させる。一方で、所定の階層として「２層」が設定されていた場合、出力機能３４ｅは、図１０Ｂに示すように、１層目に含まれる「手技開始」、「患部造影」、「ステント手技」、「手技終了」といったイベント、２層目に含まれる「ガイドワイヤー挿入」、「患部造影」、「ステント留置」、「拡張後確認」といったイベントといったイベントのそれぞれを表示させる。即ち、所定の階層として「２層」が設定されていた場合、出力機能３４ｅは、３層目以降の表示を省略する。これにより、出力機能３４ｅは、イベントの過詳細化による混乱を回避することができる。なお、所定の階層は、プリセットされた値であってもよいし、イベントの総数に応じて出力機能３４ｅが自動設定した値であってもよいし、ユーザが任意に設定した値であってもよい。
上述したように、第１の実施形態によれば、画像取得機能３４ｂは、被検体Ｐに対する治療手技中において、医用画像を順次取得する。また、イベント取得機能３４ｃは、医用画像に基づいて、治療手技におけるイベントを治療手技中に順次取得する。また、管理機能３４ｄは、医用画像及びイベントを、治療手技における時間情報と関連付けて管理する。また、出力機能３４ｅは、医用画像をイベントとの関係を識別可能なように出力する。従って、第１の実施形態に係る医用情報処理装置３０は、医用画像をより有効に活用することを可能とすることができる。例えば、治療手技中において、チームのメンバーは現在の局面を把握し、容易に意思疎通を図ることが可能となる。また、例えば、治療手技の実行中に、当該治療手技における収集済みの医用画像を使用しようとした際、必要な画像を容易に探し出すことが可能となる。
また、上述したように、第１の実施形態によれば、出力機能３４ｅは、関連画像を更に表示させることができる。これにより、例えば治療手技の実行中に医用画像を使用しようとした際、必要な画像をより容易に探し出すことが可能となる。
また、上述したように、第１の実施形態によれば、管理機能３４ｄは、イベントを階層化させて管理する。また、出力機能３４ｅは、ユーザから受け付けた入力操作に応じた階層のイベントを表示させ、又は所定の階層のイベントを表示させる。これにより、医用情報処理装置３０は、過度に多くの情報が表示されることによるユーザの混乱を回避することができる。
なお、医用画像をイベントとの関係を識別可能なようにディスプレイ３２に表示させるものとして説明したが、実施形態はこれに限定されるものではない。例えば、出力機能３４ｅは、図５や図７に示した表示画面を作成し、Ｘ線診断装置１０に対して送信しても構わない。この場合には、Ｘ線診断装置１０が有するディスプレイ１０８において、図５や図７に示した表示を行なうことができる。
（第２の実施形態）
上述した第１の実施形態では、表示例として、図５や図７の表示画面について説明した。これに対して、第２の実施形態では、表示例として、図１１の表示画面について説明する。図１１は、第２の実施形態に係る表示例を示す図である。第２の実施形態に係る医用情報処理システム１は、図１及び図２に示した医用情報処理システム１と同様の構成を有し、出力機能３４ｅによる処理の一部が相違する。以下、第１の実施形態において説明した構成と同様の構成を有する点については、図１及び図２と同一の符号を付し、説明を省略する。
例えば、出力機能３４ｅは、図１１に示すように、領域Ｒ２１及び領域Ｒ２２を含んだ表示画面をディスプレイ３２に表示させる。具体的には、出力機能３４ｅは、領域Ｒ２１において、イベントを時系列に配置したタイムラインを表示させるとともに、治療手技中に取得された医用画像をタイムライン上に表示させる。即ち、出力機能３４ｅは、イベントを時系列に配置したタイムラインを表示させるとともに、タイムラインに表示されるイベントとの時系列的な関係を識別可能なように医用画像を表示させる。
具体的には、図１１に示す場合、治療手技には「対象部位到達」のイベントＥ２１及び「Ｌ－ＩＣＭバルーン造影」のイベントＥ２２が含まれる。また、イベントＥ２１においてはＸ線画像Ｉ２１、Ｘ線画像Ｉ２２及びＸ線画像Ｉ２３が順次収集され、イベントＥ２２においてはＸ線画像Ｉ２４及びＸ線画像Ｉ２５が順次収集されている。なお、図５及び図７の場合と同様に、出力機能３４ｅは、治療手技中に収集されたＸ線画像に加えて、超音波画像等の関連画像を更に表示させることとしても構わない。また、出力機能３４ｅは、アイコンＢ２１やアイコンＢ２２等を表示させ、これらのアイコンに対する操作に応じて、表示させる関連画像を絞り込んでもよい。
更に、出力機能３４ｅは、図１１に示すように、Ｘ線画像の収集時におけるアームポジション情報を表示させることができる。具体的には、出力機能３４ｅは、Ｘ線画像Ｉ２１が「ＬＡＯ４５°，ＣＡＵ３５°」で収集され、Ｘ線画像Ｉ２２が「ＬＡＯ６０°，ＣＡＵ３５°」で収集され、Ｘ線画像Ｉ２３が「ＬＡＯ６０°，ＣＡＵ３０°」で収集され、Ｘ線画像Ｉ２４が「ＬＡＯ４５°，ＣＡＵ３５°」で収集され、Ｘ線画像Ｉ２５が「ＬＡＯ６０°，ＣＡＵ３５°」で収集されたこと表示することができる。
これにより、例えば、画像再現を効率的に行なうことが可能となる。一例を挙げると、治療手技中において、ユーザは図１１の表示画面を参照し、現在の局面においてはＸ線画像Ｉ２１と同様の撮影角度の画像を使用することが好ましいと判断した場合には、「ＬＡＯ４５°，ＣＡＵ３５°」となるようにＣアーム１０５を回転移動させる。これにより、ユーザは、所望の角度のリアルタイム画像を用いて、より効率的に治療手技を進行させることができる。
なお、出力機能３４ｅは、図１１の領域Ｒ２１において、治療手技中に一番長く使用されたアームポジション情報を強調表示させてもよい。即ち、出力機能３４ｅは、メインのワーキングアングルを推定して表示することとしてもよい。このようなワーキングアングルは、その治療手技において有用な画像を得られる角度である場合が多く、画像再現を要するケースが比較的多い。従って、治療手技中に一番長く使用されたアームポジション情報を強調表示させることにより、画像再現をより効率的に行なうことが可能となる。
（第３の実施形態）
上述した第１～第２の実施形態では、表示例として、図５や図７、図１１の表示画面について説明した。これに対して、第３の実施形態では、表示例として、図１２の表示画面について説明する。図１２は、第３の実施形態に係る表示例を示す図である。第３の実施形態に係る医用情報処理システム１は、図１及び図２に示した医用情報処理システム１と同様の構成を有し、出力機能３４ｅによる処理の一部が相違する。以下、第１～第２の実施形態において説明した構成と同様の構成を有する点については、図１及び図２と同一の符号を付し、説明を省略する。
例えば、出力機能３４ｅは、図１２に示すように、領域Ｒ３１、領域Ｒ３２及び領域Ｒ３３を含んだ表示画面をディスプレイ３２に表示させる。具体的には、出力機能３４ｅは、領域Ｒ３１において、イベントを時系列に配置したタイムラインを表示させる。また、出力機能３４ｅは、領域Ｒ３２において、治療手技中に取得された医用画像を表示させる。ここで、医用画像としてＸ線画像を表示させる場合、出力機能３４ｅは、図１２に示すように、各Ｘ線画像の収集時におけるアームポジション情報を表示させることとしても構わない。
また、出力機能３４ｅは、領域Ｒ３３において、ユーザとの間で行われた入出力の情報を表示させる。例えば、ユーザは、音声入力やキーボード操作等によって「造影画像を呼び出して」との入力を行なう。これに対し、出力機能３４ｅは、治療手技中に収集されたＸ線画像のうち、被検体Ｐの血管が造影されたＸ線画像を検索して、領域Ｒ３３に表示させる。このように、出力機能３４ｅは、ユーザから受け付けた入力操作に応じて医用画像を表示させるとともに、医用画像を表示させるまでにユーザとの間で行われた入出力の情報を領域Ｒ３３に表示させる。
即ち、出力機能３４ｅは、ユーザから入力操作を受け付けて医用画像の表示を行なうＡＩ（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ）であり、かつ、ユーザとの間で行われたやり取りを領域Ｒ３３に表示させることができる。これにより、ユーザは、必要な画像をより容易に確認することができる。例えば、領域Ｒ３３には、医用画像とともにその医用画像を呼び出すために入力されたコマンドが表示されており、その医用画像がどのような意図で呼び出されたものであるのか一見して理解することが可能である。
（第４の実施形態）
上述した第１～第３の実施形態では、表示例として、図５や図７、図１１、図１２の表示画面について説明した。これに対して、第４の実施形態では、表示例として、図１３の表示画面について説明する。図１３は、第４の実施形態に係る表示例を示す図である。第４の実施形態に係る医用情報処理システム１は、図１及び図２に示した医用情報処理システム１と同様の構成を有し、出力機能３４ｅによる処理の一部が相違する。以下、第１～第２の実施形態において説明した構成と同様の構成を有する点については、図１及び図２と同一の符号を付し、説明を省略する。
例えば、出力機能３４ｅは、図１３に示すように、「造影」、「バルーン」、「ステント」といったイベントを時系列に配置したタイムラインを表示させるとともに、これらイベントとの時系列的な関係を識別可能なように、複数の医用画像Ｉ４１を表示させる。更に、出力機能３４ｅは、医用画像の付帯情報の表示を行なう。例えば、出力機能３４ｅは、医用画像のそれぞれについて、「角度」、「ＡｕｔｏＰｏｓ」、「Ｖｉｔａｌ」といった付帯情報を表示させる。なお、これらの付帯情報は、例えば、各医用画像のＤＩＣＯＭタグに記憶させておくことができる。例えば、ユーザは、これらの付帯情報を参照することで、確認したい画像をより容易に発見することが可能となる。
また、出力機能３４ｅは、検査室内画像を更に表示させることもできる。例えば、出力機能３４ｅは、図１３に示すように、複数の検査室内画像Ｉ４２を表示させることもできる。具体的には、治療手技中において、画像取得機能３４ｂは、治療手技中の検査室内を撮影した検査室内画像を順次取得する。かかる検査室内画像は、例えば、光学カメラを用いて撮影された動画像に含まれる複数のフレームである。また、管理機能３４ｄは、医用画像及びイベントに加えて、検査室内画像を時間情報と関連付けて管理する。
また、出力機能３４ｅは、図１３に示すように、「造影」、「バルーン」、「ステント」といったイベントを時系列に配置したタイムラインを表示させる。また、出力機能３４ｅは、タイムラインに表示されるイベントとの時系列的な関係を識別可能なように、複数の医用画像Ｉ４１を表示させる。更に、出力機能３４ｅは、タイムラインに関連付けて検査室内画像Ｉ４２を表示させる。即ち、出力機能３４ｅは、「造影」、「バルーン」、「ステント」の各イベント、複数の医用画像Ｉ４１、及び、複数の検査室内画像Ｉ４２を、横軸（時系列）が合うようにして表示させる。例えば、ユーザは、手技の実行中に検査室内画像を参照することにより、手技の全体像を把握し、医用画像を手技の効率化に役立たせることができる。
（第５の実施形態）
さて、これまで第１～第４の実施形態について説明したが、上述した実施形態以外にも、種々の異なる形態にて実施されてよいものである。
例えば、図５や図７、図１１、図１２、図１３等に示した例では、少なくとも、イベントを時系列に配置したタイムラインを表示させる場合について説明した。しかしながら、実施形態はこれに限定されるものではない。例えば、出力機能３４ｅは、タイムラインの表示は省略し、音声やキーボード等によってユーザから受け付けたイベントに関連付けられた医用画像を表示させることとしてもよい。
また、例えば、上述した実施形態では、医用情報処理装置３０の処理回路３４が、イベント取得機能３４ｃ、管理機能３４ｄ、出力機能３４ｅといった機能を実行する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えばＸ線診断装置１０の処理回路１１０が、イベント取得機能３４ｃ、管理機能３４ｄ、出力機能３４ｅに相当する機能を実行する場合であっても構わない。
例えば、処理回路１１０は、図示しないイベント取得機能１１０ｄ及び管理機能１１０ｅを更に実行する。例えば、被検体Ｐに対する治療手技中において、収集機能１１０ｂは、被検体Ｐを透過したＸ線に基づいてＸ線画像を順次収集する。また、イベント取得機能１１０ｄは、Ｘ線画像に基づいて、治療手技におけるイベントを、治療手技中に順次取得する。また、管理機能１１０ｅは、記Ｘ線画像及びイベントを治療手技における時間情報と関連付けて管理する。そして、出力機能１１０ｃは、Ｘ線画像をイベントとの関係を識別可能なように出力する。例えば、出力機能１１０ｃは、図５や図７、図１１、図１２、図１３等の表示画面をディスプレイ１０８に表示させることができる。
ここで、収集機能１１０ｂは、出力機能１１０ｃによって出力されたＸ線画像のうちユーザによって選択されたＸ線画像の収集条件に基づいて、Ｘ線画像の収集を再度実行することとしてもよい。例えば、出力機能１１０ｃが図１１の表示画面をディスプレイ１０８に表示させ、ユーザがＸ線画像Ｉ２１の選択を行なった場合、収集機能１１０ｂは、「ＬＡＯ４５°，ＣＡＵ３５°」の条件で、Ｘ線画像の収集を再度実行する。一例を挙げると、収集機能１１０ｂは、Ｘ線画像Ｉ２１が領域Ｒ２２に表示されている間に所定の動作ボタンが押下された場合、Ｘ線画像Ｉ２１が選択されたものとして「ＬＡＯ４５°，ＣＡＵ３５°」の条件でのＸ線画像の収集を実行する。これにより、画像再現をより効率的に行なうことが可能となる。
上記説明において用いた「プロセッサ」という文言は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＣＰＬＤ）、及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ：ＦＰＧＡ））等の回路を意味する。プロセッサが例えばＣＰＵである場合、プロセッサは記憶回路に保存されたプログラムを読み出し実行することで機能を実現する。一方、プロセッサが例えばＡＳＩＣである場合、記憶回路にプログラムを保存する代わりに、当該機能がプロセッサの回路内に論理回路として直接組み込まれる。なお、実施形態の各プロセッサは、プロセッサごとに単一の回路として構成される場合に限らず、複数の独立した回路を組み合わせて１つのプロセッサとして構成し、その機能を実現するようにしてもよい。さらに、各図における複数の構成要素を１つのプロセッサへ統合してその機能を実現するようにしてもよい。
上述した実施形態に係る各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。即ち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。更に、各装置にて行われる各処理機能は、その全部又は任意の一部が、ＣＰＵ及び当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現されうる。
また、上述した実施形態で説明した医用情報処理方法は、予め用意された医用情報処理プログラムをパーソナルコンピュータやワークステーション等のコンピュータで実行することによって実現することができる。この医用情報処理プログラムは、インターネット等のネットワークを介して配布することができる。また、この医用情報処理プログラムは、ハードディスク、フレキシブルディスク（ＦＤ）、ＣＤ－ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な非一過性の記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。
以上説明した少なくとも１つの実施形態によれば、医用画像をより有効に活用することができる。
いくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更、実施形態同士の組み合わせを行なうことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
以上の実施形態に関し、発明の一側面および選択的な特徴として以下の付記を開示する。
（付記１）
被検体に対する治療手技中において医用画像を順次取得する画像取得部と、
前記医用画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
前記医用画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
前記医用画像を前記イベントとの関係を識別可能なように出力する出力部と
を備える、医用情報処理装置。
（付記２）
前記出力部は、前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記医用画像を前記表示部に表示させてもよい。
（付記３）
前記出力部は、前記医用画像に関連する関連画像を更に表示させてもよい。
（付記４）
前記関連画像は、前記医用画像と同一又は類似の付帯情報を有する画像、又は、前記医用画像と画像の特徴が類似する画像であってもよい。
（付記５）
前記関連画像は、前記医用画像と異なる装置を用いて収集された画像であってもよい。
（付記６）
前記関連画像は、前記医用画像に基づいて生成された処理済み画像であってもよい。
（付記７）
前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像と同一又は類似のアームポジション情報を有するＸ線画像を、前記関連画像として表示させてもよい。
（付記８）
前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像のアームポジション情報に基づいて３次元医用画像から生成した２次元医用画像を前記関連画像として表示させてもよい。
（付記９）
前記出力部は、前記関連画像を、前記医用画像に応じて加工又は生成して表示させてもよい。
（付記１０）
前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像の収集時におけるアームポジション情報を表示させてもよい。
（付記１１）
前記出力部は、ユーザから受け付けた入力操作に応じて前記医用画像を表示させるとともに、当該医用画像を表示させるまでに前記ユーザとの間で行われた入出力の情報を表示させてもよい。
（付記１２）
前記画像取得部は、更に、前記治療手技中において、当該治療手技中の検査室内を撮影した検査室内画像を順次取得し、
前記管理部は、前記医用画像、前記イベント及び前記検査室内画像を前記時間情報と関連付けて管理し、
前記出力部は、前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記医用画像を表示させ、更に、前記タイムラインに関連付けて前記検査室内画像を表示させてもよい。
（付記１３）
前記出力部は、前記医用画像を、当該医用画像の付帯情報とともに表示させてもよい。
（付記１４）
前記イベント取得部は、イベント種別を記憶したデータベースに基づいて、前記治療手技におけるイベントを取得してもよい。
（付記１５）
前記管理部は、前記イベントを階層化させて管理し、
前記出力部は、ユーザから受け付けた入力操作に応じた階層の前記イベントを表示させてもよい。
（付記１６）
前記管理部は、前記イベントを階層化させて管理し、
前記出力部は、所定の階層の前記イベントを表示させてもよい。
（付記１７）
被検体に対する治療手技中において、前記被検体を透過したＸ線に基づいてＸ線画像を順次収集する収集部と、
前記Ｘ線画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
前記Ｘ線画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
前記Ｘ線画像を前記イベントとの関係を識別可能なように出力する出力部と
を備える、Ｘ線診断装置。
（付記１８）
前記収集部は、前記出力部によって出力されたＸ線画像のうちユーザによって選択されたＸ線画像の収集条件に基づいて、Ｘ線画像の収集を再度実行してもよい。
（付記１９）
上記の医用情報処理装置の各構成をコンピュータに実行させる医用情報処理プログラム。
１ 医用情報処理システム
１０ Ｘ線診断装置
１１０ 処理回路
１１０ａ 制御機能
１１０ｂ 収集機能
１１０ｃ 出力機能
１１０ｄ イベント取得機能
１１０ｅ 管理機能
２０ 画像保管装置
３０ 医用情報処理装置
３４ 処理回路
３４ａ 制御機能
３４ｂ 画像取得機能
３４ｃ イベント取得機能
３４ｄ 管理機能
３４ｅ 出力機能

Claims (25)

  1. 被検体に対する治療手技中においてＸ線画像又は超音波画像を順次取得する画像取得部と、
    前記Ｘ線画像又は前記超音波画像に基づいて、前記治療手技の局面を示すイベントを前記治療手技中に順次取得するイベント取得部と、
    前記Ｘ線画像又は前記超音波画像、及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記Ｘ線画像又は前記超音波画像を前記イベントとの関係を識別可能なように出力する出力部と
    を備える、医用情報処理装置。
  2. 前記出力部は、前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記Ｘ線画像又は前記超音波画像を表示部に表示させる、請求項１に記載の医用情報処理装置。
  3. 前記出力部は、前記Ｘ線画像又は前記超音波画像に関連する関連画像を更に表示させる、請求項２に記載の医用情報処理装置。
  4. 前記関連画像は、前記Ｘ線画像又は前記超音波画像と同一又は類似の付帯情報を有する画像、又は、前記Ｘ線画像又は前記超音波画像と画像の特徴が類似する画像である、請求項３に記載の医用情報処理装置。
  5. 前記関連画像は、前記Ｘ線画像又は前記超音波画像と異なる装置を用いて収集された画像である、請求項３又は４に記載の医用情報処理装置。
  6. 前記関連画像は、前記Ｘ線画像又は前記超音波画像に基づいて生成された処理済み画像である、請求項３に記載の医用情報処理装置。
  7. 前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像と同一又は類似のアームポジション情報を有するＸ線画像を、前記関連画像として表示させる、請求項３に記載の医用情報処理装置。
  8. 前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像のアームポジション情報に基づいて３次元医用画像から生成した２次元医用画像を前記関連画像として表示させる、請求項３に記載の医用情報処理装置。
  9. 前記出力部は、前記関連画像を、前記Ｘ線画像又は前記超音波画像に応じて加工又は生成して表示させる、請求項３に記載の医用情報処理装置。
  10. 前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像の収集時におけるアームポジション情報を表示させる、請求項２に記載の医用情報処理装置。
  11. 被検体に対する治療手技中においてＸ線画像又は超音波画像を順次取得する画像取得部と、
    前記Ｘ線画像又は前記超音波画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記Ｘ線画像又は前記超音波画像、及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記Ｘ線画像又は前記超音波画像を表示部に表示させ、前記Ｘ線画像又は前記超音波画像に関連する関連画像を更に表示させる出力部とを備え、
    前記関連画像は、前記Ｘ線画像又は前記超音波画像に基づいて生成された処理済み画像である、医用情報処理装置。
  12. 被検体に対する治療手技中において医用画像を順次取得する画像取得部と、
    前記医用画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記医用画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記医用画像を表示部に表示させ、前記医用画像に関連する関連画像を更に表示させる出力部とを備え、
    前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
    前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像と同一又は類似のアームポジション情報を有するＸ線画像を、前記関連画像として表示させる、医用情報処理装置。
  13. 被検体に対する治療手技中において医用画像を順次取得する画像取得部と、
    前記医用画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記医用画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記医用画像を表示部に表示させ、前記医用画像に関連する関連画像を更に表示させる出力部とを備え、
    前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
    前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像のアームポジション情報に基づいて３次元医用画像から生成した２次元医用画像を前記関連画像として表示させる、医用情報処理装置。
  14. 被検体に対する治療手技中においてＸ線画像又は超音波画像を順次取得する画像取得部と、
    前記Ｘ線画像又は前記超音波画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記Ｘ線画像又は前記超音波画像、及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記Ｘ線画像又は前記超音波画像を表示部に表示させ、前記Ｘ線画像又は前記超音波画像に関連する関連画像を更に表示させる出力部とを備え、
    前記出力部は、前記関連画像を、前記Ｘ線画像又は前記超音波画像に応じて加工又は生成して表示させる、医用情報処理装置。
  15. 被検体に対する治療手技中において医用画像を順次取得する画像取得部と、
    前記医用画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記医用画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記医用画像を表示部に表示させる出力部とを備え、
    前記医用画像は、Ｘ線診断装置を用いて収集されたＸ線画像であり、
    前記出力部は、前記Ｘ線画像を前記イベントとの関係を識別可能なように表示させるとともに、当該Ｘ線画像の収集時におけるアームポジション情報を表示させる、医用情報処理装置。
  16. 前記出力部は、ユーザから受け付けた入力操作に応じて前記Ｘ線画像又は前記超音波画像を表示させるとともに、当該Ｘ線画像又は前記超音波画像を表示させるまでに前記ユーザとの間で行われた入出力の情報を表示させる、請求項２に記載の医用情報処理装置。
  17. 前記画像取得部は、更に、前記治療手技中において、当該治療手技中の検査室内を撮影した検査室内画像を順次取得し、
    前記管理部は、前記Ｘ線画像又は前記超音波画像、前記イベント及び前記検査室内画像を前記時間情報と関連付けて管理し、
    前記出力部は、前記時間情報に基づいて前記イベントを時系列に配置したタイムラインを表示させるとともに、前記タイムラインに表示される前記イベントとの時系列的な関係を識別可能なように前記Ｘ線画像又は前記超音波画像を表示させ、更に、前記タイムラインに関連付けて前記検査室内画像を表示させる、請求項２に記載の医用情報処理装置。
  18. 前記出力部は、前記Ｘ線画像又は前記超音波画像を、当該Ｘ線画像又は前記超音波画像の付帯情報とともに表示させる、請求項１７に記載の医用情報処理装置。
  19. 前記イベント取得部は、イベント種別を記憶したデータベースに基づいて、前記治療手技におけるイベントを取得する、請求項１～１８のいずれか一項に記載の医用情報処理装置。
  20. 前記管理部は、前記イベントを階層化させて管理し、
    前記出力部は、ユーザから受け付けた入力操作に応じた階層の前記イベントを表示させる、請求項２に記載の医用情報処理装置。
  21. 前記管理部は、前記イベントを階層化させて管理し、
    前記出力部は、所定の階層の前記イベントを表示させる、請求項２に記載の医用情報処理装置。
  22. 被検体に対する治療手技中において、前記被検体を透過したＸ線に基づいてＸ線画像を順次収集する収集部と、
    前記Ｘ線画像に基づいて、前記治療手技の局面を示すイベントを前記治療手技中に順次取得するイベント取得部と、
    前記Ｘ線画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記Ｘ線画像を前記イベントとの関係を識別可能なように出力する出力部と
    を備える、Ｘ線診断装置。
  23. 前記収集部は、前記出力部によって出力されたＸ線画像のうちユーザによって選択されたＸ線画像の収集条件に基づいて、Ｘ線画像の収集を再度実行する、請求項２２に記載のＸ線診断装置。
  24. 被検体に対する治療手技中において、前記被検体を透過したＸ線に基づいてＸ線画像を順次収集する収集部と、
    前記Ｘ線画像に基づいて、前記治療手技におけるイベントを前記治療手技中に順次取得するイベント取得部と、
    前記Ｘ線画像及び前記イベントを前記治療手技における時間情報と関連付けて管理する管理部と、
    前記Ｘ線画像を前記イベントとの関係を識別可能なように出力する出力部とを備え、
    前記収集部は、前記出力部によって出力されたＸ線画像のうちユーザによって選択されたＸ線画像の収集条件に基づいて、Ｘ線画像の収集を再度実行する、Ｘ線診断装置。
  25. 被検体に対する治療手技中においてＸ線画像又は超音波画像を順次取得し、
    前記Ｘ線画像又は超音波画像に基づいて、前記治療手技の局面を示すイベントを前記治療手技中に順次取得し、
    前記Ｘ線画像又は前記超音波画像、及び前記イベントを前記治療手技における時間情報と関連付けて管理し、
    前記Ｘ線画像又は前記超音波画像を前記イベントとの関係を識別可能なように出力する
    各処理をコンピュータに実行させる、医用情報処理プログラム。
JP2020128499A 2020-07-29 2020-07-29 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム Active JP7568439B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2020128499A JP7568439B2 (ja) 2020-07-29 2020-07-29 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム
CN202110863215.6A CN114052756A (zh) 2020-07-29 2021-07-29 医用信息处理装置、x射线诊断装置及医用信息处理程序
US17/388,541 US11793477B2 (en) 2020-07-29 2021-07-29 Medical information processing apparatus, x-ray diagnostic apparatus, and medical information processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020128499A JP7568439B2 (ja) 2020-07-29 2020-07-29 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム

Publications (2)

Publication Number Publication Date
JP2022025590A JP2022025590A (ja) 2022-02-10
JP7568439B2 true JP7568439B2 (ja) 2024-10-16

Family

ID=80002485

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020128499A Active JP7568439B2 (ja) 2020-07-29 2020-07-29 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム

Country Status (3)

Country Link
US (1) US11793477B2 (ja)
JP (1) JP7568439B2 (ja)
CN (1) CN114052756A (ja)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004105533A (ja) 2002-09-19 2004-04-08 Olympus Corp 内視鏡外科システム
JP2004280455A (ja) 2003-03-14 2004-10-07 Toshiba Corp 医療情報システム
JP2005245761A (ja) 2004-03-04 2005-09-15 Toshiba Corp Ｘ線診断装置
US20080270080A1 (en) 2005-12-19 2008-10-30 Koninklijke Philips Electronics N. V. Hierarchical Real-Time Patient State Indices for Patient Monitoring
JP2012081180A (ja) 2010-10-14 2012-04-26 Toshiba Corp 医用画像診断装置及び医用画像処理方法
JP2013537448A (ja) 2010-08-03 2013-10-03 コーニンクレッカ フィリップス エヌ ヴェ 臨床的イベントに対する表示及びナビゲーションの方法
JP2017086685A (ja) 2015-11-13 2017-05-25 オリンパス株式会社 内視鏡業務支援システム
WO2018138834A1 (ja) 2017-01-26 2018-08-02 オリンパス株式会社 情報記録システム、情報記録装置、および情報記録方法
JP2018200493A (ja) 2015-10-20 2018-12-20 シャープ株式会社 治療工程推定装置
JP2019030502A (ja) 2017-08-08 2019-02-28 オリンパス株式会社 内視鏡画像観察支援システム
JP2019117663A (ja) 2017-01-19 2019-07-18 コニカミノルタ株式会社 支援方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08289885A (ja) * 1995-04-24 1996-11-05 Toshiba Corp Ｘ線診断装置
JP2004041605A (ja) * 2002-07-16 2004-02-12 Toshiba Corp 検査／処置情報記録システム、情報処理装置、情報端末、及び情報記録媒体
US8233962B2 (en) * 2006-05-16 2012-07-31 Siemens Medical Solutions Usa, Inc. Rotational stereo roadmapping
JP5160110B2 (ja) 2007-03-15 2013-03-13 オリンパスメディカルシステムズ株式会社 画像ファイリングシステムおよび画像表示システム
JP6143425B2 (ja) * 2012-06-11 2017-06-07 東芝メディカルシステムズ株式会社 Ｘ線診断装置
JP2015012977A (ja) * 2013-07-04 2015-01-22 株式会社東芝 医用画像診断システムおよび医用画像診断装置
JP2017120562A (ja) 2015-12-28 2017-07-06 キヤノンマーケティングジャパン株式会社 情報処理システム、その制御方法、及びプログラム
US10561381B2 (en) * 2016-06-07 2020-02-18 Canon Medical Systems Corporation Medical image diagnostic apparatus, and medical image processing apparatus
JP6611833B2 (ja) 2018-01-16 2019-11-27 キヤノン株式会社 放射線撮影システム、並びに、カメラ制御装置及びその制御方法
JP7032157B2 (ja) 2018-02-02 2022-03-08 キヤノンメディカルシステムズ株式会社 医用画像診断装置及びｘ線照射制御装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004105533A (ja) 2002-09-19 2004-04-08 Olympus Corp 内視鏡外科システム
JP2004280455A (ja) 2003-03-14 2004-10-07 Toshiba Corp 医療情報システム
JP2005245761A (ja) 2004-03-04 2005-09-15 Toshiba Corp Ｘ線診断装置
US20080270080A1 (en) 2005-12-19 2008-10-30 Koninklijke Philips Electronics N. V. Hierarchical Real-Time Patient State Indices for Patient Monitoring
JP2013537448A (ja) 2010-08-03 2013-10-03 コーニンクレッカ フィリップス エヌ ヴェ 臨床的イベントに対する表示及びナビゲーションの方法
JP2012081180A (ja) 2010-10-14 2012-04-26 Toshiba Corp 医用画像診断装置及び医用画像処理方法
JP2018200493A (ja) 2015-10-20 2018-12-20 シャープ株式会社 治療工程推定装置
JP2017086685A (ja) 2015-11-13 2017-05-25 オリンパス株式会社 内視鏡業務支援システム
JP2019117663A (ja) 2017-01-19 2019-07-18 コニカミノルタ株式会社 支援方法
WO2018138834A1 (ja) 2017-01-26 2018-08-02 オリンパス株式会社 情報記録システム、情報記録装置、および情報記録方法
JP2019030502A (ja) 2017-08-08 2019-02-28 オリンパス株式会社 内視鏡画像観察支援システム

Also Published As

Publication number Publication date
JP2022025590A (ja) 2022-02-10
US11793477B2 (en) 2023-10-24
CN114052756A (zh) 2022-02-18
US20220031271A1 (en) 2022-02-03

Similar Documents

Publication Publication Date Title
JP7309766B2 (ja) 血管造影投影をコンピュータ断層撮影データに位置合わせするためのシステムおよび方法
JP7027046B2 (ja) 医用画像撮像装置及び方法
JP2012200285A (ja) 画像処理装置、ｘ線ｃｔ装置、及び画像処理方法
US12226233B2 (en) Personalized breast imaging system
JP2019106122A (ja) 病院情報装置、病院情報システム及びプログラム
JP2004105746A (ja) マンモグラフィ装置
US20180153405A1 (en) Image-assisted Diagnostic Evaluation
JP7568439B2 (ja) 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム
JP7701138B2 (ja) 医用画像処理装置、ｘ線診断装置及び医用画像処理プログラム
JP2019075123A (ja) 画像処理装置及び医用画像撮像装置
US20220346710A1 (en) Learned model generating method, processing device, and storage medium
JP7118584B2 (ja) 医用画像診断装置、医用画像撮像装置および医用画像表示装置
JP6956514B2 (ja) Ｘ線ｃｔ装置及び医用情報管理装置
JP5214980B2 (ja) 医用画像読影装置
JP7560280B2 (ja) 医用画像処理装置、医用画像処理システム及び医用画像処理方法
JP2019111332A (ja) 医用画像処理装置、医用画像処理方法及びｘ線診断装置
JP7292871B2 (ja) 医用情報処理装置及びｘ線診断装置
JP2004097830A (ja) マンモグラフィ装置
JP7002901B2 (ja) 医用画像診断装置及び医用画像処理装置
JP7655032B2 (ja) 画像表示装置及び画像表示プログラム
US20250366809A1 (en) X-ray ct apparatus, information processing apparatus, information processing method, and recording medium
JP7568426B2 (ja) 医用情報処理装置、ｘ線診断装置及びプログラム
US20240127450A1 (en) Medical image processing apparatus and non-transitory computer readable medium
JP5091645B2 (ja) 画像処理装置および診断用画像表示プログラム
EP4570180A1 (en) Nuclear medicine diagnosis device, region-of-interest movement state detection method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230601

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240809

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241003

R150 Certificate of patent or registration of utility model

Ref document number: 7568439

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150