JP6704828B2 - 制御装置、制御方法、制御システム及びプログラム - Google Patents

制御装置、制御方法、制御システム及びプログラム Download PDF

Info

Publication number
JP6704828B2
JP6704828B2 JP2016198892A JP2016198892A JP6704828B2 JP 6704828 B2 JP6704828 B2 JP 6704828B2 JP 2016198892 A JP2016198892 A JP 2016198892A JP 2016198892 A JP2016198892 A JP 2016198892A JP 6704828 B2 JP6704828 B2 JP 6704828B2
Authority
JP
Japan
Prior art keywords
image
medical image
information
photoacoustic
medical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016198892A
Other languages
English (en)
Other versions
JP2018057696A (ja
Inventor
野歩 宮沢
野歩 宮沢
拓 井上
拓 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2016198892A priority Critical patent/JP6704828B2/ja
Priority to PCT/JP2017/036020 priority patent/WO2018066571A1/ja
Publication of JP2018057696A publication Critical patent/JP2018057696A/ja
Priority to US16/374,595 priority patent/US20190223841A1/en
Application granted granted Critical
Publication of JP6704828B2 publication Critical patent/JP6704828B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/54Control of the diagnostic device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0093Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy
    • A61B5/0095Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy by applying light and detecting acoustic waves, i.e. photoacoustic measurements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • A61B8/14Echo-tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4483Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5261Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from different diagnostic modalities, e.g. ultrasound and X-ray
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/56Details of data transmission or power supply
    • A61B8/565Details of data transmission or power supply involving data transmission via a network
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation

Description

本発明は、制御装置、制御方法、制御システム及びプログラムに関する。
医用画像を取得し、管理するための情報システムが活用されている。このような情報システムにおいて、たとえばユーザは取得された医用画像を確認し、当該医用画像の撮影が失敗(写損)であったか否かを判定する場合がある。特許文献1には、医用画像が撮影される度に当該医用画像の撮影が失敗であったか否かを判定することが開示されている。
特開2002―159483号公報
複数の関連した医用画像が取得される場合に、その関連を考慮せずにそれぞれの医用画像の撮影が失敗であったか否かを判定することは、手間のかかる処理となるおそれがある。
本発明の実施形態に係る制御装置は、第1の医用画像に対する写損の指示を受け付ける受付手段と、
前記第1の医用画像とは異なる医用画像である第2の医用画像を、前記第1の医用画像に付帯された情報に基づいて選択する選択手段と、前記第1の医用画像と、前記選択された前記第2の医用画像とを写損とする処理手段と、を有することを特徴とする。
これにより、写損の指示があった医用画像と、写損の指示があった医用画像に基づいて選択される医用画像とを併せて写損とすることができ、ユーザのワークフローが向上する。
本発明の実施形態に係る制御装置の機能構成の一例を示す図である。 本発明の実施形態に係る制御装置のハードウェア構成の一例を示す図である。 本発明の実施形態に係る制御装置により行われる処理の一例を示すフローチャートである。 本発明の実施形態に係る制御装置により行われる処理の一例を示すフローチャートである。 本発明の実施形態に係る制御装置により行われる処理の一例を示すフローチャートである。 本発明の実施形態に係る制御装置により表示される画面の一例を示す図である。 本発明の実施形態に係る制御装置により表示される画面の一例を示す図である。 本発明の実施形態に係る制御装置により表示される画面の一例を示す図である。 本発明の実施形態に係る制御装置により表示される画面の一例を示す図である。 本発明の実施形態に係る制御装置を含むシステムの構成の一例を示す図である。
以下、図面を参照して本発明の実施形態を説明する。
本願明細書では、被検体に光を照射し、被検体内部で生じた膨張によって発生する音響波を光音響波と称する。また、トランスデューサから送信された音響波または当該送信された音響波が被検体内部で反射した反射波(エコー)を超音波と称する。
被検体内部の状態を低侵襲に画像化する方法として、超音波を用いた画像化の方法や光音響波を用いた画像化の手法が利用されている。超音波を用いた画像化の方法は、たとえばトランスデューサから発振された超音波が被検体内部の組織で音響インピーダンスの差に応じて反射され、反射波がトランスデューサに到達するまでの時間や反射波の強度に基づいて画像を生成する方法である。超音波を用いて画像化された画像を以下では超音波画像と称する。ユーザはプローブの角度等を変えながら操作し、様々な断面の超音波画像をリアルタイムに観察することができる。超音波画像には臓器や組織の形状が描出され、腫瘍の発見等に活用されている。また、光音響波を用いた画像化の方法は、たとえば光を照射された被検体内部の組織が断熱膨張することにより発生する光音響波に基づいて画像を生成する方法である。光音響波を用いて画像化された画像を以下では光音響画像と称する。光音響画像には各組織の光の吸収の度合いといった光学特性に関連した情報が描出される。光音響画像では、たとえばヘモグロビンの光学特性により血管を描出できることが知られており、腫瘍の悪性度の評価等への活用が検討されている。
診断の精度を高めるために、被検体の同一部位を、異なる原理に基づいて異なる現象を画像化することにより、様々な情報を収集する場合がある。たとえば、CT(Computed Tomography)画像で得られた形態情報と、PET(positron emission tomography)画像で得られた代謝に関する機能情報とを組み合わせて、がんに関する診断を行う場合がある。このように、異なる原理に基づいて異なる現象を画像化して得られた情報を用いて診断を行うことは、診断の精度向上に有効であると考えられる。
上述した超音波画像と光音響画像に関しても、それぞれの特性を組み合わせた画像を得るための撮像装置が検討されている。特に、超音波画像も光音響画像も被検体からの超音波を利用して画像化されることから、超音波画像の撮像と光音響画像の撮像とを同じ撮像装置で行うことも可能である。より具体的には、被検体に照射した反射波と光音響波とを同じトランスデューサで受信する構成とすることができる。これにより、超音波信号と光音響信号とを一つのプローブで取得することができ、ハードウェア構成が複雑にならずに、超音波画像の撮像と光音響画像の撮像とを行う撮像装置を実現できる。
たとえば、上述したように超音波画像の撮像と光音響画像の撮像とを行う撮像装置を用いて検査を行う場合に、1回の検査で様々な画像が生成されることが想定される。超音波画像の撮像を行いながら、適宜ユーザが光照射を指示する操作入力を行って光音響画像の撮像を行う場合を例に説明する。1回の検査で、一連の超音波画像群からなる動画または、ユーザの指示したタイミングにおける超音波画像が生成される。また、1回の検査において行われた光照射ごとに、被検体で光音響波が発生し、後述するような様々な種類の光音響画像が生成される。1回の検査において複数回の光照射が行われる場合には、それぞれの光照射のタイミングごとに、複数の光音響画像が生成され得る。
このように、1回の検査によって、一連のプローブ操作に応じて描出される部位の、一連の超音波画像が生成される。さらに、光照射に応じて取得された光音響信号から、複数の光音響画像を生成することができる。光照射に応じて取得された光音響信号と、当該光照射と同時または近接する時刻に取得された超音波信号とは、被検体のほぼ同一の部位からの光音響波、反射波であると考えることができる。したがって、これらの光音響信号及び超音波信号から生成される医用画像は、略同時のタイミングで撮像され、ほぼ同一の部位を画像化したものであると考えられる。超音波画像と、当該超音波画像と略同一のタイミングで撮像された光音響画像とは、後の読影で比較するために関連付けられて記憶されることが好ましい。
撮像された画像をユーザが確認した場合に、読影に適さない、いわゆる写損画像(以下、単に写損という場合もある)であるとユーザが気付く場合がある。患者の体動により画像がぼけていたり、撮像に係る条件が不適切であったりする場合に、撮像された画像は写損画像とされる場合がある。確認した画像が写損画像であると認識したユーザは、当該画像が写損画像であることを指示する。このとき、写損画像とされた画像と略同一のタイミングで撮像された画像が存在する場合には、それらも写損画像であるおそれがある。ユーザが略同一のタイミングで撮像された画像の存在に気付かなかった場合には、本来写損画像とされるべき画像が読影に用いられてしまうおそれがある。また、ユーザが略同一のタイミングで撮像された画像を認識していたとしても、それらの全てについて写損画像であることを指示する操作は、ユーザにとって手間のかかる操作であるおそれがある。本発明の実施形態は、たとえばこのような課題に鑑みて提案されるものである。
図10は、本発明の実施形態に係る制御装置101を含むシステムの構成の一例を示す図である。超音波画像と光音響画像とを生成可能な撮像システム100は、ネットワーク110を介して各種の外部装置と接続されている。撮像システム100に含まれる各構成及び各種の外部装置は、同じ施設内に設置されている必要はなく、通信可能に接続されていればよい。
撮像システム100は、制御装置101、プローブ102、表示部104、操作部105を含む。制御装置101は、プローブ102から超音波信号と光音響信号とを取得し、たとえば超音波画像に基づいて光音響信号の取得を制御し、当該制御に基づいて光音響画像を生成する装置である。また、制御装置101は、超音波画像ならびに光音響画像の撮像を含む検査に関する情報をオーダリングシステム112から取得し、当該検査が行われる際にプローブ102や表示部104を制御する。制御装置101は、生成された超音波画像、光音響画像、超音波画像に光音響画像を重畳した重畳画像をPACS113に出力する。制御装置101は、HL7(Health level 7)及びDICOM(Digital Imaging and Communications in Medicine)といった規格に準じて、オーダリングシステム112やPACS113といった外部装置との間で情報の送受信を行う。制御装置101により行われる処理についての詳細は、後述する。
撮像システム100で超音波画像が撮像される被検体内の領域は、たとえば循環器領域、乳房、肝臓、膵臓、腹部といった領域である。また、撮像システム100では、たとえば微小気泡を利用した超音波造影剤を投与した被検体の超音波画像を撮像してもよい。
また、撮像システム100で光音響画像が撮像される被検体内の領域は、たとえば循環器領域、乳房、径部、腹部、手指および足指を含む四肢といった領域である。特に、被検体内の光吸収に関する特性に応じて、新生血管や血管壁のプラークを含む血管領域を、光音響画像の撮像の対象としてもよい。以下では、超音波画像を撮像しながら光音響画像を撮像する場合を例に説明するが、撮像システム100で光音響画像を撮像される被検体内の領域は必ずしも超音波画像を撮像される領域と一致していなくてもよい。撮像システム100では、たとえばメチレンブルー(methylene blue)やインドシアニングリーン(indocyanine green)といった色素や、金微粒子、それらを集積あるいは化学的に修飾した物質を造影剤として投与した被検体の光音響画像を撮像してもよい。
プローブ102は、ユーザにより操作され、超音波信号と光音響信号とを制御装置101に送信する。プローブ102は、送受信部106と照射部107とを含む。プローブ102は、送受信部106から超音波を送信し、反射波を送受信部106で受信する。また、プローブ102は照射部107から被検体に光を照射し、光音響波を送受信部106で受信する。プローブ102は受信した反射波ならびに光音響波を電気信号に変換し、超音波信号ならびに光音響信号として制御装置101に送信する。プローブ102は、被検体との接触を示す情報を受信したときに、超音波信号を取得するための超音波の送信ならびに光音響信号を取得するための光照射が実行されるように制御されることが好ましい。なお、図1において制御装置101に接続されているプローブは1つであるが、複数のプローブが接続されることとしてもよい。
送受信部106は、少なくとも1つのトランスデューサ(不図示)と、整合層(不図示)、ダンパー(不図示)、音響レンズ(不図示)を含む。トランスデューサ(不図示)はPZT(lead zirconate titanate)やPVDF(polyvinylidene difluoride)といった、圧電効果を示す物質からなる。トランスデューサ(不図示)は圧電素子以外のものでもよく、たとえば静電容量型トランスデューサ(CMUT:capacitive micro−machined ultrasonic transducers)、ファブリペロー干渉計を用いたトランスデューサであってもよい。典型的には、超音波信号は2〜20MHz、光音響信号は0.1〜100MHzの周波数成分からなり、トランスデューサ(不図示)はこれらの周波数を検出できるものが用いられる。トランスデューサ(不図示)により得られる信号は時間分解信号である。受信された信号の振幅は各時刻にトランスデューサで受信される音圧に基づく値を表したものである。送受信部106は、電子フォーカスのための回路(不図示)もしくは制御部を含む。トランスデューサ(不図示)の配列形は、たとえばセクタ、リニアアレイ、コンベックス、アニュラアレイ、マトリクスアレイである。プローブ102は、超音波信号と光音響信号とを取得するが、これらを交互に取得してもよいし、同時に取得してもよいし、予め定められた態様で取得してもよい。
送受信部106は、トランスデューサ(不図示)が受信した時系列のアナログ信号を増幅する増幅器(不図示)を備えていてもよい。また、送受信部106は、トランスデューサ(不図示)が受信した時系列のアナログ信号を時系列のデジタル信号に変換するA/D変換器を備えていてもよい。トランスデューサ(不図示)は、超音波画像の撮像の目的に応じて、送信用と受信用とに分割されてもよい。また、トランスデューサ(不図示)は、超音波画像の撮像用と、光音響画像の撮像用とに分割されてもよい。
照射部107は、光音響信号を取得するための光源(不図示)と、光源(不図示)から射出されたパルス光を被検体へ導く光学系(不図示)とを含む。光源(不図示)が射出する光のパルス幅は、たとえば1ns以上、100ns以下のパルス幅である。また、光源(不図示)が射出する光の波長は、たとえば400nm以上、1600nm以下の波長である。被検体の表面近傍の血管を高解像度でイメージングする場合は、400nm以上、700nm以下の、血管での吸収が大きい波長が好ましい。また、被検体の深部をイメージングする場合には、700nm以上、1100nm以下の、水や脂肪といった組織で吸収されにくい波長が好ましい。なお、上記の数値は例示であり、他の数値に変更することとしてもよい。
光源(不図示)は、たとえばレーザーや発光ダイオードである。照射部107は、複数の波長の光を用いて光音響信号を取得するために、波長を変換できる光源を用いてもよい。あるいは、照射部107は、互いに異なる波長の光を発生する複数の光源を備え、それぞれの光源から交互に異なる波長の光を照射できる構成であってもよい。レーザーは、たとえば固体レーザー、ガスレーザー、色素レーザー、半導体レーザーである。光源(不図示)として、Nd:YAGレーザーやアレキサンドライトレーザーといったパルスレーザーを用いてもよい。また、Nd:YAGレーザーの光を励起光とするTi:saレーザーやOPO(optical parametric oscillators)レーザーを光源(不図示)として用いてもよい。また、光源(不図示)として、マイクロウェーブ源を用いてもよい。
光学系(不図示)には、レンズ、ミラー、光ファイバといった光学素子が用いられる。被検体が乳房である場合には、パルス光のビーム径を広げて照射することが好ましいため、光学系(不図示)は射出される光を拡散させる拡散板を備えていてもよい。あるいは解像度を上げるために、光学系(不図示)はレンズ等を備え、ビームをフォーカスできる構成であってもよい。
表示部104は、制御装置101からの制御に基づいて、撮像システム100で撮像された画像や、検査に関する情報を表示する。表示部104は、制御装置101からの制御に基づいて、ユーザの指示を受け付けるためのインタフェースを提供する。表示部104は、たとえば液晶ディスプレイである。
操作部105は、ユーザの操作入力に関する情報を制御装置101に送信する。操作部105は、たとえばキーボードやトラックボールや、検査に関する操作入力を行うための各種のボタンである。
なお、表示部104と操作部105はタッチパネルディスプレイとして統合されていてもよい。また、制御装置101と表示部104と操作部105は別体の装置である必要はなく、これらの構成が統合された操作卓として実現されてもよい。
HIS(Hospital Information System)111は、病院の業務を支援するシステムである。HIS111は、電子カルテシステム、オーダリングシステムや医事会計システムを含む。HIS111により検査のオーダ発行から会計までを連携して管理することができる。HIS111のオーダリングシステムは、オーダ情報を部門ごとのオーダリングシステム112に送信する。そして後述するオーダリングシステム112において当該オーダの実施が管理される。
オーダリングシステム112は、検査情報を管理し、撮像装置でのそれぞれの検査の進捗を管理するシステムである。オーダリングシステム112は検査を行う部門ごとに構成されていてもよい。オーダリングシステム112は、たとえば放射線部門においてはRIS(Radiology Information System)である。オーダリングシステム112は、制御装置101からの問い合わせに応じて、撮像システム100で行う検査の情報を制御装置101に送信する。オーダリングシステム112は、制御装置101から検査の進捗に関する情報を受信する。そして、オーダリングシステム112は、検査が完了したことを示す情報を制御装置101から受信すると、当該検査が完了したことを示す情報をHIS111に送信する。オーダリングシステム112はHIS111に統合されていてもよい。
PACS(Picture Archiving and Communication System)113は、施設内外の各種の撮像装置で得られた画像を保持するデータベースシステムである。PACS113は、医用画像及びかかる医用画像の撮影条件や、再構成を含む画像処理のパラメータや患者情報といった付帯情報を記憶する記憶部(不図示)と、当該記憶部に記憶される情報を管理するコントローラ(不図示)とを有する。PACS113は、制御装置101から出力されたオブジェクトである、超音波画像や光音響画像や重畳画像を記憶する。PACS113と制御装置101との通信や、PACS113に記憶される各種の画像はHL7やDICOMといった規格に則していることが好ましい。制御装置101から出力される各種の画像は、DICOM規格に則って各種のタグに付帯情報が関連付けられ、記憶されている。
Viewer114は、画像診断用の端末であり、PACS113等に記憶された画像を読み出し、診断のために表示する。医師は、Viewer114に画像を表示させて観察し、当該観察の結果得られた情報を画像診断レポートとして記録する。Viewer114を用いて作成された画像診断レポートは、Viewer114に記憶されていてもよいし、PACS113やレポートサーバ(不図示)に出力され、記憶されてもよい。
Printer115は、PACS113等に記憶された画像を印刷する。Printer115はたとえばフィルムプリンタであり、PACS113等に記憶された画像をフィルムに印刷することにより出力する。
図2は、制御装置101の構成の一例を示す図である。制御装置101は、CPU201と、ROM202と、RAM203と、HDD204と、USB205と、通信回路206と、GPU207と、HDMI(登録商標)208と、プローブコネクタポート210とを有する。これらはBUSにより通信可能に接続されている。BUSはデータバスであり、接続されたハードウェア間でのデータの送受信や、CPU201から他のハードウェアへの命令を送信するために使用される。
CPU(Central Processing Unit)201は制御装置101及びこれに接続する各部を統合的に制御する制御回路である。CPU201はROM202に格納されているプログラムを実行することにより制御を実施する。またCPU201は、表示部104を制御するためのソフトウェアであるディスプレイドライバを実行し、表示部104に対する表示制御を行う。さらにCPU201は、操作部105に対する入出力制御を行う。
ROM(Read Only Memory)202は、CPU201による制御の手順が記載されたプログラムやデータを格納する。ROM202は、制御装置101のブートプログラムや各種初期データを記憶する。また、制御装置101の処理を実現するための各種のプログラムを記憶する。
RAM(Random Access Memory)203は、CPU201が命令プログラムによる制御を行う際に作業用の記憶領域を提供するものである。RAM203は、スタックとワーク領域とを有する。RAM203は、制御装置101を及びこれに接続する各部における処理を実行するためのプログラムや、画像処理で用いる各種パラメータを記憶する。RAM203は、CPU201が実行する制御プログラムを格納し、CPU201が各種制御を実行する際の様々なデータを一時的に格納する。
HDD204は、超音波画像や光音響画像などの各種のデータを保存する補助記憶装置である。
USB(Universal Serial Bus)205は操作部105と接続する接続部である。
通信回路206は撮像システム100を構成する各部や、ネットワーク110に接続されている各種の外部装置との通信を行うための回路である。通信回路206は、たとえば出力する情報を転送用パケットに格納してTCP/IPといった通信技術により、ネットワーク110を介して外部装置に出力する。制御装置101は、所望の通信形態にあわせて、複数の通信回路を有していてもよい。
GPU207は、ビデオメモリを含む汎用グラフィックスボードに含まれる。GPU207は、たとえば光音響画像の再構成処理を行う。このような演算装置を使用するにより、専用ハードウェアを必要とせずに高速に再構成処理などの演算を行うことができる。
HDMI(登録商標)(High Definition Multimedia Interface)208は、表示部104と接続する接続部である。
プローブコネクタポート210は、プローブ102を制御装置101に接続するための接続口である。プローブ102から出力される超音波信号及び光音響信号は、ポート210を介して制御装置101に取得される。
CPU201やGPU207はプロセッサの一例である。また、ROM202やRAM203やHDD204はメモリの一例である。制御装置101は複数のプロセッサを有していてもよい。第1の実施形態においては、制御装置101のプロセッサがメモリに格納されているプログラムを実行することにより、制御装置101の各部の機能が実現される。
なお、制御装置101は特定の処理を専用に行うCPUやGPUを有していても良い。また、制御装置101は特定の処理あるいは全ての処理をプログラムしたFPGA(Field−Programmable Gate Array)を有していてもよい。制御装置101は補助記憶装置としてSSD(Solid State Drive)を有していてもよい。
図1は、制御装置101の機能構成の一例を示す図である。制御装置101は、検査実施情報保存部120(以下、保存部120と称する。)と、画像処理部121と、撮影制御部122と、信号取得部123と、設定保存部124と、検査制御部125と、入出力制御部126と、写損処理制御部127と、送受信制御部128とを含む。
保存部120は、過去に実施された検査情報を記憶する。保存部120に記憶される検査情報は、ユーザの操作入力及び制御装置101の関連する構成からの制御に基づいて、登録され、更新され、削除され、検索される。保存部120は、データベースで構成される。
画像処理部121は、超音波画像と光音響画像と、超音波画像に対して光音響画像を重畳させた重畳画像とを生成する。画像処理部121は、信号取得部123により取得された超音波信号から、表示部104に表示させるための超音波画像を生成する。画像処理部121は、検査制御部125から取得した撮影手技の情報に基づいて、設定されたモードに適した超音波画像を生成する。たとえば撮影手技としてドプラモードが設定されている場合には、画像処理部121は、信号取得部123により取得された超音波信号の周波数と送信周波数との差に基づいて、被検体内部の流速を示す画像を生成する。
また、画像処理部121は信号取得部123により取得された光音響信号に基づいて光音響画像を生成する。画像処理部121は、光音響信号に基づいて光が照射された時の音響波の分布(以下、初期音圧分布と称する。)を再構成する。画像処理部121は、再構成された初期音圧分布を、被検体に照射された光の被検体の光フルエンス分布で除することにより、被検体内における光の吸収係数分布を取得する。また、被検体に照射する光の波長に応じて、被検体内で光の吸収の度合いが異なることを利用して、複数の波長に対する吸収係数分布から被検体内の物質の濃度分布を取得する。たとえば画像処理部121は、オキシヘモグロビンとデオキシヘモグロビンの被検体内における物質の濃度分布を取得する。さらに画像処理部121は、オキシヘモグロビン濃度のデオキシヘモグロビン濃度に対する割合として酸素飽和度分布を取得する。画像処理部121により生成される光音響画像は、たとえば上述した初期音圧分布、光フルエンス分布、吸収係数分布、物質の濃度分布、酸素飽和度分布といった情報を示す画像である。
画像処理部121は、さらに複数の医用画像を合成して1つの合成画像を生成する。たとえば、超音波画像に光音響画像が重畳された状態の画像を合成画像として生成する。なお、画像処理部121は各医用画像に対して階調処理といった、表示や診断支援のための画像処理を実施する。画像処理部121は、超音波画像と光音響画像とを取得する取得手段の一例である。
撮影制御部122は、検査制御部125から受信した撮影手技の情報に基づいてプローブ102を制御する。撮影制御部122は、信号取得部123に撮影手技の情報を含む、検査オーダに関連する情報を送信する。撮影制御部122は、検査における超音波信号の取得及び光音響信号の取得に関わるフローを制御する。
信号取得部123は、プローブ102から超音波信号と光音響信号とを取得する。具体的には、信号取得部123は、検査制御部125及び撮影制御部122からの情報に基づいて、プローブ102から取得した情報から超音波信号と光音響信号とを区別して取得する。たとえば、撮像を行っている撮影手技において、超音波信号の取得と光音響信号の取得のタイミングが規定されている場合がある。その場合、信号取得部123は、検査制御部125から取得した当該取得のタイミングの情報に基づいて、プローブ102から取得した情報から超音波信号と光音響信号とを区別して取得する。
設定保存部124は、撮影手技情報や写損に関する設定など、制御装置101の動作に関連する設定の情報を記憶する。撮影手技情報とは、撮像システム100で実施される撮影手技を示す情報と、当該撮影手技に対して予め定められる情報である。たとえば、設定保存部124は撮像システム100で取得された医用画像を外部装置で重畳表示するためのオブジェクトの生成に関する設定を受け付け、保存する。設定保存部124に記憶される設定の情報は、ユーザの操作入力及び制御装置101の関連する構成からの制御に基づいて、登録され、更新され、削除され、検索される。設定保存部124に記憶される設定の情報の詳細については図9に基づいて後述する。設定保存部124は、データベースで構成される。設定保存部124は、受付手段の一例である。
検査制御部125は、撮像システム100において行われる検査を制御する。検査制御部125は、オーダリングシステム112から検査オーダの情報を取得する。検査オーダには、検査を受ける患者の情報や、撮影手技に関する情報が含まれる。検査制御部125は、撮影制御部122に検査オーダに関する情報を送信する。また、検査制御部125は、ユーザに検査に関する情報を提示するために表示制御部305を介して表示部104に当該検査の情報を表示させる。表示部104に表示される検査の情報には、検査を受ける患者の情報や、当該検査に含まれる撮影手技の情報や、既に撮像が完了して生成された画像が含まれる。さらに検査制御部125は、当該検査の進捗に関する情報をオーダリングシステム112に送信する。たとえば、ユーザにより当該検査が開始された際には、システム112に開始を通知し、当該検査に含まれる全ての撮影手技による撮像が完了した際には、システム112に完了を通知する。
また、検査制御部125は各種の情報をPACS113やViewer114といった外部装置に出力するための情報を生成する。たとえば検査制御部125は、画像処理部121で生成された超音波画像や光音響画像、これらの重畳画像をPACS113に出力するための情報を生成する。外部装置に出力される情報には、DICOM規格に則った各種のタグとして付帯された付帯情報が含まれる。付帯情報には、たとえば患者情報や、当該画像を撮像した撮像装置を示す情報や、当該画像を一意に識別するための画像IDや、当該画像を撮像した検査を一意に識別するための検査IDが含まれる。また、付帯情報には、検査の中で撮像された超音波画像と光音響画像とを関連付ける情報が含まれる。超音波画像と光音響画像とを関連付ける情報とは、たとえば超音波画像を構成する複数のフレームのうち、光音響画像を取得したタイミングが最も近いフレームを示す情報である。すなわち、検査制御部125は、保存部120や設定保存部124に記憶されている情報や、画像処理部121で取得された超音波画像や光音響画像に基づいて、外部装置に送信するためのオブジェクトを生成する。
入出力制御部126は、表示部104を制御して、表示部104に情報を表示させる。入出力制御部126は、検査制御部125や画像処理部121からの入力や、操作部105を介したユーザの操作入力に応じて、表示部104に情報を表示させる。また、入出力制御部126は、操作部105からの情報を取得する。
写損処理制御部127は、ユーザの操作入力、検査制御部125からの制御や設定保存部124に保存されている情報に基づいて、写損処理に関する制御を行う。たとえば写損処理制御部127は、画像情報を写損に指定するための写損処理や、当該写損の指定を解除するための写損解除処理を制御する。写損処理制御部127は、ある医用画像に対する写損処理に伴って、当該医用画像の付帯情報に基づいて、当該医用画像とは異なる他の医用画像を選択する。この観点で、写損処理制御部127は選択手段の一例である。また、写損処理制御部127は、選択された他の医用画像に対する写損処理を併せて行う。この観点で、写損処理制御部127は処理手段の一例である。写損処理制御部127による処理の詳細については、後述する。
送受信制御部128は、ネットワーク110を介してオーダリングシステム112やPACS113、Viewer114といった外部装置と制御装置101との間での、情報の送受信を制御する。送受信制御部128は、オーダリングシステム112から検査オーダの情報を受信する。送受信制御部128は、写損処理制御部127で生成されたオブジェクトをPACS113やViewer114に送信する。
なお、図10、図1、図2では、プローブ102と接続され、超音波画像及び光音響画像の撮像を制御する制御装置101を例示したが、本発明の実施形態に係る制御装置は必ずしもこの形態に限定されない。本発明の実施形態に係る制御装置は、当該撮像を制御する装置から超音波画像と光音響画像とを取得する構成であってもよい。
図3は、制御装置101により行われる、超音波画像及び光音響画像の写損に関する処理の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体は、CPU201またはGPU207である。
はじめに、制御装置101により行われる処理において利用される、各種の情報について説明する。撮影手技情報は、撮像システム100で行われる撮影手技に関する情報である。撮影手技情報には、たとえば撮影手技を一意に特定するための撮影手技ID、モダリティの種別、撮影部位、撮影方向、再構成パラメータや撮影条件のデフォルト設定に関する情報が含まれる。また、撮影手技情報には、写損理由の入力に関する設定や、複数の医用画像の間で写損処理を連動させるための設定に関する情報が含まれる。
画像情報は、医用画像に関する情報である。画像情報は、たとえば医用画像を一意に特定するための画像ID、当該医用画像を撮像するのに用いたモダリティの種別、画像種別に関する情報を含む。画像種別とは、一つのモダリティで取得された信号に基づいて取得可能な医用画像の種別を示すものである。たとえば、超音波撮像装置により取得される超音波信号に基づいて、Bモード画像、ドプラ画像といった複数の画像が取得されるので、画像種別にはその別を示す情報が設定される。また、画像情報は、たとえば写損情報、写損理由情報、写損連動元情報、写損連動情報、送信可否情報を含む。写損情報は、当該画像情報と対応する医用画像が写損であるか否かを示す情報である。写損理由情報は、当該医用画像が写損とされる理由を示す情報である。写損連動元情報は、当該医用画像の写損処理が、別の医用画像に対する写損処理を連動して実施したか否かを示す情報である。別の医用画像に対する写損処理を実施する契機となった医用画像の写損連動元情報はONに設定される。写損連動情報には、当該医用画像の写損処理に連動して写損処理が行われた医用画像の画像IDが設定される。さらに、画像情報は、重畳表示情報、送信可否情報、画像処理パラメータ、幾何変換パラメータ、医用画像上に配置されるオブジェクトに関する情報、関心領域に関する情報、再構成パラメータを含む。重畳表示情報は、制御装置101において行われた重畳表示の履歴に関する情報であり、たとえばレイヤ順序といった重畳表示の態様や、重畳表示に用いられた医用画像の画像IDに関する情報を含む。オブジェクトとは、たとえばユーザにより入力されるテキストを含むアノテーションや、撮影方向を示すマーカーや、計測結果を示す情報や、切り出し範囲やマスクを示す図形である。画像情報は、実施された撮影条件や時刻を示す実施撮影情報を含んでいてもよい。実施撮影情報には、当該医用画像と関連付けられる別の医用画像の画像IDを含む。たとえば信号の取得時刻に基づいて、所定の期間内に取得された信号に基づいて生成される医用画像が関連付けられる。制御装置101により扱われる医用画像は静止画画像のシングルフレーム、マルチフレーム、動画像のいずれであってもよい。
ステップS301において、入出力制御部126はユーザによる写損指示を受け付ける。たとえば、表示部104に表示されるユーザインタフェースを介して、写損指示が入力される。写損指示を受け付ける医用画像は、たとえば画像処理部121により取得された超音波画像や光音響画像である。また別の例では、入出力制御部126がPACS113から取得した医用画像である。この観点では、入出力制御部126も取得手段の一例である。検査制御部125は、当該写損指示があった医用画像を一意に特定するための情報である画像IDを含む画像情報を取得する。ここで画像情報とは、医用画像と、医用画像と関連付けられたメタデータとを含む情報である。検査制御部125は、写損処理制御部127に対して撮影手技情報と画像情報とを送信し、写損に関する処理を要求する。
ステップS302において、写損処理制御部127はステップS301において取得した撮影手技情報に対して設定されている情報(図9、設定904)を設定保存部124から取得する。写損の理由を入力することが必須である場合にはステップS303に進み、必須でない場合にはステップS306に進む。
ステップS303において、写損処理制御部127は当該写損の指示があった医用画像の写損の理由を示す情報、すなわち写損理由を取得する。本実施形態においては、写損理由は当該医用画像の画像情報に含まれる。写損理由が当該医用画像の画像情報に含まれる場合はステップS306に進む。写損理由が当該医用画像の画像情報に含まれない、すなわち写損理由情報が当該画像情報において未設定の場合にはステップS304に進む。
ステップS304において、写損処理制御部127は入出力制御部126を介して表示部104に写損理由入力ダイアログ701(図7)を表示させる。写損理由入力ダイアログ701とは、ユーザに写損の理由を入力させるためのユーザインタフェースである。写損処理制御部127は、入出力制御部126を介してユーザが写損理由入力ダイアログを介して入力した写損理由を取得する。
ステップS305において、写損処理制御部127はステップS304で取得した写損理由を、表示中の画像情報、すなわち写損指示のあった医用画像の画像情報の写損理由情報に設定する。
ステップS306において、写損処理制御部127は写損指示のあった医用画像の画像情報の写損情報をONに設定する。
ステップS307において、写損処理制御部127は設定保存部124から医用画像の写損処理と送信可否との連動に関する設定の情報を取得する。送信可否に関する設定が写損処理に関する設定と連動するように設定されている場合にはステップS308に進み、連動しないように設定されている場合にはステップS309に進む。
ステップS308において、写損処理制御部127は写損指示の対象となる医用画像の画像情報に含まれる送信可否設定をOFFに設定する。送信可否設定は、当該医用画像を外部装置に送信することの可否を定める情報である。送信可否設定がOFFに設定されることにより、写損である当該医用画像が外部装置に送信されないように設定される。
ステップS309において、写損処理制御部127は設定保存部124から他の医用画像との写損処理の連動に関する設定(写損連動設定)の情報を取得する。写損連動設定は、ある撮影手技で撮像された医用画像が写損であった場合に、当該医用画像の写損処理と連動させて、併せて写損処理を行う医用画像を定める設定である。写損連動設定がONの場合はステップS310に進み、OFFの場合は図3に示す処理を終了する。
ステップS310において、写損処理制御部127はステップS301で写損指示がなされた医用画像に対する写損処理と連動した写損処理(写損連動処理)を実施する。ステップS310における処理の詳細については、後述する。
ステップS311において、写損処理制御部127はステップS310において写損連動処理の対象となった医用画像に関する情報を取得する。写損連動処理が実施された医用画像が存在する場合にはステップS312に進み、存在しない場合には図3に示す処理を終了する。
ステップS312において、ステップS310において写損連動処理の対象となった医用画像の写損連動元情報をONに設定する。
ステップS313において、写損処理制御部127はステップS301で写損指示のあった医用画像の写損連動情報に、ステップS312までの処理において写損処理が実施された医用画像それぞれの画像IDを設定する。写損連動情報は、画像情報に含まれる。
写損処理制御部127は、検査制御部125に当該写損に関する処理を終了したことを通知し、図3に示す処理を終了する。
図4は、図3のステップS310に示す写損連動処理の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体は、CPU201またはGPU207である。
ステップS401において、写損処理制御部127は保存部120から、ステップS301(図3)で写損指示があった医用画像と同一の検査で取得された全ての医用画像の画像情報を取得する。
ステップS402において、写損処理制御部127は1回の照射内で取得された画像の連動に関する設定の情報を設定保存部124から取得する。まず、写損処理制御部127はステップS401で取得された画像情報のうち、ステップS301(図3)で写損指示があった医用画像と略同一のタイミングで取得された医用画像の画像情報を検索する。医用画像が取得されたタイミングは、たとえば、それぞれの画像情報の実施撮影情報に含まれる画像取得時刻により示される。画像取得時刻は、たとえば当該医用画像を生成するための信号が取得された時刻である。超音波画像の取得時刻は、たとえばBモード画像であれば、1つのBモード画像を生成するのに必要な全ての超音波信号の取得が完了した時刻である。光音響画像の取得時刻は、たとえば当該光音響画像を生成するのに用いられた光音響信号の取得が完了した時刻である。ここでは、写損処理制御部127は画像取得時刻が所定の範囲内に含まれる医用画像の画像情報を、略同一のタイミングで取得されたもの、すなわち1回の照射内で取得されたものとして検索する。すなわち写損処理制御部127は、図3を用いて上述した例によれば、関連付けられた医用画像の画像情報を検索する。ステップS301(図3)で写損指示があった医用画像と略同一のタイミングで取得された医用画像の画像情報が存在する場合には、写損処理制御部127は設定保存部124から照射内画像連動設定912(図9)の情報を取得する。照射内画像連動設定912は、略同一のタイミングで取得された医用画像の写損処理の連動に関する設定である。照射内画像連動設定912がONに設定されている場合にはステップS403に進み、OFFに設定されている場合にはステップS406に進む。
ステップS403では、照射内画像連動設定912の設定に応じて処理が分岐する。照射内画像連動設定912が「対象画像の取得時刻以降に取得した画像を連動する」に設定されている場合にはステップS405に進み、「全て連動する」に設定されている場合にはステップS404に進む。
ステップS404において、写損処理制御部127は、ステップS401で取得した全ての画像情報を、ステップS301で写損指示があった医用画像に対する写損処理と連動した写損処理の対象とする。
ステップS405において、写損処理制御部127は、ステップS301(図3)で写損指示があった医用画像と関連付けられた医用画像であって、当該写損指示があった医用画像よりも画像取得時刻が遅い医用画像の画像情報を、当該写損指示があった医用画像に対する写損処理と連動した写損処理の対象とする。たとえば、プローブ102は超音波信号と光音響信号とを同時に取得できない場合がある。たとえば、被検体に照射された超音波の反射波と、被検体に照射された光による音響波とを、プローブ102のトランスデューサ(不図示)が区別して取得できない場合がある。そのような場合、信号取得時刻、すなわち画像取得時刻に基づいて、所定の時間内に取得された超音波信号と光音響信号とから生成されるそれぞれの画像が関連付けられる。写損処理制御部127は、関連付けられた医用画像、すなわち所定の範囲内の時刻に取得された信号に基づいて生成された医用画像のうち、写損指示があった医用画像よりも画像取得時刻が遅い医用画像の画像情報を、写損連動処理の対象とする。これにより、たとえば被検体の体動等により写損となった医用画像よりも後に取得され、同様に体動等の影響を受けた可能性のある医用画像を写損連動処理の対象とすることができる。
ステップS406において、写損処理制御部127は、設定保存部124から関連画像連動設定908(図9)に関する情報を取得する。関連画像連動設定908がONに設定されている場合はステップS407に進み、OFFに設定されている場合はステップS415に進む。
ステップS407では、ステップS406で取得された関連画像連動設定908(図9)の設定に応じて処理が分岐する。関連画像連動設定908が「画像種別毎に連動させる」に設定されている場合はステップS409に進み、「全て連動させる」が設定されている場合はステップS408に進む。
ステップS408において、写損処理制御部127は写損処理を連動させる対象とされた医用画像と関連付けられた医用画像の全てをステップS301で写損指示があった医用画像に対する写損処理と連動した写損処理の対象とする。
ステップS409において、写損処理制御部127は、設定保存部124から画像種別に応じた連動のルールに関する設定である画像種別毎連動ルール設定909(図9)に関する情報を取得する。写損処理制御部127は、画像種別に応じた連動のルールに従って、ステップS301で写損指示があった医用画像に対する写損処理と連動した写損処理の対象を選択する。
本実施形態においては、設定909は「同一撮影方法で取得した画像全て連動する」と、「カスタマイズ連動ルールを適用する」とのいずれかに設定可能である。「同一撮影方法で取得した画像全て連動する」が選択されている場合は、ステップS301で写損指示があった医用画像と同様の撮影方法により取得された医用画像を連動して写損処理の対象とする。写損処理制御部127は、医用画像の画像情報から撮影方法に関する情報を取得する。
たとえば、ステップS301で写損指示があった医用画像が光音響装置により取得された医用画像であるとする。その場合、写損処理制御部127は関連付けられた医用画像のうち、同じ光音響装置で取得された光音響信号に基づいて取得された医用画像を、当該写損指示に連動した写損処理の対象とする。光音響装置により略同一のタイミングで取得される光音響信号から、たとえば初期音圧分布、フルエンス、吸収係数、総ヘモグロビン量、オキシヘモグロビン量、デオキシヘモグロビン量といった情報を表す医用画像を取得可能である。同一の光音響信号若しくは、略同一のタイミングで取得された異なる複数の波長の光照射により得られた光音響信号に基づいて、上述したような複数の光音響画像が取得される場合がある。このようにして関連付けられた複数の光音響画像のうちいずれかの医用画像に対して写損が指示された場合には、元となる光音響信号そのものに写損の原因がある可能性があるため、他の光音響画像を連動して写損対象とする。異なる波長の光照射により得られた光音響信号に基づいて生成された光音響画像は連動の対象外としてもよいし、ユーザに判断させるための画面を表示部104に表示させてもよい。その場合、写損指示のあった光音響画像と同様の光音響信号と、異なる波長の光照射により得られた光音響信号とを共に用いている酸素飽和度画像は、当該写損指示と連動した写損の対象とする。酸素飽和度画像に対して写損指示があった場合には、これに用いられた全ての波長の光照射により得られた光音響信号に基づいて取得された光音響画像を連動して写損の対象とする。
また別の例として、ステップS301において超音波画像に対して写損指示があった場合を説明する。たとえば写損処理制御部127は写損対象の画像情報と、関連する医用画像の画像情報とを参照する。写損対象の超音波画像の画像種別が「Bモード」のように超音波信号の強度(振幅)に基づいて取得される医用画像である場合には、同一の超音波信号の強度(振幅)に基づいて取得された医用画像を連動して写損の対象とする。たとえば、Bモードでの観察下で特定の位置の計測値を記録したMモードや距離(時間)と超音波信号の強度(振幅)を記録したAモードに基づく医用画像を、写損処理制御部127は連動して写損の対象とする。一方で、ドプラモードのように、音源や観測者の移動による周波数偏移を利用した医用画像は、Bモードの医用画像とは異なる撮影方法で取得される医用画像であるので、当該写損指示との連動の対象外とする。「連続波ドプラ」、「パルスドプラ」、「カラードプラ」などの画像種別の医用画像であって、同一の周波数偏移の情報に基づいて取得された医用画像を、写損処理制御部127はいずれかに対する写損指示と連動して写損の対象とする。
設定909が「カスタマイズ連動ルールを適用する」に設定されている場合には、写損処理制御部127は設定保存部124からカスタマイズ連動ルールに関する情報を取得する。カスタマイズ連動ルールは、たとえば設定911(図9)において選択される。図9(a)に示す例によれば、写損指示のあった医用画像の画像種別が「Bモード」である場合には、関連付けられた医用画像のうち「ドプラ波形」、「カラードプラ」、「酸素飽和度」の画像種別の医用画像が連動して写損の対象とされることが設定されている。カスタマイズ連動ルールの詳細は、図9(b)に例示する画面により設定される。
ステップS410において、写損処理制御部127は、設定908が「画像種別毎に連動する」に設定されている場合に、さらに撮影方法が異なる場合の連動の設定910(図9)に関する情報を設定保存部124から取得する。設定910がONに設定されている場合はステップS411に進み、OFFに設定されている場合はステップS415に進む。
ステップS411では、ステップS301で写損が指示された医用画像の画像情報の画像種別に応じて処理が分岐する。写損処理制御部127は当該画像種別に関する情報を取得する。当該画像種別が「Bモード」である場合はステップS413に進み、「Bモード」以外の場合はステップS412に進む。
ステップS413において、写損処理制御部127は写損指示のあった「Bモード」の超音波画像と関連付けられた光音響画像を連動して写損の対象とする。
ステップS412において、写損処理制御部127はステップS301で写損指示のあった医用画像が制御装置101において重畳表示された履歴に関する情報を取得する。本実施形態においては、写損処理制御部127は当該写損指示のあった医用画像の画像情報に含まれる重畳表示情報を取得する。当該写損指示のあった医用画像が光音響画像であり、かつ重畳表示された履歴がある場合にはステップS414に進み、そうでない場合にはステップS415に進む。
ステップS414において、写損処理制御部127は、重畳表示情報に登録されている医用画像を、ステップS301で写損指示のあった医用画像と連動して写損の対象とする。
たとえば光音響画像と超音波画像とを重畳表示することにより読影に用いられることがある。したがって、一方の医用画像が写損であった場合に、他方の医用画像のみで読影を行うことが難しい場合がある。ステップS411乃至ステップS414までの処理により、このように重畳表示される一方の医用画像が写損とされた場合に、他方の医用画像も連動して写損とすることができる。ユーザが超音波画像のみでも読影を行いたい場合には、ステップS412及びステップS414の処理を行わないようにしてもよい。
ステップS415において、写損処理制御部127は、ステップS414までの処理で写損の対象とされた全ての医用画像の画像情報の写損情報をONに設定する。写損処理制御部127は、写損の対象となる医用画像それぞれの、写損理由の入力の設定に関する情報を取得する。必ず写損理由を入力するように設定されている場合には、入出力制御部126を介して表示部104に写損理由入力ダイアログ(図7)を表示させる。写損処理制御部127は、ステップS301で指示された写損に連動して写損とされた医用画像の画像情報には、他の医用画像に対する写損に連動して写損とされたことを示す情報を自動で登録してもよい。
ステップS416において、写損処理制御部127は、設定保存部124から送信可否設定と写損処理との連動の設定に関する情報を設定保存部124から取得する。送信可否設定と写損処理との連動の設定は、たとえば図9に示す設定907を介して設定される。送信可否設定を写損処理と連動させる設定の場合はステップS417に進み、連動させない設定の場合は図4に示す処理を終了する。
ステップS417において、写損処理制御部127はステップS414までの処理において写損処理の対象となった医用画像の画像情報の送信可否情報をOFFに設定する。これにより、制御装置101は図4に示す処理を終了する。
以上に示す処理により、本発明の実施形態に係る制御装置101はある医用画像に対する写損の指示に連動して、併せて写損処理を行うべき他の医用画像に対する写損処理を自動で行うことができ、ユーザの作業を効率化することができる。
図5は、制御装置101により行われる、写損を解除する処理の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体は、CPU201またはGPU207である。
ステップS501において、入出力制御部126は写損を解除するユーザの指示を受け付ける。写損の解除は、たとえば表示部104に表示されるインタフェースに対して操作部105を介して入力することにより行われる。検査制御部125は写損を解除する指示があった医用画像の画像IDを取得する。また、検査制御部125は保存部120及び設定保存部124から、写損を解除する指示があった医用画像の撮影手技情報と画像情報とを取得し、写損処理制御部127に送信する。検査制御部125は写損処理制御部127に、撮影手技情報や、画像IDを含む画像情報により特定される医用画像に対する写損を解除するように要求する。
ステップS502において、写損処理制御部127はステップS501で写損の解除が指示された医用画像の画像情報に含まれる写損情報をOFFに設定する。
ステップS503において、写損処理制御部127は設定保存部124から送信可否設定と写損処理との連動の設定907(図9)に関する情報を取得する。設定907がONに設定されている場合はステップS504に進み、OFFに設定されている場合はステップS505に進む。
ステップS504において、写損処理制御部127は、ステップS501において写損の解除が指示された医用画像の画像情報の送信可否情報をONに設定する。
ステップS505において、写損処理制御部127は、写損を解除する処理と他の医用画像の写損を解除する処理との連動の設定906(図9)に関する情報を設定保存部124から取得する。写損処理制御部127はさらに、ステップS501において写損の解除が指示された医用画像の画像情報に含まれる、写損連動元情報を取得する。図3及び図4において説明したように、写損連動元情報がONである医用画像は、ステップS301において写損が指示された医用画像であって、他の医用画像に対する連動した写損処理の契機となった医用画像であることを示す。設定906がONであり、かつステップS501で写損の解除が指示された医用画像の写損連動元情報がONである場合にはステップS506に進む。設定906がOFFまたは当該写損連動元情報がOFFの場合には、制御装置101は図5に示す処理を終了する。
ステップS506において、写損処理制御部127はステップS501で写損の解除が指示された医用画像の画像情報に含まれる写損連動情報を取得する。写損連動情報により、連動して写損の処理が行われた医用画像が特定される。
ステップS507において、写損処理制御部127はステップS506において特定された医用画像の写損情報をOFFに設定する。
ステップS508において、写損処理制御部127は写損を解除する処理と送信可否設定との連動の設定907(図9)に関する情報を設定保存部124から取得する。設定907がONの場合にはステップS509に進み、OFFの場合にはステップS510に進む。
ステップS509において、写損処理制御部127はステップS506において特定された医用画像の送信可否情報をOFFに設定する。
ステップS510において、写損処理制御部127はステップS509までの処理で写損を解除する処理の対象となった医用画像の写損情報を取得する。写損を解除する処理の対象である全ての医用画像の写損情報がOFFとなり、写損の解除が完了している場合にはステップS511に進む。写損の解除が完了していない場合にはステップS506に進んで上述した処理を繰り返す。
ステップS511において、写損処理制御部127はステップS501で写損の解除が指示された医用画像の連動元情報をOFFに設定し、写損連動情報に登録されている全ての画像IDを削除する。
以上により図5に示す処理は終了する。写損処理制御部127は検査制御部125に写損の解除の処理を完了したことを通知する。これにより、ある医用画像に対する写損の処理を他の医用画像に対して連動して行うことができる制御装置101において、同様にして、ある写損画像に対する写損の解除の処理を他の写損画像に対して連動して行うことができ、ユーザの手間を低減することができる。
図6は、撮像システム100で取得された医用画像に対する写損の指示及び解除を行うためのインタフェースの一例である。図6の例においては、撮像システム100で取得された超音波画像に対して光音響画像を重畳した重畳画像が表示されている。
検査画面601は、関連画像リスト602、関連画像アイテム603、写損指示部604、送信指示部605、画像表示部606、サムネイル画像表示部607、サムネイル画像608、ページ切替指示部609を含む。
関連画像リスト602は、サムネイル画像表示部607上で選択された状態となっているサムネイル画像608に関連付けられた全ての画像リストである。関連画像リスト602の全ての情報を一覧で表示部104に表示できない場合は、スクロールにより関連画像リスト602の表示切り替えがなされる。関連画像リスト602の各行には、関連画像アイテム603が表示される。なお、図6の例においては撮像種別に応じて関連画像リスト602が区別して表示されているが、検査において関連付けられて撮像された画像と対応する関連画像アイテム603を一つのリストに含めて表示してもよい。
関連画像アイテム603は、医用画像と1対1で対応するリストアイテムである。関連画像アイテム603内には、医用画像の名称を表す文字列、写損指示部604、送信指示部605が表示される。関連画像アイテム603には、医用画像の名称を表す文字列に代えて対応する医用画像のサムネイル画像が表示されてもよいし、当該文字列と当該サムネイル画像とが併せて表示されてもよい。ユーザは関連画像アイテム603に対する操作入力を行い、関連画像アイテム603を選択することができる。選択された関連画像アイテム603と対応する医用画像若しくは当該医用画像と関連する医用画像が画像表示部606に表示される。
写損指示部604は、関連画像アイテム603と対応する医用画像に対して写損処理を行うためのボタンである。写損処理が実行されると、当該医用画像と対応する写損情報306がONに切り替えられる。写損が解除されると、当該医用画像の画像情報に含まれる写損情報がOFFに切り替えられる。
送信指示部605は、関連画像アイテム603と対応する医用画像を外部装置に送信するか否かを個別に指示するためのボタンである。送信指示部605がONに設定されると、当該医用画像と対応する送信可否情報がONに切り替えられる。送信指示部605は、ONとOFFとの設定に応じて、異なる態様で表示される。図6の例では、ONの場合に送信指示部605aの態様で表示され、OFFの場合に送信指示部605bの態様で表示される。
このように、制御装置101においては関連画像アイテム603ごとに、すなわち医用画像ごとに写損処理や外部装置への送信を設定できる。また、写損指示部604と送信指示部605とを区別して設定可能とすることで、外部装置に送信されない理由が写損であるか否かを制御装置101は区別することができる。なお、図6の例においては、写損指示部604及び送信指示部605は関連画像リスト602の全ての関連画像アイテム603に対して表示され、設定可能である。この例に限らず、たとえば画像表示部606に表示されている医用画像に対応する関連画像アイテム603においてのみ、写損指示部604や送信指示部605が表示され、設定可能となるようにしてもよい。
画像表示部606は、撮像システム100で取得された医用画像を表示するための領域である。画像表示部606に表示される画像は、静止画、動画、波形データなどいずれの画像種別であってもよい。動画撮影中は、画像表示部606に画像がリアルタイムでプレビュー表示される。関連画像リスト602上で選択された関連画像アイテム603と対応する医用画像が、画像表示部606上にプレビュー表示される。
サムネイル画像表示部607は、検査において関連付けられた複数の医用画像の中で、基準として選択された医用画像と対応するサムネイル画像が表示される領域である。サムネイル画像表示部607には、写損指示部604、送信指示部605、サムネイル画像608、ページ切替指示部609が含まれる。図6に示す例では、超音波画像の一例である、一連のBモード画像のサムネイル画像が取得された時系列の順で表示されている。
サムネイル画像表示部607には、例えば1回の撮影手技において取得され医用画像のまとまりごとに、それぞれの医用画像と対応するサムネイル画像608が表示される。動画像が取得された場合は、当該動画像に含まれる複数フレームのうち、代表フレーム画像と対応するサムネイル画像608が表示される。検査画面601において、検査が終了するまで、医用画像が取得されるたびにサムネイル画像表示部607上に順次取得された医用画像と対応するサムネイル画像608が追加される。
サムネイル画像表示部607上に表示されるサムネイル画像608に対する操作入力に応じて、画像表示部606にプレビュー表示させる医用画像が選択される。選択されたサムネイル画像608はプレビュー選択状態(608a)となり、選択されていないサムネイル画像608は非プレビュー状態(608b)となる。また、画像表示部606にプレビュー表示させるサムネイル画像608が切り替えられたことに伴い、サムネイル画像表示部607に含まれる写損指示部604、送信指示部605の表示、及び関連画像リスト602内に表示されている関連画像アイテム603が更新される。サムネイル画像表示部607に含まれる写損指示部604、送信指示部605は、選択されているサムネイル画像608aに関わる写損設定及び送信可否設定を示す。全てのサムネイル画像608をサムネイル画像表示部607に表示できない場合は、ページ切替指示部609が有効化される。サムネイル画像608群の左右に表示されるページ切替指示部609が押下されることに応じて、サムネイル画像表示部607に表示されるサムネイル画像608の一覧が切り替わる。
図7は、写損理由をユーザに入力させるための写損理由入力ダイアログ701の一例である。図6に示す写損指示部604を介して写損が指示されると、写損理由入力ダイアログ701が検査画面601上にポップアップ表示される(図7(a))。ただし、写損理由の入力に関する設定904がOFFの場合には、ダイアログ701は表示されない。ダイアログ701の大きさや表示させる場所は、任意に変更可能である。ダイアログ701は、入力部702、選択部703、キャンセル部704、流用指示部705、確定部706を含む(図7(b))。
入力部702は、ユーザが写損理由を入力し、編集するための領域である。なお、写損対象の画像情報に写損理由が設定されている場合は、入力部702に当該設定されている写損理由が表示される。
選択部703は、予め登録された写損理由の中からユーザが写損理由を選択するための領域である。写損理由は、事前に写損理由を表す文字列や選択部703における表示順序をユーザが設定することができる。設定された内容は設定保存部124に保存される。ユーザが選択部703のリストから写損理由を選択すると、選択された写損理由が入力部702に入力される。
キャンセル部704は、入力された写損理由の内容を破棄する指示のためのボタンである。キャンセル部704への操作入力により、ダイアログ701が閉じられる。
流用指示部705は、入力部702に入力さえた写損理由を確定し、さらに当該確定された写損理由を他の医用画像に対する写損理由として流用することを指示するためのボタンである。これにより、ある医用画像に対する写損指示と連動して写損処理が行われる他の医用画像に対しても、同様の写損理由が入力される。写損理由が確定すると、ダイアログ701が閉じられる。
確定部706は、入力部702に入力された写損理由の確定を指示するボタンである。写損理由が確定すると、ダイアログ701が閉じられる。
図8は、ある医用画像に対して写損処理が行われた後の検査画面601の一例である。写損処理が行われた関連画像アイテム603には、写損マーク801aが表示される。また、写損指示部604は写損解除部802に切り替わる。写損解除部802は、写損が指示された医用画像の写損を解除する指示を行うためのボタンである。写損を解除する処理が実施されると、図5に示す処理が実施される。写損が解除された医用画像の関連画像アイテム603には、写損マーク801が表示されなくなる。また、写損解除部802は写損指示部604に切り替わる。また、サムネイル画像表示部607内のサムネイル画像に対して写損が指示された場合は、対象のサムネイル画像上に写損マーク801が表示される(サムネイル801b)。
図9は、写損に関する各種の設定を行うための設定画面901の一例である。設定画面901においいて設定された情報は、設定保存部124に保存される。領域902には設定を行う撮影手技の名称が表示される。ここでは、ある撮影手技に関して各種の設定を行う画面の例を示すが、制御装置101の処理を一括して各種の設定を行えるようにしてもよい。
設定903は、制御装置101で一括して設定を行うか否かを選択するための設定である。設定903がONに設定されると、領域902に表示される撮影手技で取得された医用画像に対する写損処理において、システム設定が適用される。システム設定とは、図9に示す設定とは別に予め定められた設定であり、設定903がONになっている全ての撮影手技の写損処理に対して適用される設定である。設定903がOFFに設定されると、領域902に示す撮影手技に対して、以下に示すような個別の設定が適用される。
設定904は、写損理由の入力に関する設定である。設定904がONに設定されると、写損理由をユーザに入力させるためのインタフェースであるダイアログ701(図7)が表示部104に表示される。ダイアログ701に写損理由が入力され、確定された後に、写損処理が行われる。
設定905は、ある医用画像に対する写損処理を他の医用画像に連動させるか否かを選択するための設定である。設定905がONに設定されると、以下に示す各種の設定に基づいて、他の医用画像の写損処理が連動して行われる。
設定906は、ある医用画像に対する写損解除の処理を他の医用画像に連動させるか否かを選択するための設定である。設定906がONに設定されると、写損解除の対象となる医用画像の写損処理が他の医用画像を連動して写損処理させていた場合に、当該写損解除の処理が同様にして他の医用画像に対して連動して行われる。
設定907は、ある医用画像に対して写損及び写損解除の処理が指示された際に、当該医用画像の送信可否に関する設定を連動して切り替えるか否かを選択するための設定である。設定907がONに設定されると、写損となった医用画像は外部装置に送信されないように、写損解除となった医用画像は外部装置に送信されるように、それぞれ自動的に送信可否設定が切り替えられる。
設定908は、ある医用画像に対する写損及び写損解除の処理を、当該医用画像と関連付けられた他の医用画像に対して連動させるための設定である。さらに、当該医用画像と関連付けられた他の医用画像との連動のためのルールが設定可能である。図9に示す例では、当該連動のためのルールは少なくとも「全て連動する」、「画像種別毎に連動する」を含む選択肢の中から選択可能である。設定908の内容については上述した説明を援用することにより、ここでの詳しい説明を省略する。
設定909は、画像種別毎の連動のルールを選択するための設定である。図9に示す例では、少なくとも「同一撮影方法で取得した画像全て連動する」、「同一撮影方法で取得した画像種別毎に連動する」、「カスタマイズ連動ルールを適用する」を含む選択肢の中から選択可能である。「同一撮影方法で取得した画像全て連動する」が選択された場合は、写損及び写損解除の対象となる画像に関連付けられた他の画像のうち、対象画像と同じ撮影方法で取得された画像群全てを連動させる。設定909の内容については上述した説明を援用することにより、ここでの詳しい説明を省略する。
設定910は、写損及び写損解除の処理を関連付けられた医用画像であって異なる撮影方法で取得された医用画像に対して連動させるか否かを選択するための設定である。設定910の内容については上述した説明を援用することにより、ここでの詳しい説明を省略する。
設定911は、連動のルールをユーザがカスタマイズするための設定である。図9に示す例では超音波信号と光音響信号とを取得可能な装置に対応するために、超音波画像と光音響画像とのそれぞれの画像種別毎の設定が示されている。設定911の編集ボタンをユーザが押下すると、カスタマイズ設定のためのダイアログ915が表示部104に表示される。
図9(b)はカスタマイズ設定のためのダイアログ915の一例である。領域916には設定を行う撮影手技の名称が表示される。設定表示部917には、入力された設定の内容が画像種別ごとにリスト表示される。
設定918は、画像種別ごとに写損及び写損解除の連動に関する設定を行うための領域である。編集の対象となる画像種別が選択される。そして、当該選択された画像種別の医用画像に対する写損及び写損解除の処理を連動させたい画像種別が選択される。キャンセル部919により編集内容が破棄され、確定部920により編集内容が確定される。編集内容のキャンセル及び確定に応じて、ダイアログ915が閉じられ、設定911にその内容が反映される。
設定912は、1回の照射内に含まれる医用画像、すなわち関連付けられた複数の医用画像の間で、写損及び写損解除の処理を連動させるか否かを選択するための設定である。設定912がONに設定されると、以下に述べる連動のルールに従って、当該関連付けられた複数の医用画像の間で連動した処理が行われる。当該連動のルールは、図9に示す例では少なくとも「全て連動する」、「対象画像の取得時刻以降に取得した画像を連動する」を含む選択肢の中から選択可能である。「全て連動する」が選択された場合は、写損及び写損解除の対象となる医用画像を含む、当該関連付けられた複数の医用画像の全てに対して連動した処理が行われる。「対象画像の取得時刻以降に取得した画像を連動する」が選択された場合は、写損及び写損解除の対象となる医用画像を含む、当該関連付けられた複数の医用画像うち、対象となる医用画像よりも後に取得された医用画像に対して連動した処理が行われる。
キャンセル部913により編集内容が破棄され、確定部914により編集内容が確定される。
[変形例]
上述の実施形態においては、写損の指示と、当該写損が指示された医用画像の外部装置に対する送信の可否を連動させる例を説明したが、本発明はこれに限らず、必ずしも写損と送信可否とを連動させなくてもよい。
上述の実施形態においては、ある医用画像に対する写損の指示に応じて、他の医用画像に対する写損の処理が連動される場合に、自動的に写損の処理が行われる例を説明した。本発明はこれに限らず、たとえば連動して写損の処理が行われるべき旨の判定を制御装置101が行った場合に、当該連動した写損の処理の対象となった医用画像を写損とするか否かを、ユーザに選択させるためのインタフェースを提供してもよい。検査で取得された全ての医用画像をユーザが観察して、写損であるか否かをユーザが判定する作業は、ユーザにとって手間のかかる作業であるおそれがある。このようにして写損の可能性がある医用画像が提示されることにより、ユーザのワークフローが向上する。
上述の実施形態においては、ある医用画像の写損を解除する指示に応じて、他の写損とされた医用画像に対する当該写損の解除の処理を連動させる例を説明した。本発明はこれに限らず、当該連動した写損の解除の処理を連動させる対象となった医用画像の写損を解除するか否かを、ユーザに選択させるためのインタフェースを提供してもよい。
上述の実施形態においては、図4に示す処理を行う例を示したが、本発明はこれに限らない。たとえば、図4に示すステップS402において特定された、略同一のタイミングで取得された医用画像を全て連動して写損としてもよい。また、ステップS403で示した処理を行わず、検査で取得された全画像の中から、画像種別や撮影方法に対して設定された条件に基づいて写損の処理を連動させるか否かを判定してもよい。すなわち、ステップS404の後にステップS407やステップS410で説明した処理を行うようにしてもよい。また、図4に示す処理において、ステップS403、ステップS407、及びステップS410で示した処理の全てを行う必要はなく、いずれか1つの処理、またはいずれか2つの処理の組合せを行ってもよい。
上述の実施形態においては、医用画像に付帯する画像種別や取得時刻といった情報に基づいて、写損の処理を連動させる例を説明したが、本発明はこれに限らない。たとえば、ある医用画像の写損の処理において入力された写損理由に基づいて連動させる医用画像を選択するようにしてもよい。たとえば、被検体が撮影中に動いたことが写損理由として入力されたならば、写損とされた医用画像よりも後に取得された医用画像を連動して写損としてもよい。別の例では、信号値の強度が不足していることが写損理由として入力されたならば、検査で取得された医用画像を全て写損としてもよい。また別の例では、光音響信号の取得に際して照射した光の波長が検査の予定と異なる波長であったことが写損理由として入力されたならば、少なくとも同一の照射により取得された光音響信号から生成される光音響画像を連動して写損としてもよい。
上述した実施形態において、写損とされた医用画像のサムネイル画像上若しくはその近傍に写損マークを表示する例を説明したが、本発明はこれに限らない。たとえば写損とされた医用画像上若しくはその近傍に写損マークを表示してもよい。別の例では、ユーザの指示により写損とされた場合と、他の医用画像に対する写損の指示に応じて連動して写損とされた場合とを、区別可能な写損マークとしてもよい。さらに別の例では、入力された写損理由を区別可能な写損マークとしてもよい。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
上述の各実施形態における制御装置は、単体の装置として実現してもよいし、複数の装置を互いに通信可能に組合せて上述の処理を実行する形態としてもよく、いずれも本発明の実施形態に含まれる。共通のサーバ装置あるいはサーバ群で、上述の処理を実行することとしてもよい。制御装置および制御システムを構成する複数の装置は所定の通信レートで通信可能であればよく、また同一の施設内あるいは同一の国に存在することを要しない。
本発明の実施形態には、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムのコードを読みだして実行するという形態を含む。
したがって、実施形態に係る処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明の実施形態の一つである。また、コンピュータが読みだしたプログラムに含まれる指示に基づき、コンピュータで稼働しているOSなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
上述の実施形態を適宜組み合わせた形態も、本発明の実施形態に含まれる。

Claims (18)

  1. 第1の医用画像に対する写損の指示を受け付ける受付手段と、
    前記第1の医用画像とは異なる医用画像である第2の医用画像を、前記第1の医用画像に付帯された情報に基づいて選択する選択手段と、
    前記第1の医用画像と、前記選択された前記第2の医用画像とを写損とする処理手段と、
    を有することを特徴とする制御装置。
  2. 医用画像を取得する取得手段をさらに有し、
    前記選択手段は、前記第1の医用画像に付帯された情報と、前記取得された医用画像に付帯された情報とに基づいて、前記取得手段により取得された医用画像の中から前記第2の医用画像を選択することを特徴とする請求項1に記載の制御装置。
  3. 前記第1の医用画像に付帯された情報は少なくとも前記第1の医用画像を生成するための信号が取得された時刻に関する情報を含み、前記取得された医用画像に付帯された情報は少なくとも前記取得された医用画像を生成するための信号が取得された時刻に関する情報を含み、
    前記選択手段は、前記第1の医用画像を生成するための信号が取得された時刻から所定の範囲内の時刻で取得された信号に基づいて生成された医用画像を前記第2の医用画像として選択することを特徴とする請求項2に記載の制御装置。
  4. 前記第2の医用画像を選択するための条件を設定する設定手段をさらに有し、
    前記選択手段は前記設定に基づいて前記第2の医用画像を選択することを特徴とする請求項1乃至請求項3のいずれか1項に記載の制御装置。
  5. 前記設定手段は、医用画像を外部に送信するための条件をさらに設定し、
    前記処理手段は、前記設定に基づいて前記第2の医用画像を外部に送信するか否かを判定することを特徴とする請求項4に記載の制御装置。
  6. 前記処理手段は、前記第2の医用画像を外部に送信しないように制御することを特徴とする請求項1乃至請求項4のいずれか1項に記載の制御装置。
  7. 前記第1の医用画像及び前記第2の医用画像のそれぞれは、超音波画像及び光音響画像のいずれかであることを特徴とする請求項1乃至請求項6のいずれか1項に記載の制御装置。
  8. 前記第1の医用画像が、被検体に第1の波長の光を照射して得られる第1の光音響信号に基づいて生成された光音響画像である場合に、
    前記選択手段は、前記第1の光音響信号に基づいて生成された光音響画像であって、前記第1の医用画像とは異なる光音響画像を前記第2の医用画像として選択することを特徴とする請求項7に記載の制御装置。
  9. 前記第1の医用画像が、被検体に第1の波長の光を照射して得られる第1の光音響信号と、前記被検体に前記第1の波長とは異なる第2の波長の光を照射して得られる第2の光音響信号とに基づいて生成された光音響画像である場合に、
    前記選択手段は、前記第1の光音響信号に基づいて生成された光音響画像と、前記第2の光音響信号に基づいて生成された光音響画像と、前記第1の光音響信号と前記第2の光音響信号とに基づいて生成された光音響画像と、の少なくともいずれかを前記第2の医用画像として選択することを特徴とする請求項7に記載の制御装置。
  10. 前記選択手段は、前記第1の医用画像を生成するための信号が取得された時刻よりも後に取得された信号に基づいて生成された医用画像を前記第2の医用画像として選択することを特徴とする請求項1乃至請求項9のいずれか1項に記載の制御装置。
  11. 前記受付手段は、前記第1の医用画像又は前記第2の医用画像に対する前記写損を解除する指示を受け付けることを特徴とする請求項1乃至請求項10のいずれか1項に記載の制御装置。
  12. 前記受付手段が、前記第1の医用画像に対する前記写損を解除する指示を受け付けた場合に、
    前記選択手段は前記第2の医用画像を選択し、
    前記処理手段は前記第1の医用画像と、前記第2の医用画像とに対する前記写損を解除することを特徴とする請求項11に記載の制御装置。
  13. 前記処理手段は、前記写損が解除された医用画像を外部装置に送信するように制御することを特徴とする請求項11又は請求項12のいずれか1項に記載の制御装置。
  14. 前記選択手段は、医用画像に付帯された情報のうち、当該医用画像の種別を示す情報と、当該医用画像画取得された時刻との少なくともいずれかを用いて前記第2の医用画像を選択することを特徴とする請求項1乃至請求項13のいずれか1項に記載の制御装置。
  15. 第1の医用画像に対する写損の指示を受け付ける受付工程と、
    前記第1の医用画像とは異なる医用画像である第2の医用画像を、前記第1の医用画像に付帯された情報に基づいて選択する選択工程と、
    前記第1の医用画像と、前記選択された前記第2の医用画像とを写損とする処理工程と、
    を有することを特徴とする制御方法。
  16. 第1の医用画像に対する写損の指示を受け付ける受付手段と、
    前記第1の医用画像とは異なる医用画像である第2の医用画像を、前記第1の医用画像に付帯された情報に基づいて選択する選択手段と、
    前記第1の医用画像と、前記選択された前記第2の医用画像とを写損とする処理手段と、
    を有することを特徴とする制御システム。
  17. 被検体に対する超音波の送受信により超音波信号を出力し、被検体への光照射により発生する光音響波を受信することにより光音響信号を出力するプローブと、
    前記プローブから、前記超音波信号と前記光音響信号とのうち少なくともいずれかを取得して医用画像を取得する取得手段と、
    を更に有することを特徴とする請求項16に記載の制御システム。
  18. 第1の医用画像に対する写損の指示を受け付ける受付工程と、
    前記第1の医用画像と関連する医用画像であって、前記第1の医用画像とは異なる医用画像である第2の医用画像を、前記第1の医用画像に付帯された情報に基づいて選択する選択工程と、
    前記第1の医用画像と、前記選択された前記第2の医用画像とを写損とする処理工程と、
    をコンピュータに実行させるためのプログラム。
JP2016198892A 2016-10-07 2016-10-07 制御装置、制御方法、制御システム及びプログラム Active JP6704828B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016198892A JP6704828B2 (ja) 2016-10-07 2016-10-07 制御装置、制御方法、制御システム及びプログラム
PCT/JP2017/036020 WO2018066571A1 (ja) 2016-10-07 2017-10-03 制御装置、制御方法、制御システム及びプログラム
US16/374,595 US20190223841A1 (en) 2016-10-07 2019-04-03 Control device, control method, control system, and non-transitory computer-readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016198892A JP6704828B2 (ja) 2016-10-07 2016-10-07 制御装置、制御方法、制御システム及びプログラム

Publications (2)

Publication Number Publication Date
JP2018057696A JP2018057696A (ja) 2018-04-12
JP6704828B2 true JP6704828B2 (ja) 2020-06-03

Family

ID=61831392

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016198892A Active JP6704828B2 (ja) 2016-10-07 2016-10-07 制御装置、制御方法、制御システム及びプログラム

Country Status (3)

Country Link
US (1) US20190223841A1 (ja)
JP (1) JP6704828B2 (ja)
WO (1) WO2018066571A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017099616A (ja) * 2015-12-01 2017-06-08 ソニー株式会社 手術用制御装置、手術用制御方法、およびプログラム、並びに手術システム
JP6929204B2 (ja) * 2017-11-15 2021-09-01 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
EP3785640A4 (en) * 2018-04-27 2021-04-07 FUJIFILM Corporation ULTRASONIC SYSTEM AND ULTRASOUND SYSTEM CONTROL PROCESS
JP6879277B2 (ja) * 2018-09-03 2021-06-02 コニカミノルタ株式会社 画像表示装置、放射線撮影システム、画像表示プログラム及び画像表示方法
JP7238671B2 (ja) * 2019-07-25 2023-03-14 コニカミノルタ株式会社 超音波画像診断装置、胎齢設定方法および胎齢設定プログラム
CN112438751A (zh) * 2019-09-04 2021-03-05 通用电气精准医疗有限责任公司 用于剪切波弹性成像的方法和系统以及存储有对应程序的介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014124268A (ja) * 2012-12-25 2014-07-07 Toshiba Corp 医用診断装置
US20160007972A1 (en) * 2013-03-25 2016-01-14 Hitachi Aloka Medical, Ltd. Ultrasonic imaging apparatus and ultrasound image display method

Also Published As

Publication number Publication date
WO2018066571A1 (ja) 2018-04-12
JP2018057696A (ja) 2018-04-12
US20190223841A1 (en) 2019-07-25

Similar Documents

Publication Publication Date Title
JP6704828B2 (ja) 制御装置、制御方法、制御システム及びプログラム
JP6708529B2 (ja) 制御装置、制御方法、制御システム及びプログラム。
JP5364238B2 (ja) 超音波診断装置、医用画像処理装置、及び医用画像処理プログラム
JP6104543B2 (ja) 超音波診断装置、超音波画像表示装置、及び超音波画像表示方法
JP2008183245A (ja) 超音波診断装置及び超音波画像表示プログラム
EP3522788B1 (en) Image display system, image display method, and program
JP2008136867A (ja) イメージング・パラメータの記憶法
WO2014038703A1 (ja) 超音波診断装置、医用画像処理装置及び画像処理プログラム
JP2018011949A (ja) 超音波画像及び光音響画像を表示させる装置、方法、及びプログラム
JP4802883B2 (ja) 医用画像システム
WO2018008661A1 (ja) 制御装置、制御方法、制御システム及びプログラム
JP6766215B2 (ja) 医用画像処理装置、超音波診断装置及び医用画像取込方法
US20190209137A1 (en) Information processing apparatus, information processing method, and storage medium
JP5202930B2 (ja) 超音波画像診断装置および情報処理装置
JP2018011928A (ja) 制御装置、制御方法、制御システム及びプログラム
JP5170287B2 (ja) 医用画像システム
US20190205336A1 (en) Information processing apparatus, information processing method, information processing system, and non-transitory computer-readable medium
JP7129158B2 (ja) 情報処理装置、情報処理方法、情報処理システムおよびプログラム
WO2018097050A1 (ja) 情報処理装置、情報処理方法、情報処理システムおよびプログラム
JP2010012028A (ja) 超音波診断装置、画像表示装置および画像表示プログラム
JP2003102727A (ja) 超音波診断装置及び画像再生装置
JP5170288B2 (ja) 医用画像システム
JP2018102750A (ja) 情報処理装置、情報処理方法、情報処理システム及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190924

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200414

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200513

R151 Written notification of patent or utility model registration

Ref document number: 6704828

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151