JP6665214B2 - Apparatus and processing program - Google Patents

Apparatus and processing program Download PDF

Info

Publication number
JP6665214B2
JP6665214B2 JP2018031628A JP2018031628A JP6665214B2 JP 6665214 B2 JP6665214 B2 JP 6665214B2 JP 2018031628 A JP2018031628 A JP 2018031628A JP 2018031628 A JP2018031628 A JP 2018031628A JP 6665214 B2 JP6665214 B2 JP 6665214B2
Authority
JP
Japan
Prior art keywords
image
joint
information
unit
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018031628A
Other languages
Japanese (ja)
Other versions
JP2018086421A (en
Inventor
順一 田代
順一 田代
益美 越智
益美 越智
泰介 三善
泰介 三善
健治 松江
健治 松江
恵太 三森
恵太 三森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to JP2018031628A priority Critical patent/JP6665214B2/en
Publication of JP2018086421A publication Critical patent/JP2018086421A/en
Application granted granted Critical
Publication of JP6665214B2 publication Critical patent/JP6665214B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明の実施形態は、装置及び処理プログラムに関する。 Embodiments of the present invention relate to an apparatus and a processing program .

近年、超音波診断装置が関節リウマチの検査に用いられており、観察項目の多い関節リウマチの検査では、簡便に繰り返し検査が容易な超音波診断装置が使用され、定期的な経過観察が行われている。超音波診断装置は、超音波プローブにより被検体内を超音波で走査して被検体内からの反射波を受信し、その反射波の強度分布を輝度情報に変換して受信信号を生成し、その後、生成した受信信号を基に被検体の内部状態を超音波画像(超音波断層像)として画像化する装置である。   In recent years, ultrasonic diagnostic equipment has been used for rheumatoid arthritis examinations, and in rheumatoid arthritis examinations with many observation items, ultrasonic diagnostic equipment that can be easily and repeatedly tested is used, and periodic follow-up is performed. ing. The ultrasonic diagnostic apparatus scans the inside of the subject with ultrasonic waves using an ultrasound probe, receives reflected waves from inside the subject, converts the intensity distribution of the reflected waves into luminance information, and generates a received signal, Thereafter, based on the generated reception signal, the internal state of the subject is imaged as an ultrasonic image (ultrasonic tomographic image).

検査や読影時、医師や読影医は現在検査あるいは読影している関節と同じ関節の過去画像を多数の過去画像から選択し、その選択した過去画像と現在画像を比較する作業を行っている。ところが、医師や読影医が多数の過去画像から所望の過去画像を選択する際、現在画像の関節と同じように見える関節画像が多数存在するため、画像選択に手間がかかり、作業効率が低下している。例えば、複数の過去画像を一枚ずつ表示させて所望の過去画像を選択したり、あるいは、画像リストを見て選択したりするため、画像選択に手間がかかり、作業効率が低下している。   At the time of examination or image interpretation, a doctor or a radiologist selects a past image of the same joint as the joint currently examined or interpreted from a large number of past images, and compares the selected past image with the current image. However, when a doctor or a radiologist selects a desired past image from a large number of past images, there are a large number of joint images that look the same as the joints of the current image. ing. For example, since a plurality of past images are displayed one by one to select a desired past image, or to select a desired past image while looking at an image list, it takes time and effort to select an image, and the work efficiency is reduced.

特開2004−57804号公報JP-A-2004-57804

本発明が解決しようとする課題は、作業効率の向上を実現することができる医用画像処理装置を提供することである。   The problem to be solved by the present invention is to provide a medical image processing apparatus that can achieve an improvement in work efficiency.

実施形態に係る装置は、取得部と表示処理部とを備える。取得部は、被検体の第1の関節に対応する超音波画像を取得する。表示処理部は、超音波画像および第1の関節を含むシェーマ画像を表示部に表示させる。また、表示処理部は、シェーマ画像の第1の関節に対応する部分の上に被検体の血流情報を重ねて表示させる。

An apparatus according to an embodiment includes an acquisition unit and a display processing unit. The acquisition unit acquires an ultrasound image corresponding to the first joint of the subject. The display processing unit causes the display unit to display the ultrasound image and the schema image including the first joint. In addition, the display processing unit causes the blood flow information of the subject to be displayed so as to be superimposed on a portion corresponding to the first joint of the schema image.

第1の実施形態に係るリウマチ診断装置の概略構成を示すブロック図である。It is a block diagram showing a schematic structure of a rheumatism diagnostic device concerning a 1st embodiment. 第1の実施形態に係る医用画像のデータ構成を説明するための説明図である。FIG. 4 is an explanatory diagram for describing a data configuration of a medical image according to the first embodiment. 第1の実施形態に係るインデックス情報を説明するための説明図である。FIG. 3 is an explanatory diagram for explaining index information according to the first embodiment. 第1の実施形態に係る医用画像保存処理の流れを説明するための説明図である。FIG. 4 is an explanatory diagram for describing a flow of a medical image storage process according to the first embodiment. 第1の実施形態に係る医用画像表示処理の流れを説明するための説明図である。FIG. 5 is an explanatory diagram for describing a flow of a medical image display process according to the first embodiment. 第2の実施形態に係るリウマチ診断装置の概略構成を示すブロック図である。It is a block diagram showing the schematic structure of the rheumatism diagnostic device concerning a 2nd embodiment. 第3の実施形態に係るリウマチ診断装置の概略構成を示すブロック図である。It is a block diagram showing the schematic structure of the rheumatism diagnostic device concerning a 3rd embodiment. 第3の実施形態に係る医用画像表示画面を説明するための第1の説明図である。FIG. 14 is a first explanatory diagram for describing a medical image display screen according to a third embodiment. 第3の実施形態に係る医用画像表示画面を説明するための第2の説明図である。It is a 2nd explanatory view for explaining the medical image display screen concerning a 3rd embodiment.

(第1の実施形態)
第1の実施形態について図1乃至図5を参照して説明する。
(First embodiment)
A first embodiment will be described with reference to FIGS.

図1に示すように、第1の実施形態に係るリウマチ診断装置(医用画像処理装置の一例)1は、被検体の内部状態を超音波画像として画像化する超音波診断装置2と、被検体の骨格を識別する骨格識別装置3と、医用画像を保管する医用画像保管装置4と、医用画像を表示する医用画像表示装置5とを備えている。これらの装置2〜5は、有線や無線のネットワーク(通信網)を介して接続されており、互いに通信が可能になっている。   As shown in FIG. 1, a rheumatism diagnostic apparatus (an example of a medical image processing apparatus) 1 according to the first embodiment includes an ultrasonic diagnostic apparatus 2 for imaging an internal state of a subject as an ultrasonic image, A medical image storage device 4 for storing medical images, and a medical image display device 5 for displaying medical images. These devices 2 to 5 are connected via a wired or wireless network (communication network) and can communicate with each other.

超音波診断装置2は、患者などの被検体に対して超音波の送受信(送受波)を行う超音波プローブ2aと、画像処理を行う画像処理部2bと、外部装置との通信を行う通信部2cと、超音波プローブ2aの状態(プローブ状態)を取得するプローブ状態取得部2dとを具備している。   The ultrasonic diagnostic apparatus 2 includes an ultrasonic probe 2a for transmitting / receiving (transmitting / receiving) ultrasonic waves to / from a subject such as a patient, an image processing unit 2b for performing image processing, and a communication unit for performing communication with an external device. 2c and a probe state acquisition unit 2d for acquiring the state (probe state) of the ultrasonic probe 2a.

超音波プローブ2aは、被検体の表面にその先端面を接触させた状態で、超音波の送受信を行う超音波探触子である。この超音波プローブ2aは複数の圧電振動子を内蔵しており、それらは先端面に二次元的に配列されている。超音波プローブ2aは、各圧電振動子により被検体内に超音波を送信してスキャン領域を走査し、被検体からの反射波をエコー信号として受信する。なお、このスキャン(走査)としては、例えばBモードスキャンやドプラモードスキャンなど各種のスキャンがある。   The ultrasonic probe 2a is an ultrasonic probe that transmits and receives ultrasonic waves in a state where the distal end surface is in contact with the surface of the subject. The ultrasonic probe 2a has a plurality of built-in piezoelectric vibrators, which are two-dimensionally arranged on the tip surface. The ultrasonic probe 2a transmits an ultrasonic wave into the subject by each of the piezoelectric vibrators, scans the scan area, and receives a reflected wave from the subject as an echo signal. In addition, as this scan (scan), for example, there are various scans such as a B-mode scan and a Doppler mode scan.

画像処理部2bは、超音波プローブ2aから供給された受信信号(反射信号)を解析し、医用画像である超音波画像、例えば、医用画像標準規格のDICOM(Digital Imaging and COmmunication in Medicine)に基づくDicom画像を生成する情報処理部である。Dicom画像は、超音波画像の画像情報と、その画像の付帯情報とにより構成されている。   The image processing unit 2b analyzes a received signal (reflected signal) supplied from the ultrasonic probe 2a, and is based on an ultrasonic image that is a medical image, for example, DICOM (Digital Imaging and Communication in Medicine) of the medical image standard. This is an information processing unit that generates a Dicom image. The Dicom image is composed of image information of an ultrasonic image and supplementary information of the image.

詳述すると、画像処理部2bは、Bモード処理部やドプラモード処理部、カラードプラモード処理部などを有している(いずれも図示せず)。Bモード処理部は、超音波プローブ2aからの受信信号の振幅情報の映像化を行い、Bモード信号のデータを生成する。ドプラモード処理部は、超音波プローブ2aからの受信信号からドプラ偏移周波数成分を取り出し、さらにFFT(高速フーリエ変換)処理などを施し、血流情報のドプラ信号のデータを生成する。カラードプラモード処理部は、超音波プローブ2aからの受信信号に基づいて血流情報の映像化を行い、カラードプラモード信号のデータを生成する。画像処理部2bは、それらのデータを元にBモード画像やドプラモード画像、カラードプラモード画像などの超音波画像の画像情報を生成し、さらに、その画像情報に付帯情報を付してDicom画像を生成する。   More specifically, the image processing unit 2b has a B-mode processing unit, a Doppler mode processing unit, a color Doppler mode processing unit, and the like (all not shown). The B-mode processing unit visualizes the amplitude information of the signal received from the ultrasonic probe 2a to generate B-mode signal data. The Doppler mode processing unit extracts the Doppler shift frequency component from the reception signal from the ultrasonic probe 2a, and performs FFT (Fast Fourier Transform) processing or the like to generate Doppler signal data of blood flow information. The color Doppler mode processing unit performs imaging of blood flow information based on a signal received from the ultrasonic probe 2a, and generates data of a color Doppler mode signal. The image processing unit 2b generates image information of an ultrasonic image such as a B-mode image, a Doppler mode image, and a color Doppler mode image based on the data, and further attaches supplementary information to the image information to generate a Dicom image. Generate

ここで、図2に示すように、所望部位の関節(例えば左手中指の第二関節)を撮影してその関節画像を保存した場合、画像処理部2bは、関節画像情報及びその関節画像の付帯情報を含むDicom画像(Dicom画像データ)を生成する。このときの関節画像情報としては、例えばBモード画像やドプラモード画像、カラードプラモード画像、Mモード画像などの画像情報が挙げられる。また、付帯情報(例えばタブ情報)としては、関節情報(例えば部位及び関節名など)、プローブ状態情報(例えば超音波プローブ2aの位置情報や角度情報など)、さらに、その他の情報(例えば患者情報や検査日時、オーダー番号など)が挙げられる。   Here, as shown in FIG. 2, when a joint at a desired site (for example, the second joint of the left middle finger) is photographed and the joint image is stored, the image processing unit 2 b determines joint image information and the accompanying image of the joint image. A Dicom image (Dicom image data) including information is generated. The joint image information at this time includes, for example, image information such as a B-mode image, a Doppler mode image, a color Doppler mode image, and an M-mode image. As additional information (for example, tab information), joint information (for example, site and joint name), probe state information (for example, position information and angle information of the ultrasonic probe 2a), and other information (for example, patient information) , Inspection date and time, order number, etc.).

また、関節情報の部位名としては、例えば左手や右手、左足、右足などがあり、関節名としては、例えばDIP関節(遠位指節間関節:第一関節)やPIP関節(近位指節間関節:第二関節)、MP関節(中手指節関節:第三関節)、CM関節(手根中手関節:第四関節)などがある。さらに、プローブ状態情報の位置情報としては、例えば超音波プローブ2aの絶対位置情報や超音波プローブ2aと撮影している関節との相対位置情報が挙げられる。   Examples of the part name of the joint information include a left hand, a right hand, a left foot, and a right foot. Examples of the joint name include a DIP joint (distal interphalangeal joint: first joint) and a PIP joint (proximal phalange). There are an inter-joint: a second joint), an MP joint (metacarpophalangeal joint: a third joint), a CM joint (carpal metacarpal joint: a fourth joint), and the like. Further, the position information of the probe state information includes, for example, absolute position information of the ultrasonic probe 2a and relative position information of the ultrasonic probe 2a and the joint being imaged.

図1に戻り、通信部2cは、無線や有線のネットワークを介して、例えば、医用画像標準規格のDICOMあるいは適宜既成の標準規格に基づいて、骨格識別装置3や医用画像保管装置4などの外部装置との通信を行う。例えば、通信部2cは、画像処理部2bにより生成されたDicom画像などの医用画像を医用画像保管装置4に送信する。   Returning to FIG. 1, the communication unit 2 c is connected to an external device such as the skeleton identification device 3 or the medical image storage device 4 via a wireless or wired network, for example, based on DICOM of medical image standard or appropriately established standard. Performs communication with the device. For example, the communication unit 2c transmits a medical image such as a Dicom image generated by the image processing unit 2b to the medical image storage device 4.

プローブ状態取得部2dは、超音波プローブ2aの位置(例えば空間座標)や角度(例えば傾斜角度)を検出して取得し、その位置情報や角度情報をプローブ状態情報として記録する。このプローブ状態取得部2dとしては、位置や角度を検出するセンサ、例えば、磁気センサや加速度センサ、ジャイロセンサ(ジャイロスコープ)、赤外線センサなどを用いることが可能である。このようなセンサが超音波プローブ2aに取り付けられている。   The probe state acquisition unit 2d detects and acquires the position (for example, spatial coordinates) and the angle (for example, the tilt angle) of the ultrasonic probe 2a, and records the position information and the angle information as probe state information. As the probe state acquisition unit 2d, a sensor that detects a position or an angle, for example, a magnetic sensor, an acceleration sensor, a gyro sensor (gyroscope), or an infrared sensor can be used. Such a sensor is attached to the ultrasonic probe 2a.

一例として、プローブ状態取得部2dが磁気センサである場合、磁界を発生させるトランスミッタ(磁場発生器)と、磁界の変化を受けるレシーバから構成されており、トランスミッタに対するレシーバの相対的な位置(x,y,z)と角度(azimuth,elevation,roll)の情報を取得することができる。超音波診断装置2では、トランスミッタが装置本体に付属し、レシーバが超音波プローブ2aに取り付けられる。   As an example, when the probe state acquisition unit 2d is a magnetic sensor, the probe state acquisition unit 2d includes a transmitter (magnetic field generator) that generates a magnetic field and a receiver that receives a change in the magnetic field, and the relative position (x, y, z) and angle (azimuth, elevation, roll) information can be obtained. In the ultrasonic diagnostic apparatus 2, a transmitter is attached to the apparatus main body, and a receiver is attached to the ultrasonic probe 2a.

骨格識別装置3は、患者や医師などの人体を撮影する撮影部3aと、骨格を識別する画像処理などの各種処理を実行する処理部3bと、外部装置との通信を行う通信部3cとを具備している。   The skeleton identification device 3 includes an imaging unit 3a for imaging a human body such as a patient or a doctor, a processing unit 3b for performing various processes such as image processing for identifying a skeleton, and a communication unit 3c for communicating with an external device. I have it.

撮影部3aは、患者や医師などの人体、特に、被検体の部位(例えば手や足など)を撮影して部位の状態を取得する。この撮影部3aとしては、例えば各種のカメラを用いることが可能である。なお、被検体である患者と医師を区別するため、撮影前にあらかじめ患者及び医師のどちらか一方に撮影部3aにより認識可能なマーカー(識別用マーカー)が付けられている。例えば、撮影対象部位が手である場合には、撮影前にあらかじめ患者及び医師のどちらか一方の手首などに識別用マーカーが付けられており、患者の手と医師の手を区別することが可能になっている。   The imaging unit 3a images a human body such as a patient or a doctor, in particular, a part (for example, a hand or a foot) of a subject to acquire a state of the part. As the photographing unit 3a, for example, various cameras can be used. Note that, in order to distinguish between the patient as a subject and a doctor, a marker (identification marker) recognizable by the imaging unit 3a is attached to one of the patient and the doctor before imaging. For example, when the imaging target is a hand, an identification marker is attached in advance to one of the patient and the doctor's wrist before imaging, so that the patient's hand and the doctor's hand can be distinguished. It has become.

処理部3bは、撮影部3aにより撮影された画像に対して画像処理を行って患者の骨格を認識し、認識した骨格に関する骨格情報を生成して取得する。骨格情報は手や足などの人体の絶対位置を規定する情報であり、処理部3bはその骨格情報から手や足などの位置を把握することが可能である。この処理部3bが骨格識別処理部として機能する。   The processing unit 3b performs image processing on the image captured by the imaging unit 3a to recognize the skeleton of the patient, and generates and acquires skeleton information regarding the recognized skeleton. The skeleton information is information that defines the absolute position of a human body such as a hand or foot, and the processing unit 3b can grasp the position of the hand or foot from the skeleton information. This processing unit 3b functions as a skeleton identification processing unit.

一例として、骨格識別装置3がキネクトである場合、距離センサ(赤外線プロジェクタ、赤外線カメラ)、映像センサ(映像カメラ)から構成されており、キネクトが認識した各骨格(関節)とその骨格毎の座標(x,y,z)を取得することができる。   As an example, when the skeleton identification device 3 is a kinect, the skeleton identification device 3 includes a distance sensor (an infrared projector or an infrared camera) and a video sensor (a video camera), and each skeleton (joint) recognized by the kinect and coordinates of each skeleton. (X, y, z) can be obtained.

通信部3cは、無線や有線のネットワークを介して、例えば、医用画像標準規格のDICOMあるいは適宜既成の標準規格に基づいて、超音波診断装置2などの外部装置との通信を行う。例えば、通信部3cは、処理部3bにより取得された骨格情報を超音波診断装置2に送信する。   The communication unit 3c communicates with an external device such as the ultrasonic diagnostic apparatus 2 via a wireless or wired network based on, for example, DICOM of medical image standard or an appropriately established standard. For example, the communication unit 3c transmits the skeleton information acquired by the processing unit 3b to the ultrasonic diagnostic apparatus 2.

医用画像保管装置4は、医用画像(例えばDicom画像)を保存する画像保存部4aと、インデックス情報を保存するインデックス情報保存部4bと、保存処理などの各種処理を実行する処理部4cと、外部装置との通信を行う通信部4dとを具備している。   The medical image storage device 4 includes an image storage unit 4a that stores a medical image (for example, a Dicom image), an index information storage unit 4b that stores index information, a processing unit 4c that performs various processes such as a storage process, and an external device. A communication unit 4d for communicating with the device.

画像保存部4aは、超音波診断装置2から送信されたDicom画像などの医用画像を記憶する画像記憶部である。この画像保存部4aは、例えば、大容量のHDD(ハードディスクドライブ)やフラッシュメモリを有するSSD(ソリッドステートドライブ)などの記憶部を有しており、この記憶部に情報を保存する。   The image storage unit 4a is an image storage unit that stores a medical image such as a Dicom image transmitted from the ultrasonic diagnostic apparatus 2. The image storage unit 4a includes a storage unit such as a large-capacity HDD (hard disk drive) or an SSD (solid state drive) having a flash memory, and stores information in the storage unit.

インデックス情報保存部4bは、関節情報やプローブ状態情報などの各種情報を含むインデックス情報を保存する保存部である。このインデックス情報保存部4bは、例えば、大容量のHDDやフラッシュメモリを有するSSDなどの記憶部を有しており、この記憶部に情報を保存する。なお、記憶部としては、前述の画像保存部4aの記憶部を共用するようにしても良い。   The index information storage unit 4b is a storage unit that stores index information including various information such as joint information and probe state information. The index information storage unit 4b has a storage unit such as an SSD having a large-capacity HDD or a flash memory, and stores information in this storage unit. In addition, as the storage unit, the storage unit of the above-described image storage unit 4a may be shared.

ここで、図3に示すように、インデックス情報を格納するインデックステーブルがインデックス情報保存部4bに保存されている。患者ID(Identifier)、関節情報、プローブ状態情報、画像UID(UNIQUE Identifier)及びその他の情報がインデックス情報として一組にされ、インデックステーブルに格納される。このインデックステーブルは過去画像の検索のために用いられるが、詳しくは後述する。   Here, as shown in FIG. 3, an index table for storing index information is stored in the index information storage unit 4b. The patient ID (Identifier), joint information, probe state information, image UID (UNIQUE Identifier) and other information are grouped as index information and stored in an index table. This index table is used for searching for a past image, and will be described later in detail.

図1に戻り、処理部4cは、前述の保存処理やインデックス情報生成処理などの各種処理を行う情報処理部である。例えば、インデックス情報生成処理では、Dicom画像の付帯情報(例えばタブ情報)から、患者IDや関節情報、プローブ状態情報、画像UID、その他の情報を読み込んで前述のようなインデックス情報(図3参照)を生成する。   Returning to FIG. 1, the processing unit 4c is an information processing unit that performs various processes such as the above-described storage process and index information generation process. For example, in the index information generation processing, the patient ID, joint information, probe state information, image UID, and other information are read from the supplementary information (for example, tab information) of the Dicom image, and the above-described index information (see FIG. 3) Generate

通信部4dは、無線や有線のネットワークを介して、例えば、医用画像標準規格のDICOMあるいは適宜既成の標準規格に基づいて、超音波診断装置2や医用画像表示装置5などの外部装置との通信を行う。例えば、通信部4dは、超音波診断装置2からDicom画像などの医用画像を受信し、あるいは、医用画像表示装置5にDicom画像などの医用画像を送信する。   The communication unit 4d communicates with an external device such as the ultrasonic diagnostic apparatus 2 or the medical image display device 5 via a wireless or wired network, for example, based on DICOM of medical image standard or appropriately established standard. I do. For example, the communication unit 4d receives a medical image such as a Dicom image from the ultrasonic diagnostic apparatus 2, or transmits a medical image such as a Dicom image to the medical image display device 5.

医用画像表示装置5は、各種画像を表示する表示部5aと、表示処理などの各種処理を実行する処理部5bと、外部装置との通信を行う通信部5cと、医師や読影医などの操作者によって入力操作される操作部5dとを具備している。   The medical image display device 5 includes a display unit 5a that displays various images, a processing unit 5b that performs various processes such as display processing, a communication unit 5c that communicates with an external device, and an operation performed by a doctor or a radiologist. And an operation unit 5d operated by a user.

表示部5aは、医用画像や操作画面(例えば操作者から各種指示を受け付けるためのGUI(グラフィックインターフェイス))などの各種画像を表示する表示装置である。この表示部5aとしては、例えば、液晶ディスプレイや有機EL(エレクトロルミネッセンス)ディスプレイなどを用いることが可能である。   The display unit 5a is a display device that displays various images such as a medical image and an operation screen (for example, a GUI (graphic interface) for receiving various instructions from an operator). As the display unit 5a, for example, a liquid crystal display, an organic EL (electroluminescence) display, or the like can be used.

処理部5bは、表示部5aの表示画面の所定位置に画像を配置して表示する表示処理を行う表示処理部である。例えば、複数の画像を表示する場合には、各画像を見やすいように並べて表示する表示処理を実行する。   The processing unit 5b is a display processing unit that performs display processing for arranging and displaying an image at a predetermined position on the display screen of the display unit 5a. For example, when displaying a plurality of images, a display process for displaying the images side by side so as to be easily viewable is executed.

通信部5cは、無線や有線のネットワークを介して、例えば、医用画像標準規格のDICOMあるいは適宜既成の標準規格に基づいて、医用画像保管装置4などの外部装置との通信を行う。例えば、通信部5cは、医用画像保管装置4からDicom画像などの医用画像を受信する。   The communication unit 5c communicates with an external device such as the medical image storage device 4 via a wireless or wired network based on, for example, DICOM of medical image standard or an appropriately established standard. For example, the communication unit 5c receives a medical image such as a Dicom image from the medical image storage device 4.

操作部5dは、医師や読影医などの操作者(ユーザ)による入力操作を受け付ける入力部であり、例えば、画像表示や画像の切り替え、各種設定などの様々な入力操作を受け付ける。この操作部5dとしては、例えば、ボタンやキーボード、マウスなどの入力デバイスを用いることが可能である。   The operation unit 5d is an input unit that receives an input operation by an operator (user) such as a doctor or a radiologist, and receives various input operations such as image display, image switching, and various settings. As the operation unit 5d, for example, an input device such as a button, a keyboard, and a mouse can be used.

次に、前述のリウマチ診断装置1が行う医用画像保存処理及び医用画像表示処理について図4及び図5を参照して説明する。まず、医用画像(Dicom画像)保存処理について図4を参照して説明し、医用画像(Dicom画像)表示処理について図5を参照して説明する。   Next, a medical image storage process and a medical image display process performed by the above-described rheumatism diagnosis apparatus 1 will be described with reference to FIGS. First, the medical image (Dicom image) storage processing will be described with reference to FIG. 4, and the medical image (Dicom image) display processing will be described with reference to FIG.

<医用画像保存処理>
図4に示すように、まず、超音波診断装置2及び骨格識別装置3は初期化処理を実行する(ステップS1)。この初期化処理では、あらかじめ決められた部位に超音波プローブ2aを当て、プローブ状態取得部2dからその位置のプローブ状態情報(例えば位置情報及び角度情報など)と、関節特定部として機能する画像処理部2bから、初期化処理時に使用することが決められた部位の位置(x,y,z)を取得し、それぞれの座標系のキャリブレーション(位置合わせ)を行い、超音波プローブ2aの絶対的な位置や手足の絶対的な位置(例えば、超音波プローブで撮影している関節や、どちらが手のひらで甲なのかなど)を把握する。
<Medical image storage processing>
As shown in FIG. 4, first, the ultrasonic diagnostic apparatus 2 and the skeleton identification apparatus 3 execute an initialization process (step S1). In this initialization processing, the ultrasonic probe 2a is applied to a predetermined site, the probe state information (for example, position information and angle information, etc.) of the position is obtained from the probe state acquisition unit 2d, and the image processing functioning as a joint identification unit is performed. The position (x, y, z) of a part determined to be used at the time of initialization processing is acquired from the unit 2b, calibration (positioning) of each coordinate system is performed, and the absolute position of the ultrasonic probe 2a is determined. And the absolute position of the limb (for example, the joint being imaged by the ultrasonic probe or which is the back of the hand with the palm).

超音波診断装置2は、所望部位(例えば手や足など)の関節に当てられた超音波プローブ2aにより所望部位の関節状態を撮影してその関節の画像情報を取得し、さらに、その撮影時の超音波プローブ2aの状態情報をプローブ状態取得部2dにより取得する(ステップS2)。その後、所定タイミング(例えばユーザのボタン押下によるタイミング)で、それらの関節画像情報及びプローブ状態情報を保存する(ステップS3)。   The ultrasonic diagnostic apparatus 2 captures the joint state of the desired part by using the ultrasonic probe 2a applied to the joint of the desired part (for example, hand or foot), acquires image information of the joint, The state information of the ultrasonic probe 2a is acquired by the probe state acquisition unit 2d (step S2). After that, the joint image information and the probe state information are stored at a predetermined timing (for example, when the user presses a button) (step S3).

骨格識別装置3は、医用画像保存処理中、超音波プローブ2aにより撮影している関節を含む部位(例えば手や足など)を撮影部3aによって常時撮影し(ステップS4)、前述のステップS3の保存タイミングで、撮影部3aにより撮影している部位の骨格情報を処理部3bにより取得して保存し(ステップS5)、さらに、その骨格情報を通信部3cにより超音波診断装置2に送信する(ステップS6)。   During the medical image storage process, the skeleton identification device 3 constantly captures a part (for example, a hand or a foot) including the joint captured by the ultrasonic probe 2a by the imaging unit 3a (step S4), and performs the processing in step S3 described above. At the storage timing, the processing unit 3b acquires and stores the skeleton information of the part imaged by the imaging unit 3a (step S5), and transmits the skeleton information to the ultrasonic diagnostic apparatus 2 by the communication unit 3c (step S5). Step S6).

ここで、例えば、撮影対象部位が手である場合には、ステップS6において手の骨格情報を送信するが、このとき送信する骨格情報としては、撮影対象部位の骨格情報を含む情報であれば良く、撮影により取得した骨格情報の全てを送信するようにしても良い。   Here, for example, when the imaging target region is a hand, the skeleton information of the hand is transmitted in step S6, and the skeleton information to be transmitted at this time may be any information including the skeleton information of the imaging target region. Alternatively, all of the skeletal information acquired by imaging may be transmitted.

超音波診断装置2は、骨格識別装置3から送信された骨格情報を通信部2cにより受信し、その受信した骨格情報や前述のプローブ状態情報などの各種情報を用いて、画像処理部2bによりDicom画像を生成し、その生成したDicom画像を通信部2cにより医用画像保管装置4に送信する(ステップS7)。   The ultrasonic diagnostic apparatus 2 receives the skeleton information transmitted from the skeleton identifying apparatus 3 by the communication unit 2c, and uses the received skeleton information and various kinds of information such as the above-described probe state information to perform Dicom by the image processing unit 2b. An image is generated, and the generated Dicom image is transmitted to the medical image storage device 4 by the communication unit 2c (step S7).

このステップS7において、超音波診断装置2は、画像処理部2bを用いて骨格情報とプローブ状態情報に基づき、超音波プローブ2aにより撮影している関節を特定し、その特定した関節に係る関節情報(例えば部位及び関節名など)を生成する。その後、この関節情報に加え、プローブ状態情報(例えば位置情報及び角度情報など)及びその他の情報(例えば検査日時やオーダー番号など)を付帯情報とし、関節画像情報と共にDicom画像を生成する。この超音波診断装置2の画像処理部2bが関節特定部及び情報処理部として機能する。   In step S7, the ultrasonic diagnostic apparatus 2 specifies a joint imaged by the ultrasonic probe 2a based on the skeleton information and the probe state information using the image processing unit 2b, and joint information relating to the specified joint. (For example, site and joint names). Thereafter, in addition to the joint information, probe state information (for example, position information and angle information, etc.) and other information (for example, examination date and time, order number, etc.) are used as supplementary information, and a Dicom image is generated together with the joint image information. The image processing unit 2b of the ultrasonic diagnostic apparatus 2 functions as a joint specifying unit and an information processing unit.

なお、関節の特定方法としては、骨格識別の処理部3bにて取得した各骨格の座標と、プローブ状態取得部2dにより取得した超音波プローブ2aの座標を比較し、一致している、あるいは、近似値の座標を持つ骨格を、現在撮影している骨格と判断する。   In addition, as a method of specifying a joint, the coordinates of each skeleton acquired by the skeleton identification processing unit 3b are compared with the coordinates of the ultrasonic probe 2a acquired by the probe state acquisition unit 2d, and the coordinates match. The skeleton having the coordinates of the approximate value is determined as the skeleton currently being photographed.

医用画像保管装置4は、超音波診断装置2から送信されたDicom画像を受信し、その受信したDicom画像を画像保存部4aにより保存し(ステップS8)、さらに、Dicom画像の付帯情報(例えばタブ情報)から、患者IDや関節情報、プローブ状態情報、画像UID、その他の情報などを読み込んでインデックス情報を処理部4cにより生成し、その生成したインデックス情報をインデックス情報保存部4bにより保存する(ステップS9)。   The medical image storage device 4 receives the Dicom image transmitted from the ultrasonic diagnostic device 2, stores the received Dicom image in the image storage unit 4a (step S8), and further stores the additional information of the Dicom image (for example, tabs). Information), patient information, joint information, probe state information, image UID, other information, etc. are read, index information is generated by the processing unit 4c, and the generated index information is stored by the index information storage unit 4b (step). S9).

<医用画像表示処理>
図5に示すように、医用画像表示装置5は、医用画像保管装置4に対し、所望患者の最新画像の取得依頼を行う(ステップS11)。このとき、医用画像表示装置5は、操作部5dに対する操作者の入力操作、すなわち所望患者を指定する入力操作に応じ、その所望患者の最新画像を取得するための取得依頼を医用画像保管装置4に対して行う。
<Medical image display processing>
As shown in FIG. 5, the medical image display device 5 requests the medical image storage device 4 to acquire the latest image of the desired patient (step S11). At this time, the medical image display device 5 issues an acquisition request for acquiring the latest image of the desired patient in response to the input operation of the operator on the operation unit 5d, that is, the input operation of designating the desired patient. Do for

医用画像保管装置4は、医用画像表示装置5からの取得依頼を受け、対応する所望患者の最新画像を通信部4dにより医用画像表示装置5に送信する(ステップS12)。医用画像表示装置5は、医用画像保管装置4から送信された最新画像を通信部5cにより受信し(ステップS13)、その受信した最新画像を表示部5aにより表示する(ステップS14)。   The medical image storage device 4 receives the acquisition request from the medical image display device 5, and transmits the latest image of the corresponding desired patient to the medical image display device 5 by the communication unit 4d (step S12). The medical image display device 5 receives the latest image transmitted from the medical image storage device 4 by the communication unit 5c (step S13), and displays the received latest image on the display unit 5a (step S14).

さらに、医用画像保管装置4は、医用画像表示装置5に送信した最新画像を元に、その最新画像に対応する比較画像を処理部4cにより選択し、選択した比較画像を通信部4dにより医用画像表示装置5に送信する(ステップS15)。このとき、医用画像保管装置4は、処理部4cを用いて最新画像の付帯情報とインデックス情報保存部4b内のインデックステーブルに基づき、複数の過去画像の中から患者IDや関節情報、プローブ状態情報が最新画像と一致する過去画像を選択し、選択した過去画像を比較画像として医用画像表示装置5に送信する。この医用画像保管装置4の処理部4cが情報選択部として機能する。   Further, the medical image storage device 4 selects a comparison image corresponding to the latest image by the processing unit 4c based on the latest image transmitted to the medical image display device 5, and the selected comparison image is transmitted to the medical image by the communication unit 4d. The data is transmitted to the display device 5 (step S15). At this time, the medical image storage device 4 uses the processing unit 4c to extract patient ID, joint information, and probe state information from a plurality of past images based on the supplementary information of the latest image and the index table in the index information storage unit 4b. Selects a past image that matches the latest image, and transmits the selected past image to the medical image display device 5 as a comparison image. The processing unit 4c of the medical image storage device 4 functions as an information selection unit.

なお、過去画像の選択時、患者IDや関節情報、プローブ状態情報が最新画像と一致する過去画像が多数存在する場合には、それら全ての過去画像を選択して送信するようにしても良いし、あるいは、その一部、例えばその中で一番新しい日時の過去画像だけを選択して送信するようにしても良い。   When a past image is selected, if there are many past images whose patient ID, joint information, and probe state information match the latest image, all of these past images may be selected and transmitted. Alternatively, it is also possible to select and transmit only a part of the past image, for example, only the latest image of the latest date and time.

医用画像表示装置5は、医用画像保管装置4から送信された比較画像を通信部5cにより受信し(ステップS16)、その受信した比較画像を表示部5aにより表示する(ステップS17)。このとき、医用画像表示装置5は、表示部5aを用いて最新画像と比較画像(過去画像)との比較が容易となるようにそれらの画像を並べて表示する。   The medical image display device 5 receives the comparative image transmitted from the medical image storage device 4 by the communication unit 5c (step S16), and displays the received comparative image on the display unit 5a (step S17). At this time, the medical image display device 5 displays the images side by side using the display unit 5a so that the latest image and the comparison image (past image) can be easily compared.

このような医用画像保存処理及び表示処理によれば、最新画像と同じ関節の過去画像が多数の過去画像から自動的に選択され、その最新画像と共に表示されることになる。これにより、医師又は読影医は、現在検査又は読影している関節の最新画像と、その最新画像と同じ関節の過去画像を容易に比較することができる。特に、最新画像と過去画像の比較のために最新画像と同じ関節の過去画像を多数の過去画像から選択する作業を行う必要がなくなる。例えば、多数の過去画像を一枚ずつ表示させて所望の過去画像を選択したり、画像リストを見て選択したりする必要がなくなるため、選択作業の煩雑さを軽減することが可能となり、リウマチ診断に係る作業効率を向上させることができる。   According to such medical image storage processing and display processing, a past image of the same joint as the latest image is automatically selected from many past images, and is displayed together with the latest image. Thus, the doctor or the radiologist can easily compare the latest image of the joint currently examined or interpreted with the past image of the same joint as the latest image. In particular, there is no need to perform an operation of selecting a past image having the same joint as the latest image from many past images in order to compare the latest image with the past image. For example, since there is no need to display a large number of past images one by one and select a desired past image, or to select a desired past image by looking at an image list, it is possible to reduce the complexity of the selection operation, and it is possible to reduce rheumatism. The work efficiency related to the diagnosis can be improved.

以上説明したように、第1の実施形態によれば、撮影対象となる関節を特定し、その特定した関節に関する関節情報をその関節の医用画像の付帯情報とすることによって、保存した医用画像がどの関節の医用画像であるかを付帯情報から容易に把握することが可能となる。これにより、医師又は読影医などが、現在検査あるいは読影している関節と同じ関節の過去画像を多数の過去画像から選択するような作業の煩雑さが軽減されるので、作業効率の向上を実現することができる。   As described above, according to the first embodiment, a joint to be imaged is specified, and the joint information relating to the specified joint is set as supplementary information of the medical image of the joint, whereby the stored medical image can be obtained. It is possible to easily grasp which joint is a medical image from the accompanying information. This reduces the complexity of the operation such as selecting a past image of the same joint as the currently examined or interpreted joint from a large number of past images by a doctor or a radiologist, thereby improving work efficiency. can do.

また、前述の関節情報に加えプローブ状態情報も付帯情報とすることによって、保存した医用画像がどの関節の医用画像であるかに加え、どのようなプローブ状態、すなわちどのような撮影方向で撮影された医用画像であるかを付帯情報から容易に把握することが可能となる。これにより、医師又は読影医などが、現在検査あるいは読影している関節と同じ関節で同じ撮影方向の過去画像を多数の過去画像から選択するような作業の煩雑さが軽減されるので、作業効率の向上を実現することができる。   Further, by making the probe state information additional information in addition to the above-described joint information, in addition to which joint the stored medical image is a medical image of, the probe state, that is, the imaging direction, Whether the image is a medical image can be easily grasped from the supplementary information. This reduces the complexity of the operation of selecting a past image in the same shooting direction from a large number of past images at the same joint as the joint currently being examined or interpreted by a doctor or a radiologist, thereby improving work efficiency. Can be improved.

(第2の実施形態)
第2の実施形態について図6を参照して説明する。なお、第2の実施形態では、第1の実施形態との相違点(超音波診断装置及び骨格識別装置)について説明し、第1の実施形態で説明した部分と同一部分は同一符号で示し、その説明も省略する。
(Second embodiment)
A second embodiment will be described with reference to FIG. In the second embodiment, differences from the first embodiment (ultrasound diagnostic apparatus and skeleton identification apparatus) will be described, and the same parts as those described in the first embodiment will be denoted by the same reference numerals. The description is also omitted.

図6に示すように、第2の実施形態では、超音波診断装置2が第1の実施形態に係るプローブ状態取得部2dを備えておらず、骨格識別装置3の処理部3bが超音波プローブ2aの状態を記録するプローブ状態取得部11を有している。このため、超音波診断装置2によりDicom画像を生成する際に必要となるプローブ状態情報は、骨格識別装置3から超音波診断装置2に送信されて得られることになる。   As shown in FIG. 6, in the second embodiment, the ultrasound diagnostic apparatus 2 does not include the probe state acquisition unit 2d according to the first embodiment, and the processing unit 3b of the skeleton identification device 3 includes an ultrasound probe. It has a probe state acquisition unit 11 for recording the state of 2a. For this reason, probe state information required when generating a Dicom image by the ultrasonic diagnostic apparatus 2 is transmitted from the skeleton identification apparatus 3 to the ultrasonic diagnostic apparatus 2 and obtained.

なお、第2の実施形態に係る超音波プローブ2aには、骨格識別装置3の撮影部3aにより認識可能なマーカー(プローブ認識用マーカー)が取り付けられている。例えば、マーカーとしては、赤外線を反射、吸収しやすい素材、特定の色、あるいは、特定に形の物を利用し、骨格識別装置3の赤外線カメラ又は映像カメラより撮影した画像から、マーカー及びマーカーの座標を特定することが可能である。   A marker (probe recognition marker) that can be recognized by the imaging unit 3a of the skeleton identification device 3 is attached to the ultrasonic probe 2a according to the second embodiment. For example, as a marker, a material that easily reflects and absorbs infrared rays, a specific color, or a specific shape is used, and a marker and a marker are obtained from an image captured by an infrared camera or a video camera of the skeleton identification device 3. It is possible to specify coordinates.

プローブ状態取得部11は、撮影部3aにより撮影された画像に対して画像処理を行い、前述のマーカーを検出して超音波プローブ2aの位置(例えば空間座標)や角度(例えば傾斜角度)を把握し、その把握した位置情報や角度情報をプローブ状態情報として記録する。なお、処理部3bは、第1の実施形態と同様の処理、すなわち画像処理による骨格認識を行うため、前述のプローブ状態情報に加え、骨格情報も取得することになる。このため、それらの骨格情報及びプローブ状態情報が通信部3cにより超音波診断装置2に送信され、超音波診断装置2によってDicom画像の生成に用いられる。   The probe state acquisition unit 11 performs image processing on an image photographed by the photographing unit 3a, detects the above-described marker, and grasps the position (for example, spatial coordinates) and angle (for example, an inclination angle) of the ultrasonic probe 2a. Then, the grasped position information and angle information are recorded as probe state information. Note that the processing unit 3b performs the same processing as in the first embodiment, that is, skeleton recognition by image processing, and thus acquires skeleton information in addition to the above-described probe state information. Therefore, the skeleton information and the probe state information are transmitted to the ultrasonic diagnostic apparatus 2 by the communication unit 3c, and are used by the ultrasonic diagnostic apparatus 2 to generate a Dicom image.

以上説明したように、第2の実施形態によれば、前述の第1の実施形態と同様の効果を得ることができる。さらに、骨格識別装置3の処理部3bのプローブ状態取得部11が画像処理によりプローブ状態情報を取得することから、第1の実施形態のようにプローブ状態情報を取得するため、超音波プローブ2aに位置や角度を検出するセンサを設ける必要が無くなるので、超音波診断装置2の部品点数、ひいてはリウマチ診断装置1の部品点数を削減することができる。   As described above, according to the second embodiment, the same effects as those of the first embodiment can be obtained. Further, since the probe status acquisition unit 11 of the processing unit 3b of the skeleton identification device 3 acquires probe status information by image processing, the probe status information is acquired as in the first embodiment. Since there is no need to provide a sensor for detecting the position and the angle, the number of parts of the ultrasonic diagnostic apparatus 2 and, consequently, the number of parts of the rheumatic diagnostic apparatus 1 can be reduced.

(第3の実施形態)
第3の実施形態について図7乃至図9を参照して説明する。なお、第3の実施形態では、第1の実施形態との相違点(骨格識別装置無し)について説明し、第1の実施形態で説明した部分と同一部分は同一符号で示し、その説明も省略する。
(Third embodiment)
A third embodiment will be described with reference to FIGS. In the third embodiment, differences from the first embodiment (without a skeleton identification device) will be described, and the same parts as those described in the first embodiment will be denoted by the same reference numerals, and description thereof will be omitted. I do.

図7に示すように、第3の実施形態では、リウマチ診断装置1が第1の実施形態に係る骨格識別装置3を備えておらず、超音波診断装置2、医用画像保管装置4及び医用画像表示装置5を備えている。この医用画像表示装置5は、第1の実施形態に係る骨格情報を用いることなく、操作部5dに対する操作者の入力操作に応じて処理部5bにより現在検査中の関節を特定し、その特定した関節に係る関節情報(例えば部位及び関節名など)を生成する。この関節情報は通信部5cによって超音波診断装置2に送信され、超音波診断装置2によりDicom画像の生成に用いられる。   As shown in FIG. 7, in the third embodiment, the rheumatism diagnosis apparatus 1 does not include the skeleton identification apparatus 3 according to the first embodiment, and the ultrasonic diagnosis apparatus 2, the medical image storage apparatus 4, and the medical image The display device 5 is provided. The medical image display device 5 specifies the joint under examination by the processing unit 5b in accordance with the input operation of the operator on the operation unit 5d without using the skeleton information according to the first embodiment, and specifies the specified joint. It generates joint information (for example, a part and a joint name) of the joint. The joint information is transmitted to the ultrasonic diagnostic apparatus 2 by the communication unit 5c, and is used by the ultrasonic diagnostic apparatus 2 to generate a Dicom image.

次に、現在検査中の関節画像を用いて診断を行うリアルタイム画像診断と、現在検査中の関節画像と過去の関節画像を比較して診断を行う画像比較診断について図8及び図9を参照して説明する。   Next, a real-time image diagnosis in which a diagnosis is performed using a joint image currently being inspected and an image comparison diagnosis in which a diagnosis is performed by comparing a joint image currently being inspected with a past joint image will be described with reference to FIGS. Will be explained.

<リアルタイム画像診断>
図8に示すように、表示部5aの表示画面(一例)において、現在検査中の関節画像であるリアルタイム画像G1が画面左上側に表示され、その右側にシェーマ画像G2が表示される。さらに、リアルタイム画像G1の下側に現在検査中の関節の部位及び関節名である「左手中指第二関節」が表示され、シェーマ画像G2の下側にスコアリングテーブル(採点テーブル)T1が表示される。このような配置構成の表示画面がリアルタイム画像診断に用いられる。
<Real-time diagnostic imaging>
As shown in FIG. 8, on the display screen (an example) of the display unit 5a, a real-time image G1, which is a joint image under examination, is displayed on the upper left of the screen, and a schema image G2 is displayed on the right thereof. Further, the part of the joint under examination and the name of the joint “the second joint of the left hand” which is the joint name under examination is displayed below the real-time image G1, and the scoring table (scoring table) T1 is displayed below the schema image G2. You. A display screen having such an arrangement is used for real-time image diagnosis.

スコアリングテーブルT1は、リウマチ検査のスコアリングに特化したものであり、圧痛及び踵脹の両方又は一方の有無、滑膜肥厚のスコア及び血流シグナルのスコアを提示している。圧痛及び踵脹の両方又は一方の有無の欄に関して、操作部5dに対する操作者の入力操作により、ある欄が選択されると(図8中の点線の格子模様)、その欄の左に位置する模様(図8中の斜め線の模様)がシェーマ画像G2に反映される。同様に、血流シグナルの欄に関して、操作部5dに対する操作者の入力操作により、ある欄が選択されると(図8中の点線の格子模様)、その欄の左に位置する模様(図8中のドット模様)がシェーマ画像G2に反映される。なお、この模様による識別表示以外にも、色などによる識別表示を行うようにしても良い。   The scoring table T1 is specialized for scoring of the rheumatism test, and presents the presence or absence of tenderness and / or heel expansion, the synovial hyperplasia score, and the blood flow signal score. With respect to the column for the presence or absence of tenderness and / or heel inflation, when a certain column is selected by the operator's input operation on the operation unit 5d (dotted grid pattern in FIG. 8), the column is located to the left of the column. The pattern (the diagonal line pattern in FIG. 8) is reflected on the schema image G2. Similarly, when a certain column is selected by the operator's input operation on the operation unit 5d with respect to the blood flow signal column (a dotted grid pattern in FIG. 8), a pattern located to the left of the column (FIG. 8). (A dot pattern in the middle) is reflected in the schema image G2. Note that, other than the identification display using the pattern, the identification display using a color or the like may be performed.

リアルタイム画像診断において、医師などの操作者は、まず、操作部5dを入力操作して現在検査中の患者を特定し、さらに、操作部5dを入力操作して現在検査中の関節の部位及び関節名を選択して特定する。その後、操作者は、リアルタイム画像G1を見て診断を行い、スコアリングテーブルT1の欄を選択していく。スコアリングテーブルT1の各欄が選択されると、その欄に対応する模様(又は色)がシェーマ画像G2に反映され、現在検査中の関節の診断結果が得られる。この診断の間や後に、必要に応じて操作者が操作部5dを入力操作し、画像保存ボタンB1を押す。   In the real-time image diagnosis, an operator such as a doctor first performs an input operation on the operation unit 5d to specify a patient under examination, and further performs an input operation on the operation unit 5d to specify a region and a joint of the joint under examination. Select a name to identify. After that, the operator makes a diagnosis by looking at the real-time image G1, and selects a column of the scoring table T1. When each column of the scoring table T1 is selected, the pattern (or color) corresponding to that column is reflected in the schema image G2, and the diagnosis result of the joint under examination is obtained. During or after this diagnosis, the operator performs an input operation on the operation unit 5d as necessary, and presses the image save button B1.

これに応じて、処理部5bは、前述で特定された部位及び関節名を用いて関節情報を生成し、さらに、シェーマ画像G2に関するシェーマ情報及びスコアリングテーブルT1に関するスコアリング情報(リウマチの評価情報)を生成する。これらの関節情報、シェーマ情報及びスコアリング情報は通信部5cにより超音波診断装置2に送信され、超音波診断装置2により付帯情報とされてDicom画像の生成に用いられる。   In response to this, the processing unit 5b generates joint information using the part and the joint name specified above, and further generates schema information on the schema image G2 and scoring information on the scoring table T1 (rheumatic evaluation information). ). The joint information, the schema information, and the scoring information are transmitted to the ultrasonic diagnostic apparatus 2 by the communication unit 5c, converted into supplementary information by the ultrasonic diagnostic apparatus 2, and used for generating a Dicom image.

<画像比較診断>
図9に示すように、表示部5aの表示画面(一例)において、現在検査中の関節画像であるリアルタイム画像G1が画面左上側に表示され、その右側にシェーマ画像G2が表示される。さらに、リアルタイム画像G1の上側に現在検査中の関節の部位及び関節名である「左手中指第二関節」が表示され、リアルタイム画像G1の下側に過去の関節画像である過去画像G3が表示される。加えて、シェーマ画像G2の下側にスコアリングテーブルT1が表示される。このような配置構成の表示画面が画像比較診断に用いられる。
<Image comparison diagnosis>
As shown in FIG. 9, on a display screen (an example) of the display unit 5a, a real-time image G1, which is a joint image under examination, is displayed on the upper left of the screen, and a schema image G2 is displayed on the right thereof. Further, the part of the joint under examination and the name of the joint “left middle finger second joint” are displayed above the real-time image G1, and a past image G3, which is a past joint image, is displayed below the real-time image G1. You. In addition, a scoring table T1 is displayed below the schema image G2. A display screen having such an arrangement is used for image comparison diagnosis.

画像比較診断において、医師などの操作者は、まず、操作部5dを入力操作して現在検査中の患者を特定し、さらに、操作部5dを入力操作して現在検査中の関節の部位及び関節名を選択して特定する。これに応じて、前述の現在検査中の関節と同じ関節の過去画像が多数の過去画像の中から検索され、対象画像が過去画像G3として表示され、さらに、その対象画像の付帯情報から対象画像に対応するシェーマ画像G2及びスコアリングテーブルT1が表示される。   In the image comparison diagnosis, an operator such as a doctor first performs an input operation on the operation unit 5d to specify a patient under examination, and further performs an input operation on the operation unit 5d to specify a part and a joint of the joint under examination. Select a name to identify. In response to this, a past image of the same joint as the above-mentioned joint currently being examined is searched from a large number of past images, the target image is displayed as a past image G3, and further, the target image is obtained from the incidental information of the target image. Is displayed, and the scoring table T1 corresponding to the schema image G2 is displayed.

このとき、医用画像表示装置5は、前述で特定された部位及び関節名を用いて処理部5bにより関節情報を生成し、その生成した関節情報や患者IDなどの情報を通信部5cにより医用画像保管装置4に送信する。医用画像保管装置4は、通信部4dにより関節情報を受信し、処理部4cによりその関節情報や患者IDなどの情報からインデックス情報保存部4b内のインデックステーブルを参照して、複数の過去画像の中から現在検査中の関節と同じ関節の過去画像を選択する。そして、その選択した過去画像を通信部4dにより医用画像表示装置5に送信する。   At this time, the medical image display device 5 generates joint information by the processing unit 5b using the part and the joint name specified above, and transmits the generated joint information and information such as the patient ID to the medical image by the communication unit 5c. It is transmitted to the storage device 4. The medical image storage device 4 receives the joint information by the communication unit 4d, and refers to the index table in the index information storage unit 4b from the information such as the joint information and the patient ID by the processing unit 4c, and stores a plurality of past images. A past image of the same joint as the joint under examination is selected from among them. Then, the selected past image is transmitted to the medical image display device 5 by the communication unit 4d.

なお、過去画像の選択時、現在検査中の関節と同じ関節の過去画像が多数存在する場合には、それら全ての過去画像を選択して送信するようにしても良いし、あるいは、その一部、例えばその中で一番新しい日時の過去画像だけを選択して送信するようにしても良い。   When a past image is selected, if there are a large number of past images of the same joint as the joint currently being examined, all of the past images may be selected and transmitted, or some of them may be transmitted. For example, only the latest image of the past image may be selected and transmitted.

その後、操作者はリアルタイム画像(最新画像)G1と過去画像(比較画像)G3とを比較して診断を行い、必要に応じてスコアリングテーブルT1の欄を変更する。スコアリングテーブルT1の欄が変更されると、その欄に対応する模様(又は色)がシェーマ画像G2に反映され、現在検査中の関節の診断結果が得られる。この比較診断の間や後に、必要に応じて操作者が操作部5dを入力操作し、保存ボタンB2を押す。   Thereafter, the operator makes a diagnosis by comparing the real-time image (latest image) G1 with the past image (comparative image) G3, and changes the fields of the scoring table T1 as necessary. When the column of the scoring table T1 is changed, the pattern (or color) corresponding to that column is reflected in the schema image G2, and the diagnosis result of the joint currently being inspected is obtained. During or after the comparative diagnosis, the operator performs an input operation on the operation unit 5d as necessary, and presses the save button B2.

これに応じて、処理部5bは、前述の関節情報に加え、シェーマ画像G2に関するシェーマ情報及びスコアリングテーブルT1に関するスコアリング情報を生成する。これらの関節情報、シェーマ情報及びスコアリング情報は通信部5cにより超音波診断装置2に送信され、超音波診断装置2によって付帯情報とされてDicom画像の生成に用いられる。   In response to this, the processing unit 5b generates, in addition to the above-described joint information, schema information regarding the schema image G2 and scoring information regarding the scoring table T1. The joint information, the schema information, and the scoring information are transmitted to the ultrasonic diagnostic apparatus 2 by the communication unit 5c, converted into supplementary information by the ultrasonic diagnostic apparatus 2, and used for generating a Dicom image.

以上説明したように、第3の実施形態によれば、前述の第1の実施形態と同様の効果を得ることができる。また、医用画像表示装置5の処理部5bが関節情報を生成することから、第1の実施形態に係る骨格情報を用いずに関節情報を得ることが可能となり、骨格情報を取得する骨格識別装置3を設ける必要が無くなるので、リウマチ診断装置1の部品点数を削減することができる。   As described above, according to the third embodiment, the same effects as those of the first embodiment can be obtained. Further, since the processing unit 5b of the medical image display device 5 generates the joint information, the joint information can be obtained without using the skeletal information according to the first embodiment, and the skeletal identification device that acquires the skeletal information 3, the number of parts of the rheumatism diagnosis apparatus 1 can be reduced.

以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   Although some embodiments of the present invention have been described above, these embodiments are presented as examples and are not intended to limit the scope of the invention. These new embodiments can be implemented in other various forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and their equivalents.

1 リウマチ診断装置
2 超音波診断装置
2a 超音波プローブ
2b 画像処理部
2c プローブ状態取得部
3 骨格識別装置
3b 処理部
4 医用画像保管装置
4c 処理部
5 画像表示装置
5a 表示部
5b 処理部
11 プローブ状態取得部
DESCRIPTION OF SYMBOLS 1 Rheumatism diagnostic apparatus 2 Ultrasonic diagnostic apparatus 2a Ultrasonic probe 2b Image processing section 2c Probe state acquisition section 3 Skeletal identification apparatus 3b Processing section 4 Medical image storage apparatus 4c Processing section 5 Image display apparatus 5a Display section 5b Processing section 11 Probe state Acquisition unit

Claims (8)

被検体の第1の関節に対応する超音波画像を取得する取得部と、
前記超音波画像および前記第1の関節を含むシェーマ画像を表示部に表示させる表示処理部と、を備え、
前記表示処理部は、前記シェーマ画像の前記第1の関節に対応する部分の上に前記被検体の血流情報を重ねて表示させることを特徴とする装置。
An acquisition unit configured to acquire an ultrasound image corresponding to a first joint of the subject;
A display processing unit that causes the display unit to display a schema image including the ultrasonic image and the first joint,
The display processing unit, and wherein said be displayed superimposed blood flow information of the subject on a portion corresponding to the first joint of the schema image.
前記表示処理部は、前記超音波画像、前記シェーマ画像および前記血流情報を前記表示部に同時に表示させることを特徴とする請求項1記載の装置。   The apparatus according to claim 1, wherein the display processing unit displays the ultrasonic image, the schema image, and the blood flow information simultaneously on the display unit. 前記表示処理部は、前記表示部に、前記第1の関節に対応する部分に前記血流情報とは異なる情報を更に表示させることを特徴とする請求項1または請求項2に記載の装置。   3. The apparatus according to claim 1, wherein the display processing unit further causes the display unit to further display information different from the blood flow information on a portion corresponding to the first joint. 4. 前記第1の関節は前記被検体の手の関節であることを特徴とする請求項1乃至3のいずれか1項に記載の装置。   The apparatus according to any one of claims 1 to 3, wherein the first joint is a joint of a hand of the subject. 前記第1の関節は前記被検体の指の関節であることを特徴とする請求項1乃至3のいずれか1項に記載の装置。   4. The apparatus according to claim 1, wherein the first joint is a finger joint of the subject. 被検体の第1の関節名が示す関節の第1の超音波画像および前記第1の超音波画像とは異なる時刻に撮影された前記被検体の超音波画像であって前記第1の関節名が示す関節の第2の超音波画像を取得する取得部と、
前記第1の超音波画像と前記第2の超音波画像とを並べて表示部に表示させるとともに、前記第1の関節名が示す関節を含むシェーマ画像を前記表示部に表示させる表示処理部と、を備え、
前記表示処理部は、前記シェーマ画像において前記第1の関節名が示す関節に対応する部分の上に前記被検体の血流情報を重ねて表示させることを特徴とする装置。
A first ultrasonic image of a joint indicated by a first joint name of the subject and an ultrasonic image of the subject taken at a different time from the first ultrasonic image, wherein the first joint name is An acquisition unit that acquires a second ultrasonic image of the joint indicated by
A display processing unit configured to display the first ultrasonic image and the second ultrasonic image side by side on a display unit and display a schema image including a joint indicated by the first joint name on the display unit; With
The display processing unit, wherein the blood flow information of the subject is superimposed and displayed on a portion corresponding to a joint indicated by the first joint name in the schema image.
装置に、
被検体の第1の関節に対応する超音波画像を取得するステップと、
前記超音波画像および前記第1の関節を含むシェーマ画像を表示部に表示させるステップと、を実行させ、
さらに、前記表示部に前記超音波画像および前記シェーマ画像が表示される際に、前記シェーマ画像の前記第1の関節に対応する部分の上に前記被検体の血流情報を重ねて表示させることを含む処理を実行させることを特徴とする処理プログラム。
To the device,
Acquiring an ultrasound image corresponding to a first joint of the subject;
Displaying the ultrasound image and a schema image including the first joint on a display unit.
Furthermore, when the ultrasonic image and the schema image are displayed on the display unit, the blood flow information of the subject is displayed by being superimposed on a portion of the schema image corresponding to the first joint. A processing program for executing processing including:
装置に、
被検体の第1の関節名が示す関節の第1の超音波画像および前記第1の超音波画像とは異なる時刻に撮影された前記被検体の超音波画像であって前記第1の関節名が示す関節の第2の超音波画像を取得するステップと、
前記第1の超音波画像と前記第2の超音波画像とを並べて表示部に表示させるとともに、前記第1の関節名が示す関節を含むシェーマ画像を前記表示部に表示させるステップと、を実行させ、
さらに、前記表示部に前記第1の超音波画像、前記第2の超音波画像および前記シェーマ画像が表示される際に、前記シェーマ画像において前記第1の関節名が示す関節に対応する部分の上に前記被検体の血流情報を重ねて表示させることを含む処理を実行させることを特徴とする処理プログラム。
To the device,
A first ultrasonic image of a joint indicated by a first joint name of the subject and an ultrasonic image of the subject taken at a different time from the first ultrasonic image, wherein the first joint name is Acquiring a second ultrasound image of the joint indicated by
Displaying the first ultrasonic image and the second ultrasonic image side by side on a display unit and displaying a schema image including a joint indicated by the first joint name on the display unit. Let
Further, when the first ultrasonic image, the second ultrasonic image, and the schema image are displayed on the display unit, a portion of the schema image corresponding to the joint indicated by the first joint name is displayed . processing program characterized by executing a process including the be displayed superimposed blood flow information of the subject on.
JP2018031628A 2018-02-26 2018-02-26 Apparatus and processing program Active JP6665214B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018031628A JP6665214B2 (en) 2018-02-26 2018-02-26 Apparatus and processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018031628A JP6665214B2 (en) 2018-02-26 2018-02-26 Apparatus and processing program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014051345A Division JP6301164B2 (en) 2014-03-14 2014-03-14 Medical image processing apparatus and medical image processing method

Publications (2)

Publication Number Publication Date
JP2018086421A JP2018086421A (en) 2018-06-07
JP6665214B2 true JP6665214B2 (en) 2020-03-13

Family

ID=62493248

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018031628A Active JP6665214B2 (en) 2018-02-26 2018-02-26 Apparatus and processing program

Country Status (1)

Country Link
JP (1) JP6665214B2 (en)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004113629A (en) * 2002-09-27 2004-04-15 Olympus Corp Ultrasonograph
JP2011010864A (en) * 2009-07-02 2011-01-20 Toshiba Corp Ultrasonic diagnostic apparatus
JP2012050551A (en) * 2010-08-31 2012-03-15 Toshiba Corp Ultrasonic diagnosis apparatus, ultrasonic image processing apparatus, and ultrasonic image processing program
JP5733787B2 (en) * 2010-11-09 2015-06-10 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Ultrasonic diagnostic equipment
JP2013051998A (en) * 2011-08-31 2013-03-21 Toshiba Corp Ultrasonic diagnostic apparatus and control program for ultrasonic diagnostic apparatus
US9439627B2 (en) * 2012-05-22 2016-09-13 Covidien Lp Planning system and navigation system for an ablation procedure

Also Published As

Publication number Publication date
JP2018086421A (en) 2018-06-07

Similar Documents

Publication Publication Date Title
US11653897B2 (en) Ultrasonic diagnostic apparatus, scan support method, and medical image processing apparatus
JP6794838B2 (en) Medical image display device
US9888906B2 (en) Ultrasound diagnostic apparatus, ultrasound image processing method, and non-transitory computer readable recording medium
JP6011378B2 (en) Ultrasound diagnostic imaging equipment
US10433709B2 (en) Image display device, image display method, and program
JP7145107B2 (en) Ultrasound diagnostic device and display method
JP6488716B2 (en) Ultrasonic diagnostic equipment
JP4616872B2 (en) Image display device and image display program
JP6916876B2 (en) Ultrasound imaging device with image selector
JP6956483B2 (en) Ultrasonic diagnostic equipment and scanning support program
US20150015612A1 (en) Medical report generating apparatus and medical image diagnosis apparatus
JP7075854B2 (en) Ultrasonic diagnostic equipment and display method
JP2008188163A (en) Ultrasonic diagnostic apparatus, medical image processor and medical image processing program
JP2002140690A (en) Medical image processor and its method
JPWO2012017827A1 (en) Ultrasonic imaging apparatus and three-dimensional image display method using ultrasonic image
JP2007167116A (en) Ultrasonic diagnosis apparatus
JP6637607B2 (en) Ultrasonic diagnostic system and control method of ultrasonic diagnostic system
JP6301164B2 (en) Medical image processing apparatus and medical image processing method
JP6665214B2 (en) Apparatus and processing program
US20100081930A1 (en) Systems and Methods for the Display of Ultrasound Images
WO2022080184A1 (en) Ultrasonic diagnostic device and display method for ultrasonic diagnostic device
JP6538130B2 (en) Image processing apparatus and program
JP2004201722A (en) Ultrasonograph
JP2019081111A (en) Ultrasonic image diagnostic apparatus and program
JP2015198807A (en) Ultrasonic image diagnostic apparatus and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190115

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190604

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190802

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200219

R150 Certificate of patent or registration of utility model

Ref document number: 6665214

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150