JP5597408B2

JP5597408B2 - Medical imaging system

Info

Publication number: JP5597408B2
Application number: JP2010025548A
Authority: JP
Inventors: 誉史近藤; 照彦蛯名
Original assignee: Toshiba Corp; Toshiba Medical Systems Corp
Current assignee: Toshiba Corp; Canon Medical Systems Corp
Priority date: 2010-02-08
Filing date: 2010-02-08
Publication date: 2014-10-01
Anticipated expiration: 2030-02-08
Also published as: JP2011160931A

Description

本発明は、複数の医用画像データを保管する医用画像保管装置と、この医用画像保管装置に保管されている医用画像を表示する医用画像表示装置から成る医用画像システムに関する。 The present invention relates to a medical image system including a medical image storage device that stores a plurality of medical image data and a medical image display device that displays medical images stored in the medical image storage device.

従来、病院等の医療現場ではＣＴ（Computed Tomography）などのモダリティで収集された医用画像データを保管する医用画像保管装置と、この医用画像保管装置に保存されている医用画像を、ネットワークを介して要求し、その医用画像を表示する医用画像表示装置が使用されている。ネットワークの転送効率状況や医師が読影する画像の種類によってはネットワーク負荷を軽減するために、予め医用画像保管装置側で医用画像を圧縮し、医用画像表示装置側ではそれを伸張展開して高速表示する場合がある。 Conventionally, a medical image storage device that stores medical image data collected by a modality such as CT (Computed Tomography) and medical images stored in the medical image storage device via a network in a medical field such as a hospital. Medical image display devices that request and display the medical image are used. Depending on the network transfer efficiency status and the type of image that the doctor interprets, the medical image storage device compresses the medical image in advance and the medical image display device expands and expands it to display it at high speed. There is a case.

乳房画像を撮影する検査装置としてマンモグラフィ装置が知られている。マンモグラフィ装置は、被検者の健康を害しない程度の放射線（例えばＸ線）を放射線源から被写体（乳房）に向かって照射し、被検体を透過した放射線をデジタル放射線検出器で検出し、画像データを取得するものである。マンモグラフィ装置は非常に微細で被写体コントラストが低い組織を対象とした検査装置である。 A mammography apparatus is known as an inspection apparatus for photographing a breast image. The mammography device irradiates a subject (breast) with radiation (eg, X-rays) that does not harm the health of the subject, detects the radiation transmitted through the subject with a digital radiation detector, Data is acquired. The mammography apparatus is an inspection apparatus for a tissue that is very fine and has low subject contrast.

したがって、乳腺の石灰化や腫瘍化した部分を正確に読影する必要性からマンモグラフィ画像については特に高画質が要求され、１０〜１００ＭＢ程度の非常に大きな画像サイズが必要とされる。通信技術や画像メモリ素子の進歩により、さらに画像サイズが大きくなる傾向にある。したがって医用画像表示装置側で原画像を表示しようとすると、ネットワークからダウンロードするのに時間がかかり、画像が表示されるまで医師が診断を開始できないという問題が発生している。 Therefore, high image quality is particularly required for mammography images because of the need to accurately interpret calcified and tumorized portions of the mammary gland, and a very large image size of about 10 to 100 MB is required. Due to advances in communication technology and image memory elements, the image size tends to become even larger. Therefore, when an attempt is made to display an original image on the medical image display device side, it takes time to download from the network, and there is a problem that the doctor cannot start diagnosis until the image is displayed.

このような問題点を解決するために、上述したように表示速度を優先して高圧縮（画像サイズ小）をした参照用の医用画像と、画質を優先して低圧縮（画像サイズ大）をした読影用の医用画像をそれぞれに保管する方法が行われたり、医用画像データの必要部分だけを取得して表示するなどで表示速度を向上させたりすることが、種々、行われている。 In order to solve such a problem, as described above, a reference medical image that has been subjected to high compression (small image size) with priority on display speed and low compression (large image size) with priority on image quality. Various methods have been used to store the medical images for interpretation, and to improve the display speed by acquiring and displaying only necessary portions of the medical image data.

例えば、モダリティから受信したＤＩＣＯＭ（Digital Imaging and Communication in Medicine）ファイル内の医用画像から生成解像度保持部に保持された低解像度に基づく医用画像を生成し、当該医用画像と生成された低解像度の医用画像とをそれぞれ可逆圧縮して当該ＤＩＣＯＭファイルのファイル名称に関連するファイル名のＤＩＣＯＭファイルに格納して保持する画像サーバと、表示部の表示サイズに合わせて最適な解像度を有する医用画像を格納するＤＩＣＯＭファイルをこの画像サーバからダウンロードする画像ビューワとを備えた情報処理装置が知られている（特許文献１参照）。 For example, a medical image based on a low resolution held in the generated resolution holding unit is generated from a medical image in a DICOM (Digital Imaging and Communication in Medicine) file received from the modality, and the generated low resolution medical image is generated with the medical image An image server that stores each image in a DICOM file having a file name related to the DICOM file name in a reversible compression manner, and stores a medical image having an optimal resolution according to the display size of the display unit An information processing apparatus including an image viewer that downloads a DICOM file from the image server is known (see Patent Document 1).

特開２００６−３０１９６５号公報JP 2006-301965 A

特許文献１に開示された技術では、医用画像保存装置側に予め複数の解像度を持つ医用画像を生成しておき、医用画像表示側の表示部の解像度に合わせて最適な解像度を持つ医用画像をダウンロードするものであるが、予め複数の医用画像を用意するので保存容量が大きくなってしまうという問題点がある。 In the technique disclosed in Patent Document 1, a medical image having a plurality of resolutions is generated in advance on the medical image storage device side, and a medical image having an optimal resolution in accordance with the resolution of the display unit on the medical image display side is obtained. Although downloaded, a plurality of medical images are prepared in advance, so that there is a problem that the storage capacity becomes large.

また、マンモグラフィ装置のように画質が特に重要視されるような繊細な医用画像では、ネットワークの負荷を軽くするために画像を圧縮してしまうと所見が失われてしまう可能性があるので医療過誤等の問題が生ずる。したがって最終的には、医用画像（原画像）を取得して読影する必要がある。しかし、原画像をリアルタイムでネットワークから取得しようとすると表示されるまでに時間がかかり、診断時間に無駄が生じることになる。 In addition, for delicate medical images where image quality is particularly important, such as mammography devices, if the image is compressed in order to reduce the load on the network, the findings may be lost. Such problems arise. Therefore, finally, it is necessary to acquire and interpret a medical image (original image). However, when an original image is acquired from the network in real time, it takes time until it is displayed, resulting in wasted diagnostic time.

本発明は、上記問題を解決するためになされたもので、医用画像表示装置から医用画像保管装置に対して表示要求がなされてから、医用画像表示装置において所望の画像が表示されるまでの時間を短縮することができる医用画像システムを提供することを目的とする。 The present invention has been made to solve the above-described problem. The time from when a display request is made to the medical image storage device from the medical image display device to when the desired image is displayed on the medical image display device. It is an object of the present invention to provide a medical image system capable of shortening the above.

本発明の請求項１によれば、画像表示領域の画素数に相当する仮想画面データを表示することが可能な医用画像表示装置と、医用画像データを保管し、この医用画像データから対応する前記仮想画面データを生成可能な医用画像保管装置とを備え、前記医用画像表示装置から所望の医用画像データの表示要求があったとき、この医用画像データから前記医用画像データよりデータ容量の少ない仮想画面データを生成し、前記所望の医用画像データ及び対応する仮想画面データを前記医用画像表示装置にネットワークを介して送信し、前記医用画像表示装置は、前記医用画像表示装置から送信されてきた前記所望の医用画像データのダウンロードを終了するまでは、取得した前記対応する仮想画面データに基づいて対応する仮想画面を表示することを特徴とする医用画像システムを提供する。 According to claim 1 of the present invention, a medical image display device capable of displaying virtual screen data corresponding to the number of pixels in the image display area, medical image data is stored, and the medical image data corresponding to the medical image data is stored. A virtual screen having a data capacity smaller than that of the medical image data from the medical image data when a display request for the desired medical image data is received from the medical image display device. Generating data, and transmitting the desired medical image data and the corresponding virtual screen data to the medical image display device via a network, wherein the medical image display device transmits the desired medical image data from the medical image display device. the up finish downloading the medical image data, displaying a virtual screen corresponding based on the virtual screen data to which the acquired corresponding Providing a medical imaging system, wherein the door.

また、本発明の請求項３によれば、医用画像保管装置と医用画像表示装置とがネットワークに接続され、前記医用画像保管装置は、医用画像データが保存される画像蓄積部と、前記医用画像表示装置上でユーザが表示されている画像に対して行う画像操作情報、およびこの医用画像表示装置に接続されたモニタ上の画像表示領域の大きさに基づくこの画像表示領域の解像度情報を受信する操作情報受信部と、この画像操作情報で指定された医用画像データを前記画像蓄積部から読み出し、前記画像操作情報で指定されるこの医用画像データの表示領域を前記解像度情報で指定された画像表示領域の画素数に変換した、前記医用画像データよりデータ容量の少ない仮想画面データを生成する仮想画面データ生成部と、この仮想画面データと前記医用画像データを前記医用画像表示装置へ送信する画像送信部と、を有し、前記医用画像表示装置は、前記ユーザによって指定される前記画像操作情報を入力するための操作入力部と、前記画像操作情報および前記解像度情報を保持する操作情報保持部と、前記医用画像保管装置に対して前記画像操作情報と前記解像度情報を送信する操作情報送信部と、前記医用画像保管装置から送信された前記仮想画面データ及び医用画像データを受信する画像受信部と、前記医用画像データを保存する画像保存部と、取得中の医用画像データが全て前記画像保存部に保存された場合、前記仮想画面データに基づく表示から前記医用画像データに基づく表示に切り替えて前記モニタの画像表示領域部分に画像表示する切替部と、を有することを特徴とする医用画像システムを提供する。
According to a third aspect of the present invention, a medical image storage device and a medical image display device are connected to a network, the medical image storage device includes an image storage unit that stores medical image data, and the medical image Image operation information performed on an image displayed by the user on the display device and resolution information of the image display region based on the size of the image display region on a monitor connected to the medical image display device are received. An operation information receiving unit and medical image data specified by the image operation information are read from the image storage unit, and a display area of the medical image data specified by the image operation information is displayed by the image information specified by the resolution information. A virtual screen data generation unit that generates virtual screen data having a data capacity smaller than that of the medical image data, converted into the number of pixels in the area, and the virtual screen data and the virtual screen data An image transmission unit that transmits image data to the medical image display device, the medical image display device including an operation input unit for inputting the image operation information designated by the user, and the image an operation information and the operation information holding section which holds the resolution information, and operation information transmitting unit that transmits the resolution information and the image operation information to the medical image holding tube apparatus, transmitted from the medical image holding tube apparatus When the image receiving unit that receives the virtual screen data and medical image data, the image storage unit that stores the medical image data, and all the medical image data being acquired are stored in the image storage unit , the virtual screen A switching unit that switches from display based on data to display based on the medical image data and displays an image in an image display area portion of the monitor. To provide a use image system.

本発明によれば、医用画像表示装置から医用画像保管装置に対して表示要求がなされてから、医用画像表示装置において所望の画像が表示されるまでの時間を短縮することができる医用画像システムが得られる。 According to the present invention, there is provided a medical image system capable of shortening a time from when a display request is made to the medical image storage device from the medical image display device until a desired image is displayed on the medical image display device. can get.

本発明の一実施形態に係る医用画像システムの全体構成図である。1 is an overall configuration diagram of a medical image system according to an embodiment of the present invention. 同実施形態に係る医用画像システムの医用画像表示装置上で動作する画像ビューワの説明図である。It is explanatory drawing of the image viewer which operate | moves on the medical image display apparatus of the medical image system which concerns on the embodiment. 同実施形態に係る医用画像システムの詳細な構成図である。It is a detailed block diagram of the medical image system according to the embodiment. 同実施形態に係る医用画像表示装置が、医用画像保管装置から医用画像データを取得開始するときの処理フロー図である。FIG. 5 is a processing flowchart when the medical image display apparatus according to the embodiment starts to acquire medical image data from the medical image storage apparatus. 同実施形態に係る医用画像保管装置が医用画像表示装置から画像表示要求信号を受信したときの処理フロー図である。FIG. 6 is a processing flowchart when the medical image storage apparatus according to the embodiment receives an image display request signal from the medical image display apparatus. 同実施形態に係る医用画像保管装置が作成した仮想画面データを医用画像表示装置の画像ビューワで表示するときの処理フロー図である。FIG. 6 is a process flow diagram when virtual screen data created by the medical image storage apparatus according to the embodiment is displayed by the image viewer of the medical image display apparatus. 同実施形態に係る医用画像表示装置の画像ビューワ上で仮想画面データに対して操作をしたときの処理フロー図である。FIG. 6 is a processing flowchart when an operation is performed on virtual screen data on an image viewer of the medical image display apparatus according to the embodiment. 同実施形態に係る医用画像保管装置が医用画像表示装置の画像ビューワ上の操作情報を受信したときの処理フロー図である。FIG. 10 is a processing flowchart when the medical image storage apparatus according to the embodiment receives operation information on the image viewer of the medical image display apparatus. 同実施形態に係る医用画像表示装置の画像ビューワが、取得した原画像データに切り替えて表示するときの処理フロー図である。FIG. 6 is a processing flowchart when the image viewer of the medical image display apparatus according to the embodiment switches to and displays acquired original image data. 同実施形態に係る医用画像表示装置が原画像データと仮想画面データとを取得するまでの時間差を示すシーケンス図である。It is a sequence diagram which shows the time difference until the medical image display apparatus which concerns on the same embodiment acquires original image data and virtual screen data.

本発明の実施形態について図面を参照しながら詳細に説明する。図１に、本発明の一実施形態に係る医用画像システムのコンピュータシステムの全体構成を示す。 Embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 shows an overall configuration of a computer system of a medical image system according to an embodiment of the present invention.

コンピュータネットワーク１０に、医用画像表示装置１１、医用画像保管装置１２、マンモグラフィ装置１３およびＣＴあるいはＭＲＩ（Magnetic Resonance Imaging）装置などその他のモダリティ１４が接続されている。マンモグラフィ装置１３やその他のモダリティ１４で撮影した医用画像データは、ＤＩＣＯＭ等の通信規格に従って医用画像保管装置１２に保存される。医用画像保管装置１２にはＤＩＣＯＭ等に準ずる画像フォーマットで医用画像データを保管し、要求があれば医用画像表示装置１１に医用画像を送信することができる。 Connected to the computer network 10 are a medical image display device 11, a medical image storage device 12, a mammography device 13, and other modalities 14 such as a CT or MRI (Magnetic Resonance Imaging) device. Medical image data photographed by the mammography device 13 and other modalities 14 is stored in the medical image storage device 12 in accordance with a communication standard such as DICOM. The medical image storage device 12 stores medical image data in an image format conforming to DICOM or the like, and can send a medical image to the medical image display device 11 if requested.

医用画像表示装置１１は、医用画像保管装置１２等から事前に医用画像データを受信し、自装置のローカルディスクに保存した医用画像データ、もしくはリアルタイムにネットワーク１０を経由して医用画像保管装置１２に保存された医用画像データを画像ビューワと呼ばれるアプリケーションソフトウェアにて表示することができる。 The medical image display device 11 receives medical image data in advance from the medical image storage device 12 or the like, and stores the medical image data stored in the local disk of the device itself or the medical image storage device 12 via the network 10 in real time. The stored medical image data can be displayed by application software called an image viewer.

図２は、医用画像表示装置１１のアプリケーションとして動作する画像ビューワの一例を示す図である。この画像ビューワアプリケーションは、医用画像表示装置１１の表示画面上に、アプリケーション名を示すアプリケーションタイトルを表示するタイトル領域２１、取得した医用画像を表示するための画像表示領域２２と、表示された医用画像に対し、拡大／縮小処理、階調変更処理、パンニング処理、区画変更、画像めくりなどの画像操作を実施するためにメニューアイコンなどを配置した画像操作領域２３を表示する。 FIG. 2 is a diagram illustrating an example of an image viewer that operates as an application of the medical image display apparatus 11. The image viewer application includes a title area 21 for displaying an application title indicating an application name, an image display area 22 for displaying an acquired medical image, and a displayed medical image on the display screen of the medical image display device 11. On the other hand, an image operation area 23 in which menu icons and the like are arranged for performing image operations such as enlargement / reduction processing, gradation change processing, panning processing, section change, and image turning is displayed.

医師らは、画像表示領域２２に表示する医用画像を見ながら、所見に必要な部位を表示するために画像表示領域２３にあるメニューアイコンを操作する。 The doctors operate menu icons in the image display area 23 in order to display a part necessary for the observation while looking at the medical image displayed in the image display area 22.

図３は、医用画像表示装置１１と医用画像保管装置１２とにより構成される医用画像システムの構成図である。 FIG. 3 is a configuration diagram of a medical image system including the medical image display device 11 and the medical image storage device 12.

医用画像保管装置１２は、医用画像表示装置１１の画像表示領域２２の解像度情報と、医用画像表示装置１１の画像ビューワ上で医師らが画像操作を行った画像操作情報とを受信する操作情報受信部３１と、この解像度情報と画像操作情報の解析を行う操作情報解析部３２と、マンモグラフィ装置１３またはその他のモダリティ１４の医用画像データが保存された画像蓄積部３３と、上記画像操作情報で指定された原画像データを画像蓄積部３３から読み出し、この原画像データをもとに画像操作情報により指定された画像表示領域２２の解像度情報（画素数）から仮想画面データを生成する仮想画面データ生成部３４と、この仮想画面データと原画像データの両方もしくはその一方を医用画像表示装置１１へコンピュータネットワーク１０を介して送信する画像送信部３５から構成される。 The medical image storage device 12 receives operation information for receiving resolution information of the image display area 22 of the medical image display device 11 and image operation information on which the doctors performed image operations on the image viewer of the medical image display device 11. A unit 31, an operation information analysis unit 32 that analyzes the resolution information and the image operation information, an image storage unit 33 that stores medical image data of the mammography device 13 or other modality 14, and the image operation information Virtual screen data generation for reading the original image data from the image storage unit 33 and generating virtual screen data from the resolution information (number of pixels) of the image display area 22 designated by the image operation information based on the original image data Unit 34 and the virtual screen data and / or the original image data to the medical image display apparatus 11 to the computer network 10 And an image transmission unit 35 for transmitting over.

なお、実施形態の説明においては、医用画像保管装置１２に保管されている医用画像データそのものを原画像データと呼び、この原画像データから画像表示領域２２に対応する画素数に変換した画像データを仮想画面データと呼び、明確に区別することにする。 In the description of the embodiment, the medical image data itself stored in the medical image storage device 12 is referred to as original image data, and image data obtained by converting the original image data into the number of pixels corresponding to the image display area 22 is referred to as “original image data”. It is called virtual screen data and will be clearly distinguished.

医用画像保管装置１２は一般的なサーバ装置により構成することが可能であり、上述の機能がこのサーバ装置上で動作するアプリケーションとして組み込まれる。 The medical image storage device 12 can be configured by a general server device, and the above-described function is incorporated as an application that operates on this server device.

一方、医用画像表示装置１１は、医師らがマウスやタッチスクリーンなどを用いて、表示したい医用画像を指定しその画像に対して行う拡大／縮小処理、階調変更処理、パンニング処理、区画変更、画像めくりなどの画像操作を入力するための操作入力部４１と、この操作入力部４１から入力された画像操作情報および医用画像表示装置１１の画像表示領域２２の解像度情報（画素数）を、操作履歴を含めて保持する操作情報保持部４２と、医用画像データを事前またはリアルタイムに保存する画像保存部４３と、医用画像保管装置１２に対して画像操作情報と画像表示領域２２の解像度情報を送信する操作情報送信部４４と、医用画像保管装置１２の画像送信部３５から送信されたデータを受信する画像受信部４５と、取得中の原画像データが画像保存部４３に全て保存された場合に、モニタ４７の表示に使うデータとして仮想画面データと原画像データとを切り替えるデータ切替部４６と、モニタ４７に画像を表示する画像表示部４８から構成される。 On the other hand, the medical image display device 11 uses a mouse, a touch screen or the like to designate a medical image to be displayed and perform enlargement / reduction processing, gradation change processing, panning processing, section change, An operation input unit 41 for inputting an image operation such as image turning, image operation information input from the operation input unit 41, and resolution information (number of pixels) of the image display region 22 of the medical image display device 11 are operated. The operation information holding unit 42 that holds the history, the image storage unit 43 that stores the medical image data in advance or in real time, and the image operation information and the resolution information of the image display area 22 are transmitted to the medical image storage device 12. An operation information transmitting unit 44 that performs the processing, an image receiving unit 45 that receives data transmitted from the image transmitting unit 35 of the medical image storage device 12, and the original image data being acquired. Are stored in the image storage unit 43. The data switching unit 46 switches between virtual screen data and original image data as data used for display on the monitor 47, and the image display unit 48 displays an image on the monitor 47. Is done.

医用画像表示装置１１は、一般的なワークステーション装置でクライアント端末として構成することが可能で、上述の機能がこのワークステーション装置上で動作するアプリケーションとして組み込まれる。画像ビューワは、医用画像表示装置１１の操作入力部４１及びモニタ４７に対応する。 The medical image display device 11 can be configured as a client terminal by a general workstation device, and the above-described functions are incorporated as an application that operates on the workstation device. The image viewer corresponds to the operation input unit 41 and the monitor 47 of the medical image display device 11.

以下の図４から図１０に示す処理フローを用いて本実施形態の医用画像システムの処理動作を説明する。 The processing operation of the medical image system of this embodiment will be described using the processing flows shown in FIGS. 4 to 10 below.

図４は、医用画像表示装置１１が、医用画像保管装置１２から所望の医用画像データを取得開始するときの処理フローである。医師らは医用画像表示装置１１上で動作する画像ビューワを操作して、表示したい医用画像を指示する（ＳＴ４０１）。医用画像表示装置１１の操作情報保持部４２では、操作入力部４１で表示が指示された医用画像がローカルディスク（画像保存部４３）に保存されているかどうか検索する。 FIG. 4 is a processing flow when the medical image display device 11 starts acquiring desired medical image data from the medical image storage device 12. The doctors operate an image viewer operating on the medical image display device 11 to instruct a medical image to be displayed (ST401). The operation information holding unit 42 of the medical image display device 11 searches whether the medical image instructed to be displayed by the operation input unit 41 is stored in the local disk (image storage unit 43).

該当する医用画像が画像保存部４３に保存されている場合（ＳＴ４０２：Ｙｅｓ）には、画像保存部４３から、指示した医用画像データを取得（ＳＴ４０３）して、画像表示部４８に出力し、モニタ４７に画像を表示する（ＳＴ４０４）。 If the corresponding medical image is stored in the image storage unit 43 (ST402: Yes), the instructed medical image data is acquired from the image storage unit 43 (ST403) and output to the image display unit 48. An image is displayed on the monitor 47 (ST404).

ローカルディスクに該当する医用画像が保存されていない場合（ＳＴ４０２：Ｎｏ）には、医用画像保管装置１２において、データ容量の少ない仮想画面データを作成し、このデータを医用画像表示装置１１に送ってこの装置で仮想画面データによる画像の表示を行う（図５に基づいて後述する。ＳＴ５０４，ＳＴ５０５，ＳＴ５０６）。 When the medical image corresponding to the local disk is not stored (ST402: No), the medical image storage device 12 creates virtual screen data with a small data capacity, and sends this data to the medical image display device 11. This apparatus displays an image using virtual screen data (to be described later with reference to FIG. 5, ST504, ST505, ST506).

一方、医用画像データ（原画像データ）による画像データの取得及び表示は、ＳＴ４０５〜ＳＴ４０８において行う。 On the other hand, acquisition and display of image data based on medical image data (original image data) is performed in ST405 to ST408.

まず、医用画像保管装置１２に画像一覧表示を要求し（ＳＴ４０５）、医用画像保管装置１２から医用画像データの所在情報を取得して（ＳＴ４０６）、その所在の医用画像データの原画像データの取得を開始する（ＳＴ４０７）。そしてＳＴ４０８において、医用画像データにより表示を行う。医用画像データは原画像データであり、仮想画面データに比べて容量が大きい。したがって、医用画像表示装置１１においては、医用画像データの取得には非常に時間がかかる。 First, the medical image storage device 12 is requested to display an image list (ST405), the location information of the medical image data is acquired from the medical image storage device 12 (ST406), and the original image data of the medical image data at that location is acquired. Is started (ST407). In ST408, display is performed using medical image data. The medical image data is original image data and has a larger capacity than the virtual screen data. Therefore, in the medical image display apparatus 11, it takes a very long time to acquire medical image data.

そこで、まず、仮想画面データによる表示が行われ、その後、重ねて医用画像データにより高画質の表示がなされることになる。この点については、図１０を用いて後で詳しく述べる。 Therefore, first, display using virtual screen data is performed, and then high quality display is performed using medical image data. This point will be described later in detail with reference to FIG.

ＳＴ４０５において、医用画像の表示を医用画像保管装置１２に要求する際には、患者ＩＤ（Identifier）、検査日、モダリティ名、検査ＵＩＤ（Unique Identifier）等の医用画像を一意に識別する情報を医用画像保管装置１２に送信することが一般的に行われる。本実施形態ではこれらの情報に加えて、モニタ描画のための低解像度画像（仮想画面データ）を生成するために画像表示領域２２の解像度情報（画素数）を合わせて送信する。 In ST405, when the medical image storage apparatus 12 is requested to display a medical image, information for uniquely identifying the medical image such as a patient ID (Identifier), an examination date, a modality name, and an examination UID (Unique Identifier) is used for medical purposes. Transmission to the image storage device 12 is generally performed. In this embodiment, in addition to these pieces of information, in order to generate a low resolution image (virtual screen data) for monitor drawing, the resolution information (number of pixels) of the image display area 22 is also transmitted.

ＳＴ４０２で、要求された医用画像がローカルディスクに保存されていない場合の、仮想画面データの作成、送信、表示の処理フローを図５に示す。 FIG. 5 shows a process flow for creating, transmitting, and displaying virtual screen data when the requested medical image is not saved in the local disk in ST402.

医用画像保管装置１２が、医用画像表示装置１１から画像表示要求信号を操作情報受信部３１において受ける（ＳＴ５０１）と、操作情報解析部３２では画像蓄積部３３に保管している医用画像の原画像データまたはその原画像データの所在位置情報を医用画像表示装置１１に送信を開始する（ＳＴ５０２）。 When the medical image storage device 12 receives an image display request signal from the medical image display device 11 at the operation information reception unit 31 (ST501), the operation information analysis unit 32 stores an original image of the medical image stored in the image storage unit 33. Data or location information of the original image data is started to be transmitted to the medical image display device 11 (ST502).

これとともに、医用画像の原画像データを画像蓄積部３３から読出して、図示しないメモリに一時的に読み込む（ＳＴ５０３）。医用画像保管装置１２はこのメモリに読み込んだ医用画像データと、医用画像表示装置１１から送信されてきた画像表示領域２２の解像度情報を元に、画像表示領域２２に表示すべき仮想画面データを生成（ＳＴ５０４）して、医用画像表示装置１１に送信する（ＳＴ５０５）。 At the same time, the original image data of the medical image is read from the image storage unit 33 and temporarily read into a memory (not shown) (ST503). The medical image storage device 12 generates virtual screen data to be displayed in the image display region 22 based on the medical image data read into the memory and the resolution information of the image display region 22 transmitted from the medical image display device 11. (ST504) and transmit to the medical image display device 11 (ST505).

仮想画面データは医用画像データよりも容量が少ない。この仮想画面データ生成方法は、一時的にメモリに読み込んだ医用画像を、医用画像保管装置１２に接続されているモニタ上に表示するためのモニタ描画用のデータの生成方法と同じである。本実施形態では画像を医用画像保管装置１２のモニタには描画せず、表示領域の解像度を変換して医用画像表示装置１１のモニタ４７に表示するようにする。 Virtual screen data has less capacity than medical image data. This virtual screen data generation method is the same as the method for generating monitor drawing data for displaying a medical image temporarily read into a memory on a monitor connected to the medical image storage device 12. In this embodiment, the image is not drawn on the monitor of the medical image storage device 12, but the resolution of the display area is converted and displayed on the monitor 47 of the medical image display device 11.

この仮想画面データの具体的な生成方法は、原画像データから画像ビューワの画像表示領域２２の画素数になるよう画素をある一定の規則に従って間引いたようなもので、例えばビットマップ等の画像データである。 A specific method for generating the virtual screen data is such that pixels are thinned out from the original image data according to a certain rule so as to have the number of pixels in the image display area 22 of the image viewer. It is.

図６は、同実施形態に係る医用画像保管装置１２が作成した仮想画面データを、医用画像表示装置１１の画像ビューワで表示するときの処理フローである。医用画像表示装置１１は生成された仮想画面データを受信（ＳＴ６０１）し、そのデータを画像表示領域２２に表示する（ＳＴ６０２）。 FIG. 6 is a processing flow when the virtual screen data created by the medical image storage device 12 according to the embodiment is displayed by the image viewer of the medical image display device 11. The medical image display device 11 receives the generated virtual screen data (ST601), and displays the data in the image display area 22 (ST602).

図７は、同実施形態に係る医用画像表示装置１１の画像ビューワ上で仮想画面データに対して操作をしたときの処理フローである。医用画像表示装置１１は画像表示領域２２に表示している画像に対して操作が行われた場合、その操作を操作情報保持部４２に操作履歴として記録し（ＳＴ７０１）、ユーザによってどのような操作が実施されたかの情報を医用画像保管装置１２に送信する（ＳＴ７０２）。 FIG. 7 is a processing flow when the virtual screen data is operated on the image viewer of the medical image display apparatus 11 according to the embodiment. When an operation is performed on the image displayed in the image display area 22, the medical image display device 11 records the operation as an operation history in the operation information holding unit 42 (ST 701), and what operation is performed by the user. Is transmitted to the medical image storage apparatus 12 (ST702).

画像めくりの場合には、次に表示したい画像情報を医用画像保管装置１２に送信（ＳＴ７０３）し、画像表示領域２２のウインドウサイズを変化させたり、マルチウインドウにするなどの表示領域や表示様式の変更の場合には、これにより変更された画像表示領域２２の解像度及び表示している画像情報を送信する（ＳＴ７０４）。また拡大・縮小、階調変更、パンニングの場合には、画像操作の種類、マウス操作の移動量及び表示している画像情報を送信する（ＳＴ７０５）。 In the case of turning the image, the image information to be displayed next is transmitted to the medical image storage device 12 (ST703), the window size of the image display area 22 is changed, or the display area and display style such as a multi-window are changed. In the case of a change, the resolution of the image display area 22 changed thereby and the displayed image information are transmitted (ST704). In the case of enlargement / reduction, gradation change, and panning, the type of image operation, the amount of movement of the mouse operation, and the displayed image information are transmitted (ST705).

ステップＳＴ７０６では、医用画像保管装置１２から再生成された仮想画面データを受信する。そして次のＳＴ７０７で画像ビューワの画面表示領域２２に受信した仮想画面データを埋め込み表示を行う。 In step ST706, the virtual screen data regenerated from the medical image storage device 12 is received. In the next ST707, the received virtual screen data is embedded and displayed in the screen display area 22 of the image viewer.

このように、ユーザは原画像データで行える操作と同一の操作を仮想画面上で行うことができ、しかも画像表示領域２２に表示される解像度も同じである。従って医師らは表示されている画像が原画像なのか仮想画面なのか意識をすることなく診断が可能である。 As described above, the user can perform the same operation on the virtual screen as that performed on the original image data, and the resolution displayed in the image display area 22 is also the same. Therefore, doctors can diagnose without being aware of whether the displayed image is an original image or a virtual screen.

図８は、同実施形態に係る医用画像保管装置が医用画像表示装置の画像ビューワ上の操作情報を受信したときの処理フローである。医用画像保管装置１２は医用画像表示装置１１の画像ビューワからＳＴ８０１で受信した操作情報を元に仮想画面データを再作成し（ＳＴ８０２）、医用画像表示装置１１に送信し、画像ビューワで表示する（ＳＴ８０３）。 FIG. 8 is a processing flow when the medical image storage apparatus according to the embodiment receives operation information on the image viewer of the medical image display apparatus. The medical image storage device 12 recreates virtual screen data based on the operation information received in ST801 from the image viewer of the medical image display device 11 (ST802), transmits it to the medical image display device 11, and displays it on the image viewer (STEP 802). ST803).

同実施形態に係る医用画像表示装置の画像ビューワが、取得した原画像データに切り替えて表示するときの処理フローを、図９に示す。医用画像表示装置１１の画像ビューワでは医用画像データの取得状況を定期的に確認し（ＳＴ９０１）、該当する医用画像データが全て取得された場合（ＳＴ９０１：Ｙｅｓ）、最初に画像を表示してからそれまでに行われた画像に対する画像操作の履歴記録から操作を全て反映させ（ＳＴ９０２）、画像ビューワの画像表示部に医用画像を表示する（ＳＴ９０３）。このとき表示していた仮想画面データによる表示から実際の医用画像データを用いた表示へ表示方法を切り替える。 FIG. 9 shows a processing flow when the image viewer of the medical image display apparatus according to the embodiment switches to and displays the acquired original image data. The image viewer of the medical image display device 11 periodically checks the acquisition status of medical image data (ST901), and when all the corresponding medical image data is acquired (ST901: Yes), after displaying the image first. All the operations from the history record of the image operations performed so far are reflected (ST902), and the medical image is displayed on the image display unit of the image viewer (ST903). The display method is switched from the display using the virtual screen data displayed at this time to the display using the actual medical image data.

図１０は、医用画像表示装置１１が医用画像保管装置１２へ画像要求信号を送出してから原画像データと仮想画面データを取得するまでの時間差を示すシーケンス図である。図中では、図４から図９で用いたステップ番号を示している。 FIG. 10 is a sequence diagram illustrating a time difference from when the medical image display device 11 sends an image request signal to the medical image storage device 12 until the original image data and the virtual screen data are acquired. In the figure, step numbers used in FIGS. 4 to 9 are shown.

まず、ステップＳＴ４０５、ＳＴ５０１において、医用画像表示装置１１から医用画像保管装置１２へ画像表示の要求を行う。原画像データの取得シーケンスは、画像蓄積部３３上の画像所在位置を受信（ＳＴ４０６）して、原画像データのダウンロードを開始する（ＳＴ４０７）。 First, in steps ST405 and ST501, a request for image display is made from the medical image display device 11 to the medical image storage device 12. In the original image data acquisition sequence, the image location on the image storage unit 33 is received (ST406), and downloading of the original image data is started (ST407).

ダウンロードの開始から原画像データの取得完了までの時間（原画像データ取得時間）をＴ１とする。例えば、１００ＭＢクラスの医用画像データ（原画像データ）を考えると、その画像をダウンロードするのにかかる時間Ｔ１は、ネットワークの回線速度にもよるが、通常、数十秒から数分かかる。 The time from the start of downloading until the completion of acquisition of original image data (original image data acquisition time) is T1. For example, considering 100 MB class medical image data (original image data), the time T1 required to download the image usually takes several tens of seconds to several minutes depending on the line speed of the network.

また仮想画面データの取得シーケンスは、ステップＳＴ５０３において、原画像データを図示しないメモリに読み込む。この読み込み時間は１００ＭＢクラスの医用画像データに対して数秒であり、この時間（読み込み時間）をＴ２とする。読み込みを完了した原画像データから仮想画面データを作成（ＳＴ５０４）した後、医用画像表示装置１１へダウンロードを終了するまでの時間（仮想画面データ取得時間）をＴ３とする。 In the virtual screen data acquisition sequence, in step ST503, the original image data is read into a memory (not shown). This reading time is several seconds for 100 MB class medical image data, and this time (reading time) is T2. The time (virtual screen data acquisition time) until virtual screen data is created from the original image data that has been read (ST504) until the download to the medical image display device 11 is completed is T3.

この時間Ｔ３は、医用画像表示装置１１の画像表示領域２２で設定される解像度（画素数）に依存し、例えば、モノクロ画像において１２８０×１０２４の解像度では最大２ＭＢ程度、２６５０×２０４８の解像度では最大１０ＭＢ程度の画像サイズとなる。したがって、仮想画面データをダウンロードする時間Ｔ３は１００ＭＢクラスの原画像データについて言えば、Ｔ１の１０分の１から５０分の１となり、数秒でダウンロードが完了することが理解される。 This time T3 depends on the resolution (number of pixels) set in the image display area 22 of the medical image display device 11. For example, in a monochrome image, the maximum is about 2 MB at a resolution of 1280 × 1024, and the maximum is at a resolution of 2650 × 2048. The image size is about 10 MB. Therefore, it can be understood that the time T3 for downloading the virtual screen data is 1/10 to 1/50 of T1 for the 100 MB class original image data, and the download is completed in a few seconds.

ここで述べたＴ１からＴ３までの時間以外のステップでかかる処理時間は、ほとんど瞬時に完了するので無視すると、医用画像表示装置１１において、原画像データと仮想画面データが表示されるまでの時間差△ＴはおおよそＴ１−Ｔ２−Ｔ３となる。 The processing time required in the steps other than the time from T1 to T3 described here is completed almost instantaneously. Therefore, if ignored, the time difference Δ until the original image data and the virtual screen data are displayed on the medical image display device 11 T is approximately T1-T2-T3.

このように、データ容量の少ない仮想画面データを原画像データよりも早く取得することにより、医師らは原画像データのダウンロード完了まで（数十秒から数分）待つことなく、数秒後には診断が可能となる。 In this way, by acquiring virtual screen data with a small data capacity earlier than the original image data, doctors do not have to wait until the download of the original image data is completed (several tens of minutes to several minutes). It becomes possible.

この時間短縮率は、ほぼ仮想画面データサイズ量と原画像データサイズとの比で決まるため、扱う原画像データのサイズが大きくなればなる程、時間短縮の効果は大きくなるという利点を持つ。 Since this time reduction rate is substantially determined by the ratio between the virtual screen data size and the original image data size, there is an advantage that the effect of time reduction increases as the size of the original image data to be handled increases.

以上説明したように、本発明のこの実施形態によれば医用画像表示装置がネットワーク経由で医用画像データを全て取得してから画像表示する必要がないため、最初に医用画像を表示してユーザに見せるまでの時間を大幅に短縮することが可能になる。また、仮想画面データだけでなく非圧縮の原画像データを同時に扱うため、この非圧縮画像データを医用画像表示装置側に表示することができる。従って表示速度を速めるために画質を落とす必要がなくなるという効果を奏する。 As described above, according to this embodiment of the present invention, since it is not necessary for the medical image display device to display all the medical image data after acquiring all the medical image data via the network, the medical image is displayed first to the user. It is possible to greatly shorten the time until the show. Further, since not only the virtual screen data but also the uncompressed original image data is handled at the same time, the uncompressed image data can be displayed on the medical image display device side. Therefore, there is an effect that it is not necessary to reduce the image quality in order to increase the display speed.

また、この仮想画面データ上で所望の画像操作が可能であるので、原画像データをダウンロード中であっても、この画像操作情報をもとに医用画像保存装置側で再生成した仮想画面データを再取得して表示することが可能である。これにより、医師らは表示されている画像が仮想画面データなのか原画像データなのかを区別することなく、所望の表示解像度を維持しながら診断が可能である。 In addition, since desired image operations can be performed on the virtual screen data, even if the original image data is being downloaded, the virtual screen data regenerated on the medical image storage device side based on the image operation information is displayed. It is possible to re-acquire and display. Thus, doctors can make a diagnosis while maintaining a desired display resolution without distinguishing whether the displayed image is virtual screen data or original image data.

さらに、本実施形態で使用する仮想画面データは、モニタ用の描画データであるのでネットワーク負荷が低く高速表示が行え、しかも仮想画面データを医用画像保管装置上または医用画像表示装置上に予め蓄積しておく必要もないので、保存容量を低減することができる。 Furthermore, since the virtual screen data used in this embodiment is drawing data for monitoring, the network load is low and high-speed display can be performed, and the virtual screen data is stored in advance on the medical image storage device or the medical image display device. Since it is not necessary to keep it, the storage capacity can be reduced.

尚、上記実施形態では、画質が特に重要視されるマンモグラフィ装置のように、原画像データのファイルサイズが大きい医用画像データを医用画像表示装置で扱う場合について説明した。しかし、すでに医用画像保存装置側に低解像度の圧縮画像が保存されている場合には、この低解像度の画像を先に送ることができ、仮想画面データを生成しないようにすることも可能である。また、原画像データを必要とせず仮想画面データだけで読影可能な場合もあるので、必ずしも原画像データと仮想データの両方を必要としない。 In the above-described embodiment, the case where medical image data having a large file size of original image data is handled by the medical image display device, such as a mammography device in which image quality is particularly important, has been described. However, if a low-resolution compressed image is already stored on the medical image storage device side, this low-resolution image can be sent first, and virtual screen data can be prevented from being generated. . Further, since there are cases where interpretation is possible with only virtual screen data without requiring original image data, both the original image data and the virtual data are not necessarily required.

本発明においては、所望の本来の医用画像が医用画像表示装置の画面上に表示される前に、医用画像保管装置において生成されネットワークを介して、先に送られてきた仮想画面が表示される。したがって、医用画像表示装置から医用画像保管装置に対して表示要求がなされてから、医用画像表示装置において所望の医用画像に対応する仮想画面の画像が表示されるまでの時間を大幅に短縮することができる
また、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。本発明の技術思想を用いる限りこれらの変形例も本発明に含まれる。 In the present invention, before the desired original medical image is displayed on the screen of the medical image display device, the virtual screen generated in the medical image storage device and sent over the network is displayed. . Therefore, the time from when a display request is made from the medical image display device to the medical image storage device until the virtual image corresponding to the desired medical image is displayed on the medical image display device is greatly reduced. In addition, the present invention is not limited to the above-described embodiments as they are, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined. As long as the technical idea of the present invention is used, these modifications are also included in the present invention.

１０…コンピュータネットワーク
１１…医用画像表示装置
１２…医用画像保管装置
１３…マンモグラフィ装置
１４…モダリティ
２１…タイトル領域
２２…画像表示領域
２３…画像操作領域
３１…操作情報受信部
３２…操作情報解析部
３３…画像蓄積部
３４…仮想画面データ作成部
３５…画像送信部
４１…操作入力部
４２…操作情報保持部
４３…画像保存部
４４…操作情報解析部
４５…画像受信部
４６…データ切替部
４７…モニタ
４８…画像表示部 DESCRIPTION OF SYMBOLS 10 ... Computer network 11 ... Medical image display apparatus 12 ... Medical image storage apparatus 13 ... Mammography apparatus 14 ... Modality 21 ... Title area 22 ... Image display area 23 ... Image operation area 31 ... Operation information receiving part 32 ... Operation information analysis part 33 ... Image storage unit 34 ... Virtual screen data creation unit 35 ... Image transmission unit 41 ... Operation input unit 42 ... Operation information holding unit 43 ... Image storage unit 44 ... Operation information analysis unit 45 ... Image reception unit 46 ... Data switching unit 47 ... Monitor 48 ... Image display section

Claims

A medical image display device capable of displaying virtual screen data corresponding to the number of pixels in the image display area;
A medical image storage device capable of storing medical image data and generating the corresponding virtual screen data from the medical image data;
When there is a display request for desired medical image data from the medical image display device, virtual screen data having a data capacity smaller than that of the medical image data is generated from the medical image data, and the desired medical image data and the corresponding virtual image data are generated. Sending screen data to the medical image display device via a network;
The medical image display device displays a corresponding virtual screen based on the acquired virtual screen data until the download of the desired medical image data transmitted from the medical image display device is completed. A medical image system characterized by

The medical image display device further includes means for transmitting image operation information performed on the corresponding virtual screen to be displayed to the medical image storage device,
The medical image storage device transmits data of a virtual screen on which the desired medical image is created according to the image operation information sent from the medical image display device to the medical image display device. The medical image system according to 1.

The medical image storage device and the medical image display device are connected to the network,
The medical image storage device includes an image storage unit that stores medical image data;
Image operation information performed on the image displayed by the user on the medical image display device, and resolution information of the image display region based on the size of the image display region on the monitor connected to the medical image display device An operation information receiving unit for receiving
The medical image data specified by the image operation information is read from the image storage unit, and the display area of the medical image data specified by the image operation information is converted into the number of pixels of the image display area specified by the resolution information. A virtual screen data generation unit that generates virtual screen data having a data capacity smaller than that of the medical image data;
An image transmission unit that transmits the virtual screen data and the medical image data to the medical image display device;
The medical image display device includes an operation input unit for inputting the image operation information designated by the user;
An operation information holding unit for holding the image operation information and the resolution information;
An operation information transmitting unit that transmits the resolution information and the image operation information to the medical image holding tube apparatus,
An image receiving unit that receives the virtual screen data and the medical image data transmitted from the medical image holding tube apparatus,
An image storage unit for storing the medical image data;
A switching unit that switches the display based on the virtual screen data to the display based on the medical image data and displays the image on the image display area portion of the monitor when all of the medical image data being acquired is stored in the image storage unit; ,
A medical image system comprising:

The image operation information is image operation information including at least an operation for designating medical image data to be displayed on the medical image display device and an operation for designating an image display area on the monitor. Medical imaging system.