New! View global litigation for patent families

JP5061306B2 - Client device, the server device and the volume data transmission system - Google Patents

Client device, the server device and the volume data transmission system

Info

Publication number
JP5061306B2
JP5061306B2 JP2008089917A JP2008089917A JP5061306B2 JP 5061306 B2 JP5061306 B2 JP 5061306B2 JP 2008089917 A JP2008089917 A JP 2008089917A JP 2008089917 A JP2008089917 A JP 2008089917A JP 5061306 B2 JP5061306 B2 JP 5061306B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
transmission
image
system
type
selected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008089917A
Other languages
Japanese (ja)
Other versions
JP2009246634A (en )
Inventor
晃敏 吉田
弘樹 林
真幸 橋本
Original Assignee
Kddi株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Abstract

<P>PROBLEM TO BE SOLVED: To display a high-quality image as much as possible when there are restrictions on an available transmission band obtained from a network side and a display request time that a user specifies. <P>SOLUTION: A client device includes: a transmission protocol determination section 201b which selects one of a file transmission type image transmission system and a partial transmission type image transmission system; a transmission request block determination section 201e which predicts a time needed to transmit volume data to be displayed when the partial transmission type image transmission system is selected, and determines maximum resolution for transmission and display within the predicted time; and a partial transmission block requesting/reception section 201f which requests a server device to transmit all of selected volume data when the file transmission type image transmission system is selected, and requests the server device to transmit volume data having the determined resolution to be displayed when the partial transmission type image transmission system is selected. <P>COPYRIGHT: (C)2010,JPO&amp;INPIT

Description

本発明は、本発明は、CTやMRIなどの医療用ボリュームデータ(3次元画像データ)をネットワーク上で利用する際に、複数のサムネイル(縮小画像)を利用者の要求時間内に表示する技術に関する。 The present invention, the present invention displays medical volume data, such as CT or MRI (the three-dimensional image data) when used on a network, a plurality of thumbnail (reduced image) in the user's request time Technology on.

従来から、医療用ボリュームデータの圧縮として、3次元ウェーブレット変換を用いた符号化方式が知られている。 Conventionally, as a compressed medical volume data, the encoding method using the three-dimensional wavelet transform is known. 一例として、静止画像符号化の国際標準であるJPEG2000では、3次元ボリュームデータの符号化に関する検討が進んでいる。 As an example, in the JPEG2000 is an international standard for still image coding, it is progressing Study coding of three-dimensional volume data.

ボリュームデータの伝送方式としては、単純にファイルを伝送するもののほかに、上記3次元ウェーブレット変換符号化ファイルの一部を伝送して、受信側でこれを復号することにより、部分的な3次元ウェーブレット変換係数を再生し、これを逆変換することにより、画像を再生することができる。 The transmission method of the volume data, the simple addition to those transmitting the file, by transmitting a part of the three-dimensional wavelet transform coding file by decoding it in the receiving side, partial 3-dimensional wavelet the transform coefficients reproduced by inverse conversion of this, it is possible to reproduce an image. ただし、低周波数成分に相当するウェーブレット変換係数しか送っていない場合は、解像度の低い画像が再生される。 However, if not only send the wavelet transform coefficients corresponding to the low frequency components, a low resolution image is reproduced. また、空間的に画像の一部に相当するウェーブレット変換係数しか送っていない場合は、画像の一部が再生される。 Moreover, if not only send the wavelet transform coefficients corresponding to a part of the spatial image, a part of the image is reproduced.
Schelkens, P. Schelkens, P. Munteanu, A. Munteanu, A. Tzannes, A. Tzannes, A. Brislawn, C. Brislawn, C. " JPEG2000. Part 10. Volumetric data encoding ", Proceedings of IEEE International Symposium on Circuits and Systems, pp. " JPEG2000. Part 10. Volumetric Data Encoding ", Proceedings Of IEEE International Symposium On Circuits And Systems, Pp. 3874−3877, May. 3874-3877, May. 2006. 2006.

CT、MRIにより取得される医療用ボリュームデータは、データ量が膨大であるため、それらをネットワーク上で利用する際に遅延を生じる。 CT, medical volume data acquired by MRI, since the amount of data is enormous, resulting in delay in using them over a network. データ量を圧縮するための符号化を行なったとしても、すべてのデータを送るとすると多大な時間を要する。 Even performed encoding for compressing data quantity, time consuming When sending all the data. 画質に関して階層化をおこなう階層符号化を行なったとしても、一般に伝送帯域の制約下において、送りたいボリュームデータファイル、そこに含まれる画像枚数、伝送する品質階層(解像度など)が決まれば、自動的にデータ伝送・表示に要する時間が決まる。 Even performed hierarchical coding which performs layering respect quality, in restriction of a general transmission band, volume data file to be sent, the number of images contained therein, once the quality layer to be transmitted (such as resolution), automatically It determines the time required for data transmission and display on. 医療のアプリケーションを考えた場合、画像伝送装置の利用者である医師の要求を満足させるための表示時間のようなものがあると考えられる。 Considering the medical application, believed to be something like the display of time to satisfy the requirements of the physician who is a user of the image transmission apparatus. 利用者が表示要求時間を指定しても、その要求を満たせない場合がある。 Even if the user has specified a request to display time, there is a case that does not satisfy the request.

本発明は、このような事情に鑑みてなされたもので、ネットワーク側から取得する利用可能伝送帯域、利用者が指定する表示要求時間の制約がある条件下で、できるだけ高画質の画像を表示することができるクライアント装置、サーバ装置およびボリュームデータ伝送システムを提供することを目的とする。 The present invention has such been made in view of the circumstances, the available transmission band obtained from the network side under conditions where there is a display request time constraints the user designates to display the possible high quality image client device capable for its object to provide a server apparatus and a volume data transmission systems.

(1)上記の目的を達成するために、本発明は、以下のような手段を講じた。 (1) To achieve the above object, the present invention took measures as described below. すなわち、本発明のクライアント装置は、クライアント装置が、記録媒体に記録されているボリュームデータの伝送をサーバ装置に対して要求し、サーバ装置が、前記要求されたボリュームデータを前記クライアント装置へ伝送するボリュームデータ伝送システムに適用されるクライアント装置であって、伝送を要求するボリュームデータを選択するファイル選択部と、前記選択したボリュームデータを前記サーバ装置から取得する際の方式として、予め定められた基準に基づいて、前記選択したボリュームデータのすべてを伝送するファイル伝送型画像伝送方式または前記選択したボリュームデータの一部を伝送する部分伝送型画像伝送方式のいずれか一方を選択する伝送プロトコル決定部と、前記伝送プロトコル決定部が前記部分伝送型 That is, the client apparatus of the present invention, the client device, the transmission of the volume data recorded in the recording medium is requested to the server apparatus, the server apparatus transmits the requested volume data to the client device a client device that is applied to the volume data transmission system, and a file selection unit for selecting a volume data requesting the transmission, as a method for acquiring volume data mentioned above selected from the server device, a predetermined reference based on a transmission protocol determination unit for selecting either one of said selected portions transmission type image transmission system in which part of the file transmission type image transmission system or the selected volume data to transmit all the volume data the transmission protocol determination unit the partial transmission type 像伝送方式を選択した場合、表示対象となるボリュームデータの伝送に要する時間を予測し、予測した時間内で伝送および表示可能な最大の解像度を決定する伝送要求ブロック決定部と、前記伝送プロトコル決定部がファイル伝送型画像伝送方式を選択した場合は、前記選択したボリュームデータのすべてを伝送する旨の要求を前記サーバ装置に対して行なう一方、前記伝送プロトコル決定部が前記部分伝送型画像伝送方式を選択した場合は、前記決定された解像度を有する表示対象となるボリュームデータを伝送する旨の要求を前記サーバ装置に対して行なう伝送要求部と、を備えることを特徴としている。 If you select an image transmission method, predicts the time required for transmission of the volume data to be displayed, a transmission request block determining section for determining a transmission and displayable maximum resolution within the predicted time, the transmission protocol determination If part selects the file transmission type image transmission system, while performing a request to transmit all the volume data and the selected relative to the server apparatus, the transmission protocol determination unit the partial transmission type image transmission system the case of selecting is characterized by comprising: a transmission request unit which performs a request to transmit the volume data to be displayed with the determined resolution to the server device.

この構成により、ボリュームデータ表示装置のサムネイル画面の初期表示において、利用者の設定する表示要求時間内に、可能な限り高解像度のサムネイル画像を表示することができる。 With this configuration, in the initial display of the thumbnail screen of the volume data display device, in a display request time set by the user, it is possible to display a high-resolution thumbnail images as much as possible.

(2)また、本発明のクライアント装置において、前記伝送プロトコル決定部は、前記選択したボリュームデータのすべてを伝送するために要する時間を予測し、要求時間内に前記選択したボリュームデータのすべてを伝送可能である場合は、前記ファイル伝送型画像伝送方式を選択する一方、要求時間内に前記選択したボリュームデータのすべてを伝送可能でない場合は、前記部分伝送型画像伝送方式を選択することを特徴としている。 (2) Further, in the client apparatus of the present invention, the transmission protocol determination unit may transmit all predict the time required to transmit all of the volume data said selected, the volume data in which the selected within a required time where possible, while selecting the file transmission type image transmission method, if not capable of transmitting all the volume data, wherein the selected in the request time, the selection means selects the partial transmission type image transmission system there.

この構成により、利用者の設定する表示要求時間内に、可能な限り高解像度のサムネイル画像を表示することができる。 With this configuration, the display request time set by the user, it is possible to display a high-resolution thumbnail images as much as possible.

(3)また、本発明のクライアント装置において、前記伝送要求ブロック決定部は、前記選択したボリュームデータに関心領域(ROI:Region Of Interest)が設定されている場合は、前記関心領域に含まれるボリュームデータが、前記関心領域に含まれないボリュームデータよりも高解像度または高ビット精度で伝送されるように、伝送の階層を決定することを特徴としている。 (3) Further, in the client apparatus of the present invention, the transmission request block decision unit, the selected volume data to the region of interest (ROI: Region Of Interest) If is set, the volume contained in the region of interest data, to be transmitted at high resolution or high bit precision than the volume data that is not included in the region of interest is characterized in determining a hierarchy of transmission.

この構成により、ボリュームデータにROIが設定されている場合には、ROI内の画像をより高解像度に表示することが可能となる。 With this configuration, when the ROI is set in the volume data, it is possible to display the image in the ROI to a higher resolution.

(4)また、本発明のクライアント装置において、前記伝送要求ブロック決定部は、前記選択したボリュームデータのうち、初期表示で必要なボリュームデータのみを要求対象に決定することを特徴としている。 (4) Further, in the client apparatus of the present invention, the transmission request block determination unit among the volume data said selected, is characterized by determining only the volume data required for the initial display on the request target.

この構成により、初期表示時に表示されない画像に対する符号化ブロックを伝送する必要が無くなり、逆に、表示対象とする画像に対しては、表示要求時間内により多くの符号化ブロックを伝送することができ、より高解像度での表示が可能となる。 This configuration eliminates the need to transmit coded blocks for images being displayed during initial display, on the contrary, for the image to be displayed, it is possible to transmit more coded block by the display request time , it is possible to display on a higher resolution.

(5)また、本発明のクライアント装置において、前記伝送要求ブロック決定部は、前記選択したボリュームデータのうち、初期表示以降で必要なボリュームデータを、最低解像度で要求する決定を行なうことを特徴としている。 (5) Further, in the client apparatus of the present invention, the transmission request block determination unit among the volume data the selected volume data required for the initial display later, as characterized by performing the decision to request a minimum resolution there.

この構成により、初期表示後、例えば、画面のスクロール操作があった場合にも、初期表示画像以外の画像については、最低解像度のサムネイル(ボリュームデータ)を瞬時に表示することができる。 With this configuration, after the initial display, for example, even when there is a screen scrolling operation, an image other than the initial display image can be displayed lowest resolution of thumbnails (volume data) instantaneously. これにより、利用者が待機させられることによるストレスを軽減させることができる。 Thus, it is possible to reduce stress caused by the user is made to wait.

(6)また、本発明のクライアント装置において、前記伝送要求ブロック決定部は、前記最低解像度のボリュームデータを要求した後、ユーザインタフェース部からの要求に応じて、バックグラウンドで前記最低解像度のボリュームデータと同じボリュームデータをより高い解像度で要求する決定を行なうことを特徴としている。 (6) Further, in the client apparatus of the present invention, the transmission request block determination unit, after requesting the volume data of the lowest resolution, in response to a request from the user interface unit, the lowest resolution of the volume data in the background and characterized by performing the decision to request a higher resolution of the same volume data as.

この構成により、当初は解像度の低い画像が表示されるが、次第に解像度の高い画像を表示することができる。 This arrangement, although initially be displayed low resolution image, it is possible to gradually display a high resolution image. これにより、利用者が待機させられることによるストレスを軽減させることができる。 Thus, it is possible to reduce stress caused by the user is made to wait.

(7)また、本発明のクライアント装置において、前記伝送要求部は、前記サーバ装置との間で、前記選択したボリュームデータの送受信を行なった時間を測定し、前記伝送要求ブロック決定部は、前記測定された時間に基づいて、表示対象となるボリュームデータの伝送に要する時間を予測することを特徴としている。 (7) Further, in the client apparatus of the present invention, the transmission request unit, between the server device, and measuring the time of performing transmission and reception of the volume data the selected, the transmission request block decision unit, the based on the measured time, it is characterized by predicting the time required to transmit the volume data to be displayed.

この構成により、予め測定した伝送時間を利用することができるので、伝送要求ブロック決定部における伝送時間の予測を迅速に行なうことが可能となる。 This arrangement makes it possible to utilize the transmission time measured in advance, it is possible to perform quickly the predicted transmission time in the transmission request block determination unit.

(8)また、本発明のサーバ装置は、請求項1から請求項7のいずれかに記載のクライアント装置からの要求に応じて、前記記録媒体からボリュームデータを読み出して、要求されたボリュームデータのすべてを伝送するファイル伝送型画像伝送方式または要求されたボリュームデータの一部を伝送する部分伝送型画像伝送方式のいずれか一方で、ボリュームデータのすべてまたは一部を前記クライアント装置へ伝送することを特徴としている。 (8) The server apparatus of the present invention, in response to a request from a client device according to any one of claims 1 to 7, from the recording medium by reading the volume data, the requested volume data all part of the file transmission type image transmission method or the requested volume data transmitted either in one portion transmission type image transmission system for transmitting and to transmit all or part of the volume data to the client device It is characterized.

この構成により、ボリュームデータ表示装置のサムネイル画面の初期表示において、利用者の設定する表示要求時間内に、可能な限り高解像度のサムネイル画像を表示することができる。 With this configuration, in the initial display of the thumbnail screen of the volume data display device, in a display request time set by the user, it is possible to display a high-resolution thumbnail images as much as possible.

(9)また、本発明のボリュームデータ伝送システムは、請求項1から請求項7のいずれかに記載のクライアント装置と、請求項8記載のサーバ装置と、から構成されることを特徴としている。 (9) Further, the volume data transmission system of the present invention is characterized and the client device according to any one of claims 1 to 7, and a server apparatus according to claim 8, in that they are composed of.

この構成により、ボリュームデータ表示装置のサムネイル画面の初期表示において、利用者の設定する表示要求時間内に、可能な限り高解像度のサムネイル画像を表示することができる。 With this configuration, in the initial display of the thumbnail screen of the volume data display device, in a display request time set by the user, it is possible to display a high-resolution thumbnail images as much as possible.

本発明によれば、ボリュームデータ表示装置のサムネイル画面の初期表示において、利用者の設定する表示要求時間内に、可能な限り高解像度のサムネイル画像を表示することができる。 According to the present invention, in the initial display of the thumbnail screen of the volume data display device, in a display request time set by the user, it is possible to display a high-resolution thumbnail images as much as possible.

本実施形態では、セキュリティや信頼性を考慮し、アプリケーションが通信を開始する際に、ネットワーク側が伝送に必要な伝送帯域を確保するタイプの医療専用のネットワークを想定する。 In the present embodiment, in consideration of security and reliability, an application when starting the communication, the network side is assumed type of medical dedicated network to secure a transmission band necessary for transmission. 本ネットワークにおいては、毎回利用可能なネットワーク帯域が異なる可能性があるが、ネットワーク側から、ほぼリアルタイムで使える伝送帯域幅の情報が取得できるものとする。 In this network, there is a possibility that each network bandwidth available is different, from the network side, and it can acquire the information of the transmission bandwidth substantially available in real time.

図1は、本実施形態に係るボリュームデータ伝送システムの概略構成を示す図である。 Figure 1 is a diagram showing a schematic configuration of a volume data transmission system according to the present embodiment. ネットワークNを介して、サーバ装置100とクライアント装置200とが接続されている。 Via the network N, it is connected to a server device 100 and client device 200. サーバ装置100は、符号化部101、記憶媒体102、およびサーバ伝送部103を備える。 Server apparatus 100 includes a coding unit 101, a storage medium 102 and the server transmission unit 103. クライアント装置200は、クライアント伝送部201、復号部202、および表示部203を備える。 The client device 200 includes a client transmitting unit 201, decoding unit 202 and the display unit 203. なお、表示部203は、ユーザインタフェース部を含む。 The display unit 203 includes a user interface unit. サーバ装置100の符号化部101は、ボリュームデータを3次元ウェーブレット変換符号化する。 The encoding unit 101 of the server apparatus 100, three-dimensional wavelet transform coding volume data.

(3次元ウェーブレット変換) (3-dimensional wavelet transform)
ボリュームデータは、2次元画像(xy平面画像:スライス画像)の複数の集合であると考える。 Volume data, two-dimensional image: considered a plurality of sets of (xy plane image slice image). スライス画像の重なりの方向をz方向とする。 The direction of overlap of slice images and z-direction. 3次元ウェーブレット変換は、ボリュームデータに対し、図2に示すxy方向のウェーブレット変換および図3に示すz方向のウェーブレット変換を施すものとする。 3D wavelet transform, to the volume data, and to subject the wavelet transform in the z-direction shown in the xy direction of the wavelet transform and 3 shown in FIG. 3次元ウェーブレット変換符号化においては、図4に示すように、3次元ウェーブレット変換されたサブバンドブロック内の変換係数を、符号化の単位である小領域の直方体ブロックに分割する。 In three-dimensional wavelet transform coding, as shown in FIG. 4, the transform coefficients of subband blocks 3D wavelet transform, divided into rectangular blocks of a small area which is a unit of encoding. この直方体ブロックを符号化ブロックと呼ぶ。 The rectangular block is called a coding block. この符号化ブロックごとに、エントロピー符号化により符号を生成し情報量の圧縮を行なう。 For each the coded block, performs compression of the generated code with the amount of information by entropy coding.

xy方向の低周波数サブバンドに対応する符号を伝送・復号してxy方向の低周波数サブバンド内の変換係数が再生される。 Transform coefficients of the low frequency in subbands of xy direction is reproduced by transmitting and decoding the code corresponding to the xy direction of the low-frequency subbands. これをz方向に逆ウェーブレット変換することでxyの低周波数のみを含んだ画像、つまり解像度の小さい画像が再生される。 This image including only xy lower frequency by inverse wavelet transformation in the z-direction, i.e. small images resolution is reproduced. 図5に示すように、これをサムネイル(縮小画像)として利用することが可能である。 As shown in FIG. 5, it is possible to use it as a thumbnail (reduced image).

一番低い周波数成分だけではなく、より高い周波数成分を加えて伝送し、同様にz方向に逆ウェーブレット変換し、さらにこれを低周波数成分と併せてxy方向に逆ウェーブレット変換することにより、より解像度の高いサムネイルが得られる。 Not only the lowest frequency components, by transmitting the addition of higher frequency components, similarly inverse wavelet transform in the z-direction, inverse wavelet transform in the xy direction further along this low-frequency component, more resolution high thumbnail is obtained.

(表示装置のユーザインタフェース) (User interface of the display device)
CT、MRIなどのボリュームデータ表示装置の一般的なユーザインタフェースを、図6に示す。 CT, a typical user interface of the volume data display device such as MRI, is shown in FIG. 複数枚の画像を同時に一画面に表示する画面があり、この画面をサムネイル画面と呼ぶ。 There is a screen for displaying a plurality of images simultaneously one screen, it referred to as the screen and the thumbnail screen. ここでは、表示画像としてサムネイルを表示することを想定する。 Here, it is assumed that to display the thumbnail as a display image. 利用者の一般的な操作としては、表示されているサムネイルの範囲をスクロールにより変更したり、特定のサムネイルを指定して画像を拡大したりするものである。 The general operation of the user, and change the scrolling range of thumbnails displayed is for or enlarge specify a particular thumbnail. ここでは、サムネイル画面の最初の表示において、利用者が要求する表示要求時間をあらかじめ設定しておき、その時間内に出来るだけ解像度の高いサムネイル画面の表示を完了することを本発明の目的とする。 Here, in the first display of the thumbnail screen, have configured the display request time the user requests in advance, an object of the present invention to complete the display of high resolution thumbnail screen as possible during that time .

画像の伝送方式としては、ファイル転送型画像伝送方式と部分伝送型画像伝送方式の2つを適応的に切り替えて用いる。 The transmission method of image, used by switching two file transfer type image transmission system and the partial transmission type image transmission system adaptively.

(ファイル転送型画像伝送方式) (File transfer type image transmission system)
ファイル転送型画像伝送方式では、対象のボリュームデータの符号ファイルをすべて転送した後、符号ファイルの復号を行ない、画像を再生・表示する。 The file transfer type image transmission system, after transferring all the code files of the volume data of the target, performs decoding of the code file to reproduce and display an image. 一般的な画像システムでは、このタイプの伝送表示が行われる。 In a typical imaging system, the transmission display of this type is performed. 伝送処理と復号処理が分離できるため実装も簡単である。 Implementation for transmission processing and the decoding processing can be separated is simple. しかし、再生ファイルの転送が終わるまで画像の再生・表示が行われないので、ファイルサイズが大きい場合には、表示までに時間を要する。 However, since the reproduction and display of the image until the end of the transfer of the playback file is not performed, if the file size is large, it takes time to display. 前述の3次元ウェーブレット変換を施したボリュームデータでは、特定検査のすべてのCT画像が1つのファイルにまとめられるため、1つのファイルサイズが大きい。 The volume data having been subjected to three-dimensional wavelet transform described above, because all CT images of a particular test are combined into a single file, a large single file size. このため、ファイル転送型画像伝送方式を用いた場合は、伝送に時間を要し、表示までに時間がかかる結果となる。 Therefore, in the case of using the file transfer type image transmission system, takes time to transmission, results take time to display.

以上より、ファイル転送型画像伝送方式は、十分な伝送帯域がとれる場合、または要求されている表示時間が十分長い場合に利用可能である。 From the above, the file transfer type image transmission method, if the take sufficient transmission band, or being requested display time is available when a sufficiently long.

(部分伝送型画像伝送方式) (Partial transmission type image transmission system)
部分伝送型画像伝送方式では、サーバに蓄積されたファイルに関して、ファイルすべてを伝送するのではなく、ファイル中の必要な部分データのみを伝送する。 The partial transmission type image transmission system, with respect to the file stored in the server, rather than transmitting all files, and transmits only the necessary part data in the file. クライアントのユーザが表示させたい解像度、表示させたい部分を表示するために必要な部分データのみを、サーバに蓄積されたファイル内より抽出して伝送することができるため、データ伝送量が低減される。 Since the resolution to be displayed client users, only partial data necessary for displaying a portion to be displayed can be transmitted by extracting from the file stored in the server, the data transmission amount is reduced .

ユーザが要求したすべてのデータの伝送が終了する前の伝送途中段階において、クライアントが受信したデータだけを使って復号処理を行なうことにより、所望の品質(解像度)よりも、低い品質の画像を再生できる。 Play in the transmission intermediate stage before the transmission of all the data that the user has requested is completed, by performing the decoding process using only data received by the client, than desired quality (resolution), the low-quality image it can. この再生処理をある時間間隔で繰り返すことにより、毎回の再生処理のタイミングで受信データが増えていくため、ユーザからは階層的に画像が高品質化していくように見える。 By repeating at certain time intervals the regeneration process, because, with a growing received data at the timing of every regeneration treatment appears to hierarchically image is gradually high quality to the user. 低品質の画像でも、長時間待つことなく表示されていれば、最終の画像品質になるまで何も表示されない場合に比べて、ユーザの待ち時間に対するストレスが軽減する。 Even in the low quality of the image, if it is displayed without having to wait for a long period of time, as compared to the case where until the final image quality of do not see anything, stress is reduced to a user's waiting time.

以上より、部分伝送型画像伝送方式は、十分な伝送帯域が取れない場合、またはサムネイル表示に要求される時間が短い場合に有効である。 Thus, partial transmission type image transmission method, if a sufficient transmission band can not be taken, or the time required for thumbnail display is useful when short.

図7は、本実施形態に係るボリュームデータ伝送システムの概略構成を示すブロック図である。 Figure 7 is a block diagram showing the schematic configuration of the volume data transmission system according to the present embodiment. 図7に示すように、サーバ伝送部103は、ファイル情報送信部103a、ファイル転送送信部103b、部分伝送ブロック送信部103c、およびブロック抽出部103dを備えている。 As shown in FIG. 7, the server transmitter 103 includes file information transmitting section 103a, the file transfer transmission unit 103b, partial transmission block transmitting unit 103c, and a block extraction unit 103d. また、クライアント伝送部201は、ファイル選択部201a、伝送プロトコル決定部201b、パラメータ予測・記憶部201c、ファイル転送要求・受信部201d、伝送要求ブロック決定部201e、および部分伝送ブロック要求・受信部201fを備えている。 The client transmission unit 201, the file selection unit 201a, the transmission protocol determination unit 201b, the parameter prediction and storage unit 201c, the file transfer request and reception unit 201d, a transmission request block determining unit 201e, and partial transmission block request-receiving unit 201f It is equipped with a. 以下、本実施形態に係るボリュームデータ伝送システムの特徴的な構成について説明する。 The following describes the characteristic structure of the volume data transmission system according to the present embodiment.

(伝送プロトコル決定部201b) (Transmission protocol determination unit 201b)
伝送プロトコル決定部201bは、ファイル転送型画像伝送方式と部分伝送型画像伝送方式とを適応的に切り替えて、ユーザの要求した時間内で画像の初期表示を可能とする。 Transmission protocol determination unit 201b, switch and a file transfer type image transmission system and the partial transmission type image transmission system adaptively, to allow initial display of an image in the requested time of the user. 本発明では、伝送前にファイル転送型で伝送すべきか部分伝送型で伝送すべきかを決定する。 In the present invention determines whether to transmit file transfer or partial transmission type to be transmitted in type before transmission.

まず、ファイル転送型での伝送・表示時間に要する時間を推定し、ユーザが指定した初期表示要求時間よりも小さい場合はファイル転送型画像伝送方式で伝送・表示を行ない、推定時間がユーザの所望時間よりも大きい場合は部分伝送型画像伝送方式で伝送・表示を行なう。 First, estimate the time required for transmission and display time in the file transfer type, performs transmission and display file transfer type image transmission method when the user is smaller than the initial display request time specified, desired estimated time of the user If so than the time for transmission and display a partial transmission type image transmission system. 伝送・表示時間を推定するにあたり、ファイル転送型画像伝送処理をモデル化し、次の処理から構成されるものと仮定する。 Upon estimating the transmission-display time, to model the file transfer type image transmission processing is assumed to be composed of the following process.
(1)サーバ、クライアント間のコマンド通信等、直接的な画像データ伝送ではない伝送処理(2)符号化画像データの伝送処理(3)復号処理(4)表示処理 上記モデル化に基づき、次式により使用可能伝送帯域での伝送表示終了までに要する時間(Ttotal)を伝送前に予測する。 (1) server, such as command communication between clients, based on the direct image data are not transmitted transmission processing (2) Transmission processing of encoded image data (3) decoding 4 Display processing the modeling, the following formula transmission display end time required until at usable transmission band (Ttotal) for predicting prior to transmission by.

Ttotal = Toh + Ttrans + Tdec + Tdisp (*) Ttotal = Toh + Ttrans + Tdec + Tdisp (*)
ここで、 here,
Toh :コマンド通信等のオーバーヘッド Toh: command communication, such as overhead of
Ttrans :符号データの伝送に要する時間 Ttrans: the time required for the transmission of encoded data
= 全データ量/使用可能伝送帯域(Wa) = Total amount of data / available transmission bandwidth (Wa)
Tdec :復号時間 Tdec: decoding time
Tdisp :表示処理時間、である。 Tdisp: a display processing time,.

全データ量は、ファイルを蓄積しているサーバが事前に情報を収集しておき、クライアントがこの時間推定処理を行なう前に、全データ量の情報をサーバからクライアントへ伝送する。 All data amount is advance collect information server beforehand have accumulated a file, the client is transmitted before performing the time estimation process, the information of the total data size from the server to the client. 使用可能伝送帯域(Wa)は、オンデマンドネットワークにおいて実際に取得できた伝送パスの伝送帯域であり、本時間推定(画像伝送方式の適応的切り替え判定)を行なうのに先がけ取得しておく。 Available transmission bandwidth (Wa) is a transmission band of the transmission path actually be acquired in the on-demand network, it obtains prior to performing the time estimate (adaptive switching determination of the image transmission system). 復号時間(Tdec)に関しては、クライアントの性能により大きく異なるが、基本的に、全データ量が大きくなれば復号処理を行なう時間が増えるため、復号時間も長くなることが予想できる。 With respect to decoding time (Tdec), significantly varies depending on the performance of the client, basically, since the time to perform the decoding process the greater the total amount of data increases, it expected to be longer decoding time. 表示時間(Tdisp)に関しては、これもクライアントの性能(ビデオボードやディスプレイなどの表示ハードウェア関連の性能)により大きく異なるが、他の時間に比べると非常に短時間であることが予想できる。 For the display time (Tdisp), which also greatly varies depending on the client's performance (the display hardware-related performance such as video board or a display), it can be expected to be very short compared to other times. また、コマンド通信等のオーバーヘッド(Toh)は、通信環境やサーバ、クライアントの性能に依存すると考えられる。 Further, the overhead such as command communication (Toh), the communication environment and servers, will depend on the performance of the client. 上記により伝送時間を推定した後は、利用者の表示要求時間(Treq)とTtotalを比較し、伝送・表示プロトコルを決定する。 After estimating the transmission time by the compares the display request time of the user (Treq) and Ttotal, determines a transmission-display protocol.
Treq ≧ Ttotalならばファイル転送型画像伝送方式 Treq ≧ Ttotal If file transfer type image transmission system
Treq < Ttotalならば部分伝送型画像伝送方式 Treq <Ttotal If partial transmission type image transmission system

図8にTtotalのグラフと画像伝送方式の選択の関係を示す。 Figure 8 shows the relationship between the selection of the chart and image transmission method of Ttotal. Ttotalを利用可能な帯域の関数とし、実際に取得された利用可能な伝送帯域Waと、利用者の表示要求時間Treqでプロットされるポイントが、その関数の上にあればファイル転送型の画像伝送方式を使用し、下にあれば部分伝送型の画像伝送方式を使用する。 Ttotal the band functions available to actually a transmission band Wa available obtained, points to be plotted by the display request time Treq of users, image transmission file transfer type if on that function using the method, using an image transmission method of the partial transmission type if the bottom.

符号データの伝送に要する時間(Ttrans)は伝送帯域と伝送するデータ量が分かれば推定可能であるが、実際のスループットは指定された伝送帯域値と若干異なる可能性がある。 The time required for transmission of the code data (Ttrans) but can be estimated by knowing the amount of data to be transmitted with the transmission band, the actual throughput may differ slightly from the specified transmission bandwidth value. この課題については次節にて議論する。 This problem is discussed in the next section. また、Ttrans以外の時間についても精度よく推定する必要がある。 Further, it is necessary to accurately estimate also the time other than Ttrans.

(パラメータ予測・記憶部201c) (Parameter prediction and storage unit 201c)
上記のような適応的画像伝送方式では、伝送時間の高精度の推定が必要となる。 The adaptive image transmission system as described above, is required high accuracy of the estimated transmission time. 概して、伝送時間と伝送帯域は反比例の関係にあるが、実際のスループットは、指定された伝送帯域とは若干異なる可能性がある。 Generally, the transmission band and the transmission time is in inverse proportion, the actual throughput, is the specified transmission bandwidth may differ slightly. そこで、事前にダミーデータによりいくつかの条件で伝送時間を求めておき、実際に画像を伝送する際には、この情報をもとに非線形予測により伝送時間を予測する。 Therefore, in advance, obtains the transmission time in a number of conditions by the dummy data, when transmitting actual image predicts the transmission time by non-linear prediction based on this information.

予測式として次式を用い、Marquardt法により非線形予測を行なう。 Using the following equation as a predictive equation, it performs non-linear prediction by Marquardt method. Marquardt法は、最急降下法とGauss-Newton法を折衷した方法で、推定する変数が解から遠く離れ、非線形性の影響が大きい場合には最急降下法的な推定を行ない、解に近づくにつれてGauss-Newton法的な推定となる推定方式である。 Marquardt method is a method in which compromise the steepest descent method and the Gauss-Newton method, far away from the variable to be estimated solution performs steepest descent legal estimation when the influence of the nonlinearity is large, Gauss toward the solution -Newton is an estimation method to be a legal presumption.

ここで、Transはデータの伝送時間、Wはオンデマンド型ネットワークで設定された伝送帯域、Lは伝送するデータ量、A,B,…,Eは定数である。 Here, Trans the transmission time of data, W is the transmission bandwidth set in on-demand network, the amount of data L transmits, A, B, ..., E are constants. WとしてW1,W2,…,WM(bit/sec)のM種類、LとしてL1,L2,…,LN(バイト)のN種類の計M×N種類の条件において、それぞれ複数回ずつ伝送を行ない、サンプルデータを取得する。 W as W1, W2, ..., M kinds of WM (bit / sec), L1 as L, L2, ..., the N kinds of total M × N kinds of conditions of LN (bytes) performs respectively transmitted by a plurality of times , to obtain the sample data. これらのサンプルデータから、非線形予測によりA,B,…,Eを決定する。 From these samples the data, A by nonlinear prediction, B, ..., to determine the E. これにより、求まった定数により伝送時間を予測することができる。 Thus, it is possible to predict the transmission time by Motoma' constant.

但し、ここでは、ネットワークの伝送帯域は定常であることを仮定する。 However, here, it is assumed that the transmission band of the network is constant. つまり、事前測定時と実際のデータ伝送時で、ネットワークの伝送特性はほぼ等しいことを仮定する。 That is, when the actual data transmission at the time of preliminary measurement, the transmission characteristics of the network assumes that approximately equal. 様々な通信コネクションが個々の要求に応じて張られる一般的なインターネット環境ではこの仮定は成り立たない場合が多い。 Various communication connections this assumption is often not true in the general Internet environment spanned according to individual requirements. 一方、セキュリティや信頼性を考慮し、アプリケーションが通信を開始する際にはネットワーク側が伝送に必要な伝送帯域を確保する方式をとるタイプの医療専用のネットワークにおいては、すべての通信コネクションは管理される。 On the other hand, considering security and reliability, in the type of medical dedicated network taking method that the network side to secure a transmission band necessary for transmission when the application starts communication, all communication connections are managed .

つまり、一旦帯域が確保できると、その後中断要求など他の通信からの影響を受けない限りは、伝送帯域の状態はほぼ定常であると考えてよい。 In other words, once the band can be secured, unless influenced by other communications such subsequent interrupt request may be considered as the state of the transmission band is approximately constant. コアネットワークが複雑化し、多数のコアルータが存在するネットワークを経由する場合には、コネクションを張るタイミングによりルートが異なる場合も考えられるが、事前測定を複数回行なうことで、伝送時間の期待値が統計的に算出できる。 Core network is complicated, when passing through the network a large number of core routers exist, but the route by timing Open connection is considered may be different, by performing a plurality of times prior measurements, the expected value of the transmission time statistics to be calculated.

さらに、実際に伝送にかかった時間をフィードバックし、その情報によりパラメータを更新することにより、予測の高精度化を行なう。 Further, by feeding back the spent actually transmitted time, by updating the parameters by the information, it performs high accuracy of prediction.

(伝送要求ブロック決定部201e) (Transmission request block determining unit 201e)
(1)伝送階層決定 部分伝送型においては、画像ファイルすべてのデータを伝送するのではなく、サムネイル表示の際に必要な低周波数成分だけを伝送する。 (1) In the transmission hierarchy determining portion transmission type, rather than transmitting the image file all data, and transmits only the low frequency components necessary for the thumbnail display. ここでは、初期表示時間がユーザにより決められている場合に、その時間内に伝送・表示できる最大の解像度の画像を決定する方式を示す。 Here, when the initial display time is determined by the user, indicating the method for determining the maximum resolution images that can be transmitted and displayed within that time. 具体的には、各解像度でのサムネイル伝送時間を推定し、要求時間内に伝送・表示可能なサムネイルの解像度のうち、最大の解像度に決定する。 Specifically, estimates the thumbnail transmission time at each resolution, out of the transmission-displayable thumbnails resolution within a required time, determining the maximum resolution. 各解像度でのサムネイルの伝送時間の推定には、前節と同様の時間推定方法を用いる。 The estimation of the thumbnail transmission time at each resolution, using a previous section the same time estimation method. この際、全データ量(Wa)の変わりに、各階層(解像度)の画像を復号するのに必要な符号データ量を用いる。 In this case, instead of the total data amount (Wa), using a code data amount required for decoding the image of each layer (resolution). このデータ量は事前にサーバに蓄積されており、クライアントが本時間推定処理(サムネイル解像度決定処理)を行なう前に、各階層のデータ量の情報をサーバからクライアントへ伝送する。 The amount of data is accumulated in the server in advance, the client before performing the time estimation processing (thumbnail resolution determination processing), transmits the information of data amount of each layer from the server to the client.

例えば、解像度64画素×64画素のサムネイルの伝送表示の推定時間をTtotal64、解像度128画素×128画素のサムネイルの伝送表示の推定時間をTtotal128、解像度256画素×256画素のサムネイルの伝送表示の推定時間をTtotal256とすると、次の不等式が成り立つ。 For example, the transmission display of the estimated time of resolution 64 pixels × 64 pixels of the thumbnail Ttotal64 resolution 128 pixels × 128 transmission display of the estimated time Ttotal128 pixels of the thumbnail resolution 256 pixels × 256 transmission display of the estimated time of thumbnail pixel a If you Ttotal256, holds the following inequality.
Ttotal64 < Ttotal128 < Ttotal256 Ttotal64 <Ttotal128 <Ttotal256
ユーザが要求する初期画像表示時間Treqgより推定伝送表示時間が短く、かつその中でサムネイル解像度が大きいものを、初期表示画像とする。 User initial image display time shorter estimated transmission display time than Treqg requesting, and those in a large thumbnail resolution thereof, as an initial display image. この選択の様子を図9に示す。 Illustrating how this selection in FIG.

(2)表示対象画像のみ伝送 サムネイル表示画面に一度に表示できる画像枚数は有限(10数枚〜20数枚程度)であり、一般にボリュームデータのすべての画像を表示することは不可能である。 (2) the number of images that can be displayed at one time only transmission thumbnail display screen display target image is finite (several sheets 20 several sheets 10), it is impossible to generally show all images of the volume data. そこで、初期表示時に表示される画像の再生に必要な符号化ブロックのみを伝送ブロックとする。 Therefore, only coded blocks required for reproduction of the image displayed at the initial display of the transmission block. 初期表示時に表示されない画像に対する符号化ブロックを送る必要がなくなり、逆に表示対象となる画像に対しては、表示要求時間内により多くの符号化ブロックが送れるようになり、より高解像度での表示が可能となる。 It is not necessary to send the coded blocks for the initial display is not displayed during image for reverse display subject to the image, now send many coded blocks by the display request time displayed at higher resolution it is possible.

(3)初期表示対象外画像の伝送 しかし、初期表示時に表示対象になっていない画像の情報を全く送らないと、初期表示後に利用者がスクロール操作を行ない、他の画像のサムネイルを閲覧しようとしたときに、その時点では画像は何も表示できず、サーバから新たに符号化ブロックを伝送しなければならない。 (3) the initial transmission of the display-target images, however, unless sent at all information of an image that is not eligible to appear during initial display, the user after the initial display performs scroll operation, attempts to browse thumbnails of other images when the image can not display anything at the time, it must transmit a new encoded block from the server. これにより、サムネイル表示が遅れることにより、利用者に対して、ストレスを与える虞がある。 Thus, by the thumbnail display is delayed, to the user, there is a possibility that stressful. そこで、初期表示対象外画像についても、すべての画像の最低周波数サブバンドだけは送るようにする。 Therefore, for the initial display-target images, only the lowest frequency subband of every image to send.

この最低周波数サブバンドを用いて、初期表示対象外画像については最低解像度のサムネイル画像を作成しておく。 Using this lowest frequency subband, it creates a thumbnail image of the lowest resolution is the initial display-target images. これにより、初期表示後、スクロール操作があった場合にも、初期表示画像以外の画像については最低解像度のサムネイルを瞬時に表示でき、利用者へのストレスを低く抑えることができる。 Thus, after the initial display, even when there is scrolling, the image other than the initial display image can be displayed thumbnail lowest resolution instantaneously, it is possible to suppress the stress to the user. なお、該スクロール操作があった際には、最低解像度サムネイルを表示すると同時に、バックグラウンドで新規表示対象画像のより高い周波数成分の伝送を開始し、伝送・復号が完了し、より高い解像度のサムネイルが作成でき次第、該高解像度サムネイルを表示するようにする。 Incidentally, when there the scroll operation and, at the same time displays a lowest resolution thumbnails, initiate the transmission of higher frequency components of the new display target image in the background, transmission and decoding is complete, higher resolution thumbnail but as soon as can be created, so as to display the high-resolution thumbnail.

(4)ROI伝送階層決定 図10に示すように、画像に注目領域(Region Of Interest : ROI)が設定されている場合がある。 (4) As shown in ROI transport layer decision diagram 10, the region of interest in the image (Region Of Interest: ROI) is may have been set. この場合は、符号化ファイルのヘッダ情報として、ROIの位置情報が記録されている。 In this case, as the header information of the encoded file, the location information of the ROI is recorded. この情報から、どの符号化ブロックがROIに対応するかが算出できる。 From this information, which encoding blocks can be calculated or corresponding to the ROI. 図11にROIに対応する符号化ブロックの概念図を示す。 It shows a conceptual diagram of an encoding block corresponding to the ROI in FIG 11. ROI中の画像はすべての周波数成分を持つため、実際には、ROIに対応する符号化ブロックは、すべてのサブバンドに存在する。 Since the image in the ROI with all frequency components, in practice, the coding block corresponding to the ROI is present in all subbands.

ROIに含まれる符号化ブロックか、そうでないかによって伝送する階層を制御する。 Or coding block included in the ROI, to control the hierarchy of transmitting by or not. 表示要求時間に伝送・表示が終わる範囲で、予め分かっている各符号化ブロックの符号量情報から、ROIに対して伝送可能な最大解像度をもとめ、残った時間でROI以外の領域の低解像度成分の伝送を行なう。 To the extent that end of the transmission and displayed on the display request time, the code amount information of each encoded block is known in advance, obtaining the maximum resolution that can be transmitted with respect to ROI, the remaining low-resolution components in the region other than the ROI in time carried out of the transmission.

(ファイル伝送) (File transfer)
図12に、ファイル転送型画像伝送の処理の概念図を示す。 Figure 12 shows a conceptual diagram of the processing of the file transfer type image transmission. クライアント装置200のファイル転送要求・受信部201dからサーバ装置100に対してファイル転送の要求を行ない、それに対応したファイルをサーバ装置100のファイル転送送信部103bが送信する。 Performs request the file transfer from a file transfer request and reception unit 201d of the client device 200 to the server apparatus 100, the file transfer transmission unit 103b of the server apparatus 100 transmits the file corresponding thereto.

(部分伝送) (Partial transmission)
図13に、部分伝送の処理の概念図を示す。 Figure 13 shows a conceptual diagram of the processing portion transmission. 伝送要求ブロック決定部201eにおいて決定した伝送要求ブロックを、クライアント装置200の部分伝送ブロック要求・受信部201fからサーバ装置100の部分伝送ブロック送信部103cに伝送要求する。 A transmission request block determined in the transmission request block determining unit 201e, and transmits the request from the partial transmission block request-receiving unit 201f of the client device 200 to a portion transmitting block transmission portion 103c of the server device 100. サーバ装置100では、受信した要求に基づき、ブロック抽出部103dにおいて、要求のあった符号化ブロックを記憶媒体102より抽出する。 In the server apparatus 100, based on the received request, the block extraction unit 103d, extracts from the storage medium 102 to a coded block requested. 抽出した符号化ブロックに対し、ウェーブレット変換係数領域のどの位置の符号化ブロック化がわかるようにヘッダ情報を付加し、部分伝送ブロック送信部103cからクライアント装置200の部分伝送ブロック要求・受信部201fに対して送信する。 To the extracted coded blocks, adds header information as is understood that the encoded block of which position of the wavelet transform coefficient domain, the partial transmission block transmission portion 103c to the portion transmitting the block request-receiving unit 201f of the client device 200 to send for. クライアント装置200の部分伝送ブロック要求・受信部201fは、符号化ブロックを受信し、これらを復号部202に転送する。 Partial transmission block requests and receiving section 201f of the client apparatus 200 receives the coded blocks, and transfers them to the decoding unit 202. 復号部202では、ウェーブレット変換係数を復号し、ヘッダ情報を元にウェーブレット変換係数領域での適切な係数位置に配置して、逆変換を行ない、画像を再生する。 The decoding unit 202 decodes the wavelet transform coefficients, arranged based on the header information to the appropriate coefficient position of the wavelet transform coefficient domain, performs inverse transformation, to reproduce an image.

なお、符号化ブロックが小さい場合は、大量の符号化ブロックに対して、要求処理、抽出処理、ヘッダ付加、送受信を行わなければならず、処理の負荷が増大することが考えられる。 Incidentally, when the encoding block is small, relative to the mass of the coding block, request process, extracting process, a header addition must be carried out transmission and reception, it is considered that the processing load is increased. そこで、複数の符号化ブロックをまとめて一つの伝送単位とし、上記処理を行なう最小単位として処理を行なうことで、処理量の低減を図ることができる。 Therefore, as one of the transmission units are collectively a plurality of coding blocks, by performing the processing as the minimum unit for performing the process, it is possible to reduce the processing amount.

図14は、本実施形態に係るボリュームデータ伝送システムの動作を示すフローチャートである。 Figure 14 is a flowchart illustrating the operation of the volume data transmission system of the embodiment. まず、図7に示したファイル選択部201aおよびファイル情報送信部103aにおいて、ボリュームデータを含む画像ファイルを指定する(ステップS1)。 First, the file selection unit 201a and the file information transmitting unit 103a shown in FIG. 7, to specify an image file that contains the volume data (step S1). 次に、伝送プロトコル決定部201bおよびパラメータ予測・記憶部201cにおいて、上記指定した画像ファイルを伝送するために必要な時間を予測する(ステップS2)。 Then, in the transmission protocol determination unit 201b and parameter prediction and storage unit 201c, to predict the time required to transmit the image file specified above (step S2). そして、利用者から求められている「要求時間内」に画像ファイルの伝送が可能であるかどうかを判断する(ステップS3)。 Then, it is determined whether it is possible to transmit the image file "within a required time" as determined from the user (step S3). この判断の結果、要求時間内に画像ファイルの伝送が可能である場合は、ファイル転送送信部103bおよびファイル転送要求・受信部201dにおいて、ファイル転送型画像伝送方式によって画像ファイルの要求および転送を行なう(ステップS4)。 The result of this determination, if it is capable of transmitting an image file in the required time, in the file transfer transmission unit 103b and the file transfer request and reception unit 201d, and requests and transfer of the image file by file transfer type image transmission system (step S4). そして、クライアント装置200では、受信した画像ファイルを復号部202で復号し(ステップS5)、表示部203において、画像ファイル(ボリュームデータ)が表示される(ステップS6)。 Then, the client device 200, decodes the received image file in the decoding unit 202 at (step S5), and the display unit 203, an image file (volume data) is displayed (step S6).

一方、ステップS3において、要求時間内に画像ファイルの伝送が可能でない場合は、ボリュームデータ中にROIが設定されているかどうかを判断する(ステップS7)。 On the other hand, in step S3, if the transmission is not possible for the image files within the required time, to determine whether the ROI is set in the volume data (step S7). ボリュームデータ中にROIが設定されている場合は、伝送要求ブロック決定部201eは、ROIと非ROIの伝送階層を決定する(ステップS8)。 If ROI is set in the volume data, the transmission request block determination unit 201e determines a transmission hierarchy of ROI and non-ROI (step S8). 一方、ステップS7において、ボリュームデータ中にROIが設定されていない場合は、伝送要求ブロック決定部201eは、伝送階層を決定し(ステップS9)、部分伝送ブロック送信部103cおよび部分伝送ブロック要求・受信部201fは、部分伝送型画像伝送方式で画像ファイルの要求および転送を行なう(ステップS10)。 On the other hand, in step S7, if the ROI is not set in the volume data, the transmission request block determination unit 201e determines the transport layer (step S9), and partial transmission block transmission portion 103c and partial transmission block request and receive parts 201f performs request and transfer of the image file in partial transmission type image transmission method (step S10). そして、クライアント装置200では、受信した画像ファイルを復号部202で部分復号し(ステップS11)、表示部203において、画像ファイル(ボリュームデータ)が表示される(ステップS6)。 Then, the client apparatus 200, partially decoded image file received by the decoding unit 202 (step S11), and the display unit 203, an image file (volume data) is displayed (step S6).

以上説明したように、本実施形態によれば、ボリュームデータ表示装置のサムネイル画面の初期表示において、利用者の設定する表示要求時間内に可能な限り高解像度のサムネイル画像を表示することができる。 As described above, according to this embodiment, it is possible to display the initial display of the thumbnail screen of the volume data display device, a high-resolution thumbnail images as much as possible within the display request time set by the user. また、ROIが設定されている場合には、ROI内の画像をより高解像度に表示することが可能である。 Further, when the ROI is set, it is possible to display an image in the ROI to a higher resolution. さらに、サムネイル画面の初期表示時に表示される画像以外の画像の最低解像度画像伝送を行なうことでサムネイル画面の初期表示後のスクロール処理を高速に行なうことができる。 Furthermore, it is possible to perform the scroll processing of the after the initial display of the thumbnail screen at high speed by performing the lowest resolution image transmission images other than the image displayed at the initial display of the thumbnail screen.

本実施形態に係るボリュームデータ伝送システムの概略構成を示す図である。 It is a diagram showing a schematic configuration of a volume data transmission system according to the present embodiment. xy方向のウェーブレット変換の様子を示す図である。 Is a diagram showing a state of xy direction wavelet transform. z方向のウェーブレット変換の様子を示す図である。 Is a diagram showing a state in the z direction of the wavelet transform. 3次元ウェーブレット変換されたサブバンドブロック内の変換係数を、符号化の単位である小領域の直方体ブロックに分割する様子を示す図である。 The transform coefficients of the three-dimensional wavelet transform subband block is a diagram showing how to divide the rectangular block of the small region which is a unit of encoding. xy方向の低周波数サブバンド内の変換係数をz方向に逆ウェーブレット変換してxyの低周波数のみを含んだ画像が再生される様子を示す図である。 Contained only low frequency xy transform coefficients of a low frequency within a sub-band in the xy direction by the inverse wavelet transform in the z-direction image is a diagram showing a state to be reproduced. CT、MRIなどのボリュームデータ表示装置の一般的なユーザインタフェースを示す図である。 CT, it is a diagram illustrating a typical user interface of the volume data display device such as MRI. 本実施形態に係るボリュームデータ伝送システムの概略構成を示すブロック図である。 Is a block diagram showing the schematic configuration of the volume data transmission system according to the present embodiment. Ttotalのグラフと画像伝送方式の選択の関係を示す図である。 It is a view showing a selection of the relationship between the graph and the image transmission method of Ttotal. 初期画像表示時間Treqgより推定伝送表示時間が短く、かつその中でサムネイル解像度が大きいものを、初期表示画像とした様子を示す図である。 Initial image display time shorter estimated transmission display time than Treqg, and those thumbnail resolution larger therein is a diagram showing a state in which the initial display image. 画像に注目領域(Region Of Interest : ROI)が設定されている様子を示す図である。 Region of interest image (Region Of Interest: ROI) is a diagram showing a state in which is set. ROIに対応する符号化ブロックの概念を示す図である。 It is a diagram showing the concept of coding blocks corresponding to the ROI. ファイル転送型画像伝送の処理の概念を示す図である。 Is a diagram showing the concept of processing of the file transfer type image transmission. 部分伝送の処理の概念を示す図である。 Is a diagram showing the concept of processing of parts transmission. 本実施形態に係るボリュームデータ伝送システムの動作を示すフローチャートである。 It is a flowchart showing the operation of the volume data transmission system according to the present embodiment.

符号の説明 DESCRIPTION OF SYMBOLS

100 サーバ装置101 符号化部102 記憶媒体103 サーバ伝送部103a ファイル情報送信部103b ファイル転送送信部103c 部分伝送ブロック送信部103d ブロック抽出部200 クライアント装置201 クライアント伝送部201a ファイル選択部201b 伝送プロトコル決定部201c パラメータ予測・記憶部201d ファイル転送要求・受信部201e 伝送要求ブロック決定部201f 部分伝送ブロック要求・受信部202 復号部203 表示部 100 server apparatus 101 coding unit 102 storage medium 103 server transmitting portion 103a file information sending part 103b file transfer transmission unit 103c partial transmission block transmission unit 103d block extracting unit 200 the client device 201 Client transmitter 201a file selection unit 201b transmission protocol determination unit 201c parameter prediction-storage unit 201d file transfer request-receiving unit 201e transmission request block determination unit 201f partial transport block request-reception section 202 decoding section 203 display section

Claims (8)

  1. クライアント装置が、記録媒体に記録されているボリュームデータの伝送をサーバ装置に対して要求し、サーバ装置が、前記要求されたボリュームデータを前記クライアント装置へ伝送するボリュームデータ伝送システムに適用されるクライアント装置であって、 Client Client device, the transmission of the volume data recorded in the recording medium is requested to the server apparatus, the server apparatus is applied the required volume data to the volume data transmission system for transmitting to the client device an apparatus,
    伝送を要求するボリュームデータを選択するファイル選択部と、 A file selection unit for selecting a volume data requesting the transmission,
    前記選択したボリュームデータを前記サーバ装置から取得する際の方式として、予め定められた基準に基づいて、前記選択したボリュームデータのすべてを伝送するファイル伝送型画像伝送方式または前記選択したボリュームデータの一部を伝送する部分伝送型画像伝送方式のいずれか一方を選択する伝送プロトコル決定部と、 As a method for acquiring volume data mentioned above selected from the server device, based on predetermined criteria, the file transmission type image transmission system or the selected volume data temporary transmit all volume data said selected a transmission protocol determination unit for selecting either one of the partial transmission type image transmission system in which part,
    前記伝送プロトコル決定部が前記部分伝送型画像伝送方式を選択した場合、表示対象となるボリュームデータの伝送に要する時間を予測し、予測した時間内で伝送および表示可能な最大の解像度を決定する伝送要求ブロック決定部と、 If the transmission protocol determination unit selects the partial transmission type image transmission method, transmission predict the time required to transmit the volume data to be displayed, to determine the transmission and display the maximum possible resolution in the predicted time a request block decision unit,
    前記伝送プロトコル決定部がファイル伝送型画像伝送方式を選択した場合は、前記選択したボリュームデータのすべてを伝送する旨の要求を前記サーバ装置に対して行なう一方、前記伝送プロトコル決定部が前記部分伝送型画像伝送方式を選択した場合は、前記決定された解像度を有する表示対象となるボリュームデータを伝送する旨の要求を前記サーバ装置に対して行なう伝送要求部と、を備え Wherein when the transmission protocol determination unit selects the file transmission type image transmission method, while performing a request to transmit all the volume data and the selected relative to the server apparatus, the transmission protocol determination unit the partial transmission If you select the type image transmission system, and a transmission request unit which performs a request to transmit the volume data to be displayed with the determined resolution to the server apparatus,
    前記伝送要求ブロック決定部は、前記選択したボリュームデータのうち、初期表示で必要なボリュームデータのみを要求対象に決定することを特徴とするクライアント装置。 The transmission request block determination unit among the volume data the selected client device and determines only the volume data required for the initial display on the request target.
  2. クライアント装置が、記録媒体に記録されているボリュームデータの伝送をサーバ装置に対して要求し、サーバ装置が、前記要求されたボリュームデータを前記クライアント装置へ伝送するボリュームデータ伝送システムに適用されるクライアント装置であって、 Client Client device, the transmission of the volume data recorded in the recording medium is requested to the server apparatus, the server apparatus is applied the required volume data to the volume data transmission system for transmitting to the client device an apparatus,
    伝送を要求するボリュームデータを選択するファイル選択部と、 A file selection unit for selecting a volume data requesting the transmission,
    前記選択したボリュームデータを前記サーバ装置から取得する際の方式として、予め定められた基準に基づいて、前記選択したボリュームデータのすべてを伝送するファイル伝送型画像伝送方式または前記選択したボリュームデータの一部を伝送する部分伝送型画像伝送方式のいずれか一方を選択する伝送プロトコル決定部と、 As a method for acquiring volume data mentioned above selected from the server device, based on predetermined criteria, the file transmission type image transmission system or the selected volume data temporary transmit all volume data said selected a transmission protocol determination unit for selecting either one of the partial transmission type image transmission system in which part,
    前記伝送プロトコル決定部が前記部分伝送型画像伝送方式を選択した場合、表示対象となるボリュームデータの伝送に要する時間を予測し、予測した時間内で伝送および表示可能な最大の解像度を決定する伝送要求ブロック決定部と、 If the transmission protocol determination unit selects the partial transmission type image transmission method, transmission predict the time required to transmit the volume data to be displayed, to determine the transmission and display the maximum possible resolution in the predicted time a request block decision unit,
    前記伝送プロトコル決定部がファイル伝送型画像伝送方式を選択した場合は、前記選択したボリュームデータのすべてを伝送する旨の要求を前記サーバ装置に対して行なう一方、前記伝送プロトコル決定部が前記部分伝送型画像伝送方式を選択した場合は、前記決定された解像度を有する表示対象となるボリュームデータを伝送する旨の要求を前記サーバ装置に対して行なう伝送要求部と、を備え Wherein when the transmission protocol determination unit selects the file transmission type image transmission method, while performing a request to transmit all the volume data and the selected relative to the server apparatus, the transmission protocol determination unit the partial transmission If you select the type image transmission system, and a transmission request unit which performs a request to transmit the volume data to be displayed with the determined resolution to the server apparatus,
    前記伝送要求ブロック決定部は、前記選択したボリュームデータのうち、初期表示以降で必要なボリュームデータを、最低解像度で要求する決定を行なうことを特徴とするクライアント装置。 The transmission request block determination unit among the volume data the selected client device and performing a decision of volume data required for the initial display later requests at the lowest resolution.
  3. 前記伝送プロトコル決定部は、前記選択したボリュームデータのすべてを伝送するために要する時間を予測し、要求時間内に前記選択したボリュームデータのすべてを伝送可能である場合は、前記ファイル伝送型画像伝送方式を選択する一方、要求時間内に前記選択したボリュームデータのすべてを伝送可能でない場合は、前記部分伝送型画像伝送方式を選択することを特徴とする請求項1 または請求項2記載のクライアント装置。 The transmission protocol determination unit predicts the time required to transmit all of the volume data said selected, when all the volume data in which the selected within a required time can be transmitted, the file transfer type image transmission while selecting the mode, requests the If not, carry all selected volume data in time, the client apparatus according to claim 1 or claim 2, wherein the selecting the partial transmission type image transmission system .
  4. 前記伝送要求ブロック決定部は、前記選択したボリュームデータに関心領域(ROI:Region Of Interest)が設定されている場合は、前記関心領域に含まれるボリュームデータが、前記関心領域に含まれないボリュームデータよりも高解像度または高ビット精度で伝送されるように、伝送の階層を決定することを特徴とする請求項1 から請求項3のいずれかに記載のクライアント装置。 The transmission request block determination unit, the selected volume data to the region of interest (ROI: Region Of Interest) If is set, the volume data included in the region of interest is not included in the ROI volume data to be transmitted at high resolution or high bit precision than, the client device according to any one of claims 1 to 3, characterized in that to determine the hierarchy of transmission.
  5. 前記伝送要求ブロック決定部は、前記最低解像度のボリュームデータを要求した後、ユーザインタフェース部からの要求に応じて、バックグラウンドで前記最低解像度のボリュームデータと同じボリュームデータをより高い解像度で要求する決定を行なうことを特徴とする請求項2記載のクライアント装置。 Determining the transmission request block decision unit, after requesting the volume data of the lowest resolution, in response to a request from the user interface unit to request a higher resolution of the same volume data and the lowest resolution of the volume data in the background the client apparatus according to claim 2, wherein the performing.
  6. 前記伝送要求部は、前記サーバ装置との間で、前記選択したボリュームデータの送受信を行なった時間を測定し、 The transmission request unit, between the server device, and measuring the time of performing the transmission and reception of the volume data said selection,
    前記伝送要求ブロック決定部は、前記測定された時間に基づいて、表示対象となるボリュームデータの伝送に要する時間を予測することを特徴とする請求項1から請求項5のいずれかに記載のクライアント装置。 The transmission request block determination part, based on the measured time, the client of any one of claims 1 to 5, characterized in that estimates the time required for transmission of the volume data to be displayed apparatus.
  7. 請求項1から請求項6のいずれかに記載のクライアント装置からの要求に応じて、前記記録媒体からボリュームデータを読み出して、要求されたボリュームデータのすべてを伝送するファイル伝送型画像伝送方式または要求されたボリュームデータの一部を伝送する部分伝送型画像伝送方式のいずれか一方で、ボリュームデータのすべてまたは一部を前記クライアント装置へ伝送することを特徴とするサーバ装置。 In response to a request from a client device according to claim 1 to claim 6, wherein the recording medium is read volume data, file transfer type image transmission system or requesting to transmit all of the requested volume data been partially by either partial transmission type image transmission system in which the volume data, the server apparatus characterized by transmitting all or part of the volume data to the client device.
  8. 請求項1から請求項6のいずれかに記載のクライアント装置と、 And a client device according to any one of claims 1 to 6,
    請求項7記載のサーバ装置と、から構成されることを特徴とするボリュームデータ伝送システム。 Volume data transmission system characterized in that it is composed of a server apparatus according to claim 7 wherein.
JP2008089917A 2008-03-31 2008-03-31 Client device, the server device and the volume data transmission system Active JP5061306B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008089917A JP5061306B2 (en) 2008-03-31 2008-03-31 Client device, the server device and the volume data transmission system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008089917A JP5061306B2 (en) 2008-03-31 2008-03-31 Client device, the server device and the volume data transmission system

Publications (2)

Publication Number Publication Date
JP2009246634A true JP2009246634A (en) 2009-10-22
JP5061306B2 true JP5061306B2 (en) 2012-10-31

Family

ID=41308076

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008089917A Active JP5061306B2 (en) 2008-03-31 2008-03-31 Client device, the server device and the volume data transmission system

Country Status (1)

Country Link
JP (1) JP5061306B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8446411B2 (en) * 2010-06-11 2013-05-21 Microsoft Corporation Adaptive image rendering and use of imposter

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3256298B2 (en) * 1992-11-19 2002-02-12 富士通株式会社 Image data encoding method and apparatus
US7581027B2 (en) * 2001-06-27 2009-08-25 Ricoh Co., Ltd. JPEG 2000 for efficent imaging in a client/server environment
JP2004140654A (en) * 2002-10-18 2004-05-13 Nec Engineering Ltd Method and system for image data transfer
JP2006094240A (en) * 2004-09-24 2006-04-06 Ricoh Co Ltd Image processing apparatus and method, information recording medium, and computer program
JP4716949B2 (en) * 2005-09-02 2011-07-06 株式会社リコー Image processing apparatus and image processing method
US7996495B2 (en) * 2006-04-06 2011-08-09 General Electric Company Adaptive selection of image streaming mode

Also Published As

Publication number Publication date Type
JP2009246634A (en) 2009-10-22 application

Similar Documents

Publication Publication Date Title
US6011868A (en) Bitstream quality analyzer
US7103357B2 (en) Media spooler system and methodology providing efficient transmission of media content from wireless devices
US6807550B1 (en) Methods and systems for providing random access to structured media content
US6041143A (en) Multiresolution compressed image management system and method
US7733956B1 (en) Method and apparatus for storing base and additive streams of video
US6909436B1 (en) Radiologist workstation
US7236637B2 (en) Method and apparatus for transmission and display of a compressed digitized image
US20100050221A1 (en) Image Delivery System with Image Quality Varying with Frame Rate
US5881176A (en) Compression and decompression with wavelet style and binary style including quantization by device-dependent parser
US6549674B1 (en) Image compression based on tiled wavelet-like transform using edge and non-edge filters
US20040205199A1 (en) Communication of compressed digital images with restricted access and server/client hand-offs
US20040136598A1 (en) Method and device for selecting data in a communication network
US5966465A (en) Compression/decompression using reversible embedded wavelets
US6757437B1 (en) Compression/decompression using reversible embedded wavelets
US20030018802A1 (en) Image transfer and archival system
US20030035478A1 (en) Method and apparatus for scalable compression of video
US6553141B1 (en) Methods and apparatus for compression of transform data
US20030018750A1 (en) Method and device for processing an encoded digital signal
US7602950B2 (en) Medical system architecture for interactive transfer and progressive representation of compressed image data
US7206804B1 (en) Methods and systems for transmitting digital images
US20050053299A1 (en) Encoding of digital data combining a plurality of encoding modes
Westwater et al. Real-time video compression: techniques and algorithms
US20070237402A1 (en) Adaptive selection of image streaming mode
US20040068587A1 (en) Method and device for processing a request or compressed digital data
US20040126029A1 (en) Code conversion apparatus, code conversion method and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101029

A521 Written amendment

Effective date: 20101029

Free format text: JAPANESE INTERMEDIATE CODE: A821

A977 Report on retrieval

Effective date: 20120206

Free format text: JAPANESE INTERMEDIATE CODE: A971007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120403

A521 Written amendment

Effective date: 20120601

Free format text: JAPANESE INTERMEDIATE CODE: A523

TRDD Decision of grant or rejection written
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20120618

A01 Written decision to grant a patent or to grant a registration (utility model)

Effective date: 20120619

Free format text: JAPANESE INTERMEDIATE CODE: A01

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120626

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150817

Year of fee payment: 3