JP2012000223A - Medical image distributed processing device and control program of the same - Google Patents
Medical image distributed processing device and control program of the same Download PDFInfo
- Publication number
- JP2012000223A JP2012000223A JP2010137056A JP2010137056A JP2012000223A JP 2012000223 A JP2012000223 A JP 2012000223A JP 2010137056 A JP2010137056 A JP 2010137056A JP 2010137056 A JP2010137056 A JP 2010137056A JP 2012000223 A JP2012000223 A JP 2012000223A
- Authority
- JP
- Japan
- Prior art keywords
- medical image
- calculation
- processing
- result
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 206
- 238000012546 transfer Methods 0.000 claims abstract description 47
- 230000005540 biological transmission Effects 0.000 claims abstract description 33
- 238000010130 dispersion processing Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 abstract description 6
- 230000002349 favourable effect Effects 0.000 abstract description 2
- 238000000034 method Methods 0.000 description 26
- 230000003902 lesion Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000002591 computed tomography Methods 0.000 description 4
- 238000002595 magnetic resonance imaging Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000004195 computer-aided diagnosis Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 239000000725 suspension Substances 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000003466 anti-cipated effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Abstract
Description
本発明の実施の形態は、医用画像分散処理装置、およびその制御プログラムに関する。 Embodiments described herein relate generally to a medical image distribution processing apparatus and a control program therefor.
CT（Computed Tomography）装置やMRI（Magnetic Resonance Imaging）装置などの医用画像診断装置で撮影された医用画像データ（ボクセルデータ）を表示端末に表示させる場合、３次元のデータを２次元画像として立体的に表示させる、ボリュームレンダリングという画像処理技術が用いられている。 When displaying medical image data (voxel data) taken by a medical image diagnostic apparatus such as a CT (Computed Tomography) apparatus or an MRI (Magnetic Resonance Imaging) apparatus on a display terminal, three-dimensional data is converted into a two-dimensional image. An image processing technique called volume rendering is used.
近年、ネットワーク環境および計算機の低価格化・高性能化により、多くの病院に院内ネットワークが普及してきている。また、院内ネットワークに複数台の計算機が設置されている場合も珍しくない。 In recent years, in-hospital networks have become widespread in many hospitals due to the network environment and the low cost and high performance of computers. It is not uncommon for multiple computers to be installed in the hospital network.
そこで、ボリュームレンダリングのような計算量の大きい画像処理では、ネットワークに接続された複数の計算ノード（計算機）で分散処理させることで、処理を高速化している。つまり、各計算ノードのCPU（Central Processing Unit）使用率やメモリ使用状況を取得し、各計算ノードの計算余力を判断し、計算余力のある計算ノードにデータや計算処理を割り当てるようにしている。 Therefore, in image processing with a large amount of calculation such as volume rendering, the processing is speeded up by performing distributed processing with a plurality of calculation nodes (computers) connected to the network. That is, the CPU (Central Processing Unit) usage rate and the memory usage status of each calculation node are acquired, the calculation capacity of each calculation node is determined, and data and calculation processing are assigned to the calculation node having the calculation capacity.
しかしながら、計算余力のある計算ノードに、単純にデータや計算処理を割り当てているだけであり、ネットワーク応答性能が低い場合には、期待する表示応答が得られない課題があった。 However, there is a problem that an expected display response cannot be obtained when data and calculation processing are simply assigned to a calculation node having sufficient calculation capacity and the network response performance is low.
本発明はこのような状況に鑑みてなされたものであり、その目的は、良好な表示応答が得られるように、画像処理を複数の計算機に分散させることができるようにした医用画像分散処理装置、およびその制御プログラムを提供することである。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide a medical image distribution processing apparatus capable of distributing image processing to a plurality of computers so as to obtain a favorable display response. And providing a control program thereof.
実施形態の医用画像分散処理装置は、医用画像データの画像処理を、ネットワークに接続された複数の計算機で分散処理させ、分散処理結果を表示端末に表示させる医用画像分散処理装置であって、複数の計算機の計算能力を取得する計算能力取得手段と、医用画像分散処理装置と複数の計算機との間のデータ転送時間、および、複数の計算機と表示端末との間のデータ転送時間を取得するデータ転送時間取得手段と、計算能力取得手段により取得された計算能力、および、データ転送時間取得手段により取得されたデータ転送時間に基づいて、分散処理結果が表示端末に送信されるまでの結果送信時間を算出し、その結果送信時間から、医用画像データの画像処理を、複数の計算機に割り当てる計算割当手段とを備える。 The medical image distribution processing apparatus according to the embodiment is a medical image distribution processing apparatus that performs image processing of medical image data using a plurality of computers connected to a network and displays a result of the distribution processing on a display terminal. Data for acquiring the calculation capability of the computer, the data transfer time between the medical image distributed processing device and the plurality of computers, and the data transfer time between the plurality of computers and the display terminal Result transmission time until the distributed processing result is transmitted to the display terminal based on the transfer time acquisition unit, the calculation capability acquired by the calculation capability acquisition unit, and the data transfer time acquired by the data transfer time acquisition unit And a calculation assigning means for assigning the image processing of the medical image data to a plurality of computers based on the result transmission time.
以下、本実施の形態について図面を参照して詳細に説明する。
［第１の実施の形態］
図１は、第１の実施の形態に係る医用画像分散処理システムの構成例を示す図である。
Hereinafter, the present embodiment will be described in detail with reference to the drawings.
[First Embodiment]
FIG. 1 is a diagram illustrating a configuration example of a medical image distribution processing system according to the first embodiment.
図１に示す医用画像分散処理システムは、サーバ１、医用画像診断装置２−１，２−２、情報管理装置３、表示端末４、計算ノード（計算機）５−１乃至５−５、およびスイッチングハブ６−１乃至６−３が、ルータ７を介して相互に接続されることによってネットワーク構成されている。
The medical image distribution processing system shown in FIG. 1 includes a
以下において、医用画像診断装置２−１，２−２を個々に区別する必要がない場合、単に医用画像診断装置２と称し、計算ノード５−１乃至５−５を個々に区別する必要がない場合、単に計算ノード５と称し、スイッチングハブ６−１乃至６−３を個々に区別する必要がない場合、単にスイッチングハブ６と称する。また、医用画像診断装置２、計算ノード５の数は任意であり、図１に示されるような数に限定されるものではない。さらに、ルータ７には、スイッチングハブ６が接続されているが、やはり図１に示されるような数に限定されるものではなく、それ以上増設し、医用画像診断装置２や計算ノード５を増設し、ネットワークを拡大することも可能である。
In the following, when it is not necessary to distinguish between the medical image diagnostic apparatuses 2-1 and 2-2, they are simply referred to as the medical image
サーバ１は、例えば、PACS（Picture Archiving Communication System）であって、CPU（Central Processing Unit）、ROM（Read Only Memory）、RAM（Random Access Memory）、および大容量のHDD（Hard Disc Drive）などを実装したコンピュータシステムで構成され、医用画像分散処理装置として機能する。
The
サーバ１は、医用画像診断装置２からスイッチングハブ６−１を介して取得した医用画像データを記憶し、管理する。
The
サーバ１は、表示端末４から、ルータ７およびスイッチングハブ６−１を介して指定された所定の医用画像データの画像処理（例えば、ボリュームレンダリング）を実行する。このとき、サーバ１は、各計算ノード５の計算能力、サーバ１と各計算ノード５の間のデータ転送時間、各計算ノード５と表示端末４の間のデータ転送時間を取得するとともに、情報管理装置３で管理されている電子カルテに保存された診断情報などから病変部に相当する優先処理領域の情報を取得する。そして、サーバ１は、取得した計算能力、データ転送時間、および優先処理領域の情報に基づいて、各計算ノード５での画像処理の割り当てを決定する。
The
医用画像診断装置２は、Ｘ線CT（Computed Tomography）装置やMRI（Magnetic Resonance Imaging）装置などの、いわゆる医用モダリティであって、撮影された医用画像データを、スイッチングハブ６−１を介してサーバ１に転送する。
The medical image
情報管理装置３は、例えば、病院情報システム(HIS:Hospital Information System)で
あって、検査の予約、電子カルテ、会計、および薬の処方などの情報を管理する。
The
表示端末４は、画像の読影を行うためにビューアと呼ばれる機能を用いて、ユーザによって指示された医用画像データの画像処理の実行をサーバ１に対して要求する。表示端末４は、各計算ノード５からルータ７を介して取得した画像処理結果を表示する。
The display terminal 4 requests the
計算ノード５は、CPU，ROM，RAM，およびHDDなどを実装したコンピュータシステムで構成され、サーバ１によって要求された画像処理を実行する。計算ノード５は、画像処理専用端末であってもよいし、他の処理機能を実装した端末であってもよい。
The calculation node 5 is composed of a computer system in which a CPU, ROM, RAM, HDD, and the like are mounted, and executes image processing requested by the
スイッチングハブ６は、ネットワークにおいてケーブルを流れるデータを中継する機器であって、サーバ１などの端末から送られてきたデータを解析して宛先を検出し、送り先の端末にのみデータを送信する。
The
ルータ７は、ネットワークにおいて、２つ以上の異なるネットワーク間を相互接続する通信機器である。
The
なお、表示端末４に実装されるビューアの機能は、サーバ１、医用画像診断装置２、および計算ノード５にももちろん実装することが可能であり、どの端末からも画像処理の実行を要求したり、画像処理結果（分散処理結果）を表示したりすることができる。また画像処理は、計算ノード５で実行させるだけでなく、ネットワークに接続されたサーバ１、医用画像診断装置２、情報管理装置３、表示端末４、あるいは、図示せぬ他の端末でも、計算余力があれば勿論実行することが可能である。
Note that the viewer function implemented in the display terminal 4 can of course be implemented in the
図２は、図１に示したサーバ１の機能構成例を示すブロック図である。
FIG. 2 is a block diagram illustrating a functional configuration example of the
要求受付部１１は、表示端末４から、ルータ７およびスイッチングハブ６−１を介して送信されてきた、所定の医用画像データの画像処理の実行要求を取得する。この画像処理の実行要求には、表示端末４の識別情報（例えば、IP（
1276663129738_0.html
、および、画像処理の実行が要求された医用画像データを指定する情報が含まれる。要求受付部１１は、取得した画像処理の実行要求を計算割当部１２に供給する。
The
1276663129738_0.html
And information for designating medical image data requested to be subjected to image processing. The
計算割当部１２は、要求受付部１１から供給された画像処理の実行要求に含まれる医用画像データを指定する情報に基づいて、医用画像データベース１３に記憶されている医用画像データの中から、所定の医用画像データを読み出す。
The
計算割当部１２は、画像処理の実行要求を受け付けた場合、計算能力取得部１４に対して、各計算ノード５の計算能力を取得するように指示する。また、計算割当部１２は、データ転送時間取得部１５に対して、サーバ１と各計算ノード５の間のデータ転送時間、および各計算ノード５と表示端末４の間のデータ転送時間を取得するように指示する。さらに、計算割当部１２は、優先処理領域情報取得部１６に対して、情報管理装置３で管理されている電子カルテなどから優先処理領域（病変部）の情報を取得するように指示する。
When the
計算割当部１２は、計算能力取得部１４から取得した各計算ノード５の計算能力、およびデータ転送時間取得部１５から取得したデータ転送時間に基づいて、各計算ノード５に医用画像データが割り当てられ、分散処理が行われ、その分散処理結果が表示端末４に送信されるまでに必要な時間（以下において、結果送信時間と称する）を算出する。
The
計算割当部１２は、算出した結果送信時間、および、優先処理領域情報取得部１６から取得した優先処理領域の情報に基づいて、優先処理領域データの画像処理を、結果送信時間が最も短い計算ノード５に割り当てる。
The
計算割当部１２は、優先処理領域データを割り当てた後、残りの医用画像データを、表示端末４で分散処理結果がほぼ均一に得られるように割り当てる。
After assigning the priority processing area data, the
計算割当部１２は、割当結果を割当結果送信部１７に供給する。割当結果には、各計算ノード５に割り当てた医用画像データ、画像処理実行要求、および分散処理結果の送信先（表示端末４）の情報などが含まれる。
The
医用画像データベース１３は、医用画像診断装置２から取得した医用画像データを記憶し、管理する。
The
計算能力取得部１４は、計算割当部１２からの指示に基づいて、各計算ノード５の計算能力を取得し、取得結果を計算割当部１２に供給する。
The calculation
なお、計算能力の取得処理は、計算割当部１２から指示を受けた時に実行するだけでなく、CPUクロックやCPUキャッシュ容量などから予測して保持しておくようにしてもよい。計算能力とは、CPUクロックやCPUキャッシュ容量だけでなく、例えば、CPU未使用率、メ
モリ空き容量、およびメモリクロックなどからその指標を得ることができる。
It should be noted that the calculation capability acquisition process is not only executed when an instruction is received from the
データ転送時間取得部１５は、計算割当部１２からの指示に基づいて、各計算ノード５の結果送信時間を算出し、算出結果を計算割当部１２に供給する。
The data transfer
例えば、計算ノード５−１の結果送信時間の算出の場合、サーバ１から、スイッチングハブ６−１、ルータ７、およびスイッチングハブ６−２を介して計算ノード５−１にデータを転送する時間を算出するとともに、計算ノード５−１から、スイッチングハブ６−２およびルータ７を介して表示端末４にデータを転送する時間を算出し、それらの合計時間を算出する。
For example, when calculating the result transmission time of the calculation node 5-1, the time for transferring data from the
なお、結果送信時間の算出処理は、計算割当部１２から指示を受けた時に実行するだけでなく、システムバス帯域やシステムバスクロックなどから予測して保持しておくようにしてもよい。
The calculation process of the result transmission time is not only executed when receiving an instruction from the
優先処理領域情報取得部１６は、計算割当部１２からの指示に基づいて、情報管理装置３で管理されている電子カルテなどから、画像処理の実行が要求されている医用画像データの優先処理領域（病変部）の情報を取得し、取得結果を計算割当部１２に供給する。
Based on an instruction from the
割当結果送信部１７は、計算割当部１２から供給された割当結果を、各計算ノード５に送信する。
The allocation
次に、図３のフローチャートを参照して、サーバ１が実行する画像分散処理について説明する。
Next, the image distribution process executed by the
まず、表示端末４は、ユーザによって図示せぬ入力部が用いられ、所定の医用画像データの画像処理実行の指示を受け付けると、ルータ７およびスイッチングハブ６−１を介してサーバ１に対して、所定の医用画像データの画像処理を要求する。
First, when an input unit (not shown) is used by the user and the display terminal 4 receives an instruction to execute image processing of predetermined medical image data, the display terminal 4 sends the instruction to the
ステップＳ１において、要求受付部１１は、表示端末４から画像処理の実行要求を受け付けたか否かを判定し、画像処理の実行要求を受け付けたと判定するまで待機する。そして、ステップＳ１において、画像処理の実行要求を受け付けたと判定した場合、要求受付部１１は、画像処理の実行要求を計算割当部１２に供給し、ステップＳ２に進む。
In step S <b> 1, the
ステップＳ２において、計算割当部１２は、実行要求に含まれる医用画像データを指定する情報に基づいて、医用画像データベース１３に記憶されている医用画像データの中から、所定の医用画像データを読み出す。
In step S <b> 2, the
また計算割当部１２は、読み出した医用画像データのデータ量を得る。これにより、例えば、図４に示すように、画像処理のデータ量が４０単位であることを得る。
The
単位とは、例えば、図４に示す格子矩形で表わされる横Ｍ画素×縦Ｎ画素×Ｌスライス（画像）からなる部分ボリュームデータである。あるいは、このような直方体形状に限らず、例えば、ボクセル数が均等になるように分割するなど、単位の内容を任意に設定することも可能である。 The unit is, for example, partial volume data consisting of horizontal M pixels × vertical N pixels × L slice (image) represented by a grid rectangle shown in FIG. Alternatively, the unit content is not limited to such a rectangular parallelepiped shape, and for example, it is possible to arbitrarily set the content of the unit such as dividing so that the number of voxels is equal.
画像処理の単位データ（あるいは単位計算量）は、サーバ１によって予め定められているが、処理するデータ量に応じて、あるいは、計算ノード５の処理負荷に応じて、単位データのデータ量を加減するようにしてもよい。
The unit data (or unit calculation amount) for image processing is predetermined by the
さらに、計算割当部１２は、画像処理の実行要求に基づいて、計算能力取得部１４、データ転送時間取得部１５、および優先処理領域情報取得部１６に対して、各種処理の実行を指示し、ステップＳ３−１乃至Ｓ３−３に進む。
Further, the
ステップＳ３−１において、計算能力取得部１４は、計算割当部１２の指示に応じて、各計算ノード５の計算能力を取得する。
In step S 3-1, the calculation
ステップＳ３−２において、データ転送時間取得部１５は、計算割当部１２の指示に応じて、サーバ１と各計算ノード５の間のデータ転送時間、および各計算ノード５と表示端末４の間のデータ転送時間を取得する。
In step S <b> 3-2, the data transfer
図５は、ステップＳ３−１，３−２の処理により取得された、単位データ当たりの計算能力（処理時間）、および、データ転送時間の例が示されている。なお、計算ノード５−３，５−４は、説明を簡単にするために、画像処理（分散処理）ができない状態（例えば、CPU使用率が高くデータを割り当てることができない、または電源オフである）とする
。
FIG. 5 shows an example of the calculation capability (processing time) per unit data and the data transfer time acquired by the processing in steps S3-1 and S2. Note that the calculation nodes 5-3 and 5-4 are in a state where image processing (distributed processing) cannot be performed (for example, the CPU usage rate is high and data cannot be allocated, or the power is off, for the sake of simplicity. ).
図５の例では、計算ノード５−１の計算能力が「８秒」、計算ノード５−１とサーバ１との間のデータ転送時間が「１秒」、計算ノード５−１と表示端末４との間のデータ転送時間が「１秒」であることが示され、計算ノード５−２の計算能力が「２秒」、計算ノード５−２とサーバ１との間のデータ転送時間が「２秒」、計算ノード５−２と表示端末４との間のデータ転送時間が「２秒」であることが示され、計算ノード５−３の計算能力が「３秒」、計算ノード５−３とサーバ１との間のデータ転送時間が「６秒」、計算ノード５−３と表示端末４との間のデータ転送時間が「６秒」であることが示されている。
In the example of FIG. 5, the calculation capacity of the calculation node 5-1 is “8 seconds”, the data transfer time between the calculation node 5-1 and the
図３の説明に戻る。ステップＳ３−３において、優先処理領域情報取得部１６は、計算割当部１２の指示に応じて、情報管理装置３で管理されている電子カルテなどから、画像処理を実行する医用画像データの優先処理領域（病変部）の情報を取得する。例えば、図４に示した医用画像データにおいて、Ｐ１乃至Ｐ４の領域が優先処理領域である場合、画
像処理のデータ量４０単位のうち、優先処理領域のデータ量が４単位であることを認識する。
Returning to the description of FIG. In step S3-3, the priority processing area
ステップＳ４において、計算割当部１２は、ステップＳ３−１の処理で取得した各計算ノード５の計算能力、および、ステップＳ３−２の処理で取得したデータ転送時間に基づいて、各計算ノードの結果送信時間を算出する。これにより、図５に示すように、計算ノード５−１は「１０秒」（＝８秒＋１秒＋１秒）、計算ノード５−２は「６秒」（＝２秒＋２秒＋２秒）、計算ノード５−３は「１５秒」（＝３秒＋６秒＋６秒）が算出される。
In step S4, the
ステップＳ５において、計算割当部１２は、ステップＳ４の処理で算出した結果送信時間に基づいて、医用画像データの割当処理を実行する。
In step S5, the
ここで、図６のフローチャートを参照して、図３のステップＳ５における、第１の実施の形態での医用画像データの割当処理の詳細について説明する。 Details of the medical image data assignment process in the first embodiment in step S5 in FIG. 3 will be described with reference to the flowchart in FIG.
ステップＳ１１において、計算割当部１２は、ステップＳ４の処理で算出された結果送信時間の最も短い計算ノード５に、ステップＳ３−３の処理で取得した優先処理領域の医用画像データの画像処理を割り当てる。図５の例では、計算ノード５−２が最も結果送信時間が短いため、優先処理領域の４単位の医用画像データを計算ノード５−２に割り当てる。
In step S11, the
ステップＳ１２において、計算割当部１２は、優先処理領域の４単位の医用画像データ以外の残りの医用画像データを、均等に割り当てるか、あるいは、表示端末４で分散処理結果が最短時間で得られるように各計算ノードに割り当てる。
In step S12, the
均等に割り当てる場合には、３６（＝４０−４）／３＝１２単位ずつ各計算ノード５に割り当てる。 In the case of even allocation, 36 (= 40−4) / 3 = 12 units are allocated to each computation node 5 in units.
表示端末４で分散処理結果が最短時間で得られるように割り当てる場合には、以下のようにして決定する。なお、端数（少数点以下）の扱いは、予め計算ノード５に優先順位を付けておき、その優先順位に基づいて、整数に丸める。 When assigning the display terminal 4 so that the distributed processing result can be obtained in the shortest time, it is determined as follows. In order to handle fractions (decimal points or less), priorities are assigned to the calculation nodes 5 in advance, and rounded to integers based on the priorities.
計算ノード５−１の割当数＝３６×（1/10）／（1/10＋1/6＋1/15）≒１１単位
計算ノード５−２の割当数＝３６×（1/6）／（1/10＋1/6＋1/15）＝１８単位
計算ノード５−３の割当数＝３６×（1/15）／（1/10＋1/6＋1/15）≒７単位
以上のようにして、計算割当部１２は、各計算ノード５に医用画像データの画像処理を割り当て、その割当結果を割当結果送信部１７に通知する。
Number of allocation of calculation node 5-1 = 36 × (1/10) / (1/10 + 1/6 + 1/15) ≈11 units Number of allocation of calculation node 5-2 = 36 × (1/6) / (1/10 + 1) / 6 + 1/15) = 18 units The number of allocation of calculation nodes 5-3 = 36 × (1/15) / (1/10 + 1/6 + 1/15) ≈7 units As described above, the
図３の説明に戻る。ステップＳ６において、割当結果送信部１７は、ステップＳ５の処理で計算割当部１２により割り当てられた割当結果を、各計算ノード５に送信する。これにより、４０単位のデータ量の医用画像データのうち、計算ノード５−１には、１１単位分の医用画像データの画像処理が割り当てられ、計算ノード５−２には、４単位分の優先処理領域の医用画像データを含む２２単位分の医用画像データの画像処理が割り当てられ、計算ノード５−３には、７単位分の医用画像データの画像処理が割り当てられる。
Returning to the description of FIG. In step S6, the allocation
なお、割当結果には、医用画像データおよびその画像処理の実行要求が含まれるだけでなく、画像処理結果を表示端末４に転送指示する情報も含まれる。 The assignment result includes not only medical image data and an execution request for the image processing but also information for instructing the display terminal 4 to transfer the image processing result.
以上のように、第１の実施の形態によれば、ユーザが直ちに画像処理結果を確認したい病変部がある場合でも、良好な表示応答が得られるように、画像処理を分散させることが
可能となる。
［第２の実施の形態］
次に、第２の実施の形態について説明する。第２の実施の形態においては、医用画像データの画像処理を、表示端末４で分散処理結果がほぼ均一に得られるように割り当てる点に特徴を有するものである。
As described above, according to the first embodiment, it is possible to disperse image processing so that a good display response can be obtained even when there is a lesion that the user wants to immediately confirm the image processing result. Become.
[Second Embodiment]
Next, a second embodiment will be described. The second embodiment is characterized in that the image processing of medical image data is assigned so that the distributed processing result can be obtained almost uniformly on the display terminal 4.
図７は、図３のステップＳ５における、第２の実施の形態での医用画像データの割当処理の詳細について説明する。 FIG. 7 describes details of the medical image data allocation processing in the second embodiment in step S5 of FIG.
ステップＳ２１において、計算割当部１２は、ステップＳ４の処理で算出された結果送信時間に基づいて、医用画像データの画像処理を、表示端末４で分散処理結果がほぼ均一に得られるように各計算ノード５に割り当てる。図５の例では、計算ノード５−１の結果送信時間は「１０秒」、計算ノード５−２の結果送信時間は「６秒」、計算ノード５−３の結果送信時間は「１５秒」が得られており、表示端末４で分散処理結果がほぼ均一に得られるように割り当てる場合には、以下のようにして決定する。
In step S21, the
計算ノード５−１の割当数＝４０×（1/10）／（1/10＋1/6＋1/15）≒１２単位
計算ノード５−２の割当数＝４０×（1/6）／（1/10＋1/6＋1/15）＝２０単位
計算ノード５−３の割当数＝４０×（1/15）／（1/10＋1/6＋1/15）≒８単位
以上のように割り当てを決定することで、計算ノード５−１から表示端末４に分散処理結果が表示されるのは、１０秒×１２単位＝１２０秒後、計算ノード５−２から表示端末４に分散処理結果が表示されるのは、６秒×２０単位＝１２０秒後、計算ノード５−３から表示端末４に分散処理結果が表示されるのは、１５秒×８単位＝１２０秒後となる。
Number of allocation of calculation node 5-1 = 40 × (1/10) / (1/10 + 1/6 + 1/15) ≈12 units Number of allocation of calculation node 5-2 = 40 × (1/6) / (1/10 + 1) / 6 + 1/15) = 20 units The number of assignments of the calculation node 5-3 = 40 × (1/15) / (1/10 + 1/6 + 1/15) ≈8 units By determining the assignment as described above, the calculation node The distributed processing result is displayed on the display terminal 4 from 5-1 after 10 seconds × 12 units = 120 seconds, and the distributed processing result is displayed on the display terminal 4 from the calculation node 5-2 is 6 seconds. After 20 units = 120 seconds, the distributed processing result is displayed on the display terminal 4 from the computation node 5-3 after 15 seconds × 8 units = 120 seconds.
以上のように、第２の実施の形態によれば、一部の分散処理の結果が遅れることなく、良好な表示応答を得ることが可能となる。
［第３の実施の形態］
次に、第３の実施の形態について説明する。第３の実施の形態においては、医用画像データの画像処理を各計算ノード５に割り当てた後に、ある計算ノード５でキーボードやマウス等の操作が頻繁にあることを検出した場合、割り当てられた分散処理を中止し、他の計算ノード５に再度割り当てを行う点に特徴を有するものである。
As described above, according to the second embodiment, it is possible to obtain a good display response without delaying the results of some of the distributed processing.
[Third Embodiment]
Next, a third embodiment will be described. In the third embodiment, when image processing of medical image data is assigned to each computation node 5 and it is detected that a keyboard or mouse is frequently operated at a certain computation node 5, the assigned distribution This is characterized in that the processing is stopped and reassigned to another computation node 5.
図８は、第３の実施の形態での医用画像データの再割当処理を説明するフローチャートである。 FIG. 8 is a flowchart for explaining the medical image data reassignment process according to the third embodiment.
なお、この処理を開始するにあたり、上述した第１または第２の実施の形態によって、各計算ノード５に医用画像データの画像処理の割り当てが行われており、各計算ノード５で医用画像データの画像処理が実行されようとしている。 In starting this processing, the image processing of medical image data is assigned to each calculation node 5 according to the first or second embodiment described above, and the medical image data of each calculation node 5 is assigned. Image processing is about to be executed.
具体的には、計算ノード５−１では、１２単位のデータ量の医用画像データの画像処理が実行されようとしており、計算ノード５−２では、２０単位（４単位の優先処理領域を含む）のデータ量の医用画像データの画像処理が実行されようとしており、計算ノード５−３では、８単位のデータ量の医用画像データの画像処理が実行されようとしている。 Specifically, the calculation node 5-1 is about to execute 12-unit medical image data, and the calculation node 5-2 has 20 units (including 4 units of priority processing area). The image processing of the medical image data having the data amount is about to be executed, and the image processing of the medical image data having the data amount of 8 units is about to be executed in the calculation node 5-3.
ステップＳ３１において、要求受付部１１は、計算ノード５から分散処理の中止が通知されたか否かを判定する。
In step S <b> 31, the
例えば、計算ノード５−２において、ユーザによってキーボードやマウス等の操作（イベント）が頻繁にあると検知された場合、割り当てられた分散処理を中止し、中止した旨を、スイッチングハブ６−２、ルータ７、およびスイッチングハブ６−１を介してサーバ
１に通知する。
For example, in the calculation node 5-2, when it is detected by the user that the operation (event) of the keyboard, the mouse, or the like is frequently performed, the allocated distributed processing is canceled, and the switching hub 6-2, The
このように、計算ノード５−２から分散処理の中止が通知されたと判定した場合、要求受付部１１は、分散処理の中止を計算割当部１２に通知し、ステップＳ３２に進む。
As described above, when it is determined that the suspension of the distributed processing is notified from the calculation node 5-2, the
ステップＳ３２において、計算割当部１２は、分散処理の中止を受け、分散処理が中止された計算ノード５に割り当てられていた医用画像データを、表示端末４で分散処理結果がほぼ均一に得られるように、他の計算ノード５に再度割り当てる。
In step S32, the
つまり、計算ノード５−２に割り当てられていた２０単位のデータ量の医用画像データを、以下のようにして再度割り当てる。 That is, the medical image data having the data amount of 20 units assigned to the calculation node 5-2 is reassigned as follows.
計算ノード５−１の割当数＝２０×（1/10）／（1/10＋1/15）≒１２単位
計算ノード５−３の割当数＝２０×（1/15）／（1/10＋1/15）≒８単位
以上のようにして、計算割当部１２は、各計算ノード５に医用画像データの画像処理を再度割り当て、その再割当結果を割当結果送信部１７に通知する。
Number of allocation of calculation node 5-1 = 20 × (1/10) / (1/10 + 1/15) ≈12 units Number of allocation of calculation node 5-3 = 20 × (1/15) / (1/10 + 1/15 ) ≈8 units As described above, the
ステップＳ３３において、割当結果送信部１７は、ステップＳ３２の処理で計算割当部１２により再度割り当てられた再割当結果を、各計算ノード５に送信する。これにより、計算ノード５−２に割り当てられていた２０単位のデータ量の医用画像データのうち、計算ノード５−１には、１２単位分の医用画像データの画像処理が再度割り当てられ、計算ノード５−３には、８単位分の医用画像データの画像処理が再度割り当てられる。
In step S <b> 33, the assignment
また、計算ノード５−２に割り当てられていた４単位分の優先処理領域の医用画像データのうち、分散処理結果を最短時間で得るようにするには、３単位を計算ノード５−１に、１単位を計算ノード５−３に、あるいは、２単位ずつ計算ノード５−１と計算ノード５−３に再度割り当てるようにすれば良い。 In order to obtain the distributed processing result in the shortest time among the medical image data of the priority processing area for 4 units assigned to the calculation node 5-2, 3 units are assigned to the calculation node 5-1. One unit may be reassigned to the calculation node 5-3 or two units at a time to the calculation node 5-1 and the calculation node 5-3.
ステップＳ３１において、要求受付部１１は、計算ノード５から分散処理の中止が通知されていないと判定した場合、ステップＳ３４に進み、画像処理結果が表示端末４に表示されたか否か判定する。つまり、各計算ノード５で行われた画像処理の分散処理結果が表示端末４に転送され、そこに表示されたとき、画像処理結果の表示を示す情報をサーバ１に通知するようになされている。
In step S <b> 31, when the
ステップＳ３４において、要求受付部１１は、画像処理結果が表示端末４にまだ表示されていないと判定した場合、ステップＳ３１に戻り、上述した処理を繰り返し実行する。そして、ステップＳ３４において、要求受付部１１は、画像処理結果が表示端末４に表示されたと判定した場合、処理を終了する。
In step S34, when the
以上のように、第３の実施の形態によれば、イベント検知により分散処理を続行することが困難な場合にも、中断してしまった画像処理を他の計算ノードに再度割り当てることが可能となる。 As described above, according to the third embodiment, even when it is difficult to continue distributed processing due to event detection, the interrupted image processing can be reassigned to another computation node. Become.
なお、イベントが頻繁にある計算ノード５を予め把握しておき（イベント検知を見込んでおき）、その計算ノード５に優先処理領域の医用画像データが割り当てられた時点で、他の計算ノード５に重複して割り当てるようにしてもよい。 It should be noted that a calculation node 5 with frequent events is grasped in advance (event detection is anticipated), and when the medical image data of the priority processing area is assigned to the calculation node 5, it is assigned to another calculation node 5. Duplicate assignments may be made.
例えば、計算ノード５−２に割り当てられた２０単位のデータ量のうち、４単位分の優先処理領域の医用画像データを、計算ノード５−１と計算ノード５−３にも割り当てておき、重複した割り当て分の処理順序を後方にしておく。そして、計算ノード５−２でイベ
ントが検知された場合、計算ノード５−１と計算ノード５−３に重複して割り当てられた優先処理領域の医用画像データの画像処理の処理順序を前にして、先に優先処理領域の医用画像データの画像処理を実行させることができる。
［第４の実施の形態］
次に、第４の実施の形態について説明する。第４の実施の形態においては、急患の医用画像データの画像処理を、画像処理結果が最短時間で得られるように割り当てる点に特徴を有するものである。
For example, out of the 20 unit data amount allocated to the calculation node 5-2, the medical image data of the priority processing area for 4 units is also allocated to the calculation node 5-1 and the calculation node 5-3, and duplication is performed. The processing order for the assigned allocation is set backward. When an event is detected in the calculation node 5-2, the image processing order of the medical image data in the priority processing area assigned to the calculation node 5-1 and the calculation node 5-3 is assigned in advance. The image processing of the medical image data in the priority processing area can be executed first.
[Fourth Embodiment]
Next, a fourth embodiment will be described. The fourth embodiment is characterized in that image processing of medical image data of emergency patients is assigned so that an image processing result can be obtained in the shortest time.
図９は、第４の実施の形態での、急患時の画像分散処理を説明するフローチャートである。 FIG. 9 is a flowchart for explaining image dispersion processing at the time of emergency in the fourth embodiment.
例えば、急患の医用画像の読影を行うユーザが表示端末４を操作し、急患の医用画像データの画像処理の実行を指示すると、ルータ７およびスイッチングハブ６−１を介してサーバ１に対して、急患の医用画像データの画像処理を要求する。
For example, when a user who interprets a medical image of an emergency patient operates the display terminal 4 to instruct execution of image processing of medical image data of the emergency patient, the
ステップＳ４１において、要求受付部１１は、急患が入ったか否か、すなわち、表示端末４から、急患の医用画像データの画像処理の実行要求を受け付けたか否かを判定し、急患が入るまで待機する。なお、通常の医用画像データの画像処理の要求を受け付けた場合には、図３のフローチャートを用いて上述した画像分散処理が行われる。
In step S41, the
ステップＳ４１において、急患が入ったと判定した場合、要求受付部１１は、急患の医用画像データの画像処理の実行要求を計算割当部１２に供給し、ステップＳ４２に進む。
If it is determined in step S41 that an emergency patient has entered, the
ステップＳ４２において、計算割当部１２は、実行要求に含まれる急患の医用画像データを指定する情報、および、優先処理領域情報取得部１６によって取得された優先処理領域（病変部）の情報に基づいて、医用画像データベース１３に記憶されている医用画像データの中から、急患の優先処理領域の医用画像データを読み出す。
In step S42, the
ステップＳ４３において、計算割当部１２は、各計算ノード５の結果送信時間に基づいて、画像処理結果が最短時間で得られるように、急患の優先処理領域の医用画像データの画像処理を各計算ノード５に割り当てる。なお、各計算ノードの結果送信時間は、計算能力取得部１４によって取得された各計算ノード５の計算能力、および、データ転送時間取得部１５によって取得された各端末間のデータ転送時間に基づいて、過去に算出された結果送信時間を用いれば、結果送信時間を実測（算出）する時間を省略することができ、急患の画像処理結果をより早く表示させることができる。
In step S43, the
ステップＳ４４において、割当結果送信部１７は、ステップＳ４３の処理で計算割当部１２により割り当てられた割当結果を、各計算ノード５に送信する。
In step S44, the allocation
以上のように、第４の実施の形態によれば、急患の病変部の画像処理を先に実行することで、ユーザは、直ちに急患の画像処理結果を確認することが可能となる。
［変形例］
１．以上において、例えば、急患が入ったときに他の画像処理を実行していた場合、他の画像処理を中断し、急患の病変部の画像処理を優先させることもできる。この場合、急患の病変部の画像処理終了後、中断していた画像処理を再開させるが、画像処理が中断されることによって、処理結果の信頼性が低いため、中断されたデータ単位の最初から画像処理を再開させるようにする。
As described above, according to the fourth embodiment, the user can immediately confirm the image processing result of the emergency case by executing the image processing of the lesion part of the emergency case first.
[Modification]
1. In the above, for example, when other image processing is executed when an emergency patient enters, the other image processing can be interrupted and priority can be given to the image processing of the lesion part of the emergency patient. In this case, the image processing that has been interrupted is resumed after the image processing of the lesion part of the sudden illness is completed, but since the reliability of the processing result is low due to the interruption of the image processing, from the beginning of the interrupted data unit Restart image processing.
２．以上においては、画像処理として、ボリュームレンダリングを例として説明したが、CAD（Computer aided diagnosis）、プラーク解析、フライスルー（仮想内視鏡表示機
能）、骨抜き（Caスコアリング）、マルチボリュームレジストレーションなど、計算量の大きい画像処理に適用することも可能である。
2. In the above, volume rendering has been described as an example of image processing, but CAD (Computer Aided Diagnosis), plaque analysis, fly-through (virtual endoscope display function), bone removal (Ca scoring), multi-volume registration, etc. It is also possible to apply to image processing with a large calculation amount.
３．この発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化したり、上記実施の形態に開示されている複数の構成要素を適宜組み合わせたりすることにより種々の発明を形成できる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施の形態に亘る構成要素を適宜組み合わせても良い。 3. The present invention is not limited to the above-described embodiment as it is, and in the implementation stage, the component may be modified and embodied without departing from the spirit of the invention, or a plurality of components disclosed in the above-described embodiment. Various inventions can be formed by appropriately combining the above. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine the component covering different embodiment suitably.
１ サーバ
４ 表示端末
５−１乃至５−５ 計算ノード
１２ 計算割当部
１４ 計算能力取得部
１５ データ転送時間取得部
１６ 優先処理領域情報取得部
DESCRIPTION OF
Claims (6)
前記複数の計算機の計算能力を取得する計算能力取得手段と、
前記医用画像分散処理装置と前記複数の計算機との間のデータ転送時間、および、前記複数の計算機と前記表示端末との間のデータ転送時間を取得するデータ転送時間取得手段と、
前記計算能力取得手段により取得された前記計算能力、および、前記データ転送時間取得手段により取得された前記データ転送時間に基づいて、前記分散処理結果が前記表示端末に送信されるまでの結果送信時間を算出し、その結果送信時間から、前記医用画像データの画像処理を、前記複数の計算機に割り当てる計算割当手段と
を備えることを特徴とする医用画像分散処理装置。 In a medical image distributed processing apparatus that performs image processing of medical image data by a plurality of computers connected to a network and displays a result of the distributed processing on a display terminal.
A calculation capability acquisition means for acquiring the calculation capability of the plurality of computers;
Data transfer time acquisition means for acquiring data transfer times between the medical image distribution processing device and the plurality of computers, and data transfer times between the plurality of computers and the display terminal;
Result transmission time until the distributed processing result is transmitted to the display terminal based on the calculation capability acquired by the calculation capability acquisition means and the data transfer time acquired by the data transfer time acquisition means And a calculation assigning means for assigning image processing of the medical image data to the plurality of computers from the transmission time as a result.
前記計算割当手段は、前記優先処理領域情報取得手段により取得された前記優先処理領域情報に基づいて、前記医用画像データのうち、優先処理領域データの画像処理を、前記結果送信時間が最も短い計算機に割り当てる
ことを特徴とする請求項１に記載の医用画像分散処理装置。 Priority processing area information acquisition means for acquiring priority processing area information of the medical image data,
The calculation assigning unit performs image processing of the priority processing region data among the medical image data based on the priority processing region information acquired by the priority processing region information acquisition unit. The medical image distribution processing device according to claim 1, wherein the medical image distribution processing device is assigned to the medical image dispersion processing device.
ことを特徴とする請求項１に記載の医用画像分散処理装置。 2. The medical assignment according to claim 1, wherein the calculation assigning means assigns the image processing of the medical image data to the plurality of computers so that the distributed processing result can be obtained almost uniformly on the display terminal. Image distributed processing device.
ことを特徴とする請求項１に記載の医用画像分散処理装置。 The calculation assigning means, when assigning the image processing of the medical image data to the plurality of computers, if the distributed processing is stopped, performs the image processing assigned to the computer for which the distributed processing is stopped The medical image distribution processing device according to claim 1, wherein the medical image distribution processing device is reassigned to a computer.
ことを特徴とする請求項１に記載の医用画像分散処理装置。 The said calculation allocation means allocates the image processing of the said medical image data of a sudden illness to these computers so that an image processing result can be obtained in the shortest time by the said display terminal. Medical image distribution processing device.
前記複数の計算機の計算能力を取得する計算能力取得ステップと、
前記医用画像分散処理装置と前記複数の計算機との間のデータ転送時間、および、前記複数の計算機と前記表示端末との間のデータ転送時間を取得するデータ転送時間取得ステップと、
前記計算能力取得ステップにより取得された前記計算能力、および、前記データ転送時間取得ステップにより取得された前記データ転送時間に基づいて、前記分散処理結果が前記表示端末に送信されるまでの結果送信時間を算出し、その結果送信時間から、前記医用画像データの画像処理を、前記複数の計算機に割り当てる計算割当ステップと
を含むことを特徴とする制御プログラム。
In a control program to be executed by a computer included in a medical image distributed processing apparatus that performs image processing of medical image data by a plurality of computers connected to a network and displays the distributed processing result on a display terminal.
A calculation capability acquisition step of acquiring the calculation capability of the plurality of computers;
A data transfer time acquisition step of acquiring a data transfer time between the medical image distribution processing device and the plurality of computers, and a data transfer time between the plurality of computers and the display terminal;
Result transmission time until the distributed processing result is transmitted to the display terminal based on the calculation capability acquired in the calculation capability acquisition step and the data transfer time acquired in the data transfer time acquisition step And a calculation assignment step of assigning image processing of the medical image data to the plurality of computers from the transmission time as a result.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010137056A JP2012000223A (en) | 2010-06-16 | 2010-06-16 | Medical image distributed processing device and control program of the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010137056A JP2012000223A (en) | 2010-06-16 | 2010-06-16 | Medical image distributed processing device and control program of the same |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012000223A true JP2012000223A (en) | 2012-01-05 |
Family
ID=45532915
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010137056A Pending JP2012000223A (en) | 2010-06-16 | 2010-06-16 | Medical image distributed processing device and control program of the same |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012000223A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013158543A (en) * | 2012-02-07 | 2013-08-19 | Hitachi Medical Corp | Magnetic resonance imaging apparatus |
| JP2014076137A (en) * | 2012-10-10 | 2014-05-01 | Toshiba Corp | Medical image diagnostic device and image processing management device |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003162516A (en) * | 2001-11-22 | 2003-06-06 | Motoaki Saito | Multi-processor system in network environment |
| JP2003263420A (en) * | 2002-03-12 | 2003-09-19 | Hitachi Medical Corp | Parallel arithmetic processing system using medical apparatus |
| JP2005182711A (en) * | 2003-12-24 | 2005-07-07 | Ziosoft Inc | Volume rendering image processing system among multiple ones |
| JP2006167023A (en) * | 2004-12-14 | 2006-06-29 | Ziosoft Inc | Image processing system of volume rendering or the like |
| JP2007058857A (en) * | 2005-08-25 | 2007-03-08 | General Electric Co <Ge> | Distributed image processing of medical image |
| WO2011080809A1 (en) * | 2009-12-29 | 2011-07-07 | 株式会社 東芝 | Server |
-
2010
- 2010-06-16 JP JP2010137056A patent/JP2012000223A/en active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003162516A (en) * | 2001-11-22 | 2003-06-06 | Motoaki Saito | Multi-processor system in network environment |
| JP2003263420A (en) * | 2002-03-12 | 2003-09-19 | Hitachi Medical Corp | Parallel arithmetic processing system using medical apparatus |
| JP2005182711A (en) * | 2003-12-24 | 2005-07-07 | Ziosoft Inc | Volume rendering image processing system among multiple ones |
| JP2006167023A (en) * | 2004-12-14 | 2006-06-29 | Ziosoft Inc | Image processing system of volume rendering or the like |
| JP2007058857A (en) * | 2005-08-25 | 2007-03-08 | General Electric Co <Ge> | Distributed image processing of medical image |
| WO2011080809A1 (en) * | 2009-12-29 | 2011-07-07 | 株式会社 東芝 | Server |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013158543A (en) * | 2012-02-07 | 2013-08-19 | Hitachi Medical Corp | Magnetic resonance imaging apparatus |
| JP2014076137A (en) * | 2012-10-10 | 2014-05-01 | Toshiba Corp | Medical image diagnostic device and image processing management device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9984206B2 (en) | System and method for medical resource scheduling in a distributed medical system | |
| US9129049B2 (en) | Medical imaging apparatus, information processing method, and computer-readable storage medium | |
| JP2002219122A (en) | Medical system architecture | |
| US20160378917A1 (en) | Imaging Study Queries Across Multiple Facilities And Repositories | |
| CN110136807A (en) | A kind of medical image pre-load means and equipment | |
| US11574402B2 (en) | Inspection information display device, method, and program | |
| WO2014030303A1 (en) | Image display device and program | |
| Mäenpää et al. | Outcomes assessment of the regional health information exchange | |
| JP2005327302A (en) | Report generating system in network environment | |
| JP2003263420A (en) | Parallel arithmetic processing system using medical apparatus | |
| JP2012000223A (en) | Medical image distributed processing device and control program of the same | |
| JP7210254B2 (en) | Medical data file generation device, medical data file generation system, and medical data file generation program | |
| JP2011128661A (en) | Regional medical cooperation system, registration terminal, and program | |
| JP4410985B2 (en) | Image distribution system, image distribution method, program, and recording medium | |
| JP6904878B2 (en) | Interpretation management system and interpretation management method | |
| JP2010152623A (en) | Medical image management system | |
| JP2010152624A (en) | Medical image management system | |
| JP7064430B2 (en) | Priority determination device, method and program | |
| US20210241883A1 (en) | Medical image reconstruction cloud scheduler | |
| JP5585134B2 (en) | Layout creation program, layout creation apparatus, layout creation system, and layout creation method | |
| JP6724644B2 (en) | Data management device and image display system | |
| WO2016106399A1 (en) | Method for cost-based evaluation of a service delivery network | |
| US20230409390A1 (en) | Medical information processing system and medical information processing method, medical information processing service providing method, and program | |
| JP6110824B2 (en) | Medical resource introduction device, system, program, and operating method of medical resource introduction device | |
| JP7328501B2 (en) | Information processing device, control method for information processing device, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130605 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131213 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131224 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140418 |