JP5822345B2 - Hall slide image creation device - Google Patents
Hall slide image creation device Download PDFInfo
- Publication number
- JP5822345B2 JP5822345B2 JP2011190287A JP2011190287A JP5822345B2 JP 5822345 B2 JP5822345 B2 JP 5822345B2 JP 2011190287 A JP2011190287 A JP 2011190287A JP 2011190287 A JP2011190287 A JP 2011190287A JP 5822345 B2 JP5822345 B2 JP 5822345B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- region
- interest
- magnification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
- Microscoopes, Condenser (AREA)
Description
本発明は、病理標本が封入されたスライドガラス(プレパラート)全体を撮影してデジタル画像データを生成し、生成したデジタル画像データに基づいて病理診断を行うことを可能とするホールスライドイメージ作成装置に関するものである。 The present invention relates to a hole slide image creation device capable of photographing a whole slide glass (preparation) in which a pathological specimen is enclosed to generate digital image data and performing pathological diagnosis based on the generated digital image data. Is.
近年、病理学の分野等において、光学顕微鏡によって観察される画像をデジタルデータ化し、ディスプレイ上で観察する装置が用いられている。現在、このような装置としては、デジタル顕微鏡、遠隔顕微鏡、及びホールスライドイメージ作成装置が存在し、がん対策における先端技術として注目されはじめている。 In recent years, in the field of pathology and the like, an apparatus for converting an image observed with an optical microscope into digital data and observing it on a display is used. Currently, there are a digital microscope, a remote microscope, and a hall slide image creation device as such devices, and they are beginning to attract attention as advanced technologies in cancer countermeasures.
ここで、デジタル顕微鏡は、病理標本をデジタルカメラを介してディスプレイで観察できるようにした光学顕微鏡である。また、遠隔顕微鏡は、従来の光学顕微鏡にデジタルカメラと電動ステージを追加し、遠隔操作で顕微鏡観察ができるようにしたものである。また、ホールスライドイメージ作成装置は、病理標本が封入されたスライドガラス(プレパラート)において病理標本全体を撮影し、デジタル画像データを生成する装置であり、画像全体がデジタル化されてハードディスクやDVD等に蓄積される。 Here, the digital microscope is an optical microscope that allows a pathological specimen to be observed on a display via a digital camera. The remote microscope is a conventional optical microscope with a digital camera and a motorized stage so that the microscope can be observed remotely. The hole slide image creation device is a device that captures the entire pathological specimen on a slide glass (preparation) in which the pathological specimen is enclosed, and generates digital image data. The entire image is digitized and stored on a hard disk, DVD, or the like. Accumulated.
ホールスライドイメージ作成装置の具体例としては、例えば、特許文献1に記載されたスライド画像データ作成装置が知られている。このスライド画像作成装置は、病理標本を載置した可動フレームを順次移動させながら複数の画像を高倍率で撮影するものである。 As a specific example of the hole slide image creation device, for example, a slide image data creation device described in Patent Document 1 is known. This slide image creation apparatus captures a plurality of images at a high magnification while sequentially moving a movable frame on which a pathological specimen is placed.
しかし、このスライド画像作成装置においては、病理標本を載置したステージを順次移動させながら複数の画像を高倍率で撮影するため、特に病理標本が多数存在する場合、スライド画像データを生成するのに膨大な時間がかかるという問題があった。 However, in this slide image creating apparatus, a plurality of images are taken at a high magnification while sequentially moving the stage on which the pathological specimen is placed, so that slide image data is generated particularly when there are many pathological specimens. There was a problem that it took an enormous amount of time.
更に、病理標本の全ての領域が高倍率で撮影されている場合には、病理標本の観察に長時間が必要となり病理診断を高速で行うことができなかった。また、全ての領域が低倍率で撮影されている場合には、病理診断を高精度で行うことができなかった。 Furthermore, when all areas of the pathological specimen are photographed at a high magnification, it takes a long time to observe the pathological specimen, and the pathological diagnosis cannot be performed at high speed. Further, when all the areas are photographed at a low magnification, pathological diagnosis cannot be performed with high accuracy.
本発明の目的は、病理診断の速度や精度を高めることができるホールスライドイメージ作成装置を提供することである。 An object of the present invention is to provide a hole slide image creation device that can increase the speed and accuracy of pathological diagnosis.
請求項1記載のホールスライドイメージ作成装置は、病理標本を基本倍率で撮影する撮影手段と、前記撮影手段により基本倍率で撮影された病理標本の画像データに基づいて前記病理標本に関する関心領域を特定する関心領域特定手段と、前記関心領域特定手段により特定された前記関心領域の詳細撮影を行なう詳細撮影手段と、前記病理標本の識別情報に対応させて、前記撮影手段により撮影された病理標本の画像データ及び前記詳細撮影手段により撮影された前記関心領域の詳細画像データを記憶する記憶手段とを備え、前記関心領域特定手段は、前記基本倍率で撮影された、複数の異なる特殊染色を行なった病理標本の画像データの画像差に基づいて前記関心領域を特定することを特徴とする。 The hall slide image creating apparatus according to claim 1, wherein an imaging unit that images a pathological specimen at a basic magnification, and a region of interest related to the pathological specimen is specified based on image data of the pathological specimen that is captured at the basic magnification by the imaging means. A region-of-interest specifying unit, a detailed imaging unit that performs detailed imaging of the region of interest specified by the region-of-interest specifying unit, and a pathological specimen imaged by the imaging unit corresponding to the identification information of the pathological sample. Storage means for storing detailed image data of the region of interest captured by the image data and the detailed capturing unit, and the region of interest specifying unit performed a plurality of different special stains captured at the basic magnification The region of interest is specified based on an image difference in image data of a pathological specimen .
また、請求項2記載のホールスライドイメージ作成装置は、前記詳細撮影手段が、前記基本倍率よりも高い倍率で前記関心領域の撮影を行なうことを特徴とする。 According to a second aspect of the present invention, the detailed photographing unit photographs the region of interest at a magnification higher than the basic magnification.
また、請求項3記載のホールスライドイメージ作成装置は、前記詳細撮影手段が、前記撮影手段の焦点位置を変化させて、複数の異なる焦点位置で前記関心領域の撮影を行なうことを特徴とする。 According to a third aspect of the present invention, in the hall slide image creating apparatus, the detailed photographing means changes the focal position of the photographing means and photographs the region of interest at a plurality of different focal positions.
また、請求項4記載のホールスライドイメージ作成装置は、閲覧機能を有する端末装置からの画像データ送信要求を受信する受信手段と、前記受信手段により受信した画像データ送信要求に基づいて前記記憶手段に記憶されている画像データの中から送信する画像データを特定する画像データ特定手段と前記画像データ特定手段により特定された画像データを前記端末装置に送信する送信手段とを備えることを特徴とする。 According to a fourth aspect of the present invention, there is provided the hall slide image creating apparatus according to the present invention, wherein a receiving means for receiving an image data transmission request from a terminal device having a browsing function, and a storage means based on the image data transmission request received by the receiving means Image data specifying means for specifying image data to be transmitted from the stored image data, and transmission means for transmitting the image data specified by the image data specifying means to the terminal device are provided.
また、請求項5記載のホールスライドイメージ作成装置は、前記画像データ送信要求が、前記病理標本の識別情報、画像データの位置情報及び画像データの倍率の情報を含むことを特徴とする。 The hall slide image creating apparatus according to claim 5 , wherein the image data transmission request includes identification information of the pathological specimen, position information of the image data, and information of magnification of the image data.
また、請求項6記載のホールスライドイメージ作成装置は、前記送信手段により送信した画像データに関する情報、画像データの送信先及び送信日時を記憶する記憶手段を備えることを特徴とする。
According to a sixth aspect of the present invention, there is provided a hall slide image creating apparatus comprising storage means for storing information relating to image data transmitted by the transmission means, a transmission destination of the image data, and a transmission date and time.
本発明のホールスライドイメージ作成装置によれば、病理診断の速度や精度を高めることができる。また、病理標本に病理医師が診たい領域を詳細観察することが可能である。また、病理医師が診たい領域を複数の異なる焦点位置で観察することができ通常の光学顕微鏡観察に近い運用が可能である。 According to the hole slide image creation device of the present invention, the speed and accuracy of pathological diagnosis can be increased. In addition, it is possible to observe in detail a region desired by the pathologist on the pathological specimen. In addition, the region desired to be examined by the pathologist can be observed at a plurality of different focal positions, and operation close to normal optical microscope observation is possible.
以下、図面を参照して本発明の実施の形態に係るホールスライドイメージ作成装置について説明する。図1は、実施の形態に係るホールスライドイメージ作成装置2を含むシステム全体の構成を示すブロック図である。ホールスライドイメージ作成装置2は、病院の病理検査室に備えられているものであり、ホールスライドイメージ作成装置2の各部を統括的に制御する制御部4を備えている。制御部4には、プレパラート6を載置するステージ8を移動させるステージ制御部10、プレパラート6を観察するための対物レンズ12の駆動制御を行うレンズ駆動部14、対物レンズ12により撮像面上に結像された被写体像を撮像するCCD等により構成される撮像素子16、プレパラート6の全領域を含む全体画像を撮影するデジタルカメラ20、撮像素子16やデジタルカメラ20により撮影された画像データを一時的に記憶する画像記憶部21、撮像素子16により撮像された画像データに基づく画像等を表示する表示部22、一連の撮影処理を開始する開始ボタン(不図示)等を備える操作部24、撮像素子16やデジタルカメラ20により撮像された画像データを記憶するデータベース26、データベース26に記憶されている複数の画像データに基づいて一つの画像の画像データを生成する等の画像処理を行う画像処理部27、インターネット28を介した外部端末30からの画像データ送信要求の受信及びその要求に対応する画像データの送信を行う通信部32、インターネット28を介して外部端末30に送信した画像データに関する情報等をログデータとして記憶する情報記憶部34が接続されている。
Hereinafter, a hole slide image creation device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing a configuration of the entire system including a hall slide image creation device 2 according to the embodiment. The hall slide image creation device 2 is provided in a pathological examination room of a hospital, and includes a
ホールスライドイメージ作成装置2は、対物レンズ12として、基本倍率(例えば対物10倍)で病理標本40(図2参照)を観察する対物レンズ12a、及び基本倍率よりも高い倍率(例えば対物40倍)で病理標本40を観察する対物レンズ12bを備えている。また、外部端末30は、病理医師が病理診断を行う診療所に備えられている。外部端末30に含まれる外部端末30a、外部端末30bは、データベース26に記憶された画像データに基づく画像を観察するためのビューア機能を有しており、ビューア機能により画像を表示する表示部(不図示)、カーソルを操作するマウス(不図示)等を備えている。
The hall slide image creation device 2 uses the
図2は、実施の形態に係るホールスライドイメージ作成装置2において用いるプレパラート6を示す図である。プレパラート6は、病院において患者から採取された組織切片等の病理標本40を封入したスライドガラス42により構成される。
FIG. 2 is a diagram showing the
図3は、実施の形態に係るホールスライドイメージ作成装置2の撮影処理を示すフローチャートである。まず、プレパラート6がステージ8上の所定の位置にセットされ(ステップS1)、開始ボタンが操作されると、制御部4は、撮影処理を開始する(ステップS2)。即ち、制御部4は、ステージ制御部10を制御し、プレパラート6がデジタルカメラ20の直下に位置するようにステージ8を移動させる。
FIG. 3 is a flowchart showing a photographing process of the hall slide image creation device 2 according to the embodiment. First, the
次に、制御部4は、デジタルカメラ20によりプレパラート6の全領域を含む全体画像を撮影し(ステップS3)、撮影された画像の画像データを画像記憶部21に記憶する。次に、制御部4は、画像記憶部21から画像データを読み出し、画像データに基づいて、プレパラート6(図2参照)において病理標本40が封入されている領域(以下、標本領域という。)を特定する(ステップS4)。
Next, the
次に、制御部4は、対物レンズ12aを用いて基本倍率で病理標本40を撮影する準備として、標本領域を複数の正方形の領域(以下、区分領域という。)に格子状に区分し、標本領域における各区分領域の位置を認識する。例えば、標本領域の上側縁部の最左端に位置する区分領域の位置を位置「1,1」として認識し、標本領域の上側縁部の最左端の右隣に位置する区分領域の位置を位置「1,2」として認識する。そして、標本領域の下側縁部の最右端に位置する区分領域の位置を位置「M,N」として認識するまで同様の処理を繰り返す。
Next, the
次に、制御部4は、レンズ駆動部14を制御し、基本倍率で病理標本40を撮影できるように対物レンズ12aに切換える。次に、ステージ制御部10を制御し、標本領域において最初に撮影する位置「1,1」の区分領域が対物レンズ12aの直下に位置するようにステージ8を移動させ、更にステージ8を垂直方向に移動させて位置「1,1」の区分領域における所定の焦点位置(以下、基準面という。)に焦点を合わせる。次に、位置「1,1」の区分領域について対物10倍の基本倍率で撮影し(ステップS5)、画像データに位置情報を付加して画像記憶部21に記憶する。同様にして、制御部4は、順次ステージ8を移動させて位置「1,2」から位置「M,N」までの区分領域を基本倍率で撮影し、区分領域の画像の画像データに位置情報を付加して画像記憶部21に記憶する。
Next, the
次に、制御部4は、画像記憶部21から基本倍率で撮影した各区分領域の画像の画像データを読み出し、画像処理部27において、画像データに付加された位置情報に基づいて、全ての区分領域をつなぎ合わせた病理標本40の全体の画像データを生成する。次に、制御部4は、生成した画像データを用いて、図4に示すように、病理標本40において病変部を含む可能性の高い関心領域44を特定する(ステップS6)。例えば、画像データから病理標本40の粒子(細胞)の密度を認識し、他の領域と比較して粒子の密度が高い領域を関心領域44として特定する。
Next, the
次に、制御部4は、対物レンズ12bを用いて高倍率で関心領域44を撮影する準備として、関心領域44を更に複数の正方形の領域(以下、詳細区分領域という。)に格子状に区分し、関心領域44における各詳細区分領域の位置を区分領域の位置と関連付けて認識する。
Next, as a preparation for photographing the region of
例えば、関心領域44が位置「4,6」の区分領域に存在する場合、制御部4は、上側縁部の最左端の詳細区分領域の位置を位置「i,i(4,6)」として認識し、上側縁部の最左端の右隣に位置する詳細区分領域の位置を位置「i,ii(4,6)」として認識する。そして、下側縁部の最右端に位置する詳細区分領域の位置を位置「m,n(4,6)」として認識するまで同様の処理を繰り返す。
For example, when the region of
なお、関心領域44が位置「4,6」の区分領域と位置「4,7」の区分領域とに亘って存在する場合、制御部4は、まず、位置「4,6」の区分領域に存在する関心領域44において、位置「i,i(4,6)」から位置「m,n(4,6)」までの認識を行い、次に、位置「4,7」の区分領域に存在する関心領域44において、位置「i,i(4,7)」から位置「m,n(4,7)」までの認識を行う。
When the region of
次に、制御部4は、レンズ駆動部14を制御し、高倍率で関心領域44を撮影できるように対物レンズ12bに切換える。次に、ステージ制御部10を制御し、関心領域44において最初に撮影する位置の詳細区分領域が対物レンズ12bの直下に位置するようにステージ8を移動させる。例えば、関心領域44が位置「4,6」の区分領域に存在する場合、「i,i(4,6)」の詳細区分領域が対物レンズ12bの直下に位置するようにステージ8を移動させる。次に、制御部4は、更にステージ8を垂直方向に移動させて位置「i,i(4,6)」の詳細区分領域における基準面に焦点を合わせる。そして、次に、位置「i,i(4,6)」の詳細区分領域について対物40倍の基本倍率で撮影し(ステップS7)、画像データに位置情報を付加して画像記憶部21に記憶する。同様にして、制御部4は、順次ステージ8を移動させ、位置「i,ii(4,6)」から位置「m,n(4,6)」までの詳細区分領域を対物40倍の高倍率で詳細撮影し、詳細区分領域の画像の画像データに位置情報を付加して画像記憶部21に記憶する。
Next, the
次に、制御部4は、レンズ駆動部14を制御し、再び基本倍率で撮影ができるように対物レンズ12aに切換える。次に、ステージ制御部10を制御し、関心領域44を含む区分領域のうち、最初に撮影する区分領域が対物レンズ12aの直下に位置するようにステージ8を移動させる。例えば、関心領域44を含む区分領域が位置「4,6」の区分領域である場合、位置「4,6」の区分領域が対物レンズ12aの直下に位置するようにステージ8を移動させる。
Next, the
次に、制御部4は、例えば、上下に0.5μmずつステージ8をステップ移動させて、基準面を中心とする複数の異なる焦点位置で位置「4,6」の区分領域を基本倍率で撮影する(ステップS8)。次に、制御部4は、複数の異なる焦点位置で撮影した位置「4,6」の区分領域の画像の画像データに位置情報及び焦点位置情報を付加して画像記憶部21に記憶する。
Next, for example, the
次に、制御部4は、全体画像の画像データ、基本倍率で撮影された各区分領域の画像の画像データ、高倍率で詳細撮影された各詳細区分領域の画像の画像データ、及び異なる焦点位置で撮影された各区分領域の画像の画像データを画像記憶部21から読み出し、プレパラート6の識別番号に対応させてデータベース26に記憶する(ステップS9)。
Next, the
図5は、実施の形態に係るホールスライドイメージ作成装置2において画像データを外部端末30に送信する処理を示すフローチャートである。ここでは、病理医師が外部端末30aを用いて病理診断を行う際のホールスライドイメージ作成装置2との通信を例に説明する。
FIG. 5 is a flowchart showing a process of transmitting image data to the
まず、外部端末30aにおいて、病理医師が患者名やプレパラート6(図4参照)の識別番号等を入力すると、入力された内容の情報を含む画像データ送信要求がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介して画像データ送信要求を受信する(ステップS11)。
First, in the
次に、制御部4は、画像データ送信要求に含まれる患者名やプレパラート6の識別番号等に基づいて、データベース26に記憶されている画像データの中から、外部端末30aに送信する画像データを特定する(ステップS12)。次に、特定した画像データのうち、基準面に焦点を合わせて基本倍率で撮影された全ての区分領域の画像の画像データ、即ち、位置「1,1」から位置「M,N」までの区分領域の画像の画像データをデータベース26から読み出す。
Next, the
次に、制御部4は、画像処理部27を制御して、画像データに付加された位置情報に基づいて、全ての区分領域をつなぎ合わせた病理標本40の全体の縮小画像(例えば対物1.4倍)の画像データを生成する(ステップS13)。
Next, the
次に、制御部4は、縮小画像の画像データを、通信部32及びインターネット28を介して外部端末30aに対して送信する(ステップS14)。ここで、制御部4は、送信した縮小画像の画像データ名、画像データの送信先である外部端末30aの通信アドレス、及び送信日時をログデータとして情報記憶部34に記憶させる。
Next, the
外部端末30aは、インターネット28を介して縮小画像の画像データを受信すると、画像データに基づいて、病理標本40の全体の縮小画像をビューア機能を用いて表示部において表示する。病理医師は、表示部に表示された画像を診て病理標本40の全領域の状況を把握すると共に、病理標本40における関心領域44の位置を認識する。そして、病理医師は、マウスを操作して表示部に表示されたカーソルを病理標本40上の位置、例えば関心領域44の上に移動させ、関心領域44をクリックする。
When receiving the image data of the reduced image via the
関心領域44がクリックされると、クリックされた位置に関する情報含む画像データ送信要求がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介してクリックされた位置に関する情報含む画像データ送信要求を受信する(ステップS15)。
When the region of
次に、制御部4は、クリックされた位置に対応する、例えば、基準面に焦点を合わせて基本倍率で撮影された位置「4,6」の区分領域の画像の画像データをデータベース26から読み出し、通信部32及びインターネット28を介して外部端末30aに対して送信し(ステップS16)、ログデータを情報記憶部34に記憶する。
Next, the
外部端末30aは、インターネット28を介して画像データを受信すると、画像データに基づいて、位置「4,6」の区分領域の画像を基本倍率で表示部において表示する。ここで、病理医師は、マウスを操作して表示部に表示されている画像をスクロールすることができる。例えば、位置「4,6」の区分領域の画像が表示部において表示されている場合、マウスを操作して画像を右側にスクロールさせる指示を行うと、位置「4,7」の区分領域の画像の画像データ送信要求がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介して画像データ送信要求を受信すると、位置「4,7」の区分領域の画像の画像データをデータベース26から読み出し、通信部32及びインターネット28を介して外部端末30aに対して送信し、ログデータを情報記憶部34に記憶する。
When the
外部端末30aは、ホールスライドイメージ作成装置2から位置「4,7」の区分領域の画像の画像データを受信すると、位置「4,6」及び位置「4,7」の区分領域の画像をつなぎ合わせた画像をビューア機能を用いて作成し、表示部において表示する。さらにマウスを操作して画像を右側にスクロールさせる指示を行うと、外部端末30aは、位置「4,7」の区分領域の画像を表示部において表示する。この際に、マウス操作によるスクロール指示の履歴が操作情報として外部端末30aに記憶される。
When the
ここで、病理医師は、焦点位置を変更した画像及び高倍率で撮影された画像を表示部において診ることができる。焦点位置を変更した画像を診たい場合、病理医師は、表示部に表示された位置「4,6」の区分領域の画像、即ち、関心領域44の画像を診ながら焦点位置の指定を行う。例えば、表示部に表示されている画像よりも0.5μm上側(下側)の位置に焦点を合わせて関心領域44を観察したい場合、病理医師は、外部端末30aにおいて+0.5(−0.5)等の焦点位置情報を入力する。
Here, the pathologist can see on the display unit the image with the focal position changed and the image taken at a high magnification. When it is desired to examine an image whose focal position has been changed, the pathologist designates the focal position while examining the image of the divided region at the position “4, 6” displayed on the display unit, that is, the image of the region of
焦点位置の指定が行われると、表示部に表示されている区分領域の画像の位置情報及び入力された焦点位置情報を含む画像データ送信要求がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介して、表示部に表示されている区分領域の画像の位置情報及び入力された焦点位置情報を含む画像データ送信要求を受信する(ステップS17)。
When the focus position is designated, an image data transmission request including the position information of the segmented area image displayed on the display unit and the input focus position information is sent to the hall slide image creation device 2 via the
次に、制御部4は、画像データ送信要求に含まれる位置情報及び焦点位置情報に対応する画像データをデータベース26から読み出し、通信部32及びインターネット28を介して外部端末30aに対して送信する(ステップS18)。例えば、受信した画像データ送信要求に位置「4,6」という位置情報、及び+0.5(−0.5)という焦点位置情報が含まれる場合、制御部4は、基準面よりも0.5μm上側(下側)の位置に焦点を合わせて撮影された位置「4,6」の区分領域の画像の画像データを送信する。ここで、制御部4は、焦点位置情報を含むログデータを情報記憶部34に記憶する。
Next, the
外部端末30aは、インターネット28を介して画像データを受信すると、基準面よりも0.5μm上側(下側)を焦点位置とする位置「4,6」の区分領域の画像を表示部において表示する。なお、表示部に表示された画像が所望の位置に焦点が合った画像でない場合、病理医師により再度焦点位置情報の入力が行われ、ステップS17及びS18で説明した処理が繰り返される。これにより、病理医師は、表示部に表示された区分領域の画像を診て関心領域44を所望の焦点位置で観察することができる。
When the
また、高倍率で撮影された画像を診たい場合、病理医師は、マウスを操作してカーソルを移動させ、関心領域44において更に詳細に観察したい領域をクリックすると共に画像倍率を入力する。領域のクリック及び画像倍率を入力が行われると、クリックされた位置に関する情報と画像倍率の情報を含む画像データ送信要求がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介してクリックされた位置に関する情報と画像倍率の情報を含む画像データ送信要求を受信する(ステップS19)。
In addition, when wishing to examine an image taken at a high magnification, the pathologist operates the mouse to move the cursor, clicks the region of
次に、制御部4は、クリックされた位置及び入力された画像倍率に対応する区分領域の画像の画像データをデータベース26から読み出し、通信部32及びインターネット28を介して外部端末30aに対して送信する(ステップS20)。例えば、受信した画像データ送信要求に位置「i,ii(4,6)」という位置情報、及び×40という画像倍率の情報が含まれる場合、制御部4は、対物40倍で詳細撮影された位置「i,ii(4,6)」の詳細区分領域の画像の画像データを送信し、ログデータを情報記憶部34に記憶する。
Next, the
外部端末30aは、インターネット28を介して画像データを受信すると、病理医師が更に詳細に観察したい領域である、位置「i,ii(4,6)」の詳細区分領域の画像を対物40倍の高倍率で表示部に表示する。なお、病理医師は、マウスを操作することにより、表示部に表示されている画像をスクロールすることができる。病理医師は、表示部に表示された画像を診て病理診断を行う。
When the
次に、病理医師が病理診断結果を入力すると、病理診断結果に関する情報、及びマウス操作等の記録である操作情報がインターネット28を介してホールスライドイメージ作成装置2に対して送信される。制御部4は、インターネット28及び通信部32を介して病理診断結果に関する情報及び操作情報を受信する(ステップS21)。
Next, when the pathologist inputs the pathological diagnosis result, information regarding the pathological diagnosis result and operation information that is a record of mouse operation and the like are transmitted to the hall slide image creating apparatus 2 via the
次に、制御部4は、病理診断結果に関する情報をプレパラート6の識別番号に対応させてデータベース26に記憶し、操作情報をログデータとして情報記憶部34に記憶する。また、データベース26に記憶されている画像データ及び病理診断結果に関する情報を患者の電子カルテと関連付ける処理を行う。
Next, the
この実施の形態に係るホールスライドイメージ作成装置によれば、関心領域についてのみ高倍率で詳細撮影を行うため、詳細撮影を早く終わらせることができると共に関心領域について詳細な観察を行うことができ、病理診断の速度や精度を高めることができる。また、データベースに記憶する画像データの容量を少なくすることができるため、画像データの蓄積に要する費用を低減させることができる。 According to the hole slide image creation device according to this embodiment, because detailed imaging is performed at a high magnification only for the region of interest, detailed imaging can be completed early and detailed observation can be performed for the region of interest, The speed and accuracy of pathological diagnosis can be increased. Further, since the capacity of the image data stored in the database can be reduced, the cost required for storing the image data can be reduced.
また、病理医師は、基本倍率で撮影された画像を外部端末30の表示部で観察して関心領域を認識し、関心領域について高倍率で詳細に観察するため、通常の光学顕微鏡観察に近い運用が可能である。また、関心領域を複数の異なる焦点位置で観察することができるため、通常の光学顕微鏡観察と同等の診断可能率で病理診断を行うことができる。
In addition, since the pathologist observes the image captured at the basic magnification on the display unit of the
また、手術中に摘出された病変組織の病理標本を遠隔地から病理医師が診断することができるため、病理医師が不在の病院において手術中において迅速に病理診断結果を得ることが可能となる。例えば、胃癌の内視鏡手術はリンパ節転移有無評価に迅速診断は欠かせないとされるが、手術中において迅速に病理診断を行うことができれば、病理医不在病院(100-200床の中小病院等)での早期胃癌等の内視鏡手術が可能になる。また、これにより、医療費を削減することができる。 In addition, since a pathologist can diagnose a pathological specimen of a diseased tissue extracted during surgery from a remote location, it is possible to quickly obtain a pathological diagnosis result during surgery in a hospital where the pathologist is absent. For example, endoscopic surgery for gastric cancer requires rapid diagnosis to evaluate the presence or absence of lymph node metastases. Endoscopic surgery such as early gastric cancer in a hospital etc. becomes possible. This can also reduce medical costs.
また、患者の病変部の顕微鏡像をディスプレイに表示することが可能になるため、病変部の顕微鏡像をディスプレイに表示し、患者に自分の病変部を観察させながら病理検査の説明を行うことができる。また、患者が自分の病変部の画像データのコピー(DVD等)を入手して病理診断科の病理専門医に病変部の説明を求めることもできる。 In addition, since it is possible to display a microscopic image of the lesion on the patient on the display, the microscopic image of the lesion can be displayed on the display, and the pathological examination can be explained while allowing the patient to observe his / her lesion. it can. In addition, the patient can obtain a copy of the image data (DVD or the like) of his / her lesion and ask the pathologist of the pathology department to explain the lesion.
また、病理標本を撮影した画像を画像データとして記憶するため、プレパラートの管理で問題になる病理標本の破損、紛失、劣化等の心配がなく、いつでも同じ画像データに基づく画像を観察することができる。また、プレパラートを専門家に輸送する必要がないため、病理診断を行うまでの日数を早めることができ、患者が不安な気持ちで診断結果を待つ時間を短くすることができる。また、病理診断科の病理専門医が診断困難な事例や特殊・稀少病変等について、画像データを用いて迅速にスペシャリティー領域の病理医師に病理診断の確認・裏づけをとることができる。また、大量の画像データをデータベース26に記憶させてライブラリーを構築し、いつでも必要なプレパラートの画像を外部端末30の表示部で閲覧することができる。
In addition, since an image obtained by photographing a pathological specimen is stored as image data, there is no worry about damage, loss, deterioration, etc. of the pathological specimen, which is a problem in preparation management, and an image based on the same image data can be observed at any time. . In addition, since it is not necessary to transport the preparation to a specialist, the number of days until the pathological diagnosis is performed can be shortened, and the time that the patient waits for the diagnosis result with anxiety can be shortened. In addition, for pathological specialists in the pathological diagnosis department, it is possible to quickly confirm and support pathological diagnosis with a pathologist in the specialty area using image data for cases that are difficult to diagnose or special / rare lesions. In addition, a large amount of image data can be stored in the database 26 to construct a library, and a necessary preparation image can be viewed on the display unit of the
また、外部端末に対して送信した画像データの画像データ名、画像データに付加された位置情報、外部端末の通信アドレス、及び送信日時等をログデータとして情報記憶部34に記憶するため、どの病理医師が何時どのような画像を観察して病理診断を行ったかを証跡として残すことができ、病理診断業務の品質を高めることができる。
Further, since the image data name of the image data transmitted to the external terminal, the position information added to the image data, the communication address of the external terminal, the transmission date and time, etc. are stored in the
また、インターネット28を介して受信した画像データを外部端末30の表示部で観察することができるため、複数の病理医師が同一の画像を同時に診ながらディスカッションを行うことができる。
In addition, since image data received via the
なお、上述の実施の形態においては、病理標本40の粒子の密度を認識することにより関心領域44を特定する場合を例に説明しているが(図3、ステップS6参照)、他の方法を用いて関心領域44を特定してもよい。例えば、病理標本40の粒子の分布状況を認識し、病理標本40において異常な形状の粒子を含む領域を関心領域44として特定してもよい。具体的には、病理標本40において円形状の粒子の中に楕円形状の粒子が存在する場合、楕円形状の粒子を含む領域を関心領域44として特定してもよい。また、病理標本40において特定の配列を有する粒子の中に配列の異なる粒子が存在する場合、配列の異なる粒子を含む領域を関心領域44として特定してもよい。また、基本倍率で撮影された病理標本40の画像データに現れている粒子の画像と、予めホールスライドイメージ作成装置2において記憶されている粒子の標準的な画像とのパターンマッチングを行なうことにより関心領域44を特定してもよい。
In the above-described embodiment, the case where the region of
また、基本倍率で撮影された、複数の異なる特殊染色を行なった病理標本の画像データを比較し、画像データの画像差に基づいて関心領域44を特定してもよい。例えば、まず、連続して薄切りされた組織切片を3つ用意する。次に、一つ目の組織切片に基本染色Aを施して一つ目のプレパラートを作成し、二つ目の組織切片に特殊染色Bを施して二つ目のプレパラートを作成し、三つ目の組織切片に特殊染色Cを施して三つ目のプレパラートを作成する。次に、これらのプレパラートについて、上述の実施の形態におけるステップS1〜5の処理(図3参照)を行い、組織切片(病理標本)を基本倍率で撮影した画像の画像データを取得する。
Alternatively, the region of
ここで、図6(a)は、一つ目の組織切片に基本染色Aを施して撮影した病理標本の画像、二つ目の組織切片に特殊染色Bを施して撮影した病理標本の画像、三つ目の組織切片に特殊染色Cを施して撮影した病理標本の画像を示す図である。図6(a)に示す画像において、基本染色Aを施した場合に染色された腺管は、特殊染色Bを施した場合には全て染色されるが、特殊染色Cを施した場合には一部が染色されない。このように、特殊染色を施した場合における画像に画像差が認められる場合、図6(b)に示すように、基本染色Aを施した病理標本の画像において、特殊染色Bを施した場合には染色されるが特殊染色Cを施した場合には染色されない腺管を含む領域を関心領域44として特定してもよい。
Here, FIG. 6 (a) is an image of a pathological specimen photographed with basic staining A applied to the first tissue section, an image of a pathological specimen photographed with special staining B applied to the second tissue section, It is a figure which shows the image of the pathological sample image | photographed by giving special staining C to the 3rd tissue section. In the image shown in FIG. 6 (a), the gland duct stained with the basic staining A is all stained when the special staining B is applied. The part is not stained. Thus, when an image difference is recognized in the image when special staining is performed, as shown in FIG. 6B, when special staining B is performed on the image of the pathological specimen subjected to basic staining A. May be specified as the region of
また、上述の実施の形態において、詳細区分領域について複数の異なる焦点位置で高倍率の撮影を行うようにしてもよい。これにより、病理医師は、表示部に表示された関心領域44の詳細な画像について焦点位置の指定を行うことができ、更に精度の高い病理診断を行うことができる。
Further, in the above-described embodiment, high-magnification imaging may be performed at a plurality of different focal positions for the detailed section area. Thereby, the pathologist can designate a focal position for a detailed image of the region of
また、上述の実施の形態においては、対物10倍の基本倍率で撮影して関心領域44を特定し、対物40倍の高倍率で関心領域44を詳細撮影する場合を例に説明しているが、撮影倍率は上述の実施の形態で用いた倍率に限定されない。例えば、対物4倍の基本倍率で撮影して関心領域44を特定し、対物40倍の高倍率で関心領域44を詳細撮影するようにしてもよい。これにより、画像データの容量を小さくすることができる。
Further, in the above-described embodiment, the case where the region of
また、上述の実施の形態において、情報記憶部34に記憶されたログデータに基づいて、データベース26から順次画像データを読み出し、画像データに基づく画像を表示部22において表示するようにしてもよい。これにより、病理診断時に外部端末30の表示部に表示された画像と同じ画像をビデオ再生のようにして表示部22に表示することができる。また、情報記憶部34に記憶されたマウス操作等の操作情報のログデータを用いることにより、表示部22にビデオ再生のようにして表示する画像を更に病理診断時に外部端末30の表示部に表示された画像に近づけることができる。
In the above-described embodiment, image data may be sequentially read from the database 26 based on log data stored in the
また、上述の実施の形態において、外部端末30に録音部を備え、病理医師が表示部を診ながら読み上げる病理診断時の音声を音声データとして録音部に録音するようにしてもよい。そして、この音声データをホールスライドイメージ作成装置2に送信し、情報記憶部34においてログデータとして記憶するようにしてもよい。これにより、病理診断業務の品質を更に高めることができる。
Further, in the above-described embodiment, the
また、上述の実施の形態において、対物レンズ12を用いて撮影した画像の画像データを電子カルテに組み込んでデータベース26に記憶するようにしてもよい。例えば、電子カルテ上の画像イメージ表示部分に画像データをリンクさせるようにしてもよい。このデータを外部端末30に送信することにより、病理医師は、表示部において電子カルテを参照しながら病理標本の画像を観察することができ、画像データの検索時間を大幅に削減することができる。
In the above-described embodiment, image data of an image taken using the
また、上述の実施の形態においては、ステージ制御部10によりステージ8を移動させてプレパラートの撮影を行う場合を例に説明しているが、撮像素子16やデジタルカメラ20を移動させるカメラ駆動部を備え、カメラ駆動部により撮像素子16やデジタルカメラ20を移動させてプレパラートの撮影を行うようにしてもよい。
Further, in the above-described embodiment, the case where the stage 8 is moved by the
また、上述の実施の形態においては、順次区分領域を撮影し、全ての区分領域をつなぎ合わせた画像を生成する方式を例に説明しているが、スキャナーにより帯状の領域をスキャンし、スキャンした画像を合成して病理標本全体の画像を生成する方式を用いてもよい。 Further, in the above-described embodiment, a method has been described as an example in which a sectioned area is photographed sequentially and an image in which all the sectioned areas are connected is generated. However, a band-shaped area is scanned by a scanner and scanned. A method of synthesizing images and generating an image of the entire pathological specimen may be used.
2…ホールスライドイメージ作成装置、4…制御部、6…プレパラート、8…ステージ、10…ステージ制御部、12…対物レンズ、14…レンズ駆動部、16…撮像素子、20…デジタルカメラ、21…画像記憶部、22…表示部、24…操作部、26…データベース、27…画像処理部、28…インターネット、30…外部端末、32…通信部、34…情報記憶部
DESCRIPTION OF SYMBOLS 2 ... Hall slide image creation apparatus, 4 ... Control part, 6 ... Preparation, 8 ... Stage, 10 ... Stage control part, 12 ... Objective lens, 14 ... Lens drive part, 16 ... Image sensor, 20 ... Digital camera, 21 ... Image storage unit 22 ...
Claims (6)
前記撮影手段により基本倍率で撮影された病理標本の画像データに基づいて前記病理標本に関する関心領域を特定する関心領域特定手段と、
前記関心領域特定手段により特定された前記関心領域の詳細撮影を行なう詳細撮影手段と、
前記病理標本の識別情報に対応させて、前記撮影手段により撮影された病理標本の画像データ及び前記詳細撮影手段により撮影された前記関心領域の詳細画像データを記憶する記憶手段と
を備え、
前記関心領域特定手段は、前記基本倍率で撮影された、複数の異なる特殊染色を行なった病理標本の画像データの画像差に基づいて前記関心領域を特定することを特徴とするホールスライドイメージ作成装置。 Photographing means for photographing a pathological specimen at a basic magnification;
A region-of-interest specifying means for specifying a region of interest relating to the pathological specimen based on image data of the pathological specimen photographed at a basic magnification by the photographing means;
Detailed imaging means for performing detailed imaging of the region of interest specified by the region of interest specifying means;
Corresponding to the identification information of the pathological specimen, it comprises storage means for storing image data of the pathological specimen photographed by the photographing means and detailed image data of the region of interest photographed by the detailed photographing means ,
The region-of-interest specifying unit specifies the region of interest based on an image difference between image data of a plurality of pathological specimens that have been photographed at the basic magnification and that have undergone a plurality of different special stains. .
前記受信手段により受信した画像データ送信要求に基づいて前記記憶手段に記憶されている画像データの中から送信する画像データを特定する画像データ特定手段と
前記画像データ特定手段により特定された画像データを前記端末装置に送信する送信手段と
を備えることを特徴とする請求項1〜3の何れか一項に記載のホールスライドイメージ作成装置。 Receiving means for receiving an image data transmission request from a terminal device having a browsing function;
Based on the image data transmission request received by the receiving means, image data specifying means for specifying image data to be transmitted from among the image data stored in the storage means, and image data specified by the image data specifying means hole slide image creation device according to any one of claim 1 to 3, characterized in that it comprises transmitting means for transmitting to the terminal device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011190287A JP5822345B2 (en) | 2011-09-01 | 2011-09-01 | Hall slide image creation device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011190287A JP5822345B2 (en) | 2011-09-01 | 2011-09-01 | Hall slide image creation device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013054083A JP2013054083A (en) | 2013-03-21 |
JP5822345B2 true JP5822345B2 (en) | 2015-11-24 |
Family
ID=48131155
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011190287A Expired - Fee Related JP5822345B2 (en) | 2011-09-01 | 2011-09-01 | Hall slide image creation device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5822345B2 (en) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6659133B2 (en) | 2015-12-10 | 2020-03-04 | キヤノン株式会社 | Slides and sets of slides and coverslips, and microscope systems |
KR101763199B1 (en) * | 2016-06-14 | 2017-08-03 | 한국화학연구원 | Observation equipment for fine object |
JP6695386B2 (en) | 2018-06-05 | 2020-05-20 | 一般社団法人白亜会 | Hall slide image creation device |
JPWO2020066043A1 (en) | 2018-09-28 | 2021-08-30 | オリンパス株式会社 | Microscope system, projection unit, and image projection method |
CN112714886B (en) | 2018-09-28 | 2023-03-21 | 仪景通株式会社 | Microscope system, projection unit, and image projection method |
CN112714888B (en) * | 2018-09-28 | 2023-02-17 | 仪景通株式会社 | Microscope system, projection unit, and image projection method |
JP7381589B2 (en) * | 2019-08-28 | 2023-11-15 | 公益財団法人がん研究会 | Pathological image management system |
JP7506524B2 (en) | 2020-05-20 | 2024-06-26 | 株式会社エビデント | Microscope system, control method, and program |
JP7506523B2 (en) | 2020-05-20 | 2024-06-26 | 株式会社エビデント | Microscope system, control method, and program |
JP2021076858A (en) * | 2021-01-26 | 2021-05-20 | 一般社団法人白亜会 | Automatic imaging apparatus of a microscopic image |
WO2023111198A1 (en) * | 2021-12-16 | 2023-06-22 | Enaiblers Ab | Systems and methods for calibrating an imaging system |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0694706A (en) * | 1992-09-10 | 1994-04-08 | Sumitomo Metal Ind Ltd | Pathology image inspection support device |
JP5161052B2 (en) * | 2008-12-04 | 2013-03-13 | オリンパス株式会社 | Microscope system, specimen observation method and program |
JPH0829694A (en) * | 1994-07-20 | 1996-02-02 | Nikon Corp | Microscope with image processor |
US6418236B1 (en) * | 1999-06-24 | 2002-07-09 | Chromavision Medical Systems, Inc. | Histological reconstruction and automated image analysis |
CA2236268A1 (en) * | 1995-11-30 | 1997-06-05 | Chromavision Medical Systems, Inc. | Method and apparatus for automated image analysis of biological specimens |
JPH11203463A (en) * | 1998-01-08 | 1999-07-30 | Seiko Epson Corp | Image original reader and picture data distribution system |
JPH11275572A (en) * | 1998-03-25 | 1999-10-08 | Nikon Corp | Microscope image display system and microscope image transmission display system |
CN1384949A (en) * | 1999-04-13 | 2002-12-11 | 色品视觉医学体系股份有限公司 | Histological reconstruction and automated image analysis |
WO2005036451A1 (en) * | 2003-10-08 | 2005-04-21 | Lifespan Biosciences, Inc. | Automated microspcope slide tissue sample mapping and image acquisition |
US20060133657A1 (en) * | 2004-08-18 | 2006-06-22 | Tripath Imaging, Inc. | Microscopy system having automatic and interactive modes for forming a magnified mosaic image and associated method |
CA2595248A1 (en) * | 2005-01-18 | 2006-07-27 | Trestle Corporation | System and method for creating variable quality images of a slide |
WO2006081362A2 (en) * | 2005-01-27 | 2006-08-03 | Aperio Technologies, Inc | Systems and methods for viewing three dimensional virtual slides |
JP2007201578A (en) * | 2006-01-24 | 2007-08-09 | Nikon Corp | Image recording system |
EP2213722B1 (en) * | 2007-10-19 | 2018-01-10 | Nikon Corporation | Program, computer, and culture state analyzing method |
JP4558047B2 (en) * | 2008-01-23 | 2010-10-06 | オリンパス株式会社 | Microscope system, image generation method, and program |
JP5249799B2 (en) * | 2009-01-26 | 2013-07-31 | 浜松ホトニクス株式会社 | Image output system, image output method, and image output program |
JP2011002341A (en) * | 2009-06-18 | 2011-01-06 | Olympus Corp | Microscopic system, specimen observation method, and program |
JP5059816B2 (en) * | 2009-08-14 | 2012-10-31 | 株式会社クラーロ | Slide image data creation device |
-
2011
- 2011-09-01 JP JP2011190287A patent/JP5822345B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2013054083A (en) | 2013-03-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5822345B2 (en) | Hall slide image creation device | |
US7463761B2 (en) | Systems and methods for creating and viewing three dimensional virtual slides | |
JP4937850B2 (en) | Microscope system, VS image generation method thereof, and program | |
EP1860481B1 (en) | Micropscope system and method for synthesiing microscopic images | |
JP2006343573A (en) | Microscopic system, observation method and observation program | |
US20160062101A1 (en) | Method and apparatus for small and large format histology sample examination | |
JP2012048026A (en) | Microscope and filter inserting method | |
US20080100703A1 (en) | Microscope system, observation method and observation program | |
JP2009211358A (en) | Image information processing device for microscope | |
JP2016038542A (en) | Image processing method and image processing apparatus | |
EP1918751A1 (en) | Microscope system, observation method and observation program | |
JP2005266718A (en) | Microscopic image photographing system | |
JP4346888B2 (en) | Microscope equipment | |
WO2013179723A1 (en) | Information processing device, information processing method, program and microscope system | |
JP2009210773A (en) | Information processing apparatus for image of microscope | |
JP4046161B2 (en) | Sample image data processing method and sample inspection system | |
JP2021021850A (en) | Autofocus microscope and automatic imaging device of microscopic image | |
JP6695386B2 (en) | Hall slide image creation device | |
JP4231915B2 (en) | Specimen inspection method and system | |
JP2021076858A (en) | Automatic imaging apparatus of a microscopic image | |
WO2022202233A1 (en) | Information processing device, information processing method, information processing system and conversion model |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140620 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150317 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150515 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151001 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151002 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5822345 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |