JP6448996B2 - 顕微鏡システム - Google Patents
顕微鏡システム Download PDFInfo
- Publication number
- JP6448996B2 JP6448996B2 JP2014238032A JP2014238032A JP6448996B2 JP 6448996 B2 JP6448996 B2 JP 6448996B2 JP 2014238032 A JP2014238032 A JP 2014238032A JP 2014238032 A JP2014238032 A JP 2014238032A JP 6448996 B2 JP6448996 B2 JP 6448996B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- correction
- magnification
- area
- shading
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012937 correction Methods 0.000 claims description 169
- 238000000034 method Methods 0.000 claims description 166
- 238000003705 background correction Methods 0.000 claims description 104
- 230000003287 optical effect Effects 0.000 claims description 42
- 238000001000 micrograph Methods 0.000 claims description 27
- 238000003384 imaging method Methods 0.000 claims description 20
- 238000012935 Averaging Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 description 36
- 230000000007 visual effect Effects 0.000 description 32
- 238000005286 illumination Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 21
- 239000011521 glass Substances 0.000 description 17
- 230000005540 biological transmission Effects 0.000 description 15
- 238000010276 construction Methods 0.000 description 14
- 230000002093 peripheral effect Effects 0.000 description 13
- 238000005070 sampling Methods 0.000 description 11
- 238000011156 evaluation Methods 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 7
- 238000005259 measurement Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000005562 fading Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- MGIUUAHJVPPFEV-ABXDCCGRSA-N magainin ii Chemical compound C([C@H](NC(=O)[C@H](CCCCN)NC(=O)CNC(=O)[C@@H](NC(=O)CN)[C@@H](C)CC)C(=O)N[C@@H](CC(C)C)C(=O)N[C@@H](CC=1NC=NC=1)C(=O)N[C@@H](CO)C(=O)N[C@@H](C)C(=O)N[C@@H](CCCCN)C(=O)N[C@@H](CCCCN)C(=O)N[C@@H](CC=1C=CC=CC=1)C(=O)NCC(=O)N[C@@H](CCCCN)C(=O)N[C@@H](C)C(=O)N[C@@H](CC=1C=CC=CC=1)C(=O)N[C@@H](C(C)C)C(=O)NCC(=O)N[C@@H](CCC(O)=O)C(=O)N[C@@H]([C@@H](C)CC)C(=O)N[C@@H](CCSC)C(=O)N[C@@H](CC(N)=O)C(=O)N[C@@H](CO)C(O)=O)C1=CC=CC=C1 MGIUUAHJVPPFEV-ABXDCCGRSA-N 0.000 description 5
- 238000000605 extraction Methods 0.000 description 4
- 230000001575 pathological effect Effects 0.000 description 4
- 101100457021 Caenorhabditis elegans mag-1 gene Proteins 0.000 description 3
- 101100067996 Mus musculus Gbp1 gene Proteins 0.000 description 3
- 230000005284 excitation Effects 0.000 description 3
- 238000010827 pathological analysis Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000002845 discoloration Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000007850 fluorescent dye Substances 0.000 description 2
- 108700024394 Exon Proteins 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000012770 industrial material Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/24—Base structure
- G02B21/241—Devices for focusing
- G02B21/244—Devices for focusing using image analysis techniques
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/24—Base structure
- G02B21/26—Stages; Adjusting means therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/16—Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Microscoopes, Condenser (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Description
第1に、工業系材料(金属、繊維等)を落射観察する場合、試料の表面形状、反射特性により異なるシェーディング補正を行うことは困難である。
第2に、蛍光色素で標識された蛍光観察を行う場合、標本の厚さに起因するシェーディング補正を行うことは困難である。また、蛍光色素や光学キューブ(励起フィルタ、ダイクロイックミラー、吸収フィルタで構成される)毎に、均一な蛍光標本を用意することは困難である。そもそも観察対象および測定対象の標本と類似した蛍光特性を有する均一な蛍光標本を用意すること自体が困難である。
第3に、透過観察する場合には、標本の厚さ、標本濃度等に起因するシェーディング補正を行うことは困難である。
すなわち、蛍光観察や暗視野観察といった背景が暗く多様な発現形態を示す観察法では、低輝度環境や長時間露光環境で適切な領域を探索および決定することになり、手間がかかる上に、最適な部位を目視選択することは困難である。更に、蛍光観察では領域探索時に、長時間の励起光照射を行うと標本が褪色してしまうという不都合もある。
本発明の一態様は、標本からの光を集光する対物レンズと、該対物レンズにより集光された光を撮影する撮像手段と、前記標本と前記対物レンズとを光軸に直交する方向に相対的に移動させる移動手段と、該移動手段により前記対物レンズと前記標本とを相対的に移動させつつ前記撮像手段により取得された複数枚の顕微鏡画像群を相互に結合してなるバーチャルスライド画像を生成するVS画像生成手段と、シェーディング補正データ作成用の補正用画像を取得する補正用領域を探索する補正用領域探索手段と、該補正用領域探索手段によって探索された前記補正用領域について前記撮像手段により補正用画像を取得させ、取得された補正用画像に基づいてシェーディング補正データを生成する補正データ生成手段と、該補正データ生成手段により生成されたシェーディング補正データを用いて、前記顕微鏡画像のシェーディングを補正するシェーディング補正手段と、倍率を切り替える倍率変更手段と、低倍率の顕微鏡画像群から生成された低倍バーチャルスライド画像を用いて、より高倍率の高倍バーチャルスライド画像を構築する標本領域を指定する高倍VS画像領域指定手段とを備え、前記VS画像生成手段が、前記高倍VS画像領域指定手段により指定された標本領域について、前記高倍バーチャルスライド画像を生成し、前記補正用領域探索手段が、前記低倍バーチャルスライド画像から前記高倍バーチャルスライド画像のシェーディングを補正するための所定の輝度を有する前記補正用領域を探索する顕微鏡システムを提供する。
このようにすることで、光学系や撮像形等の装置状態や標本状態が変化しても簡便かつ、より確実にムラのないバーチャルスライド画像を生成することができる。
このようにすることで、高倍バーチャルスライド画像のシェーディングを補正するための補正用領域が低倍バーチャルスライド画像から探索され、簡易に補正用領域を決定することができる。
このようにすることで、既に取得されているバーチャルスライド画像内の補正用領域においてシェーディング補正に適した画像情報を有する領域が見つからない場合においても、バーチャルスライド画像生成用の顕微鏡画像群を用いて補正用領域を探索することができる。
このようにすることで、基準となる補正用画像の中心区画の輝度値と、区画の大きさ分だけずらして取得された他の補正用画像の他の区画の輝度値との比率により簡易にシェーディング補正データを生成することができる。
このようにすることで、各区画の輝度値が大きい補正用領域においては、補正用画像の取得数を節約して、短時間にシェーディング補正データを生成することができる。一方、各区画の輝度値が小さい補正用領域の場合には、補正用画像の取得数を多くすることにより、時間はかかっても輝度値の大きな区画を有効利用して、精度よくシェーディング補正をすることができる。
蛍光観察や暗視野観察のように、取得される顕微鏡画像の輝度値が小さい観察法の場合には、補正用画像の取得数を多くし、明視野観察のように取得される顕微鏡画像の輝度値が大きい観察法の場合には、取得する補正用画像数を少なくして時間短縮を図ることができる。
このようにすることで、単一のスライドガラス上に配置された複数の標本について、スライドガラスを入れ替えることなく、効率的に、シェーディング補正がなされたバーチャルスライド画像を取得することができる。
このようにすることで、単一の補正用領域として、シェーディング補正に適した画像情報を有する領域が見つからない場合においても、複数の補正用領域の情報を集めて、精度よくシェーディングを補正するためのシェーディング補正データを生成することができる。
このようにすることで、単一の補正用領域として、シェーディング補正に適した画像情報を有する領域が見つからない場合においても、複数の補正用領域の情報を集めて平均することにより、精度よくシェーディングを補正するためのシェーディング補正データを生成することができる。
このようにすることで、全ての標本領域において実測に基づくシェーディング補正用データを生成せずに済み、短時間にシェーディング補正されたバーチャルスライド画像を取得することができる。
また、上態様においては、前記補正用領域探索手段が、前記低倍バーチャルスライド画像から前記高倍バーチャルスライド画像のシェーディングを補正するための前記補正用領域を前記低倍バーチャルスライド画像の輝度情報をもとに探索してもよい。
本実施形態に係る顕微鏡システム1は、図1に示されるように、顕微鏡装置100と処理装置200とを備えている。
顕微鏡装置100は、標本Aを載せる電動ステージ(移動手段)2と、標本Aの上方に対向して配置され標本Aからの光を集光する対物レンズ3a,3bと、標本Aの下方から照明光を入射させる透過照明用光学系4と、対物レンズ3a,3bを介して標本Aの上方から照明光を入射させる落射照明用光学系5と、対物レンズ3a,3bにより集光された光を検出する検出光学系6とを備えている。
透過照明用光学系4は、透過照明用光源8と、該透過照明用光源8の照明光を集光するコレクタレンズ9と、透過用フィルタユニット10と、透過シャッタ11と、透過視野絞り12と、透過開口絞り13と、コンデンサ光学素子ユニット14と、トップレンズユニットとを備えている。
検出光学系6は、標本Aからの光の波長を選択する光学フィルタユニット22と、該光学フィルタユニット22を透過した光を目視観察するための接眼レンズ23および撮影するためのカメラ(撮像手段)24と、接眼レンズ23側およびカメラ24側に光路を分岐するビームスプリッタ25とを備えている。
上述した各構成部品は、電動化されており、その動作は後述する顕微鏡コントローラ31によって制御されるようになっている。
また、ホストシステム30は、カメラ24から送られてきた顕微鏡画像を、画像データファイルとしてデータ記録部34に保存するようになっている。データ記録部34は、例えば、ハードディスクや大容量メモリ等である。
さらに、ホストシステム30は、カメラ24によって撮像された顕微鏡画像のコントラストに基づいて合焦動作を行う、いわゆるビデオAF機能も有している。
次に、本実施形態に係る顕微鏡システム1によるVS画像の構築処理について、図2および図3を参照して説明する。
VS画像の構築処理の詳細については本出願人による特許文献1〜3に記載されているので、ここでは概略を説明する。本実施形態においては、図2に示す標本AのVS画像構築処理について図3に示すフローチャートを用いて説明する。
透過明視野標本の観察においては、まず、電動ステージ2に載置されたスライドガラス38上の標本Aの全体像が取得される(ステップS100)。標本AはHE染色された透過明視野標本とする。
次いで、高精細VS画像を形成する範囲を、全体VS画像上で不図示のマウス操作にてオペレータが領域指定する(ステップS120)。
そして、ステップS130で選択されたフォーカス位置を実測する小区画に対して、標本像を入力してコントラスト評価することで実測による合焦位置(Z座標)を求める。
そして、入力した各小区画の画像をこれと隣接する小区画の画像と結合する。この画像入力処理および画像結合処理を、フォーカスマップ50に登録された全小区画に対して完了するまで繰り返すことで、高倍率の対物レンズ3bを用いた高精細な顕微鏡画像を相互に結合した、広視野かつ高精細な顕微鏡画像である高精細VS画像の作成が完了する。作成された高精細VS画像は全体VS画像と位置情報が関連づけられて、データ記録部34に画像データファイルとして格納される(ステップS160)。
ステップS100のスライドガラス標本40の全体像を取得する処理では、蛍光標識した標本Aは未励起状態では透明であり、通常の明視野観察では標本Aの位置を確認できない。
続いて、シェーディング補正処理の概要について図6〜図8を用いて説明する。
シェーディング補正処理としては、校正用試料を用いずに、観察対象および測定対象の標本A自体を用いて、所定の位置を視野中心で撮像した場合と視野周辺で撮像した場合の明るさの変化に基づいて、シェーディング補正用データ(以下、補正ゲインデータという。)を求める方法を用いることとし、その概要について図6を用いて以下で説明する(特許文献6参照。)。
図6に示すように、基準視野画像500とその周辺視野画像501を4枚、計5枚の標本Aの画像を撮像する。そして、基準視野画像500と1つの周辺視野画像501とを用いて、図6(F)に示す9区画のうち、2区画のシェーディング補正データを算出できる。
取得された標本Aの顕微鏡画像のシェーディング補正(ムラ除去)は、撮像画像データに補正ゲインデータを乗算することにより行われる。
2視野画像方式では、(N×N+1)/2で求まる回数(本実施形態では、分割数N=3なので、5回)の校正用画像データの取得で済み、撮像回数が少ないことが特徴である。反面、図7に示すように、中央区画Eを含んだ隣接5区画(上記と同様な計算式で求まる)で、なるべく一様な輝度情報を有し、かつ、情報欠落部位が少なければならないという制約が生じる。
この中央1/N方式は、図8(A)に示すように、基準視野画像500の中央領域502に該当する標本A上の領域のみを補正ゲインデータを求めるための評価領域とする方式である。
続いて、本実施形態のシェーディング補正(校正)用に用いる画像データを取得する方法について説明する。対象標本領域の決定方法としては、以下に示す3種類の方法がある。
(1)Scan領域を決定するために参照するナビ(低倍)画像から決定する(既存VS画像利用方式)。
(2)VS画像生成前のフォーカスマップ作成時のプレスキャン画像から決定する(プレスキャン方式)。
(3)VS画像生成用の隣接部位結合前の原画像から決定する(VS原画像利用方式)。
(B)透過明視野標本または蛍光標本において、Scan領域44bの高精細VS画像を生成する場合で、同一観察法で生成済みのScan領域44aの高精細VS画像を利用する場合。
更に、補正ゲインデータが作成できなかった場合には、他標本または校正用標本で以前に作成して、データ記録部34に保存されているVS画像の取得条件(観察法、対物レンズ、光学キューブ等)が同じ条件の補正ゲインデータを流用してもよい。
校正用画像取得部位を決定するための第一の方法である、既存VS画像利用方式について、図10を用いて以下に説明する。
まず、観察法に応じて処理を振り分ける(ステップS300,S301)。この観察法は図3に示すVS画像構築処理のステップS104において決定される。
続いて、観察法に応じてシェーディング補正データ取得方式を決定する。すなわち、観察法が落射暗視野観察および蛍光観察である場合には、「中央1/N方式」が選択され(ステップS310,S311)、その他の観察では「2視野画像方式」が選択される(ステップS312)。
優先領域の検索の結果、適切な標本部位が見つかった場合には処理を終了し(ステップS323〜S325)、見つからなかった場合には、優先領域以外の領域で検索を行う(ステップS330〜S332)。
例えば、透過明視野標本において、図2に示すScan領域44aの高精細VS画像を構築する場合で、ステップS100で生成した全体VS画像を利用する場合を例に挙げて説明する。
W=(Width/N)×(Mag1/Mag2) (1)
H=(Hight/N)×(Mag1/Mag2) (2)
W:小区画の横方向(X方向)の画素数、
H:小区画の縦方向(Y方向)の画素数、
Width:TVカメラ3の横方向(X方向)の画素数、
Hight:TVカメラ3の縦方向(Y方向)の画素数、
N:シェーディング補正処理で用いる撮像画像1視野の分割数、
Mag1:既存VS画像作成時に使用した対物レンズの倍率、
Mag2:作成予定のVS画像作成時に使用する対物レンズの倍率
である。
そして、適切な部位が存在しない場合は、図2に示す全体VS画像内の標本領域42内で上記検索処理範囲を除いた領域を検索する。検索処理については同じなので省略する。
例えば、蛍光標本において、図2に示すScan領域44bの高精細VS画像を生成する場合で、同一観察法で生成済みのScan領域44aの高精細VS画像を利用する場合である。すなわち、観察法を蛍光として10倍の対物レンズを用いてScan領域44aの高精細VS画像を作成し、同一観察法で40倍の対物レンズを用いてScan領域44bの高精細VS画像を作成する場合である。
小区画のサイズは、前述の式を当てはめてW=H=(1200/3)×(10/40)=100画素となる。そして、検索は、1区画のみの適格領域を求めればよいので、「2視野画像方式」と比較すると検索方法は単純であり、説明は省略する。
なお、小区画領域を式(1),(2)を用いて求めたが、さらに細分化することにより検索精度を高めることが可能である。例えば、蛍光の例で、小区画サイズを更に1/4の25画素に設定し、4×4の領域全体で評価する。検索する際は、1区画送りになるので、より精度よく適格部位を検索することが可能となる。また、「2視野画像方式」でも同様に小区画領域を細分化することが可能である。
また、蛍光観察では、標本Aの褪色を考慮すると、校正用画像の取得回数が少ない「2視野画像方式」が望ましい。そこで、最初に「2視野画像方式」で領域検索して適格部位が見つかった場合には、「2視野画像方式」で校正用の画像データを取得して補正ゲインデータを算出することにしてもよい。
また、「2視野画像方式」に合致する方法で最初にVS画像上の検索を実行して適格領域を求められなかった場合には、「中央1/N方式」に合致する方法でVS画像上を再検索することにしてもよい。
校正用画像取得部位を決定するための第二の方法である、プレスキャン方式について、図12を用いて以下に説明する。
プレスキャン方式は、任意に選択した複数部位から選択した標本A上の領域において作成予定のVS画像の取得条件で標本画像をサンプリング取得した画像を基に、校正用画像を取得するための標本部位を決定するものであり、どの画像を用いて領域検索を行うかが、前述の既存VS画像利用方式と基本的に異なる。観察法に基づいたシェーディング補正データ取得方式の決定は同様に行われる。
なお、蛍光観察の場合は、「中央1/N方式」が選択され、校正用画像取得部位を含め近傍領域でN×N回(本実施形態では9回)の画像取得が行われるので、蛍光の褪色が影響する場合がある。そこで、図8(A)〜(I)に示すように中央1カ所+その8近傍部位で画像を取得するのではなく、校正用画像の基準視野画像500を取得する部位を複数に分散することにより、同一標本部位への励起光照射時間を削減し、退色の影響を軽減することが出来る。
VS原画像利用方式は、基本的にプレスキャン方式と同様な処理となるので、校正用画像取得部位の決定方法についての説明は省略する。
プレスキャン方式が任意のサンプリングポイントで取得した画像を評価対象とするのに対して、VS原画像利用方式は、VS画像を作成するためにScan範囲内で取得した全画像が評価対象となる。したがって、サンプリングポイントの抽出が不適切なことに起因する校正用画像データ取得領域の検索エラー(適格領域が見つからない)を低減することができる。
病理診断においては、1つの検体包埋ブロックから連続的に薄切を行い、図13に示すように1枚のスライドガラス38上に複数の標本Aを載置するケースがある。また、生検による小型検体の場合では、複数の包埋ブロックから薄切した標本Aを同一スライドガラス38上に載置して診断を効率的に行えるようにする場合もある。すなわち、異なる複数の標本Aが1枚のスライドガラス38上に載置されるので、それぞれの標本Aに応じたシェーディング補正を行うことが望ましい。
したがって、図3に示すVS画像構築処理フローのステップS104で透過明視野法を選択し、ステップS110の対物レンズ選択で倍率20倍の対物レンズを選択する。また、ステップS120のScan範囲選択処理で、標本領域42の外接矩形間に所定以上(例えば2mm以上)の距離があれば別標本として判断し、標本領域42毎にScan領域を設定すれば、各々のScan領域でVS画像を構築することになる。透過明視野観察の場合には、Scan領域内で優先的にシェーディング補正データが算出されるので、各々の標本Aに応じたムラ補正が自動に行えるようになる。
図14(A)に例示するような標本サーチ範囲41をほぼ占有するような大きな標本Aの全体について高倍率でVS画像を作成する場合、すなわち、所定値以上の高さまたは幅を有するScan領域のVS画像を作成する場合には、電動ステージ2の移動量が大きくなることで光軸と標本Aとの直交度が変化することに起因するムラが生じる場合がある。
G=Σ(Gi/Li)/Σ(1/Li)
により求められる。
2 電動ステージ(移動手段)
3a,3b 対物レンズ
7 レボルバ(倍率変更手段)
24 カメラ(撮像手段)
30 ホストシステム(VS画像生成手段、補正用領域探索手段、補正データ生成手段、シェーディング補正手段、高倍VS画像領域指定手段)
42 標本領域
A 標本
Claims (12)
- 標本からの光を集光する対物レンズと、
該対物レンズにより集光された光を撮影する撮像手段と、
前記標本と前記対物レンズとを光軸に直交する方向に相対的に移動させる移動手段と、
該移動手段により前記対物レンズと前記標本とを相対的に移動させつつ前記撮像手段により取得された複数枚の顕微鏡画像群を相互に結合してなるバーチャルスライド画像を生成するVS画像生成手段と、
シェーディング補正データ作成用の補正用画像を取得する補正用領域を探索する補正用領域探索手段と、
該補正用領域探索手段によって探索された前記補正用領域について前記撮像手段により補正用画像を取得させ、取得された補正用画像に基づいてシェーディング補正データを生成する補正データ生成手段と、
該補正データ生成手段により生成されたシェーディング補正データを用いて、前記顕微鏡画像のシェーディングを補正するシェーディング補正手段と、
倍率を切り替える倍率変更手段と、
低倍率の顕微鏡画像群から生成された低倍バーチャルスライド画像を用いて、より高倍率の高倍バーチャルスライド画像を構築する標本領域を指定する高倍VS画像領域指定手段とを備え、
前記VS画像生成手段が、前記高倍VS画像領域指定手段により指定された標本領域について、前記高倍バーチャルスライド画像を生成し、
前記補正用領域探索手段が、前記低倍バーチャルスライド画像から前記高倍バーチャルスライド画像のシェーディングを補正するための所定の輝度を有する前記補正用領域を探索する顕微鏡システム。 - 前記補正データ生成手段が、前記VS画像生成手段による前記バーチャルスライド画像が生成される都度に、シェーディング補正データを生成する請求項1に記載の顕微鏡システム。
- 前記補正用領域探索手段が、前記低倍バーチャルスライド画像から複数の候補領域を決定し、決定された複数の前記候補領域について、前記高倍バーチャルスライド画像用の顕微鏡画像を取得する倍率で前記撮像手段により画像を取得させ、取得された画像からシェーディング補正に適した画像情報を有する前記候補領域を前記補正用領域として選択する請求項1に記載の顕微鏡システム。
- 前記補正用領域探索手段が、前記低倍バーチャルスライド画像を構築する標本領域内、かつ、前記高倍バーチャルスライド画像を構築する標本領域外の領域から、前記高倍バーチャルスライド画像のシェーディングを補正するための前記補正用領域を探索する請求項1から請求項3のいずれかに記載の顕微鏡システム。
- 前記補正データ生成手段が、前記補正用領域内を複数区画に分割し、各区画の大きさ分だけずらして取得された複数の補正用画像間で、異なる2区画間の輝度値の比率によりシェーディング補正データを生成する請求項1から請求項4のいずれかに記載の顕微鏡システム。
- 前記補正データ生成手段は、各前記区画の輝度値が所定の閾値より大きいときに、取得する補正用画像の数がより少ないシェーディング補正データの生成方式を選択する請求項5に記載の顕微鏡システム。
- 前記補正データ生成手段が、観察法に応じて前記生成方式を選択する請求項6に記載の顕微鏡システム。
- 前記高倍VS画像領域指定手段が、前記低倍バーチャルスライド画像を用いて、高倍バーチャルスライド画像を構築する複数の標本領域を指定し、
前記シェーディング補正手段が、前記標本領域毎に、前記顕微鏡画像のシェーディングを補正する請求項1に記載の顕微鏡システム。 - 前記補正用領域探索手段が、複数の前記補正用領域を探索し、
前記補正データ生成手段が、探索された複数の前記補正用領域において、異なる区画のシェーディング補正部分データを生成し、生成されたシェーディング補正部分データを組み合わせてシェーディング補正データを生成する請求項5に記載の顕微鏡システム。 - 前記補正用領域探索手段が、複数の前記補正用領域を探索し、
前記補正データ生成手段が、探索された複数の前記補正用領域についてそれぞれ取得された補正用画像の輝度値を平均して得られた複数の平均補正用画像間で、異なる2区画間の輝度値の比率によりシェーディング補正データを生成する請求項5に記載の顕微鏡システム。 - 前記補正用領域探索手段が、複数の前記補正用領域を探索し、
前記補正データ生成手段が、探索された複数の前記補正用領域についてそれぞれシェーディング補正データを生成し、該シェーディング補正データが生成されていない標本領域については、近傍の補正用領域との距離に基づいて補間することによりシェーディング補正データを生成する請求項5に記載の顕微鏡システム。 - 前記補正用領域探索手段が、前記低倍バーチャルスライド画像から前記高倍バーチャルスライド画像のシェーディングを補正するための前記補正用領域を前記低倍バーチャルスライド画像の輝度情報をもとに探索する請求項1に記載の顕微鏡システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014238032A JP6448996B2 (ja) | 2014-11-25 | 2014-11-25 | 顕微鏡システム |
US14/931,166 US10073258B2 (en) | 2014-11-25 | 2015-11-03 | Microscope system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014238032A JP6448996B2 (ja) | 2014-11-25 | 2014-11-25 | 顕微鏡システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016099570A JP2016099570A (ja) | 2016-05-30 |
JP6448996B2 true JP6448996B2 (ja) | 2019-01-09 |
Family
ID=56010041
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014238032A Active JP6448996B2 (ja) | 2014-11-25 | 2014-11-25 | 顕微鏡システム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10073258B2 (ja) |
JP (1) | JP6448996B2 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6455829B2 (ja) * | 2013-04-01 | 2019-01-23 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
DE102016110988A1 (de) * | 2016-06-15 | 2017-12-21 | Sensovation Ag | Verfahren zum digitalen Aufnehmen einer Probe durch ein Mikroskop |
JP6951065B2 (ja) * | 2016-10-21 | 2021-10-20 | 株式会社キーエンス | 拡大観察装置 |
JP7315356B2 (ja) * | 2019-03-28 | 2023-07-26 | 浜松ホトニクス株式会社 | 蛍光観察装置 |
DE102020108514A1 (de) * | 2019-03-28 | 2020-10-01 | Carl Zeiss Microscopy Gmbh | Verfahren zum Bestimmen eines Bildaufnahmefehlers |
JP7112994B2 (ja) * | 2019-09-11 | 2022-08-04 | 富士フイルム株式会社 | 蛍光撮影装置 |
CN110996002B (zh) * | 2019-12-16 | 2021-08-24 | 深圳市瑞图生物技术有限公司 | 显微镜聚焦方法、装置、计算机设备和存储介质 |
WO2022041149A1 (zh) * | 2020-08-28 | 2022-03-03 | 苏州迈瑞科技有限公司 | 尿液分析仪、检测尿液中细菌的方法及存储介质 |
CN112330649B (zh) * | 2020-11-12 | 2022-11-04 | 清华大学 | 结合多光谱和可见光图像的生理信息获取方法和装置 |
CN115032780B (zh) * | 2022-05-25 | 2024-01-26 | 北京理工大学 | 组织病理图片的快速处理系统及其工作方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5161052B2 (ja) * | 2008-12-04 | 2013-03-13 | オリンパス株式会社 | 顕微鏡システム、標本観察方法およびプログラム |
US6215892B1 (en) * | 1995-11-30 | 2001-04-10 | Chromavision Medical Systems, Inc. | Method and apparatus for automated image analysis of biological specimens |
JPH09281405A (ja) | 1996-04-17 | 1997-10-31 | Olympus Optical Co Ltd | 顕微鏡システム |
JP2004343222A (ja) * | 2003-05-13 | 2004-12-02 | Olympus Corp | 画像処理装置 |
WO2005040762A1 (de) * | 2003-10-21 | 2005-05-06 | Leica Microsystems Wetzlar Gmbh | Verfahren zur automatischen erzeugung von laser-schnittlinien in der laser-mikrodissektion |
JP2006171213A (ja) | 2004-12-14 | 2006-06-29 | Nikon Corp | 顕微鏡システム |
JP2008051773A (ja) | 2006-08-28 | 2008-03-06 | Hamamatsu Photonics Kk | 蛍光画像取得装置、及び蛍光画像取得方法 |
JP4937850B2 (ja) | 2007-07-03 | 2012-05-23 | オリンパス株式会社 | 顕微鏡システム、そのvs画像生成方法、プログラム |
JP6053327B2 (ja) | 2012-05-23 | 2016-12-27 | オリンパス株式会社 | 顕微鏡システム、標本画像生成方法及びプログラム |
JP5940383B2 (ja) * | 2012-06-12 | 2016-06-29 | オリンパス株式会社 | 顕微鏡システム |
US20140267679A1 (en) * | 2013-03-13 | 2014-09-18 | Leco Corporation | Indentation hardness test system having an autolearning shading corrector |
-
2014
- 2014-11-25 JP JP2014238032A patent/JP6448996B2/ja active Active
-
2015
- 2015-11-03 US US14/931,166 patent/US10073258B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20160147058A1 (en) | 2016-05-26 |
JP2016099570A (ja) | 2016-05-30 |
US10073258B2 (en) | 2018-09-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6448996B2 (ja) | 顕微鏡システム | |
JP4937850B2 (ja) | 顕微鏡システム、そのvs画像生成方法、プログラム | |
US7801352B2 (en) | Image acquiring apparatus, image acquiring method, and image acquiring program | |
US8350905B2 (en) | Microscope system, image generating method, and program for practicing the same | |
JP5996334B2 (ja) | 顕微鏡システム、標本画像生成方法及びプログラム | |
US20190268573A1 (en) | Digital microscope apparatus for reimaging blurry portion based on edge detection | |
JP4664871B2 (ja) | 自動焦点検出装置 | |
US20080187208A1 (en) | Virtual slide generation device, virtual slide generation method, virtual slide generation program product and virtual slide generation program transmission medium | |
JP7252190B2 (ja) | 生物試料の向上された被写界深度の合成2d画像を生成するシステム | |
JP6146265B2 (ja) | 顕微鏡システムおよびオートフォーカス方法 | |
JP6053327B2 (ja) | 顕微鏡システム、標本画像生成方法及びプログラム | |
KR20120099011A (ko) | 포커싱 장치, 포커싱 방법, 포커싱 프로그램 및 현미경 | |
JP2010134195A (ja) | 顕微鏡システム、標本観察方法およびプログラム | |
JP5826561B2 (ja) | 顕微鏡システム、標本画像生成方法及びプログラム | |
KR20220092999A (ko) | 디지털 스캐닝 장치 | |
JP4878815B2 (ja) | 顕微鏡装置 | |
JP2014178474A (ja) | デジタル顕微鏡装置、その合焦位置探索方法およびプログラム | |
JP5292846B2 (ja) | 観察装置と、観察方法 | |
JP2007108223A (ja) | 顕微鏡システム | |
JP5730696B2 (ja) | 画像処理装置および画像表示システム | |
JP2014149381A (ja) | 画像取得装置および画像取得方法 | |
US11422349B2 (en) | Dual processor image processing | |
CN116859577A (zh) | 一种超越景深的显微拍摄方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170808 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180417 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180615 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181205 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6448996 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |