JPWO2019176048A1 - 細胞画像処理装置 - Google Patents

細胞画像処理装置 Download PDF

Info

Publication number
JPWO2019176048A1
JPWO2019176048A1 JP2020506052A JP2020506052A JPWO2019176048A1 JP WO2019176048 A1 JPWO2019176048 A1 JP WO2019176048A1 JP 2020506052 A JP2020506052 A JP 2020506052A JP 2020506052 A JP2020506052 A JP 2020506052A JP WO2019176048 A1 JPWO2019176048 A1 JP WO2019176048A1
Authority
JP
Japan
Prior art keywords
growth rate
image
measurement
measurement area
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020506052A
Other languages
English (en)
Inventor
仁 越後
仁 越後
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of JPWO2019176048A1 publication Critical patent/JPWO2019176048A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • G01N33/483Physical analysis of biological material
    • G01N33/4833Physical analysis of biological material of solid biological material, e.g. tissue samples, cell cultures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/693Acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698Matching; Classification
    • CCHEMISTRY; METALLURGY
    • C12BIOCHEMISTRY; BEER; SPIRITS; WINE; VINEGAR; MICROBIOLOGY; ENZYMOLOGY; MUTATION OR GENETIC ENGINEERING
    • C12MAPPARATUS FOR ENZYMOLOGY OR MICROBIOLOGY; APPARATUS FOR CULTURING MICROORGANISMS FOR PRODUCING BIOMASS, FOR GROWING CELLS OR FOR OBTAINING FERMENTATION OR METABOLIC PRODUCTS, i.e. BIOREACTORS OR FERMENTERS
    • C12M41/00Means for regulation, monitoring, measurement or control, e.g. flow regulation
    • C12M41/30Means for regulation, monitoring, measurement or control, e.g. flow regulation of concentration
    • C12M41/36Means for regulation, monitoring, measurement or control, e.g. flow regulation of concentration of biomass, e.g. colony counters or by turbidity measurements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30024Cell structures in vitro; Tissue sections in vitro

Abstract

培養中の細胞を経時的に撮影することにより取得された複数の画像について、取得された画像間において共通する複数の測定領域を抽出する測定領域抽出部(53)と、測定領域抽出部(53)によって抽出された各測定領域に含まれる細胞の増殖速度を算出する増殖速度算出部(54)と、増殖速度算出部(54)によって算出された増殖速度と、各測定領域の位置情報とを対応づけて記憶する記憶部(55)とを備える細胞画像処理装置(51)である。

Description

本発明は、細胞画像処理装置に関するものである。
ES細胞およびiPS細胞などの万能細胞の制作過程では、遺伝子の導入や発現に失敗して、万能細胞の特性を持たない細胞が多数発生する。再生医療等に応用するには、万能細胞の特性を持たない細胞を取り除き、万能細胞のみを抽出する必要がある。
例えば、iPS細胞になっているか否かを見極めるには、多能性を持つ細胞が発現しているOct3/4、Nanog、TRA−1−60、TRA−1−81等の未分化マーカと呼ばれるタンパク質を、qPCR法あるいは免疫染色法により検査する方法が知られている(例えば、特許文献1参照。)。
特開2014−100141号公報
しかしながら、これらの方法はコストおよび時間がかかるため、細胞の選別は、培養作業者が、位相差顕微鏡下において、複数回分裂した細胞の集まりであるコロニーの形状を観察し、作業者の経験、培養条件およびコロニー同士を比較するなどして、iPS細胞になっていそうなコロニーを選別することを感覚的に行っており手間がかかっていた。
特に、コロニーが小さい場合には形状の差異も小さく、iPS細胞であるか否かの見極めが困難であった。
本発明は、培養容器内に存在している特定の細胞を効率的に抽出することができる細胞画像処理装置を提供することを目的としている。
本発明の一態様は、培養中の細胞を経時的に撮影することにより取得された複数の画像について、該画像間において共通する複数の測定領域を抽出する測定領域抽出部と、該測定領域抽出部により抽出された各前記測定領域に含まれる前記細胞の増殖速度を算出する増殖速度算出部と、該増殖速度算出部により算出された前記増殖速度と、各前記測定領域の位置情報とを対応づけて記憶する記憶部とを備える細胞画像処理装置である。
本態様によれば、複数の画像が入力されると、測定領域抽出部により各画像において共通する複数の測定領域が抽出される。そして、時間間隔を空けて取得された2枚の画像において共通する測定領域内における細胞の単位時間当たりの増減を示す増殖速度が増殖速度算出部により算出される。このようにして算出された増殖速度は、その増殖速度に対応する測定領域の位置情報と対応づけて記憶部に記憶される。
これにより、観察者が手動で、あるいは装置が自動的に、いずれかの画像におけるいずれかの測定領域を指定すると、当該測定領域における細胞の増殖速度に近似する増殖速度を有する測定領域を確認することができる。
すなわち、観察者が画像を見ながら、特定の細胞、例えば、万能細胞が存在している測定領域であると判断して観察を行った場合に、当該測定領域と同様の増殖速度を有する他の測定領域を簡易に抽出することができる。つまり、特定の増殖速度を有する細胞を選んで観察を行うことができ、コロニーの大きさにかかわらず、培養容器内に存在している特定の細胞を効率的に抽出することができる。
上記態様においては、前記記憶部に対応づけて記憶されている前記増殖速度と前記測定領域の位置情報とを対応づけて表示する表示部を備えていてもよい。
この構成により、表示部により表示された増殖速度により測定領域を簡易に選んで観察を行うことができる。
また、上記態様においては、前記記憶部が、前記増殖速度算出部により算出された前記増殖速度に応じた複数のグループに区分して記憶してもよい。
この構成により、同一グループに属する測定領域を簡易に特定することができ、観察を容易にすることができる。
また、上記態様においては、前記表示部が、いずれかの前記画像を表示するとともに、前記測定領域を前記グループ毎に色分けして表示してもよい。
この構成により、同一グループに属する測定領域を色により簡易に特定することができ、観察を容易にすることができる。
また、上記態様においては、前記表示部が、前記増殖速度に応じた色で前記測定領域を色分けして表示してもよい。
この構成により、測定領域をヒートマップで表示することができ、増殖速度の相違を認識し易くして細胞の選別を精度よく行うことができる。
また、本発明の他の態様は、プロセッサとメモリとを備え、前記プロセッサが、培養中の細胞を経時的に撮影することにより取得された複数の画像について、該画像間において共通する複数の測定領域を抽出するとともに、抽出された各前記測定領域に含まれる前記細胞の増殖速度を算出し、前記メモリが、算出された前記増殖速度と、各前記測定領域の位置情報とを対応づけて記憶する細胞画像処理装置である。
本発明によれば、培養容器内に存在している特定の細胞を効率的に抽出することができるという効果を奏する。
本発明の一実施形態に係る細胞画像処理装置を示すブロック図である。 図1の細胞画像処理装置により抽出される測定領域の一例を示す図である。 図1の細胞画像処理装置により増殖速度と位置情報とを対応づけて表示する表示例を示す図である。 図3と同様の他の表示例を示す図である。 図3と同様の他の表示例を示す図である。 指定された特定の測定領域における細胞数の時間変化のグラフを示す図である。 図1の細胞画像処理装置により同時に表示される全体画像、動画および細胞数の時間変化のグラフの一例を示す図である。 画像を取得する観察装置を示す全体構成図である。 図8の観察装置における照明光学系の一部を示す斜視図である。 図9の照明光学系におけるライン光源の一例を示す側面図である。 図10Aのライン光源を光軸方向に見た正面図である。 図9の照明光学系におけるライン光源の他の例を示す図である。 図8の観察装置の対物光学系群を示す図である。 図12の対物光学系群における対物光学系の配列を示す図である。 図12の対物光学系群における開口絞りの配列を示す図である。 図12の対物光学系群の像面におけるラインセンサの配置を示す図である。 図9の照明光学系におけるライン光源、シリンドリカルレンズおよびプリズムの配置を示す図である。 偏斜照明の作用を説明する図である。 図17の偏斜照明によって照明された試料の画像の一例を示す図である。 試料の一例を示す図である。 図8の観察装置によって取得された図19Aの試料の2次元画像を示す図である。 図19Bの画像を反転処理およびつなぎ合わせ処理することにより得られた画像を示す図である。 図8の観察装置の他の態様におけるライン光源の配置を示す図である。
本発明の一実施形態に係る細胞画像処理装置51について図面を参照して以下に説明する。
本実施形態に係る細胞画像処理装置51は、観察装置(図8参照)100によって取得された複数の画像を処理する装置であって、図1に示されるように、観察装置100から時系列に入力されてくる画像を記憶する画像記憶部52と、画像間において共通する複数の測定領域を抽出する測定領域抽出部53と、抽出された各測定領域に含まれる細胞の増殖速度を算出する増殖速度算出部54と、算出された増殖速度と、各測定領域の位置情報とを対応づけて記憶する情報記憶部(記憶部)55とを備えている。測定領域抽出部53および増殖速度算出部54はプロセッサによって構成され、画像記憶部52および情報記憶部55はメモリあるいは記憶媒体等によって構成されている。
測定領域抽出部53は、観察装置100から入力されてきたいずれかの画像において複数の測定領域を設定し、観察装置100から入力されてきた他の画像において、設定された測定領域と共通する測定領域を抽出する。例えば、図2に示されるように、画像Gの端縁を基準として画像Gを分割することにより、等しい大きさの矩形からなる複数の測定領域Rを設定し、他の画像Gにおいても同様に画像Gの端縁を基準として等しい大きさの矩形からなる共通の測定領域Rを抽出すればよい。
他の画像としては、測定領域Rを設定した画像Gに時間的に近接する画像G、例えば、前後に取得された画像Gを選択する。
増殖速度算出部54は、選択された2以上の画像Gにおいて共通の測定領域R内における細胞数を測定し、細胞数の単位時間当たりの変化量として増殖速度を測定領域R毎に算出する。
まず、測定領域R内におけるエッジ検出や輪郭追跡により、細胞Xと細胞X以外との境界を抽出し、その境界が閉じているものを細胞XあるいはコロニーYとして認識し、その大きさから細胞XとコロニーYとを区別する。
そして、細胞Xと認識したものについてはカウントして、細胞数とする。コロニーYとして認識されたものについてはそのコロニーYの画素数から面積を算出し、単一の細胞Xの平均的な面積で除算することにより、細胞数を算出する。測定領域R内の全ての細胞XおよびコロニーYの細胞数を合計して、測定領域Rにおける細胞数を算出する。
2つの画像Gの共通する全ての測定領域Rにおいて算出された細胞数の差分を、当該画像G間の時間差で除算することによって増殖速度を算出することができる。
情報記憶部55は、抽出された測定領域Rの代表点の座標(位置情報)と当該測定領域Rについて算出された増殖速度とを対応づけて記憶する。
このように構成された本実施形態に係る細胞画像処理装置51の作用について以下に説明する。
観察装置100により、所定の時間間隔をあけて容器(培養容器)1における培養面の2枚の画像Gが取得されると、取得された画像Gが細胞画像処理装置51に送られる。
本実施形態に係る細胞画像処理装置51によれば、送られて来たいずれかの画像Gにおいて測定領域Rが設定され、設定された測定領域Rに共通する測定領域Rが他の画像Gから抽出される。すなわち、2枚の画像Gにおいて、対応する複数の測定領域Rが設定される。
そして、設定された各測定領域Rについて、増殖速度算出部54によって増殖速度が算出され、算出された増殖速度と当該増殖速度を有する測定領域Rの位置情報とが対応づけられて情報記憶部55に記憶される。
したがって、観察者が、画像Gを観察して、画像G内の一の測定領域Rにおいて特定の細胞Xの存在を確認した場合には、当該測定領域Rにおける増殖速度と同等の増殖速度が対応づけられている測定領域Rを観察することにより、確認された特定の細胞Xと同等の性質を有する細胞Xについて選択的に観察することができる。
すなわち、画像G内の全ての箇所を逐次観察する場合と比較して、観察したい特定の細胞Xと同等の性質を有する細胞Xを選んで観察することができ、時間と手間をかけずに、特定の細胞Xを選別することができる。また、増殖速度によって特定の細胞Xを選別するので、コロニーYの大きさが小さい場合であっても、細胞Xを精度よく選別することができるという利点がある。
なお、本実施形態においては、増殖速度と測定領域Rの位置情報とを対応づけて情報記憶部55に記憶することに止めているが、本実施形態においては、情報記憶部55に記憶された増殖速度と測定領域Rの位置情報とを対応づけて表示する表示部を備えていてもよい。
例えば、図3に示されるように、表示部が、観察装置100から送られて来たいずれかの画像Gを表示するとともに、画像Gに重畳して、測定領域Rを増殖速度に応じて色分けして、表示することにしてもよい。また、図4に示されるように、画像Gと重畳することなく、測定領域Rのみを色分けして、表示してもよい。これにより、測定領域R毎の増殖速度をヒートマップによって表示することができる。
また、本実施形態においては、測定領域抽出部53が、画像Gの端縁を基準として画像Gを分割することにより、等しい大きさの矩形からなる複数の測定領域Rを設定したが、これに代えて、画像G上の任意の位置に、任意の大きさの矩形からなる複数の測定領域Rを設定してもよい。この場合には、画像G間において近い位置の細胞XおよびコロニーYを同一領域と推定してもよい。また、画像G間でマッチング処理を行って共通の測定領域Rを抽出することにしてもよい。また、画像G内に写っている容器あるいは標識を基準として測定領域Rを抽出してもよい。
また、コロニーYそのものを測定領域Rとして抽出してもよい。
この場合においては、エッジ検出あるいは輪郭追跡により、境界を認識することによって、境界が閉じているものを細胞XやコロニーYとして認識し、その大きさから細胞XとコロニーYとを区別すればよい。
この場合においても、画像G間において近い位置の細胞Xおよびコロニーを同一領域と推定してもよい。また、画像G間でマッチング処理を行って共通の測定領域Rを抽出することにしてもよい。
この場合には、コロニーY毎に増殖速度が算出され、図5に示されるように、コロニーY毎に増殖速度で色分けされて表示されるので、観察者はさらに効率的に細胞Xを選別して、観察することができるという利点がある。
また、コロニーYそのものを測定領域Rとする場合に、コロニーYの面積、形状、テクスチャなどから複数のパラメータによって測定領域Rとするか否かを決定してもよい。これにより、目的に即したコロニーYのみを測定対象とすることができる。
また、細胞Xの種類あるいは培養の目的に応じて選択基準を変えてもよい。これにより、目的に即したコロニーYを選択することができる。この場合には、選択基準のテーブルを備えていれば、選択基準の切替を容易に行うことができる。また、選択基準は観察者が適宜設定できることにしてもよい。
また、複数のコロニーYが合体したコロニーY、複数の細胞種からなるコロニーY、あるいはコロニーYを含まない領域を予め測定領域Rを設定する範囲から除外してもよい。
また、観察者がいずれかの画像Gにおいて、いずれかの測定領域Rを指定したときに、図6に示されるように、指定された測定領域Rにおける細胞数の時間変化を示すグラフを表示することにしてもよい。
さらに、観察者がいずれかの画像(全体画像)Gにおいて、いずれかのコロニーYを指定したときに、指定されたコロニーYが含まれる測定領域Rの時間変化を示す動画を表示することにしてもよい。すなわち、いずれかの全体画像GにおいてコロニーYが指定された場合に、コロニーYが指定された全体画像Gを基準として過去および未来の複数の全体画像における対応するコロニーYを含む部分画像Hを切り出して、古い画像から順に所定時間間隔で切り替えて表示すればよい。
指定したコロニーYを動画表示する場合に、コロニーYの中心位置を算出し、各画像Gにおいて抽出されたコロニーYの中心位置を動画の中心する範囲で全体画像Gから部分画像を切り出すことにしてもよい。動画再生中にコロニーYの移動によるブレが少なくなり、コロニーYの時間変化を視認しやすくすることができる。
また、コロニーYの動画表示を行う場合には、図7に示されるように、指定されたコロニーYを含む部分画像Hを表示した全体画像Gと、全体画像Gから切り出した部分画像Hの動画と、指定したコロニーYにおける細胞Xの増殖の時間変化を示すグラフとが同時に表示されることが好ましい。細胞Xの増殖の時間変化を示すグラフには、表示されている動画の時刻を表す時刻表示、例えば、直線(あるいは矢印等)が示されていることが好ましく、当該時刻表示を時間軸方向にスライドさせることによって、表示されている動画の時刻を切り替えることにしてもよい。
また、増殖速度と測定領域Rの位置情報とを対応づけて情報記憶部55に記憶する際に、増殖速度の近似する測定領域Rをグルーピングして、記憶することにしてもよい。この場合に、統計手法の1つであるクラスター分析あるいは予め定められた境界値に基づいて、増殖速度の近似する測定領域Rをグルーピングしてもよい。
ここで、細胞Xの全体画像Gを取得する観察装置100の一例について説明する。
観察装置100は、図8に示されるように、試料Aを収容した容器1を支持するステージ2と、該ステージ2に支持された試料Aに照明光を照射する照明部3と、試料Aを透過した照明光をラインセンサ13によって検出して試料Aの画像Gを取得する撮像部4と、試料Aに対する撮像部4の焦点の位置を調整するフォーカス調整機構5と、撮像部4をラインセンサ13の長手方向に直交する走査方向に移動させる走査機構6とを備えている。照明部3、撮像部4、フォーカス調整機構5、走査機構6およびラインセンサ13はステージ2によって上面を閉塞された筐体101内に密封状態に収容されている。
以下の説明において、撮像部4の光軸(対物光学系11の光軸)に沿う方向をZ方向、走査機構6による撮像部4の走査方向をX方向、ラインセンサ13の長手方向をY方向とするXYZ直交座標系を用いる。観察装置100は、図8に示されるように、Z方向が鉛直方向となり、X方向およびY方向が水平方向となる姿勢に配置される。
容器1は、細胞培養用のフラスコまたはディッシュのような、全体的に光学的に透明な樹脂から形成された容器であり、互いに対向する上板1aおよび底板1bを有している。試料Aは、例えば、培地B中で培養される細胞である。上板1aの内側の面は、照明光をフレネル反射する反射面となっている。
ステージ2は、水平に配置された平板状の載置台2aを備え、載置台2a上に容器1が載置される。載置台2aは、照明光を透過させるように光学的に透明な材質、例えばガラスからなる。
照明部3は、ステージ2の下方に配置され斜め上方に向けてライン状の照明光を射出する照明光学系7を備え、上板(反射部材)1aおいて照明光が斜め下方に反射されることにより、斜め上方から照明光を試料Aに照射する。
具体的には、照明光学系7は、図9に示されるように、撮像部4の側方に配置され照明光を撮像部4に向かってX方向に発するライン光源8と、該ライン光源8から発せられた照明光を平行光束に変換するシリンドリカルレンズ(レンズ)9と、シリンドリカルレンズ9から射出された照明光を上方へ偏向するプリズム(偏向素子)10とを備えている。
ライン光源8は、光を射出する射出面を有する光源本体81と、該光源本体81の射出面上に設けられた照明マスク82とを備えている。照明マスク82は、Z方向に延びる短辺と、Y方向に延び短辺よりも長い長辺とを有する長方形の開口部82aを有する。射出面から発せられた光が開口部82aのみを透過することによって、Y方向に長手方向を有するライン状の横断面(照明光の光軸に交差する断面)を有する照明光が生成される。
図10A、図10Bおよび図11は、ライン光源8の具体的な構成の一例を示している。
図10Aおよび図10Bのライン光源8において、光源本体81は、Y方向に一列に配列したLEDからなるLED列81aと、LED列81aから発せられた光を拡散する拡散板81bとを備えている。照明マスク82は、拡散板81bの射出側の面上に設けられている。
図11のライン光源8において、光源本体81は、光拡散性光ファイバ81cと、該光ファイバ81cに光を供給する、LEDまたはLSD(Superluminescent diode)のような光源81dとを備えている。光拡散性光ファイバ81cを用いることにより、LED列81aを用いた場合に比べて、照明光の光強度の均質性を高めることができる。
シリンドリカルレンズ9は、Y方向に延びZ方向のみに湾曲する曲面をライン光源8とは反対側に有する。したがって、シリンドリカルレンズ9は、Z方向に屈折力を有し、Y方向に屈折力を有しない。また、照明マスク82は、シリンドリカルレンズ9の焦点面または該焦点面の近傍に位置している。これにより、照明マスク82の開口部82aから射出された発散光束の照明光は、シリンドリカルレンズ9によってZ方向のみ曲げられて、Z方向に一定の寸法を有する光束(XZ平面において平行光束)に変換される。
プリズム10は、シリンドリカルレンズ9の光軸に対して45°の角度をなして傾斜し、シリンドリカルレンズ9を透過した照明光を上方へ偏向する偏向面10aを有する。偏向面10aにおいて偏向された照明光は、載置台2aおよび容器1の底板1bを透過し、上板1aにおいて反射されて試料Aを上方から照明し、試料Aおよび底板1bを透過した照明光が撮像部4に入射する。
撮像部4は、一列に配列された複数の対物光学系11を有する対物光学系群12と、該対物光学系群12によって結ばれた試料Aの光学像を撮影するラインセンサ13とを備えている。
各対物光学系11は、図12に示されるように、物体側(試料A側)から順に、第1レンズ群G1、開口絞りAS、および第2レンズ群G2を備えている。複数の対物光学系11は、図13に示されるように、光軸をZ方向に平行に延ばしてY方向に配列され、同一面上に光学像を結ぶ。したがって、像面には、Y方向に一列に並ぶ複数の光学像Iが形成される(図15参照。)。開口絞りASも、図14に示されるように、Y方向に一列に配列する。
ラインセンサ13は、長手方向に配列された複数の受光素子を有し、ライン状の1次元画像を取得する。ラインセンサ13は、図15に示されるように、複数の対物光学系11の像面上にY方向に配置されている。ラインセンサ13は、像面に光学像Iを結んだ照明光を検出することによって、試料Aのライン状の1次元画像を取得する。
隣接する対物光学系11の間には隙間dが生じる。Y方向において試料Aの像に切れ目が無い画像を得るために、対物光学系群12は以下の2つの条件を満たす。
第1の条件は、各対物光学系11において、図12に示されるように、入射瞳位置が最も試料A側に位置する第1レンズ群G1よりも像側に位置することである。これは、開口絞りASを第1レンズ群G1の像側焦点よりも物体側に配置することによって実現している。第1の条件を満たすことにより、焦点面から第1レンズ群G1に近付くにつれて軸外主光線が対物光学系11の光軸に近付くので、走査方向に垂直な方向(Y方向)の実視野Fが第1レンズ群G1の直径φよりも大きくなる。したがって、隣接する2つの対物光学系11の視野がY方向に互いに重なり合い、視野の欠けがない試料Aの光学像が像面に形成される。
第2の条件は、図12に示されるように、各対物光学系11の物体面から像面への投影横倍率の絶対値が1倍以下であることである。第2の条件を満たすことにより、像面には、複数の対物光学系11によって結ばれた複数の光学像IがY方向に互いに重なり合うことなく配列する。したがって、ラインセンサ13は、複数の対物光学系11による複数の光学像Iを互いに空間的に分離して、撮像することができる。投影横倍率が1倍よりも大きい場合、Y方向に隣接する2つの光学像Iが像面において互いに重なり合ってしまう。
第2の条件を満たす場合であっても、実視野Fよりも外側を通る光が隣接する光学像に重なることを確実に防止するために、像面の近傍に照明光の透過範囲を規制する視野絞りFSを設けることが好ましい。
対物光学系群12の一例を以下に示す。
入射瞳の位置(第1レンズ群G1の最も物体側の面から入射瞳までの距離)20.1mm
投影横倍率 −0.756倍
実視野F 2.66mm
第1レンズ群G1のレンズ直径φ 2.1mm
第1レンズ群G1のY方向のレンズ間隔d 2.3mm
視野の重なり幅D 0.36mm(=2.66/2−(2.3−2.66/2))
ここで、照明部3は、撮像部4の光軸に対して斜め方向から試料Aに照明光を照射する偏斜照明を行うように構成されている。具体的には、図16に示されるように、照明マスク82は、上述したようにシリンドリカルレンズ9の焦点面またはその近傍に位置し、かつ、照明マスク82の短辺の中心はシリンドリカルレンズ9の光軸に対して距離Δだけ下側に偏心している。これにより、プリズム10からは、XZ平面内においてZ方向に対して傾斜する方向に照明光が射出される。そして、略水平な上板1aにおいて反射された照明光は、XZ平面内においてZ方向に対して斜めに試料面(対物光学系11の焦点面)に入射し、試料Aを透過した照明光は斜めに対物光学系11に入射する。
シリンドリカルレンズ9によって平行光束に変換された照明光は、照明マスク82が短辺方向に幅を有しているので、角度分布を有する。このような照明光が対物光学系11に斜めに入射すると、図14において二点鎖線で示されるように、光軸側に位置する一部のみが開口絞りASを通過して像面に到達し、光軸に対して外側に位置する他の部分は開口絞りASの外縁によって遮られる。
図17は、試料Aとして高い屈折率を有する細胞を観察する際の偏斜照明の作用を説明する図である。図17において対物光学系11を左から右へ移動させるものとする。照明光の入射角度が対物光学系11の取り込み角と同等である場合、試料Aが存在しない領域を透過した光線a,eおよび試料Aの表面に略垂直に入射した光線cは、ほとんど屈折されることなく、入射瞳の辺縁の近傍を通過し、像面に到達する。このような光線a,c,eは、像面において中くらいの明るさの光学像を結ぶ。
図17において試料Aの左端を透過した光線bは、外側に屈折され、入射瞳の外側に達し、開口絞りASによってケラレる。このような光線cは、像面において暗い光学像を結ぶ。図17において試料Aの右端を透過した光線dは、内側に屈折され、入射瞳の辺縁よりも内側を通過する。このような光線dは、像面においてより明るい光学像を結ぶ。上記の結果、図18に示されるように、一方の側が明るく、他方の側に影が付き立体的に見える高コントラストの試料Aの画像が取得される。
対物光学系11に斜めに入射した照明光のうち、一部が開口絞りASを通過し、他の部分が開口絞りASにおいて遮られるような角度分布の照明光を有するために、対物光学系11に入射する際の照明光の光軸に対する入射角度は、下記の条件式(1)および(2)を満たすことが好ましい。
θmin > 0.5NA (1)
θmax < 1.5NA (2)
θminは、対物光学系11の光軸に対する照明光の入射角度の最小値(最も光軸側に位置する光線の入射角度)、θmaxは、対物光学系11の光軸に対する照明光の入射角度の最大値(光軸に対して最も径方向外側に位置する光線の入射角度)、NAは対物光学系11の開口数である。
上記観察装置100による観察において条件式(1)および(2)を満たすときにコントラストの高い試料Aの画像Gが取得されることが実験的に確認されている。条件式(1)および(2)を満たすためには、シリンドリカルレンズ9の焦点距離Flと照明マスク82の開口部82aの短辺の長さLが、下記の条件式(3)を満たすことが好ましい。
L > (θmax−θmin)Fl (3)
さらに、プリズム10の偏向角(対物光学系11の光軸に対する偏向面10aの傾斜角度)が45°である場合、シリンドリカルレンズ9の光軸に対する照明マスク82の短辺の中心位置のシフト量(偏心距離)Δは、下記の条件式(4)を満たすことが好ましい。
Δ=NA/Fl (4)
プリズムの偏向角が45°でない場合には、偏向角の45°からのずれ量に応じてΔが補正される。具体的には、偏向角が45°よりも大きい場合には、Δをより大きくし、偏向角が45°よりも小さい場合には、Δをより小さくする。
条件式(1)〜(4)を満たすことによって、試料Aが細胞のような位相物体であっても高いコントラストの付いた画像Gを取得することができる。条件式(1)〜(4)を満たさない場合には、試料Aのコントラストが低下する。
フォーカス調整機構5は、例えば図示しない直動アクチュエータによって、照明光学系7および撮像部4を一体的にZ方向に移動させる。これにより、静止したステージ2に対する照明光学系7および撮像部4のZ方向の位置を変更し、試料Aに対する対物光学系群12の焦点合わせを行うことができる。
走査機構6は、例えばフォーカス調整機構5を支持する直動アクチュエータによって、フォーカス調整機構5と一体的に撮像部4および照明光学系7をX方向に移動させる。
なお、走査機構6は、撮像部4および照明光学系7ではなく、ステージ2をX方向に移動させる方式で構成されていてもよく、撮像部4および照明光学系7と、ステージ2との両方をX方向に移動可能に構成されていてもよい。
次に、観察装置100の作用について、容器1内で培養中の細胞である試料Aを観察する場合を例に挙げて説明する。
ライン光源8からX方向に発せられたライン状の照明光は、シリンドリカルレンズ9によって平行光束に変換され、プリズム10によって上方に偏向され、光軸に対して斜め上方に射出される。照明光は、載置台2aおよび容器1の底板1bを透過し、上板1aにおいて斜め下方に向けて反射され、試料A、底板1bおよび載置台2aを透過し、複数の対物光学系11によって集光される。各対物光学系11の内部を斜めに進む照明光は、開口絞りASにおいて部分的にケラレ、一部のみが開口絞りASを通過することにより、陰影の付いた試料Aの光学像を像面に結ぶ。
像面に形成された試料Aの光学像は、像面に配置されたラインセンサ13によって撮像されて試料Aの1次元画像が取得される。撮像部4は、走査機構6の作動によってX方向に移動しながら、ラインセンサ13による1次元画像の取得を繰り返す。これにより、底板1b上に分布する試料Aの2次元画像が取得される。
ここで、各対物光学系11によって像面に結ばれる像は倒立像になる。したがって、例えば、図19Aに示される試料Aの2次元画像を取得した場合、図19Bに示されるように、各対物光学系11に対応する部分画像Pにおいて像が倒立する。この像の倒立を補正するために、図19Cに示されるように、各部分画像Pを走査方向に垂直な方向に反転する処理が行われる。
対物光学系11の投影横倍率の絶対値が1よりも大きい場合、各部分画像Pの縁部の視野は、隣接する部分画像Pの縁部の視野と重複する。この場合には、図19Cに示されるように、縁部を互いに重なり合わせて部分画像Pをつなぎ合わせる処理が行われる。各対物光学系11の投影横倍率が1倍である場合、このようなつなぎ合わせ処理は不要となる。
このように、ラインセンサ13を試料Aに対して走査して試料Aの2次元画像を取得するライン走査型の観察装置100において、偏斜照明を用いることによって、細胞のような無色透明の位相物体であっても高いコントラストの付いた画像Gを取得することができるという利点がある。また、容器の上板1aを反射部材として利用し、照明部3、撮像部4、フォーカス調整機構5および走査機構6の全てをステージ2の下方に集約することによって、コンパクトな装置を実現することができるという利点がある。
さらに、照明部3、撮像部4、フォーカス調整機構5および走査機構6の全てをステージ2の下方の筐体内に密封状態に収容しているので、高温多湿のインキュベータ内に収容することができ、インキュベータ内で試料Aの培養を行いながら、経時的に画像Gを取得することができる。
また、対物光学系群12の近傍に配置されたプリズム10によって、上板1aの低い容器1にも対応することができる。
すなわち、上板1aの位置が低い容器1を使用する場合、上述した条件式(1)〜(4)を満たすためには、照明部3からの照明光の射出位置を、対物光学系群12の光軸に近付ける必要がある。しかし、対物光学系群12のレンズや枠等が邪魔となり、対物光学系群12の近傍にライン光源8を配置することは難しい。
そこで、図16に示されるように、プリズム10を、載置台2aと対物光学系群12との間に挿入して、対物光学系群12の上部、かつ、光軸からわずかに径方向にずれた位置に配置し、ライン光源8を対物光学系群12から水平方向に離れた位置に配置する。これにより、対物光学系群12の光軸の近傍から斜め上方に向けて照明光を射出することができる。
上板1aの位置が高い容器1を使用する場合、偏斜照明によってコントラストの付いた試料Aの光学像を得るためには、対物光学系群12の光軸から離れた位置から照明光が斜め上方に射出される。したがって、図20に示されるように、プリズム10を省略して、ライン光源8から斜め上方に向けて照明光が射出される位置に、ライン光源8を配置してもよい。
さらに、上板1aの高さが同一である容器1しか使用しない場合には、試料面、反射部材の反射面(上板1a)および照明光学系7の相対位置関係が変化しないので、試料Aへの照明光の照射角度は一定となる。したがって、この場合には、図20に示されるように、プリズム10とシリンドリカルレンズ9を省略してもよい。
照明光を反射するための反射部材として容器1の上板1aを利用することとしたが、これに代えて、容器1の上方に設けた反射部材によって照明光を反射する方式で構成してもよい。
また、本実施形態においては、表示部が、画像Gに重畳した色分けによって位置情報に対応づけて増殖速度を表示することとしたが、これに代えて、位置情報と増殖速度とを数値によって対応づけて表示することにしてもよい。
また、本実施形態においては、コロニーYの高さ寸法を測定および算出した情報と組み合わせたコロニーYの選別をユーザに提示してもよい。これにより、より精度の高いコロニーYの選別に関わる情報をユーザに提供することができる。
また、本実施形態においては、観察装置100として、ライン状に撮影するものを例示したが、これに代えて、スクエア状に撮影するものを採用してもよい。
51 細胞画像処理装置
52 画像記憶部(メモリ)
53 測定領域抽出部
54 増殖速度算出部(プロセッサ)
55 情報記憶部(メモリ、記憶部)
A 試料(細胞)
G 画像
R 測定領域
X 細胞

Claims (6)

  1. 培養中の細胞を経時的に撮影することにより取得された複数の画像について、該画像間において共通する複数の測定領域を抽出する測定領域抽出部と、
    該測定領域抽出部により抽出された各前記測定領域に含まれる前記細胞の増殖速度を算出する増殖速度算出部と、
    該増殖速度算出部により算出された前記増殖速度と、各前記測定領域の位置情報とを対応づけて記憶する記憶部とを備える細胞画像処理装置。
  2. 前記記憶部に対応づけて記憶されている前記増殖速度と前記測定領域の位置情報とを対応づけて表示する表示部を備える請求項1に記載の細胞画像処理装置。
  3. 前記記憶部が、前記増殖速度算出部により算出された前記増殖速度に応じた複数のグループに区分して記憶する請求項2に記載の細胞画像処理装置。
  4. 前記表示部が、いずれかの前記画像を表示するとともに、前記測定領域を前記グループ毎に色分けして表示する請求項3に記載の細胞画像処理装置。
  5. 前記表示部が、前記増殖速度に応じた色で前記測定領域を色分けして表示する請求項2に記載の細胞画像処理装置。
  6. プロセッサとメモリとを備え、
    前記プロセッサが、培養中の細胞を経時的に撮影することにより取得された複数の画像について、該画像間において共通する複数の測定領域を抽出するとともに、抽出された各前記測定領域に含まれる前記細胞の増殖速度を算出し、
    前記メモリが、算出された前記増殖速度と、各前記測定領域の位置情報とを対応づけて記憶する細胞画像処理装置。
JP2020506052A 2018-03-15 2018-03-15 細胞画像処理装置 Pending JPWO2019176048A1 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/010202 WO2019176048A1 (ja) 2018-03-15 2018-03-15 細胞画像処理装置

Publications (1)

Publication Number Publication Date
JPWO2019176048A1 true JPWO2019176048A1 (ja) 2021-02-25

Family

ID=67908116

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020506052A Pending JPWO2019176048A1 (ja) 2018-03-15 2018-03-15 細胞画像処理装置

Country Status (3)

Country Link
US (1) US20200410204A1 (ja)
JP (1) JPWO2019176048A1 (ja)
WO (1) WO2019176048A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7403965B2 (ja) * 2019-03-29 2023-12-25 シスメックス株式会社 蛍光画像分析装置及び蛍光画像分析方法
JP7462265B2 (ja) 2020-03-31 2024-04-05 中国電力株式会社 自動プランクトン検出方法
KR20210149542A (ko) * 2020-06-02 2021-12-09 삼성에스디에스 주식회사 이미지 촬영 및 판독 방법, 이를 위한 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013039113A (ja) * 2011-08-19 2013-02-28 Nagoya Univ 細胞品質管理方法及び細胞の生産方法
JP2015039344A (ja) * 2013-08-22 2015-03-02 富士フイルム株式会社 観察画像判定装置および方法並びにプログラム
JP2015039342A (ja) * 2013-08-22 2015-03-02 富士フイルム株式会社 幹細胞分化判定装置および方法並びにプログラム
WO2015182382A1 (ja) * 2014-05-30 2015-12-03 富士フイルム株式会社 細胞評価装置および方法並びにプログラム
JP2015223174A (ja) * 2014-05-30 2015-12-14 富士フイルム株式会社 細胞判定装置および方法並びにプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694478A (en) * 1994-12-15 1997-12-02 Minnesota Mining And Manufacturing Company Method and apparatus for detecting and identifying microbial colonies
JP6301199B2 (ja) * 2014-05-30 2018-03-28 富士フイルム株式会社 細胞評価装置および方法並びにプログラム
DE102014220306B3 (de) * 2014-10-07 2015-09-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Automatisches Verfahren zur Beobachtung von Zellkulturwachstum

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013039113A (ja) * 2011-08-19 2013-02-28 Nagoya Univ 細胞品質管理方法及び細胞の生産方法
JP2015039344A (ja) * 2013-08-22 2015-03-02 富士フイルム株式会社 観察画像判定装置および方法並びにプログラム
JP2015039342A (ja) * 2013-08-22 2015-03-02 富士フイルム株式会社 幹細胞分化判定装置および方法並びにプログラム
WO2015182382A1 (ja) * 2014-05-30 2015-12-03 富士フイルム株式会社 細胞評価装置および方法並びにプログラム
JP2015223174A (ja) * 2014-05-30 2015-12-14 富士フイルム株式会社 細胞判定装置および方法並びにプログラム

Also Published As

Publication number Publication date
WO2019176048A1 (ja) 2019-09-19
US20200410204A1 (en) 2020-12-31

Similar Documents

Publication Publication Date Title
US8350230B2 (en) Method and optical assembly for analysing a sample
US7825360B2 (en) Optical apparatus provided with correction collar for aberration correction and imaging method using same
US20200410204A1 (en) Cell-image processing apparatus
US10295814B2 (en) Light sheet microscope and method for operating same
US10458899B2 (en) Method and optical device for microscopically examining a multiplicity of specimens
JP6692660B2 (ja) 撮像装置
JP5633753B2 (ja) フォーカス制御方法および培養観察装置
JP2016535861A5 (ja)
KR20200041983A (ko) 실시간 오토포커스 포커싱 알고리즘
JP6685148B2 (ja) 撮像装置および撮像方法
US20090317895A1 (en) Observation device
JP6419761B2 (ja) 撮像配置決定方法、撮像方法、および撮像装置
US11635364B2 (en) Observation device
JP6980898B2 (ja) 細胞画像処理装置
JP2012147739A (ja) 観察装置
JP7037636B2 (ja) 観察装置
US20210116692A1 (en) Sample observation device
US11287624B2 (en) Lightsheet microscope
CN112384606A (zh) 观察装置
JP2011017620A (ja) 形状測定方法、画像処理プログラム及び観察装置
EP3816698B1 (en) Digital pathology scanner for large-area microscopic imaging
JP2012159794A (ja) 顕微鏡装置
JP6255305B2 (ja) 光学顕微装置
US20220267703A1 (en) Device for observing a living cell or a set of living cells
JP6987965B2 (ja) 観察装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200911

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211026

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220426

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20220615