JP2021021823A - 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 - Google Patents
顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 Download PDFInfo
- Publication number
- JP2021021823A JP2021021823A JP2019137924A JP2019137924A JP2021021823A JP 2021021823 A JP2021021823 A JP 2021021823A JP 2019137924 A JP2019137924 A JP 2019137924A JP 2019137924 A JP2019137924 A JP 2019137924A JP 2021021823 A JP2021021823 A JP 2021021823A
- Authority
- JP
- Japan
- Prior art keywords
- sheet
- imaging
- objective lens
- light
- optical axis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 112
- 238000000034 method Methods 0.000 title claims description 27
- 230000003287 optical effect Effects 0.000 claims abstract description 67
- 230000001678 irradiating effect Effects 0.000 claims abstract description 5
- 238000011156 evaluation Methods 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 2
- 230000003595 spectral effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 25
- 238000001514 detection method Methods 0.000 description 19
- 230000000052 comparative effect Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 11
- 238000012545 processing Methods 0.000 description 11
- 238000005286 illumination Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 239000007850 fluorescent dye Substances 0.000 description 4
- 230000005284 excitation Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000000975 dye Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 102000034287 fluorescent proteins Human genes 0.000 description 1
- 108091006047 fluorescent proteins Proteins 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/06—Means for illuminating specimens
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/24—Base structure
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
- G02B7/38—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals measured at different points on the optical axis, e.g. focussing on two or more planes and comparing image data
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
- G03B13/34—Power focusing
- G03B13/36—Autofocus systems
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
- G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
- G03B7/091—Digital circuits
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Microscoopes, Condenser (AREA)
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
Abstract
Description
[先行技術文献]
[特許文献]
[特許文献1] 特開2018−017970号公報
上記実施形態においては、振動制御部12がガルバノミラー群33〜38を制御することによりシート状の光を振動させて複数の画像を取得し、複数の画像の合焦度を比較することによってシート状の光の位置を調整した。しかしながら、振動制御部12が、検出用対物レンズ50を振動させることによって、複数の画像を取得してもよい。この場合、振動制御部12は検出用対物レンズ50に接続されたピエゾステージを制御することによって、検出用対物レンズ50を振動させてもよい。
上記実施形態においては、撮像部21,22は、シート状の光が振動の両端にある場合の複数の画像を取得した。しかしながら、撮像部21,22は、シート状の光が振動の両端にある場合に限られず、振動内の予め定められた複数の位置にある場合の複数の画像を取得してもよい。
上記実施形態においては、画像比較部11は時間的に連続した2枚の画像を比較することによって画像の比較を行った。しかしながら、画像比較部11は時間的に連続しない複数の画像を比較してもよい。例えば、画像比較部11は図7(a)におけるImage1とImage4を比較してもよく、Image2とImage5を比較してもよい。
上記実施形態においては、画像比較部11は正規化離散コサイン変換のエントロピーを用いて画像の比較を行った。しかしながら、画像比較部11による画像の比較は公知の方法を用いてよく、例えば、離散フーリエ変換、離散ウェーブレット変換、ベイズスペクトラルエントロピー、ソーベルフィルタ、およびキャニー法のいずれかを用いてよい。
上記実施形態においては、ガルバノミラー33,36を走査することによりシート状の光を形成した。しかしながら、シート状の光は、例えば、シリンドリカルレンズによって形成してもよい。
上記実施形態においては、移動部70がステージ60を撮像期間中に等速で移動させることとしたが、移動部70によるステージ60の移動は等速でなくてもよい。移動部70による移動の速度は、例えば、段階的に変化させてもよい。また、移動部70による移動の速度は、試料101の性質などによって試料101の種類ごとに設定することが可能である。
Claims (18)
- 対物レンズの光軸方向に交差する方向から試料にシート状の光を照射する照射光学系と、
前記試料と前記対物レンズとを前記光軸方向に相対的に移動する移動部と、
前記対物レンズの像光を撮影する撮像部と、
前記撮像部の露光中に前記移動部による前記光軸方向の移動を継続するよう制御する制御部と
を備える顕微鏡。 - 前記移動部による前記移動の一回の露光時間あたりの距離は、前記シート状の光の前記光軸方向におけるガウシアン分布の半値幅に予め定められた値を掛けて得られる値以下である、請求項1に記載の顕微鏡。
- 前記予め定められた値は1.3である、請求項2に記載の顕微鏡。
- 前記予め定められた値は0.6である、請求項2に記載の顕微鏡。
- 前記移動部は、前記撮像部による複数回の撮像における一の撮像から終わりの撮像までの撮像期間中に等速で移動する、請求項1から4のいずれか1項に記載の顕微鏡。
- 前記撮像部による一の撮像の露光開始から次の撮像の露光開始までの時間に占める前記露光時間の割合は、予め定められた割合以上である、請求項1から5のいずれか1項に記載の顕微鏡。
- 前記シート状の光を前記方向に予め定められた振幅で振動させる振動制御部をさらに備え、
前記撮像部は、前記シート状の光が前記振動の予め定められた複数の位置にある場合の複数の画像を取得し、
前記制御部は、前記撮像部が取得した前記複数の画像の合焦度を比較して、当該比較結果に基づいて前記シート状の光の振動中心を移動する、請求項1から6のいずれか1項に記載の顕微鏡。 - 前記予め定められた振幅は、前記シート状の光の前記光軸方向におけるガウシアン分布の半値幅の5%以上、100%以下である、請求項7に記載の顕微鏡。
- 前記制御部は、前記複数の画像のうち、時間的に連続した2枚の画像を比較する、請求項7又は8に記載の顕微鏡。
- 前記撮像部は、前記シート状の光が前記振動の両端にある場合の時間的に連続した複数の画像を取得し、
前記制御部は、前記複数の画像を比較した結果、前記振動の一端側で取得した画像が前記振動の他端側で取得した画像よりも焦点が合っている画像である場合には、合焦評価値をカウントアップし、前記振動の前記他端側で取得した画像が前記振幅の前記一端側で取得した画像よりも焦点が合っている画像である場合には、前記合焦評価値をカウントダウンする制御を行い、
前記合焦評価値が予め定められた値を超えた場合に、前記シート状の光の前記振動中心を移動する、請求項7から9のいずれか1項に記載の顕微鏡。 - 前記制御部は、前記複数の画像のそれぞれについて離散コサイン変換、離散フーリエ変換、離散ウェーブレット変換、ベイズスペクトラルエントロピー、ソーベルフィルタ、およびキャニー法のいずれか一つを用いて複数の画像を比較する、請求項7から10のいずれか1項に記載の顕微鏡。
- 前記制御部は、前記比較の対象である前記複数の画像のそれぞれを複数の領域に分割し、前記分割した前記複数の領域のそれぞれについてノルムを算出し、前記複数の領域のうち、前記算出されたノルムの値が高い複数の領域を用いて、前記複数の画像を比較する、請求項7から10のいずれか1項に記載の顕微鏡。
- 前記シート状の光を前記方向に予め定められた振幅で振動させる振動制御部をさらに備え、
前記撮像部は、前記シート状の光が前記振動の予め定められた複数の位置にある場合の複数の画像を取得し、
前記制御部は、前記撮像部が取得した前記複数の画像の合焦度を比較して、前記対物レンズの焦点位置を移動させる、請求項1から6のいずれか1項に記載の顕微鏡。 - 前記振動制御部は、ガルバノミラーを備える、請求項7から13のいずれか1項に記載の顕微鏡。
- 前記対物レンズを前記方向に予め定められた振幅で振動させる第2の振動制御部をさらに備え、
前記撮像部は、前記対物レンズが前記振動の予め定められた複数の位置にある場合の複数の画像を取得し、
前記制御部は、前記撮像部が取得した前記複数の画像の合焦度を比較して、前記対物レンズの焦点位置を移動させる、請求項1から6のいずれか1項に記載の顕微鏡。 - 顕微鏡で試料を撮像する方法であって、
対物レンズの光軸方向に交差する方向から前記試料にシート状の光を照射する照射ステップと、
前記試料と前記対物レンズとを前記光軸方向に相対的に移動する移動ステップと、
前記対物レンズの像光を撮影する撮像ステップと、
前記撮像ステップの露光中に前記移動ステップによる前記光軸方向の移動を継続するよう制御する制御ステップと
を備える方法。 - 対物レンズの光軸方向に交差する方向から試料にシート状の光を照射する照射光学系と、
前記試料と前記対物レンズとを前記光軸方向に相対的に移動する移動部と、
前記対物レンズの像光を撮影する撮像部と、
を備える顕微鏡を制御するコンピュータのプログラムであって、
上記コンピュータに、前記撮像部の露光中に前記移動部による前記光軸方向の移動を継続するよう制御するステップを実行させる、プログラム。 - 対物レンズの光軸方向に交差する方向から試料にシート状の光を照射する照射光学系と、
前記試料と前記対物レンズとを前記光軸方向に相対的に移動する移動部と、
前記対物レンズの像光を撮影する撮像部と、
を備える顕微鏡を制御する制御装置であって、
前記撮像部の露光中に前記移動部による前記光軸方向の移動を継続するよう制御する、制御装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019137924A JP7262114B2 (ja) | 2019-07-26 | 2019-07-26 | 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 |
PCT/JP2020/028378 WO2021020262A1 (ja) | 2019-07-26 | 2020-07-22 | 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019137924A JP7262114B2 (ja) | 2019-07-26 | 2019-07-26 | 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021021823A true JP2021021823A (ja) | 2021-02-18 |
JP2021021823A5 JP2021021823A5 (ja) | 2022-08-02 |
JP7262114B2 JP7262114B2 (ja) | 2023-04-21 |
Family
ID=74229072
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019137924A Active JP7262114B2 (ja) | 2019-07-26 | 2019-07-26 | 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7262114B2 (ja) |
WO (1) | WO2021020262A1 (ja) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012523583A (ja) * | 2009-04-13 | 2012-10-04 | ゼネラル・エレクトリック・カンパニイ | 改良型予測オートフォーカスシステム及びその方法 |
CN103743714A (zh) * | 2014-01-14 | 2014-04-23 | 苏州大猫单分子仪器研发有限公司 | 一种倾斜宽场光切片扫描成像显微系统及其成像方法 |
JP2014081417A (ja) * | 2012-10-15 | 2014-05-08 | Astro Design Inc | レーザー走査顕微鏡装置 |
JP2014530387A (ja) * | 2011-10-11 | 2014-11-17 | カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh | 顕微鏡、およびspim顕微鏡検査方法 |
JP2016126274A (ja) * | 2015-01-08 | 2016-07-11 | オリンパス株式会社 | 蛍光顕微鏡 |
JP2018004777A (ja) * | 2016-06-28 | 2018-01-11 | オリンパス株式会社 | 光シート顕微鏡、及び、光シート顕微鏡の制御方法 |
CN108072970A (zh) * | 2017-11-30 | 2018-05-25 | 哈尔滨工业大学 | 光镊光片显微成像装置和方法 |
JP2018517178A (ja) * | 2015-05-28 | 2018-06-28 | カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh | ライトシート顕微鏡法のための構成及び方法 |
-
2019
- 2019-07-26 JP JP2019137924A patent/JP7262114B2/ja active Active
-
2020
- 2020-07-22 WO PCT/JP2020/028378 patent/WO2021020262A1/ja active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012523583A (ja) * | 2009-04-13 | 2012-10-04 | ゼネラル・エレクトリック・カンパニイ | 改良型予測オートフォーカスシステム及びその方法 |
JP2014530387A (ja) * | 2011-10-11 | 2014-11-17 | カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh | 顕微鏡、およびspim顕微鏡検査方法 |
JP2014081417A (ja) * | 2012-10-15 | 2014-05-08 | Astro Design Inc | レーザー走査顕微鏡装置 |
CN103743714A (zh) * | 2014-01-14 | 2014-04-23 | 苏州大猫单分子仪器研发有限公司 | 一种倾斜宽场光切片扫描成像显微系统及其成像方法 |
JP2016126274A (ja) * | 2015-01-08 | 2016-07-11 | オリンパス株式会社 | 蛍光顕微鏡 |
JP2018517178A (ja) * | 2015-05-28 | 2018-06-28 | カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh | ライトシート顕微鏡法のための構成及び方法 |
JP2018004777A (ja) * | 2016-06-28 | 2018-01-11 | オリンパス株式会社 | 光シート顕微鏡、及び、光シート顕微鏡の制御方法 |
CN108072970A (zh) * | 2017-11-30 | 2018-05-25 | 哈尔滨工业大学 | 光镊光片显微成像装置和方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7262114B2 (ja) | 2023-04-21 |
WO2021020262A1 (ja) | 2021-02-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6490219B2 (ja) | デジタルホログラフィにおけるオートフォーカスシステムおよびオートフォーカス方法 | |
US11156823B2 (en) | Digital microscope apparatus, method of searching for in-focus position thereof, and program | |
JP5727629B2 (ja) | 顕微鏡撮像における高速自動焦点合わせ | |
KR102411099B1 (ko) | 실시간 오토포커스 스캐닝 | |
JPWO2005114287A1 (ja) | 顕微鏡装置 | |
EP2916160B1 (en) | Image acquisition device and method for focusing image acquisition device | |
JP6503221B2 (ja) | 3次元情報取得装置、及び、3次元情報取得方法 | |
JPWO2005114293A1 (ja) | 顕微鏡装置 | |
TWI811758B (zh) | 用於自動對焦顯微鏡系統之深度學習模組、自動對焦一顯微鏡系統之方法及非暫時性電腦可讀媒體 | |
JP6799924B2 (ja) | 細胞観察装置および細胞観察方法 | |
JP2012042669A (ja) | 顕微鏡制御装置及び光学的歪み補正方法 | |
JP2019191429A (ja) | 制御装置、撮像装置、制御方法、及びプログラム | |
JP6027875B2 (ja) | 撮像装置及び顕微鏡システム | |
JP2014134632A (ja) | 撮像装置、顕微鏡システム及び撮像方法 | |
Liu et al. | Design and experimental validation of novel enhanced-performance autofocusing microscope | |
WO2021020262A1 (ja) | 顕微鏡、顕微鏡で試料を撮像する方法、プログラム、および制御装置 | |
JP6802636B2 (ja) | 顕微鏡システムおよび標本観察方法 | |
JPWO2019021621A1 (ja) | 試料観察装置及び試料観察方法 | |
JP6874251B2 (ja) | 装置、撮像装置、移動体、方法、及びプログラム | |
JP2014515099A (ja) | 体液画像化システムおよび方法、ならびに被写界深度拡張画像化装置 | |
JP2013088570A (ja) | 顕微鏡装置 | |
JP6623419B2 (ja) | 表示制御装置、撮像装置、スマートフォン、表示制御方法、及びプログラム | |
CN113939759A (zh) | 用于校正显微镜物镜视场中对焦平面变化的系统和方法 | |
US20180172975A1 (en) | Microscope device, storage medium and observation method | |
US20180164570A1 (en) | Microscope device, storage medium and observation method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220725 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220725 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230307 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230404 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7262114 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |