KR101865624B1 - 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법 - Google Patents

파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법 Download PDF

Info

Publication number
KR101865624B1
KR101865624B1 KR1020160072304A KR20160072304A KR101865624B1 KR 101865624 B1 KR101865624 B1 KR 101865624B1 KR 1020160072304 A KR1020160072304 A KR 1020160072304A KR 20160072304 A KR20160072304 A KR 20160072304A KR 101865624 B1 KR101865624 B1 KR 101865624B1
Authority
KR
South Korea
Prior art keywords
dimensional
fluorescence
plane wave
wavefront
sample
Prior art date
Application number
KR1020160072304A
Other languages
English (en)
Other versions
KR20170140459A (ko
Inventor
박용근
신승우
박광식
Original Assignee
주식회사 토모큐브
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 토모큐브, 한국과학기술원 filed Critical 주식회사 토모큐브
Priority to KR1020160072304A priority Critical patent/KR101865624B1/ko
Priority to EP16183755.4A priority patent/EP3255414A1/en
Priority to CA2938995A priority patent/CA2938995A1/en
Priority to JP2016160840A priority patent/JP6622154B2/ja
Priority to US15/243,265 priority patent/US10082662B2/en
Priority to CN201610712730.3A priority patent/CN107490562B/zh
Priority to US16/308,329 priority patent/US10976532B2/en
Priority to PCT/KR2017/006034 priority patent/WO2017213464A1/ko
Publication of KR20170140459A publication Critical patent/KR20170140459A/ko
Application granted granted Critical
Publication of KR101865624B1 publication Critical patent/KR101865624B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/41Refractivity; Phase-affecting properties, e.g. optical path length
    • G01N21/45Refractivity; Phase-affecting properties, e.g. optical path length using interferometric methods; using Schlieren methods
    • G01N21/455Schlieren methods, e.g. for gradient index determination; Shadowgraph
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/41Refractivity; Phase-affecting properties, e.g. optical path length
    • G01N21/45Refractivity; Phase-affecting properties, e.g. optical path length using interferometric methods; using Schlieren methods
    • G01N21/453Holographic interferometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/41Refractivity; Phase-affecting properties, e.g. optical path length
    • G01N21/4133Refractometers, e.g. differential
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/41Refractivity; Phase-affecting properties, e.g. optical path length
    • G01N21/45Refractivity; Phase-affecting properties, e.g. optical path length using interferometric methods; using Schlieren methods
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • G01N21/6458Fluorescence microscopy
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/6486Measuring fluorescence of biological material, e.g. DNA, RNA, cells
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/16Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0816Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
    • G02B26/0833Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements the reflecting element being a micromechanical device, e.g. a MEMS mirror, DMD
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/46Systems using spatial filters
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/26Optical coupling means
    • G02B6/32Optical coupling means having lens focusing means positioned between opposed fibre ends
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/26Optical coupling means
    • G02B6/35Optical coupling means having switching means
    • G02B6/351Optical coupling means having switching means involving stationary waveguides with moving interposed optical elements
    • G02B6/3512Optical coupling means having switching means involving stationary waveguides with moving interposed optical elements the optical element being reflective, e.g. mirror
    • G02B6/3516Optical coupling means having switching means involving stationary waveguides with moving interposed optical elements the optical element being reflective, e.g. mirror the reflective optical element moving along the beam path, e.g. controllable diffractive effects using multiple micromirrors within the beam
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N2021/178Methods for obtaining spatial resolution of the property being measured
    • G01N2021/1785Three dimensional
    • G01N2021/1787Tomographic, i.e. computerised reconstruction from projective measurements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N2021/6495Miscellaneous methods
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/06Illumination; Optics
    • G01N2201/063Illuminating optical parts
    • G01N2201/0635Structured illumination, e.g. with grating
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • G03H2001/005Adaptation of holography to specific applications in microscopy, e.g. digital holographic microscope [DHM]

Abstract

파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법이 제시된다. 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법은, 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계; 상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 단계; 및 측정된 상기 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 단계를 포함할 수 있다.

Description

파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법{3D Refractive Index Tomogram and Structured Illumination Microscopy System using Wavefront Shaper and Method thereof}
아래의 실시예들은 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법에 관한 것으로, 더욱 상세하게는 단일 파면 제어기를 이용하여 세포의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있는 기술에 관한 것이다.
현재 세포 내부의 구조를 광학적으로 측정하기 위하여 사용하는 방법은 형광 단백질을 세포 내부의 특정 구조에 발현시켜 형광 신호를 측정하는 형광 이미지 방법과 세포 내부의 3차원 굴절률 분포를 측정하는 3차원 굴절률 단층 촬영법이 있다.
형광 단백질의 표지 없이, 입사된 파면에 대한 세포의 반응을 측정하여 세포 내부의 3차원 굴절률 분포를 측정하는 3차원 굴절률 단층 촬영법이 사용되고 있다. 측정된 굴절률 값은 세포 내 주요 구성 성분인 단백질의 농도와 선형적으로 비례하기 때문에, 측정된 세포 내부의 3차원 굴절률 분포로부터 세포 내의 구조적인 특성뿐만 아니라 단백질 농도의 분포와 같은 생화학적인 특성도 얻을 수 있다. 또한 형광 단백질의 표지를 사용하지 않기 때문에, 비침습적으로 살아있는 세포에 적용 가능하며 광퇴색(photobleaching)이 일어나지 않기 때문에 오랜 시간 동안 세포의 반응을 측정할 수 있게 되었다.
이러한 세포의 3차원 굴절률 이미지를 측정하기 위해서 여러 가지 종류의 파면 제어기를 이용한 3차원 굴절률 단층이 제시되었다[비특허문헌 1]. 결맞음 광원(coherent light source)에서 나온 빛을 세포에 입사시키고, 이렇게 세포에서 회절된 투과광을 간섭계를 이용하여 홀로그램을 측정한다.
이때 파면 제어기를 사용하여 세포에 입사되는 각도를 회전시키면서 여러 장의 2차원 홀로그램을 측정하고 측정된 홀로그램 정보를 알고리즘을 통해 분석하면 세포의 3차원 굴절률 분포를 측정할 수 있다.
최근에는 파면 제어기 중 하나인 디지털 마이크로미러 소자(Digital Micromirror Device)를 이용하여 초고속 3차원 광 단층 촬영이 가능하게 되었다[비특허문헌 2].
하지만 광회절 단층 촬영법은 세포 내부의 단백질 분포를 얻을 수 있지만 분자 특이적인 측정이 아니기 때문에 특정 단백질을 구별하는 것이 어렵다는 한계를 갖고 있다.
그리고, 세포의 형광 이미지를 위해서는 세포의 특정 기관(분자)에 형광 단백질이나 염료를 발현시키거나 붙인다. 이렇게 발현된 형광 물질에 여기 광원(excitation light source)이 입사하면 형광 단백질은 이를 흡수한 뒤 다른 파장으로 형광 신호를 방출한다. 이 형광 신호를 통해 세포 내부 특정 구조의 이미지를 구별하여 측정한다.
최근에는 이러한 형광 이미지의 해상도(resolution)를 증가시키는 방법으로 구조화 조도 현미경 기술을 사용하기 시작하였다. 구조화 조도 현미경 기술은 여기 광원을 특정 패턴으로 입사시켜, 광학적으로 측정 가능한 범위 밖의 신호를 측정하여 회절 한계치를 능가하는 초고해상도의 이미지를 얻을 수 있는 방법이다.
처음 구조화 조도 현미경 기술은 회절 격자를 통과시킴으로써 패턴을 만들어 이미지를 얻었다[비특허문헌 3]. 구조화 조도 현미경 기술은 격자 무늬를 회전 및 평행이동을 하여 다양한 패턴에서 이미지를 측정하고 이러한 저해상도 이미지에서 알고리즘을 통하여 고해상도의 이미지를 구한다. 그 후로는 파면 제어기를 통하여 패턴 모양 제어로 더욱 손쉽게 고해상도의 이미지를 얻을 수 있게 되었다.
또한, 최근에 비선형 구조화 조도 현미경 기술(nonlinear structured illumination microscopy)을 통하여 해상도를 더욱더 좋게 만들 수 있게 되었다[비특허문헌 4]. 하지만 형광 이미지의 경우 형광 단백질을 발현시키기 위해 세포를 염색하는 과정이 침습적이며, 오랜 시간 동안 형광 이미지를 측정하면 광퇴색이 일어나 측정이 더 이상 되지 않을 수 있다는 단점이 있다.
Wolf, E. (1969). "Three-dimensional structure determination of semi-transparent objects from holographic data." Optics Communications 1(4): 153-156. Shin, S., et al. (2015). "Active illumination using a digital micromirror device for quantitative phase imaging." Optics letters 40(22): 5407-5410. Gustafsson, M. G. (2000). "Surpassing the lateral resolution limit by a factor of two using structured illumination microscopy." Journal of microscopy 198(2): 82-87. Gustafsson, M. G. (2005). "Nonlinear structured-illumination microscopy: wide-field fluorescence imaging with theoretically unlimited resolution." Proceedings of the National Academy of Sciences of the United States of America 102(37): 13081-13086. Lee, W.-H. (1979). "Binary computer-generated holograms." Applied Optics 18(21): 3661-3669.
실시예들은 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법에 관하여 기술하며, 보다 구체적으로 단일 파면 제어기를 이용하여 세포의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있는 기술을 제공한다.
실시예들은 살아있는 세포와 조직 내부의 3차원 굴절률 분포를 광학적으로 측정하고, 형광 단백질에 의해 표지된 특정 내부 구조를 동시에 구별할 수 있는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법을 제공하는데 있다.
일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법은, 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계; 상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 단계; 및 측정된 상기 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 단계를 포함한다.
상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계를 더 포함하고, 상기 파면 제어기를 이용하여 상기 샘플의 상기 3차원 고해상도 형광 이미지와 상기 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
상기 파면 제어기를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계는, 상기 샘플에 입사되는 상기 평면파의 진행 각도를 제어하기 위해서, 디지털 마이크로미러 소자에 표출(display)하는 패턴을 변경하여 다양한 진행 각도의 평면파를 형성할 수 있다.
상기 파면 제어기를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계는, 상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하는 단계; 및 디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득하는 단계를 포함할 수 있다.
상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하는 단계는, 공간 필터(spatial filter)를 이용하여 상기 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용할 수 있다.
상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 단계는, 상기 샘플을 통과한 상기 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 상기 평면파의 조사 각도를 다양하게 변경하여 상기 2차원 광학장을 측정할 수 있다.
상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는, 상기 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 상기 평면파 간의 위상을 조절하는 단계; 상기 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하는 단계; 및 복수의 상기 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득하는 단계를 포함할 수 있다.
상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는, 디지털 마이크로미러 소자의 패턴을 통하여 각도와 위상이 조절 가능 광학장 구별을 위한 N개의 패턴과 방위각 스캐닝(azimuthal angle scanning)을 위한 M개의 패턴으로 N*M개의 패턴을 형성할 수 있다.
상기 평면파를 발생시키는 광원을 저간섭성 빛을 사용하여 z축으로 특정 부분만 구별하여 측정할 수 있다.
상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는, 스테이지나 집광 렌즈(condenser lens)를 z축으로 이동시켜 상기 샘플의 z축의 각 부분을 측정하여 상기 3차원 고해상도 형광 이미지를 획득할 수 있다.
다른 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템은, 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 변조부; 상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 간섭계; 및 측정된 상기 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 굴절률 영상부를 포함한다.
상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 형광 이미지부를 더 포함하고, 상기 파면 제어기를 이용하여 상기 샘플의 상기 3차원 고해상도 형광 이미지와 상기 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
상기 변조부는, 상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하고, 디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득할 수 있다.
상기 변조부는, 공간 필터(spatial filter)를 이용하여 상기 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용할 수 있다.
상기 간섭계는, 상기 샘플을 통과한 상기 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 상기 평면파의 조사 각도를 다양하게 변경하여 상기 2차원 광학장을 측정할 수 있다.
상기 형광 이미지부는, 상기 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 상기 평면파 간의 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하고, 복수의 상기 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
실시예들에 따르면 단일 파면 제어기를 이용하여 세포의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법을 제공할 수 있다.
실시예들에 따르면 살아있는 세포와 조직 내부의 3차원 굴절률 분포를 광학적으로 측정하고, 형광 단백질에 의해 표지된 특정 내부 구조를 동시에 구별할 수 있는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법을 제공할 수 있다.
도 1은 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 평면파의 상대적인 위상 차이를 설명하기 위한 도면이다.
도 3은 일 실시예에 따른 공간주파수 조절을 설명하기 위한 도면이다.
도 4는 일 실시예에 따른 3차원 초고해상도 형광 이미지 획득 방법을 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 나타내는 블록도이다.
도 6은 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법을 나타내는 흐름도이다.
이하, 첨부된 도면을 참조하여 실시예들을 설명한다. 그러나, 기술되는 실시예들은 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 이하 설명되는 실시예들에 의하여 한정되는 것은 아니다. 또한, 여러 실시예들은 당해 기술분야에서 평균적인 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위해서 제공되는 것이다. 도면에서 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.
살아있는 세포 내부의 구조를 3차원적으로 파악하고 실시간으로 구조의 변화를 측정하는 것은 생물학적, 병리학적 연구에 크게 기여할 수 있는 기술이다.
아래의 실시예들은 파면 제어기(Wavefront Shaper)를 활용하여 3차원 굴절률 단층 촬영 기술(3D refractive index tomogram)과 3차원 구조화 조도 현미경 기술(structured illumination microscopy)을 모두 구현하는 시스템 및 방법을 제시한다.
실시예들은 단일 파면 제어기를 이용하여 세포의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있는 기술을 제공하는 것으로, 더 구체적으로 살아있는 세포와 조직 내부의 3차원 굴절률 분포를 광학적으로 측정하고, 형광 단백질에 의해 표지된 특정 내부 구조를 동시에 구별할 수 있는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법을 제공할 수 있다.
도 1은 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 설명하기 위한 도면이다.
도 1을 참조하면, 파면 제어기(Wavefront Shaper)를 활용하여 3차원 고해상도 형광 이미지와 3차원 굴절률 분포를 조사파면제어 방법을 통해 측정하는 하나의 시스템을 나타낼 수 있다.
3차원 굴절률 단층 촬영법에서 굴절률 분포를 얻기 위해서는 임의의 다양한 각도의 평면파에 의한 샘플 이미지가 필요하다. 그리고 구조화 조도 현미경 기술을 위해서는 입사 파면의 위상 및 패턴을 제어할 수 있어야 한다.
파면 제어기를 활용하는 경우 평면파의 입사 각도를 조절할 수 있을 뿐 아니라, 평면파 파면의 위상 및 패턴을 제어할 수 있다. 따라서 파면 제어기를 활용하여 3차원 고해상도 형광 이미지와 3차원 굴절률 분포 이미지 두 가지 모두를 얻는 것이 가능하다.
일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템은 변조부, 간섭계, 굴절률 영상부, 및 형광 이미지부를 포함하여 이루어질 수 있다.
예를 들어, 변조부는 파면 제어기(110), 튜브 렌즈(120), 및 집광 렌즈(130)를 포함하여 이루어질 수 있다. 또한 실시예에 따라 변조부는 공간 필터(spatial filter)를 더 포함하여 이루어질 수 있다.
파면 제어기(110)는, 예컨대 디지털 마이크로미러 소자일 수 있다. 즉, 디지털 마이크로미러 소자(Digital Micromirror Device)는 파면 제어기로 다수의 마이크로미러를 포함하는 배열을 구비할 수 있다.
튜브 렌즈(120) 및 집광 렌즈(130)는 평면파 진행 각도를 확대하여 샘플에 입사시킬 수 있다.
여기에서 샘플(sample)은 측정하고자 하는 대상을 나타내는 것으로, 세포, 세균 또는 미생물 등이 될 수 있으며 세포 등을 포함하고 있는 대상물이 될 수도 있다.
그리고, 간섭계는 샘플을 통과한 2차원 광학장을 적어도 하나 이상의 입사광에 따라 측정할 수 있다.
굴절률 영상부는 측정된 2차원 광학장의 정보를 통해 3차원 굴절률 영상을 획득할 수 있다.
형광 이미지부는 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
이에 따라 파면 제어기를 이용하여 샘플의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
아래에서 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템에 대해 더 구체적으로 설명한다.
먼저, 3차원 굴절률 단층 촬영 이미지를 얻기 위해서 Lee Hologram[비특허문헌 5] 방법을 사용하여 파면 제어기로 입사 평면파의 조사 각도를 조절할 수 있다. 입사되는 평면파의 진행 각도를 제어하기 위해서, 디지털 마이크로미러 소자(digital micromirror device)에 표출(display)하는 Lee hologram 패턴을 적절히 변경할 수 있다.
더 구체적으로, 다양한 진행 각도의 평면파를 디지털 마이크로미러 소자로 형성하기 위해서 디지털 마이크로미러 소자에 아래의 식과 같은 Lee hologram 패턴을 입력할 수 있다.
[식 1]
Figure 112016055836581-pat00001
여기에서, u, v는 공간주파수로 디지털 마이크로미러 소자에서의 픽셀을 통해 조절되는 값이며,
Figure 112016055836581-pat00002
는 평면파의 상대적인 위상 차이를 나타낼 수 있다.
이 중 두 번째 식에서, 세 개의 항 중 두 번째 항에 해당하는 회절광만 샘플에 입사시키고 나머지를 차폐하면 하나의 평면파의 진행 방향을 제어할 수 있게 된다.
광축을 z축으로 정하고 표현하고자 하는 파장
Figure 112016055836581-pat00003
을 갖는 레이저 평면파의 x축 y축 방향의 각도를 각각
Figure 112016055836581-pat00004
로 한다면, 이에 해당하는 파면의 위상 정보는 다음 식과 같이 나타낼 수 있다.
[식 2]
Figure 112016055836581-pat00005
따라서 식 1에서 디지털 마이크로미러 소자의 패턴을 조절하면 식 2를 이용하여 원하는 위상 정보를 얻을 수 있게 된다. 이때, 하나의 반사광을 사용하기 위해서 공간 필터(spatial filter)를 통해 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용할 수 있다.
샘플을 통과한 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 평면파의 조사 각도를 다양하게 바꾸며 광학장을 측정할 수 있다. 이렇게 측정된 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm) 기술을 활용하여 3차원 굴절률 영상을 얻을 수 있다.
다음으로, 초고해상도의 형광 이미지를 얻기 위해서 구조화 조도 현미경 기술을 이용한다.
구조화 조도 현미경 기술에서 초고해상도 이미지를 얻기 위해서는 특정 패턴을 입사하고 패턴을 구성하는 평면파 간의 위상을 조절할 수 있어야 한다.
일례로, 사인 곡선 모양의 패턴(sinusoidal pattern)을 다음 식과 같이 나타낼 수 있다.
[식 3]
Figure 112016055836581-pat00006
여기서, u, v는 공간주파수로 앞에서 설명한 바와 같이 디지털 마이크로미러 소자의 픽셀을 통해서 조절되는 값이며,
Figure 112016055836581-pat00007
는 평면파의 상대적인 위상 차이로 디지털 마이크로미러 소자의 패턴의 형태를 통해 조절이 가능하다.
도 2는 일 실시예에 따른 평면파의 상대적인 위상 차이를 설명하기 위한 도면이다. 도 2를 참조하면, 평면파의 상대적인 위상 차이
Figure 112016055836581-pat00008
는 디지털 마이크로미러 소자의 패턴의 형태를 통해 조절이 가능하다.
3차원 굴절률 단층 촬영법에서는 식 1 또는 식 3의 세 개의 항 중 두 번째 항만을 사용하였으나, 구조화 조도 현미경 기술에서는 식의 세 항을 모두 사용할 수 있다.
이때, 입사된 사인 곡선 모양의 패턴을 구성하는 세 항 각각에 대한 시편의 광학장을 구별하기 위해 위상 변환 방법(phase shifting method)을 사용하고, 상대적 위상 차이
Figure 112016055836581-pat00009
를 3 스텝 이상의 다른 값으로 제어하여야 한다.
또한, 도 3을 참조하면 해상도의 방위각 대칭(azimuthal symmetry)을 유지하기 위해서 공간주파수를 조절하여 사인 곡선 모양의 패턴의 방향을 돌려가며 여러 방위각
Figure 112016055836581-pat00010
에 대하여 측정할 수 있다.
즉, 광학장 구별을 위한 N개의 패턴, 방위각 스캐닝(azimuthal angle scanning)을 위한 M개의 패턴으로 총 N*M개의 패턴이 필요하다. 필요한 패턴은 디지털 마이크로미러 소자의 패턴을 통하여 각도와 위상이 조절 가능하다.
이때, 위상
Figure 112016055836581-pat00011
는 디지털 마이크로미러의 픽셀 수를
Figure 112016055836581-pat00012
이라 하면
Figure 112016055836581-pat00013
의 스텝으로 조절이 된다. 도 4를 참조하면, 제어된 패턴들에 의하여 형광 이미지를 얻고 이러한 이미지들을 알고리즘을 통해 초고해상도의 2차원 형광 이미지를 재건할 수 있다.
그리고 광원을 저간섭성 빛을 사용하면 z축으로 특정 부분만 구별하여 측정하게 되며, 스테이지나 집광 렌즈(condenser lens)(430)를 z축으로 움직여 샘플(440)의 z축의 각 부분을 측정하면 3차원 초고해상도 형광 이미지를 얻을 수 있다. 한편, 도 1에서 설명한 바와 같이 변조부는 파면 제어기(410), 튜브 렌즈(420), 및 집광 렌즈(430)를 포함하여 이루어질 수 있다. 또한 실시예에 따라 변조부는 공간 필터(spatial filter)를 더 포함하여 이루어질 수 있다.
이러한 3차원 굴절률 영상 촬영 영상 및 3차원 고해상도 형광 이미지를 획득하는 시스템 및 방법에 대해 아래에서 더 구체적으로 설명하기로 한다.
도 5는 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 나타내는 블록도이다.
도 5를 참조하면, 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템(500)은 변조부(510), 간섭계(520), 및 굴절률 영상부(530)를 포함하여 이루어질 수 있다. 실시예에 따라 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템(500)은 형광 이미지부(540)를 더 포함하여 이루어질 수 있다.
변조부(510)는 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절할 수 있다.
더 구체적으로, 변조부(510)는 파면 제어기를 사용하여 입사광의 조사 각도 및 파면 패턴 중 적어도 어느 하나 이상을 변경하여 샘플에 입사시킬 수 있다. 여기에서 파면 제어기는 빛의 위상을 제어할 수 있는 기기 또는 위상이 제어될 수 있는 고정된 형태의 필름이 사용될 수 있다. 예컨대 파면 제어기는 초고속으로 파면을 제어할 수 있는 디지털 마이크로미러 소자를 포함할 수 있다. 디지털 마이크로미러 소자(Digital Micromirror Device)는 파면 제어기로 다수의 마이크로미러를 포함하는 배열을 구비할 수 있다.
즉, 변조부(510)는 샘플에 입사되는 평면파의 진행 각도를 제어하기 위해서, 디지털 마이크로미러 소자에 표출(display)하는 패턴을 변경하여 다양한 진행 각도의 평면파를 형성할 수 있다.
또한 변조부(510)는 평면파의 조사 각도를 조절하여 회절광을 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하고, 디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득할 수 있다.
이때, 변조부(510)는 공간 필터(spatial filter)를 이용하여 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용할 수 있다.
한편, 평면파를 발생시키는 광원을 저간섭성 빛을 사용하여 z축으로 특정 부분만 구별하여 측정할 수 있다.
예를 들어, 변조부(510)는 디지털 마이크로미러 소자, 튜브 렌즈, 및 집광 렌즈를 포함하여 이루어질 수 있다. 또한 실시예에 따라 변조부(510)는 공간 필터(spatial filter)를 더 포함하여 이루어질 수 있다.
간섭계(520)는 적어도 하나 이상의 입사광에서 간섭 신호를 추출하는 것으로, 샘플을 통과한 2차원 광학장을 적어도 하나 이상의 입사광에 따라 측정할 수 있다.
즉, 간섭계(520)는 평면파의 조사 각도에 따른 샘플을 통과한 2차원 광학장을 측정할 수 있다.
간섭계(520)는 샘플을 통과한 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 평면파의 조사 각도를 다양하게 변경하여 2차원 광학장을 측정할 수 있다.
굴절률 영상부(530)는 측정된 2차원 광학장의 정보를 통해 3차원 굴절률 영상을 획득함으로써, 고속 정밀하게 3차원 굴절률을 측정 가능하다.
더 구체적으로, 굴절률 영상부(530)는 측정된 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득할 수 있다.
형광 이미지부(540)는 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득할 수 있다. 이에 따라 파면 제어기를 이용하여 샘플의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
더 구체적으로, 형광 이미지부(540)는 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 평면파 간의 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하고, 복수의 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
이러한 형광 이미지부(540)는 디지털 마이크로미러 소자의 패턴을 통하여 각도와 위상이 조절 가능 광학장 구별을 위한 N개의 패턴과 방위각 스캐닝(azimuthal angle scanning)을 위한 M개의 패턴으로 N*M개의 패턴을 형성할 수 있다.
형광 이미지부(540)는 스테이지나 집광 렌즈(condenser lens)를 z축으로 이동시켜 샘플의 z축의 각 부분을 측정하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
실시예들에 따르면 살아있는 세포와 조직 내부의 3차원 굴절률 분포를 광학적으로 측정하고, 형광 단백질에 의해 표지된 특정 내부 구조를 동시에 구별할 수 있는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법을 제공할 수 있다.
도 6은 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법을 나타내는 흐름도이다.
일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법은, 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계(610), 평면파의 조사 각도에 따른 샘플을 통과한 2차원 광학장을 측정하는 단계(620), 및 측정된 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 단계(630)를 포함한다.
또한, 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계(640)를 더 포함할 수 있다.
이에 따라 파면 제어기를 이용하여 샘플의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
아래에서 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법을 하나의 예를 들어 더 구체적으로 설명하기로 한다.
일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법은 도 5에서 설명한 일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용하여 더 구체적으로 설명할 수 있다.
일 실시예에 따른 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템(500)은 변조부(510), 간섭계(520), 및 굴절률 영상부(530)를 포함하여 이루어질 수 있다. 실시예에 따라 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템(500)은 형광 이미지부(540)를 더 포함하여 이루어질 수 있다.
단계(610)에서, 변조부(510)는 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절할 수 있다.
예컨대 파면 제어기(Wavefront Shaper)는 디지털 마이크로미러 소자 등을 이용할 수 있다. 즉, 변조부(510)는 샘플에 입사되는 평면파의 진행 각도를 제어하기 위해서, 디지털 마이크로미러 소자에 표출(display)하는 패턴을 변경하여 다양한 진행 각도의 평면파를 형성할 수 있다.
또한 변조부(510)는 평면파의 조사 각도를 조절하여 회절광을 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하고, 디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득할 수 있다.
이때, 변조부(510)는 공간 필터(spatial filter)를 이용하여 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용할 수 있다.
단계(620)에서, 간섭계(520)는 평면파의 조사 각도에 따른 샘플을 통과한 2차원 광학장을 측정할 수 있다.
더 구체적으로, 간섭계(520)는 샘플을 통과한 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 평면파의 조사 각도를 다양하게 변경하여 2차원 광학장을 측정할 수 있다.
단계(630)에서, 굴절률 영상부(530)는 측정된 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득할 수 있다.
단계(640)에서, 형광 이미지부(540)는 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득할 수 있다. 이에 따라 파면 제어기를 이용하여 샘플의 3차원 고해상도 형광 이미지와 3차원 굴절률 입체 영상을 동시에 측정할 수 있다.
더 구체적으로, 형광 이미지부(540)는 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 평면파 간의 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하고, 복수의 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
이러한 형광 이미지부(540)는 디지털 마이크로미러 소자의 패턴을 통하여 각도와 위상이 조절 가능 광학장 구별을 위한 N개의 패턴과 방위각 스캐닝(azimuthal angle scanning)을 위한 M개의 패턴으로 N*M개의 패턴을 형성할 수 있다.
한편, 평면파를 발생시키는 광원을 저간섭성 빛을 사용하여 z축으로 특정 부분만 구별하여 측정할 수 있다.
다시 말하면, 형광 이미지부(540)는 회절 격자나 파면 제어기의 종류의 하나인 디지털 마이크로미러 소자를 사용하여 패턴화된 저간섭성 빛(low coherent light)과 z축 이동 스테이지를 이용하여 광학적인 구간 측정(optical sectioning)을를 통하여 3차원의 형광 이미지를 얻는 수 있다.
형광 이미지부(540)는 스테이지나 집광 렌즈(condenser lens)를 z축으로 이동시켜 샘플의 z축의 각 부분을 측정하여 3차원 고해상도 형광 이미지를 획득할 수 있다.
실시예들에 따르면, 하나의 시스템에서 살아 있는 세포의 3차원 초고해상도 형광 이미지와 3차원 굴절률 분포 이미지를 모두 측정할 수 있게 된다. 이 기술을 이용하여 세포 내부의 3차원 단백질 분포와 3차원 초고해상도 형광 이미지를 통하여 표지된 특정 구조를 구별하여 측정할 수 있다.
또한, 세포 내부 구조를 긴 시간 동안 측정하여 시간에 따른 구조 및 생화학적 변화 또한 측정할 수 있다. 본 발명에서 제시한 기술은 세포 수준의 생물학 및 병리학적 연구에 크게 기여할 수 있다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (16)

  1. 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계;
    상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 단계;
    측정된 상기 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 단계; 및
    상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계
    를 포함하고,
    상기 파면 제어기를 이용하여 상기 샘플의 상기 3차원 고해상도 형광 이미지와 상기 3차원 굴절률 입체 영상을 동시에 측정하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 파면 제어기를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계는,
    상기 샘플에 입사되는 상기 평면파의 진행 각도를 제어하기 위해서, 디지털 마이크로미러 소자에 표출(display)하는 패턴을 변경하여 다양한 진행 각도의 평면파를 형성하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  4. 제1항에 있어서,
    상기 파면 제어기를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 단계는,
    상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하는 단계; 및
    디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득하는 단계
    를 포함하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  5. 제4항에 있어서,
    상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하는 단계는,
    공간 필터(spatial filter)를 이용하여 상기 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  6. 제1항에 있어서,
    상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 단계는,
    상기 샘플을 통과한 상기 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 상기 평면파의 조사 각도를 다양하게 변경하여 상기 2차원 광학장을 측정하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  7. 제1항에 있어서,
    상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는,
    상기 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 상기 평면파 간의 위상을 조절하는 단계;
    상기 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하는 단계; 및
    복수의 상기 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득하는 단계
    를 포함하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  8. 제1항에 있어서,
    상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는,
    디지털 마이크로미러 소자의 패턴을 통하여 각도와 위상이 조절 가능 광학장 구별을 위한 N개의 패턴과 방위각 스캐닝(azimuthal angle scanning)을 위한 M개의 패턴으로 N*M개의 패턴을 형성하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  9. 삭제
  10. 제1항에 있어서,
    상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 단계는,
    스테이지나 집광 렌즈(condenser lens)를 z축으로 이동시켜 상기 샘플의 z축의 각 부분을 측정하여 상기 3차원 고해상도 형광 이미지를 획득하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템을 이용한 방법.
  11. 파면 제어기(Wavefront Shaper)를 이용하여 샘플에 입사되는 평면파의 조사 각도를 조절하는 변조부;
    상기 평면파의 조사 각도에 따른 상기 샘플을 통과한 2차원 광학장을 측정하는 간섭계;
    측정된 상기 2차원 광학장의 정보를 광회절 단층 촬영법(optical diffraction tomography) 또는 여과된 역투사 알고리즘(filtered back projection algorithm)을 이용하여 3차원 굴절률 영상을 획득하는 굴절률 영상부; 및
    상기 평면파의 파면의 위상 및 패턴을 제어하여 3차원 고해상도 형광 이미지를 획득하는 형광 이미지부
    를 포함하고,
    상기 파면 제어기를 이용하여 상기 샘플의 상기 3차원 고해상도 형광 이미지와 상기 3차원 굴절률 입체 영상을 동시에 측정하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템.
  12. 삭제
  13. 제11항에 있어서,
    상기 변조부는,
    상기 평면파의 조사 각도를 조절하여 회절광을 상기 샘플에 입사시키고 나머지를 차폐하여 하나의 평면파의 진행 방향을 제어하고, 디지털 마이크로미러 소자의 패턴을 조절하여 원하는 위상 정보를 획득하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템.
  14. 제13항에 있어서,
    상기 변조부는,
    공간 필터(spatial filter)를 이용하여 상기 디지털 마이크로미러 소자에 의한 회절광 중 특정 회절광 하나만 사용하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템.
  15. 제11항에 있어서,
    상기 간섭계는,
    상기 샘플을 통과한 상기 2차원 광학장과 참조파(reference beam)의 간섭계를 만들고, 상기 평면파의 조사 각도를 다양하게 변경하여 상기 2차원 광학장을 측정하는 것
    을 특징으로 하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템.
  16. 제11항에 있어서,
    상기 형광 이미지부는,
    상기 평면파를 특정 패턴으로 입사시키고 패턴을 구성하는 상기 평면파 간의 위상을 조절하여 제어된 패턴들에 의하여 형광 이미지를 획득하고, 복수의 상기 형광 이미지들을 알고리즘을 통해 고해상도의 2차원 형광 이미지를 재건하여 3차원 고해상도 형광 이미지를 획득하는 것
    를 포함하는 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템.
KR1020160072304A 2016-06-10 2016-06-10 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법 KR101865624B1 (ko)

Priority Applications (8)

Application Number Priority Date Filing Date Title
KR1020160072304A KR101865624B1 (ko) 2016-06-10 2016-06-10 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법
EP16183755.4A EP3255414A1 (en) 2016-06-10 2016-08-11 3d refractive index tomography and structured illumination microscopy system using wavefront shaper and method thereof
CA2938995A CA2938995A1 (en) 2016-06-10 2016-08-16 3d refractive index tomography and structured illumination microscopy system using wavefront shaper and method thereof
JP2016160840A JP6622154B2 (ja) 2016-06-10 2016-08-18 波面制御器を用いた3次元屈折率映像撮影および蛍光構造化照明顕微鏡システムと、これを利用した方法
US15/243,265 US10082662B2 (en) 2016-06-10 2016-08-22 3D refractive index tomography and structured illumination microscopy system using wavefront shaper and method thereof
CN201610712730.3A CN107490562B (zh) 2016-06-10 2016-08-23 利用波面整形器的超高速三维折射率影像拍摄和荧光结构光照明显微镜系统及其使用方法
US16/308,329 US10976532B2 (en) 2016-06-10 2017-06-09 Structured illumination microscopy system using digital micromirror device and time-complex structured illumination, and operation method therefor
PCT/KR2017/006034 WO2017213464A1 (ko) 2016-06-10 2017-06-09 디지털 마이크로미러 소자와 시간 복합 구조화 조명을 이용한 구조화 조명 현미경 시스템 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160072304A KR101865624B1 (ko) 2016-06-10 2016-06-10 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법

Publications (2)

Publication Number Publication Date
KR20170140459A KR20170140459A (ko) 2017-12-21
KR101865624B1 true KR101865624B1 (ko) 2018-06-11

Family

ID=56682035

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160072304A KR101865624B1 (ko) 2016-06-10 2016-06-10 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법

Country Status (6)

Country Link
US (1) US10082662B2 (ko)
EP (1) EP3255414A1 (ko)
JP (1) JP6622154B2 (ko)
KR (1) KR101865624B1 (ko)
CN (1) CN107490562B (ko)
CA (1) CA2938995A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106252885B (zh) * 2016-09-19 2018-07-20 深圳市华讯方舟太赫兹科技有限公司 应用于毫米波成像系统的电扫阵列天线装置
US10401605B2 (en) * 2017-05-02 2019-09-03 SCREEN Holdings, Co., Ltd. Structured illumination in inverted light sheet microscopy
CN107219619A (zh) * 2017-06-29 2017-09-29 清华大学 三维折射率层析显微成像系统及其方法
CN110824722B (zh) * 2018-08-07 2021-10-15 宁波舜宇光电信息有限公司 结构光投射模组组装装置及投射模组的组装、检测方法
CN109580457B (zh) * 2018-11-01 2021-05-04 南京理工大学 基于led阵列编码照明的三维衍射层析显微成像方法
KR102129382B1 (ko) * 2018-12-17 2020-07-02 주식회사 토모큐브 간섭 패턴에서 파동의 위상 정보 추출 방법 및 장치
CN113508418A (zh) * 2019-03-13 2021-10-15 唐摩库柏公司 使用三维定量相位成像识别微生物
KR102302333B1 (ko) * 2019-11-05 2021-09-16 주식회사 토모큐브 3차원 굴절률 영상과 딥러닝을 활용한 비표지 방식의 3차원 분자 영상 생성 방법 및 장치
CN111610621B (zh) * 2020-01-19 2022-04-08 北京大学 一种双模态显微成像系统和方法
KR102272366B1 (ko) * 2020-01-22 2021-07-02 주식회사 토모큐브 위상 정보 추출과 입체 영상 구성 방법 및 장치
KR102272149B1 (ko) * 2020-02-26 2021-07-02 주식회사 토모큐브 3차원 굴절률 텐서의 측정 방법 및 장치
KR102355140B1 (ko) * 2020-07-28 2022-02-07 주식회사 토모큐브 저간섭성 광원과 다중 패턴 조명을 이용한 3차원 광회절 단층촬영 방법 및 장치
CN116194818A (zh) 2020-09-11 2023-05-30 浜松光子学株式会社 观察装置和观察方法
CN112666135B (zh) * 2020-11-26 2023-04-21 中国科学技术大学 一种三维显微成像装置及方法
CN113702288B (zh) * 2021-08-18 2022-07-01 北京大学 一种双模态显微成像系统及其成像方法
JP2023079437A (ja) 2021-11-29 2023-06-08 浜松ホトニクス株式会社 観察装置および観察方法
CN116399831B (zh) * 2023-06-06 2023-08-15 广东麦特维逊医学研究发展有限公司 一种折射率检测装置及检测方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007212305A (ja) 2006-02-09 2007-08-23 V Technology Co Ltd 微小高さ測定装置及び変位計ユニット
KR101352803B1 (ko) 2012-12-03 2014-01-23 광주과학기술원 편광 민감 광 간섭 단층 촬영장치를 위한 파장 가변 레이저
JP2014228425A (ja) 2013-05-23 2014-12-08 株式会社 清原光学 3次元干渉計
US20150177133A1 (en) * 2007-07-10 2015-06-25 Massachusetts Institute Of Technology Tomographic phase microscopy
JP2015519604A (ja) * 2012-05-16 2015-07-09 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 光学顕微鏡および光学顕微鏡を用いた画像記録方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3327948B2 (ja) * 1992-06-09 2002-09-24 オリンパス光学工業株式会社 光学像再構成装置
CN100457041C (zh) * 2005-11-17 2009-02-04 中国科学院高能物理研究所 X射线折射衬度ct数据采集方法和重建方法
CN101655601B (zh) * 2008-08-22 2012-09-26 麦克奥迪实业集团有限公司 一种基于dmd的结构光显微镜成像方法及系统
CN101482503B (zh) * 2009-02-20 2011-06-29 山东师范大学 一种相干衍射成像方法及其处理装置
US8532398B2 (en) * 2010-03-26 2013-09-10 General Electric Company Methods and apparatus for optical segmentation of biological samples
EP2736403B1 (en) * 2011-07-29 2022-05-18 Ecole Polytechnique Fédérale de Lausanne (EPFL) Apparatus for quantitative phase tomography through linear scanning with coherent and non-coherent detection
US9360660B2 (en) * 2012-05-24 2016-06-07 Northwestern University Methods and apparatus for laser scanning structured illumination microscopy and tomography
JP6801846B2 (ja) * 2013-02-05 2020-12-16 マサチューセッツ インスティテュート オブ テクノロジー 3dホログラフィックイメージングフローサイトメトリ
JP6196825B2 (ja) * 2013-07-09 2017-09-13 オリンパス株式会社 顕微鏡システム、及び、試料の屈折率測定方法
WO2015109323A2 (en) * 2014-01-17 2015-07-23 The Trustees Of Columbia University In The City Of New York Systems and methods for three-dimensional imaging
JP6518041B2 (ja) * 2014-05-21 2019-05-22 浜松ホトニクス株式会社 光刺激装置及び光刺激方法
TW201546486A (zh) * 2014-06-11 2015-12-16 Univ Nat Cheng Kung 利用數位微型反射鏡元件之多光子螢光激發顯微裝置
US10591392B2 (en) * 2014-07-03 2020-03-17 Applikate Technologies Llc Simultaneous dehydration and staining of tissue for deep imaging
CN104515759B (zh) * 2014-12-16 2017-05-31 中国科学院苏州生物医学工程技术研究所 非线性结构光照明显微成像方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007212305A (ja) 2006-02-09 2007-08-23 V Technology Co Ltd 微小高さ測定装置及び変位計ユニット
US20150177133A1 (en) * 2007-07-10 2015-06-25 Massachusetts Institute Of Technology Tomographic phase microscopy
JP2015519604A (ja) * 2012-05-16 2015-07-09 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 光学顕微鏡および光学顕微鏡を用いた画像記録方法
KR101352803B1 (ko) 2012-12-03 2014-01-23 광주과학기술원 편광 민감 광 간섭 단층 촬영장치를 위한 파장 가변 레이저
JP2014228425A (ja) 2013-05-23 2014-12-08 株式会社 清原光学 3次元干渉計

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SHIN, SW, et al. Active illumination using a digital micromirror device for quantitative phase imaging. Optics letters, 2015, 40.22: 5407-5410.(2015.10.16.) 1부. *

Also Published As

Publication number Publication date
CA2938995A1 (en) 2017-12-10
JP6622154B2 (ja) 2019-12-18
CN107490562B (zh) 2021-03-05
US20170357084A1 (en) 2017-12-14
JP2017219826A (ja) 2017-12-14
US10082662B2 (en) 2018-09-25
CN107490562A (zh) 2017-12-19
KR20170140459A (ko) 2017-12-21
EP3255414A1 (en) 2017-12-13

Similar Documents

Publication Publication Date Title
KR101865624B1 (ko) 파면 제어기를 이용한 초고속 3차원 굴절률 영상 촬영 및 형광 구조화 조도 현미경 시스템 및 이를 이용한 방법
Kim et al. Correlative three-dimensional fluorescence and refractive index tomography: bridging the gap between molecular specificity and quantitative bioimaging
US10976532B2 (en) Structured illumination microscopy system using digital micromirror device and time-complex structured illumination, and operation method therefor
CN107850530B (zh) 用于对样本进行光学成像的装置和方法
AU2006224935B2 (en) Optical manipulation system using a plurality of optical traps
JP6716121B2 (ja) ディジタルホログラフィック顕微鏡
JP7233129B2 (ja) 時間的多重化ライトシートを利用する高速体積蛍光顕微鏡法のための装置及び方法
US10310246B2 (en) Converter, illuminator, and light sheet fluorescence microscope
Brunstein et al. Full-field dual-color 100-nm super-resolution imaging reveals organization and dynamics of mitochondrial and ER networks
Kemper et al. Label-free quantitative in vitro live cell imaging with digital holographic microscopy
CN106885796B (zh) 一种超分辨率荧光数字全息断层显微成像系统与方法
CN107250716A (zh) 动态高速高灵敏度成像装置及成像方法
Schürmann et al. Refractive index measurements of single, spherical cells using digital holographic microscopy
JP6667539B2 (ja) 光遠隔測定装置
Potcoava et al. Spatio-temporal performance in an incoherent holography lattice light-sheet microscope (IHLLS)
JP2017026596A (ja) 三次元屈折率測定方法および三次元屈折率測定装置
Baffou Wavefront microscopy using quadriwave lateral shearing interferometry: From bioimaging to nanophotonics
KR101888924B1 (ko) 디지털 마이크로미러 소자와 시간 복합 구조화 조명을 이용한 구조화 조명 현미경 시스템 및 그 동작 방법
Xiu et al. Controllable tomography phase microscopy
KR101784336B1 (ko) 파면 제어기를 활용한 초고속 고정밀 3차원 굴절률 측정 방법 및 장치
KR102154649B1 (ko) 샘플 내의 타겟 오브젝트를 측정하기 위한 고속 이미징 시스템
Mondal A perspective on light sheet microscopy and imaging: Applications across the breadth of applied physics and biophysics
KR102272366B1 (ko) 위상 정보 추출과 입체 영상 구성 방법 및 장치
Ďuriš et al. Single-shot super-resolution quantitative phase imaging allowed by coherence gate shaping
Zheng et al. Illumination-Coded Optical Diffraction Tomography

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right