CN108601505B - 成像设备、成像方法和成像系统 - Google Patents

成像设备、成像方法和成像系统 Download PDF

Info

Publication number
CN108601505B
CN108601505B CN201680081453.9A CN201680081453A CN108601505B CN 108601505 B CN108601505 B CN 108601505B CN 201680081453 A CN201680081453 A CN 201680081453A CN 108601505 B CN108601505 B CN 108601505B
Authority
CN
China
Prior art keywords
imaging
speckle image
unit
speckle
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680081453.9A
Other languages
English (en)
Other versions
CN108601505A (zh
Inventor
一木洋
中尾勇
桑山哲朗
岸井典之
中岛悠策
松井健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108601505A publication Critical patent/CN108601505A/zh
Application granted granted Critical
Publication of CN108601505B publication Critical patent/CN108601505B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062—Arrangements for scanning
    • A61B5/0066—Optical coherence imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026—Measuring blood flow
    • A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4887—Locating particular structures in or on the body
    • A61B5/489—Blood vessels
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0025—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/48—Laser speckle optics
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G02B7/09—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted for automatic focusing or varying magnification
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/30—Systems for automatic generation of focusing signals using parallactic triangle with a base line
    • G02B7/32—Systems for automatic generation of focusing signals using parallactic triangle with a base line using active means, e.g. light emitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H04N25/611—Correction of chromatic aberration
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2407—Optical details

Abstract

提供了甚至使散斑图像成像设备能够检测焦点的成像技术。根据本发明的成像设备配备有：相干光源，用相干光照射成像物体；非相干光源，用非相干光照射成像物体；散斑图像成像单元，捕捉从来自用相干光照射的成像物体的散射光获得的散斑图像；非散斑图像成像单元，捕捉从来自用非相干光照射的成像物体的反射光获得的非散斑图像；以及焦点检测单元，基于非散斑图像成像单元的焦点位置来检测散斑图像成像单元的焦点。

Description

成像设备、成像方法和成像系统
技术领域
本技术涉及一种成像设备，更具体地，涉及能够检测用于捕捉散斑图像的焦点的一种成像设备、一种成像方法和一种成像系统。
背景技术
在相关技术中，为了掌握诸如血管或细胞等生物样本的形状、结构等，已经开发了一种使用光学方法的成像设备和成像方法(参考专利文献1)。
在专利文献1中公开的成像系统中，在第一时间捕捉通过将来自发光单元的光反射到物体上并干涉而获得的光的干涉光图像，并且在第二时间捕捉从物体发射的光的发光图像。
另一方面，在将诸如血管等流路用作成像物体的情况下，在使用光学方法的成像技术中，担心发生各种噪声可能导致检测精度劣化。作为一种噪声，已知散斑。散斑是根据被照射表面的不均匀形状而在照射表面上出现斑点状摇摆图案的现象。近年来，相对于使用作为一种噪声的散斑来对血管等流路进行成像的方法，也开发了技术。
散斑是由于光路中的散射等而导致的随机干涉/衍射图案。另外，散斑的大小由称为散斑对比度的指标表示，该散斑对比度是通过将强度分布的标准偏差除以强度分布的平均值而获得的值。当通过使用成像光学系统观察用相干光照射的成像物体时，在成像平面上观察到由成像物体的散射引起的散斑。然后，当成像物体移动或改变形状时，观察到与该移动或改变对应的随机散斑图案。
当观察到诸如血液等光散射流体时，散斑图案不断地根据由流动引起的精细形状的变化而改变。此时，在图像平面上设置成像元件，并且在比散斑图案的变化足够更长的曝光时间，对流体进行成像时，血液流动的部分(即，血管的一部分)的散斑对比度在平均时间减少。可以通过使用散斑对比度的这种变化来执行血管造影。
现有技术文献
专利文献
专利文献1：特开2009-136396号公报
发明内容
技术问题
在使用这种散斑的成像设备中，由于由单目相机测量散斑图案，所以与正常明视场成像相比，不能识别成像的焦点，结果，捕捉具有低分辨率的散斑图像。另外，存在由散斑引起的大粒子噪声、不能获取要捕捉的图像的深度信息等问题。
有鉴于此，本技术的主要目的是提供一种甚至在用于散斑图像的成像设备中能够检测焦点的成像技术。
解决问题的方法
根据本技术，提供了一种成像设备，包括：相干光源，用相干光照射成像物体；非相干光源，用非相干光照射成像物体；散斑图像成像单元，捕捉从用相干光照射的成像物体的散射光获得的散斑图像；非散斑图像成像单元，捕捉从用非相干光照射的成像物体的反射光获得的非散斑图像；以及焦点检测单元，基于非散斑图像成像单元的焦点位置来检测散斑图像成像单元的焦点。
此外，根据本技术的成像设备还可以包括：焦点调整单元，调整相对于非散斑图像成像单元的焦点的散斑图像成像单元的焦距；以及显示单元，显示基于由所述焦点调整单元调整的焦点捕捉的散斑图像。
根据本技术的成像设备还可以包括像差校正单元，校正在非散斑图像成像单元和散斑图像成像单元之间发生的像差。在成像设备中，像差校正单元可以被配置为校正色差。
根据本技术的成像设备还可以包括：兴趣区域指定单元，指定由所述非散斑图像成像单元捕捉的非散斑图像中的任意兴趣区域；以及光照射调整单元，基于所述兴趣区域指定单元的兴趣区域的指定信息，来调整所述相干光源的照射位置。
此外，根据本技术，还提供了一种成像系统，包括：相干光源，用相干光照射成像物体；非相干光源，用非相干光照射成像物体；散斑图像成像装置，捕捉从用相干光照射的成像物体的散射光获得的散斑图像；非散斑图像成像装置，捕捉从用非相干光照射的成像物体的反射光获得的非散斑图像；以及焦点检测装置，基于非散斑图像成像装置的焦点位置来检测散斑图像成像装置的焦点。
所述成像系统还可以包括：焦点调整装置，调整相对于非散斑图像成像装置的焦点的散斑图像成像装置的焦距；以及显示装置，显示基于由所述焦点调整装置调整的焦点捕捉的散斑图像。
根据本技术的成像系统还可以包括像差校正装置，校正在非散斑图像成像装置和散斑图像成像装置之间发生的像差。在成像系统中，像差校正装置可以被配置为校正色差。
根据本技术的成像系统还可以包括：兴趣区域指定装置，指定由所述非散斑图像成像装置捕捉的非散斑图像中的任意兴趣区域；以及光照射调整装置，基于所述兴趣区域指定装置的兴趣区域的指定信息，来调整所述相干光源的照射位置。
根据本技术，还提供了一种成像方法，包括：相干光照射步骤，用于用相干光照射成像物体；非相干光照射步骤，用于用非相干光照射成像物体；散斑图像成像步骤，用于捕捉从用相干光照射的成像物体的散射光获得的散斑图像；非散斑图像成像步骤，用于捕捉从用非相干光照射的成像物体的反射光获得的非散斑图像；以及焦点检测步骤，用于基于非散斑图像成像步骤中的焦点位置来检测用于捕捉散斑图像的焦点。
发明的有益效果
根据本技术，可以在用于散斑图像的成像技术中检测焦点，结果，可以获得具有高分辨率的散斑图像。
另外，在本文中描述的效果不一定受到限制，并且可以是旨在在本技术中描述的任何效果。
附图说明
图1是示意性示出根据本技术的成像设备的第一实施方式的概念的示意性概念图；
图2是示出图1所示的成像设备的技术原理的示意性概念图；
图3是示意性地示出根据本技术的成像设备的第二实施方式的概念的示意性概念图；
图4是示意性示出根据本技术的成像设备的第三实施方式的概念的示意性概念图；
图5是示意性地示出根据本技术的成像系统的概念的示意性概念图；
图6是根据本技术的成像方法的流程图。
具体实施方式
下面将参考附图，描述用于实现本技术的适当实施方式。下面描述的每个实施方式证出了本技术的代表性实施方式的示例，使得本技术的范围不被实施方式狭义地解释。另外，将按照以下顺序进行描述。
1、根据第一实施方式的成像设备
(1)相干光源
(2)非相干光源
(3)散斑图像成像单元
(4)非散斑图像成像单元
(5)焦点检测单元
(6)组合单元
(7)分析单元
(8)存储单元
(9)显示单元
(10)成像物体
2、根据第二实施方式的成像设备
(1)焦点调整单元
3、根据第三实施方式的成像设备
(1)像差校正单位
4、根据第四实施方式的成像设备
(1)兴趣区域指定单元
(2)光照射调整单元
5、根据本技术的成像系统
(1)相干光源
(2)非相干光源
(3)散斑图像成像装置
(4)非散斑图像成像装置
(5)焦点检测装置
(6)组合装置
(7)分析装置
(8)存储装置
(9)显示装置
(10)焦点调整装置
(11)像差校正装置
(12)兴趣区域指定装置
(13)光照射调整装置
6、根据第一实施方式的成像方法
(1)相干光照射步骤
(2)非相干光照射步骤
(3)散斑图像成像步骤
(4)非散斑图像成像步骤
(5)焦点检测步骤
(6)组合步骤
(7)分析步骤
(8)存储步骤
(9)显示步骤
(10)焦点调整步骤
(11)像差校正步骤
(12)兴趣区域指定步骤
(13)光照射调整步骤
1、根据第一实施方式的成像设备
图1是示意性地示出根据本技术的成像设备的第一实施方式的示意性概念图。根据第一实施方式的成像设备1至少包括相干光源11、非相干光源12、散斑图像成像单元13、非散斑图像成像单元14和焦点检测单元15。另外，根据需要，成像设备还可以包括组合单元16、分析单元17、存储单元18、显示单元19等。下面将详细描述每个部件。
(1)相干光源
相干光源11用相干光照射成像物体O。从相干光源11发射的相干光表示光通量中的任意两点处的光波之间的相位关系在时间上不变且恒定的光，因此，甚至在通过任意方法划分光通量，然后，提供大的光程差并再次覆盖划分的光通量的情况下，显示完美的相干性。
相干光源11的类型不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明激光等。作为发射激光的相干光源11，可以举例说明氩离子(Ar)激光器、氦氖(He-Ne)激光器、染料激光器、氪(Cr)激光器、半导体激光器、半导体激光器和波长转换光学元件组合的固态激光器等，并且可以自由地组合使用其中的一种或两种或更多种类型。
(2)非相干光源
非相干光源12用非相干光照射成像物体O。非相干光表示像物体光(物体波)那样几乎不具有相干性的光。在本文中，期望非相干光的波长近似等于从相干光源11发射的相干光的波长。因此，当照射非相干光时，期望采用能够使用带通滤波器调整非相干光的波长的配置。
非相干光源12的类型不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明发光二极管等。作为其他光源，可以举例说明氙灯、金属卤化物灯、高压汞灯等。
(3)散斑图像成像单元
根据本技术的成像设备1包括散斑图像成像单元13。在该散斑图像成像单元13中，基于从用相干光照射的成像物体O获得的散射光执行散斑图像成像。更具体地，基于由焦点检测单元15检测到的焦点执行散斑图像成像。
由散斑图像成像单元13执行的成像方法不受特别限制，只要本技术的效果不受到损害，并且可以选择并且自由地组合使用一种或两种或更多种已知的成像方法。例如，可以举例说明使用诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器等成像元件的成像方法。
另外，散斑图像成像单元13可以测量捕捉图像中散斑的亮度分布。在本文中，当通过成像光学系统观察通过使用相干光照射的物体时，观察到由物体在图像平面上的散射引起的散斑。在散斑图像成像单元13中，使用例如亮度计来测量捕捉图像中散斑的亮度分布。另外，可以从诸如CCD或CMOS等成像元件捕捉的图像来计算散斑亮度分布。
测量亮度分布的方法不受特别限制，只要本技术的效果不受到损害，并且可以选择并且自由地组合使用一种或两种或更多种已知的计算方法。
在散斑图像成像单元13中，例如，生成基于散斑亮度分布来映射伪血流过的伪血管的图像等。在本文中，由于散斑是如上所述的随机干涉/衍射图案，因此当诸如血液等散射流体随时间移动或改变时，散斑也随时间变化。为此，可以观察流体和其他部分之间的边界。
注意，为了阐明发生散斑的部分，散斑图像成像单元13可以具有以下配置：例如，通过使用多个散斑图像来执行均衡，以减少散斑图像的不规则性。
(4)非散斑图像成像单元
根据本技术的成像设备1包括非散斑图像成像单元14。在该非散斑图像成像单元14中，基于从用非相干光照射的成像物体O获得的反射光，捕捉明视场图像。在本文中，因为非相干光是几乎不呈现相干性的光，所以在基于非相干光的捕捉图像中，不会发生作为随机干涉/衍射图案的散斑。在下文中，为了便于描述，不发生散斑的捕捉图像称为“非散斑图像”。由于在非散斑图像成像单元14中执行的成像方法与由散斑图像成像单元13执行的成像方法相同，所以在本文中省略其描述。
(5)焦点检测单元
根据本技术的成像设备1包括焦点检测单元15，其检测用于捕捉散斑图像的焦点。
由于散斑是随机干涉/衍射图案，所以在散斑图像成像的情况下，难以识别焦点。另一方面，在图像形成系统向前侧或后侧偏离焦点并且成像物体O沿垂直方向偏离光轴的情况下，从成像物体O的一个点开始形成一个散斑形状的干涉光路在向前侧偏离焦点的情况下穿过相对于图像形成系统的主光线在成像器上接近光轴的点，并且在向后侧偏离焦点的情况下穿过远离光轴的点。结果，在捕捉非散斑图像(即，明视场图像)时，在捕捉散斑图像的焦点位置相对于焦点向用户侧或后侧移动的情况下，散斑相对于投影在明视场图像上的运动体以与运动体的方向相同的方向或以与运动体的方向不同的方向移动。在下面的描述中，这种现象将被称为“散斑相关现象”。
基于散斑相关现象，焦点检测单元15检测散斑图像成像单元13的焦点。更具体地，首先，作为第一步骤，与非散斑图像的焦点位置相比，散斑图像成像单元13的焦点位置设置在用户的更远前侧，并且识别散斑的移动方向。接下来，作为第二步骤，与非散斑图像的焦点位置相比，散斑图像成像单元13的焦点位置设置在用户的更远后侧，并且识别散斑的移动方向。随后，在设置在前侧或后侧的散斑图像成像单元13的焦点位置逐渐更靠近非散斑图像成像单元14的焦点位置的同时，检测散斑不在明视场图像上相对于运动体移动的焦点位置。
以这种方式，焦点检测单元15可以通过使用散斑的相关现象来检测散斑不在图像上移动的散斑图像的焦点。
在本文中，检测方法仅仅是一个示例，并且在上述方法中，在第一步骤之后执行第二步骤。然而，可以在第二步骤之后执行第一步骤。
(6)组合单元
根据本技术的成像设备1包括组合单元16。组合单元16组合由散斑图像成像单元13捕捉的散斑图像和由非散斑图像成像单元14捕捉的非散斑图像。具体地，通过叠加非散斑图像的图像信息和散斑图像的图像信息来生成散斑组合图像。
注意，散斑组合图像的生成方法没有特别限定，可以采用公知的方法。
(7)分析单元
根据需要，根据本技术的成像设备1可以包括分析单元17。分析单元17通过使用由组合单元16生成的散斑组合图像来分析成像物体O的状态。
在本文中，分析单元17还可以通过使用当焦点检测单元15检测到焦点时观察到的散斑的相关现象来分析散斑的移动速度。
即，如上所述，在散斑相关现象中，散斑在明视场图像上相对于运动体移动。为此，分析单元17可以被配置为在散斑图像成像单元13的焦点位置从明视场图像的焦点位置移动的状态下观察移动图像并且测量散斑的移动速度。
在这种情况下，例如，在成像物体O是血管的情况下，当诸如血液等散射流体随时间移动或改变时，散斑也相应地随时间变化。因此，可以由分析单元17测量血流速度。
注意，分析单元17不一定包括在根据本技术的成像设备1中，并且也可以通过使用外部分析装置等来分析成像物体O的状态。
(8)存储单元
根据本技术的成像设备1还可以包括存储单元18，该存储单元18存储由散斑图像成像单元13捕捉的散斑图像、由非散斑图像成像单元14捕捉的非散斑图像、由组合单元16生成的散斑组合图像、由焦点检测单元15检测到的散斑图像的焦点、由分析单元17分析的分析结果等。
该存储单元18不一定包括在根据本技术的成像设备1中，但是成像设备可以连接到例如外部存储装置，以存储散斑图像等。
(9)显示单元
根据本技术的成像设备1还可以包括显示单元19，该显示单元19显示由散斑图像成像单元13捕捉的散斑图像、由非散斑图像成像单元14捕捉的非散斑图像、由组合单元16生成的组合图像、由分析单元17分析的分析结果等。另外，显示单元19可以显示由散斑图像成像单元13和非散斑图像成像单元14测量的亮度分布，以便叠加在散斑图像上。显示单元19不一定包括在根据本技术的成像设备1中，并且可以通过使用例如外部显示器等对成像物体O执行光照射。
(10)成像物体
虽然根据本技术的成像设备1可以将各种物体设置为成像物体，但是成像设备1可以适当地用于将包含例如流体的物体作为成像物体O来成像。由于散斑的性质，不容易从流体中生成散斑。为此，当通过使用根据本技术的成像设备1对包含流体的物体成像时，可以获得流体与其他部分之间的边界、流体的流速等。
更具体地，生物组织可以被例证为成像物体O，并且血液可以被例证为流体。例如，当根据本技术的成像设备1安装在手术显微镜、手术内窥镜等上时，可以在识别血管的位置的同时进行手术。因此，可以进行更安全和高度准确的手术，因此，可以有助于医疗技术的进一步发展。
在如上所述的根据第一实施方式的成像设备1中，由于焦点检测单元15可以检测用于捕捉散斑图像的焦点，所以可以获取具有高分辨率的散斑图像。
另外，例如，在对血液流动的血管成像时，可以观察散斑根据血液的时间波动而变化，使得可以获取可以准确地识别血球的流路的图像。结果，可以准确地观察血管相对于生物组织(例如，心脏等)的位置。
2、根据第二实施方式的成像设备
图2是示出根据可以应用本技术的第二实施方式的成像设备的示意性概念图。
根据第二实施方式的成像设备201与根据第一实施方式的成像设备1的不同之处在于，包括调整散斑图像成像单元的焦距的焦点调整单元21，并且显示单元19显示散斑图像，该散斑图像的焦点由焦点调整单元21调整，结果，该散斑图像被捕捉。
另一方面，这些实施方式的相同之处在于，至少包括相干光源11、非相干光源12、散斑图像成像单元13、非散斑图像成像单元14和焦点检测单元15，此外，这些实施方式的相同之处在于，根据需要，可以包括组合单元16、分析单元17和存储单元18。
因此，在根据第二实施方式的成像设备201的以下描述中，将省略根据第一实施方式的成像设备1共有的配置的描述。在下文中，将描述焦点调整单元21。
(1)焦点调整单元
根据第二实施方式的成像设备201包括焦点调整单元21。在焦点检测单元15捕捉散斑图像时，焦点调整单元21执行在检测焦点的阶段改变散斑图像成像单元13的焦距的处理。
具体地，执行由焦点检测单元15执行的处理，即，相对于非散斑图像成像单元14的焦点位置移动散斑图像成像单元13的焦点位置的处理。例如，执行与非散斑图像的焦点位置相比，将散斑图像成像单元13的焦点位置设置在用户的更远前侧的操作或者与非散斑图像的焦点位置相比，将散斑图像成像单元13的焦点位置设置在用户的更远后侧的操作。
另外，在根据第二实施方式的成像设备201中，由焦点调整单元21调整的焦点通过焦点检测单元15输入到散斑图像成像单元13，因此，散斑图像成像单元13基于输入的信息捕捉散斑图像。
然后，最后，由显示单元19显示基于检测到的焦点捕捉的散斑图像。另外，显示单元19被配置为在散斑正在相对于运动体在焦点调整单元21的过程阶段中观察到的成像物体O上移动的状态下，显示图像。
在如上所述的根据第二实施方式的成像设备201中，由于包括焦点调整单元21，并且显示单元19被配置为显示基于由焦点调整单元21检测到的焦点捕捉的散斑图像，所以通过使用散斑的相关现象，可以通过视觉观察准确地掌握散斑相对于明视场图像上的运动体的移动方向。
结果，例如，在对血管成像的情况下，可以准确地掌握血球的流动方向并掌握血管的类型，例如，成像的血管是动脉还是静脉。
3、根据第三实施方式的成像设备
接下来，将参考图3描述根据应用本技术的第三实施方式的成像设备301。图3是根据第三实施方式的成像设备301的示意性概念图。
根据第三实施方式的成像设备301与根据第一实施方式的成像设备1的不同之处在于，提供了像差校正单元31。另一方面，这些实施方式的相同之处在于，至少包括相干光源11、非相干光源12、散斑图像成像单元13、非散斑图像成像单元14和焦点检测单元15，此外，这些实施方式的相同之处在于，根据需要，可以包括组合单元16、分析单元17、存储单元18、显示单元19和焦点调整单元21。
为此，在根据第三实施方式的成像设备301的以下描述中，将省略根据第一实施方式的成像设备1共有的配置的描述。在下文中，将描述像差校正单元31。
(1)像差校正单元
在根据第三实施方式的成像设备301中，由散斑图像成像单元13捕捉散斑图像，并且由非散斑图像成像单元14捕捉非散斑图像。即，成像设备301构成复眼成像设备。因此，在成像设备301中的散斑图像和非散斑图像之间发生像差。
在这种情况下，在生成包括彼此叠加的非散斑图像和散斑图像的组合图像的情况下，需要尽可能地消除像差。像差校正单元31执行校正像差的处理。
可以由像差校正单元31校正的像差的类型不受特别限制，并且可以校正众所周知的像差，例如，球面像差、彗形像差、像散、色差(轴向色差、倍率色差)、波前像差、场曲率和变形图像等。由于根据本技术的成像设备使用具有不同波长的两种类型的光源，所以期望成像设备被配置为尤其校正这些像差中的色差。
在本文中，校正像差的方法不受特别限制，并且可以采用已知的方法。例如，可以使用利用可变形反射镜的方法、校正所获取的图像本身的方法等。
根据第三实施方式的成像设备301可以包括测量像差的像差测量单元32。在像差测量单元32中，可以通过使用已知的方法来测量像差。例如，可以考虑采用通过光学干涉测量来分析干涉条纹的方法。
然后，由像差测量单元32测量的像差被输入到像差校正单元31，因此，像差校正单元31被配置为基于输入的信息校正像差。
在具有像差校正单元31的根据第三实施方式的成像设备301中，由于可以由像差校正单元31校正在散斑图像和非散斑图像之间发生的像差，特别是色差，因此可以提高散斑图像的分辨率和非散斑图像的分辨率，并且还可以提高包括散斑图像和非散斑图像的组合图像的分辨率。
结果，例如，在对血液流动的血管成像的情况下，可以准确地观察血管相对于生物组织的位置。
4、根据第四实施方式的成像设备
接下来，将参考图4描述根据应用本技术的第四实施方式的成像设备401。图4是根据第四实施方式的成像设备401的示意性概念图。
根据第四实施方式的成像设备401与根据第一实施方式的成像设备1的不同之处在于，提供了兴趣区域指定单元41和光照射调整单元42。另一方面，这些实施方式的相同之处在于，至少包括相干光源11、非相干光源12、散斑图像成像单元13、非散斑图像成像单元14和焦点检测单元15，此外，这些实施方式的相同之处在于，根据需要，可以包括组合单元16、分析单元17、存储单元18、显示单元19、焦点调整单元21、像差校正单元31等。
为此，在根据第四实施方式的成像设备401的以下描述中，将省略根据第一实施方式的成像设备1共有的配置的描述。在下文中，将描述兴趣区域指定单元41和光照射调整单元42。
(1)兴趣区域指定单元
根据第四实施方式的成像设备401包括兴趣区域指定单元41，用于指定用户从非散斑图像中观察的区域。
更具体地，兴趣区域指定单元401识别由显示单元19显示的非散斑图像，并选择用户对观察感兴趣的任意区域。此后，兴趣区域指定单元41检测由用户选择的兴趣区域的位置信息。另外，基于关于检测到的兴趣区域的信息，指定在非散斑图像上示出的成像物体O内的兴趣区域。
注意，由兴趣区域指定单元41执行的指定方法不受特别限制，并且可以使用已知的方法。例如，认为兴趣区域指定单元41检测包括由用户选择的兴趣区域的组合图像的在水平方向和垂直方向上的每个像素的位置信息，并且基于检测到的位置信息，指定兴趣区域。
(2)光照射调整单元
根据第四实施方式的成像设备401包括光照射调整单元42，用于用光照射由兴趣区域指定单元41指定的兴趣区域。
具体地，光照射调整单元42的配置不受特别限制，并且光照射调整单元42被配置为例如双轴致动器，该双轴致动器在水平和垂直方向上移动非相干光源12并且停止非相干光源12。
然后，光照射调整单元42基于由兴趣区域指定单元41检测到的兴趣区域的位置信息，通过移动非相干光源12来调整照射方向，使得用非相干光照射兴趣区域。
在包括兴趣区域指定单元41和光照射调整单元42的根据第四实施方式的成像设备401中，由于仅用户感兴趣的区域可以用非相干光照射，所以可以在要捕捉的散斑图像中的兴趣区域中，将散斑的强度分布最大化。结果，可以生成散斑图像，因此，生成具有高分辨率的组合图像。由于可以将非相干光的照射范围限于兴趣区域的范围，即，可以获得最小必要照度，所以非相干光的相干性可以保持恒定。另外，可以减少由于用输出密度高且对人体有害的非相干光照射而对用户造成的不利影响。
5、成像系统
本技术还提供一种成像系统。
图5是示意性示出根据本技术的第一实施方式的成像系统501的示意性概念图。成像系统501至少包括相干光源110、非相干光源120、散斑图像成像装置130、非散斑图像成像装置140和焦点检测装置150。另外，根据需要，成像系统501还可以包括组合装置160、分析装置170、存储装置180、显示装置190、焦点调整装置210、像差校正装置220、兴趣区域指定装置230和光照射调整装置240。下面将描述每个装置。
(1)相干光源
相干光源110用相干光照射成像物体O。从相干光源110发射的相干光表示光通量中的任意两点处的光波之间的相位关系在时间上不变且恒定的光，因此，甚至在通过任意方法划分光通量，然后，提供大的光程差并再次覆盖划分的光通量的情况下，显示完美的相干性。
相干光源110的类型不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明激光等。作为发射激光的相干光源110，可以举例说明氩离子(Ar)激光器、氦氖(He-Ne)激光器、染料激光器、氪(Cr)激光器、半导体激光器、半导体激光器和波长转换光学元件组合的固态激光器等，并且可以自由地组合使用其中的一种或两种或更多种类型。
(2)非相干光源
非相干光源120用非相干光照射成像物体O。非相干光表示像物体光(物体波)那样几乎不具有相干性的光。在本文中，期望非相干光的波长近似等于从相干光源110发射的相干光的波长。因此，当照射非相干光时，期望采用能够使用带通滤波器调整非相干光的波长的配置。
非相干光源120的类型不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明发光二极管等。作为其他光源，可以举例说明氙灯、金属卤化物灯、高压汞灯等。
(3)散斑图像成像装置
根据本技术的成像系统501包括散斑图像成像装置130。在该散斑图像成像装置130中，基于从用相干光照射的成像物体O获得的散射光执行散斑图像成像。
由散斑图像成像装置130执行的成像方法不受特别限制，只要本技术的效果不受到损害，并且可以选择并且自由地组合使用一种或两种或更多种已知的成像方法。例如，可以举例说明使用诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器等成像元件的成像方法。
另外，散斑图像成像装置130可以被配置为测量捕捉图像中散斑的亮度分布。在本文中，当通过成像光学系统观察通过使用相干光照射的物体时，观察到由物体在图像平面上的散射引起的散斑。在散斑图像成像装置130中，使用例如亮度计来测量捕捉图像中散斑的亮度分布。另外，可以从诸如CCD或CMOS等成像元件捕捉的图像来计算散斑亮度分布。
测量亮度分布的方法不受特别限制，只要本技术的效果不受到损害，并且可以选择并且自由地组合使用一种或两种或更多种已知的计算方法。
在散斑图像成像装置130中，例如，生成基于散斑亮度分布来映射伪血流过的伪血管的图像等。在本文中，由于散斑是如上所述的随机干涉/衍射图案，因此当诸如血液等散射流体随时间移动或改变时，散斑也随时间变化。为此，可以观察流体和其他部分之间的边界。
注意，为了进一步阐明发生散斑的部分，散斑图像成像装置130可以具有以下配置：例如，通过使用多个散斑图像来执行均衡，以减少散斑图像的不规则性。
(4)非散斑图像成像装置
根据本技术的成像系统501包括非散斑图像成像装置140。在该非散斑图像成像装置140中，基于从用非相干光照射的成像物体O获得的反射光，捕捉明视场图像。在本文中，因为非相干光是几乎不呈现相干性的光，所以在基于非相干光的捕捉图像中，不会发生作为随机干涉/衍射图案的散斑。在下文中，为了便于描述，不发生散斑的捕捉图像称为“非散斑图像”。由于在非散斑图像成像装置140中执行的成像方法与在散斑图像成像装置130中执行的成像方法相同，所以在本文中省略其描述。
(5)焦点检测装置
根据本技术的成像系统501包括焦点检测装置150，其检测用于捕捉散斑图像的焦点。
由于散斑是随机干涉/衍射图案，所以在散斑图像成像的情况下，难以识别焦点。另一方面，在图像形成系统向前侧或后侧偏离焦点并且成像物体O从沿垂直方向偏离光轴的情况下，从成像物体O的一个点开始形成一个散斑形状的干涉光路在向前侧偏离焦点的情况下穿过相对于图像形成系统的主光线在成像器上接近光轴的点，并且在向后侧偏离焦点的情况下穿过远离光轴的点。结果，在捕捉非散斑图像(即，明视场图像)时，在捕捉散斑图像的焦点位置相对于焦点向用户侧或后侧移动的情况下，散斑相对于投影在明视场图像上的运动体以与运动体的方向相同的方向或以与运动体的方向不同的方向移动。在下面的描述中，这种现象将被称为“散斑相关现象”。
基于散斑相关现象，焦点检测装置150检测散斑图像成像装置130的焦点。更具体地，首先，作为第一步骤，与非散斑图像的焦点位置相比，散斑图像成像装置130的焦点位置设置在用户的更远前侧，并且识别散斑的移动方向。接下来，作为第二步骤，与非散斑图像的焦点位置相比，散斑图像成像装置130的焦点位置设置在用户的更远后侧，并且识别散斑的移动方向。随后，在设置在前侧或后侧的散斑图像成像装置130的焦点位置逐渐更靠近非散斑图像成像装置140的焦点位置的同时，检测散斑不在明视场图像上相对于运动体移动的焦点位置。
以这种方式，焦点检测装置150可以通过使用散斑的相关现象来检测散斑不在图像上移动的散斑图像的焦点。
在本文中，检测方法仅仅是一个示例，并且在上述方法中，在第一步骤之后执行第二步骤。然而，可以在第二步骤之后执行第一步骤。
(6)组合装置
根据需要，根据本技术的成像系统501包括组合装置160。组合装置160组合由散斑图像成像装置130捕捉的散斑图像和由非散斑图像成像装置140捕捉的非散斑图像。具体地，通过叠加非散斑图像的图像信息和散斑图像的图像信息来生成组合图像。
注意，组合图像的生成方法没有特别限定，可以采用公知的方法。
(7)分析装置
根据需要，根据本技术的成像系统501可以包括分析装置170。分析装置170通过使用由组合装置160生成的散斑组合图像来分析成像物体O的状态。
在本文中，分析装置170还可以通过使用当焦点检测装置150检测到焦点时观察到的散斑的相关现象来分析散斑的移动速度。
即，如上所述，在散斑相关现象中，散斑在明视场图像上相对于运动体移动。为此，分析装置170可以被配置为在散斑图像成像装置130的焦点位置从明视场图像的焦点位置移动的状态下观察移动图像并且测量散斑的移动速度。
在这种情况下，例如，在成像物体O是血管的情况下，当诸如血液等散射流体随时间移动或改变时，散斑也相应地随时间变化。因此，可以由分析装置170测量血流速度。
注意，分析装置170不一定包括在根据本技术的成像系统501中，并且也可以通过使用外部分析装置等来分析成像物体O的状态。
(8)存储装置
根据本技术的成像系统501还可以包括存储装置180，该存储装置180存储由散斑图像成像装置130捕捉的散斑图像、由非散斑图像成像装置140捕捉的非散斑图像、由组合装置160生成的散斑组合图像、由焦点检测装置150检测到的散斑图像的焦点、由分析装置170分析的分析结果等。
该存储装置180不一定包括在根据本技术的成像系统501中，但是成像系统可以连接到例如外部存储装置，以存储散斑图像等。
(9)焦点调整装置
根据本技术的成像系统501包括焦点调整装置210。在焦点检测装置150捕捉散斑图像时，焦点调整装置210执行在检测焦点的阶段改变散斑图像成像装置130的焦距的处理。
具体地，执行由根据第一实施方式的成像设备1的焦点检测装置150执行的处理，即，相对于非散斑图像成像装置140的焦点位置移动散斑图像成像装置130的焦点位置的处理。
然后，由焦点调整装置210调整的焦点输入到散斑图像成像装置130，因此，散斑图像成像装置130基于输入的信息来捕捉散斑图像。
(10)显示单元装置
根据本技术的成像系统501还可以包括显示装置190，该显示装置190显示由散斑图像成像装置130捕捉的散斑图像、由非散斑图像成像装置140捕捉的非散斑图像、由组合装置160生成的组合图像、由分析装置170分析的分析结果等。另外，显示装置190可以显示由散斑图像成像装置130测量的亮度分布，以便叠加在散斑图像上。注意，显示装置190不一定包括在根据本技术的成像系统501中，并且可以通过使用例如外部显示器等对成像物体O执行光照射。
(11)像差校正装置
在根据第三实施方式的成像系统501中，由散斑图像成像装置130捕捉散斑图像，并且由非散斑图像成像装置140捕捉非散斑图像。即，成像系统501构成复眼成像系统。因此，在成像系统501中的散斑图像和非散斑图像之间发生像差。
在这种情况下，在生成包括彼此叠加的非散斑图像和散斑图像的组合图像的情况下，需要尽可能地消除像差。因此，期望根据本技术的成像系统包括校正像差的像差校正装置220。
可以由像差校正装置220校正的像差的类型不受特别限制，并且可以校正众所周知的像差，例如，球面像差、彗形像差、像散、色差(轴向色差、倍率色差)、波前像差、场曲率和变形图像等。由于根据本技术的成像系统使用具有不同波长的两种类型的光源，所以期望成像系统被配置为尤其校正这些像差中的色差。
在本文中，校正像差的方法不受特别限制，并且可以采用已知的方法。例如，可以使用利用可变形反射镜的方法、校正所获取的图像本身的方法等。
根据第三实施方式的成像系统501可以包括测量像差的像差测量单元221。在像差测量单元221中，可以通过使用已知的方法来测量像差。例如，可以考虑采用通过光学干涉测量来分析干涉条纹的方法。
然后，由像差测量单元221测量的像差被输入到像差校正装置220，因此，像差校正装置220被配置为基于输入的信息校正像差。
(12)兴趣区域指定装置
根据第四实施方式的成像系统501包括兴趣区域指定装置230，用于指定从非散斑图像中观察的区域。
更具体地，兴趣区域指定装置501识别由显示装置190显示的非散斑图像，并选择用户对观察感兴趣的任意区域。此后，兴趣区域指定装置230检测由用户选择的兴趣区域的位置信息。另外，基于关于检测到的兴趣区域的信息，指定在非散斑图像上示出的成像物体O内的兴趣区域。
注意，由兴趣区域指定装置230执行的指定方法不受特别限制，并且可以使用已知的方法。例如，认为兴趣区域指定装置230检测包括由用户选择的兴趣区域的组合图像的在水平方向和垂直方向上的每个像素的位置信息，并且基于检测到的位置信息，指定兴趣区域。
(13)光照射调整装置
在根据本技术的成像系统501包括兴趣区域指定装置230的情况下，期望成像系统包括光照射调整装置240，用于用光照射由兴趣区域指定装置230指定的兴趣区域。
具体地，光照射调整装置240的配置不受特别限制，并且光照射调整装置240被配置为例如双轴致动器，该双轴致动器在水平和垂直方向上移动非相干光源120并且停止非相干光源120。
然后，光照射调整装置240基于由兴趣区域指定装置230检测到的兴趣区域的位置信息，通过移动非相干光源120来调整照射方向，使得用非相干光照射兴趣区域。
按照根据本技术的成像系统501，由于焦点检测装置150可以检测用于捕捉散斑图像的焦点，所以可以获取具有高分辨率的散斑图像。
另外，例如，在对血液流动的血管成像时，可以观察散斑根据血液的时间波动而变化，使得可以获取可以准确地识别血球的流路的图像。结果，可以准确地观察血管相对于生物组织的位置。
此外，在根据本技术的成像系统501中，在包括焦点调整装置210的情况下，由于成像系统被配置为显示基于由焦点调整装置210检测到的焦点捕捉的散斑图像，所以通过使用散斑的相关现象，可以通过视觉观察准确地掌握散斑相对于明视场图像上的运动体的移动方向。
结果，例如，在对血管成像的情况下，由于可以准确地掌握血球的流动方向，所以可以掌握血管的类型，例如，成像的血管是动脉还是静脉。
另外，在根据本技术的成像系统501中，在包括像差校正装置220的情况下，由于可以校正在散斑图像和非散斑图像之间发生的像差，特别是色差，因此可以提高散斑图像的分辨率和非散斑图像的分辨率，并且还可以提高包括散斑图像和非散斑图像的组合图像的分辨率。
结果，例如，在对血液流动的血管成像的情况下，可以准确地观察血管相对于生物组织的位置。
此外，在根据本技术的成像系统501中，在包括兴趣区域指定装置230和光照射调整装置240的情况下，由于仅用户感兴趣的区域可以用非相干光照射，所以可以在要捕捉的散斑图像中的兴趣区域中，将散斑的强度分布最大化。结果，可以生成散斑图像，因此，生成具有高分辨率的组合图像。由于可以将非相干光的照射范围限于兴趣区域的范围，即，可以获得最小必要照度，所以非相干光的相干性可以保持恒定。另外，可以减少由于用输出密度高且对人体有害的非相干光照射而对用户造成的不利影响。
6、根据第一实施方式的成像方法
本技术还提供了一种成像方法。
图6是根据本技术的成像方法的流程图。根据第一实施方式的成像方法至少包括相干光照射步骤、非相干光照射步骤、散斑图像成像步骤、非散斑图像成像步骤和焦点检测步骤。另外，根据需要，成像方法还可以包括组合步骤、分析步骤、存储步骤、显示步骤、焦点调整步骤、像差校正步骤、兴趣区域指定步骤和光照射调整步骤。注意，在图6中，还示出了组合步骤、分析步骤、存储步骤、显示步骤、焦点调整步骤、像差校正步骤、兴趣区域指定步骤和光照射调整步骤，但如上所述，这些步骤不是必需的步骤。因此，可以不在根据本技术的成像方法中执行这些步骤。然而，在上述步骤中，由于通过包括焦点调整步骤、像差校正步骤、兴趣区域指定步骤和光照射调整步骤来显示预定效果，所以期望包括这些步骤。下面将按照执行根据本技术的成像方法的顺序来描述上述步骤。
(1)非相干光照射步骤
在根据本技术的成像方法中，首先，用非相干光照射成像物体O。在本文中，非相干光源的类型不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明发光二极管等。作为其他光源，可以举例说明氙灯、金属卤化物灯、高压汞灯等。
(2)像差校正步骤
根据需要，根据本技术的成像方法可以包括像差校正步骤S2。
在根据本技术的成像方法中，由于照射具有不同波长的两个光束，所以在散斑图像和非散斑图像之间可能发生像差。因此，在像差校正步骤S2中，校正像差。
更具体地，在像差校正步骤S2中，首先，测量像差信息。测量方法没有特别限制，可以使用已知的方法。例如，可以考虑采用通过光学干涉测量来分析干涉条纹的方法。
在以这种方式测量像差信息之后，基于像差信息来校正像差。校正像差的方法不受特别限制，并且可以采用已知的方法。例如，可以使用利用可变形反射镜的方法、校正所获取的图像本身的方法等。
(3)非散斑图像成像步骤
接下来，在根据本技术的成像方法中，基于从在非相干光照射步骤S1中用非相干光照射成像物体O获得的反射光，捕捉未投影散斑的非散斑图像，即，明视场图像。
更具体地，在像差校正步骤S2中像差被校正的状态下，执行非散斑图像成像步骤S3，从而执行捕捉没有发生像差的非散斑图像。
非散斑图像成像步骤S3中的成像方法不受特别限制，并且可以选择并且自由地组合使用一种或两种或更多种已知的成像方法。例如，可以举例说明使用诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器等成像元件的成像方法。
(4)显示步骤
根据需要，根据本技术的成像方法可以包括显示步骤S4。
在该显示步骤S4中，显示在非散斑图像成像步骤S3中捕捉的非散斑图像，以便能够被用户识别。
(5)焦点调整步骤
根据需要，根据本技术的成像方法可以包括焦点调整步骤S5。在焦点调整步骤S5中，执行当捕捉成像物体O的散斑图像时改变焦距的处理。
具体地，散斑图像成像装置中的焦点位置相对于在散斑图像成像步骤S3中成像时检测到的焦点位置移动。例如，执行与非散斑图像成像的焦点位置相比，将散斑图像成像的焦点位置设置在用户的更远前侧的处理或者与非散斑图像成像的焦点位置相比，将散斑图像成像的焦点位置设置在用户的更远后侧的处理。
(6)焦点检测步骤
在根据本技术的成像方法中，在焦点调整步骤S5之后，执行焦点检测步骤S6。
具体地，通过执行焦点调整步骤S5，由于散斑的性质，发生散斑的相关现象。即，在散斑图像成像的焦点位置相对于非散斑图像成像的焦点位置移动的情况下，散斑相对于投影在明视场图像上的运动体以与运动体的方向相同的方向或以与运动体的方向不同的方向移动。
通过使用这一点，在焦点检测步骤S6中，检测没有散斑移动的成像位置，作为散斑图像相对于投影在明视场图像上的运动体的焦点位置。
(7)兴趣区域指定步骤
根据本技术的成像方法必要时可以包括兴趣区域指定步骤S7。
在兴趣区域指定步骤S7中，首先，用户识别在显示步骤S4中显示的非散斑图像，并选择观察中的用户感兴趣的任意区域。
具体地，检测非散斑图像上的兴趣区域的位置信息，并且基于该位置信息，指定组合图像上示出的成像物体O内的兴趣区域。
注意，兴趣区域指定步骤S7中的指定方法没有特别限定，可以使用公知的方法。例如，在非散斑图像中，可以考虑检测包括兴趣区域的非散斑图像的在水平方向和垂直方向上的每个像素的位置信息并且基于检测到的位置信息来指定兴趣区域的方法。
(8)光照射调整步骤
根据需要，根据本技术的成像方法可以包括光照射调整步骤S8。在光照射调整步骤S8中，为了用相干光照射在兴趣区域指定步骤S7中指定的兴趣区域，调整相干光源的照射位置、照射量等。
期望的是，基于在兴趣区域指定步骤S7中检测到的兴趣区域的位置信息，用相干光照射兴趣区域，并且调整相干光源的照射位置、照射量等，使得散斑的强度分布在要成像的散斑图像中的兴趣区域中最大化。
(9)相干光照射步骤
在根据本技术的成像方法中，在光照射调整步骤S8之后，在光照射调整步骤S8中调整相干光源的照射位置、照射量等的状态下，执行用相干光照射特定区域的相干光照射步骤S9。相干光源不受特别限制，只要本技术的效果不受到损害。作为示例，可以举例说明激光等。作为发射激光的相干光源，可以举例说明氩离子(Ar)激光器、氦氖(He-Ne)激光器、染料激光器、氪(Cr)激光器、半导体激光器、半导体激光器和波长转换光学元件组合的固态激光器等，并且可以自由地组合使用其中的一种或两种或更多种类型。
(10)散斑图像成像步骤
在根据本技术的成像方法中，在相干光照射步骤S9之后，基于从用相干光照射的成像物体O获得的散射光，执行散斑图像成像。
在该散斑图像成像步骤S10中的成像方法不受特别限制，并且可以选择并且自由地组合使用一种或两种或更多种已知的成像方法。例如，可以举例说明使用诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器等成像元件的成像方法。
注意，在图6中，在非散斑图像成像步骤S3之前，执行像差校正步骤S2。然而，为了获得具有高分辨率的散斑图像，期望在散斑图像成像步骤S10之前，也执行像差校正步骤S2。
(11)组合步骤
根据需要，根据本技术的成像方法可以包括组合步骤S11，组合在非散斑图像成像步骤S3中捕捉的非散斑图像和在散斑图像成像步骤S10中捕捉的散斑图像。
具体地，将散斑图像叠加在非散斑图像上，以生成组合图像。注意，用于生成组合图像的方法不受特别限制，并且可以采用已知的方法。
(12)分析步骤
根据需要，根据本技术的成像方法可以包括分析步骤S12，基于在组合步骤S11中生成的组合图像来分析成像物体O的状态。
在该分析步骤S12中，基于在焦点调整步骤S5中检测到的散斑的相对现象，可以分析作为散斑投影的散射流体的移动速度等。
(13)存储步骤
在执行分析步骤S12之后，根据需要，根据本技术的成像方法可以包括存储步骤S13，用于存储在非散斑图像成像步骤S3中捕捉的非散斑图像、在散斑图像成像步骤S10中捕捉的散斑图像、用于捕捉在焦点检测步骤S6中检测到的散斑图像的焦点、在组合步骤S11中生成的组合图像、在分析步骤S12中的分析结果等。
(14)显示步骤
根据需要，根据本技术的成像方法在执行存储步骤S13之后可以包括显示步骤S14。
在该显示步骤S14中，可以显示在散斑图像成像步骤S10中捕捉的散斑图像、用于捕捉在焦点检测步骤S6中检测到的散斑图像的焦点、在组合步骤S11中生成的散斑组合图像、在分析步骤S12中的分析结果等，以便能够被用户识别。
按照根据本技术的成像方法，由于包括焦点检测步骤S6，所以可以检测在捕捉散斑图像时的焦点，使得可以获取具有高分辨率的散斑图像。
另外，例如，在对血液流动的血管成像时，可以观察散斑根据血液的时间波动而变化，使得可以获取可以准确地识别血球的流路的图像。结果，可以准确地观察血管相对于生物组织的位置。
此外，在根据本技术的成像方法中，在包括焦点调整步骤S5的情况下，通过使用散斑的相关现象，可以通过视觉观察准确地掌握散斑相对于明视场图像上的运动体的移动方向。
结果，例如，在对血管成像的情况下，由于可以准确地掌握血球的流动方向，所以可以掌握血管的类型，例如，成像的血管是动脉还是静脉。
另外，在根据本技术的成像方法中，在包括像差校正步骤S2的情况下，由于可以校正在散斑图像和非散斑图像之间发生的像差，因此可以提高散斑图像的分辨率和非散斑图像的分辨率。另外，可以提高包括散斑图像和非散斑图像的组合图像的分辨率。
结果，例如，在对血液流动的血管成像的情况下，可以准确地观察血管相对于生物组织的位置。
此外，在根据本技术的成像方法中，在包括兴趣区域指定步骤S7和光照射调整步骤S8的情况下，由于仅用户感兴趣的区域可以用非相干光照射，所以可以在要捕捉的散斑图像中的兴趣区域中，将散斑的强度分布最大化。结果，可以生成散斑图像，因此，生成具有高分辨率的组合图像。由于可以将非相干光的照射范围限于兴趣区域的范围，即，可以获得最小必要照度，所以非相干光的相干性可以保持恒定。另外，可以减少由于用输出密度高且对人体有害的非相干光照射而对用户造成的不利影响。
另外，根据本技术的成像设备还可以具有以下配置。
(1)一种成像设备，包括：
相干光源，用相干光照射成像物体；
非相干光源，用非相干光照射成像物体；
散斑图像成像单元，捕捉从用相干光照射的成像物体的散射光获得的散斑图像；
非散斑图像成像单元，捕捉从用非相干光照射的成像物体的反射光获得的非散斑图像；以及
焦点检测单元，基于非散斑图像成像单元的焦点位置来检测散斑图像成像单元的焦点。
(2)根据(1)所述的成像设备，还包括：
焦点调整单元，调整相对于非散斑图像成像单元的焦点的散斑图像成像单元的焦距；以及
显示单元，显示基于由所述焦点调整单元调整的焦点捕捉的散斑图像。
(3)根据(1)所述的成像设备，还包括：
像差校正单元，校正在非散斑图像成像单元和散斑图像成像单元之间发生的像差。
(4)根据(3)所述的成像设备，其中，
所述像差校正单元校正色差。
(5)根据(1)所述的成像设备，还包括：
兴趣区域指定单元，指定由所述非散斑图像成像单元捕捉的非散斑图像中的任意兴趣区域；以及
光照射调整单元，基于所述兴趣区域指定单元的兴趣区域的指定信息，来调整所述相干光源的照射位置。
另外，根据本技术的成像系统还可以具有以下配置。
(6)一种成像系统，包括：
相干光源，用相干光照射成像物体；
非相干光源，用非相干光照射成像物体；
散斑图像成像装置，捕捉从用相干光照射的成像物体的散射光获得的散斑图像；
非散斑图像成像装置，捕捉从用非相干光照射的成像物体的反射光获得的非散斑图像；以及
焦点检测装置，基于非散斑图像成像装置的焦点位置来检测散斑图像成像装置的焦点。
(7)根据(6)所述的成像系统，还包括：
焦点调整装置，调整相对于非散斑图像成像装置的焦点的散斑图像成像装置的焦距；以及
显示装置，显示基于由所述焦点调整装置调整的焦点捕捉的散斑图像。
(8)根据(6)所述的成像系统，还包括：
像差校正装置，校正在非散斑图像成像装置和散斑图像成像装置之间发生的像差。
(9)根据(8)所述的成像系统，其中，
所述像差校正装置校正色差。
(10)根据(6)所述的成像系统，还包括：
兴趣区域指定装置，指定由所述非散斑图像成像装置捕捉的非散斑图像中的任意兴趣区域；以及
光照射调整装置，基于所述兴趣区域指定装置的兴趣区域的指定信息，来调整所述相干光源的照射位置。
符号说明
1、101、201、301、401成像设备
11相干光源
12非相干光源
13散斑图像成像单元
14非散斑图像成像单元
15焦点检测单元。

Claims (11)

1.一种成像设备，包括：
相干光源，用相干光照射成像物体；
非相干光源，用非相干光照射所述成像物体；
散斑图像成像单元，捕捉从用所述相干光照射的所述成像物体的散射光获得的散斑图像；
非散斑图像成像单元，捕捉从用所述非相干光照射的所述成像物体的反射光获得的非散斑图像；以及
焦点检测单元，基于所述非散斑图像成像单元的焦点位置来检测所述散斑图像成像单元的焦点。
2.根据权利要求1所述的成像设备，进一步包括：
焦点调整单元，调整相对于所述非散斑图像成像单元的焦点的所述散斑图像成像单元的焦距；以及
显示单元，显示基于由所述焦点调整单元调整的焦点捕捉的散斑图像。
3.根据权利要求1所述的成像设备，进一步包括：
像差校正单元，校正在所述非散斑图像成像单元和所述散斑图像成像单元之间发生的像差。
4.根据权利要求3所述的成像设备，其中，
所述像差校正单元校正色差。
5.根据权利要求1所述的成像设备，进一步包括：
兴趣区域指定单元，指定由所述非散斑图像成像单元捕捉的所述非散斑图像中的任意兴趣区域；以及
光照射调整单元，基于所述兴趣区域指定单元的所述兴趣区域的指定信息，来调整所述相干光源的照射位置。
6.一种成像系统，包括：
相干光源，用相干光照射成像物体；
非相干光源，用非相干光照射所述成像物体；
散斑图像成像装置，捕捉从用所述相干光照射的所述成像物体的散射光获得的散斑图像；
非散斑图像成像装置，捕捉从用所述非相干光照射的所述成像物体的反射光获得的非散斑图像；以及
焦点检测装置，基于所述非散斑图像成像装置的焦点位置来检测所述散斑图像成像装置的焦点。
7.根据权利要求6所述的成像系统，进一步包括：
焦点调整装置，调整相对于所述非散斑图像成像装置的焦点的所述散斑图像成像装置的焦距；以及
显示装置，显示基于由所述焦点调整装置调整的焦点捕捉的散斑图像。
8.根据权利要求6所述的成像系统，进一步包括：
像差校正装置，校正在所述非散斑图像成像装置和所述散斑图像成像装置之间发生的像差。
9.根据权利要求8所述的成像系统，其中，
所述像差校正装置校正色差。
10.根据权利要求6所述的成像系统，进一步包括：
兴趣区域指定装置，指定由所述非散斑图像成像装置捕捉的所述非散斑图像中的任意兴趣区域；以及
光照射调整装置，基于所述兴趣区域指定装置的所述兴趣区域的指定信息，来调整所述相干光源的照射位置。
11.一种成像方法，包括：
相干光照射步骤，用相干光照射成像物体；
非相干光照射步骤，用非相干光照射所述成像物体；
散斑图像成像步骤，捕捉从用所述相干光照射的所述成像物体的散射光获得的散斑图像；
非散斑图像成像步骤，捕捉从用所述非相干光照射的所述成像物体的反射光获得的非散斑图像；以及
焦点检测步骤，基于所述非散斑图像成像步骤中的焦点位置来检测用于捕捉所述散斑图像的焦点。
CN201680081453.9A 2016-02-18 2016-12-09 成像设备、成像方法和成像系统 Expired - Fee Related CN108601505B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016028762 2016-02-18
JP2016-028762 2016-02-18
PCT/JP2016/086695 WO2017141524A1 (ja) 2016-02-18 2016-12-09 撮像装置、撮像方法及び撮像システム

Publications (2)

Publication Number Publication Date
CN108601505A CN108601505A (zh) 2018-09-28
CN108601505B true CN108601505B (zh) 2021-01-29

Family

ID=59624933

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680081453.9A Expired - Fee Related CN108601505B (zh) 2016-02-18 2016-12-09 成像设备、成像方法和成像系统

Country Status (4)

Country Link
US (1) US10681259B2 (zh)
JP (1) JP6798511B2 (zh)
CN (1) CN108601505B (zh)
WO (1) WO2017141524A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190293554A1 (en) * 2016-03-28 2019-09-26 Sony Corporation Imaging apparatus and imaging method
WO2019087557A1 (ja) * 2017-11-06 2019-05-09 オリンパス株式会社 内視鏡システム
US20210364410A1 (en) * 2018-12-21 2021-11-25 Sony Corporation Particle confirming method, particle trapping chip, and particle analyzing system
EP3952720A4 (en) 2019-04-08 2023-04-05 Activ Surgical, Inc. SYSTEMS AND METHODS FOR MEDICAL IMAGING
JP7071650B2 (ja) * 2019-06-19 2022-05-19 日亜化学工業株式会社 画像取得装置
CN110505402B (zh) * 2019-08-19 2021-03-23 Oppo广东移动通信有限公司 控制方法、深度相机和电子装置
CN114599263A (zh) 2019-08-21 2022-06-07 艾科缇弗外科公司 用于医疗成像的系统和方法
US20230029930A1 (en) 2020-01-14 2023-02-02 Pxe Computational Imaging Ltd. System and method for optical imaging and measurement of objects

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243966A (zh) * 2008-03-21 2008-08-20 中国科学院光电技术研究所 一种高分辨率眼底血管流速测量系统及测量方法
WO2015182065A1 (en) * 2014-05-30 2015-12-03 Sony Corporation Imaging apparatus, imaging method and medical imaging system
JP2016193066A (ja) * 2015-03-31 2016-11-17 ソニー株式会社 スペックルイメージング装置、スペックルイメージング方法及びスペックルイメージングシステム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2413483A1 (en) * 2001-12-26 2003-06-26 Kevin R. Forrester Motion measuring device
US7447408B2 (en) 2004-07-02 2008-11-04 The General Hospital Corproation Imaging system and related techniques
JP2010503475A (ja) * 2006-09-12 2010-02-04 ザ ジェネラル ホスピタル コーポレイション 解剖学的構造における深度の評価を提供する装置、プローブ、および方法
US8502926B2 (en) * 2009-09-30 2013-08-06 Apple Inc. Display system having coherent and incoherent light sources
JP2013213695A (ja) 2012-03-30 2013-10-17 Sumitomo Osaka Cement Co Ltd 形状測定装置
US9766382B2 (en) 2012-06-05 2017-09-19 Hypermed Imaging, Inc. Single-sensor hyperspectral imaging device
WO2013184226A1 (en) 2012-06-05 2013-12-12 Hypermed Imaging, Inc. Hyperspectral image processing via a computer network

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243966A (zh) * 2008-03-21 2008-08-20 中国科学院光电技术研究所 一种高分辨率眼底血管流速测量系统及测量方法
WO2015182065A1 (en) * 2014-05-30 2015-12-03 Sony Corporation Imaging apparatus, imaging method and medical imaging system
JP2016193066A (ja) * 2015-03-31 2016-11-17 ソニー株式会社 スペックルイメージング装置、スペックルイメージング方法及びスペックルイメージングシステム

Also Published As

Publication number Publication date
WO2017141524A1 (ja) 2017-08-24
US20190045112A1 (en) 2019-02-07
JPWO2017141524A1 (ja) 2018-12-06
JP6798511B2 (ja) 2020-12-09
US10681259B2 (en) 2020-06-09
CN108601505A (zh) 2018-09-28

Similar Documents

Publication Publication Date Title
CN108601505B (zh) 成像设备、成像方法和成像系统
US8998411B2 (en) Light field camera for fundus photography
US11025812B2 (en) Imaging apparatus, imaging method, and imaging system
US10362933B2 (en) Ophthalmologic apparatus, tomographic image generation method, and program that determine an imaging region for capturing a plurality of tomographic images for generating an averaged tomographic image
US20130070988A1 (en) Fundus image acquiring apparatus and control method therefor
CN110786821B (zh) Oct装置及记录介质
US20190099089A1 (en) Image analysis apparatus and image analysis method
US11426052B2 (en) Endoscopic system
US20190045170A1 (en) Medical image processing device, system, method, and program
JP6507509B2 (ja) 流路撮像装置及び流路撮像方法
US10993616B2 (en) Ophthalmologic apparatus
US20180321081A1 (en) Speckle imaging device, speckle imaging system, and speckle imaging method
JP2022133399A (ja) 画像処理装置およびその制御方法
JP6701322B2 (ja) 点像分布関数の測定装置、測定方法、画像取得装置および画像取得方法
JP6831506B2 (ja) 光測定装置及び光測定方法
CN110063714B (zh) 光学相干层析成像装置
JP7279379B2 (ja) Ｏｃｔ装置及びｏｃｔ画像処理プログラム
JP2007519447A (ja) レンズ系の収差を矯正するための装置及び方法
US10681283B2 (en) Imaging system, imaging apparatus, and imaging method
US20050099599A1 (en) Eye characteristic measuring apparatus
US20240041317A1 (en) Focus measuring arrangement and method of ophthalmic examination, and ophthalmic examination apparatus and method
JP2021166817A (ja) 眼科装置
JP6460649B2 (ja) 眼科装置
US20180242845A1 (en) Device and method of measuring blood flow
JP2022133056A (ja) 眼底撮影装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210129

CF01 Termination of patent right due to non-payment of annual fee