CN111866308B - 信噪比调节电路、信噪比调节方法和信噪比调节程序 - Google Patents
信噪比调节电路、信噪比调节方法和信噪比调节程序 Download PDFInfo
- Publication number
- CN111866308B CN111866308B CN202010299039.3A CN202010299039A CN111866308B CN 111866308 B CN111866308 B CN 111866308B CN 202010299039 A CN202010299039 A CN 202010299039A CN 111866308 B CN111866308 B CN 111866308B
- Authority
- CN
- China
- Prior art keywords
- image
- signal
- noise ratio
- images
- threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 41
- 230000008859 change Effects 0.000 claims abstract description 32
- 238000003384 imaging method Methods 0.000 claims abstract description 22
- 238000002073 fluorescence micrograph Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 4
- 230000001105 regulatory effect Effects 0.000 claims description 2
- 238000004590 computer program Methods 0.000 description 15
- 230000000694 effects Effects 0.000 description 14
- 230000006870 function Effects 0.000 description 5
- 230000004446 light reflex Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 108010076504 Protein Sorting Signals Proteins 0.000 description 2
- 238000003917 TEM image Methods 0.000 description 2
- 238000000089 atomic force micrograph Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 241000009298 Trigla lyra Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 238000000799 fluorescence microscopy Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000001000 micrograph Methods 0.000 description 1
- 238000000386 microscopy Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/361—Optical details, e.g. image relay to the camera or image sensor
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10064—Fluorescence image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20182—Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Microscoopes, Condenser (AREA)
- Studio Devices (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Image Processing (AREA)
Abstract
信噪比调节电路被配置为确定第一图像的信噪比是否低于第一阈值,以及确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值。信噪比调节电路还被配置为,如果信噪比低于第一阈值并且如果变化低于第二阈值,生成与第一图像或第二图像相比具有增加的信噪比的第三图像。
Description
技术领域
示例涉及信噪比调节电路和用于荧光显微镜的显微镜系统。
背景技术
在诸如荧光显微镜和外科显微镜的低光成像应用中,相机的信噪比可能是成像过程的瓶颈。原因是荧光强度可能不够高以在视频帧速率下提供清晰的图像。结果,图像可能变得噪声过大。因此,需要一种用于调节图像的信噪比的改进概念。
发明内容
实施例涉及一种信噪比(SNR)调节电路,被配置为确定第一图像的SNR是否低于第一阈值。此外,SNR调节电路被配置为,确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值。SNR调节电路还被配置为,如果SNR低于第一阈值并且如果变化低于第二阈值,生成与第一图像或第二图像相比具有增加的SNR的第三图像。
SNR调节电路确定第一图像的信噪比是否太低以及视频序列中成像内容的变化是否可能太大。取决于第一图像的信噪比以及视频序列的成像内容是否存在变化,可以生成具有增加的SNR的第三图像,第三图像可以可选地在视频序列内使用。
在示例性实施例中,生成第三图像可以包括组合至少两个图像以提供第三图像,这可以通过增加信噪比同时不引入明显的损害来改善视频序列的图像质量。
在另一个示例性实施例中,组合至少两个图像可以包括将至少两个图像相加。
在另一个示例中,组合至少两个图像可以包括:计算至少两个图像的像素值的统计分布;以及基于统计分布来组合至少两个图像。以此方式,为了组合至少两个图像,可以仅考虑满足从计算的统计分布得出的预定标准的像素值,这可以导致第三图像的更高的SNR。
可选实施例还可以使用第一图像和第二图像来计算运动补偿信息。组合至少两个图像可以包括使用运动补偿信息对至少两个图像中的至少一个执行运动补偿。即使第一图像和第二图像的常规组合将导致运动模糊效果,也可以通过使用运动补偿组合第一图像和第二图像。
在另一个实施例中,生成第三图像可以包括使用于捕获第三图像的曝光时间增加。通过使用更长的曝光时间,可以减少噪声影响。
另一个实施例还可以使用具有与第三图像不同的图像特征的第一图像和第二图像来确定成像内容的变化。具有特定特征的第一图像和第二图像可以用于计算例如必要信息,以用于确定成像内容是否可能存在大的变化,这在组合后续图像时可能导致产生运动模糊效果的风险。
在示例性实施例中,第一图像和第二图像可以是白光图像。从两个白光图像中确定的运动补偿可以应用于荧光图像。由于白光图像可能具有高信噪比的事实,因此可以通过使用白光图像来更准确地确定第一图像和第二图像之间成像内容的变化,以便计算出待应用于荧光图像的运动变化。
另一个示例还可以包括被配置为接收包括多个图像的视频序列的输入接口,其可以允许使用信噪比(SNR)调节电路的实施例,作为对现有相机的附加元件。
另一个示例可以生成荧光图像作为第三图像。生成的荧光图像可以用于产生具有增加的SNR而没有明显运动模糊效果的荧光图像的视频序列。
如果SNR低于第一阈值并且如果变化高于第二阈值,另一个实施例可以避免生成具有增加的SNR的第三图像。以此方式,可以避免第三图像的产生,这意味着当SNR的增加可能以不可接受的高运动模糊为代价时,可以不生成第三图像。
作为另一个示例性实施例,显微镜系统可以包括荧光相机、显示器和SNR调节电路。这样的显微镜系统可以具有优点:以荧光图像增加的SNR捕获待观察对象的荧光图像,同时避免运动模糊的产生。可选地,显微镜系统还可以包括白光反射相机,用于捕获白光图像以对成像内容进行运动估计。
作为另一个实施例,信噪比(SNR)调节方法可以包括确定第一图像的SNR是否低于第一阈值。SNR调节方法还包括确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值。SNR调节方法还包括:如果SNR低于第一阈值并且如果变化低于第二阈值,生成与第一图像或第二图像相比具有增加的SNR的第三图像。
另一个示例还可以包括使用具有与第三图像不同的图像特征的第一图像和第二图像来确定成像内容的变化。
作为另一个示例性实施例,一种计算机程序可以具有当其在处理器上被执行时使得执行SNR调节方法的程序代码。
附图说明
装置和/或方法的一些示例将在下面仅通过示例的方式并参考附图进行描述,其中
图1示出信噪比调节电路,
图2示出包括信噪比调节电路的显微镜系统,以及
图3是示出SNR调节方法的流程图。
具体实施方式
现在将参考示出一些示例的附图更全面地描述各种示例。在附图中,为了清楚起见,线、层和/或区域的厚度可能被放大。
因此,尽管其他示例能够进行各种修改和替代形式,但是其一些特定示例在附图中示出并且随后将详细描述。然而,该详细描述没有将其他示例限于所描述的特定形式。其他示例可以涵盖落入本公开范围内的所有修改、等同形式和替代形式。在整个附图的描述中,相同或相似的附图标记指代相同或相似的元件,这些相同或相似的元件可以在彼此比较时被以相同或修改的形式实现,同时可以提供相同或相似的功能。
将理解的是,当一个元件被称为“连接”或“耦合”到另一个元件时,这些元件可以直接连接或耦合或经由一个或多个中间元件连接或耦合。如果两个元件A和B使用“或”组合,则应理解为公开所有可能的组合,即,仅A、仅B以及A和B,除非另外明确或隐含地定义。相同组合的替代措词是“A和B中的至少一个”或“A和/或B”。经过适当的修改,这也适用于多于两个元件的组合。
本文出于描述特定示例的目的而使用的术语并不旨在限制其他示例。每当使用诸如“一”、“一个”和“该”的单数形式和仅使用单个元件没有被明确或隐含地定义为强制性时,其他示例也可以使用多个元件来实现相同的功能。同样,当功能随后被描述为使用多个元件实现时,其他示例可以使用单个元件或处理实体来实现相同的功能。将进一步理解的是,术语“包括”、“包含”、“含有”和/或“具有”在使用时指定存在所陈述的特征、整数、步骤、操作、过程、动作、元件、和/或组件,但不排除一个或多个其他特征、整数、步骤、操作、过程、动作、元件、组件和/或其任何组的存在或添加。
除非另有定义,否则本文中所有术语(包括技术和科学术语)均以示例所属领域的普通含义使用。
图1示意性地示出SNR调节电路的实施例。
在实施例中,SNR调节电路100可以确定第一图像的SNR是否低于第一阈值。它还可以确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值。如果SNR低于第一阈值并且如果变化低于第二阈值,SNR调节电路100可以生成与第一图像或第二图像相比具有增加的SNR的第三图像。
SNR调节电路100确定第一图像的信噪比是否太低以及视频序列中成像内容的变化是否可能对于增加信噪比而言太大。例如,对于成像内容变化很大的视频序列(各个图片之间存在很多移动),图像的组合可能会导致运动模糊。取决于第一图像的信噪比以及是否可能存在运动模糊,可以生成可以直接添加到视频序列的第三图像。
在示例性实施例中,生成第三图像可以包括组合至少两个图像以提供第三图像。其有利效果可以是通过减少噪声而不明显增加运动模糊效果来直接改善视频序列的图像质量,从而实现用于调节例如显微镜图像的信噪比的改进概念。例如,组合至少两个图像可以包括将至少两个图像相加。
组合至少两个图像还可以或可替代地包括:计算至少两个图像的像素值的统计分布;以及基于统计分布来组合至少两个图像。
这样,为了组合至少两个图像,可以仅考虑满足从计算的统计分布得出的预定标准的像素值,这可以导致第三图像的更高的SNR(以减少噪声)。
用于计算平均SNR像素值和相应标准偏差的可能的计算方法或噪声模型可以是例如高斯噪声模型(正常噪声模型)、瑞利噪声模型、埃尔朗(伽玛)噪声模型、指数噪声模型、均匀噪声模型或脉冲(胡椒盐)噪声模型。
另一个可选实施例还可以使用第一图像和第二图像来计算运动补偿信息。组合至少两个图像可以包括使用运动补偿信息对至少两个图像中的至少一个执行运动补偿。即使第一图像和第二图像的常规组合将导致运动模糊效果,也可以通过使用运动补偿组合第一图像和第二图像。
待组合的至少两个图像可以不一定是用于估计运动的第一图像和第二图像。用于运动估计的第一图像和第二图像可以例如是白光相机的白光图像,而待组合的至少两个图像可以是荧光相机的视频序列的图像。
由于单个图像在不同位置上包含有关同一对象(来自该对象的光)的信息的事实(这是由于成像对象的高速产生的),因此运动模糊效果可以定义为图像内容的拖尾。
在另一个实施例中,生成第三图像可以包括引起用于捕获第三图像的曝光时间的增加。通过使用更长的曝光时间,可以减少噪声效应。
另一个实施例还可以使用具有与第三图像不同的图像特征的第一图像和第二图像来确定成像内容的变化。具有不同的特定特征的第一图像和第二图像可以用于计算例如必要的数学信息,以用于确定成像内容是否可能存在大的变化,这可能相应地意味着存在运动模糊效果的危险。
不同的图像特征或图像类型可以是白光图像、荧光图像、热图像、X射线图像、TEM图像、REM图像、AFM图像或STM图像。然而,图像类型不限于上述示例。它也可以是任何其他类型的图像特征。
在示例性实施例中,第一图像和第二图像可以是白光图像。从两个白光图像中确定的运动补偿可以应用于荧光图像,从而降低运动模糊效果。由于白光图像的高信噪比,因此可以通过使用白光图像来更准确地确定第一图像和第二图像之间的成像内容的变化,以便计算出待应用于荧光图像的运动变化。
另一个示例还可以包括输入接口110以及输出接口120,输入接口110被配置为接收包括多个图像的视频序列,这可以允许使用信噪比(SNR)调节电路100的实施例作为现有相机的附加元件;输出接口120被配置为输出例如具有较高SNR的第三图像。
另一个示例可以生成荧光图像作为第三图像。生成的荧光图像可以用于产生具有增加的SNR而没有明显运动模糊效果的荧光图像的视频序列。
如果SNR低于第一阈值并且如果变化高于第二阈值,则另一个实施例可以避免生成具有增加的SNR的第三图像。当待观察的对象不移动时,常规方法可以通过增加积分时间并因此降低帧速率来改善图像质量。设置上的这种改变可能改善SNR,但同时会在对象移动时经受运动模糊。因此在这种情况下,按照惯例,通常将相机设置为在噪声和运动模糊之间提供良好折衷的调节值,但是这并不能在所有操作条件下利用最佳图像质量。然而,SNR调节电路的实施例在潜在引起的运动模糊可能低于可接受阈值的条件下可以动态地增加SNR。
如图2所示,另一个示例性实施例可以是显微镜系统200,显微镜系统200包括荧光相机230、显示器220和SNR调节电路210。可选地,显微镜系统200还可以包括用于采集白光图像的白光反射相机240。通过使用显示器220,例如,外科医生可以通过荧光视频序列检查他是否按期望进行了相应的手术。
这样的显微镜系统可以具有优点:以荧光图像的增加的SNR捕获待观察对象的荧光图像,同时避免运动模糊的产生。可选地,显微镜系统还可以包括白光反射相机,用于捕获白光图像以对成像内容进行运动估计。
显微镜系统可以是光学显微镜、荧光显微镜、提供这两种功能的光学显微镜和荧光显微镜的组合。然而,显微镜系统不限于上述示例。
显示器可以是LED显示器、OLED显示器、具有实现的触摸面板或CRT屏幕或监视器的LED或OLED显示器。然而,显示器的类型不限于上述示例。它也可以是任何其他类型的显示器。
SNR调节电路可以是直接在显微镜中实现的半导体电路,在显微镜内部或与微型显微镜进行外部连接以便执行用于执行SNR调节方法的计算机程序的CPU/计算机,或者是经由Wi-Fi或蓝牙连接到移动设备(像例如智能手机或平板电脑)的电路。然而,SNR调节电路的类型不限于以上示例。
视频相机可以是光学相机、荧光相机、热成像相机或任何其他类型的相机。
白光反射相机240可以包括能够采集白光图像的两个或更多个白光反射相机241至241+N。
在图3中示出示例性实施例。SNR调节方法可以包括以下步骤:310,确定第一图像的SNR是否低于第一阈值;320,确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值;以及330,如果SNR可以低于第一阈值并且如果变化可以低于第二阈值,生成与第一图像或第二图像相比具有增加的SNR的第三图像。
在附加示例中,SNR调节方法还可以包括:320a,使用具有与第三图像不同的图像特征的第一图像和第二图像来确定成像内容的变化,这也示出在图3中。
详细地,确定第一图像的SNR是否可能低于第一阈值意味着确定第一图像中的噪声是否可能太高。确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否可能低于第二阈值,意味着确定观察对象的移动是否会产生视频序列中的运动模糊效果,特别是在视频序列的第一图像和第二图像之间的后续图像的变化中。如果运动模糊效果的程度过高而无法获得合适的视频序列,则可以生成第三图像,这意味着生成的第三图像可以是作为后续图像添加到视频序列中的附加图像,以便增加每秒帧数,从而减少运动模糊。
该方法不限于提供后续荧光图像。它也可以应用于热图像、X射线图像、TEM图像、REM图像、AFM图像或STM图像。然而,图像类型不限于上述示例。它也可以是任何其他类型的图像特征。
作为另一个附加实施例,计算机程序可以具有用于当在处理器上执行时使得执行SNR调节方法的程序代码。
该计算机程序可以是用于操作显微镜的软件,显微镜包括用于执行SNR调节方法的SNR调节电路。
如本文所使用的,术语“和/或”包括相关联列出的项目中的一个或多个的任何和所有组合,并且可以缩写为“/”。
尽管已经在装置的上下文中描述了一些方面,但是很明显,这些方面也表示对应方法的描述,其中框或设备对应于方法步骤或方法步骤的特征。类似地,在方法步骤的上下文中描述的方面也表示对相应装置的相应框或项目或特征的描述。方法步骤中的一些或全部可以通过(或使用)硬件装置来执行,像例如,处理器、微处理器、可编程计算机或电子电路。在一些实施例中,这种装置可以执行一些最重要的方法步骤中的一个或多个。
取决于某些实现要求,本发明的实施例可以以硬件或软件来实现。可以使用非暂时性存储介质(诸如数字存储介质,例如软盘、DVD、蓝光、CD、ROM、PROM和EPROM、EEPROM或FLASH存储器)执行实现,非暂时性存储介质具有存储在其上的电子可读控制信号,该电子可读控制信号与可编程计算机系统协作(或能够协作),从而执行相应的方法。因此,数字存储介质可以是计算机可读的。
根据本发明的一些实施例包括具有电子可读控制信号的数据载体,电子可读控制信号能够与可编程计算机系统协作,从而执行本文描述的方法中的一种。
通常,本发明的实施例可以被实现为具有程序代码的计算机程序产品,当计算机程序产品在计算机上运行时,程序代码可操作地用于执行方法中的一种。程序代码可以例如被存储在机器可读载体上。
其他实施例包括存储在机器可读载体上的用于执行本文描述的方法中的一种的计算机程序。
换句话说,因此,本发明的实施例是一种具有程序代码的计算机程序,当计算机程序在计算机上运行时,程序代码执行本文描述的方法中的一种。
因此,本发明的另一个实施例是一种存储介质(或数据载体、或计算机可读介质),存储介质包括存储在其上的计算机程序,计算机程序用于当由处理器执行时执行本文描述的方法中的一种。数据载体、数字存储介质或记录介质通常是有形的和/或非暂时的。本发明的另一个实施例是如本文描述的装置,装置包括处理器和存储介质。
因此,本发明的另一个实施例是表示用于执行本文描述的方法中的一种的计算机程序的数据流或信号序列。数据流或信号序列可以例如被配置为经由数据通信连接(例如经由互联网)来传输。
另一个实施例包括处理装置,例如计算机或可编程逻辑设备,其被配置为或适于执行本文描述的方法中的一种。
另一个实施例包括一种计算机,该计算机上安装有用于执行本文描述的方法中的一种的计算机程序。
根据本发明的另一个实施例包括被配置为将用于执行本文描述的方法中的一种的计算机程序(例如,电子地或光学地)传送到接收器的装置或系统。接收器可以是例如计算机、移动设备、存储设备等。设备或系统可以例如包括用于将计算机程序传送到接收器的文件服务器。
在一些实施例中,可编程逻辑器件(例如,现场可编程门阵列)可以用于执行本文描述的方法的一些或全部功能。在一些实施例中,现场可编程门阵列可以与微处理器协作以便执行本文描述的方法中的一种。通常,方法优选地由任何硬件装置执行。
附图标记列表
100SNR调节电路
110输入接口
120输出接口
200显微镜系统
210SNR调节电路
220显示器
230荧光相机
240白光反射相机
310确定第一图像的SNR是否低于第一阈值
320确定视频序列的第一图像和先前的第二图像之间的成像内容的变化是否低于第二阈值
320a使用具有与第三图像不同的图像特征的第一图像和第二图像确定成像内容的变化
330如果SNR低于第一阈值并且如果变化低于第二阈值,生成与第一图像或第二图像相比具有增加的SNR的第三图像
Claims (15)
1.一种处理包括多个图像的视频序列的信噪比调节电路,所述信噪比调节电路被配置为:
确定所述视频序列中的第一图像的信噪比是否低于第一阈值;
确定所述视频序列中的所述第一图像和先前的第二图像之间的成像内容的运动变化是否低于第二阈值;以及
如果信噪比低于第一阈值并且如果所述运动变化低于第二阈值,生成与所述第一图像或所述第二图像相比具有增加的信噪比的第三图像,
其中,生成所述第三图像包括组合所述视频序列中的至少两个图像以提供所述第三图像,
其中,所述至少两个图像包括所述第一图像和所述第二图像。
2.根据权利要求1所述的信噪比调节电路,进一步包括将所述第三图像添加到所述视频序列中。
3.根据权利要求2所述的信噪比调节电路,其中,组合至少两个图像包括将至少两个图像相加。
4.根据权利要求2所述的信噪比调节电路,其中,组合至少两个图像包括:
计算至少两个图像的像素值的统计分布,以及
基于统计分布来组合至少两个图像。
5.根据权利要求1所述的信噪比调节电路,还被配置为:
使用第一图像和第二图像计算运动补偿信息,其中
组合至少两个图像包括使用运动补偿信息对至少两个图像中的至少一个执行运动补偿。
6.根据权利要求1所述的信噪比调节电路,其中,生成第三图像包括使用于捕获第三图像的曝光时间增加。
7.根据权利要求1所述的信噪比调节电路,其中,所述第一图像和所述第二图像具有与所述第三图像不同的图像特征。
8.根据权利要求1所述的信噪比调节电路,其中,第一图像和第二图像是白光图像。
9.根据权利要求1所述的信噪比调节电路,还包括:
输入接口,输入接口被配置为接收包括多个图像的所述视频序列。
10.根据权利要求1所述的信噪比调节电路,被配置为生成荧光图像作为第三图像。
11.根据权利要求1所述的信噪比调节电路,还被配置为,如果信噪比低于第一阈值并且如果运动变化高于第二阈值,不生成具有增加的信噪比的第三图像。
12.一种显微镜系统,包括:
荧光相机、显示器和根据权利要求1-11中任一项所述的信噪比调节电路。
13.一种用于处理包括多个图像的视频序列信噪比调节方法,所述方法包括:
确定所述视频序列中的第一图像的信噪比是否低于第一阈值;
确定所述视频序列中的所述第一图像和先前的第二图像之间的成像内容的运动变化是否低于第二阈值;以及
如果信噪比低于第一阈值并且如果运动变化低于第二阈值,生成与所述第一图像或所述第二图像相比具有增加的信噪比的第三图像,
其中,生成所述第三图像包括组合所述视频序列中的至少两个图像以提供所述第三图像,
其中,所述至少两个图像包括所述第一图像和所述第二图像。
14.根据权利要求13所述的信噪比调节方法,还包括:
使用具有与第三图像不同的图像特征的第一图像和第二图像确定成像内容的运动变化。
15.一种包括程序代码的计算机可读存储介质,当在处理器上执行所述程序代码时,所述程序代码使得执行根据权利要求13-14中任一项所述的方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19169859.6 | 2019-04-17 | ||
EP19169859.6A EP3726459B1 (en) | 2019-04-17 | 2019-04-17 | Signal to noise ratio adjustment circuit, signal to noise ratio adjustment method and signal to noise ratio adjustment program |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111866308A CN111866308A (zh) | 2020-10-30 |
CN111866308B true CN111866308B (zh) | 2023-06-16 |
Family
ID=66448302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010299039.3A Active CN111866308B (zh) | 2019-04-17 | 2020-04-16 | 信噪比调节电路、信噪比调节方法和信噪比调节程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11379954B2 (zh) |
EP (1) | EP3726459B1 (zh) |
JP (1) | JP6985450B2 (zh) |
CN (1) | CN111866308B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11709155B2 (en) | 2017-09-18 | 2023-07-25 | Waters Technologies Corporation | Use of vapor deposition coated flow paths for improved chromatography of metal interacting analytes |
US11709156B2 (en) | 2017-09-18 | 2023-07-25 | Waters Technologies Corporation | Use of vapor deposition coated flow paths for improved analytical analysis |
US11918936B2 (en) | 2020-01-17 | 2024-03-05 | Waters Technologies Corporation | Performance and dynamic range for oligonucleotide bioanalysis through reduction of non specific binding |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5561611A (en) * | 1994-10-04 | 1996-10-01 | Noran Instruments, Inc. | Method and apparatus for signal restoration without knowledge of the impulse response function of the signal acquisition system |
JP3731814B2 (ja) * | 2001-05-07 | 2006-01-05 | 富士写真フイルム株式会社 | 蛍光画像表示装置 |
US7199823B2 (en) * | 2001-06-18 | 2007-04-03 | Olympus Optical Co., Ltd. | Method and apparatus for improving live view performance of an image pickup apparatus for a microscope |
US7599536B2 (en) * | 2004-07-30 | 2009-10-06 | Brainlab Ag | Optimizing image signal interpretation for analog image signals from medical image recording devices |
FR2884341B1 (fr) * | 2005-04-11 | 2008-05-02 | Gen Electric | Procede et systeme d'amelioration d'une image digitale generee a partir d'un detecteur de rayons x |
US20070165961A1 (en) * | 2006-01-13 | 2007-07-19 | Juwei Lu | Method And Apparatus For Reducing Motion Blur In An Image |
JP2007288595A (ja) * | 2006-04-18 | 2007-11-01 | Pioneer Electronic Corp | フレーム巡回型ノイズ低減装置 |
US20080002907A1 (en) * | 2006-06-29 | 2008-01-03 | Microvision, Inc. | Auto-exposure using image characterstics |
WO2008136771A1 (en) * | 2007-05-02 | 2008-11-13 | Agency For Science, Technology And Research | Motion compensated image averaging |
US20090059039A1 (en) * | 2007-08-31 | 2009-03-05 | Micron Technology, Inc. | Method and apparatus for combining multi-exposure image data |
US8570386B2 (en) * | 2008-12-31 | 2013-10-29 | Stmicroelectronics S.R.L. | Method of merging images and relative method of generating an output image of enhanced quality |
US8963949B2 (en) | 2009-04-22 | 2015-02-24 | Qualcomm Incorporated | Image selection and combination method and device |
US8526754B2 (en) * | 2009-05-28 | 2013-09-03 | Aptina Imaging Corporation | System for enhancing depth of field with digital image processing |
JP5870264B2 (ja) * | 2010-11-08 | 2016-02-24 | パナソニックIpマネジメント株式会社 | 撮像装置、撮像方法、プログラム、および集積回路 |
JP6057890B2 (ja) * | 2011-02-21 | 2017-01-11 | オリンパス株式会社 | 蛍光観察装置 |
DE102011013614A1 (de) * | 2011-03-08 | 2012-09-13 | Carl Zeiss Microimaging Gmbh | Laser-Scanning-Mikroskop und Verfahren zu seinem Betrieb |
EP2518687B1 (en) * | 2011-04-26 | 2013-04-24 | FEI Company | Method for determining a reconstructed image using a particle-optical apparatus |
US9270875B2 (en) * | 2011-07-20 | 2016-02-23 | Broadcom Corporation | Dual image capture processing |
JP5742541B2 (ja) | 2011-07-25 | 2015-07-01 | 富士通株式会社 | 画像処理装置および画像処理プログラム |
US8929017B2 (en) * | 2011-12-12 | 2015-01-06 | Lsi Corporation | Systems and methods for SNR measurement using equalized data |
US8964089B2 (en) * | 2012-05-09 | 2015-02-24 | Canon Kabushiki Kaisha | Systems and methods for simulated preview for preferred image exposure |
FR3009394B1 (fr) * | 2013-07-31 | 2016-12-23 | Dxo Labs | Dispositif pour la prise de vue en basse lumiere apte a se connecter a un dispositif de type telephone mobile |
US9432589B2 (en) * | 2013-08-15 | 2016-08-30 | Omnivision Technologies, Inc. | Systems and methods for generating high dynamic range images |
FR3013876B1 (fr) * | 2013-11-28 | 2016-01-01 | Sagem Defense Securite | Analyse d'une image multispectrale |
CN103888689B (zh) * | 2014-03-13 | 2017-10-31 | 北京智谷睿拓技术服务有限公司 | 图像采集方法及图像采集装置 |
US10027986B2 (en) * | 2014-09-24 | 2018-07-17 | Integrated Device Technology, Inc. | Apparatuses and methods for filtering noise from a video signal |
US9754360B2 (en) * | 2014-12-22 | 2017-09-05 | The Research Foundation For The State University Of New York | Determination of spatial distribution of charged particle beams |
US10440355B2 (en) * | 2015-11-06 | 2019-10-08 | Facebook Technologies, Llc | Depth mapping with a head mounted display using stereo cameras and structured light |
US10341565B2 (en) * | 2016-05-10 | 2019-07-02 | Raytheon Company | Self correcting adaptive low light optical payload |
US10891719B2 (en) * | 2016-05-11 | 2021-01-12 | Cornell University | Systems, methods and programs for denoising signals using wavelets |
WO2017214730A1 (en) * | 2016-06-14 | 2017-12-21 | Novadaq Technologies Inc. | Methods and systems for adaptive imaging for low light signal enhancement in medical visualization |
JP2018006993A (ja) | 2016-06-30 | 2018-01-11 | 株式会社ニコン | 画像処理装置、撮像システムおよび撮像装置 |
WO2019026189A1 (ja) * | 2017-08-01 | 2019-02-07 | オリンパス株式会社 | 撮像装置および制御方法 |
TWI646842B (zh) * | 2017-09-11 | 2019-01-01 | 晨星半導體股份有限公司 | 應用於顯示裝置的電路及相關的訊號處理方法 |
EP3588430A1 (en) * | 2018-06-27 | 2020-01-01 | Leica Microsystems CMS GmbH | Image processing apparatus and method for enhancing a phase distribution |
EP3624047B1 (en) * | 2018-09-14 | 2022-08-10 | Leica Microsystems CMS GmbH | Deconvolution apparatus and method using a local signal-to-noise ratio |
-
2019
- 2019-04-17 EP EP19169859.6A patent/EP3726459B1/en active Active
-
2020
- 2020-04-01 US US16/837,006 patent/US11379954B2/en active Active
- 2020-04-16 CN CN202010299039.3A patent/CN111866308B/zh active Active
- 2020-04-16 JP JP2020073648A patent/JP6985450B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US11379954B2 (en) | 2022-07-05 |
US20200334792A1 (en) | 2020-10-22 |
JP6985450B2 (ja) | 2021-12-22 |
CN111866308A (zh) | 2020-10-30 |
EP3726459A1 (en) | 2020-10-21 |
EP3726459B1 (en) | 2022-02-16 |
JP2020177669A (ja) | 2020-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111866308B (zh) | 信噪比调节电路、信噪比调节方法和信噪比调节程序 | |
CN108335279B (zh) | 图像融合和hdr成像 | |
JP6081726B2 (ja) | 多重露出フュージョン基盤でゴーストブラーを除去したhdr映像生成装置及び方法 | |
US9591237B2 (en) | Automated generation of panning shots | |
KR102149187B1 (ko) | 전자 장치와, 그의 제어 방법 | |
US10614554B2 (en) | Contrast adaptive video denoising system | |
US20190335154A1 (en) | Image processing apparatus, image processing method, and storage medium storing program | |
WO2017113917A1 (zh) | 成像方法、成像装置和终端 | |
CN110166796B (zh) | 视频帧的处理方法、装置、计算机可读介质及电子设备 | |
US11449968B2 (en) | System and method for synthetic depth-of-field effect rendering for videos | |
US9712744B2 (en) | Image quality compensation system and method | |
CN111385484A (zh) | 信息处理方法和装置 | |
CN110889809A (zh) | 图像处理方法及装置、电子设备、存储介质 | |
US10373293B2 (en) | Image processing apparatus, image processing method, and storage medium | |
CN110719448A (zh) | 投影融合带的羽化方法 | |
CN111539948B (zh) | 视频质量评估的方法、装置、电子设备及存储介质 | |
US11127141B2 (en) | Image processing apparatus, image processing method, and a non-transitory computer readable storage medium | |
TWI581632B (zh) | 影像產生方法及影像拍攝裝置 | |
JP2012068733A (ja) | 画像処理装置および画像処理プログラム | |
US20180091719A1 (en) | Backlight correction program and semiconductor device | |
JP2012004621A (ja) | 画像処理装置及び画像処理方法、並びに画像撮像装置 | |
CN112085002A (zh) | 人像分割方法、装置、存储介质及电子设备 | |
JP6514577B2 (ja) | 画像処理装置および画像処理方法ならびに撮像装置 | |
JP2012134576A (ja) | 画像処理装置、画像処理方法 | |
US20220301184A1 (en) | Accurate optical flow interpolation optimizing bi-directional consistency and temporal smoothness |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |