CN101416219A - 数字图像中的前景/背景分割 - Google Patents

数字图像中的前景/背景分割 Download PDF

Info

Publication number
CN101416219A
CN101416219A CNA200680054223XA CN200680054223A CN101416219A CN 101416219 A CN101416219 A CN 101416219A CN A200680054223X A CNA200680054223X A CN A200680054223XA CN 200680054223 A CN200680054223 A CN 200680054223A CN 101416219 A CN101416219 A CN 101416219A
Authority
CN
China
Prior art keywords
image
prospect
background
map
dct
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA200680054223XA
Other languages
English (en)
Other versions
CN101416219B (zh
Inventor
彼得·科科伦
阿德里安·卡帕塔
埃兰·斯坦伯格
彼得罗内尔·比焦伊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fotonation Ltd
Original Assignee
Fotonation Vision Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fotonation Vision Ltd filed Critical Fotonation Vision Ltd
Publication of CN101416219A publication Critical patent/CN101416219A/zh
Application granted granted Critical
Publication of CN101416219B publication Critical patent/CN101416219B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10148Varying focus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20052Discrete cosine transform [DCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20224Image subtraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Studio Circuits (AREA)

Abstract

用于识别景物的数字图像的前景图区和背景图区的有效实施方法包括:捕获名义上为同一个景物的两个图像并以DCT编码格式存储该捕获图像,利用比该背景更靠近焦点的该前景拍摄该第一图像,而利用比该前景更靠近焦点的该背景拍摄该第二图像。根据选择的高阶DCT系数之和对于该第二图像的等效图区是减小还是增大,将该第一图像的图区指定为前景或者背景。

Description

数字图像中的前景/背景分割
技术领域
本发明涉及一种用于识别数字图像的前景图区和背景图区的方法,即,进行前景/背景分割的方法。
背景技术
对于某些应用,能够在图像上实现前景/背景分离是有用的。在第PCT/EP2006/005109号PCT专利申请中,讨论了基于对图像的闪光版和非闪光版的分析进行分离。然而,例如,在明亮的阳光下,存在不能充分识别图像的闪光版和非闪光版的情况。
离焦深度法(Depth from de-focus)是众所周知的图像处理技术,它根据不同焦距的两个或者两个以上图像创建深度图(depth map)。关于该技术的概况可以参见:
http://homepages.inf.ed.ac.uk/rbf/CVonline/LOCAL_COPIES/FAVARO1/dfdtutorial.html
Favaro基于对两个或者两个以上各自散焦的图像的辐射率的统计分析,确定图像的特征深度(depth of feature)。Favaro是基于认识到像素模糊对应于给定的高斯卷积核,因此应用反卷积表示像素的离焦程度,并且,这也可以被用于构建深度图。Favaro要求,一旦获得图像,就利用专用方法进行深度计算,因为必须对用于深度计算的每个图像创建单独辐射图。与现有图像采集处理相比,这意味着显著的附加处理开销。
授予惠普公司(Hewlett-Packard)的US 2003/0052991公开了,对于在不同聚焦距离处分别拍摄的一系列图像中的每一幅图像,根据像素周围的像素亮度差的积,创建每个像素的衬比图。亮度差的积越大,认为像素更可能在焦点上。拍摄像素衬比度最大的图像,以指出该像素离开取景器的距离。这使得照相机能够创建景物的深度图。然后,照相机应用程序根据该距离信息实现模拟辅助闪光。在此,尤其需要创建衬比图,与现有图像采集处理相比,这也意味着显著的附加处理开销。
授予Epson的US 2004/0076335描述了一种小景深图像分割的方法。Epson是基于认识到清晰聚焦区含有高频分量。授予Philips的US 2003/0219172公开了,根据其离散余弦变换(DCT)系数的突出度(分布形状),计算单幅图像的清晰度。授予Xiao-Fan Feng的US 2004/0120598还公开了,利用单幅图像的DCT块检测该图像中的模糊。Epson、Philips以及Feng分别基于对单幅图像的分析,而且不能可靠识别图像的前景图区和后景图区。
另一种现有技术包括US 2003/0091225,它描述了根据两个“立体”图像创建深度图。
本发明的目的是提供一种用于识别数字图像的前景图区和后景图区的改进方法。
发明内容
根据本发明的第一方面,提供了一种用于识别景物的数字图像的前景图区和背景图区的方法,该方法包括:捕获名义上为同一个景物的第一图像和第二图像并以DCT编码格式存储该捕获图像,利用比该背景更靠近焦点的该前景拍摄该第一图像,而利用比该前景更靠近焦点的该背景拍摄该第二图像;以及根据所选的高阶DCT系数之和对于该第二图像的等效图区是减小还是增大,将该第一图像的图区指定为前景或者背景。
在本说明书中,如果在该两个图像具有相同分辨率的情况下,这两个图区基本上对应于该景物的同一个部分,或者如果在一个图像的分辨率高于另一个图像的分辨率的情况下,对应于该高分辨率图像的图区的部分景物基本上完全包含在对应于该低分辨率图像的图区的部分景物内,名义上为同一个景物的两个图像的各自图区被称为是等效的。
如果该两个图像基本上不相同,例如由于照相机稍许运动,可能需要调准这两个图像的附加步骤。
优选地,如果利用数字照相机捕获该第一图像和第二图像,则该第一图像是较高分辨率的图像,而该第二图像是该第一图像的较低分辨率的预览图像或者后览图像。
在数字照相机捕获图像时,即,当存储了主图像后,作为后处理步骤在照相机内执行处理,或者作为后处理步骤在其外部的分立设备内,诸如个人计算机或者服务器计算机中,执行后处理。在前者情况下,可以仅将这两个DCT编码图像存储在该照相机的易失性存储器中,因为对于前景/背景分割以及最终图像生成才需要它们。然而,在后者情况下,优选将两个图像存储在非易失性存储器中。在使用较低分辨率预览图像或者后览图像的情况下,可以存储较低分辨率图像,作为较高分辨率图像的文件标题的一部分。
在某些情况下,仅需要比较这两个图像的所选图区。例如,如果已知该图像含有面部,例如,正如面部检测算法所确定的那样,则可以仅对包括并包围该面部的图区应用本技术,以提高在背景上界定该面部的精度。
本发明使用DCT块提供的固有频率信息,而且采用DCT块的高阶DCT系数的和,作为块是否处于焦点的指示符。在其余块表示背景或者边界区域的情况下,将在主目标移动到焦点外时其高阶频率系数降低的块取为前景。作为图像采集和存储处理的中间步骤,传统数字照相机中的图像采集和存储处理以DCT格式对捕获的图像进行编码,所以在基本上没有附加处理的情况下,可以在这种照相机中实现本发明。
如第PCT/EP2006/005109号PCT专利申请所述,在照相机闪光产生的差异不是足够大的情况下,该技术有效。这两种技术还可以有利地组合在一起,以互相补充。
由于执行此任务需要的计算较简单,本发明的方法适于在照相机内有效实现。
根据本发明的第二方面,提供了一种根据对景物的两个或者两个以上的图像所做的前景/背景分析,确定图像相对于数字图像采集器件的取向的方法。
附图说明
现在将利用例子参考附图描述本发明实施例,附图中:
图1是根据本发明实施例工作的摄像设备的方框图。
图2示出根据本发明实施例的方法的工作流。
图3示出竖式图像的前景图/后景图。
具体实施方式
图1示出根据本发明实施例工作的图像采集器件20的方框图。在本实施例中,图像采集器件20是便携式数字照相机,它包括处理器120。我们知道,在该数字照相机内执行的许多处理都可以利用被共同表示为标记了“处理器”的方框120的微处理器、中央处理单元、控制器、数字信号处理器和/或者专用集成电路内运行的软件来实现或者控制。通常,微控制器122对所有用户界面以及诸如按钮和显示器的外围部件的控制进行控制。响应122的用户输入,例如,半按下快门按钮(预捕像模式32),处理器120启动并控制数字照相过程。利用光传感器40确定背景光曝光量,以自动确定是否使用闪光。利用还将图像聚焦在捕像器件60上的调焦机构50,确定到目标的距离。如果使用闪光,则处理器120使闪光装置70产生与完全按下快门按钮时捕像器件60记录图像基本上一致的照相闪光。捕像器件60利用数字方法以彩色记录该图像。该捕像器件为熟悉本技术领域的技术人员所公知,而且它可以包括CCD(电荷耦合器件)或者CMOS,以便于数字记录。闪光可以选择性地响应光传感器40,或者响应该照相机用户的手动输入72产生。捕像器件60记录的高清晰度图像存储在图像存储器80内,图像存储器80可以包括计算机内存,诸如动态随机存取存储器或者非易失性存储器。该照相机装备有诸如LCD的显示器100,用于预览和后览图像。
对于在半按下快门按钮情况下以预捕像模式32产生的预览图像,显示器100可以支持用户合成图像以及用于确定聚焦和曝光。暂存器82用于存储一个或者多个预览图像,而且它可以作为图像存储器80的一部分,也可以作为分立部件。该预览图像通常由捕像器件60产生。因为速度和存储效率的原因,预览图像的像素分辨率通常比快门按钮被完全按下时拍摄的主图像的分辨率低,而且该预览图像是通过利用可以作为通用处理器120一部分的软件124或者专用硬件或者它们的组合对原始捕获的图像进行分抽样产生的。根据该硬件子系统的设置,预采集图像处理可以先满足某些预定测试判据,然后存储预览图像。这种测试判据可以是时序的,例如,在预捕像模式32期间,始终每隔0.5秒利用新捕获的预览图像代替先前存储的预览图像,直到最终,通过完全按下快门按钮捕获到高清晰度图像。更复杂的判据可以包括对预览图像内容的分析,例如,检验发生变化的图像,然后,决定该新预览图像是否应该替换先前存储的图像。其他判据可以基于诸如锐度的图像分析,或者诸如曝光条件、是否对最终图像使用闪光、到目标的估计距离等的元数据分析。
如果没有满足测试判据,照相机通过捕获下一个预览图像而废弃先前捕获的预览图像继续工作。继续执行该处理,直到通过完全按下快门按钮,获取并保存最终的高清晰度图像。
如果可以存储保存多个预览图像,则可以将新预览图像放置在时序先进先出(FIFO)堆栈上,直到用户拍摄到最终图片。存储多个预览图像的理由是,例如在红眼校正处理中或者在本实施例中的肖像模式处理中,与最终高清晰度图像相比,最终预览图像,或者任意一个预览图像可以不是最佳基准图像。通过存储多个图像,可以获得较佳基准图像,而且在后面讨论的调准阶段,可以实现预览图像与最终捕获的图像更接近的调准。
如下所述,当该照相机处于肖像模式下时,该照相机也能够捕获一个或者多个低分辨率后览图像,然后,将它们存储在暂存器82内。除了后览图像在捕获了高分辨率的主图像之后出现外,该后览图像与预览图像基本相同。
在该实施例中,照相机20具有用户可选模式30。作为较大处理的一部分,用户模式30是一种需要对图像进行前景/背景分割的模式,例如对该图像应用特技滤波器或者修改或校正图像。因此,在用户模式30中,进行前景/背景分割本身不是目的,但是,只有模式30的分割方面与本发明有关,因此,在此仅描述这些方面。
如果选择用户模式30,则在按下快门按钮时,使照相机以紧密间隔自动捕获并存储一系列图像,因此,这些图像名义上是同一个景物的。图像的特定数量、分辨率和顺序以及图像的不同部分聚焦或者散焦的程度取决于特定实施例,下面将做说明。用户模式处理器90根据要描述的工作流分析并处理该存储图像。处理器90可以集成在照相机20上,的确,它可以是被适当编程的处理器120,它也可以是诸如台式计算机的外部处理设备10的一部分。在该实施例中,处理器90以DCT格式处理该捕获图像。如上所述,传统数字照相机中的图像采集与存储处理以DCT格式编码并暂存该捕获图像,作为该处理的中间步骤,最终,例如以jpg格式,存储该图像。因此,使得处理器90可以轻而易举地获得中间DCT编码图像。
图2示出根据本发明的用户模式处理实施例的工作流。
首先,在步骤200,选择用户模式30。现在,当快门按钮被完全按下时,照相机自动以DCT格式捕获并存储两个数字图像:
—在步骤202,高像素分辨率图像(图像A)。该图像具有处于焦点的,或者至少与背景相比实际上更接近处于焦点的感兴趣前景目标。
—在步骤204,低像素分辨率后览图像(图像B)。该图像具有处于焦点,或者至少与感兴趣前景目标相比实际上更接近焦点的背景。数字照相机中的自动聚焦算法通常支持偏心多点聚焦,可以利用该偏心多点聚焦在该背景上获得良好聚焦。如果这种支持不可用,照相机可能聚焦在无穷远。
迅速连续拍摄这两个图像,以便名义上每个图像捕获的景物是同一个景物。
在该实施例中,在照相机20内需要执行刚描述的步骤200至206。可以在该照相机或者外部设备10内执行现在将要描述的其余步骤。
在步骤206,对图像A和B进行调准,以补偿在拍摄这些图像期间该目标或者照相机发生的稍许运动。调准准算法是众所周知的。然后,在步骤208,通过对该图像的每个DCT块或者至少该图像的大多数DCT块,求得选择的高阶DCT系数和,构建前景聚焦图像A的高频(HF)图。作为背景,对于8×8像素块,产生一组从第一(直流(d.c.))分量到最高频率分量的64个DCT系数。在该实施例中,对于块附加最多25%的DCT系数,以提供该块的总HF指数。如果没有使用该图像的全部DCT块构建该图,这些DCT块应该集中在期望含有感兴趣前景目标的该图区上。例如,通常可以省略该图像的超边缘,因为它们几乎始终是背景。在此,将所获得的图称为图A。
接着,在步骤210,通过利用与图A相同的过程计算DCT块的HF指数,构建背景聚焦图像B的HF图(图B)。
现在,在步骤212,通过将图A减图B,构建差图(differencemap)。这是通过将在步骤210获得的HF指数分别减去在步骤208获得的HF指数实现的。由于图像A比图像B的像素分辨率高,所以与图像A中的DCT块相比,图像B中的DCT块对应更大的景物区域。因此,将图B的HF指数,其对应于景物区域的DCT块包含或者允许该目标或者照相机在拍摄图像期间稍许运动,减去基本上含有对应于图A的DCT块的景物区域的图A的每个HF指数。这意味着,图像A上几个相邻DCT块的HF指数,将从对应于图像B的一个DCT块的图B的相同HF指数中减去。
在步骤214,利用差图中的值,构建数字前景/背景图,其中根据其HF指数与在步骤212中减去它的图像B的DCT块的HF指数之间的差分别为负或为正,指定图像A的每个DCT块对应于该图像的前景或者背景图区。
最后,在步骤216,附加形态、图区填充以及相关图像处理技术,单独或者与其他前景/背景分割技术组合,可以进一步改进并增强最终前景/背景图。
现在,根据用户可选模式30执行的功能,该最终前景/背景图218可以应用于DCT编码版或者jpg版的图像A,用于处理该图像。
如果处理器90集成在照相机20上,则可以将最终处理的jpg图像显示在图像显示器100上,将它存储在可以是诸如CF卡、SD卡等的内部存储器或者可移动存储器的长久存储器112上,也可以通过系留的或者是无线的图像输出设备110,将它下载到诸如个人计算机、服务器或者打印机的另一个设备上。在在诸如台式计算机的外部设备10上实现处理器90的实施例中,最终处理过的图像可以返回照相机20中进行如上所述的存储和显示,或者在照相机外存储并显示它。
上述实施例可能存在变型。例如,图像B可以是低分辨率预览图像,而非后览图像。作为一种选择,图像A和B可以是分辨率相同的高分辨率图像。在这种情况下,图像B上的DCT块与图像A上的DCT块对应于相同的区域。因此,在步骤212,通过将图B的相应不同HF指数,即,对应于该景物的相同区域,或者在拍摄该图像期间允许该目标或者照相机稍许运动的基本相同区域的图B的HF指数,减去图A的每个HF指数,构建该差图。在另一个实施例中,图像A和B都是具有相同分辨率的低分辨率预览和/或者后览图像,而且将由其获得的前景/背景图应用于名义上同一个景物的第三高分辨率图像。在又一个实施例中,图像A和B具有不同像素分辨率,而且在进行DCT编码之前,通过增抽样(up-sampling)低分辨率图像和/或者分抽样高分辨率图像,使这两个图像的像素分辨率匹配。
尽管上面描述的实施例设想创建并存储数字前景/背景图,但是在另一种算法中,还可以使用直接对相应于每个DCT块的图区指定的前景/背景,因此,不需要正式地创建并存储数字图。
在另一个实施例中,可以首先对每个图进行预处理,以提供分别具有类似HF特性的图区,而不是采用块分析使这些图及其比较基于DCT块。例如,将具有大于给定阈值的HF分量的邻接块编在一组,而将具有小于给定阈值的HF分量的邻接块编在一组。然后,将前景图像中和背景图像中的图区进行比较,以确定它们是前景还是背景。
如上所述,在许多应用中,在图像中实现前景/背景分离的能力是有用的。
根据本发明的又一个方面,使用无论是利用上面描述的实施例还是利用例如PCT/EP2006/005109的基于闪光技术计算的图像的前景图/背景图的特定应用是,探测图像相对于照相机的取向。(当然,该技术可以应用于任意数字图像采集器件。)对于大多数情况,当在不需要附加机械装置的情况下拍摄图像时,这还暗示了照相机的取向。
请参考图3,本发明的该方面基于观察到,对于正常取向景物,在正常取向照相机中,近图像前景(在这种情况下是目标30)处于该图像的底部,而远背景处于其顶部。
利用基于闪光的前景/背景分割,如果更靠近照相机,则与远背景相比,近前景30反映更多的闪光。因此,通过计算该景物的闪光版图像与非闪光版图像的差,可以探测到图像取向,而且可以暗示照相机取向。(与在上述实施例中相同,在分析两个图像的DCT系数时,应用相应的分析。)
典型实现使用两个基准图像(或者预览图像或者分辨率适配的先前图像与主图像的组合),一个是闪光图像,一个是非闪光图像,而且将它们变换为灰度级。
对于每个像素,对应于闪光图像的灰度级减去非闪光图像的灰度级,以提供差图像。在其他实现中,可以利用求比代替求减。
对于每种可能的图像/照相机取向,在差图像中取图框(box)。这样,对于直立照相机中的图像感测阵列10,图框12与该照相机的直立取向相关,图框16与该照相机的反向取向相关,图框14与该照相机相对于景物的顺时针旋转相关,图框18与该照相机相对于景物的逆时针旋转相关。
对于每个图框12至18,计算差图像的平均值。这样,可以看出,在某些实现中,对于对应于图框12至18的各部分图像,仅需要计算该差。
为了简洁起见,图3所示的图框没有延伸到该图像的边缘,然而,在典型实现中,如果图框尺寸=dim,则图框18可以从:左侧=0、顶部=0延伸到右侧=dim和底部=图像高度。在其他实现中,图框可以使其他适当图区与给定取向,或者实际上与其他测量单元相关,而非与平均值相关(即,直方图)。
计算图框12至18的平均值中的最大值,而且对应于该最大值的图框被认为是最大程度对着其余图区的前景的图区。可以认为这指出该图区位于(各)基准图像的底部。在图3所示的例子中,该图框的差图像中的最大差值出现在图框12中,这表示直立目标,而且暗示了给出目标的正常姿态的直立照相机取向。在某些实现中,不需要使用图框16,因为它不是照相机内的实际取向。
在某些实现中,为了使推定的图像取向有效,执行一些检验有好处。例如,检验平均值的最大值,以确定它是否相对于其他值具有主导作用,而且该主导作用暗示了可信度,反之亦然。对于不同类型的图像(正如PCT/EP2006/0055109描述的室内/室外,白天/晚上),通过实验,改变要求的主导度。在该步骤,可以将来自该照相机内使用的其他图像分析部件的信息组合在一起,以确定可信度。一个典型的图像分析部件是面部跟踪模块,它可以对预览图像流起作用。该部件存储与跟踪的面部区域相关的历史数据,包括图区是面部的可信度以及相关取向。如果存在多个面部,则可以将其数据组合在一起,以确定可信度。
如果推定的左侧图像和右侧图像的差值接近并小于推定的底部图像的垂直而大于推定的顶部图像的差值,则它更可能正确检测到该取向。
因为根据该图是利用基于闪光还是基于非闪光的分割创建的,可以对室内图像和室外图像提供前景/背景图,所以在许多其他照相机应用中,知道图像取向可能有用。例如,知道物体在图像中的可能取向减小了试图识别处于每个可能取向上的物体所需的处理开销。
本发明并不局限于在此描述的实施例,在不脱离本发明范围的情况下,可以对该实施例进行修改和变更。

Claims (23)

1.一种用于识别景物的数字图像的前景图区和背景图区的方法,该方法包括:捕获名义上为同一个景物的第一图像和第二图像并以DCT编码格式存储该捕获图像,利用比该背景更靠近焦点的该前景拍摄该第一图像,而利用比该前景更靠近焦点的该背景拍摄该第二图像;以及根据选择的高阶DCT系数之和对于该第二图像的等效图区是减小还是增大,将该第一图像的图区指定为前景或者背景。
2.一种用于识别景物的数字图像的前景图区和背景图区的方法,该方法包括如下步骤:
(a)捕获名义上为同一个景物的第一图像和第二图像并以DCT编码格式存储该捕获图像,利用比该背景更靠近焦点的该前景拍摄该第一图像,而利用比该前景更靠近焦点的该背景拍摄该第二图像,
(b)对该第一图像的多个DCT块,计算选定的高阶系数之和,
(c)对该第二图像的多个DCT块,计算相同高阶系数之和,
(d)将在步骤(b)对该第一图像的每个DCT块计算的和与在步骤(c)对该第二图像的等效图区的DCT块计算的和进行比较,
(e)如果对该第一图像的给定DCT块计算的和大于对该第二图像的该等效图区的DCT块计算的和,则指定所述给定DCT块为对应于该图像的前景图区,以及
(f)如果对该第一图像的给定DCT块计算的和小于对该第二图像的该等效图区的DCT块计算的和,则指定所述给定DCT块为对应于该图像的背景图区。
3.根据权利要求2所述的方法,进一步包括在步骤(a)与步骤(b)之间调准该第一图像和第二图像的步骤。
4.根据权利要求2所述的方法,进一步包括,通过指定所述块为对应于该图像的背景或者前景图区,创建数字图。
5.根据权利要求2所述的方法,其中该第一图像和第二图像具有不同的像素分辨率。
6.根据权利要求5所述的方法,进一步包括在进行DCT编码之前,使该两个图像的像素分辨率匹配。
7.根据权利要求2所述的方法,其中数字照相机捕获该第一图像和第二图像。
8.根据权利要求7所述的方法,其中该第一图像是较高分辨率图像,而且其中该第二图像是该第一图像的较低分辨率的预览版或者后览版。
9.根据权利要求7所述的方法,其中作为后处理步骤,在数字照相机之外的设备内执行步骤(b)至(f)。
10.根据权利要求7所述的方法,其中作为后处理步骤,在该数字照相机内执行步骤(b)至(f)。
11.根据权利要求2所述的方法,其中该第一图像和第二图像具有相同的像素分辨率。
12.根据权利要求11所述的方法,其中数字照相机捕获该第一图像和第二图像,而且该第一图像和第二图像是也由该照相机捕获的所述景物的高分辨率图像的较低分辨率的预览版和/或者后览版。
13.根据权利要求2所述的方法,其中所选高阶系数是最多25%的系数。
14.一种没有照相胶片的数字图像采集系统,包括:用于捕获名义上为同一个景物的第一图像和第二图像并以DCT编码格式存储该捕获图像的装置,利用比该背景更靠近焦点的该前景拍摄该第一图像,而利用比该前景更靠近焦点的该背景拍摄该第二图像;以及用于根据所选高阶DCT系数之和对于该第二图像的等效图区是减小还是增大,将该第一图像的图区指定为前景或者背景的装置。
15.一种用于确定图像相对于数字图像采集器件的取向的方法,包括:
利用所述数字图像采集器件捕获两个名义上为同一个景物的图像;
至少将与所述图像的相应边缘相邻的所述两个图像的一部分进行比较,以确定,与背景相比,所述部分是否包括较多的前景;以及
响应所述部分包括超过阈值程度的前景,确定利用其底部的所述部分定向所述图像。
16.根据权利要求15所述的方法,其中所述图像包括闪光图像和非闪光图像,而且其中所述比较包括比较所述部分的像素的亮度级。
17.根据权利要求15所述的方法,其中所述图像包括非闪光图像,而且其中所述比较包括比较所述部分的至少一块的高阶DCT系数。
18.根据权利要求15所述的方法,包括根据所述图像取向,暗示所述数字图像采集器件的取向。
19.根据权利要求15所述的方法,其中所述比较包括将与所述两个图像的多个边缘相邻的各部分进行比较,而且其中与其他任意部分相比,被确定最大程度包括前景的部分被认为位于所述图像的底部。
20.根据权利要求19所述的方法,其中对于被认为位于所述图像的底部的部分,其前景程度必须超过与对侧边缘相邻部分的背景程度给定阈值。
21.根据权利要求20所述的方法,其中所述阈值至少根据如下之一改变:所述图像的曝光级以及所述图像被分类为室内还是室外。
22.根据权利要求19所述的方法,其中对于被认为位于所述图像的底部的部分,其前景程度必须超过至少与相邻边缘相邻的部分的背景程度,而且与所述相邻边缘相邻的部分的前景程度必须超过与对侧边缘相邻的部分的前景程度。
23.一种没有照相胶片的数字图像采集系统,包括:用于捕获名义上为同一个景物的两个图像的装置;用于至少将与所述图像的对应边缘相邻的所述两个图像的一部分进行比较,以确定与背景相比,所述部分包括较多的前景的装置;以及用于响应所述部分包括超过阈值程度的前景,确定利用其底部的所述部分对所述图像定向的装置。
CN200680054223XA 2006-02-14 2006-08-21 数字图像中的前景/背景分割 Active CN101416219B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US77371406P 2006-02-14 2006-02-14
US60/773,714 2006-02-14
PCT/EP2006/008229 WO2007093199A2 (en) 2006-02-14 2006-08-21 Foreground/background segmentation in digital images

Publications (2)

Publication Number Publication Date
CN101416219A true CN101416219A (zh) 2009-04-22
CN101416219B CN101416219B (zh) 2013-06-12

Family

ID=37491943

Family Applications (3)

Application Number Title Priority Date Filing Date
CN200680054223XA Active CN101416219B (zh) 2006-02-14 2006-08-21 数字图像中的前景/背景分割
CN2007800134911A Active CN101568908B (zh) 2006-02-14 2007-02-10 图像模糊
CN2007800134818A Active CN101421748B (zh) 2006-02-14 2007-02-13 自动检测并校正非红眼闪光缺陷

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN2007800134911A Active CN101568908B (zh) 2006-02-14 2007-02-10 图像模糊
CN2007800134818A Active CN101421748B (zh) 2006-02-14 2007-02-13 自动检测并校正非红眼闪光缺陷

Country Status (7)

Country Link
US (2) US7868922B2 (zh)
EP (1) EP1984892B1 (zh)
JP (1) JP5004972B2 (zh)
CN (3) CN101416219B (zh)
DK (1) DK1984892T3 (zh)
IE (2) IES20060559A2 (zh)
WO (1) WO2007093199A2 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102456213A (zh) * 2010-10-20 2012-05-16 上海无戒空间信息技术有限公司 照片处理方法
CN103262119A (zh) * 2010-12-08 2013-08-21 阿尔卡特朗讯公司 用于对图像进行分割的方法和系统
CN103765880A (zh) * 2011-09-12 2014-04-30 英特尔公司 局部化分割的图像的连网捕捉和三维显示
WO2014194773A1 (zh) * 2013-06-06 2014-12-11 华为终端有限公司 一种获取目标图像的方法、装置及终端
CN105190688A (zh) * 2013-02-14 2015-12-23 快图有限公司 用于查看图像的方法和装置
CN105247567A (zh) * 2013-05-30 2016-01-13 诺基亚技术有限公司 图像重新聚焦

Families Citing this family (104)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7738015B2 (en) 1997-10-09 2010-06-15 Fotonation Vision Limited Red-eye filter method and apparatus
US7630006B2 (en) 1997-10-09 2009-12-08 Fotonation Ireland Limited Detecting red eye filter and apparatus using meta-data
US7920723B2 (en) 2005-11-18 2011-04-05 Tessera Technologies Ireland Limited Two stage detection for photographic eye artifacts
US8989516B2 (en) 2007-09-18 2015-03-24 Fotonation Limited Image processing method and apparatus
US8330831B2 (en) * 2003-08-05 2012-12-11 DigitalOptics Corporation Europe Limited Method of gathering visual meta data using a reference image
US7792970B2 (en) 2005-06-17 2010-09-07 Fotonation Vision Limited Method for establishing a paired connection between media devices
US7970182B2 (en) 2005-11-18 2011-06-28 Tessera Technologies Ireland Limited Two stage detection for photographic eye artifacts
US7636486B2 (en) 2004-11-10 2009-12-22 Fotonation Ireland Ltd. Method of determining PSF using multiple instances of a nominally similar scene
US8494286B2 (en) * 2008-02-05 2013-07-23 DigitalOptics Corporation Europe Limited Face detection in mid-shot digital images
US8180173B2 (en) 2007-09-21 2012-05-15 DigitalOptics Corporation Europe Limited Flash artifact eye defect correction in blurred images using anisotropic blurring
US9160897B2 (en) 2007-06-14 2015-10-13 Fotonation Limited Fast motion estimation method
US8682097B2 (en) 2006-02-14 2014-03-25 DigitalOptics Corporation Europe Limited Digital image enhancement with reference images
US8254674B2 (en) 2004-10-28 2012-08-28 DigitalOptics Corporation Europe Limited Analyzing partial face regions for red-eye detection in acquired digital images
US8896725B2 (en) 2007-06-21 2014-11-25 Fotonation Limited Image capture device with contemporaneous reference image capture mechanism
US8593542B2 (en) 2005-12-27 2013-11-26 DigitalOptics Corporation Europe Limited Foreground/background separation using reference images
US7574016B2 (en) 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
US7639889B2 (en) 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method of notifying users regarding motion artifacts based on image analysis
US8264576B2 (en) 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
US7680342B2 (en) 2004-08-16 2010-03-16 Fotonation Vision Limited Indoor/outdoor classification in digital images
US8036458B2 (en) 2007-11-08 2011-10-11 DigitalOptics Corporation Europe Limited Detecting redeye defects in digital images
US8199222B2 (en) 2007-03-05 2012-06-12 DigitalOptics Corporation Europe Limited Low-light video frame enhancement
US8170294B2 (en) 2006-11-10 2012-05-01 DigitalOptics Corporation Europe Limited Method of detecting redeye in a digital image
US7689009B2 (en) 2005-11-18 2010-03-30 Fotonation Vision Ltd. Two stage detection for photographic eye artifacts
US8417055B2 (en) 2007-03-05 2013-04-09 DigitalOptics Corporation Europe Limited Image processing method and apparatus
US7606417B2 (en) 2004-08-16 2009-10-20 Fotonation Vision Limited Foreground/background segmentation in digital images with differential exposure calculations
US9412007B2 (en) 2003-08-05 2016-08-09 Fotonation Limited Partial face detector red-eye filter method and apparatus
US8520093B2 (en) 2003-08-05 2013-08-27 DigitalOptics Corporation Europe Limited Face tracker and partial face tracker for red-eye filter method and apparatus
US7639888B2 (en) 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method and apparatus for initiating subsequent exposures based on determination of motion blurring artifacts
US8503800B2 (en) * 2007-03-05 2013-08-06 DigitalOptics Corporation Europe Limited Illumination detection using classifier chains
US7715597B2 (en) * 2004-12-29 2010-05-11 Fotonation Ireland Limited Method and component for image recognition
US8995715B2 (en) 2010-10-26 2015-03-31 Fotonation Limited Face or other object detection including template matching
US7599577B2 (en) 2005-11-18 2009-10-06 Fotonation Vision Limited Method and apparatus of correcting hybrid flash artifacts in digital images
US7692696B2 (en) 2005-12-27 2010-04-06 Fotonation Vision Limited Digital image acquisition system with portrait mode
WO2007095477A2 (en) 2006-02-14 2007-08-23 Fotonation Vision Limited Image blurring
IES20060559A2 (en) 2006-02-14 2006-11-01 Fotonation Vision Ltd Automatic detection and correction of non-red flash eye defects
EP1987475A4 (en) 2006-02-14 2009-04-22 Fotonation Vision Ltd AUTOMATIC DETECTION AND CORRECTION OF RED EYE FLASH DEFECTS
IES20060564A2 (en) 2006-05-03 2006-11-01 Fotonation Vision Ltd Improved foreground / background separation
IES20070229A2 (en) 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
JP2008166947A (ja) * 2006-12-27 2008-07-17 Eastman Kodak Co 撮像装置
US8055067B2 (en) 2007-01-18 2011-11-08 DigitalOptics Corporation Europe Limited Color segmentation
WO2008109708A1 (en) 2007-03-05 2008-09-12 Fotonation Vision Limited Red eye false positive filtering using face location and orientation
JP4970557B2 (ja) 2007-03-05 2012-07-11 デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド デジタル画像取込装置における顔検索及び検出
US7773118B2 (en) 2007-03-25 2010-08-10 Fotonation Vision Limited Handheld article with movement discrimination
US7916971B2 (en) 2007-05-24 2011-03-29 Tessera Technologies Ireland Limited Image processing method and apparatus
US8503818B2 (en) 2007-09-25 2013-08-06 DigitalOptics Corporation Europe Limited Eye defect detection in international standards organization images
US8212864B2 (en) 2008-01-30 2012-07-03 DigitalOptics Corporation Europe Limited Methods and apparatuses for using image acquisition data to detect and correct image defects
US7855737B2 (en) 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
US8081254B2 (en) 2008-08-14 2011-12-20 DigitalOptics Corporation Europe Limited In-camera based method of detecting defect eye with high accuracy
WO2010036240A1 (en) * 2008-09-24 2010-04-01 Nikon Corporation Image segmentation from focus varied images using graph cuts
WO2010063463A2 (en) 2008-12-05 2010-06-10 Fotonation Ireland Limited Face recognition using face tracker classifier data
DE102009000810A1 (de) * 2009-02-12 2010-08-19 Robert Bosch Gmbh Vorrichtung zur Segmentierung eines Objektes in einem Bild, Videoüberwachungssystem, Verfahren und Computerprogramm
US8379917B2 (en) 2009-10-02 2013-02-19 DigitalOptics Corporation Europe Limited Face recognition performance using additional image features
US10080006B2 (en) * 2009-12-11 2018-09-18 Fotonation Limited Stereoscopic (3D) panorama creation on handheld device
US20110141225A1 (en) * 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama Imaging Based on Low-Res Images
US20110141226A1 (en) * 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama imaging based on a lo-res map
US8294748B2 (en) * 2009-12-11 2012-10-23 DigitalOptics Corporation Europe Limited Panorama imaging using a blending map
WO2011069698A1 (en) 2009-12-11 2011-06-16 Tessera Technologies Ireland Limited Panorama imaging
US20110141224A1 (en) * 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama Imaging Using Lo-Res Images
US20110141229A1 (en) * 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama imaging using super-resolution
US8872887B2 (en) 2010-03-05 2014-10-28 Fotonation Limited Object detection and rendering for wide field of view (WFOV) image acquisition systems
US8723912B2 (en) 2010-07-06 2014-05-13 DigitalOptics Corporation Europe Limited Scene background blurring including face modeling
US9053681B2 (en) 2010-07-07 2015-06-09 Fotonation Limited Real-time video frame pre-processing hardware
US8636730B2 (en) * 2010-07-12 2014-01-28 Covidien Lp Polarity control of electrosurgical generator
TR201807589T4 (tr) * 2010-09-20 2018-06-21 Fraunhofer Ges Zur Foerderung Der Angewandten Forschung Bir sahnenin arka planı ile ön planının ayırımı için yöntem ve bir sahnenin görüntülerinde bir arka planın değiştirilmesi için yöntem.
US8970770B2 (en) 2010-09-28 2015-03-03 Fotonation Limited Continuous autofocus based on face detection and tracking
JP5682218B2 (ja) * 2010-10-13 2015-03-11 富士ゼロックス株式会社 差異検出装置、差異出力装置及びプログラム
US8659697B2 (en) 2010-11-11 2014-02-25 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
US8648959B2 (en) * 2010-11-11 2014-02-11 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
US8508652B2 (en) 2011-02-03 2013-08-13 DigitalOptics Corporation Europe Limited Autofocus method
US8705894B2 (en) 2011-02-15 2014-04-22 Digital Optics Corporation Europe Limited Image rotation from local motion estimates
US8587665B2 (en) 2011-02-15 2013-11-19 DigitalOptics Corporation Europe Limited Fast rotation estimation of objects in sequences of acquired digital images
US8587666B2 (en) 2011-02-15 2013-11-19 DigitalOptics Corporation Europe Limited Object detection from image profiles within sequences of acquired digital images
US8860816B2 (en) 2011-03-31 2014-10-14 Fotonation Limited Scene enhancements in off-center peripheral regions for nonlinear lens geometries
US8982180B2 (en) 2011-03-31 2015-03-17 Fotonation Limited Face and other object detection and tracking in off-center peripheral regions for nonlinear lens geometries
US8723959B2 (en) 2011-03-31 2014-05-13 DigitalOptics Corporation Europe Limited Face and other object tracking in off-center peripheral regions for nonlinear lens geometries
US8896703B2 (en) 2011-03-31 2014-11-25 Fotonation Limited Superresolution enhancment of peripheral regions in nonlinear lens geometries
EP2515526A3 (en) 2011-04-08 2014-12-24 FotoNation Limited Display device with image capture and analysis module
DK2541258T3 (da) * 2011-06-30 2013-11-04 Siemens Ag Fremgangsmåde og indretning til registrering af 3D-data for et eller flere luftbårne partikler
US8493460B2 (en) 2011-09-15 2013-07-23 DigitalOptics Corporation Europe Limited Registration of differently scaled images
US8493459B2 (en) 2011-09-15 2013-07-23 DigitalOptics Corporation Europe Limited Registration of distorted images
US20130235233A1 (en) * 2012-03-09 2013-09-12 Research In Motion Limited Methods and devices for capturing images
US8792013B2 (en) 2012-04-23 2014-07-29 Qualcomm Technologies, Inc. Method for determining the extent of a foreground object in an image
US9242602B2 (en) 2012-08-27 2016-01-26 Fotonation Limited Rearview imaging systems for vehicle
US9466121B2 (en) * 2012-09-11 2016-10-11 Qualcomm Incorporated Devices and methods for augmented reality applications
CN104063858B (zh) * 2013-03-19 2017-04-26 展讯通信(上海)有限公司 图像模糊处理方法及装置
IN2013CH05374A (zh) * 2013-11-21 2015-05-29 Nokia Corp
JP6376934B2 (ja) 2014-10-14 2018-08-22 シャープ株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
CN105847722B (zh) 2015-01-16 2019-04-12 杭州海康威视数字技术股份有限公司 一种视频存储方法和装置、读取方法和装置以及存取系统
CN105847825A (zh) 2015-01-16 2016-08-10 杭州海康威视数字技术股份有限公司 视频编码码流的编码、索引存储和访问方法及相应装置
CN105847793B (zh) 2015-01-16 2019-10-22 杭州海康威视数字技术股份有限公司 视频编解码方法及其装置
US9418426B1 (en) 2015-01-27 2016-08-16 Xerox Corporation Model-less background estimation for foreground detection in video sequences
CN106034237B (zh) 2015-03-10 2020-07-03 杭州海康威视数字技术股份有限公司 一种基于编码切换的混合编码方法和系统
WO2016169747A1 (en) 2015-04-21 2016-10-27 Fotonation Limited Blurring a digital image
CN106327142A (zh) * 2015-06-30 2017-01-11 阿里巴巴集团控股有限公司 一种信息展示方法及装置
JPWO2017056314A1 (ja) * 2015-10-02 2018-07-19 オリンパス株式会社 撮像装置、提案画像生成装置、提案画像生成方法、提案画像生成プログラムおよび記憶媒体
TWI610571B (zh) * 2016-10-26 2018-01-01 緯創資通股份有限公司 顯示方法及其系統與電腦可讀取記錄媒體
CN106534693B (zh) * 2016-11-25 2019-10-25 努比亚技术有限公司 一种照片处理方法、装置及终端
US11620657B2 (en) 2017-10-03 2023-04-04 Visa International Service Association System, method, and computer program product for authenticating identification documents
CN108392170A (zh) * 2018-02-09 2018-08-14 中北大学 一种用于验光仪的人眼追踪装置及识别定位方法
JP7155530B2 (ja) * 2018-02-14 2022-10-19 セイコーエプソン株式会社 回路装置、電子機器及びエラー検出方法
JP2020027176A (ja) * 2018-08-10 2020-02-20 セイコーエプソン株式会社 回路装置、表示制御システム、電子機器及び移動体
GB2596872B (en) * 2020-07-10 2022-12-14 Graphcore Ltd Handling injected instructions in a processor
US11800048B2 (en) * 2021-02-24 2023-10-24 Logitech Europe S.A. Image generating system with background replacement or modification capabilities
CN116091364B (zh) * 2023-04-07 2023-06-06 天津汉云工业互联网有限公司 图像模糊处理方法、装置、电子设备和存储介质

Family Cites Families (135)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4683496A (en) 1985-08-23 1987-07-28 The Analytic Sciences Corporation System for and method of enhancing images using multiband information
US5130935A (en) 1986-03-31 1992-07-14 Canon Kabushiki Kaisha Color image processing apparatus for extracting image data having predetermined color information from among inputted image data and for correcting inputted image data in response to the extracted image data
US5109425A (en) 1988-09-30 1992-04-28 The United States Of America As Represented By The United States National Aeronautics And Space Administration Method and apparatus for predicting the direction of movement in machine vision
US5086314A (en) 1990-05-21 1992-02-04 Nikon Corporation Exposure control apparatus for camera
US5063448A (en) 1989-07-31 1991-11-05 Imageware Research And Development Inc. Apparatus and method for transforming a digitized signal of an image
JPH04501628A (ja) 1989-08-28 1992-03-19 イーストマン・コダック・カンパニー 重なり平面近似に基づいた計算機準拠式ディジタル画像雑音低減方法
US5046118A (en) 1990-02-06 1991-09-03 Eastman Kodak Company Tone-scale generation method and apparatus for digital x-ray images
FR2673793B1 (fr) * 1991-03-05 1993-05-07 Thomson Video Equip Procede et dispositif permettant d'obtenir une information de profondeur dans le champ vu par un dispositif de prise de vue.
US5164993A (en) 1991-11-25 1992-11-17 Eastman Kodak Company Method and apparatus for automatic tonescale generation in digital radiographic images
US5345313A (en) 1992-02-25 1994-09-06 Imageware Software, Inc Image editing system for taking a background and inserting part of an image therein
US5329379A (en) 1992-10-22 1994-07-12 International Business Machines Corporation System and method of measuring fidelity of decompressed video signals and images
US5432863A (en) * 1993-07-19 1995-07-11 Eastman Kodak Company Automated detection and correction of eye color defects due to flash illumination
GB9321372D0 (en) 1993-10-15 1993-12-08 Avt Communications Ltd Video signal processing
US5504846A (en) 1993-12-16 1996-04-02 International Business Machines Corporation Method and apparatus for improved area demarcation in bit mapped image derived from multi-color bit mapped image
JP3279418B2 (ja) * 1993-12-27 2002-04-30 オリンパス光学工業株式会社 カメラ
US5621868A (en) 1994-04-15 1997-04-15 Sony Corporation Generating imitation custom artwork by simulating brush strokes and enhancing edges
US5757376A (en) 1994-12-02 1998-05-26 Sony Corporation Method of producing image data and associated recording medium
EP0727760A3 (en) 1995-02-17 1997-01-29 Ibm Product size detection system
US5724456A (en) 1995-03-31 1998-03-03 Polaroid Corporation Brightness adjustment of images using digital scene analysis
US5812787A (en) 1995-06-30 1998-09-22 Intel Corporation Video coding scheme with foreground/background separation
US5864342A (en) 1995-08-04 1999-01-26 Microsoft Corporation Method and system for rendering graphical objects to image chunks
US5880737A (en) 1995-08-04 1999-03-09 Microsoft Corporation Method and system for accessing texture data in environments with high latency in a graphics rendering system
US5999189A (en) 1995-08-04 1999-12-07 Microsoft Corporation Image compression to reduce pixel and texture memory requirements in a real-time image generator
US6008820A (en) 1995-08-04 1999-12-28 Microsoft Corporation Processor for controlling the display of rendered image layers and method for controlling same
US5990904A (en) 1995-08-04 1999-11-23 Microsoft Corporation Method and system for merging pixel fragments in a graphics rendering system
US5844627A (en) 1995-09-11 1998-12-01 Minerya System, Inc. Structure and method for reducing spatial noise
US6122408A (en) 1996-04-30 2000-09-19 Siemens Corporate Research, Inc. Light normalization method for machine vision
US6956573B1 (en) 1996-11-15 2005-10-18 Sarnoff Corporation Method and apparatus for efficiently representing storing and accessing video information
JPH10233919A (ja) * 1997-02-21 1998-09-02 Fuji Photo Film Co Ltd 画像処理装置
AUPO525897A0 (en) 1997-02-24 1997-03-20 Redflex Traffic Systems Pty Ltd Digital image processing
US5949914A (en) 1997-03-17 1999-09-07 Space Imaging Lp Enhancing the resolution of multi-spectral image data with panchromatic image data using super resolution pan-sharpening
US5878152A (en) 1997-05-21 1999-03-02 Cognex Corporation Depth from focal gradient analysis using object texture removal by albedo normalization
US6018590A (en) 1997-10-07 2000-01-25 Eastman Kodak Company Technique for finding the histogram region of interest based on landmark detection for improved tonescale reproduction of digital radiographic images
US7042505B1 (en) 1997-10-09 2006-05-09 Fotonation Ireland Ltd. Red-eye filter method and apparatus
US6407777B1 (en) 1997-10-09 2002-06-18 Deluca Michael Joseph Red-eye filter method and apparatus
US7738015B2 (en) * 1997-10-09 2010-06-15 Fotonation Vision Limited Red-eye filter method and apparatus
US7352394B1 (en) * 1997-10-09 2008-04-01 Fotonation Vision Limited Image modification based on red-eye filter analysis
US7630006B2 (en) 1997-10-09 2009-12-08 Fotonation Ireland Limited Detecting red eye filter and apparatus using meta-data
US6061476A (en) 1997-11-24 2000-05-09 Cognex Corporation Method and apparatus using image subtraction and dynamic thresholding
MY124160A (en) 1997-12-05 2006-06-30 Dynamic Digital Depth Res Pty Improved image conversion and encoding techniques
US6744471B1 (en) 1997-12-05 2004-06-01 Olympus Optical Co., Ltd Electronic camera that synthesizes two images taken under different exposures
US6069982A (en) 1997-12-23 2000-05-30 Polaroid Corporation Estimation of frequency dependence and grey-level dependence of noise in an image
US6483521B1 (en) 1998-02-02 2002-11-19 Matsushita Electric Industrial Co., Ltd. Image composition method, image composition apparatus, and data recording media
US6850236B2 (en) 1998-02-17 2005-02-01 Sun Microsystems, Inc. Dynamically adjusting a sample-to-pixel filter in response to user input and/or sensor input
JP2000102040A (ja) 1998-09-28 2000-04-07 Olympus Optical Co Ltd 電子ステレオカメラ
US6278434B1 (en) 1998-10-07 2001-08-21 Microsoft Corporation Non-square scaling of image data to be mapped to pixel sub-components
JP2000209425A (ja) 1998-11-09 2000-07-28 Canon Inc 画像処理装置及び方法並びに記憶媒体
JP2000175052A (ja) 1998-12-07 2000-06-23 Xerox Corp ピクセルマップ表現の処理方法及び装置
US6546117B1 (en) 1999-06-10 2003-04-08 University Of Washington Video object segmentation using active contour modelling with global relaxation
US6282317B1 (en) * 1998-12-31 2001-08-28 Eastman Kodak Company Method for automatic determination of main subjects in photographic images
JP3849834B2 (ja) 1999-02-02 2006-11-22 富士写真フイルム株式会社 オートホワイトバランス制御方法
US6920250B1 (en) 1999-03-04 2005-07-19 Xerox Corporation Additive model for efficient representation of digital documents
US6198505B1 (en) 1999-07-19 2001-03-06 Lockheed Martin Corp. High resolution, high speed digital camera
US6556704B1 (en) 1999-08-25 2003-04-29 Eastman Kodak Company Method for forming a depth image from digital image data
US6631206B1 (en) 1999-08-30 2003-10-07 University Of Washington Image filtering in HSI color space
US6526161B1 (en) 1999-08-30 2003-02-25 Koninklijke Philips Electronics N.V. System and method for biometrics-based facial feature extraction
US6704456B1 (en) 1999-09-02 2004-03-09 Xerox Corporation Automatic image segmentation in the presence of severe background bleeding
KR100311482B1 (ko) 1999-10-21 2001-10-18 구자홍 보간 영상의 화질 개선을 위한 필터링 제어방법
US6577762B1 (en) 1999-10-26 2003-06-10 Xerox Corporation Background surface thresholding
US7103357B2 (en) 1999-11-05 2006-09-05 Lightsurf Technologies, Inc. Media spooler system and methodology providing efficient transmission of media content from wireless devices
US6538656B1 (en) 1999-11-09 2003-03-25 Broadcom Corporation Video and graphics system with a data transport processor
US6836273B1 (en) 1999-11-11 2004-12-28 Matsushita Electric Industrial Co., Ltd. Memory management method, image coding method, image decoding method, image display method, memory management apparatus, and memory management program storage medium
JP3306397B2 (ja) 1999-11-25 2002-07-24 株式会社ソニー・コンピュータエンタテインメント エンタテインメント装置、画像生成方法および記憶媒体
DE19958553A1 (de) 1999-12-04 2001-06-07 Luratech Ges Fuer Luft Und Rau Verfahren zur Kompression von gescannten Farb- und/oder Graustufendokumenten
US6804408B1 (en) 1999-12-22 2004-10-12 Eastman Kodak Company Method for enhancing a digital image with noise-dependent control of texture
EP1840826B1 (en) 1999-12-28 2011-02-23 Sony Corporation Signal processing method and apparatus and recording medium
EP1113671A3 (en) 1999-12-28 2007-04-11 Matsushita Electric Industrial Co., Ltd. Image decoding apparatus and image coding apparatus
JP2001298659A (ja) 2000-02-08 2001-10-26 Canon Inc 撮像装置、画像処理システム、撮像方法、及び記憶媒体
US6842196B1 (en) 2000-04-04 2005-01-11 Smith & Nephew, Inc. Method and system for automatic correction of motion artifacts
WO2001089225A2 (en) * 2000-05-18 2001-11-22 Koninklijke Philips Electronics N.V. Image foreground/background velocity detector
CA2309002A1 (en) 2000-05-23 2001-11-23 Jonathan Martin Shekter Digital film grain reduction
US6593925B1 (en) 2000-06-22 2003-07-15 Microsoft Corporation Parameterized animation compression methods and arrangements
EP1185112B1 (en) 2000-08-25 2005-12-14 Fuji Photo Film Co., Ltd. Apparatus for parallax image capturing and parallax image processing
JP2002077591A (ja) 2000-09-05 2002-03-15 Minolta Co Ltd 画像処理装置および撮像装置
JP3395770B2 (ja) * 2000-09-29 2003-04-14 ミノルタ株式会社 デジタルスチルカメラ
JP2002158893A (ja) 2000-11-22 2002-05-31 Minolta Co Ltd 画像補正装置、画像補正方法および記録媒体
US6678413B1 (en) 2000-11-24 2004-01-13 Yiqing Liang System and method for object identification and behavior characterization using video analysis
US6952286B2 (en) 2000-12-07 2005-10-04 Eastman Kodak Company Doubleprint photofinishing service with the second print having subject content-based modifications
SE0004741D0 (sv) * 2000-12-21 2000-12-21 Smart Eye Ab Image capturing device with reflex reduction
US6989859B2 (en) 2000-12-22 2006-01-24 Eastman Kodak Company Camera having user interface ambient sensor viewer adaptation compensation and method
EP1382017B1 (en) 2000-12-22 2018-08-22 Hewlett-Packard Development Company, L.P. Image composition evaluation
US6670963B2 (en) 2001-01-17 2003-12-30 Tektronix, Inc. Visual attention model
US6756993B2 (en) 2001-01-17 2004-06-29 The University Of North Carolina At Chapel Hill Methods and apparatus for rendering images using 3D warping techniques
CA2373707A1 (en) 2001-02-28 2002-08-28 Paul Besl Method and system for processing, compressing, streaming and interactive rendering of 3d color image data
WO2002103636A1 (fr) 2001-06-15 2002-12-27 Sony Corporation Dispositif et procede de traitement d'images et dispositif de saisie d'image
US6980691B2 (en) * 2001-07-05 2005-12-27 Corel Corporation Correction of “red-eye” effects in images
US20050058322A1 (en) 2003-09-16 2005-03-17 Farmer Michael E. System or method for identifying a region-of-interest in an image
US6930718B2 (en) 2001-07-17 2005-08-16 Eastman Kodak Company Revised recapture camera and method
US6577821B2 (en) 2001-07-17 2003-06-10 Eastman Kodak Company Camera having oversized imager and method
US7650044B2 (en) 2001-07-30 2010-01-19 Cedara Software (Usa) Limited Methods and systems for intensity matching of a plurality of radiographic images
US7262798B2 (en) 2001-09-17 2007-08-28 Hewlett-Packard Development Company, L.P. System and method for simulating fill flash in photography
JP3999505B2 (ja) 2001-11-30 2007-10-31 オリンパス株式会社 カメラ
US7092584B2 (en) 2002-01-04 2006-08-15 Time Warner Entertainment Company Lp Registration of separations
CN101118317B (zh) 2002-02-27 2010-11-03 Cdm光学有限公司 波前编码成像系统的优化图像处理
JP4169522B2 (ja) 2002-03-22 2008-10-22 株式会社リコー 画像処理装置、画像処理プログラム及びこのプログラムを記憶する記憶媒体
US20030184671A1 (en) 2002-03-28 2003-10-02 Robins Mark N. Glare reduction system for image capture devices
US7149974B2 (en) 2002-04-03 2006-12-12 Fuji Xerox Co., Ltd. Reduced representations of video sequences
US7081892B2 (en) 2002-04-09 2006-07-25 Sony Computer Entertainment America Inc. Image with depth of field using z-buffer image data and alpha blending
GB0212367D0 (en) 2002-05-29 2002-07-10 Eastman Kodak Co Image processing
US20040208385A1 (en) 2003-04-18 2004-10-21 Medispectra, Inc. Methods and apparatus for visually enhancing images
AU2003278710A1 (en) * 2002-08-15 2004-03-03 Lc Technologies, Inc. Motion clutter suppression for image-subtracting cameras
CH695973A5 (de) 2002-08-16 2006-10-31 Alstom Technology Ltd Rotor für eine elektrische Maschine.
WO2004036378A2 (en) 2002-10-15 2004-04-29 Mcintyre David J System and method for simulating visual defects
JP4222013B2 (ja) 2002-12-02 2009-02-12 カシオ計算機株式会社 画像修正装置、文字認識方法及び画像修正プログラム
US7181082B2 (en) * 2002-12-18 2007-02-20 Sharp Laboratories Of America, Inc. Blur detection system
JP3904560B2 (ja) * 2003-01-09 2007-04-11 オリンパス株式会社 デジタルカメラ
DE602004015173D1 (de) 2003-01-21 2008-09-04 Canon Kk Bildaufnahmegerät und Bildaufnahmesystem
US7206449B2 (en) 2003-03-19 2007-04-17 Mitsubishi Electric Research Laboratories, Inc. Detecting silhouette edges in images
US7295720B2 (en) 2003-03-19 2007-11-13 Mitsubishi Electric Research Laboratories Non-photorealistic camera
US7103227B2 (en) 2003-03-19 2006-09-05 Mitsubishi Electric Research Laboratories, Inc. Enhancing low quality images of naturally illuminated scenes
US7359562B2 (en) 2003-03-19 2008-04-15 Mitsubishi Electric Research Laboratories, Inc. Enhancing low quality videos of illuminated scenes
US7102638B2 (en) 2003-03-19 2006-09-05 Mitsubishi Eletric Research Labs, Inc. Reducing texture details in images
US7218792B2 (en) 2003-03-19 2007-05-15 Mitsubishi Electric Research Laboratories, Inc. Stylized imaging using variable controlled illumination
JP4232498B2 (ja) 2003-03-24 2009-03-04 富士ゼロックス株式会社 被写体撮影状態判定装置、画質調整装置、及び画像撮影装置
US7606417B2 (en) 2004-08-16 2009-10-20 Fotonation Vision Limited Foreground/background segmentation in digital images with differential exposure calculations
US20050017968A1 (en) 2003-07-21 2005-01-27 Stephan Wurmlin Differential stream of point samples for real-time 3D video
US20050031224A1 (en) 2003-08-05 2005-02-10 Yury Prilutsky Detecting red eye filter and apparatus using meta-data
US20050140801A1 (en) 2003-08-05 2005-06-30 Yury Prilutsky Optimized performance and performance for red-eye filter method and apparatus
US7064810B2 (en) 2003-09-15 2006-06-20 Deere & Company Optical range finder with directed attention
US7317843B2 (en) 2004-04-01 2008-01-08 Microsoft Corporation Luminance correction
US8265378B2 (en) 2004-04-15 2012-09-11 Dolby Laboratories Licensing Corporation Methods and systems for converting images from low dynamic to high dynamic range
EP2408193A3 (en) 2004-04-16 2014-01-15 James A. Aman Visible and non-visible light sensing camera for videoing and object tracking
JP2005310068A (ja) * 2004-04-26 2005-11-04 Noritsu Koki Co Ltd 白目補正方法及びこの方法を実施する装置
US20050243176A1 (en) 2004-04-30 2005-11-03 James Wu Method of HDR image processing and manipulation
US7653255B2 (en) 2004-06-02 2010-01-26 Adobe Systems Incorporated Image region of interest encoding
US7457477B2 (en) 2004-07-06 2008-11-25 Microsoft Corporation Digital photography with flash/no flash extension
CN1303571C (zh) * 2004-09-02 2007-03-07 上海交通大学 基于模糊积分的图像优化融合方法
JP2006080632A (ja) 2004-09-07 2006-03-23 Ricoh Co Ltd デジタルスチルカメラ印刷システムおよびデジタルスチルカメラおよび印刷装置およびデジタルスチルカメラ印刷システムの制御方法およびデジタルスチルカメラ印刷システムのプログラム
US8050511B2 (en) 2004-11-16 2011-11-01 Sharp Laboratories Of America, Inc. High dynamic range images from low dynamic range images
US7860332B2 (en) 2005-01-07 2010-12-28 Hewlett-Packard Development Company, L.P. Method and system for determining an indication of focus of an image
US7512262B2 (en) 2005-02-25 2009-03-31 Microsoft Corporation Stereo-based image processing
US7692696B2 (en) 2005-12-27 2010-04-06 Fotonation Vision Limited Digital image acquisition system with portrait mode
WO2007095477A2 (en) 2006-02-14 2007-08-23 Fotonation Vision Limited Image blurring
IES20060559A2 (en) 2006-02-14 2006-11-01 Fotonation Vision Ltd Automatic detection and correction of non-red flash eye defects
US7864989B2 (en) 2006-03-31 2011-01-04 Fujifilm Corporation Method and apparatus for adaptive context-aided human classification

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102456213A (zh) * 2010-10-20 2012-05-16 上海无戒空间信息技术有限公司 照片处理方法
CN103262119A (zh) * 2010-12-08 2013-08-21 阿尔卡特朗讯公司 用于对图像进行分割的方法和系统
US9042662B2 (en) 2010-12-08 2015-05-26 Alcatel Lucent Method and system for segmenting an image
CN103262119B (zh) * 2010-12-08 2016-08-10 阿尔卡特朗讯公司 用于对图像进行分割的方法和系统
CN103765880B (zh) * 2011-09-12 2016-05-18 英特尔公司 局部化分割的图像的连网捕捉和三维显示
CN103765880A (zh) * 2011-09-12 2014-04-30 英特尔公司 局部化分割的图像的连网捕捉和三维显示
US10192313B2 (en) 2011-09-12 2019-01-29 Intel Corporation Networked capture and 3D display of localized, segmented images
US9418438B2 (en) 2011-09-12 2016-08-16 Intel Corporation Networked capture and 3D display of localized, segmented images
CN105190688A (zh) * 2013-02-14 2015-12-23 快图有限公司 用于查看图像的方法和装置
CN105190688B (zh) * 2013-02-14 2017-12-29 快图有限公司 用于查看图像的方法和装置
CN105247567A (zh) * 2013-05-30 2016-01-13 诺基亚技术有限公司 图像重新聚焦
CN105247567B (zh) * 2013-05-30 2019-06-21 诺基亚技术有限公司 一种图像重新聚焦装置、方法、系统以及非瞬态程序存储设备
CN104243788A (zh) * 2013-06-06 2014-12-24 华为终端有限公司 一种获取目标图像的方法、装置及终端
CN104243788B (zh) * 2013-06-06 2017-11-21 华为终端(东莞)有限公司 一种获取目标图像的方法及装置
WO2014194773A1 (zh) * 2013-06-06 2014-12-11 华为终端有限公司 一种获取目标图像的方法、装置及终端

Also Published As

Publication number Publication date
JP5004972B2 (ja) 2012-08-22
CN101421748A (zh) 2009-04-29
US7868922B2 (en) 2011-01-11
CN101416219B (zh) 2013-06-12
US20110102628A1 (en) 2011-05-05
JP2009527156A (ja) 2009-07-23
EP1984892B1 (en) 2015-07-29
CN101568908A (zh) 2009-10-28
WO2007093199A3 (en) 2008-03-27
DK1984892T3 (en) 2015-08-31
CN101421748B (zh) 2013-09-04
WO2007093199A2 (en) 2007-08-23
IES20060559A2 (en) 2006-11-01
EP1984892A2 (en) 2008-10-29
IES20060558A2 (en) 2006-11-01
US20090273685A1 (en) 2009-11-05
CN101568908B (zh) 2012-10-03

Similar Documents

Publication Publication Date Title
CN101416219B (zh) 数字图像中的前景/背景分割
US10733472B2 (en) Image capture device with contemporaneous image correction mechanism
WO2018201809A1 (zh) 基于双摄像头的图像处理装置及方法
DE602006000400T2 (de) Bildsegmentierungsverfahren und -system
US7668369B2 (en) Using camera metadata to classify images into scene type classes
JP4844657B2 (ja) 画像処理装置及び方法
US8170350B2 (en) Foreground/background segmentation in digital images
JP2008059081A (ja) 画像処理装置及び画像処理方法、並びにコンピュータ・プログラム
US20120069198A1 (en) Foreground/Background Separation Using Reference Images
KR20140016401A (ko) 이미지 촬상 방법 및 장치
JP2010045613A (ja) 画像識別方法および撮像装置
JP2015231220A (ja) 画像処理装置、撮像装置、画像処理方法、撮像方法及びプログラム
RU2542889C2 (ru) Устройство обработки изображений и способ управления им
US20180184012A1 (en) Image processing apparatus, control method, and storage medium
CN102959942A (zh) 立体观看用图像拍摄装置及其控制方法
US9995905B2 (en) Method for creating a camera capture effect from user space in a camera capture system
JP4990876B2 (ja) 画像処理装置
CN113556438B (zh) 扫描控制方法、系统、电子设备和存储介质
US9800796B1 (en) Apparatus and method for low dynamic range and high dynamic range image alignment
TWI424738B (zh) The method of adjusting the resolution
Ostiak Implementation of HDR panorama stitching algorithm
JP6776532B2 (ja) 画像処理装置、撮像装置、電子機器及び画像処理プログラム
KR102452192B1 (ko) 반려 동물의 식별을 위한 객체의 이미지를 필터링하기 위한 방법 및 장치
JP2010204941A (ja) 画像処理装置および影除去処理プログラム
US20240221416A1 (en) Method for photographing object for identifying companion animal, and electronic device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: DE SALA TECHNOLOGY IRELAND CO., LTD.

Free format text: FORMER OWNER: FOTONATION VISION LTD.

Effective date: 20110111

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20110111

Address after: Gore County, Ireland

Applicant after: Tessera Tech Ireland Ltd.

Address before: Gore County, Ireland

Applicant before: Fotonation Vision Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: DIGITAL OPTICAL EUROPE CO., LTD.

Free format text: FORMER NAME: TSAPLYA TECHNOLOGY IRELAND CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: Gore County, Ireland

Patentee after: Digitaloptics Corporation Europe Limited

Address before: Gore County, Ireland

Patentee before: Tessera Tech Ireland Ltd.

C56 Change in the name or address of the patentee

Owner name: KUAITU CO., LTD.

Free format text: FORMER NAME: DIGITAL OPTICAL EUROPE CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: Gore County, Ireland

Patentee after: DIGITALOPTICS CORPORATION EUROPE LIMITED

Address before: Gore County, Ireland

Patentee before: Digitaloptics Corporation Europe Limited