CN108696675B - 检测在输送方向上相对于相机移动的对象的相机和方法 - Google Patents

检测在输送方向上相对于相机移动的对象的相机和方法 Download PDF

Info

Publication number
CN108696675B
CN108696675B CN201810271481.8A CN201810271481A CN108696675B CN 108696675 B CN108696675 B CN 108696675B CN 201810271481 A CN201810271481 A CN 201810271481A CN 108696675 B CN108696675 B CN 108696675B
Authority
CN
China
Prior art keywords
camera
offset
receiving optics
rows
photograph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810271481.8A
Other languages
English (en)
Other versions
CN108696675A (zh
Inventor
理查德·诺佩尔
德克·施特罗迈尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sick AG
Original Assignee
Sick AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sick AG filed Critical Sick AG
Publication of CN108696675A publication Critical patent/CN108696675A/zh
Application granted granted Critical
Publication of CN108696675B publication Critical patent/CN108696675B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B3/00—Simple or compound lenses
    • G02B3/0006—Arrays
    • G02B3/0037—Arrays characterized by the distribution or form of lenses
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/48—Increasing resolution by shifting the sensor relative to the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/701—Line sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本申请涉及检测在输送方向上相对于相机移动的对象的相机和方法。提出了用于检测在输送方向(34)上移动的对象(32)的相机(10)，该相机具有带有至少两行(22a‑22b)光接收像素(24)的光接收器(20)以及控制和评估单元(26)。通过这两行(22a‑22b)生成对象(32)的部分区域的两个至少在行方向上彼此偏移的照片(40a‑40b)并从中计算出具有增加的分辨率的图像扫描行。由在对象(32)的移动过程中生成的图像扫描行组成整体图像。提供照片(40a‑40b)之间的偏移的接收光学器件(16)被布置在光接收器(20)前面。

Description

检测在输送方向上相对于相机移动的对象的相机和方法
本发明涉及根据权利要求1或13的前述部分所述的用于检测在输送方向上相对于相机移动的对象的相机和方法。
在工业应用中，相机以各种方式使用，以便自动检测对象属性，例如用于检查或测量对象。在这种情况下，捕获对象的图像并根据任务通过图像处理方法评估这些图像。相机的另一应用是读取代码。借助于图像传感器捕获其上有代码的对象，在这些图像中识别代码区域，然后将其解码。基于相机的代码阅读器可以轻松应对一维条形码以外的其它代码类型，其与矩阵码一样也被构造成二维的并提供更多信息。打印地址(OCR，光学字符识别)或手稿的自动文本捕获原则上是读取代码。代码阅读器的典型应用领域是超市收银台、自动包裹识别，邮件分拣、机场的行李处理和其它物流应用。
常见的检测情况是将相机安装在传送带上方。在对象流在传送带上相对移动期间，相机捕获图像并根据所获得的对象属性启动下一步处理步骤。这些处理步骤例如是在机器上进行的适合具体对象的作用于被输送的对象的进一步处理，或者是通过在质量控制中将一定的对象从对象流中移除或将对象流分类成多个子对象流来改变对象流。当相机是基于相机的代码阅读器时，根据所安装的代码来识别对象以用于正确的分类或类似的处理步骤。
对象流中的对象相对于相机移动的情况可以用于逐行捕获图像，然后将图像扫描行(Bildzeile)组成图像。行扫描相机足以在高强度照明下检测高图像质量的对象。这些图像的分辨率在横向于对象流移动的行方向上通过行扫描传感器(Zeilensensor)的分辨率来确定，以及在输送方向上通过图像捕获频率来确定。因此，为了达到更高的图像分辨率，可以使用具有更多数量的像素或更大的像素密度的行扫描传感器。但是这增加了制造成本。另一方面，图像捕获频率的增加减少了积分时间，因此不可能是无限的。
众所周知，在相同的物理像素分辨率下，通过捕获彼此略有偏移的几个图像然后把它们放在一起计算(verrechnen)(超采样，超分辨率)，优化了有效的图像分辨率。对此，前提条件是相应的相互偏移的输出图像。为此，图像传感器可以通过模拟装置(Mimik)被快速移动。但是，这样的模拟装置敏感并且难以同步。
因此，US 6 166 831 A提供了具有两个图像扫描行的图像传感器，其像素在行方向上被布置成彼此略微偏移。这基本上解决了检测合适的输出图像的问题。但为此需要特别匹配的图像传感器。此外，图像分辨率在横向于图像扫描行的方向上没有得到改善。
US 2011/0115793 A1涉及用于通过TDI(超分辨率时间延迟积分)增加分辨率的图像处理。在这种情况下，确保相机在两次捕获之间在纵向方向和横向方向上移动，以便每次都有针对性地离开像素网格。如上所述，这种移动非常难以同步且不稳健。
US 2009/0284666 A1涉及根据扫描原理的行扫描投影仪。在这种情况下，两个像素行被设置具有分别在水平方向和垂直方向上的半个像素的偏移，这两个像素行在其叠加中根据增加的分辨率投影图像。这又需要特殊的硬件组件，此外，虽然这些硬件组件从其原理可以转移到行扫描相机，但实际上不可行，因为它们投影图像但不捕获图像。
从US 9 501 683 B1中已知具有增加的分辨率的条形码阅读器。在这种情况下提出，将相应的代码段捕获两次，但使用非整数的相对像素偏移来捕获，然后将这两段计算到更高分辨率的图像中。提及了实现像素偏移的几种措施。对此，包括图像传感器上的物理像素偏移和增加的图像捕获频率，具有前面已经提出的缺点，仅可以使用特殊的半导体组件或不可避免地缩短积分时间。在另一种实施方式中，相机相对于对象流扭转或倾斜。
EP 3 012 778 A2公开了具有双行扫描接收器的相机。但这两个图像扫描行不用于增加分辨率，而是用于获得彩色照片。为此，在每种情况下都用不同的光谱带来频闪照明对象流，并且这两行会根据待捕获的部分颜色来同步它们的捕获时间窗口。
在US 6 429 953 B1中涉及分辨率增加和颜色检测。具有相应的滤色器的像素彼此偏移以检测各种所需的输出图像。为此，再次需要特殊的半导体元件。
因此，本发明的任务在于，以简单的方式实现这种类型的相机的增加的图像分辨率。
该任务通过根据权利要求1或13所述的用于检测在输送方向上相对于相机移动的对象的相机和方法。该相机具有带有至少两行光接收元件或光接收像素的光接收器或图像传感器。以此，生成两个至少在行方向上相互偏移的照片，以便从中计算出更高分辨率的图像扫描行。这意味着，所达到的分辨率优于对应于光接收像素行的像素大小或像素密度的原始分辨率。然后，在相机和对象在输送方向上相对移动过程中，从优化的分辨率的这种图像扫描行中依次生成整体图像。该输送方向横向于行方向，特别是垂直于行方向，但允许有一定的偏差角。通过照片在输送方向上的额外偏移或其它措施也可以在该方向上改善图像分辨率。此外，可以使用超过两行的光接收像素，以便进一步提高分辨率或诸如图像亮度或颜色检测的其他参数。
现在，本发明基于通过光路实现照片的偏移这一想法。为此，提供照片之间的偏移的接收光学器件被布置在光接收器前面。优选地，该接收光学器件是静态的，即相对于光接收器或相机不可移动。这可以与其它措施相结合，以便总体上达到期望的偏移。
本发明具有的优点在于，在避免所有前述问题的情况下实现增加的图像分辨率。本发明允许使用具有规则布置的光接收像素的标准图像传感器，例如双行扫描或多行扫描接收器或仅使用特定行的矩阵接收器。该图像传感器的空间需求不会增加，原始的图像分辨率和像素布置(间距)保持不变。然而，在相机中不需要用于偏移的任何移动部件，使与输送移动的同步不会比无任何分辨率增加的传统简单的行扫描相机难。
优选地，光接收像素彼此以像素间距布置，其中照片的偏移对应于像素间距的一部分。该像素间距(pixel pitch)决定了光接收器的原始分辨率。同时也可以设想的是，不同行中的光接收像素具有不同的像素间距，因此具有不同的原始分辨率。随后，在计算照片后的较高的分辨率比较精细的原始分辨率更好。有利地，对应于一部分像素间距的两个照片的偏移使像素网格中断。在这种情况下，也不排除“>1”的假分数，其中整数部分只是不会导致离开像素网格。
优选地，评估单元被构造用于生成具有也横向于行方向的偏移的第一照片和第二照片，以及用于生成具有在输送方向上也比原始分辨率更高的分辨率的整体图像。在大多数应用中，对象相对于相机的取向是任意的。因此，当图像分辨率在两个维度上且不只是在行方向上得以改近时，是有利的。
优选地，接收光学器件也提供输送方向上的偏移。由此，通过如用于行方向上那样简单的措施来实现具有上述优点的分辨率改进。
优选地，评估单元被构造用于生成具有交错的曝光时间窗口的第一照片和第二照片。这是对通过接收光学器件在输送方向上实现的偏移的替代或补充，因此也用于改进输送方向上的分辨率。例如，这两个照片的曝光时间窗口像牙齿一样彼此啮合。通过交错的曝光时间窗口实现的时间上的偏移通过相对移动转移到照片在输送方向上的期望的空间偏移。优选地，该偏移恰好对应于像素间距的一部分，照片在行方向上偏移了这么多。原则上，在输送方向上也可以通过提高的图像捕获频率来实现分辨率。但这会缩短积分时间，因此是不利的。尽管可以保持积分时间，但交错的曝光时间窗口实现了有关图像分辨率的相同的效果而不会造成影响。
优选地，接收光学器件具有多个在行方向上倾斜的和/或相对于光接收像素的网格偏移的微透镜。倾斜和偏移这两种措施都会致使照片向物理像素网格移动并且可以替代性地使用或相互补充。微透镜可以相对简单地布置在图像传感器前面，也可以作为后续生产步骤布置在标准部件上，而且它们在其光学性能上很大程度上可以自由地通过工具来固定。由于期望相对的偏移，所以原则上微透镜仅在两行中的一行前面就足够了。在其它实施方式中，微透镜用于具有自身特性的各行。微透镜的倾斜可以通过与楔形体或棱镜组合来实现，或者分别在一件式光学组合元件中，或通过向微透镜分配楔形或棱镜结构的阵列来实现。
优选地，接收光学器件具有多个在输送方向倾斜的和/或相对于光接收器像素的网格偏移的微透镜。从而实现输送方向上分辨率的增加。否则这些实施在这里也在意义上适用于行方向的偏移。可以设想且特别有利的是，在行方向和输送方向上倾斜微透镜和/或相对于像素网格偏移，以便获得两个维度上的分辨率增加的优点。
优选地，用于一行的微透镜在与用于另一行的微透镜的相反方向上倾斜或偏移。由此，可使各光接收像素的单独的偏移保持得相对较小，这有时在光学上可以更容易且以更少的失真得以实现。例如，各行的微透镜使在行方向和/或输送方向上实现期望的偏移的一半，由此，期望的总偏移会导致全面兼顾这两行。
优选地，接收光学器件具有衍射光学元件(DOE)。借助DOE可以在小空间尺度上实现期望的光重新分布，并且一旦DOE计算出来并创建了必要的工具，就可以很简单地与图像传感器组合。特别地，通过衍射可以实现类似的效果和优点，正如它们被构造成微透镜那样。
优选地，接收光学器件具有至少一个自由表面。在这种情况下，一方面涉及具有自由形式的微光学器件。与微透镜相比，这会给予更多的设计自由度。然而，也可以设想的是，设计具有自由表面的宏观接收光学器件，其为所有的光接收像素或至少光接收器的较大区域提供期望的偏移。特别地，这种自由形式可以与接收物镜相结合以用于聚焦。
优选地，接收光学器件具有至少一个倾斜的或楔形的表面。也可以设想具有微光学器件的变型和宏观接收光学器件。在前一种情况下，从中产生倾斜表面(特别是小楔形体或棱镜)的行布置或矩阵布置。这也可以与微透镜，特别是通过具有楔形表面的微透镜结合，或者与DOE结合。在后一种情况下，设置了楔形体、倾斜的表面或棱镜，其为至少一行光接收元件倾斜光接收器的光轴。几个这种光学元件可以相互补充用于行方向和/或输送方向上的期望的偏移。
优选地，接收光学器件具有用于行的不同的滤色器。由此，可以实现彩色照片。为此，优选地，光接收器具有超过两行光接收像素。通过彼此交错偏移的红色、绿色和蓝色的行，特别是结合无滤色器的至少另一行以用于灰度值捕获来提供示例。但滤色器也可以在一行内变化。可以设想的是，使双倍数量的或至少更多的光接收像素设置有绿色的滤色器，以便根据拜尔模板(Bayer-Pattern)支持生理感知。
根据本发明的方法可以用类似的方式进一步发展并同时显示出类似的优点。这种有利的特征在从属于独立权利要求的从属权利要求中示例性地但不详尽地进行描述。
附图说明
下面将根据实施方式并参考附图对本发明的其它特征和优点进行更详细的说明。在附图中：
图1示出了相机的简化框图；
图2示出了安装在传送带上的相机的示例性应用的三维视图；
图3a示出了在行方向上彼此偏移的两个像素行的示意图；
图3b示出了从根据图3a的偏移得出的有效像素矩阵；
图4a示出了在行方向和与其垂直的方向上彼此偏移的两个像素行的示意图；
图4b示出了从根据图4a的偏移得出的有效像素矩阵；
图5a示出了像素和相关联的、相对于像素中点偏移的微透镜的示意图；
图5b示出了两个像素行和通过微透镜相对于这两个像素行偏移的光轴的示意图；
图6示出了像素和相关联的楔形光学元件的示意图；
图7示出了像素和相关联的、相对于像素中点偏移的、与楔形光学元件组合的微透镜的示意图；
图8示出了像素和倾斜表面形式的相关联的光学元件的示意图；
图9示出了像素和具有至少一个自由表面的相关联的光学元件的示意图；以及
图10示出了用于两行光接收像素的彼此偏移的曝光时间窗口的图示。
图1示出了相机10的非常简化的框图，该相机例如可以用于测量或检查对象以及用于检测代码并读取其内容。相机10通过接收光学器件16检测来自检测区域14的接收光12。接收光学器件16由两行微透镜18示意性地示出。这纯粹是示例性的，应象征性来理解。接收光学器件16的可能的布置方案将在下面结合图5a至图9来进一步更详细地说明。此外，接收光学器件16还可以由常规的相机镜头的其它光学元件来补充。
具有至少两行22a-22b光敏接收像素24的光接收器20从入射的接收光12生成检测区域14和必要时存在于其中的对象和代码区域的图像数据。优选地，光接收器20固定安装在相机10中，即不可相对移动。优选地，接收像素24彼此相同，从而生成等同的图像数据。可替代地，可以设想有差异，例如，像素大小不同，从而在一行22a-22b中灵敏度较高而在另一行22b-22a中空间分辨率较高。优选地，这两行22a-22b集成在同一晶片上，但也不应排除集成在分开的行扫描传感器上。还可以设想的是，使用接收像素的矩阵布置并从中选择特定的行22a-22b。
为了照亮检测区域14，相机10可以包括未示出的集成的或外部的照明装置，特别地，该照明装置使其照明场通过发射光学器件行形
Figure BDA0001612648850000071
地适配于光接收器20的检测区域。
光接收器20的图像数据由控制和评估单元26读取。评估单元26在一个或更多个数字组件上实现，例如在微处理器、ASIC、FPGA等上实现，它们也可以被设置成完全或部分地在相机10外部。如接下来结合图3a-4b和图4a-4b所更详细说明的，评估的一部分在于将两行22a-22b的多个照片放在一起计算，以获得更高的图像分辨率。此外，评估单元26还可以在相机10相对于待捕获的对象的相对移动的过程中将检测到的图像扫描行连接起来成为整体图像。
否则，在评估时预先将图像数据进行过滤、平滑、亮度标准化、根据特定区域定制或二元化。然后，例如识别和分割感兴趣的结构，如各个对象、线或代码区域。这些结构可以测量或检查特定的属性。如果要读取代码，则识别和解码这些代码，即读取代码中包含的信息。
在相机10的接口28上可以输出数据，更确切地说，不仅输出评估结果，如读取的代码信息或测定的尺寸和检查结果，还输出不同处理阶段的信息，如原始图像数据、预处理的图像数据、识别的对象或尚未解码的代码图像数据。相反，也可以经由接口28对相机10进行参数化。
图2示出了安装在传送带30上的相机10的可能的应用，该传送带使对象32，如箭头34所示，输送通过相机10的检测区域14。对象32可以在其外表面上携带代码区域36。相机10的任务是，检测对象32的属性并在作为代码阅读器的优选用途中识别代码区域36，读取、解码安装在那里的代码，并分配给各个相关联的对象32。为了也识别侧面安装的代码区域38也识别出来，优选地，从不同角度使用附加的、未示出的相机10。
根据光接收器20的结构和其成行22a-22b布置的接收像素24，相机10的检测区域14是具有行形读取场的平面。通过在输送方向34上逐行地捕获对象32，逐渐生成被输送过的对象32连同代码区域36的整体图像。
图3a以示意图示出了两行22a-22b的一小部分，优选地，这两行具有不是三个，而是几百个，上千个，甚至更多的接收像素24。这两行22a-22b在行方向上彼此偏移半个像素间距布置，其中可替代地，可以设置其它分数。也可以设想具有多于两行22a-22b的实施方式，特别地，具有各自1/n像素间距的偏移的n行。
图3b示意性地示出了得到的像素矩阵。两行22a-22b的照片40a-40b彼此重叠并且由于相互偏移而形成比原始照片更窄的像素网格。因此，该偏移用于行方向上的分辨率增加。为此，以适当的方式通过取平均值或其它内插滤波器将照片40a-40b计算到得到的像素矩阵。从多个彼此偏移的较低分辨率的输出图像生成较高分辨率的图像的基本原理是已知的(超采样，迭加，超分辨率)。
图4a是与图3a类似的两行22a-22b的一部分的示意图。不同之处在于，两行22a-22b不仅在行方向上而且在横向于该行方向的方向上具有半个像素间距的偏移量。基于根据图2的应用，横向于行方向的方向也被称为输送方向。因此，这两行22a-22b大约彼此分隔开半个自由行。再次，可替代地，可以考虑除半个像素间距外的其它分数以及多于两行22a-22b。
图4b示意性地示出了得到的像素矩阵。通过平行和垂直于行22a-22b的偏移得出在两个轴中更窄的有效像素网格。因此，在行方向和输送方向或x方向和y方向上实现了分辨率增加。如稍后根据图10所描述的，输送方向上的分辨率也可以通过其它措施来增加。
可以设想，通过感光表面或接收像素24的物理布置来实现两行22a-22b在图3a和图4a中所示的偏移。但通过这种方式，就必须使用特殊的图像传感器作为光接收器20来操作。根据本发明，有利地，将根据图3a和图4a的布置理解成关于检测区域14的照片的有效像素。然后，通过接收光学器件16实现偏移，该接收光学器件修改光路，使得有效地形成图像，就好像它是由示出的偏移的物理布置中的接收像素24捕获的那样。因此，生成在行方向和/或输送方向上偏移的图形。然后，光接收器20的接收像素24自身可以按照常规被布置成有规律的行而没有偏移，其中本发明也不排除偏移。
图5a示出了接收像素24和相关联的、相对于接收像素的中心偏移布置的微透镜18的示意图作为这种接收光学器件16的实施方式。对这两行22a-22b来说，微透镜18的偏移是不同的。特别地，这可以通过仅向一行22a-22b分配微透镜18来实现。然而，有利地，划分期望的偏移并且为此向两行22a-22b分配具有在相反方向上的偏移的微透镜。
图5b示例性地示出了这样偏移的微透镜18的作用。在这种情况下，通过相应的微透镜18的作用，接收像素24的光轴42被布置成相对于接收像素的中心偏移。在示出的示例中，在上面的行22a中实现向右上偏移四分之一的像素间距，而在下面的行22b中实现向左下相反的方向上的相应的偏移。总之，两行22a-22b以这种方式在行方向和输送方向上偏移了半个像素间距。当然，这只是一个数值示例。偏移可以限制在行方向或输送方向上，总和为小于或大于半个像素间距并且实际上以任何其它方式分布在行22a-22b上。
图6以类似于图5a的描述图示了接收光学器件16的另一实施方式。在此，设置了楔形元件或棱镜形式的光学倾斜元件44来替代微透镜18。由此，相关联的接收像素24的光轴实际上弯曲并因此产生偏移。如图所示，光学倾斜元件44可以是微光学器件。然而，也可以设想宏观倾斜元件用于行22a-22b的所有接收像素24的或者光接收器20的至少较大的部分区域。
图7图示了微透镜18与光学倾斜元件44的组合。因此，积聚了对于图5a-5b和图6所描述的效果。微透镜18可以与光学倾斜元件44一体构成。然而，也可以设想由微透镜18或光学倾斜元件44组成的两层以及微透镜18与宏观倾斜元件的组合。最后，也可以使微透镜18自身倾斜而不向其自身分配光学倾斜元件44。
图8再次示出了光学倾斜元件44的可替代方案，该倾斜元件在这里被构造成具有两个平坦的表面，但总体上被布置成与接收像素24的表面成一定角度。因此，所有变型都可以像在构造成楔形体或棱镜的光学倾斜元件44一样。
图9示出了接收光学器件16的另一实施方式，与至此为止的实施方式不同，该接收光学器件现在被构造成具有至少一个自由表面46的光学元件。这种自由表面允许为光学设计提供比例如球面或非球面微透镜18更多的自由度。特别地，替代这种具有自由表面46的特定微光学器件更容易有可能的是，通过具有自由表面46的仅一个宏观光学元件为行22a-22b的多个或者甚至全部接收像素产生期望的偏移。
接收光学器件16的其它未示出的可替代方案可以具有衍射光学元件(DOE)。由此，也可以实现至此所述的像素相关的光再分配。图5a至图9所述的实施方式也不应被限制性地理解。对已提到的组合，这些措施实际上可以任意彼此补充地使用，并且除了这种折射组合之外，在每种情况下还可以考虑额外使用DOE。
所述的接收光学器件16中至少有一些已经提供了输送方向上的偏移。但是，这里也有可以可替代地或补充地使用的其它可能性。这首先是调整捕获频率，如果可以接受较短积分时间这一缺点的话。
图10示出了接收像素24的两行22a-22b的相互偏移的曝光时间窗口。在这种情况下，曝光时间窗口表示接收像素24将接收光12整合其中的时间间隔。该图示仅示意性地理解，曝光时间窗口实际上决不可能如图所示的那样完全填充两次捕获之间的持续时间。而是像通常一样根据期望的调制和类似的因素选择持续时间。
更确切地说，特别之处是这两行22a-22b的曝光时间窗口是同步的，但移相了。特别地，与第一行22a的曝光时间窗口相比，第二行22b的曝光时间窗口的延迟恰好相当于半个像素间距或更普遍地相当于也在行方向上发挥作用的偏移。在这种情况下，对输送速度的调整不是新的任务，因为用于行方向和输送方向上的均匀分辨率的捕获频率也应该常规地、不通过偏移的像素增加分辨率地来相应地进行选择。因此，通过捕获频率预定的曝光时间窗口只需要为两行22a-22b中的一行偏移50％或其它分数。
通过调整的曝光时间窗口得出其它组合。因此，可以设想的是，通过接收光学器件16，特别是通过微透镜18，实现行方向上的分辨率增加，而在输送方向上使用更高的捕获频率或交错的曝光时间窗口。这可以降低对光接收器20和接收光学器件16的要求，并且以这种方式可能会导致更可行的解决方案。

Claims (38)

1.一种用于检测在输送方向(34)上相对于相机(10)移动的对象(32)的相机(10)，所述相机具有带有多个光接收像素(24)的光接收器(20)以及控制和评估单元(26)，所述多个光接收像素在横向于所述输送方向(34)的行方向上被布置成至少两行(22a-22b)，所述控制和评估单元被构造用于通过所述两行(22a-22b)生成所述对象(32)的部分区域的第一照片(40a)和第二照片(40b)，其中，所述第一照片(40a)和所述第二照片(40b)彼此至少在行方向上或输送方向上具有偏移，从所述第一照片(40a)和所述第二照片(40b)计算出在行方向上或输送方向上的具有比所述光接收器(20)的原始分辨率更高的分辨率的图像扫描行并从所述对象(32)的移动过程中生成的图像扫描行组成整体图像，
其中，提供所述第一照片(40a)和所述第二照片(40b)之间在行方向上或输送方向上的所述偏移的接收光学器件(16)被布置在所述光接收器(20)前面，所述偏移提供从多个彼此偏移的较低分辨率的图像在行方向上或输送方向上分辨率的增加。
2.根据权利要求1所述的相机(10)，其中，所述光接收像素(24)彼此以像素间距布置，并且其中，所述第一照片(40a)和所述第二照片(40b)的偏移对应于所述像素间距的一部分。
3.根据权利要求1或2所述的相机(10)，其中，所述控制和评估单元(26)被构造用于生成具有交错的曝光时间窗口的所述第一照片(40a)和所述第二照片(40b)。
4.根据权利要求1或2所述的相机(10)，其中，所述接收光学器件(16)具有多个在行方向上倾斜的和/或相对于所述光接收像素(24)的网格偏移的微透镜(18)。
5.根据权利要求3所述的相机(10)，其中，所述接收光学器件(16)具有多个在行方向上倾斜的和/或相对于所述光接收像素(24)的网格偏移的微透镜(18)。
6.根据权利要求1-2和5中任一项所述的相机(10)，其中，所述接收光学器件(16)具有多个在输送方向上倾斜的和/或相对于所述光接收像素(24)的网格偏移的微透镜(18)。
7.根据权利要求3所述的相机(10)，其中，所述接收光学器件(16)具有多个在输送方向上倾斜的和/或相对于所述光接收像素(24)的网格偏移的微透镜(18)。
8.根据权利要求4所述的相机(10)，其中，所述接收光学器件(16)具有多个在输送方向上倾斜的和/或相对于所述光接收像素(24)的网格偏移的微透镜(18)。
9.根据权利要求5和7-8中任一项所述的相机(10)，其中，用于所述两行(22a-22b)中的一行的所述微透镜在与用于所述两行(22a-22b)中的另一行的所述微透镜(18)的相反方向上被倾斜或偏移。
10.根据权利要求4所述的相机(10)，其中，用于所述两行(22a-22b)中的一行的所述微透镜在与用于所述两行(22a-22b)中的另一行的所述微透镜(18)的相反方向上被倾斜或偏移。
11.根据权利要求6所述的相机(10)，其中，用于所述两行(22a-22b)中的一行的所述微透镜在与用于所述两行(22a-22b)中的另一行的所述微透镜(18)的相反方向上被倾斜或偏移。
12.根据权利要求1-2、5、7-8和10-11中任一项所述的相机(10)，其中，所述接收光学器件(16)具有衍射的光学元件。
13.根据权利要求3所述的相机(10)，其中，所述接收光学器件(16)具有衍射的光学元件。
14.根据权利要求4所述的相机(10)，其中，所述接收光学器件(16)具有衍射的光学元件。
15.根据权利要求6所述的相机(10)，其中，所述接收光学器件(16)具有衍射的光学元件。
16.根据权利要求9所述的相机(10)，其中，所述接收光学器件(16)具有衍射的光学元件。
17.根据权利要求1-2、5、7-8、10-11和13-16中任一项所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
18.根据权利要求3所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
19.根据权利要求4所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
20.根据权利要求6所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
21.根据权利要求9所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
22.根据权利要求12所述的相机(10)，其中，所述接收光学器件(16)具有至少一个自由表面(46)。
23.根据权利要求1-2、5、7-8、10-11、13-16和18-22中任一项所述的相机，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
24.根据权利要求3所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
25.根据权利要求4所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
26.根据权利要求6所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
27.根据权利要求9所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
28.根据权利要求12所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
29.根据权利要求17所述的相机(10)，其中，所述接收光学器件具有至少一个倾斜的或楔形的表面(44)。
30.根据权利要求1-2、5、7-8、10-11、13-16、18-22和24-29中任一项所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
31.根据权利要求3所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
32.根据权利要求4所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
33.根据权利要求6所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
34.根据权利要求9所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
35.根据权利要求12所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
36.根据权利要求17所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
37.根据权利要求23所述的相机(10)，其中，所述接收光学器件(16)具有用于所述两行(22a-22b)的不同的滤色器。
38.一种用于检测在输送方向(34)上相对于相机(10)移动的对象(32)的方法，所述相机具有光接收器(20)，所述光接收器具有在横向于所述输送方向(34)的行方向上被布置成至少两行(22a-22b)的多个光接收像素(24)，其中，通过所述两行(22a-22b)生成所述对象(32)的部分区域的第一照片(40a)和第二照片(40b)，其中，所述第一照片(40a)和第二照片(40b)彼此至少在行方向上或输送方向上具有偏移，从所述第一照片(40a)和所述第二照片(40b)计算出在行方向上或输送方向上的具有比所述光接收器(20)的原始分辨率更高的分辨率的图像扫描行，并从所述对象(32)的移动过程中生成的图像扫描行组成整体图像，
其中，通过布置在所述光接收器(20)前面的接收光学器件(16)产生所述第一照片(40a)和第二照片(40b)之间在行方向上或输送方向上的所述偏移，所述偏移提供从多个彼此偏移的较低分辨率的图像在行方向上或输送方向上分辨率的增加。
CN201810271481.8A 2017-03-30 2018-03-29 检测在输送方向上相对于相机移动的对象的相机和方法 Active CN108696675B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017106831.7 2017-03-30
DE102017106831.7A DE102017106831A1 (de) 2017-03-30 2017-03-30 Kamera und Verfahren zur Erfassung von relativ zu der Kamera in einer Förderrichtung bewegten Objekten

Publications (2)

Publication Number Publication Date
CN108696675A CN108696675A (zh) 2018-10-23
CN108696675B true CN108696675B (zh) 2021-01-22

Family

ID=61626955

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810271481.8A Active CN108696675B (zh) 2017-03-30 2018-03-29 检测在输送方向上相对于相机移动的对象的相机和方法

Country Status (5)

Country Link
US (1) US20180288317A1 (zh)
EP (1) EP3383026B1 (zh)
CN (1) CN108696675B (zh)
DE (1) DE102017106831A1 (zh)
DK (1) DK3383026T3 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10906746B2 (en) * 2017-05-05 2021-02-02 Fives Intralogistics Corp. Article typing and sorting system
CN113196139B (zh) 2018-12-20 2023-08-11 美国斯耐普公司 用于生成立体图像的具有双摄像头的柔性眼戴设备
US20220373777A1 (en) * 2019-10-14 2022-11-24 Leica Biosystems Imaging, Inc. Subpixel line scanning
DE102019130865A1 (de) * 2019-11-15 2021-05-20 Sick Ag Codeleser und Verfahren zum Lesen von optischen Codes
US10965931B1 (en) 2019-12-06 2021-03-30 Snap Inc. Sensor misalignment compensation

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8358366B1 (en) * 2010-05-28 2013-01-22 Adobe Systems Incorporate Methods and apparatus for high-speed digital imaging
WO2016005345A1 (de) * 2014-07-09 2016-01-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und verfahren zur erfassung eines objektbereichs
US9501683B1 (en) * 2015-08-05 2016-11-22 Datalogic Automation, Inc. Multi-frame super-resolution barcode imager

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4204230A (en) * 1978-10-25 1980-05-20 Xerox Corporation High resolution input scanner using a two dimensional detector array
JPS60247369A (ja) * 1984-05-23 1985-12-07 Dainippon Screen Mfg Co Ltd アレイセンサ解像度増加方法および装置
US6166831A (en) * 1997-12-15 2000-12-26 Analog Devices, Inc. Spatially offset, row interpolated image sensor
US6429953B1 (en) 1999-05-10 2002-08-06 Sharp Laboratories Of America, Inc. Super resolution scanning using color multiplexing of image capture devices
US7554067B2 (en) * 2001-05-07 2009-06-30 Panavision Imaging Llc Scanning imager employing multiple chips with staggered pixels
US7405761B2 (en) * 2003-10-01 2008-07-29 Tessera North America, Inc. Thin camera having sub-pixel resolution
GB2428926B (en) * 2005-08-03 2010-12-15 Thales Holdings Uk Plc Apparatus and method for imaging
NO20054838D0 (no) 2005-10-19 2005-10-19 Ignis Photonyx As Dobbel-linje brikkekonstruksjon for lysmodulator
JP2011022330A (ja) * 2009-07-15 2011-02-03 Fuji Xerox Co Ltd 露光装置、画像形成装置及びホログラム記録装置
DE102009049387B4 (de) * 2009-10-14 2016-05-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung
US8558899B2 (en) 2009-11-16 2013-10-15 The Aerospace Corporation System and method for super-resolution digital time delay and integrate (TDI) image processing
JP5515119B2 (ja) * 2010-10-05 2014-06-11 株式会社ブイ・テクノロジー マイクロレンズアレイを使用したスキャン露光装置
US20140043469A1 (en) * 2012-08-07 2014-02-13 Carl Zeiss Industrielle Messtechnik Gmbh Chromatic sensor and method
DE102013222780B3 (de) * 2013-11-08 2015-04-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturvorrichtung und verfahren zur erfassung eines objektbereichs
DE102013226789B4 (de) * 2013-12-19 2017-02-09 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Mehrkanaloptik-Bildaufnahmevorrichtung und Mehrkanaloptik-Bildaufnahmeverfahren
TWI527434B (zh) * 2014-03-21 2016-03-21 國立臺灣大學 利用光場相機產生立體影像的方法及光場相機
DE102014104027B4 (de) * 2014-03-24 2020-10-29 Sick Ag Optoelektronische Vorrichtung und Verfahren zur Erfassung von Objektinformationen
DE102014115540A1 (de) 2014-10-24 2016-04-28 Sick Ag Kamera und Verfahren zur Erfassung von Objekten
JP2017059589A (ja) * 2015-09-14 2017-03-23 キヤノン株式会社 固体撮像素子及び撮像装置
DE102016200285A1 (de) * 2016-01-13 2017-07-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs
CN106488148B (zh) * 2016-11-01 2019-09-17 首都师范大学 一种超分辨率图像传感器及其构造方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8358366B1 (en) * 2010-05-28 2013-01-22 Adobe Systems Incorporate Methods and apparatus for high-speed digital imaging
WO2016005345A1 (de) * 2014-07-09 2016-01-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und verfahren zur erfassung eines objektbereichs
US9501683B1 (en) * 2015-08-05 2016-11-22 Datalogic Automation, Inc. Multi-frame super-resolution barcode imager

Also Published As

Publication number Publication date
US20180288317A1 (en) 2018-10-04
EP3383026A1 (de) 2018-10-03
DE102017106831A1 (de) 2018-10-04
DK3383026T3 (da) 2019-09-02
CN108696675A (zh) 2018-10-23
EP3383026B1 (de) 2019-06-19

Similar Documents

Publication Publication Date Title
CN108696675B (zh) 检测在输送方向上相对于相机移动的对象的相机和方法
US7986343B2 (en) Multi-eye imaging apparatus
US20150310242A1 (en) Camera and method for the detection of a moved flow of objects
JPH06100555B2 (ja) 透明物体の欠陥検査方法とその装置
CN111274834B (zh) 光学代码的读取
US20120147232A1 (en) Imaging apparatus
JP7062722B2 (ja) 光学コードのモジュールサイズの特定
US10742908B2 (en) Method and a device for acquiring an image having two-dimensional spatial resolution and spectral resolution
US20110317052A1 (en) Time domain multiplexing for imaging using time delay and integration sensors
CN102346021A (zh) 电子电路的三维检测设备
EP1492996B1 (en) Arrangement in a measuring system
KR102224699B1 (ko) 3차원 측정 장치, 3차원 측정 방법 및 기판의 제조 방법
CN102435222A (zh) 电子电路的光学检测设备
JP2006258582A (ja) 画像入力装置および画像入力方法
EP3278167B1 (en) High resolution pathology scanner with improved signal to noise ratio
KR20010075007A (ko) 3차원 구조의 표면 이미지 감지 및 표면 검사 장치
US20200234018A1 (en) Modular Camera Apparatus and Method for Optical Detection
CN101981411A (zh) 用于多工影像的撷取与处理的方法及设备
US10225502B2 (en) Method and apparatus for acquiring images on moving surfaces
US20220327798A1 (en) Detecting a Moving Stream of Objects
EP3121588A1 (en) Optical characteristic measuring apparatus
JP7314197B2 (ja) 物体の検出
CN115574714A (zh) 检查方法以及检查装置
JP2022536887A (ja) ステレオカメラシステム
US20240233087A9 (en) Detection of objects of a moving object stream

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant