CN110692085A - 用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄监测区域的方法 - Google Patents

用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄监测区域的方法 Download PDF

Info

Publication number
CN110692085A
CN110692085A CN201880033971.2A CN201880033971A CN110692085A CN 110692085 A CN110692085 A CN 110692085A CN 201880033971 A CN201880033971 A CN 201880033971A CN 110692085 A CN110692085 A CN 110692085A
Authority
CN
China
Prior art keywords
image
region
monitoring
control device
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880033971.2A
Other languages
English (en)
Other versions
CN110692085B (zh
Inventor
M·迈耶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of CN110692085A publication Critical patent/CN110692085A/zh
Application granted granted Critical
Publication of CN110692085B publication Critical patent/CN110692085B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/026—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20096—Interactive definition of curve of interest
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0092—Image segmentation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

对监测区域进行立体拍摄和立体分析处理通常需要大量的计算性能。提出一种用于摄像机设备(3)的控制装置(2)，该摄像机设备用于对具有对象(12a，12b)的监测区域(5)进行立体拍摄。在此，由处理模块在确定区域中将所拍摄的监测图像(10，11)的分辨率降低，并且由处理模块将所拍摄的监测图像转变成简化图像(16，17)。所述简化图像具有高分辨率区段(20)和低分辨率区段(19)，其中，高分辨率区段(20)分别是示出监测区域(5)的远程区域的区段，其中，远程区域是监测区域(5)的比边界对象区域(G)至所述摄像机设备(3)更远的区域。控制装置具有分析处理模块(15)，其基于第一简化图像(16)和第二简化图像(17)立体地分析处理监测区域(5)。

Description

用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄 监测区域的方法
技术领域
本发明涉及一种用于摄像机设备的控制装置，该摄像机设备用于立体地拍摄具有对象的监测区域。
背景技术
由视频监测技术已知能够进行深度测量的立体摄像机。这种摄像机例如用于识别障碍物。在借助立体摄像机进行深度估计时，一方面，测量的准确度随着所使用的图像拍摄器的图像分辨率而提高。另一方面，所需的计算性能也随着图像分辨率而提高。
可能是最接近的现有技术的文献DE 10 2008 001 076 A1描述一种用于降低输入图像的分辨率的方法，其中，输入图像示出通过监测摄像机拍摄的场景。该方法的特征在于，在考虑场景中的对象距离(Gegenstandsweite)和/或三维场景的透视失真的情况下对分辨率降低进行匹配。
发明内容
在本发明的范畴内提出一种具有权利要求1的特征的用于摄像机设备的控制装置。此外，还提出一种具有权利要求11的特征的摄像机组件以及一种具有权利要求12的特征的用于立体地拍摄监测区域的方法。由从属权利要求、接下来的说明书和附图得出本发明的优选的和/或有利的实施方式。
根据本发明提出一种用于摄像机设备的控制装置，该摄像机设备用于立体地拍摄具有对象的监测区域。控制装置构造用于操控、操作和/或使用摄像机设备和/或多个摄像机设备。摄像机设备构造用于立体地拍摄监测区域。立体拍摄尤其是监测区域的3D图像拍摄或3D分析处理。立体拍摄尤其应理解为监测区域的三维分析处理和/或拍摄。在监测区域中布置有一个对象或多个对象。监测区域优选是监测地区(
Figure BDA0002284293280000011
)的部分区域。监测区域和/或监测地区例如是开放场地或室内区域——尤其机场、火车站或对安全技术重要相关的区域。
摄像机设备包括第一摄像机单元和第二摄像机单元。第一摄像机单元和第二摄像机单元可以构造成单独的摄像机。替代地和/或补充地，第一摄像机单元和第二摄像机单元构造成摄像机设备中的(例如共同的壳体中的)图像拍摄传感器。第一摄像机单元和第二摄像机单元优选是如下摄像机和/或如下图像拍摄传感器：所述摄像机和/或图像拍摄传感器用于拍摄彩色图像、黑白图像、视频或单个图像。
第一摄像机单元构造用于拍摄监测区域的第一监测图像。监测图像尤其是监测区域的2D图像。第二摄像机单元构造用于拍摄第二监测图像，其中，第二监测图像示出监测区域。第一监测图像和第二监测图像尤其具有重叠区域，其中，该重叠区域示出监测区域的公共区域。尤其在相同的时刻拍摄第一监测图像和第二监测图像。替代地，时间偏移地拍摄第一监测图像和第二监测图像。
摄像机设备构造用于将第一监测图像和第二监测图像提供给控制装置。为了传递第一监测图像和第二监测图像，摄像机设备与控制装置尤其在数据技术上连接。摄像机设备与控制装置之间的数据技术连接可以是有线连接或无线连接(例如无线电连接)。第一监测图像和第二监测图像尤其能够在数据技术上存储和/或保存在控制装置中。
分别将第一摄像机单元与监测区域中的对象的距离以及第二摄像机单元与监测区域中的对象的距离称为对象距离(Gegenstandsweite)。对于监测区域中的多个对象，第一和第二摄像机单元分别具有多个对象距离。摄像机单元与对象之间的距离尤其是：摄像机单元的像平面至监测区域中的对象的距离。
第一摄像机单元和第二摄像机单元优选彼此间隔开地布置，使得对于位于监测区域中的对象而言，第一摄像机单元和第二摄像机单元具有不同的对象距离。监测区域尤其能够划分成区段，其中，这些区段也能够被理解为监测区域的对象，使得对于监测区域的这些区段可以得出不同的对象距离。
控制装置具有处理模块。该处理模块尤其是数据处理模块。处理模块例如是计算机单元、微处理器或微控制器。处理模块构造用于将第一监测图像处理成第一简化图像(reduzierte Bild)。此外，处理模块构造用于将第二监测图像处理成第二简化图像。第一简化图像尤其具有比第一监测图像更低的总分辨率，其中，第二简化图像具有比第二监测图像更低的总分辨率。处理模块尤其构造用于通过区段式地降低第一监测图像的分辨率来由第一监测图像产生第一简化图像。此外，处理模块构造用于通过区段地降低第二监测图像的分辨率来由第二监测图像产生第二简化图像。
第一简化图像具有高分辨率区段和低分辨率区段。同样地，第二简化图像具有高分辨率区段和低分辨率区段。尤其能够实现，第一简化图像和第二简化图像具有多个高分辨率区段和/或低分辨率区段。低分辨率区段尤其分别是简化图像中的平坦区域。同样地，高分辨率区段尤其优选是简化图像中的平坦区域。例如能够实现，高分辨率区段和低分辨率区段连续地相互转变，替代地，高分辨率区段突然地转变成低分辨率区段。
第一简化图像和/或第二简化图像的高分辨率区段分别示出第一监测图像和/或第二监测图像的以下区段：该区段示出所成像的监测区域的远程区域。远程区域是监测区域中的以下区域：该区域比可调节和/或所调节的边界对象区域更远离摄像机单元。边界对象区域可以是线形的或平面的，边界对象区域尤其具有最大和最小距离，其中，最大和最小距离尤其是边界对象区域的最大和最小对象距离。线形的边界对象区域尤其是边界对象距离。监测区域中的如下区域和/或区段形成监测区域的近程区域：所述区域和/或区段比边界对象区域和/或边界对象距离更靠近摄像机单元。简化图像的低分辨率区段分别示出监测图像的如下区段和/或简化图像的如下区段：所述区段示出监测区域的近程区域。
分辨率尤其理解为图像的像素数和/或像点的数量，例如每个图像的像点、每行的像点和/或每列的像点。分辨率尤其包括色深，使得分辨率的降低可以相应于图像色深的降低。此外，分辨率的降低涉及图像的像点(例如每行的像点数量和/或每列的像点数量)的减少。
控制装置具有分析处理模块，该分析处理模块用于基于第一简化图像和第二简化图像来对监测区域进行立体分析处理。该分析处理模块尤其是处理模块的一部分。分析处理模块尤其是计算单元、微处理器或微控制器单元。基于第一简化图像和第二简化图像，分析处理模块尤其构造用于确定和/或估计所成像的监测区域中的距离和/或间距(Entfernung)。尤其能够实现，三维地确定所成像的监测区域的和/或监测区域中的对象之间的距离和/或间距。
本发明的一个构思是提供一种用于摄像机设备的控制装置，在该控制装置中，仅在所拍摄的图像的小区域中以完全的分辨率进行计算和/或分析处理，而不低于所需的测量准确度。本发明为此提出一种控制装置，在该控制装置中，保持重要相关的图像区域中的准确度，但同时显著降低所需的计算性能。
在本发明的一种特别优选的构型中，控制装置具有用于输入边界对象区域和/或边界对象距离的输入模块。输入模块尤其构造用于数字地、字母数字地或图形地输入边界区域和/或边界对象距离。例如，输入模块是计算机键盘、触摸板或计算机鼠标。这种构型基于以下构思：提供一种能够特别易于调节的控制装置。
在本发明的一种可能的构型中，输入模块具有用于显示第一监测图像和/或用于显示第二监测图像的显示单元。例如，该显示单元构造成触摸屏或触摸板，其中，在触摸屏和/或触摸板上能够显示第一监测图像和/或第二监测图像，并且能够直接输入和/或设定边界对象区域和/或边界对象距离。输入模块优选构造成：使得控制装置的使用者能够在所显示的第一监测图像中图形化地和/或在第二监测图像中图形化地设定和/或调节边界对象距离。例如，使用者可以在第一监测图像中和/或第二监测图像中光学地选择和设定边界对象区域和/或边界对象距离。该构型基于以下构思：提供一种能够直观地控制和/或调节的控制装置。
特别优选地，输入模块构造成：使得使用者可以通过在第一监测图像和/或第二监测图像中选择线形边界来设定边界对象区域和/或边界对象距离。例如，使用者为此在第一监测图像和/或第二监测图像中选择一条线，其中，该线将高分辨率区域与低分辨率区域分离。替代地和/或补充地，输入模块构造成：使得使用者可以通过在第一监测图像和/或第二监测图像中选择平面区域和/或区段来设定边界对象区域和/或边界对象距离。例如，使用者为此在监测图像中设定平面区段，其中，所设定的区段例如可以是高分辨率区域和/或低分辨率区域。
在本发明的一种可能的构型中设置，输入模块构造成：使得使用者可以手动地剪裁高分辨率区段。例如，控制装置建议一个高分辨率区段，其中，在所显示的监测图像中和/或在所显示的简化图像中图形化地示出该区段。如果使用者发现高分辨率区域被选择的太大和/或可以对其进行简化，则使用者可以对高分辨率区域进行剪裁并且可以手动选择：原始的高分辨率区域中的哪些区域应该删去并应变为低分辨率区段。该构型基于以下构思：使用者可以基于人类信息进一步降低计算性能。
特别优选地，第一监测图像到第一简化图像的该简化基于第一边界对象区域，其中，第二监测图像到第二简化图像的该简化基于第二边界对象区域。优选地，第一边界对象区域与第二边界对象区域相同。替代地，第一边界对象区域与第二边界对象区域不同，例如，第一边界对象区域大于第二边界对象区域。尤其能够实现，第一边界对象区域与第二边界对象区域同步和/或耦合，例如，第一边界对象距离比例地或间接成比例地随第二边界对象距离变化。
在本发明的一种特别优选的构型中，高分辨率区段的分辨率是低分辨率区段的分辨率的至少两倍。替代地和/或补充地，高分辨率区段的分辨率是低分辨率区段分辨率的至少三倍、尤其至少四倍。
在本发明的一种可能的构型中，第一简化图像具有多个区段，第二简化图像同样具有多个区段，其中，这些区段分别具有不同的分辨率。处理模块尤其构造用于如此设定不同区段的分辨率，使得分辨率与对象距离的商不低于能够设定的和/或所确定的极限值。该构型基于以下构思：图像中的测量准确度与如下比例关系成比例：该比例关系是所使用的图像分辨率与对象至摄像机的间距的比例关系。因此，该构型为简化图像的区段设定最小准确度，其中，不允许低于该准确度。
在本发明的一种可能的构型中，分析处理模块构造用于基于第一简化图像和第二简化图像提供监测区域的立体图像。分析处理模块尤其构造用于基于第一简化图像和第二简化图像提供所成像的监测区域的三维模型和/或3D图像。立体图像尤其包括：所成像的监测区域的对象之间的距离和/或间距，和/或，摄像机单元与监测区域的所成像的对象之间的距离和/或间距。
特别优选地，第一摄像机单元构造用于拍摄第一测试图像，其中，第二摄像机单元构造用于拍摄第二测试图像。第一测试图像和第二测试图像尤其具有重叠，其中，该重叠示出监测区域的相同区域。处理模块尤其构造用于基于第一测试图像和第二测试图像来估计对象距离，其中，该对象距离是监测区域的对象与摄像机单元之间的所估计的对象距离。处理模块优选构造用于估计简化图像中的高分辨率区段的区域和/或低分辨率区段的区域。例如，处理模块估计低分辨率区段位于哪个区域和/或区段中，尤其估计应该对监测图像的哪个区段进行简化，以便获得简化图像。该构型基于以下考虑：提供一种确保简单初始化的控制装置。
本发明的另一主题是一种摄像机组件。该摄像机组件包括根据权利要求中任一项所述的和/或在说明书中之前描述的摄像机设备和控制装置。摄像机设备和控制装置尤其在数据技术上连接，其中，摄像机设备在数据技术上给控制装置提供第一监测图像和第二监测图像。本发明的主题基于以下考虑：提供一种由摄像机设备和控制装置构成的兼容单元，该兼容单元能够对监测区域进行立体分析处理。
本发明的另一主题是一种用于立体地拍摄和/或立体地监测监测区域的方法。该方法尤其用于借助之前描述的摄像机组件立体地拍摄监测区域。借助第一摄像机单元拍摄监测区域的第一监测图像，其中，借助第二摄像机单元拍摄监测区域的第二监测图像。第一监测图像和第二监测图像优选具有重叠。分别将摄像机单元与监测区域中的对象之间的距离称为对象距离。该方法设置，将第一监测图像处理成第一简化图像，并且将第二监测图像处理成第二简化图像。第一简化图像和第二简化图像分别具有高分辨率区段和低分辨率区段。高分辨率区段分别是示出监测区域的远程区域的区段，其中，低分辨率区段是示出监测区域的近程区域的区段。根据本发明，该方法设置，基于第一简化图像和第二简化图像立体地分析处理和/或监测所述监测区域。立体的分析处理和/或监测例如是创建三维图像和/或创建所成像的监测区域的模型。此外，立体的分析处理例如是确定监测区域中的对象的距离。
附图说明
由以下说明书以及附图得出本发明的其他特征、优点和效果。在此示出：
图1示出一种摄像机组件的实施例；
图2示出监测区域和摄像机设备的俯视图；
图3示出监测区域的简化图像。
具体实施方式
图1示意性地示出摄像机组件1。摄像机组件1包括控制装置2和摄像机设备3。
摄像机设备3布置在监测地区4中。摄像机设备3构造用于对监测区域5进行监测，其中，监测区域5是监测地区4的部分区域。监测地区4例如是开放场地或室内区域(例如机场大楼)。
摄像机设备3包括第一摄像机单元6和第二摄像机单元7。第一摄像机单元6和第二摄像机单元7构造为成像传感器、例如构造为CCD传感器或CMOS传感器。摄像机设备具有视场8，其中，该视场8在XY平面中具有张角α。为此，附加地标记出坐标系9。坐标系9的Y方向尤其是高度方向。视场8的张角α尤其大于五十度、尤其大于七十度。在该实施例中，张角α为六十度。
摄像机设备3构造用于拍摄监测区域5的监测图像10、11。在此，第一摄像机单元6构造用于拍摄监测区域5的第一监测图像10。第二摄像机单元7构造用于拍摄监测区域5的第二监测图像11。第一监测图像10和第二监测图像11尤其形成监测区域5的公共区域。为了能够基于第一监测图像10和第二监测图像11对监测区域5执行立体的分析处理，将第一摄像机单元6和第二摄像机单元7彼此间隔开地布置。第一摄像机单元6和第二摄像机单元7尤其在摄像机设备3的像平面内间隔开。
在监测区域5中布置有对象12a和12b。对象12a例如涉及人，对象12b例如涉及树。作为对象12a的人比对象12b更靠近摄像机设备3。将对象12a、12b与摄像机设备3的距离理解为对象距离d，其中，对象12a的对象距离是da，对象12b的对象距离是db。尤其将监测区域5分成多个区段，其中，监测区域5的区段同样具有对象距离。例如，对象距离d0相应于监测区域5的至摄像机设备3最近的点，其中，对象距离d2相应于至摄像机设备3最远的对象距离d。对于摄像机组件1，能够设定边界对象区域G，其中，在该实施例中，边界对象区域是线形的边界对象距离G。在该实施例中，边界对象距离G处于对象距离d0与d2的中间。
控制装置2例如构造成计算机单元。替代地，控制装置2是处理器装置或微控制器。控制装置2包括存储模块13、处理模块14和分析处理模块15。控制装置2在数据技术上与摄像机设备3连接。摄像机设备3与控制装置2的数据技术连接例如是有线连接，替代地，该数据技术连接是无线电连接。在数据技术上将监测图像10和11提供给控制装置2。第一监测图像10和第二监测图像11存储在存储模块13中。第一监测图像10以及第二监测图像11分别具有监测图像分辨率。
处理模块14构造用于将第一监测图像10处理成第一简化图像16，其中，该处理包括至少部分地降低分辨率。处理模块14还构造用于将第二监测图像11处理成第二简化图像17，其中，该处理相应于至少部分地降低分辨率。在此，处理模块14构造用于以第一分辨率示出第一监测图像10的以下区域：该区域成像监测区域5的比边界对象距离G更远的区域；其中，以第二分辨率示出第一监测图像10的以下区域：该区域示出监测区域5的比边界对象距离G更靠近摄像机设备3的区域。第一分辨率尤其是比第二分辨率更高的分辨率。在此，在简化图像16中，以降低的分辨率示出监测区域5的比边界对象距离G更靠近摄像机设备3的区域，其中，以提高的分辨率示出监测区域5的更远的区域。因此，第一简化图像16具有低清晰度区段19和高清晰度区段20。高清晰区段20的分辨率尤其是低清晰区段19的分辨率的至少两倍。
此外，处理模块14构造用于如此简化第二监测图像11，使得相比于监测区域5的比边界对象距离G更靠近摄像机设备3的区域，以更高的分辨率示出监测区域5的比边界对象距离G更远的区域。因此，第二简化图像17同样具有高分辨率区段19和低分辨率区段20。
分析处理模块15获得由处理模块14提供的第一简化图像16和第二简化图像17。分析处理模块15构造用于基于第一简化图像16和第二简化图像17来立体地分析处理监测区域5，并且基于第一简化图像16和第二简化图像17来创建监测区域5的3D模型21。借助3D模型21能够确定对象12a与12b之间的距离。
图2示出监测地区4的从上方的俯视图。此外，在该俯视图中示出具有其视场8的摄像机设备3。从上方的俯视图尤其相应于在XZ平面上的视图，其中，为清楚起见，示出具有X轴和Z轴的辅助坐标系9。Z轴尤其垂直于X轴并且垂直于Y轴，其中，坐标系9是笛卡尔坐标系。在此，视场8在XZ平面中的张角β为九十度。视场8在XZ平面中撑开的角度β尤其大于七十度、尤其小于一百二十度。摄像机设备3(尤其第一摄像机单元6和第二摄像机单元7)成像出监测区域5。在监测地区4中和在监测区域5中，对象距离d0和d2以及边界对象距离G被绘制成平行于Z轴的线。
摄像机设备3构造用于监测通道18、过道(Gangs)，其中，通道18布置在监测地区4中并且由壁22限界。
在摄像机设备3的视场8中的通道18上存在第一人员12a和第二人员12b。第一人员12a具有小于边界对象距离G的对象距离，而第二人员12b具有大于边界对象距离G的对象距离。
图3示出图2中的监测区域5的简化图像16、17的示例。在简化图像16中标记出对象距离d0、d2以及边界对象距离G的辅助线。由于成像特性，边界对象距离G的辅助线显得更靠近对象距离d2，并且边界对象距离G显得更远离对象距离d0。同样归因于该成像特性，简化图像中的通道的壁22显示成收敛的直线。虽然第一人员12a和第二人员12b实际上大小相同，但在简化图像16中第一人员12a和第二人员12b被不同大小地成像，其中，相比于距离更远的第二人员12b，具有较低对象距离的第一人员12a显得更大。
附加地，在简化图像16中绘制坐标系9。简化图像16的在边界对象距离G与对象距离d0之间的区域是低分辨率区段19，该低分辨率区段具有比高分辨率区段20更低的分辨率。该附图用阴影线示出实际的高分辨率区段20，该高分辨率区段在简化图像16中布置在边界对象距离G与对象距离d2之间。可以由使用者将实际的高分辨率区域20a剪裁成经剪裁的高分辨率区段20b。在该实施例中，经剪裁的高分辨率区段20b是实际高分辨率区段20a的位于通道18区域中的区域，或者是高分辨率区段20的包括通道的壁22的区域。

Claims (12)

1.一种用于摄像机设备(3)的控制装置(2)，所述摄像机设备用于对具有对象(12a，12b)的监测区域(5)进行立体拍摄，
其中，所述摄像机设备(3)包括第一摄像机单元(6)和第二摄像机单元(7)，其中，所述第一摄像机单元(6)构造用于拍摄所述监测区域(5)的第一监测图像(10)，其中，所述第二摄像机单元(7)构造用于拍摄所述监测区域(5)的第二监测图像(11)，
其中，所述摄像机设备(3)构造用于将所述第一监测图像(10)和所述第二监测图像(11)提供给所述控制装置(2)，
其中，分别将摄像机单元(6)与所述监测区域(5)的对象(12a，12b)之间的距离称为对象距离(d，d0，d2)，
所述控制装置具有处理模块(14)，其中，所述处理模块(14)具有至少一个边界对象区域(G)，所述处理模块构造用于将所述第一监测图像(10)处理成第一简化图像(16)并且将所述第二监测图像(11)处理成第二简化图像(17)，
其中，所述第一简化图像(16)和所述第二简化图像(17)分别具有高分辨率区段(20)和低分辨率区段(19)，
其中，所述高分辨率区段(20)分别是示出所述监测区域(5)的远程区域的区段，其中，所述远程区域是所述监测区域(5)的以下区域：所述区域比所述边界对象区域(G)更远离所述摄像机设备(3)，
其中，所述低分辨率区段(19)是示出所述监测区域(5)的近程区域的区段，其中，所述近程区域是所述监测区域(5)的以下区域：所述区域比所述边界对象区域(G)更靠近所述摄像机设备(3)，
所述控制装置具有分析处理模块(15)，所述分析处理模块用于基于所述第一简化图像(16)和所述第二简化图像(17)对所述监测区域(5)进行立体分析处理。
2.根据权利要求1所述的控制装置(2)，其特征在于输入模块，所述输入模块用于输入所述边界对象区域(G)。
3.根据权利要求2所述的控制装置(2)，其特征在于，所述输入模块具有用于显示所述第一监测图像(10)和/或所述第二监测图像(11)的显示单元，其中，所述输入模块构造成：使得使用者能够在所显示的第一监测图像(10)和/或第二监测图像(11)中图形化地设定所述边界对象区域(G)。
4.根据权利要求2或3所述的控制装置(2)，其特征在于，所述输入模块构造成：使得所述使用者能够通过在所述第一监测图像(10)中和/或在所述第二监测图像(11)中选择线形边界或平面区段来设定所述边界对象区域(G)。
5.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述输入模块构造成：使得所述使用者能够手动地剪裁所述高分辨率区段(20)。
6.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述处理模块(14)具有第一边界对象区域(G)和第二边界对象区域(G)，其中，所述第一监测图像(10)到所述第一简化图像(16)的简化基于所述第一边界对象区域(G)，所述第二监测图像(11)到所述第二简化图像(17)的简化基于所述第二边界对象区域(G)。
7.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述高分辨率区段(20)的分辨率是所述低分辨率区段(19)的分辨率的至少两倍。
8.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述第一简化图像(16)和所述第二简化图像(17)分别具有多个区段，其中，所述区段具有不同的分辨率，其中，所述处理模块(14)构造用于如此设定所述区段的分辨率，使得所述分辨率与所述对象区域(G)的最小距离或最大距离构成的商不低于能够设定的极限值。
9.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述分析处理模块(14)构造用于基于所述第一简化图像(16)和所述第二简化图像(17)提供所成像的监测区域(5)的立体图像。
10.根据以上权利要求中任一项所述的控制装置(2)，其特征在于，所述第一摄像机单元(6)构造用于拍摄第一测试图像，所述第二摄像机单元(7)构造用于拍摄第二测试图像，其中，所述第一测试图像和所述第二测试图像分别具有测试分辨率并且示出所述监测区域(5)，
其中，所述处理模块(14)构造用于基于所述第一测试图像和所述第二测试图像估计对象距离(d，d0，d2)，并且所述处理模块构造用于在所述简化图像(16，17)中估计所述高分辨率区段(20)的区域和/或所述低分辨率区段(19)的区域。
11.一种摄像机组件(1)，其包括根据以上权利要求中任一项所述的摄像机设备(3)和控制装置(2)，其中，所述摄像机设备(3)与所述控制装置(2)在数据技术上连接。
12.一种用于尤其借助根据权利要求11所述的摄像机组件(1)来立体地拍摄监测区域(5)的方法，其中，借助第一摄像机单元(6)拍摄第一监测图像(10)，并且借助第二摄像机单元(7)拍摄第二监测图像(11)，其中，所述第一监测图像(10)和所述第二监测图像(11)示出所述监测区域(5)，其中，分别将摄像机单元(6，7)与所述监测区域(5)的对象(12a，12b)之间的距离称为对象距离(d，d0，d2)，
其中，将所述第一监测图像(10)处理成第一简化图像(16)，将所述第二监测图像(11)处理成第二简化图像(17)，其中，所述第一简化图像(16)和所述第二简化图像(17)分别具有高分辨率区段(20)和低分辨率区段(19)，其中，所述高分辨率区段(20)分别是示出所述监测区域(5)的远程区域的区段，其中，所述远程区域是所述监测区域(5)的比所述边界对象区域(G)更远的区域，其中，所述低分辨率区段(19)是示出所述监测区域(5)的近程区域的区段，其中，所述近程区域是所述监测区域(5)的比所述边界对象区域(G)更靠近所述摄像机设备(3)的区域，其中，基于所述第一简化图像(16)和所述第二简化图像(17)来对所述监测区域(5)进行立体分析处理。
CN201880033971.2A 2017-05-22 2018-04-27 用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄监测区域的方法 Active CN110692085B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017208607.6 2017-05-22
DE102017208607.6A DE102017208607A1 (de) 2017-05-22 2017-05-22 Steuereinrichtung für eine Kameravorrichtung, Kameraanordnung und Verfahren zur stereoskopischen Aufnahme eines Überwachungsbereichs
PCT/EP2018/060855 WO2018215166A1 (de) 2017-05-22 2018-04-27 Steuereinrichtung für eine kameravorrichtung, kameraanordnung und verfahren zur stereoskopischen aufnahme eines überwachungsbereichs

Publications (2)

Publication Number Publication Date
CN110692085A true CN110692085A (zh) 2020-01-14
CN110692085B CN110692085B (zh) 2023-05-26

Family

ID=62063554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880033971.2A Active CN110692085B (zh) 2017-05-22 2018-04-27 用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄监测区域的方法

Country Status (5)

Country Link
US (1) US10728522B2 (zh)
EP (1) EP3631758B1 (zh)
CN (1) CN110692085B (zh)
DE (1) DE102017208607A1 (zh)
WO (1) WO2018215166A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10953899B2 (en) * 2018-11-15 2021-03-23 Avante International Technology, Inc. Image-based monitoring and detection of track/rail faults
US11699225B2 (en) * 2020-11-24 2023-07-11 Get Spiffy, Inc. Tire sensing and analysis system
WO2022244920A1 (ko) * 2021-05-18 2022-11-24 주식회사 쓰리아이 휴대 단말기 및 단말기 거치대의 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6320618B1 (en) * 1996-08-30 2001-11-20 Honda Giken Kogyo Kabushiki Kaisha Semiconductor image sensor with a plurality of different resolution areas
CN101018299A (zh) * 2006-02-07 2007-08-15 日本胜利株式会社 摄像方法以及摄像装置
CN105407791A (zh) * 2013-06-25 2016-03-16 微软技术许可有限责任公司 经由深度相机的眼睛追踪
US20180101744A1 (en) * 2016-10-09 2018-04-12 Airspace Systems Inc. Spatio-temporal awareness engine for priority tree based region selection across multiple input cameras and multimodal sensor empowered awareness engine for target recovery and object path prediction

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102008001076A1 (de) 2008-04-09 2009-10-15 Robert Bosch Gmbh Verfahren, Vorrichtung sowie Computerprogramm zur Auflösungsreduktion eines Eingangsbilds

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6320618B1 (en) * 1996-08-30 2001-11-20 Honda Giken Kogyo Kabushiki Kaisha Semiconductor image sensor with a plurality of different resolution areas
CN101018299A (zh) * 2006-02-07 2007-08-15 日本胜利株式会社 摄像方法以及摄像装置
CN105407791A (zh) * 2013-06-25 2016-03-16 微软技术许可有限责任公司 经由深度相机的眼睛追踪
US20180101744A1 (en) * 2016-10-09 2018-04-12 Airspace Systems Inc. Spatio-temporal awareness engine for priority tree based region selection across multiple input cameras and multimodal sensor empowered awareness engine for target recovery and object path prediction

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
L. BEDAT 等: "Low bit-rate codec based on LAR method for video surveillance via Internet", 2000 10TH EUROPEAN SIGNAL PROCESSING CONFERENCE，IEEE *
O. DEFORGES 等: "Region of interest coding for low bit rate image transmission", 2000 IEEE INTERNATIONAL CONFERENCE ON MULTIMEDIA AND EXPO. ICME2000. PROCEEDINGS. LATEST ADVANCES IN THE FAST CHANGING WORLD OF MULTIMEDIA *

Also Published As

Publication number Publication date
EP3631758A1 (de) 2020-04-08
CN110692085B (zh) 2023-05-26
EP3631758B1 (de) 2021-04-14
WO2018215166A1 (de) 2018-11-29
US20200186778A1 (en) 2020-06-11
US10728522B2 (en) 2020-07-28
DE102017208607A1 (de) 2018-11-22

Similar Documents

Publication Publication Date Title
EP3654286B1 (en) Image capturing apparatus, monitoring system, image processing apparatus, image capturing method, and non-transitory computer readable recording medium
JP6700752B2 (ja) 位置検出装置、位置検出方法及びプログラム
JP6568374B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US20030085992A1 (en) Method and apparatus for providing immersive surveillance
EP3451285B1 (en) Distance measurement device for motion picture camera focus applications
US8179448B2 (en) Auto depth field capturing system and method thereof
CN110460835B (zh) 图像处理装置及其控制方法和计算机可读存储介质
KR101903619B1 (ko) 구조화된 스테레오
TWI696906B (zh) 處理地板之方法
JP2007129709A (ja) イメージングデバイスをキャリブレートするための方法、イメージングデバイスの配列を含むイメージングシステムをキャリブレートするための方法およびイメージングシステム
KR20150096922A (ko) 카메라 포즈 추정 장치 및 카메라 포즈 추정 방법
US9633450B2 (en) Image measurement device, and recording medium
CN110692085B (zh) 用于摄像机设备的控制装置、摄像机组件和用于立体地拍摄监测区域的方法
JP2015079444A5 (zh)
US20120271102A1 (en) Stereoscopic endoscope apparatus
JP5007863B2 (ja) ３次元物体位置計測装置
CN105578129A (zh) 一种多路多画面视频拼接装置
CN104915948B (zh) 用于使用范围传感器选择二维兴趣区域的系统和方法
JP6409769B2 (ja) ３次元形状計測装置、３次元形状計測方法及び３次元形状計測プログラム
JP6104066B2 (ja) 画像処理装置および画像処理方法
US11195295B2 (en) Control system, method of performing analysis and storage medium
JP3491029B2 (ja) 自動監視装置
KR101857977B1 (ko) 플래놉틱 카메라와 깊이 카메라를 결합한 영상 장치 및 영상 처리 방법
JP6606340B2 (ja) 画像検出装置、画像検出方法およびプログラム
KR20220115223A (ko) 다중 카메라 캘리브레이션 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant