CN110178156A - 包括可调节焦距成像传感器的距离传感器 - Google Patents
包括可调节焦距成像传感器的距离传感器 Download PDFInfo
- Publication number
- CN110178156A CN110178156A CN201780075861.8A CN201780075861A CN110178156A CN 110178156 A CN110178156 A CN 110178156A CN 201780075861 A CN201780075861 A CN 201780075861A CN 110178156 A CN110178156 A CN 110178156A
- Authority
- CN
- China
- Prior art keywords
- reference pattern
- distance
- pattern
- subpoint
- line
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims description 76
- 238000005259 measurement Methods 0.000 claims abstract description 49
- 238000000034 method Methods 0.000 claims abstract description 37
- 230000000007 visual effect Effects 0.000 claims abstract description 26
- 230000003287 optical effect Effects 0.000 claims description 32
- 238000006073 displacement reaction Methods 0.000 claims description 13
- 238000003860 storage Methods 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims description 6
- 230000003321 amplification Effects 0.000 description 15
- 238000003199 nucleic acid amplification method Methods 0.000 description 15
- 230000008859 change Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 9
- 230000015572 biosynthetic process Effects 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000009738 saturating Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 235000008434 ginseng Nutrition 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/571—Depth or shape recovery from multiple images from focus
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
- G01C3/06—Use of electric means to obtain final indication
- G01C3/08—Use of electric radiation detectors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
- G01B11/026—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
- G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/564—Depth or shape recovery from multiple images from contours
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10148—Varying focus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Electromagnetism (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Artificial Intelligence (AREA)
- Computer Networks & Wireless Communication (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- Measurement Of Optical Distance (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
在一个实施例中,一种用于计算到物体的距离的方法,所述方法包括:同时激活距离传感器的第一投影点和第二投影点,以共同将参考图案投影到视场中;激活距离传感器的第三投影点,以将测量图案投影到视场中;捕获视场的图像,其中物体、参考图案和测量图案在图像中是可见的;基于图像中的测量图案的外观来计算从距离传感器到物体的距离;基于图像中的参考图案的外观来检测距离传感器的透镜的移动;以及基于如检测到的移动来调节如计算的距离。
Description
相关申请的交叉引用
本申请要求2016年12月7日提交的美国临时专利申请序列号62/430,998的权益,所述专利申请通过引用以其整体并入本文中。
背景技术
本公开一般地涉及计算机视觉系统,并且更特别地涉及用于测量到空间中的物体或点的距离的传感器。
诸如机器人交通工具和无人机之类的无人驾驶交通工具通常依赖于用于周围环境中的障碍物检测和导航的计算机视觉系统。这些计算机视觉系统通常又依赖于从周围环境获取视觉数据的各种传感器,计算机视觉系统处理该数据以便收集关于周围环境的信息。例如,经由一个或多个成像传感器获取的数据可以被用来确定从交通工具到周围环境中的特定物体或点的距离。
发明内容
在一个实施例中,一种用于计算到物体的距离的方法,所述方法包括:同时激活距离传感器的第一投影点和第二投影点,以共同将参考图案投影到视场中;激活距离传感器的第三投影点,以将测量图案投影到视场中;捕获视场的图像,其中物体、参考图案和测量图案在图像中是可见的;基于图像中的测量图案的外观来计算从距离传感器到物体的距离;基于图像中的参考图案的外观来检测距离传感器的透镜的移动;以及基于如检测到的移动来调节如计算的距离。
在另一实施例中,一种存储多个指令的计算机可读存储设备,所述指令当由处理器执行时,使得处理器执行用于计算到物体的距离的操作。所述操作包括:同时激活距离传感器的第一投影点和第二投影点,以共同将参考图案投影到视场中;激活距离传感器的第三投影点,以将测量图案投影到视场中;捕获视场的图像,其中物体、参考图案和测量图案在图像中是可见的;基于图像中的测量图案的外观来计算从距离传感器到物体的距离;基于图像中的参考图案的外观来检测距离传感器的透镜的移动;以及基于如检测到的移动来调节如计算的距离。
在另一示例中,一种装置,包括:成像传感器,其包括透镜,所述透镜是可移动的;第一投影点和第二投影点,用于共同将参考图案投影到视场中,其中第一投影点和第二投影点相对于成像传感器的相应位置是固定的;第三投影点,用于将测量图案投影到视场中,其中第三投影点相对于成像传感器的位置是固定的;以及电路,用于基于由成像传感器捕获的视场的图像中的测量图案的外观来计算视场中的物体与装置的距离,基于图像中的参考图案的外观来检测透镜的移动,以及基于如检测到的移动来调节如计算的距离。
附图说明
通过结合附图考虑以下详细描述,可以容易地理解本公开的教导,其中:
图1A图示了可以被用来产生本公开的光学配置的距离传感器的一个实施例的横截面视图;
图1B图示了图1A的距离传感器的俯视图;
图2图示了图1A和1B的距离传感器的一部分的俯视图;
图3A更详细地图示了透镜移位;
图3B更详细地图示了图像放大;
图4A图示了第一示例,其中两个参考光束可以被用于检测图像放大和/或透镜移位;
图4B图示了其中图4A的第一和第二参考光束被用于检测同时发生的图像放大和透镜移位的示例;
图5A图示了来自第一投影点和第二投影点的示例主参考图案的投影;
图5B图示了来自第一投影点和第二投影点的示例辅助参考图案的投影;
图6A和6B图示了同时投影的示例主参考图案和辅助参考图案;
图7图示了图6A和6的主参考图案和辅助参考图案的投影的第一示例侧视图;
图8图示了在不同位置处的多个矩形的投影圆点的矩阵的重叠;
图9图示了示例测量图案,其具有与其同时投影的主参考图案和辅助参考图案;
图10图示了用于计算从传感器到空间中的物体或点的距离的方法的流程图;以及
图11描绘了适用于在执行本文中所述的功能时使用的通用计算机的高级框图。
为了便于理解,在可能的情况下,已经使用相同的参考标号来表示图中共同的相同元件。
具体实施方式
在一个实施例中,本公开涉及一种距离传感器。可以在无人驾驶交通工具中使用距离传感器,以便帮助计算机视觉系统确定从该交通工具到周围环境中的特定物体或点的距离。例如,距离传感器可以将一个或多个光束投影到该物体或点上并且然后根据飞行时间(TOF)、对反射光的分析(例如激光雷达)或其他装置来计算距离。然而,这种类型的常规距离传感器往往是庞大的,并且因此可能不适用于在紧凑交通工具中使用。此外,该传感器可能制造起来是非常昂贵的并往往具有有限的视场。例如,即使使用多个常规成像传感器的布置提供小于360度的视场。距离传感器还可以被用于其他应用,包括三维(3D)成像、个人和商用交通工具照相机系统、安全系统以及诸如此类。然而,这些应用中的每个可能需要不同类型的图像数据(例如,宽视野、远距离、小大小等);因此,透镜移位和图像放大可以被用于捕获给定应用所需的图像的类型。
一些距离传感器利用简单的三角测量算法来将图像的位置直接与距离相关,并且从而计算到与图像相关联的物体的距离。这种类型的一些传感器可以使用二维照相机作为三维传感器。因此,这样的系统在成本和大小方面有优势。然而,对于采用光束投影的主动三角测量系统,成像传感器(例如,照相机)通常被配置为固定透镜、固定焦点系统,没有变焦能力。当试图从更远的距离捕获图像时,固定焦点可能造成模糊,并且无法变焦可能使得难以捕获移动物体的清晰图像。另一方面,如果透镜是可调节的以进行变焦和聚焦,则透镜的任何不期望的移动(例如,移位或倾斜)都可能影响三角测量的准确度。
本公开的示例为诸如2015年10月22日提交的美国专利申请No. 14/920,246中公开的距离传感器中的任何距离传感器的紧凑距离传感器提供光学配置改进,通过引用将该申请以其整体并入本文中。一个或多个光源投影多个光束,当入射在物体上时,所述光束共同形成测量图案(例如,多条平行线)。两个或多个光源投影多个光束,当入射到物体上时,所述光束共同形成参考图案(例如,也是多条平行线)。测量和参考图案可以同时从相同的光源或从不同的光源投影。然后,一个或多个成像传感器捕获物体、测量图案和参考图案的二维图像,并且基于图像中物体上的测量图案和参考图案的外观,检测距离传感器的成像传感器透镜的移动(例如,移位、倾斜或者诸如此类)。然后可以对基于三角测量的物距测量进行补偿,以考虑透镜移动。
在本公开的上下文中,“光束”或“投影光束”是指由所公开的距离传感器的光源发射的光的形式。“线”或“图案”是指当由光源发射的光束入射在表面或物体上时在该表面或物体上产生的图像。
例如,图1A和1B图示了可以被用来产生本公开的光学配置的距离传感器100的一个示例。特别地,图1A图示了距离传感器100的横截面视图,而图1B图示了图1A的距离传感器100的俯视图。距离传感器100可被安装到例如无人驾驶交通工具。
如图1A中所图示的那样,距离传感器100包括布置在紧凑壳体102内的多个部件。在一个示例中,部件包括围绕包括广角透镜112的成像传感器110布置的多个光源1081-108n(下文统称为“光源108”或单独称为“光源108”)。在一个示例中,多个光源108包括偶数个光源。例如,在图1B中描绘的示例中,多个光源108包括四个光源108。在一个示例中,部件关于中心轴A-A'基本对称地布置。例如,在一个示例中,中心轴A-A'与成像传感器110的光轴(例如,透镜单元的中心)重合,并且光源108在围绕成像传感器110的环中以规则间隔(例如,每三十度、每九十度或者诸如此类)间隔开,如图1B中图示的那样。
在一个示例中,光源108中的每个是发射多个光束的激光光源,其中多个光束可以将多条连续线或圆点(或其他标记,诸如x、短划或者诸如此类)的线投影到多个光束入射在其上的表面上。因此,每个光源108可以被认为是距离传感器100的投影点,即距离传感器100上的点,多个光束从该点被投影到视场中。为此,每个投影点可以包括相应的衍射光学元件1141-114n(下文统称为衍射光学元件114”或单独称为“衍射光学元件114”),其将由光源108发射的单个光束分裂成多个光束。多个光束中的每个单独光束可以依次将圆点或点投影到表面上,其中多个光束被布置成使得相应的圆点共同形成一系列平行线。线可以由圆点形成,使得它们共同形成矩形的圆点的矩阵。替代地,线可以是连续的,或由短划、x或者诸如此类形成。
每个光源108的投影的方向可以相对于成像传感器110固定。在一个示例中,每个光源108被配置成投影在表面上形成不同视觉图案的多个光束。例如,光源1081可以投影圆点的图案,而光源1082可以投影短划或x的图案等。在另外的示例中,多个光源108中的至少一个光源108可被配置成变化其投影的图案。另外,由光源108中的一个或多个投影的光的强度可以变化。例如,光源1081可以投影第一强度的光,而光源1082可以投影不同的第二强度的光等。替代地,每个光源108可以能够投影其强度可以在某个范围内变化的光。
从每个光源108发射的光具有已知对人类视觉相对安全的波长(例如,红外线)。在另外的示例中,每个光源108可以包括用于调节其输出的强度的电路。在另外的示例中,每个光源108可以以脉冲形式发射光,以便减轻环境光对图像捕获的影响。
在一个示例中,相对于由多个光源108发射的光在其中传播的方向,多个光源108被定位在成像传感器110的主点(即其中光轴A-A'与图像平面相交的点)的“后面”,如图1A中所示。在一个示例中,多个光源108中的至少一个光源108可从距离传感器100拆卸。
如上面所讨论的那样,成像传感器110可以沿着中心轴A-A'被定位在多个光源108的中间。在一个示例中,该成像传感器110是图像捕获设备,诸如静止照相机或视频摄像机。在一个特定示例中,图像捕获设备包括红、绿、蓝红外(RGB-IR)传感器。还如上面所讨论的那样,该成像传感器110包括产生半球形视场的广角透镜112,诸如鱼眼透镜。在一个示例中,透镜112包括除中心投影或自由形状表面光学透镜之外的任何类型的透镜。在一个示例中,该成像传感器110包括用于计算从距离传感器110到物体或点的距离的电路。在另一示例中,该成像传感器包括用于通过网络将所捕获的图像传送给处理器的网络接口,其中处理器计算从距离传感器100到物体或点的距离并且然后将所计算的距离传送返回给距离传感器100。
在另一个示例中,距离传感器100可以采用单个光源108,所述光源108采用衍射光学元件来将其光束分裂成第一多个光束。然后,将第一多个光束中的每个进一步分裂成第二多个光束,所述第二多个光束从距离传感器100的每个投影点发射,如上面讨论的那样(例如,通过衍射光学元件114)。在美国专利申请No. 14/920,246中进一步详细讨论了该示例。
因此,在一个示例中,距离传感器100使用一个或多个光源和/或一个或多个衍射光学元件来产生多个投影点,从所述投影点发射多个投影光束,其中由多个投影光束产生的多条线(例如,其可以包括圆点或短划的图案)可以在它们被投影到其上的表面上彼此平行取向。因此,由距离传感器100投影到表面上的图案可以包括多条平行线,其中所述线中的每条包括连续线或圆点、短划、x的线或者诸如此类。然后,可以根据视场中的多条平行线的外观(例如,当线由圆点形成时,通过圆点的位置)计算从距离传感器100到物体的距离(例如,如2015年10月22日提交的美国专利申请No. 14/920,246中描述的那样)。例如,可以通过形成平行线的圆点的横向移动来检测到物体的距离,因为即使距离改变,线也总是连续线性的。还可以直接计算物体的大小和尺寸。
如下面进一步详细讨论的那样,可以使用不同图案的平行线来测量距离并补偿透镜移动。例如,可以使用第一和/或第二参考图案的图像来检测透镜移动。然后可以应用对透镜移动的了解来基于测量图案的图像来调节进行的距离测量(例如,经由三角测量)。
当光源108中的每个投影不同图案(例如,圆点、x、短划等)的多条线时,成像传感器110中的电路可以容易地确定捕获的图像中的哪些线由光源108中的哪个产生。这可以促进距离计算,如下面更详细地讨论的那样。在一个示例中,可以结合由光源108中的每个投影的图案使用不同的距离计算技术。
图2图示了图1A和1B的距离传感器100的一部分的俯视图。特别地,图2图示了相对于被检测的物体200的透镜移位和图像放大的概念。
如图示的那样,成像传感器110和光源108具有固定位置。然而,透镜112具有可移动的位置,使得可以调节透镜112以进行聚焦和变焦。因此,尽管距离传感器100可以具有相对于其距离正在被测量的物体200的固定位置,但是透镜112相对于物体200的位置可以变化,并且这可能影响用于距离计算的三角测量技术的精度。
例如,透镜112可以移位,即相对于成像传感器110的光轴在横向或垂直方向上移动。在图2中,初始的预移位光轴被示出在A-A'处,而新的移位后光轴被示出在B-B'处。
例如,为了图像放大(变焦)的目的,透镜112还可以在平行于成像传感器110的光轴的方向上移动。在这种情况下,成像传感器的光轴的位置不改变(例如,它保持为A-A'),但是从透镜112到物体200的距离改变。
参考图案可以通过光源108中的两个或更多个被投影到物体200上,其中每个光源108投影相应的参考光束2061或206n(下文统称为“参考光束206”或单独称为“参考光束206”)。参考图案包括其中参考光束206会聚或相交的至少一个参考点204(例如,圆点、短划、线或者诸如此类),如下面进一步详细讨论的那样。在一个示例中,参考图案的参考轴202与成像传感器110的光轴A-A'对准(例如,共线)。
图3A更详细地图示了透镜移位。特别地,图3A图示了没有从透镜到物体306的距离中的变化的透镜移位。在图3A中,透镜112的初始位置以300指示,而透镜112的新位置或移位位置以302指示。初始位置300和新位置302之间的移位或横向差异可以被给出为s。
参考标号304指示被投影到物体306上的参考光束,在物体306上产生点(例如,圆点、x、短划或者诸如此类)图像PR,下文中称为“参考点”。如图示的那样,参考光束304从透镜112的初始位置300从透镜112的前节点Nf投影并穿过透镜112的前节点Nf。在这种情况下,前节点Nf用作用于三角测量的距离传感器100的校准位置。当透镜112移位到新位置302时,透镜112的前节点移动到Nf'。透镜112的后节点从Nr移动到Nr'。与参考光束304相关联的方向和参考点PR是固定的。
当透镜112处于初始位置300处时,成像传感器110上的参考点PR的图像由QR指示。然而,当透镜112移位到新位置302时,成像传感器110上的参考点PR的图像移动到QR'。在这种情况下,参考点PR的移动距离s'可以被计算为:
s' = s+s(b/a) (等式1)
其中b表示图像距离(即,从图像传感器110上的参考点PR的图像QR'到透镜112的后节点Nr'的距离)并且a表示物距(即,从物体306到透镜112的后节点Nr'的距离。通常,比率b/a是相对小的,因此移位s近似等于移动距离s'。
在一个示例中,圆点图像P0、P1和P2形成被投影到物体306上的图案的部分,用于距离测量目的;因此,圆点图像P0、P1和P2在本文中可以被称为“测量点”。成像传感器110上的测量点的相应图像分别由Q0、Q1和Q2指示。当透镜112移位到新位置302时,成像传感器110上的测量点的图像分别移动到Q0'、Q1'和Q2'。在这种情况下,测量点P0、P1和P2的移动距离s'近似等于移位s。
因此,透镜112的移位s可以通过采用具有到物体306的任何距离的参考光束304来确定。当偏移是s时,在到物体306的任何距离处的任何测量点P0、P1和P2的图像(如由成像传感器110捕获)的移动值是s'。
图3B更详细地图示了图像放大。应当指出,图像放大具有与图像距离成比例关系(即,从图像传感器上的图案点的图像到透镜的后节点的距离)。特别地,图3B图示了没有透镜移位的图像放大。因此,透镜112可以更靠近于或更远离物体306移动(即,在平行于成像传感器110的光轴的方向上),但是不横向(即,在垂直于成像传感器110的光轴的方向上,如图3A中图示的那样)移动。
在图3B中,透镜112的初始位置以308指示,而透镜112的新的或放大位置以310指示。参考标号304指示被投影到物体306上的参考光束,在物体306上产生点(例如,圆点、x、短划或者诸如此类)图像PR,下文中称为“参考点”。如图示的那样,参考光束304从初始位置308从透镜112的前节点Nf投影并穿过透镜112的前节点Nf。在这种情况下,前节点Nf用作用于三角测量的距离传感器100的校准位置。当透镜112移动到新位置310时,透镜112的前节点移动到Nf'。透镜112的后节点从Nr移动到Nr'。与参考光束304相关联的方向和参考点PR是固定的(即,即使图像距离可能改变,参考点PR也不相对于物体306移动)。
当透镜112处于初始位置308时,成像传感器110上的参考点的图像由QR指示。如上面讨论的那样,物体306上的参考点PR的图像的位置不随图像距离中的变化而移动。然而,当透镜112移位到新位置310并且图像距离被改变时(例如,由于变焦或聚焦),成像传感器110上的参考点的图像移动到QR'。
在另外的示例中,多个参考光束(即,至少两个)被用于检测和补偿透镜移位和图像放大。在这种情况下,距离传感器的至少第一和第二投影点可以被用于将至少第一和第二参考光束分别投影到其距离正在被测量的物体上。
例如,图4A图示了第一示例,其中两个参考光束可以被用于检测图像放大和/或透镜移位。在这种情况下,可以通过检测对应于两个参考光束的捕获图像的距离变化来获得变化比率k。
特别地,投影第一参考光束400和第二参考光束402以在物体404上产生第一参考点PR和第二参考点PSR。成像传感器上的第一参考点PR和第二参考点PSR的图像的位置分别由QR和QSR指示;在成像传感器上的第一参考点PR和第二参考点PSR的图像的新位置分别由QR'和QSR'指示。点P和P0分别指示分别由第一测量光束406和第二测量光束408在物体404上形成的第一测量点和第二测量点。
在这种情况下,变化比率k可以根据以下等式获得:
k = (khSR + khR)/(hSR * hR) (等式2)
其中khSR和khR是已知的。
图4B图示了其中图4A的第一和第二参考光束400和402被用于检测同时发生的图像放大和透镜移位的示例。在这种情况下,需要知道第一和第二参考光束400和402的绝对位置(即,从其执行三角测量校准的初始透镜前移位位置),以便计算移位s和变化比率k两者。在这种情况下,绝对位置被定义为相对于成像传感器的光轴A-A'的位置,其中光轴A-A'进一步被定义为参考点的图像在其处不随物距变化或图像距离变化移动的点。
需要以其来知道绝对位置的准确度可能随条件而变化。然而,在一些示例中,可以采用能够检测第一参考光束400、第二参考光束402和光轴的位置的校准装置。校准装置可以进一步布置和存储检测到的位置。可以结合三角测量校准来执行这些位置的检测、布置和存储。
尽管已经就使用参考“光束”来检测透镜移位和物距变化讨论了上面描述的示例,但是本公开的另外的示例可以使用由多个光束产生的参考“图案”来检测透镜移位和物距变化。在这种情况下,距离传感器的至少两个投影点同时投影多个光束,所述光束可以从投影点扇形展开(fan out),所述光束从所述投影点被发射。多个光束中的每个光束可以将点投影到物体上。由多个光束投影的点可以共同地在物体上形成多条线(例如,连续线或由一系列圆点、短划、x或者诸如此类形成的线)。由从单个投影点发射的多个光束以及由多个光束投影到物体上的点限定的空间形成可以包括距离传感器的透镜的前节点的投影平面。每个投影平面可以包括距离传感器的光轴。
例如,图5A图示了来自第一投影点502和第二投影点504的示例主参考图案500的投影。如图示的那样,第一投影点502和第二投影点504各自投影多个光束,所述光束扇形展开以分别形成第一投影平面506或第二投影平面508。
如图示的那样,第一投影平面506和第二投影平面508沿着穿过成像传感器512的前节点510的线C-C'相交。由于第一投影点502和第二投影点504的位置相对于成像传感器512是固定的,因此于是第一投影平面506和第二投影平面508沿着其相交的线C-C'的位置也相对于成像传感器512是固定的。因此,线C-C'可以被认为是“参考光束”,其实际上可以通过捕获参考图案500的图像来识别。
由于第一投影平面506和第二投影平面508通过成像传感器512的光轴,因此由第一投影平面506和第二投影平面508产生的主参考图案500可以被认为是“主”参考图案。线C-C'可以类似地被认为是“主”参考轴。
图5B图示了来自第一投影点502和第二投影点504的示例辅助参考图案514的投影。在这种情况下,第一投影点502和第二投影点504各自投影多个光束,所述光束扇形展开以分别形成第三投影平面516或第四投影平面518。
如图示的那样,第三投影平面516和第四投影平面518沿着线D-D'以预定角度相交。由于第一投影点502和第二投影点504的位置相对于成像传感器512是固定的,因此于是第三投影平面516和第四投影平面518沿着其相交的线D-D'的位置也相对于成像传感器512是固定的。因此,线D-D'可以被认为是“参考光束”,其实际上可以通过捕获参考图案514的图像来识别。
由于第三投影平面516和第四投影平面518不通过成像传感器512的光轴,因此由第三投影平面516和第四投影平面518产生的参考图案514可以被认为是“辅助”参考图案。线D-D'可以类似地被认为是“辅助”参考轴。
在相同平面处的主参考图案500和辅助参考图案514彼此平行。由成像传感器512捕获的图像在主参考图案500和辅助参考图案514之间的距离相对于物距中的变化是恒定的。
图6A图示了可以通过本公开的距离传感器被投影到物体上的示例测量图案600。如图示的那样,测量图案600包括矩形的圆点的矩阵。然而,在其他示例中,圆点的每列或每行可以被形成为连续线。如上面讨论的那样,测量图案600由至少两个投影点产生,所述投影点位于成像传感器周围并且相对于成像传感器的透镜的前节点位于相同高度处(沿着成像传感器的光轴的方向),同时发射多个光束。
在图6A和6B中图示的示例中,其图示了同时投影在测量图案600内(或叠加在其上)的示例主参考图案和辅助参考图案,主参考图案包括垂直取向的圆点的中心线602,而辅助参考图案包括垂直取向的圆点的线604的集合,其从中心线602(并且平行于中心线602)横向向外间隔开。测量图案600、主参考图案和辅助参考图案从多个投影点606被投影到半球形视场(例如,“虚拟球体”)中,所述投影点606可以包括对应于相应光源608的衍射光学元件。
更具体地,主参考图案对应于球坐标中的φ=C(其中C是常数,但是是任何值)的线,并且更具体地对应于φ=0(即,C=0)的线,其中φ是测量图案600的旋转角度。因此,主参考图案和辅助参考图案与从其投影它们的投影点一起产生平面,并且被投影到物体上的得到的图案形成线。
主参考图案可以进一步由仰角θ=+θa至-θa(其中θ是任何值,并且主参考图案在θa至θb的预定范围内)定义。辅助参考图案可以进一步由仰角θ=+θb至-θb(其中θ是任何值,并且如果在θc至θd的预定范围内则辅助参考图案)定义。辅助参考图案的旋转角度φ可以被定义为φ=Δφ(其中φ是预定值)。
相比之下,测量图案600对应于θ=0的线(并且更具体地,测量图案600的水平取向的中心线610对应于θ=0),其中θ是测量图案600的仰角。
图7图示了图6A和6B的主参考图案和辅助参考图案的投影的第一示例侧视图。如图示的那样,包括主参考图案(由光束702投影)和辅助参考图案(由光束704投影)的参考图案的投影点的位置与透镜706的前节点Nf重合定位。因此,参考图案的线的捕获图像在透镜706离物体的任何距离处占据相同位置。
因此,通过布置如图8中图示的多个投影点,其图示了主参考图案800和两个辅助参考图案802(其被类似地配置但布置在不同的相应位置处)的重叠,相应的中心线804、806和808在其处在成像传感器的透镜812的光轴上交叉的点被固定在从透镜812到主参考图案800和辅助参考图案804被投影在其上的物体的任何距离处。
在一个示例中,主参考图案800被配置成使得其交叉点可以被容易地识别。然而,可以假定的是,由于点图像条件(取决于物体条件,诸如异常反射条件、障碍物的存在等),主参考图案800中的一些部分可以变得不可检测的。因此,随着时间的推移,距离传感器的检测主参考图案800的能力的准确度可能随着时间的推移而变化。
因此,在一个示例中,可以采取保护措施来提高以其识别主参考图案800的交叉点的准确度。例如,可以增加主参考图案800中的投影线的数量(例如,增加到四或更多)和/或可以增加投影线的长度。在另外的示例中,选择装置可以被用于基于主参考图案800的所选部分来选择主参考图案800的最有效部分和最有效计算装置。仍然在另外的示例中,控制装置可以被用于基于图案条件和/或三角测量结果的分析来控制主参考图案800的投影和图像捕获(例如,发射的时间、发射的强度、曝光的时间、图像相减方式或者诸如此类)。
图9图示了示例测量图案900,其具有与其同时投影的主参考图案902和辅助参考图案904。如图示的那样,测量图案900具有由直线的规则图案组成的相对简单的形状(其中每条线在这种情况下被形成为一系列圆点)。因此,甚至可以从测量图案900的局部视图容易地假设整个测量图案900的形状。
然而,如果测量图案900以及主和辅助参考图案902和904从距离传感器的相同投影点被投影,则被叠加在测量图案900上的由主参考图案902和辅助参考图案904共同组成的参考图案可能干扰测量图案900的功能。因此,在一个示例中,参考图案可以被分成多个段9061-906m(下文统称为“段906”或单独称为“段906”)。
本公开的另外的示例提供了变焦三维距离传感器。对于远距离,投影点图像的移动值是小的。然而,通过放大(即,减小从透镜到物体的距离),点图像的移动值增加,并且距离灵敏度提高。
为了测量远距离,随着透镜亮度降低,返回光(即,被物体反射并返回到成像传感器的光)的强度也降低。因此,可以增加由光源发射的光的强度。另一方面,增加发射光的强度可能造成一些缺点,诸如增加的功耗、缩短的寿命和降低的安全性。
因此,可以采用控制装置来与变焦功能同步。控制装置可以选择具体投影图案,调节光源强度,调节光源脉冲的发射时间和/或间隔,以及调节成像传感器的捕获功能(例如,快门速度、曝光定时等)。
此外,图像模糊可能随焦距调节而变化,并且也可能影响距离测量的准确度。随着距离传感器放大(即,图像放大率增加),图像模糊的影响可能变得更加严重。由于距离传感器需要在广范围内测量距离,因此任何自动聚焦系统都应该在任何时间聚焦在距离的整个范围上。因此可以采用具有循环图案的焦点改变系统,其中循环图案随图像放大/变焦值而变化。
本公开的另外的示例可以补偿随着透镜移动而变化的透镜和其他成像光学像差。在一个示例中,这通过采用存储校准的补偿值并使用对应于测量距离的校准的补偿值来调节三维测量结果的过程来完成。
图10图示了用于计算从传感器到空间中的物体或点的距离的方法1000的流程图。在一个实施例中,可以由集成在成像传感器中的处理器(诸如图1A-1B中图示的成像传感器110)或者如在图11中图示并且在下文讨论的通用计算设备来执行该方法1000。
方法1000在步骤1002中开始。在步骤1004中,同时激活距离传感器的第一投影点和第二投影点以分别投影第一和第二多个光束。第一和第二多个光束共同将参考图案投影到视场中。如上面讨论的那样,参考图案可以包括主参考图案和辅助参考图案,其中主参考图案包括第一条线,并且辅助参考图案包括平行于第一条线取向的第二和第三条线。例如,第一条线可以平行于距离传感器的成像传感器的光轴取向,而第二条线和第三条线相对于第一条线的平面以一定角度取向。
第一、第二和第三条线中的任何一条可以被形成为一系列点(例如,圆点、短划、x或者诸如此类)。第一、第二和第三条线可以形成具有成像传感器的固定点(例如,成像传感器的透镜的前节点)的相应的第一、第二和第三平面。
如上面讨论的那样,主参考图案的旋转角度在球坐标中可以是零,并且主参考图案的仰角可以落在球坐标中的预定范围内。同时,辅助参考图案的旋转角度可以是球坐标中的恒定值,并且辅助参考图案的仰角可以落在球坐标中的预定范围内。
在步骤1006中,激活距离传感器的第三投影点以投影第三多个光束。第三多个光束将测量图案投影到视场中。在一个示例中,由第一和/或第二投影点投影的第一和/或第二多个光束可以与第三多个光束协作以形成参考图案。如上面讨论的那样,测量图案可以包括多条平行线,其中多条平行线中的每条线被形成为一系列点(例如,圆点、短划、x或者诸如此类)。因此,在一个示例中,测量图案可以包括矩形的圆点的矩阵。在一个示例中,参考图案的第一、第二和第三条线平行于测量图案的多条平行线取向,但是叠加在测量图案的多条平行线上。
如上面讨论的那样,测量图案的旋转角度可以落在球坐标中的预定范围内,并且测量图案的仰角可以是球坐标中的恒定值。
在步骤1008中,例如通过成像传感器捕获视场的图像,其中第一、第二和第三投影点的位置相对于成像传感器的位置是固定的。物体、参考图案和测量图案在图像中是可见的。成像传感器可以包括聚焦功能和/或焦距改变功能。因此,成像传感器的透镜可以是可移动的。
在步骤1010中,基于图像中的测量图案的外观来计算从距离传感器到物体的距离。在一个示例中,使用三角测量算法来计算距离。
在步骤1012中,基于图像中的参考图案的外观来检测成像传感器的透镜的移动。例如,基于参考图案相对于成像传感器的固定点(例如,成像传感器的透镜的前节点)的固定方向的外观,可以确定透镜已经相对于成像传感器的光轴的方向横向移位或者透镜已经更靠近于或更远离物体移动。该移动相对于透镜的初始(例如,校准)位置。
例如,可以通过检测主参考图案与辅助参考图案的交叉点的初始位置来检测透镜的移动。可以相对于透镜的预定(例如,校准)位置存储初始图案。然后可以检测交叉点的当前位置,并且可以计算初始点和当前点之间的差异以找到透镜移动的量。在另外的示例中,还可以检测第一参考图案和第二参考图案之间的初始距离和当前距离,并且初始距离和当前距离之间的差异可以指示透镜移动的量。
在步骤1014中,基于在步骤1012中检测到的移动来调节在步骤1010中计算的距离。因此,可以调节距离计算以补偿透镜移动(移位、变焦、倾斜或者诸如此类)。
然后,方法1000在步骤1016中结束。
图11描绘了适用于在执行本文中所述的功能时使用的通用计算机的高级框图。如在图11中所描绘的那样,系统1100包括一个或多个硬件处理器元件1102(例如中央处理单元(CPU)、微处理器或多核处理器)、存储器1104(例如随机存取存储器(RAM)和/或只读存储器(ROM))、用于计算距离的模块1105和各种输入/输出设备1106(例如存储设备,包括但不限于磁带驱动器、软盘驱动器、硬盘驱动器或压缩盘驱动器、接收器、发射器、透镜和光学器件、输出端口、输入端口和用户输入设备(诸如键盘、小键盘、鼠标、麦克风以及诸如此类))。尽管示出了仅一个处理器元件,但是应该指出通用计算机可以采用多个处理器元件。此外,尽管在图中示出了仅一个通用计算机,但是如果对于特定说明性示例以分布式或并行方式来实现如上文所讨论的(一个或多个)方法,即跨多个或并行通用计算机来实现(一个或多个)上述方法的步骤或(一个或多个)整个方法,则该图的通用计算机旨在表示那些多个通用计算机中的每个。此外,一个或多个硬件处理器可以被利用来支持虚拟化或共享的计算环境。虚拟化计算环境可以支持表示计算机、服务器或其他计算设备的一个或多个虚拟机。在这样的虚拟化虚拟机中,诸如硬件处理器和计算机可读存储设备之类的硬件部件可以被虚拟化或逻辑表示。
应当指出,本公开可以以软件和/或以软件和硬件的组合来实现,例如,使用专用集成电路(ASIC)、包括现场可编程门阵列(FPGA)的可编程逻辑阵列(PLA)、或部署在硬件设备上的状态机、通用计算机或任何其他硬件等同物,例如,与上面讨论的(一个或多个)方法有关的计算机可读指令可以被用于配置硬件处理器以执行以上公开的方法的步骤、功能和/或操作。在一个实施例中,针对用于计算距离的本模块或过程1105的指令和数据(例如,包括计算机可执行指令的软件程序)可以被加载到存储器1104中并由硬件处理器元件1102执行以实现如上面结合示例方法1000所讨论的步骤、功能或操作。此外,当硬件处理器执行指令来执行“操作”时,这可以包括直接执行操作和/或促进、指导另一硬件设备或部件(例如协处理器以及诸如此类)或与另一硬件设备或部件(例如协处理器以及诸如此类)协作以执行操作的硬件处理器。
执行与上面描述的(一个或多个)方法有关的计算机可读或软件指令的处理器可以被认为是编程的处理器或专用处理器。因此,用于计算本公开的距离(包括相关联的数据结构)的本模块1105可以被存储在有形或物理(广义上非暂时性)计算机可读存储设备或介质(例如易失性存储器、非易失性存储器、ROM存储器、RAM存储器、磁性或光学驱动器、设备或磁盘以及诸如此类)上。更具体地,该计算机可读存储设备可以包括提供用于存储信息(诸如要由处理器或计算设备(诸如计算机或应用服务器)访问的数据和/或指令)的能力的任何物理设备。
虽然上面已经描述了各种实施例,但是应该理解,已经仅通过示例而非限制来呈现所述各种实施例。因此,优选实施例的宽度和范围不应受上面描述的示例性实施例中的任何实施例限制,而应仅根据以下权利要求及其等同物来限定。
Claims (21)
1.一种用于计算到物体的距离的方法,所述方法包括:
同时激活距离传感器的第一投影点和第二投影点,以共同将参考图案投影到视场中;
激活距离传感器的第三投影点,以将测量图案投影到视场中;
捕获视场的图像,其中物体、参考图案和测量图案在图像中是可见的;
基于图像中的测量图案的外观来计算从距离传感器到物体的距离;
基于图像中的参考图案的外观来检测距离传感器的透镜的移动;以及
基于如检测到的移动来调节如计算的距离。
2.根据权利要求1所述的方法,其中,参考图案包括彼此平行定位的第一条线、第二条线和第三条线。
3.根据权利要求2所述的方法,其中,第一条线、第二条线和第三条线中的每条线由相应的一系列圆点形成。
4.根据权利要求1所述的方法,其中,基于参考图案相对于用于捕获图像的成像传感器的固定点的固定方向来检测移动。
5.根据权利要求4所述的方法,其中,第一条线、第二条线和第三条线中的每条线与成像传感器的固定点形成平面。
6.根据权利要求4所述的方法,其中,成像传感器的固定点包括透镜的前节点。
7.根据权利要求4所述的方法,其中,第一条线、第二条线和第三条线中的每条线形成包括成像传感器的光轴的平面。
8.根据权利要求2所述的方法,其中,第一条线包括主参考图案,并且第二条线和第三条线共同包括辅助参考图案,其中主参考图案平行于距离传感器的成像传感器的光轴取向,并且其中辅助参考图案相对于主参考图案的平面以一定角度取向。
9.根据权利要求8所述的方法,其中,主参考图案的旋转角度在球坐标中是零,并且主参考图案的仰角落在球坐标中的预定范围内。
10.根据权利要求9所述的方法,其中,辅助参考图案的旋转角度是球坐标中的恒定值,并且辅助参考图案的仰角落在球坐标中的预定范围内。
11.根据权利要求10所述的方法,其中,测量图案的旋转角度落在球坐标中的预定范围内,并且测量图案的仰角是球坐标中的恒定值。
12.根据权利要求8所述的方法,其中,所述检测包括:
检测主参考图案与辅助参考图案的交叉点的初始位置;
存储相对于透镜的预定位置的初始位置;
检测交叉点的当前位置;以及
计算初始位置和当前位置之间的差异以找到移动的量。
13.根据权利要求12所述的方法,进一步包括:
检测第一参考图案和第二参考图案之间的初始距离;
存储相对于透镜的预定位置的初始距离;
检测第一参考图案和第二参考图案之间的当前距离;以及
计算初始距离和当前距离之间的差异以找到移动的量。
14.根据权利要求1所述的方法,其中,第一投影点和第二投影点中的至少一个与第三投影点协作以投影测量图案。
15.根据权利要求1所述的方法,其中,所述移动是在垂直于距离传感器的成像传感器的光轴的方向上的移位。
16.根据权利要求1所述的方法,其中,所述移动位于平行于距离传感器的成像传感器的光轴的方向上。
17.根据权利要求1所述的方法,其中,第一投影点、第二投影点和第三投影点的相应位置被固定在执行捕获的成像传感器周围。
18.根据权利要求1所述的方法,其中,成像传感器包括聚焦功能。
19.根据权利要求1所述的方法,其中,成像传感器包括焦距改变功能。
20.一种存储多个指令的计算机可读存储设备,所述指令当由处理器执行时,使得处理器执行用于计算到物体的距离的操作,所述操作包括:
同时激活距离传感器的第一投影点和第二投影点,以共同将参考图案投影到视场中;
激活距离传感器的第三投影点,以将测量图案投影到视场中;
捕获视场的图像,其中物体、参考图案和测量图案在图像中是可见的;
基于图像中的测量图案的外观来计算从距离传感器到物体的距离;
基于图像中的参考图案的外观来检测距离传感器的透镜的移动;以及
基于如检测到的移动来调节如计算的距离。
21.一种装置,包括:
成像传感器,其包括透镜,所述透镜是可移动的;
第一投影点和第二投影点,用于共同将参考图案投影到视场中,其中第一投影点和第二投影点相对于成像传感器的相应位置是固定的;
第三投影点,用于将测量图案投影到视场中,其中第三投影点相对于成像传感器的位置是固定的;以及
电路,用于基于由成像传感器捕获的视场的图像中的测量图案的外观来计算视场中的物体与装置的距离,基于图像中的参考图案的外观来检测透镜的移动,以及基于如检测到的移动来调节如计算的距离。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662430998P | 2016-12-07 | 2016-12-07 | |
US62/430998 | 2016-12-07 | ||
PCT/US2017/064681 WO2018106671A2 (en) | 2016-12-07 | 2017-12-05 | Distance sensor including adjustable focus imaging sensor |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110178156A true CN110178156A (zh) | 2019-08-27 |
CN110178156B CN110178156B (zh) | 2023-11-14 |
Family
ID=62243302
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780075906.1A Active CN110234955B (zh) | 2016-12-07 | 2017-12-05 | 投影平行图案的距离传感器 |
CN201780075861.8A Active CN110178156B (zh) | 2016-12-07 | 2017-12-05 | 包括可调节焦距成像传感器的距离传感器 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780075906.1A Active CN110234955B (zh) | 2016-12-07 | 2017-12-05 | 投影平行图案的距离传感器 |
Country Status (7)
Country | Link |
---|---|
US (2) | US10337860B2 (zh) |
EP (2) | EP3551965A4 (zh) |
JP (3) | JP7133554B2 (zh) |
KR (2) | KR102543275B1 (zh) |
CN (2) | CN110234955B (zh) |
TW (1) | TWI758368B (zh) |
WO (2) | WO2018106671A2 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112693229A (zh) * | 2019-10-23 | 2021-04-23 | 细美事有限公司 | 液滴检查模块和液滴检查方法 |
CN113124778A (zh) * | 2019-12-30 | 2021-07-16 | 财团法人工业技术研究院 | 轮廓测量系统和轮廓测量方法 |
CN115047433A (zh) * | 2022-08-16 | 2022-09-13 | 杭州宇称电子技术有限公司 | 用于tof距离量测系统光学自动化调整方法及其应用 |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7133554B2 (ja) | 2016-12-07 | 2022-09-08 | マジック アイ インコーポレイテッド | 焦点調整可能な画像センサを含む距離センサ |
US20200241140A1 (en) * | 2017-09-28 | 2020-07-30 | Sony Semiconductor Solutions Corporation | Apparatus and method |
US10885761B2 (en) | 2017-10-08 | 2021-01-05 | Magik Eye Inc. | Calibrating a sensor system including multiple movable sensors |
CN111492262B (zh) | 2017-10-08 | 2024-06-28 | 魔眼公司 | 使用经向网格图案的距离测量 |
JP7354133B2 (ja) | 2018-03-20 | 2023-10-02 | マジック アイ インコーポレイテッド | 三次元深度検知及び二次元撮像のためのカメラ露出調節 |
KR20200123849A (ko) | 2018-03-20 | 2020-10-30 | 매직 아이 인코포레이티드 | 가변 밀도들의 투영 패턴을 사용하는 거리 측정 |
EP3803266A4 (en) | 2018-06-06 | 2022-03-09 | Magik Eye Inc. | DISTANCE MEASUREMENT USING HIGH DENSITY PROJECTION PATTERNS |
CN112262028B (zh) * | 2018-06-11 | 2024-03-15 | 松下知识产权经营株式会社 | 测距系统及测距方法 |
US11475584B2 (en) | 2018-08-07 | 2022-10-18 | Magik Eye Inc. | Baffles for three-dimensional sensors having spherical fields of view |
TWI690719B (zh) * | 2018-11-02 | 2020-04-11 | 大陸商光寶電子(廣州)有限公司 | 誤差校正系統及其方法 |
EP3911920B1 (en) | 2019-01-20 | 2024-05-29 | Magik Eye Inc. | Three-dimensional sensor including bandpass filter having multiple passbands |
US11474209B2 (en) | 2019-03-25 | 2022-10-18 | Magik Eye Inc. | Distance measurement using high density projection patterns |
TWI703400B (zh) * | 2019-04-01 | 2020-09-01 | 中強光電股份有限公司 | 焦距校正方法及投影裝置 |
US11019249B2 (en) | 2019-05-12 | 2021-05-25 | Magik Eye Inc. | Mapping three-dimensional depth map data onto two-dimensional images |
CN110297251A (zh) * | 2019-06-27 | 2019-10-01 | 杭州一隅千象科技有限公司 | 多台tof实现的大幅面空间覆盖的方法及系统 |
JP2023504157A (ja) | 2019-12-01 | 2023-02-01 | マジック アイ インコーポレイテッド | 飛行時間情報を用いた三角測量ベースの3次元距離測定の向上 |
CN114830190A (zh) | 2019-12-29 | 2022-07-29 | 魔眼公司 | 将三维坐标与二维特征点相关联 |
US11688088B2 (en) | 2020-01-05 | 2023-06-27 | Magik Eye Inc. | Transferring the coordinate system of a three-dimensional camera to the incident point of a two-dimensional camera |
WO2021212297A1 (en) * | 2020-04-21 | 2021-10-28 | Beijing Voyager Technology Co., Ltd. | Systems and methods for distance measurement |
TWI786802B (zh) * | 2021-09-02 | 2022-12-11 | 財團法人中興工程顧問社 | 三維透地雷達的影像解析輔助系統 |
US11360198B1 (en) * | 2021-09-27 | 2022-06-14 | Aeva, Inc. | Optical alignment for beam correction |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5598299A (en) * | 1994-04-27 | 1997-01-28 | Canon Kabushiki Kaisha | Photographic lens having image stabilizing function |
US20060290781A1 (en) * | 2005-06-28 | 2006-12-28 | Fujitsu Limited | Image obtaining apparatus |
US20070091174A1 (en) * | 2005-09-30 | 2007-04-26 | Topcon Corporation | Projection device for three-dimensional measurement, and three-dimensional measurement system |
CN103576280A (zh) * | 2012-07-31 | 2014-02-12 | 康耐视公司 | 用于确定和控制视觉系统摄影机中的焦距的系统和方法 |
WO2015166915A1 (ja) * | 2014-04-30 | 2015-11-05 | シナノケンシ株式会社 | 計測装置 |
US20160327385A1 (en) * | 2015-05-10 | 2016-11-10 | Magik Eye Inc. | Distance sensor |
Family Cites Families (141)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS59109273A (ja) | 1982-12-15 | 1984-06-23 | Matsushita Electric Ind Co Ltd | 回転塗布装置用ノズル |
JP2504944B2 (ja) * | 1986-02-13 | 1996-06-05 | キヤノン株式会社 | 3次元情報処理方法 |
US4914460A (en) | 1987-05-29 | 1990-04-03 | Harbor Branch Oceanographic Institution Inc. | Apparatus and methods of determining distance and orientation |
US4954962A (en) | 1988-09-06 | 1990-09-04 | Transitions Research Corporation | Visual navigation and obstacle avoidance structured light system |
JPH045112A (ja) | 1990-04-23 | 1992-01-09 | Sumitomo Rubber Ind Ltd | 低転がり抵抗タイヤ |
US5061062A (en) * | 1990-07-02 | 1991-10-29 | General Electric Company | Focus spot size controller for a variable depth range camera |
JPH08555A (ja) | 1994-06-16 | 1996-01-09 | Fuji Photo Optical Co Ltd | 内視鏡の照明装置 |
US5699444A (en) | 1995-03-31 | 1997-12-16 | Synthonics Incorporated | Methods and apparatus for using image data to determine camera location and orientation |
JP3328111B2 (ja) | 1995-08-23 | 2002-09-24 | 日本電気株式会社 | 空間距離測定方法及び空間距離測定装置 |
US6038415A (en) | 1997-07-18 | 2000-03-14 | Minolta Co., Ltd. | Image forming apparatus and image-carrier cartridge device which is employed in the same |
DE69823116D1 (de) | 1997-08-05 | 2004-05-19 | Canon Kk | Bildverarbeitungsverfahren und -gerät |
US5980454A (en) | 1997-12-01 | 1999-11-09 | Endonetics, Inc. | Endoscopic imaging system employing diffractive optical elements |
US5870136A (en) | 1997-12-05 | 1999-02-09 | The University Of North Carolina At Chapel Hill | Dynamic generation of imperceptible structured light for tracking and acquisition of three dimensional scene geometry and surface characteristics in interactive three dimensional computer graphics applications |
US7581681B2 (en) | 1998-03-24 | 2009-09-01 | Metrologic Instruments, Inc. | Tunnel-type digital imaging system for use within retail shopping environments such as supermarkets |
AUPP299498A0 (en) | 1998-04-15 | 1998-05-07 | Commonwealth Scientific And Industrial Research Organisation | Method of tracking and sensing position of objects |
US7193645B1 (en) | 2000-07-27 | 2007-03-20 | Pvi Virtual Media Services, Llc | Video system and method of operating a video system |
JP2002056348A (ja) | 2000-08-07 | 2002-02-20 | Tohken Co Ltd | オートフォーカス機能を有する手持ち式読取装置及びオートフォーカス方法、並び距離計測方法 |
US6937350B2 (en) | 2001-06-29 | 2005-08-30 | Massachusetts Institute Of Technology | Apparatus and methods for optically monitoring thickness |
US7940299B2 (en) | 2001-08-09 | 2011-05-10 | Technest Holdings, Inc. | Method and apparatus for an omni-directional video surveillance system |
JP3975892B2 (ja) | 2002-05-02 | 2007-09-12 | 富士ゼロックス株式会社 | 位置計測システム |
US20040041996A1 (en) * | 2002-08-28 | 2004-03-04 | Fuji Xerox Co., Ltd. | Range finder and method |
GB2395261A (en) | 2002-11-11 | 2004-05-19 | Qinetiq Ltd | Ranging apparatus |
TWI247104B (en) | 2003-02-26 | 2006-01-11 | Hon Hai Prec Ind Co Ltd | A measuring method for pattern of light guide plate |
DE10308383A1 (de) | 2003-02-27 | 2004-09-16 | Storz Endoskop Produktions Gmbh | Verfahren und optisches System zur Vermessung der Topographie eines Meßobjekts |
JP2005114847A (ja) * | 2003-10-03 | 2005-04-28 | Mejiro Precision:Kk | 投影露光装置 |
WO2005076198A1 (en) | 2004-02-09 | 2005-08-18 | Cheol-Gwon Kang | Device for measuring 3d shape using irregular pattern and method for the same |
JP4372643B2 (ja) * | 2004-08-24 | 2009-11-25 | 住友大阪セメント株式会社 | 動き検出装置 |
US7191056B2 (en) | 2005-01-04 | 2007-03-13 | The Boeing Company | Precision landmark-aided navigation |
JP2006313116A (ja) | 2005-05-09 | 2006-11-16 | Nec Viewtechnology Ltd | 距離傾斜角度検出装置および該検出装置を備えたプロジェクタ |
JP4760391B2 (ja) | 2006-01-13 | 2011-08-31 | カシオ計算機株式会社 | 測距装置及び測距方法 |
JP4799216B2 (ja) * | 2006-03-03 | 2011-10-26 | 富士通株式会社 | 距離測定機能を有する撮像装置 |
US7375803B1 (en) | 2006-05-18 | 2008-05-20 | Canesta, Inc. | RGBZ (red, green, blue, z-depth) filter system usable with sensor systems, including sensor systems with synthetic mirror enhanced three-dimensional imaging |
JP4889373B2 (ja) | 2006-05-24 | 2012-03-07 | ローランドディー.ジー.株式会社 | 3次元形状測定方法およびその装置 |
WO2008066742A1 (en) * | 2006-11-22 | 2008-06-05 | Geng Z Jason | Wide field-of-view reflector and method of designing and making same |
JP2010048553A (ja) * | 2006-12-19 | 2010-03-04 | Panasonic Corp | 複眼測距装置の検査方法およびそれに用いるチャート |
TWI320480B (en) | 2007-04-23 | 2010-02-11 | Univ Nat Formosa | One diffraction 6 degree of freedom optoelectronic measurement system |
US8187097B1 (en) | 2008-06-04 | 2012-05-29 | Zhang Evan Y W | Measurement and segment of participant's motion in game play |
DE112009001652T5 (de) | 2008-07-08 | 2012-01-12 | Chiaro Technologies, Inc. | Mehrkanal-Erfassung |
US8334900B2 (en) | 2008-07-21 | 2012-12-18 | The Hong Kong University Of Science And Technology | Apparatus and method of optical imaging for medical diagnosis |
JP2010091855A (ja) | 2008-10-09 | 2010-04-22 | Denso Corp | レーザビーム照射装置 |
JP5251419B2 (ja) | 2008-10-22 | 2013-07-31 | 日産自動車株式会社 | 距離計測装置および距離計測方法 |
CN101794065A (zh) | 2009-02-02 | 2010-08-04 | 中强光电股份有限公司 | 投影显示系统 |
US20100223706A1 (en) | 2009-03-03 | 2010-09-09 | Illinois Tool Works Inc. | Welding helmet audio communication systems and methods with bone conduction transducers |
JP5484098B2 (ja) | 2009-03-18 | 2014-05-07 | 三菱電機株式会社 | 投写光学系及び画像表示装置 |
JP4991787B2 (ja) | 2009-04-24 | 2012-08-01 | パナソニック株式会社 | 反射型光電センサ |
GB0921461D0 (en) | 2009-12-08 | 2010-01-20 | Qinetiq Ltd | Range based sensing |
US8320621B2 (en) | 2009-12-21 | 2012-11-27 | Microsoft Corporation | Depth projector system with integrated VCSEL array |
US20110188054A1 (en) | 2010-02-02 | 2011-08-04 | Primesense Ltd | Integrated photonics module for optical projection |
JP5499985B2 (ja) | 2010-08-09 | 2014-05-21 | ソニー株式会社 | 表示装置組立体 |
WO2012023256A2 (en) | 2010-08-19 | 2012-02-23 | Canon Kabushiki Kaisha | Three-dimensional measurement apparatus, method for three-dimensional measurement, and computer program |
JP5163713B2 (ja) | 2010-08-24 | 2013-03-13 | カシオ計算機株式会社 | 距離画像センサ及び距離画像生成装置並びに距離画像データ取得方法及び距離画像生成方法 |
US8830637B2 (en) | 2010-08-31 | 2014-09-09 | Texas Instruments Incorporated | Methods and apparatus to clamp overvoltages for alternating current systems |
US20120056982A1 (en) | 2010-09-08 | 2012-03-08 | Microsoft Corporation | Depth camera based on structured light and stereo vision |
US8593535B2 (en) | 2010-09-10 | 2013-11-26 | Apple Inc. | Relative positioning of devices based on captured images of tags |
EP2433716A1 (en) | 2010-09-22 | 2012-03-28 | Hexagon Technology Center GmbH | Surface spraying device with a nozzle control mechanism and a corresponding method |
JP5595211B2 (ja) * | 2010-10-12 | 2014-09-24 | キヤノン株式会社 | 三次元形状測定装置、三次元形状測定方法及びコンピュータプログラム |
TWI428558B (zh) * | 2010-11-10 | 2014-03-01 | Pixart Imaging Inc | 測距方法、測距系統與其處理軟體 |
JP5815940B2 (ja) | 2010-12-15 | 2015-11-17 | キヤノン株式会社 | 距離計測装置、距離計測方法、およびプログラム |
CN103477644B (zh) | 2011-02-04 | 2017-04-12 | 皇家飞利浦电子股份有限公司 | 记录图像和从图像获得3d信息的方法、相机系统 |
JP5746529B2 (ja) | 2011-03-16 | 2015-07-08 | キヤノン株式会社 | 三次元距離計測装置、三次元距離計測方法、およびプログラム |
US8794181B2 (en) | 2011-03-17 | 2014-08-05 | Mirobot Ltd. | System and method for three dimensional teat modeling for use with a milking system |
JP2014122789A (ja) | 2011-04-08 | 2014-07-03 | Sanyo Electric Co Ltd | 情報取得装置、投射装置および物体検出装置 |
US8655094B2 (en) | 2011-05-11 | 2014-02-18 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Photogrammetry system and method for determining relative motion between two bodies |
JP5830270B2 (ja) | 2011-05-24 | 2015-12-09 | オリンパス株式会社 | 内視鏡装置および計測方法 |
EP2718668B1 (en) | 2011-06-07 | 2023-07-26 | Creaform Inc. | Sensor positioning for 3d scanning |
KR101974651B1 (ko) | 2011-06-22 | 2019-05-02 | 성균관대학교산학협력단 | 경계선 상속을 통하여 계층적으로 직교화된 구조광을 디코딩하는 방법 및 이를 이용하는 3차원 거리 영상 측정 시스템 |
US10054430B2 (en) | 2011-08-09 | 2018-08-21 | Apple Inc. | Overlapping pattern projector |
JP2014238259A (ja) | 2011-09-28 | 2014-12-18 | 三洋電機株式会社 | 情報取得装置および物体検出装置 |
US9142025B2 (en) | 2011-10-05 | 2015-09-22 | Electronics And Telecommunications Research Institute | Method and apparatus for obtaining depth information using optical pattern |
KR101605224B1 (ko) | 2011-10-05 | 2016-03-22 | 한국전자통신연구원 | 패턴 광을 이용한 깊이 정보 획득 장치 및 방법 |
TW201329509A (zh) | 2012-01-10 | 2013-07-16 | Walsin Lihwa Corp | 立體掃瞄裝置及其立體掃瞄方法 |
US9986208B2 (en) | 2012-01-27 | 2018-05-29 | Qualcomm Incorporated | System and method for determining location of a device using opposing cameras |
KR20140116551A (ko) | 2012-01-31 | 2014-10-02 | 쓰리엠 이노베이티브 프로퍼티즈 캄파니 | 표면의 삼차원 구조를 측정하는 방법 및 장치 |
WO2013129387A1 (ja) | 2012-03-01 | 2013-09-06 | 日産自動車株式会社 | 距離計測装置及び距離計測方法 |
CN104220838B (zh) | 2012-03-28 | 2016-12-21 | 富士通株式会社 | 拍摄装置 |
US9590122B2 (en) | 2012-05-18 | 2017-03-07 | Siemens Healthcare Diagnostics Inc. | Fish eye lens analyzer |
US8699005B2 (en) * | 2012-05-27 | 2014-04-15 | Planitar Inc | Indoor surveying apparatus |
EP2872030B1 (en) | 2012-07-10 | 2016-12-07 | WaveLight GmbH | Process and apparatus for determining optical aberrations of an eye |
US20140016113A1 (en) | 2012-07-13 | 2014-01-16 | Microsoft Corporation | Distance sensor using structured light |
JP2014020978A (ja) | 2012-07-20 | 2014-02-03 | Fujitsu Ltd | 照射装置、距離測定装置、照射装置のキャリブレーションプログラム及びキャリブレーション方法 |
EP2696590B1 (en) * | 2012-08-06 | 2014-09-24 | Axis AB | Image sensor positioning apparatus and method |
JP2014044113A (ja) | 2012-08-27 | 2014-03-13 | Sanyo Electric Co Ltd | 情報取得装置および物体検出装置 |
US9741184B2 (en) | 2012-10-14 | 2017-08-22 | Neonode Inc. | Door handle with optical proximity sensors |
EP3211299A1 (en) | 2012-10-24 | 2017-08-30 | SeeReal Technologies S.A. | Illumination device |
US9285893B2 (en) | 2012-11-08 | 2016-03-15 | Leap Motion, Inc. | Object detection and tracking with variable-field illumination devices |
JP6241793B2 (ja) | 2012-12-20 | 2017-12-06 | パナソニックIpマネジメント株式会社 | 3次元測定装置および3次元測定方法 |
US10466359B2 (en) | 2013-01-01 | 2019-11-05 | Inuitive Ltd. | Method and system for light patterning and imaging |
US9691163B2 (en) | 2013-01-07 | 2017-06-27 | Wexenergy Innovations Llc | System and method of measuring distances related to an object utilizing ancillary objects |
US8768559B1 (en) | 2013-01-22 | 2014-07-01 | Qunomic Virtual Technology, LLC | Line projection system |
US9142019B2 (en) | 2013-02-28 | 2015-09-22 | Google Technology Holdings LLC | System for 2D/3D spatial feature processing |
US10105149B2 (en) | 2013-03-15 | 2018-10-23 | Board Of Regents Of The University Of Nebraska | On-board tool tracking system and methods of computer assisted surgery |
US9364167B2 (en) | 2013-03-15 | 2016-06-14 | Lx Medical Corporation | Tissue imaging and image guidance in luminal anatomic structures and body cavities |
US20140320605A1 (en) | 2013-04-25 | 2014-10-30 | Philip Martin Johnson | Compound structured light projection system for 3-D surface profiling |
KR102088280B1 (ko) * | 2013-07-16 | 2020-04-14 | 엘지이노텍 주식회사 | 깊이 정보 추출 장치 및 방법 |
JP6211876B2 (ja) * | 2013-10-01 | 2017-10-11 | 株式会社トプコン | 測定方法及び測定装置 |
CN103559735B (zh) | 2013-11-05 | 2017-03-01 | 重庆安钻理科技股份有限公司 | 一种三维重建方法及系统 |
CN105981047A (zh) | 2014-01-06 | 2016-09-28 | 眼锁有限责任公司 | 用于重复虹膜识别的方法和设备 |
GB2522248A (en) | 2014-01-20 | 2015-07-22 | Promethean Ltd | Interactive system |
KR102166691B1 (ko) | 2014-02-27 | 2020-10-16 | 엘지전자 주식회사 | 객체의 3차원 형상을 산출하는 장치 및 방법 |
US9526427B2 (en) | 2014-03-21 | 2016-12-27 | Hypermed Imaging, Inc. | Compact light sensors with symmetrical lighting |
US9307231B2 (en) | 2014-04-08 | 2016-04-05 | Lucasfilm Entertainment Company Ltd. | Calibration target for video processing |
JP5829306B2 (ja) | 2014-05-12 | 2015-12-09 | ファナック株式会社 | レンジセンサの配置位置評価装置 |
US10207193B2 (en) | 2014-05-21 | 2019-02-19 | Universal City Studios Llc | Optical tracking system for automation of amusement park elements |
US9699393B2 (en) | 2014-06-26 | 2017-07-04 | Semiconductor Components Industries, Llc | Imaging systems for infrared and visible imaging with patterned infrared cutoff filters |
KR20160020323A (ko) | 2014-08-13 | 2016-02-23 | 옥은호 | 평행 적외선 투사기와 카메라 모듈로 구성되는 거리 측정 센서 |
JP6370177B2 (ja) | 2014-09-05 | 2018-08-08 | 株式会社Screenホールディングス | 検査装置および検査方法 |
US10268906B2 (en) | 2014-10-24 | 2019-04-23 | Magik Eye Inc. | Distance sensor with directional projection beams |
JP6121063B1 (ja) | 2014-11-04 | 2017-04-26 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | カメラ較正方法、デバイス及びシステム |
US20160128553A1 (en) | 2014-11-07 | 2016-05-12 | Zheng Jason Geng | Intra- Abdominal Lightfield 3D Endoscope and Method of Making the Same |
EP3229668A4 (en) | 2014-12-08 | 2018-07-11 | Luis Daniel Munoz | Device, system and methods for assessing tissue structures, pathology, and healing |
KR102369792B1 (ko) | 2015-03-05 | 2022-03-03 | 한화테크윈 주식회사 | 촬영 장치 및 촬영 방법 |
JP6484072B2 (ja) | 2015-03-10 | 2019-03-13 | アルプスアルパイン株式会社 | 物体検出装置 |
WO2016151918A1 (ja) | 2015-03-26 | 2016-09-29 | 富士フイルム株式会社 | 距離画像取得装置及び距離画像取得方法 |
DE112015006383B4 (de) | 2015-03-27 | 2019-01-03 | Fujifilm Corporation | Abstandsbild-Erfassungsvorrichtung und Abstandsbild-Erfassungsverfahren |
JP6360621B2 (ja) | 2015-03-30 | 2018-07-18 | 富士フイルム株式会社 | 距離画像取得装置及び距離画像取得方法 |
US9694498B2 (en) | 2015-03-30 | 2017-07-04 | X Development Llc | Imager for detecting visual light and projected patterns |
US10488192B2 (en) | 2015-05-10 | 2019-11-26 | Magik Eye Inc. | Distance sensor projecting parallel patterns |
CN107613842B (zh) | 2015-05-29 | 2019-09-24 | 奥林巴斯株式会社 | 照明装置和计测装置 |
KR20170005649A (ko) | 2015-07-06 | 2017-01-16 | 엘지전자 주식회사 | 3차원 깊이 카메라 모듈 및 이를 구비하는 이동 단말기 |
DE102015115011A1 (de) | 2015-09-08 | 2017-03-09 | Valeo Schalter Und Sensoren Gmbh | Laserscanner für Kraftfahrzeuge |
US10176554B2 (en) | 2015-10-05 | 2019-01-08 | Google Llc | Camera calibration using synthetic images |
JP6597150B2 (ja) | 2015-10-09 | 2019-10-30 | 富士通株式会社 | 距離測定装置、距離測定方法、距離測定プログラムおよびテーブルの作成方法 |
FR3042610B1 (fr) | 2015-10-14 | 2018-09-07 | Quantificare | Dispositif et procede pour reconstruire en trois dimensions la tete et le corps |
CN108369089B (zh) | 2015-11-25 | 2020-03-24 | 三菱电机株式会社 | 3维图像测量装置及方法 |
KR20170094968A (ko) | 2016-02-12 | 2017-08-22 | 엘지이노텍 주식회사 | 피사체 거리 측정 부재, 이를 갖는 카메라 모듈 |
US11030775B2 (en) | 2016-03-17 | 2021-06-08 | Flir Systems, Inc. | Minimal user input video analytics systems and methods |
CN113727000A (zh) | 2016-05-27 | 2021-11-30 | 松下知识产权经营株式会社 | 摄像系统 |
US9686539B1 (en) | 2016-06-12 | 2017-06-20 | Apple Inc. | Camera pair calibration using non-standard calibration objects |
JP7133554B2 (ja) | 2016-12-07 | 2022-09-08 | マジック アイ インコーポレイテッド | 焦点調整可能な画像センサを含む距離センサ |
US20180227566A1 (en) | 2017-02-06 | 2018-08-09 | Microsoft Technology Licensing, Llc | Variable field of view and directional sensors for mobile machine vision applications |
US11025887B2 (en) | 2017-02-27 | 2021-06-01 | Sony Corporation | Field calibration of stereo cameras with a projector |
US10769914B2 (en) | 2017-06-07 | 2020-09-08 | Amazon Technologies, Inc. | Informative image data generation using audio/video recording and communication devices |
CN111492262B (zh) | 2017-10-08 | 2024-06-28 | 魔眼公司 | 使用经向网格图案的距离测量 |
US10885761B2 (en) | 2017-10-08 | 2021-01-05 | Magik Eye Inc. | Calibrating a sensor system including multiple movable sensors |
US10679076B2 (en) | 2017-10-22 | 2020-06-09 | Magik Eye Inc. | Adjusting the projection system of a distance sensor to optimize a beam layout |
KR20200123849A (ko) | 2018-03-20 | 2020-10-30 | 매직 아이 인코포레이티드 | 가변 밀도들의 투영 패턴을 사용하는 거리 측정 |
JP7354133B2 (ja) | 2018-03-20 | 2023-10-02 | マジック アイ インコーポレイテッド | 三次元深度検知及び二次元撮像のためのカメラ露出調節 |
EP3803266A4 (en) | 2018-06-06 | 2022-03-09 | Magik Eye Inc. | DISTANCE MEASUREMENT USING HIGH DENSITY PROJECTION PATTERNS |
US11475584B2 (en) | 2018-08-07 | 2022-10-18 | Magik Eye Inc. | Baffles for three-dimensional sensors having spherical fields of view |
WO2020117785A1 (en) | 2018-12-08 | 2020-06-11 | Magik Eye Inc. | Vertical cavity surface emitting laser-based projector |
EP3911920B1 (en) | 2019-01-20 | 2024-05-29 | Magik Eye Inc. | Three-dimensional sensor including bandpass filter having multiple passbands |
-
2017
- 2017-12-05 JP JP2019530738A patent/JP7133554B2/ja active Active
- 2017-12-05 KR KR1020197019478A patent/KR102543275B1/ko active IP Right Grant
- 2017-12-05 KR KR1020197019486A patent/KR102595391B1/ko active IP Right Grant
- 2017-12-05 EP EP17877786.8A patent/EP3551965A4/en active Pending
- 2017-12-05 EP EP17877506.0A patent/EP3552180B1/en active Active
- 2017-12-05 US US15/832,085 patent/US10337860B2/en active Active
- 2017-12-05 CN CN201780075906.1A patent/CN110234955B/zh active Active
- 2017-12-05 WO PCT/US2017/064681 patent/WO2018106671A2/en unknown
- 2017-12-05 WO PCT/US2017/064680 patent/WO2018106670A1/en unknown
- 2017-12-05 CN CN201780075861.8A patent/CN110178156B/zh active Active
- 2017-12-05 JP JP2019530764A patent/JP2020501156A/ja active Pending
- 2017-12-07 TW TW106142945A patent/TWI758368B/zh active
-
2019
- 2019-07-02 US US16/460,685 patent/US11002537B2/en active Active
-
2022
- 2022-01-28 JP JP2022011648A patent/JP2022050708A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5598299A (en) * | 1994-04-27 | 1997-01-28 | Canon Kabushiki Kaisha | Photographic lens having image stabilizing function |
US20060290781A1 (en) * | 2005-06-28 | 2006-12-28 | Fujitsu Limited | Image obtaining apparatus |
US20070091174A1 (en) * | 2005-09-30 | 2007-04-26 | Topcon Corporation | Projection device for three-dimensional measurement, and three-dimensional measurement system |
CN103576280A (zh) * | 2012-07-31 | 2014-02-12 | 康耐视公司 | 用于确定和控制视觉系统摄影机中的焦距的系统和方法 |
WO2015166915A1 (ja) * | 2014-04-30 | 2015-11-05 | シナノケンシ株式会社 | 計測装置 |
US20160327385A1 (en) * | 2015-05-10 | 2016-11-10 | Magik Eye Inc. | Distance sensor |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112693229A (zh) * | 2019-10-23 | 2021-04-23 | 细美事有限公司 | 液滴检查模块和液滴检查方法 |
CN113124778A (zh) * | 2019-12-30 | 2021-07-16 | 财团法人工业技术研究院 | 轮廓测量系统和轮廓测量方法 |
CN115047433A (zh) * | 2022-08-16 | 2022-09-13 | 杭州宇称电子技术有限公司 | 用于tof距离量测系统光学自动化调整方法及其应用 |
CN115047433B (zh) * | 2022-08-16 | 2022-11-01 | 杭州宇称电子技术有限公司 | 用于tof距离量测系统光学自动化调整方法及其应用 |
Also Published As
Publication number | Publication date |
---|---|
JP7133554B2 (ja) | 2022-09-08 |
KR20190085151A (ko) | 2019-07-17 |
WO2018106671A9 (en) | 2018-07-19 |
JP2020501156A (ja) | 2020-01-16 |
US10337860B2 (en) | 2019-07-02 |
JP2020501155A (ja) | 2020-01-16 |
EP3551965A1 (en) | 2019-10-16 |
KR102595391B1 (ko) | 2023-10-31 |
CN110234955B (zh) | 2022-03-29 |
EP3552180A4 (en) | 2020-07-29 |
TW201830049A (zh) | 2018-08-16 |
JP2022050708A (ja) | 2022-03-30 |
EP3552180B1 (en) | 2022-01-26 |
CN110234955A (zh) | 2019-09-13 |
WO2018106671A2 (en) | 2018-06-14 |
EP3552180A2 (en) | 2019-10-16 |
WO2018106670A1 (en) | 2018-06-14 |
KR102543275B1 (ko) | 2023-06-16 |
KR20190085150A (ko) | 2019-07-17 |
TWI758368B (zh) | 2022-03-21 |
CN110178156B (zh) | 2023-11-14 |
US20180156609A1 (en) | 2018-06-07 |
US20200003556A1 (en) | 2020-01-02 |
EP3551965A4 (en) | 2020-08-05 |
WO2018106671A3 (en) | 2018-08-16 |
US11002537B2 (en) | 2021-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110178156A (zh) | 包括可调节焦距成像传感器的距离传感器 | |
US10488192B2 (en) | Distance sensor projecting parallel patterns | |
US10228243B2 (en) | Distance sensor with parallel projection beams | |
EP2201400B1 (en) | Wide field of view optical tracking system | |
KR101992511B1 (ko) | 3차원 줌 이미저 | |
CN103649674B (zh) | 测量设备以及信息处理设备 | |
TWI624170B (zh) | 影像掃描系統及其方法 | |
KR20170072319A (ko) | 거리 센서 | |
KR20080111474A (ko) | 스페클 패턴을 이용한 3차원 센싱 | |
JP2015049200A (ja) | 計測装置、方法及びプログラム | |
JP2019045299A (ja) | 3次元情報取得装置 | |
KR102068929B1 (ko) | 3차원 카메라 시스템 | |
KR20200135131A (ko) | 3차원 카메라 시스템 | |
TW201833582A (zh) | 投射平行圖案的距離感應器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40013992 Country of ref document: HK |
|
GR01 | Patent grant | ||
GR01 | Patent grant |