CN105229412A - 用于主动立体的强度调制光图案 - Google Patents

用于主动立体的强度调制光图案 Download PDF

Info

Publication number
CN105229412A
CN105229412A CN201480021199.4A CN201480021199A CN105229412A CN 105229412 A CN105229412 A CN 105229412A CN 201480021199 A CN201480021199 A CN 201480021199A CN 105229412 A CN105229412 A CN 105229412A
Authority
CN
China
Prior art keywords
point
pattern
spot
randomly
strength range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480021199.4A
Other languages
English (en)
Other versions
CN105229412B (zh
Inventor
S·B·康
A·乔治欧
R·S·泽里斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105229412A publication Critical patent/CN105229412A/zh
Application granted granted Critical
Publication of CN105229412B publication Critical patent/CN105229412B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2513Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B29WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29CSHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B29WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29CSHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • B29C64/30Auxiliary operations or equipment
    • B29C64/386Data acquisition or data processing for additive manufacturing
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/22Measuring arrangements characterised by the use of optical techniques for measuring depth
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • G01B11/2527Projection by scanning of the object with phase change by in-plane movement of the patern
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2545Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with one projection direction and several detection directions, e.g. stereo
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4205Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive optical element [DOE] contributing to image formation, e.g. whereby modulation transfer function MTF or optical aberrations are relevant
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/44Grating systems; Zone plate systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/18Diffraction gratings
    • G02B5/1876Diffractive Fresnel lenses; Zone plates; Kinoforms
    • G02B5/189Structurally combined with optical elements not having diffractive power
    • G02B5/1895Structurally combined with optical elements not having diffractive power such optical elements having dioptric power
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3024Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a central processing unit [CPU]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • G06F12/0207Addressing or allocation; Relocation with multidimensional access, e.g. row/column, matrix
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • G06F12/0223User address space allocation, e.g. contiguous or non contiguous base addressing
    • G06F12/0292User address space allocation, e.g. contiguous or non contiguous base addressing using tables or multilevel address translation means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653Monitoring storage devices or systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659Command handling arrangements, e.g. command buffers, queues, command scheduling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/3004Arrangements for executing specific machine instructions to perform operations on memory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/3004Arrangements for executing specific machine instructions to perform operations on memory
    • G06F9/30043LOAD or STORE instructions; Clear instruction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30098Register arrangements
    • G06F9/3012Organisation of register space, e.g. banked or distributed register file
    • G06F9/30123Organisation of register space, e.g. banked or distributed register file according to context, e.g. thread buffers
    • G06F9/30127Register windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/60Memory management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/586Depth or shape recovery from multiple images from multiple light sources, e.g. photometric stereo
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/25Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/254Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/271Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H04N25/611Correction of chromatic aberration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4233Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive element [DOE] contributing to a non-imaging application
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30244Camera pose
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Materials Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Mechanical Engineering (AREA)
  • Manufacturing & Machinery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Electromagnetism (AREA)
  • Quality & Reliability (AREA)
  • Image Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Lenses (AREA)
  • User Interface Of Digital Computer (AREA)
  • Power Engineering (AREA)
  • Image Analysis (AREA)
  • Measurement Of Optical Distance (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Color Television Image Signal Generators (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Hardware Design (AREA)
  • Artificial Intelligence (AREA)
  • Extrusion Moulding Of Plastics Or The Like (AREA)
  • Life Sciences & Earth Sciences (AREA)

Abstract

本公开涉及按图案来投射光,其中该图案包含具有不同强度的分量(例如,斑点)。该图案可以基于以下各点的网格:与第一强度相关联的初始点,以及初始点之间的具有第二强度的各点,以此类推。该图案可相对于捕捉该图案的相机来旋转,其中捕捉到的图像使用基于立体图像中的圆点的立体匹配的主动深度感测。

Description

用于主动立体的强度调制光图案
背景技术
在如主动立体系统所使用的主动深度感测中,投影仪投射诸如红外(IR)点或线等光图案以照亮被感测的场景。所投射的图案随后被(立体系统中的两个或更多个)相机/传感器捕捉,其中一个或多个图像被处理以计算深度图等。
例如,在立体系统中,立体相机捕捉来自不同视点的两个图像。随后,例如,使用立体图像对来执行深度估计的一种方式是找出各图像之间的局部片的对应关系,例如以将左图像中的每一投射的和感测到的局部点图案与右图像中的对应局部点图案进行相关。一旦匹配,图像内投射的图案可以彼此相关,且相关点的一个或多个特征之间的不同被用来估计(例如,三角测量)距该特定点对的深度。
IR激光器已被用来产生这样的图案。为了允许立体系统在大范围的深度上工作,需要更强的激光器(约1W或更大)。在这样的功率级,多模激光器是更加成本高效的。然而,使用多模激光器导致在较近距离处看起来模糊的设计图案。这在主动立体深度感测中是有问题的,因为将左和右点对的正确各对进行相关在点被模糊时造成更多误差。
概述
提供本概述以便以简化形式介绍将在以下的详细描述中进一步描述的一些代表性概念的选集。本概述不旨在标识出所要求保护的主题的关键特征或必要特征,也不旨在以限制所要求保护的主题的范围的任何方式来使用。
简言之,本文描述的主题的各方面中的一个或多个涉及用于主动感测的强度调制光图案。包括激光器和衍射光组件的投影仪将光图案朝场景进行投射。衍射光组件被配置成将光图案作为多个子图案集合来输出,其中每一集合与不同强度范围相对应。
一个或多个方面涉及生成包括第一点集合的网格,将第一集合中的每一个点与第一强度范围内的强度值进行关联,在第一点集合的各点的子集之间添加第二点集合,以及将第二集合中的每一个点与第二强度范围内的强度值进行关联。如有必要,这一细分过程可被重复。可基于第一点集合和第二点集合来编码衍射光组件。另一变型是生成具有大致均匀密度遍布的随机点集合,其中它们中的随机子集具有指定强度范围,而其余具有不同的强度范围。
一个或多个方面涉及将光投射通过衍射光组件以投射图案,该图案包括与第一强度范围相对应的各斑点的第一集合和与第二强度范围相对应的各斑点的第二集合。第一集合中的各斑点的位置基于初始网格布局,并且第二点集合中的各斑点的位置基于第一集合中的各斑点的位置。感测第一斑点集合和第二斑点集合作为左和右立体相机图像。处理图像以将左图像中的各斑点与右图像中的各斑点进行相关,其中图像的扫描线没有与初始网格布局对齐。
结合附图阅读以下详细描述,本发明的其他优点会变得显而易见。
附图简述
作为示例而非限制,在附图中示出了本发明,附图中相同的附图标记指示相同或相似的元素,附图中:
图1是根据一个或多个示例实现的表示可被用来投射和捕捉用不同强度来调制的光图案的示例组件的框图。
图2是根据一个或多个示例实现的具有到场景中的不同强度的投射点的示例的表示。
图3A和3B是根据一个或多个示例实现的可基于网格来设计(且点细分经由网格来对齐)以促进具有带不同强度的各点的图案的表示。
图4是根据一个或多个示例实现的具有不同强度的进一步点细分的表示。
图5是根据一个或多个示例实现的表示对点进行布局以用于不同强度(诸如用于将对应数据编码到衍射光元件)的示例步骤的流程图。
图6是根据一个示例实现的表示投射具有不同强度的光衍射图案的设备的示例组件的框图。
图7和8是根据一个或多个示例实现的所投射的图案的无旋转对旋转如何影响包括所投射的图案的捕捉到的图像的扫描的表示。
图9是根据一个或多个示例实现的不同强度的各点可如何在图像的一部分中被捕捉并随时间移动的表示。
图10是表示其中可实现在本文中所描述的各实施例的一个或多个方面的游戏系统形式的示例性、非限制性计算系统或操作环境的框图。
详细描述
本文描述的技术的各方面一般涉及将光图案投射到场景中,其中光图案被配置成提供对被照亮对象的增强的图案匹配,包括在不同的深度处。在一个方面,光图案包括不同强度的光的混合点(例如,诸如圆点等斑点)。本技术还通过使图案包括半随机分布的各点来利用图案的深度相关外观。
如将理解的,相邻各点的峰值强度是不同的。这造成强度中的与场景深度无关的局部变化,从而允许立体匹配正确地工作。
应当理解,本文中的任何示例均是非限制的。例如,所投射的光图案可以使用斑点,在本文中一般例示为圆点,但圆点可以是任何形状。作为另一示例,圆点可被例示为根据三角形网格来安排,然而,这只是一个示例,并且可以实现其他安排(例如,六边形网格)。可以使用图案的旋转角(下文描述)、来自本文描述的那些的不同角度或强度峰值的值(例如,对于大、中、以及小强度),以此类推。因此,本发明不限制于在此描述的任何具体的实施例、方面、概念、结构、功能或示例。相反,此处所描述的实施例、方面、概念、结构、功能或示例中的任一个都是非限制性的,并且本发明一般能够以在主动深度感测以及图像处理中提供益处和优点的各种方式来使用。
图1示出其中图像捕捉系统或子系统104的立体相机102和103捕捉时间上同步的图像(例如,相机被“同步锁相”)的示例系统。在一个实现中,相机捕捉红外(IR)图像,因为IR不反映场景的可见外观(如在视频会议和对象建模应用中,这是高度有利的)。如可容易地理解的,在一些诸如工作室环境等场景中,可存在两个以上深度感测相机。此外,一个或多个其他相机,如RGB相机,可存在于给定系统中,且这样的其他相机可被用来帮助例如将不同立体图像中的点对进行相关。
在图1中,示出了将诸如斑点(例如,圆点)的图案或线图案等IR图案投射到场景上的投影仪106,尽管可以使用其他圆点形状和/或图案类型。出于简明的目的,圆点在下文概括地描述。通过用相对大量的分布式红外圆点照亮场景,相机102和103捕捉纹理数据作为红外图像数据的一部分。如本文描述的,为促进左图像和右图像之间的更准确的点匹配,图案中的圆点被安排成具有不同的强度,且该图案还可相对于相机旋转。具有强度调制的图案可被设计(例如,编码)到将激光分散到场景(例如,作为圆点图案)的衍射光组件(例如,一衍射光元件或各衍射光元件的组合)。
图2例示了这一投射概念。表示为立体相机102和103之间的圆圈的投影仪106将圆点图案投射到场景222上。圆点图案是使用不同强度来调制的,且圆点图案可相对于相机的朝向来旋转(例如,15度)。相机102和103在圆点从场景222以及(可能的)背景中的物体表面反射时捕捉这些圆点。一般而言,捕捉到的圆点的一个或多个特征指示距反射表面的距离。注意,图2不旨在缩放,也不传达任何大小、距离、点分布图案、点密度等。然而,将理解,不同强度存在于圆点图案中,且圆点图案可相对于相机旋转。
注意,投影仪106的放置可在相机的外部(例如,图1)或相机中间(图2),或在另一位置,如在相机之一或两者的上方或下方。本文的示例决不限制相机和/或投影仪相对于彼此的位置,且类似地,相机可位于相对于彼此的不同位置。
在一个实现中,示例图像捕捉系统或子系统104包括经由相机接口110控制相机102和103的操作的控制器108。例示的控制器还经由投影仪接口112控制投影仪106的操作。例如,相机102和103,诸如通过控制器信号(或对于每一相机不同的信号),被同步(同步锁相)以同时捕捉立体图像。投影仪106可被打开或关闭、暂停、或例如以其他方式具有可控制地改变的一个或多个参数。
相机102和103捕捉到的图像116被提供给图像处理系统或子系统118。在一些实现中,图像处理系统118和图像捕捉系统或子系统104或其各部分可被组合成单个设备。例如,家庭娱乐设备可包括图1中所示的所有组件(以及其他未示出的组件)。在其他实现中,图像捕捉系统或子系统104的各部分(或全部),如相机和投影仪,可以是耦合到游戏控制台、个人计算机、移动设备、专用处理设备等的分开的设备。确实,游戏控制器在图10中被例示为可被用于将图像处理成深度数据的一个环境。
图像处理系统或子系统118包括处理器120和包含一个或多个图像处理算法124的存储器122。一个或多个深度图可经由算法124获得,如通过提取匹配的特征(如点和/或线)。例如,如所知的,诸如在美国公布专利申请no.20130100256中描述的,取决于从投影仪到反射表面的距离和/或从相机到反射表面的距离,不同点或其他所投射的元素在被捕捉时具有不同特征,包括强度(亮度)。还如所知的,(例如,使用同步锁相立体相机)同时拍摄的不同图像中的点可以彼此相关,如通过匹配同时捕捉的同一场景的RGB彩色图像之间的小(例如,RGB)片。因而,使用捕捉到的图像,已知算法可以通过匹配每一图像中的所投射的光分量(例如,圆点)确定各单独的深度相关特征(深度图),使用匹配圆点之间的某些特征的不同来确定深度。这是可经由立体图像处理获得深度图的一种方式。
图1中还示出了到图像处理系统或子系统118的接口132,如用于连接键盘、游戏控制器、显示器、定点设备、用于语音命令的话筒等,以适于供用户与使用深度图的应用等进行交互。
图3A和3B连同图4示出了细分的概念,其中较大强度的圆点(其中具有“X”形状的较大圆点)被安排成三角形网格布局330(图3A)。在图3B中,较大强度圆点的每一个三角形被较小强度圆点(圆圈)的三角形来细分,从而提供图案332。在图4中,这些子图案中的每一个被更小强度圆点(相对于图3B中的圆圈而言大小更小的圆圈)来进一步细分。因而,图4表示较高强度圆点、中等强度圆点、以及较低强度圆点的三角形图案440。相对于分布图案以及相对于彼此的圆点大小只是旨在示出不同相对强度或强度范围的圆点的分布,且不旨在传达任何特定强度水平或范围。
图5概括了细分,在步骤502开始,其中在该示例中,所指定的顶点之间距离的三角形网格被生成,例如包括正三角形或基本上正三角形(或其他多边形)。强度峰值被设置成高值,然而,并非是对于每一个点相同的强度值,高值可被随机地设置成在高范围内(步骤504),例如200-255之间(其中255是最大强度)。注意,如本文所使用的,强度“范围”包括具有少至一个固定强度值的范围,例如范围可以从200到200。
步骤506表示在先前生成的点之间添加各点,例如作为较小三角形集合(“细分”),如图3B所示。步骤508将这些点的强度峰值随机地设置在较低范围内,例如100-125之间。注意,这些示例强度范围没有彼此重叠,但具有在某种程度上重叠的不同范围是可行的;如果加权随机技术可被用来将重叠范围中的大多数值偏置得彼此远离的话。
步骤510评估细分是否已完成到最低所需水平,这是可配置的。因而,通过返回步骤506,点的另一细分可被可任选地添加,(如在图4中例示的),具有更低的强度范围,以此类推,直至达到所需图案和强度/强度范围集合。结果是包含各子图案的投射图案,在该示例中是三角形子图案的不同集合,如较大强度子图案集合和较小强度子图案集合(图3B),或小、中、以及大强度子图案集合(图4),以此类推。一般而言,集合/子图案经由细分来交织。
注意,一旦设计了强度调制图案,如经由图5的示例步骤,则一个或多个衍射光元件可按已知方式制造以输出该图案。各种眼睛安全衍射光元件安排在上述临时专利申请序列号61/812,232中描述。然而,作为另一(可任选)步骤,步骤512表示将各点中的至少一些伪随机地重新安排(例如,轻度“抖动”)到经修改的位置,如以进一步降低重复间隔。通常,点的这一重新定位相对于其相应三角形(或其他网格图案)而言是很小的,由此正多边形或基本上正多边形限制被修改成只是大致/近似正多边形。
图6是其中衍射光组件660(例如,一个或多个衍射光元件)被配置成输出强度调制的照明图案的一个这样的示例配置。组件660可被构建到设备662内或耦合到设备662,如内置到家庭娱乐设备或作为其一部分。激光器664(例如,多模)提供光源。立体相机666A和666B捕捉来自所照亮的对象(例如,人668)的反射,并且按需使用捕捉到的图像;注意,在给定实现中,可以使用单个相机。
如图6所表示的,衍射光组件660基于本文所描述的所设计的图案将激光分散成大量斑点,如100,000数量级的圆点。图案中的一些在图1中由来自元件的实线且由对象/人668和图像平面670上的圆点来表示。注意,对于本文的附图中的任一,图6或其组件都不旨在是按比例绘制或传达任何特定距离、分布等。
图7和8解说了另一方面,即经调制图案的旋转。在图7,左图案770L的一部分的相机捕捉的点被示出在右图案770R的各部分的旁边。一般而言,点A与点C相关,且被假定为是匹配的。然而,在从左至右扫描(右)图像的像素行以匹配图案时,存在显著重复,由此点B(或可能的点D)可被错误地与点A匹配。
在图8,经旋转的左图案880L的一部分的相机捕捉的点被示出在经旋转的右图案880R的各部分的旁边。如可看到的,在扫描像素行以匹配点A时,例如,点B或点D都将不被遇到。以此方式,旋转(例如,在该示例中旋转15度,但可以使用其他旋转角)帮助提供沿扫描线(x方向)的较大重复间隔。
旋转和强度分布在图9的部分图像表示990中概括地示出,其中各点由圆圈示出且(一些相对)强度由其大小示出。像素由点后的方框表示。注意,在图9中,圆圈的不同直径只暗示强度变化;圆圈和网格方形的大小不旨在传达任何特定尺度、分辨率等,也不传达任何特定强度值或相对强度值(除了在至少两个不同范围内)。此外,点的密度和/或它们的大小或分布不旨在表示任何实际密度和/或分布。
如可看到的,提供了用不同强度来调制的光图案。该图案可以基于网格,且被投射,使得捕捉该光图案的相机不与该图案所基于的网格对齐。强度调制的图案提供更稳健的立体匹配/深度感测。
示例操作环境
可以容易地理解以上所描述的实施方式及其替换方式可实现在任何合适的计算设备上,包括游戏系统、个人计算机、平板电脑、DVD、机顶盒、智能电话等。当多个这样的设备被链接在一起时,这样的设备的组合也是可行的。为了描述的目的,以下描述了一个游戏(包括媒体)系统作为一个示例性操作环境。
图10是示例游戏和媒体系统1000的功能框图并且更详细地示出各功能组件。控制台1001具有中央处理单元(CPU)1002以及便于处理器访问各种类型的存储器的存储器控制器1003,各种类型的存储器包括闪存只读存储器(ROM)1004、随机存取存储器(RAM)1006、硬盘驱动器1008,以及便携式媒体驱动器1009。在一种实现中,CPU1002包括1级高速缓存1010和2级高速缓存1012,这些高速缓存用于临时存储数据并因此减少对硬盘驱动器进行的存储器访问周期的数量,从而提高了处理速度和吞吐量。
CPU1002、存储器控制器1003、以及各种存储器设备经由一个或多个总线(未示出)互连。在此实现中所使用的总线的细节对理解此处所讨论的关注主题不是特别相关。然而,应该理解,这样的总线可以包括串行和并行总线、存储器总线、外围总线、使用各种总线体系结构中的任何一种的处理器或局部总线中的一个或多个。作为示例,这样的架构可以包括工业标准体系结构(ISA)总线、微通道体系结构(MCA)总线、增强型ISA(EISA)总线、视频电子标准协会(VESA)局部总线、以及也称为夹层总线的外围部件互连(PCI)总线。
在一个实现中,CPU1002、存储器控制器1003、ROM1004以及RAM1006被集成到公用模块1014上。在此实现中,ROM1004被配置为经由外围部件互联(PCI)总线或类似的以及ROM总线(两者都未示出)或类似的连接到存储器控制器1003的闪存ROM。RAM1006被配置为多个双倍数据速率同步动态RAM(DDRSDRAM)模块,它们被存储器控制器1003通过分开的总线(未示出)独立地进行控制。硬盘驱动器1008和便携式媒体驱动器1009被示为通过PCI总线和AT附加(ATA)总线1016连接到存储器控制器1003。然而,在其他实现中,也可以备选地应用不同类型的专用数据总线结构。
三维图形处理单元1020和视频编码器1022构成了视频处理流水线,用于进行高速度和高分辨率(例如,高清晰度)图形处理。数据通过数字视频总线(未示出)从图形处理单元1020传输到视频编码器1022。音频处理单元1024和音频编解码器(编码器/解码器)1026构成了对应的音频处理流水线,用于对各种数字音频格式进行多通道音频处理。通过通信链路(未示出)在音频处理单元1024和音频编解码器1026之间传送音频数据。视频和音频处理流水线向A/V(音频/视频)端口1028输出数据,以便传输到电视机或其它显示器/扬声器。在例示出的实施方式中,视频和音频处理组件1020、1022、1024、1026以及1028被安装在模块1014上。
图10示出了包括USB主控制器1030和网络接口(NWI/F)1032的模块1014,网络接口1032可包括有线和/或无线组件。USB主控制器1030被示为通过总线(例如,PCI总线)与CPU1002和存储器控制器1003进行通信,并作为外围控制器1034的主机。网络接口1032提供对网络(例如,因特网、家庭网络等)的访问并且可以是包括以太网卡、调制解调器、蓝牙模块、电缆调制解调器等的各种不同的有线和无线接口组件中的任何一种。
在图10中描绘的示例实现中,控制台1001包括用于支持四个控制器1041(1)-1041(4)的控制器支持子部件1040。控制器支持子部件1040包括支持与诸如,例如,媒体和游戏控制器之类的外部控制设备的有线和/或无线操作所需的任何硬件和软件组件。前面板I/O子部件1042支持电源按钮1043、弹出按钮1044,以及任何其它按钮和任何LED(发光二极管)或暴露在控制台1001的外表面上的其它指示器等多个功能。子部件1040和1042经由一个或多个线缆子部件1046或类似的与模块1014通信。在其他实现中,控制台1001可以包括另外的控制器子组件。所示出的实现还示出了被配置为发送和接收可传递给模块1014的信号(例如来自遥控器1049)的光学I/O接口1048。
存储器单元(MU)1050(1)和1050(2)被示为可以分别连接到MU端口“A”1052(1)和“B”1052(2)。每一个MU1050都提供附加存储,在其上面可以存储游戏、游戏参数、及其它数据。在一些实现中,其他数据可以包括数字游戏组件、可执行的游戏应用,用于扩展游戏应用的指令集、以及媒体文件中的一个或多个。当被插入到控制台1001中时,每个MU1050可由存储器控制器1003访问。
系统供电模块1054向游戏系统1000的组件供电。风扇1056冷却控制台1001内的电路。
包括机器指令的应用1060被通常存储在硬盘驱动器1008上。当控制台1001通电时,应用1060的各个部分被加载到RAM1006和/或高速缓存1010和1012中以供在CPU1002上执行。总得来说,应用1060可包括一个或多个程序模块,用于执行各种显示功能,诸如控制对话屏幕供呈现在显示器上(例如,高分辨率监视器)、基于用户输入控制会话以及控制控制台1001和外部连接的设备指尖的数据传输和接收。
可以通过简单地将系统连接到高分辨率监视器、电视机、视频投影仪、或其它显示设备来将游戏系统1000用作独立系统。在此独立模式下,游戏系统1000允许一个或多个玩家玩游戏或欣赏数字媒体,例如观看电影或欣赏音乐。然而,随着宽带连接的集成通过网络接口1032而成为可能,游戏系统1000还可以作为更大的网络游戏社区或系统的参与组件来操作。
结语
尽管本发明易于作出各种修改和替换构造,但其某些说明性实施例在附图中示出并在上面被详细地描述。然而应当了解,这不旨在将本发明限于所公开的具体形式,而是相反地,旨在覆盖落入本发明的精神和范围之内的所有修改、替换构造和等效方案。

Claims (10)

1.一种系统,包括:将光图案投射到场景的投影仪,所述投影仪包括激光器和衍射光组件,所述衍射光组件被配置成将所述光图案作为多个子图案集合来输出,每一集合对应于不同的强度范围。
2.如权利要求1所述的系统,其特征在于,所述子图案中的一个或多个包括与各位置相对应的各点,所述各点基于重新定位基本上正多边形的各点连同附加随机重新定位其中的至少一些点来形成近似正多边形。
3.如权利要求1所述的系统,其特征在于,形成子图案的各点中的至少一个被随机或伪随机地指派与该子图案相关联的强度范围内的强度值。
4.如权利要求1所述的系统,其特征在于,所述衍射光组件被配置成投射相对于至少一个相机的朝向的旋转图案。
5.一种方法,包括:生成包括第一点集合的网格,将所述第一集合中的每一个点与第一强度范围内的强度值进行关联,在所述第一点集合的各点的子集之间添加第二点集合,将所述第二集合中的每一个点与第二强度范围内的强度值进行关联,以及基于所述第一点集合和所述第二点集合来编码衍射光组件。
6.如权利要求5所述的方法,其特征在于,还包括将光投射通过所述衍射光组件以投射图案,所述图案包括每一个斑点都位于所述第一强度范围内的各斑点的第一集合和每一个斑点都位于所述第二强度范围内的各斑点的第二集合。
7.如权利要求5所述的方法,其特征在于,还包括:在所述第二点集合的各点的子集之间添加第三点集合,将所述第三集合中的每一个点与第三强度范围内的强度值进行关联,以及其中编码所述衍射光组件还包括基于所述第三点集合来编码所述衍射光组件。
8.如权利要求5所述的方法,其特征在于,所述网格是三角形,并且其中生成所述网格包括基于所述网格将所述第一点集合安排成三角形,并且其中添加所述第二点集合包括细分所述三角形中的至少一些。
9.如权利要求5所述的方法,其特征在于:a)将所述第一集合中的每一个点与第一强度范围内的强度值进行关联包括为所述第一集合中的各点中的至少一些点随机或伪随机地选择所述第一范围内的强度值,或b)将所述第二集合中的每一个点与第二强度范围内的强度值进行关联包括为所述第二集合中的各点中的至少一些点随机或伪随机地选择所述第二范围内的强度值,或c)相对于所述网格随机或伪随机地定位所述第一集合中的各点中的至少一些点,或d)相对于所述第二集合中的各点中的至少一些点在所述第一点集合的各点的子集之间的位置,随机或伪随机地定位所述第二集合中的各点中的至少一些点,或e)a)、b)、c)或d)的任何组合。
10.一种方法,包括:将光投射通过衍射光组件以投射图案,所述图案包括与第一强度范围相对应的各斑点的第一集合和与第二强度范围相对应的各斑点的第二集合,其中所述第一集合中的各斑点的位置基于初始网格布局,并且所述第二点集合中的各斑点的位置基于所述第一集合中的各点的位置;感测所述第一斑点集合和所述第二斑点集合作为左和右立体相机图像;以及处理所述图像以将所述左图像中的各斑点与所述右图像中的各斑点进行相关,其中所述图像的扫描线没有与所述初始网格布局对齐。
CN201480021199.4A 2013-04-15 2014-04-14 用于主动立体的强度调制光图案 Active CN105229412B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361812232P 2013-04-15 2013-04-15
US61/812,232 2013-04-15
US13/915,626 2013-06-11
US13/915,626 US20140307055A1 (en) 2013-04-15 2013-06-11 Intensity-modulated light pattern for active stereo
PCT/US2014/033910 WO2014172222A1 (en) 2013-04-15 2014-04-14 Intensity-modulated light pattern for active stereo

Publications (2)

Publication Number Publication Date
CN105229412A true CN105229412A (zh) 2016-01-06
CN105229412B CN105229412B (zh) 2018-12-07

Family

ID=51686521

Family Applications (8)

Application Number Title Priority Date Filing Date
CN201480021487.XA Active CN105143817B (zh) 2013-04-15 2014-04-14 通过移动图案投影仪对深度图进行超解析
CN201480021460.0A Active CN105229411B (zh) 2013-04-15 2014-04-14 稳健的立体深度系统
CN201480021199.4A Active CN105229412B (zh) 2013-04-15 2014-04-14 用于主动立体的强度调制光图案
CN201480021958.7A Active CN105230003B (zh) 2013-04-15 2014-04-14 用于校准图像捕捉设备的颜色校正变换的方法和系统
CN201480021519.6A Active CN105247859B (zh) 2013-04-15 2014-04-14 一个或多个卫星设备的主动立体显像
CN201480021422.5A Active CN105308650B (zh) 2013-04-15 2014-04-14 用于确定立体图像中的块的相似度的方法和系统
CN201480021493.5A Pending CN105229696A (zh) 2013-04-15 2014-04-14 用于多维数据存取的并行存储器
CN201480021528.5A Active CN105210112B (zh) 2013-04-15 2014-04-14 带有用于对眼睛安全的操作的非衍射光扩大的衍射光学元件

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201480021487.XA Active CN105143817B (zh) 2013-04-15 2014-04-14 通过移动图案投影仪对深度图进行超解析
CN201480021460.0A Active CN105229411B (zh) 2013-04-15 2014-04-14 稳健的立体深度系统

Family Applications After (5)

Application Number Title Priority Date Filing Date
CN201480021958.7A Active CN105230003B (zh) 2013-04-15 2014-04-14 用于校准图像捕捉设备的颜色校正变换的方法和系统
CN201480021519.6A Active CN105247859B (zh) 2013-04-15 2014-04-14 一个或多个卫星设备的主动立体显像
CN201480021422.5A Active CN105308650B (zh) 2013-04-15 2014-04-14 用于确定立体图像中的块的相似度的方法和系统
CN201480021493.5A Pending CN105229696A (zh) 2013-04-15 2014-04-14 用于多维数据存取的并行存储器
CN201480021528.5A Active CN105210112B (zh) 2013-04-15 2014-04-14 带有用于对眼睛安全的操作的非衍射光扩大的衍射光学元件

Country Status (11)

Country Link
US (14) US10268885B2 (zh)
EP (9) EP2987131A1 (zh)
JP (1) JP6469080B2 (zh)
KR (2) KR102130187B1 (zh)
CN (8) CN105143817B (zh)
AU (1) AU2014254219B2 (zh)
BR (1) BR112015025819A8 (zh)
CA (1) CA2907895C (zh)
MX (1) MX357307B (zh)
RU (1) RU2663329C2 (zh)
WO (8) WO2014172227A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111246073A (zh) * 2020-03-23 2020-06-05 维沃移动通信有限公司 成像装置、方法及电子设备
CN112243485A (zh) * 2018-06-07 2021-01-19 拉迪莫公司 对三维表面的形貌建模

Families Citing this family (172)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072245A (ko) * 2010-12-23 2012-07-03 한국전자통신연구원 스테레오 영상 정합 장치 및 방법
US9438813B2 (en) * 2012-03-13 2016-09-06 Dolby Laboratories Licensing Corporation Lighting system and method for image and object enhancement
EP2700920B1 (en) 2012-08-23 2016-06-22 ams AG Light sensor system and method for processing light sensor signals
US10268885B2 (en) 2013-04-15 2019-04-23 Microsoft Technology Licensing, Llc Extracting true color from a color and infrared sensor
US9467680B2 (en) 2013-12-12 2016-10-11 Intel Corporation Calibration of a three-dimensional acquisition system
CN105829829B (zh) * 2013-12-27 2019-08-23 索尼公司 图像处理装置和图像处理方法
US9720506B2 (en) * 2014-01-14 2017-08-01 Microsoft Technology Licensing, Llc 3D silhouette sensing system
US10538074B2 (en) * 2014-01-16 2020-01-21 Hewlett-Packard Development Company, L.P. Processing slice data
US11265534B2 (en) * 2014-02-08 2022-03-01 Microsoft Technology Licensing, Llc Environment-dependent active illumination for stereo matching
US9842424B2 (en) * 2014-02-10 2017-12-12 Pixar Volume rendering using adaptive buckets
US20170078649A1 (en) 2014-03-07 2017-03-16 Brown University Method and system for unsynchronized structured lighting
US20150266235A1 (en) * 2014-03-19 2015-09-24 Autodesk, Inc. Systems and methods for improved 3d printing
US9674493B2 (en) * 2014-03-24 2017-06-06 Omnivision Technologies, Inc. Color image sensor with metal mesh to detect infrared light
WO2015152829A1 (en) * 2014-04-03 2015-10-08 Heptagon Micro Optics Pte. Ltd. Structured-stereo imaging assembly including separate imagers for different wavelengths
GB201407270D0 (en) * 2014-04-24 2014-06-11 Cathx Res Ltd 3D data in underwater surveys
US9823842B2 (en) 2014-05-12 2017-11-21 The Research Foundation For The State University Of New York Gang migration of virtual machines using cluster-wide deduplication
US9533449B2 (en) 2014-06-19 2017-01-03 Autodesk, Inc. Material deposition systems with four or more axes
US10252466B2 (en) 2014-07-28 2019-04-09 Massachusetts Institute Of Technology Systems and methods of machine vision assisted additive fabrication
CN106461378B (zh) * 2014-08-08 2019-10-25 塞姆布有限公司 具有用于非接触式测量的扫描系统的车辆装备
US10455212B1 (en) * 2014-08-25 2019-10-22 X Development Llc Projected pattern motion/vibration for depth sensing
JP6397698B2 (ja) * 2014-08-28 2018-09-26 任天堂株式会社 情報処理端末、情報処理プログラム、情報処理端末システム、および情報処理方法
US9507995B2 (en) * 2014-08-29 2016-11-29 X Development Llc Combination of stereo and structured-light processing
DE102014113389A1 (de) * 2014-09-17 2016-03-17 Pilz Gmbh & Co. Kg Verfahren und Vorrichtung zum Identifizieren von Strukturelementen eines projizierten Strukturmusters in Kamerabildern
EP3018587B1 (en) * 2014-11-05 2018-08-29 Renesas Electronics Europe GmbH Memory access unit
EP3043159B1 (en) * 2015-01-08 2019-12-18 ams AG Method for processing light sensor signals and light sensor system
CN111982023B (zh) * 2014-12-15 2022-06-14 索尼公司 图像捕捉装置组件、三维形状测量装置和运动检测装置
EP3040941B1 (en) * 2014-12-29 2017-08-02 Dassault Systèmes Method for calibrating a depth camera
US11562286B2 (en) * 2015-02-06 2023-01-24 Box, Inc. Method and system for implementing machine learning analysis of documents for classifying documents by associating label values to the documents
DE102015202182A1 (de) * 2015-02-06 2016-08-11 Siemens Aktiengesellschaft Vorrichtung und Verfahren zur sequentiellen, diffraktiven Musterprojektion
US9699394B2 (en) 2015-03-09 2017-07-04 Microsoft Technology Licensing, Llc Filter arrangement for image sensor
JP6484071B2 (ja) * 2015-03-10 2019-03-13 アルプスアルパイン株式会社 物体検出装置
CN106032059B (zh) * 2015-03-13 2019-11-26 三纬国际立体列印科技股份有限公司 立体打印方法与立体打印装置
KR102238794B1 (ko) * 2015-03-25 2021-04-09 한국전자통신연구원 영상 촬영 장치의 촬영 속도 증가 방법
DE112015006245B4 (de) 2015-03-30 2019-05-23 Fujifilm Corporation Abstandsbild-Erfassungsvorrichtung und Abstandsbild-Erfassungsverfahren
EP3081384B1 (en) * 2015-04-17 2019-11-13 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and program
WO2016172125A1 (en) 2015-04-19 2016-10-27 Pelican Imaging Corporation Multi-baseline camera array system architectures for depth augmentation in vr/ar applications
US9751263B2 (en) * 2015-04-20 2017-09-05 Xerox Corporation Injection molding to finish parts printed with a three-dimensional object printer
WO2016187344A1 (en) * 2015-05-18 2016-11-24 Lasermotive, Inc. Multi-layered safety system
US9683834B2 (en) * 2015-05-27 2017-06-20 Intel Corporation Adaptable depth sensing system
US9495584B1 (en) * 2015-06-05 2016-11-15 Digital Signal Corporation System and method for facial recognition using images captured from a target illuminated with infrared light
US11054664B2 (en) * 2015-06-18 2021-07-06 Apple Inc. Monitoring DOE performance using software scene evaluation
US9824278B2 (en) * 2015-06-24 2017-11-21 Netflix, Inc. Determining native resolutions of video sequences
JP6816097B2 (ja) * 2015-07-13 2021-01-20 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 画像についての奥行きマップを決定するための方法及び装置
US10510149B2 (en) 2015-07-17 2019-12-17 ams Sensors Singapore Pte. Ltd Generating a distance map based on captured images of a scene
US10699476B2 (en) 2015-08-06 2020-06-30 Ams Sensors Singapore Pte. Ltd. Generating a merged, fused three-dimensional point cloud based on captured images of a scene
WO2017030507A1 (en) 2015-08-19 2017-02-23 Heptagon Micro Optics Pte. Ltd. Generating a disparity map having reduced over-smoothing
CN106550228B (zh) * 2015-09-16 2019-10-15 上海图檬信息科技有限公司 获取三维场景的深度图的设备
US20170116779A1 (en) * 2015-10-26 2017-04-27 Microsoft Technology Licensing, Llc Volumetric representation of objects
US10554956B2 (en) 2015-10-29 2020-02-04 Dell Products, Lp Depth masks for image segmentation for depth-based computational photography
US10021371B2 (en) 2015-11-24 2018-07-10 Dell Products, Lp Method and apparatus for gross-level user and input detection using similar or dissimilar camera pair
US9800795B2 (en) * 2015-12-21 2017-10-24 Intel Corporation Auto range control for active illumination depth camera
KR102323217B1 (ko) * 2015-12-21 2021-11-08 삼성전자주식회사 매크로 픽셀의 노이즈를 제어하는 뎁스 센서, 3차원 카메라 및 제어 방법
US10761497B2 (en) 2016-01-14 2020-09-01 Microsoft Technology Licensing, Llc Printing 3D objects with automatic dimensional accuracy compensation
CN106980630B (zh) * 2016-01-19 2020-03-10 菜鸟智能物流控股有限公司 一种数据旋转展示方法及装置
KR102658303B1 (ko) * 2016-02-18 2024-04-18 애플 인크. 인사이드-아웃 위치, 사용자 신체 및 환경 추적을 갖는 가상 및 혼합 현실을 위한 머리 장착 디스플레이
WO2017149932A1 (ja) * 2016-03-03 2017-09-08 ソニー株式会社 医療用画像処理装置、システム、方法及びプログラム
DE102016106121A1 (de) 2016-04-04 2017-10-05 Carl Zeiss Ag Verfahren und Vorrichtung zum Bestimmen von Parametern zur Brillenanpassung
WO2017193013A1 (en) * 2016-05-06 2017-11-09 Zhang, Yunbo Determining manufacturable models
WO2017212509A1 (ja) * 2016-06-08 2017-12-14 パナソニックIpマネジメント株式会社 投影システム
US10659764B2 (en) 2016-06-20 2020-05-19 Intel Corporation Depth image provision apparatus and method
US10609359B2 (en) * 2016-06-22 2020-03-31 Intel Corporation Depth image provision apparatus and method
US10638060B2 (en) * 2016-06-28 2020-04-28 Intel Corporation Color correction of RGBIR sensor stream based on resolution recovery of RGB and IR channels
CN106210568A (zh) * 2016-07-15 2016-12-07 深圳奥比中光科技有限公司 图像处理方法以及装置
US10241244B2 (en) 2016-07-29 2019-03-26 Lumentum Operations Llc Thin film total internal reflection diffraction grating for single polarization or dual polarization
CN106204414A (zh) * 2016-08-05 2016-12-07 蓝普金睛(北京)科技有限公司 一种动态图像缓存的方法及系统
US10192311B2 (en) * 2016-08-05 2019-01-29 Qualcomm Incorporated Methods and apparatus for codeword boundary detection for generating depth maps
CN106375740B (zh) * 2016-09-28 2018-02-06 华为技术有限公司 生成rgb图像的方法、装置和系统
CN106447588A (zh) * 2016-09-30 2017-02-22 天津大学 菲涅耳变换域混沌双随机相位编码光学图像加密方法
JP6645394B2 (ja) * 2016-10-03 2020-02-14 株式会社デンソー 画像センサ
WO2018169587A2 (en) 2016-12-16 2018-09-20 Massachusetts Institute Of Technology Adaptive material deposition for additive manufacturing
JP7320352B2 (ja) * 2016-12-28 2023-08-03 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元モデル送信方法、三次元モデル受信方法、三次元モデル送信装置及び三次元モデル受信装置
US10372974B2 (en) * 2017-01-11 2019-08-06 Microsoft Technology Licensing, Llc 3D imaging recognition by stereo matching of RGB and infrared images
CN108399633A (zh) * 2017-02-06 2018-08-14 罗伯团队家居有限公司 用于立体视觉的方法和装置
CN106908391A (zh) * 2017-02-10 2017-06-30 广东欧珀移动通信有限公司 终端中盖板玻璃颜色识别方法和装置
CN106909320B (zh) * 2017-02-20 2020-01-21 北京中科睿芯科技有限公司 一种多维数据扩充传输的方法、装置以及系统
US10827129B2 (en) * 2017-02-24 2020-11-03 Sony Corporation Image processing apparatus and imaging apparatus
US10955814B2 (en) 2017-04-24 2021-03-23 Autodesk, Inc. Closed-loop robotic deposition of material
US11181886B2 (en) * 2017-04-24 2021-11-23 Autodesk, Inc. Closed-loop robotic deposition of material
CN107084686B (zh) * 2017-04-26 2019-04-30 西安交通大学 一种无运动部件的动态多光刀扫描测量方法
EP3631757B1 (en) * 2017-05-31 2024-01-03 Hewlett-Packard Development Company, L.P. Deriving topology information of a scene
US20180347967A1 (en) * 2017-06-01 2018-12-06 RGBDsense Information Technology Ltd. Method and apparatus for generating a random coding pattern for coding structured light
US10817493B2 (en) 2017-07-07 2020-10-27 Raytheon Company Data interpolation
KR102346031B1 (ko) 2017-07-25 2022-01-03 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
KR102402477B1 (ko) * 2017-08-04 2022-05-27 엘지이노텍 주식회사 ToF 모듈
US10586342B2 (en) * 2017-08-31 2020-03-10 Facebook Technologies, Llc Shifting diffractive optical element for adjustable depth sensing resolution
US20190072771A1 (en) * 2017-09-05 2019-03-07 Facebook Technologies, Llc Depth measurement using multiple pulsed structured light projectors
US10962790B2 (en) 2017-09-05 2021-03-30 Facebook Technologies, Llc Depth measurement using a pulsed structured light projector
DE102017215850B4 (de) 2017-09-08 2019-12-24 Robert Bosch Gmbh Verfahren zur Herstellung eines diffraktiven optischen Elements, LIDAR-System mit einem diffraktiven optischen Element und Kraftfahrzeug mit einem LIDAR-System
CN107884066A (zh) * 2017-09-29 2018-04-06 深圳奥比中光科技有限公司 基于泛光功能的光传感器及其3d成像装置
US10545457B2 (en) 2017-12-05 2020-01-28 K Laser Technology, Inc. Optical projector with off-axis diffractive element and conjugate images
US10310281B1 (en) * 2017-12-05 2019-06-04 K Laser Technology, Inc. Optical projector with off-axis diffractive element
CN109889799B (zh) * 2017-12-06 2020-08-25 西安交通大学 基于rgbir摄像头的单目结构光深度感知方法及装置
US10628952B2 (en) 2017-12-11 2020-04-21 Google Llc Dual-band stereo depth sensing system
DE102017222708A1 (de) * 2017-12-14 2019-06-19 Conti Temic Microelectronic Gmbh 3D-Umfelderfassung mittels Projektor und Kameramodulen
WO2019116487A1 (ja) * 2017-12-14 2019-06-20 日本電気株式会社 画像処理装置、画像処理方法および画像処理プログラム
JP6939501B2 (ja) * 2017-12-15 2021-09-22 オムロン株式会社 画像処理システム、画像処理プログラム、および画像処理方法
CN108133494A (zh) * 2018-01-17 2018-06-08 南京华捷艾米软件科技有限公司 利用rgb-ir同时生成深度图和彩色图的系统和方法
DE102019000272B4 (de) 2018-01-19 2023-11-16 Cognex Corporation System zum bilden einer homogenisierten beleuchtungslinie, die als eine linie mit geringem speckle bildlich erfasst werden kann
US10317684B1 (en) 2018-01-24 2019-06-11 K Laser Technology, Inc. Optical projector with on axis hologram and multiple beam splitter
CN108319437B (zh) * 2018-02-28 2019-01-11 上海熙香艺享电子商务有限公司 内容大数据密集程度分析平台
CN108490632B (zh) * 2018-03-12 2020-01-10 Oppo广东移动通信有限公司 激光投射模组、深度相机和电子装置
JP2021518535A (ja) * 2018-03-20 2021-08-02 マジック アイ インコーポレイテッド 様々な密度の投影パターンを使用する距離測定
US10643341B2 (en) 2018-03-22 2020-05-05 Microsoft Technology Licensing, Llc Replicated dot maps for simplified depth computation using machine learning
US10565720B2 (en) 2018-03-27 2020-02-18 Microsoft Technology Licensing, Llc External IR illuminator enabling improved head tracking and surface reconstruction for virtual reality
US10771766B2 (en) * 2018-03-30 2020-09-08 Mediatek Inc. Method and apparatus for active stereo vision
CN108564613A (zh) * 2018-04-12 2018-09-21 维沃移动通信有限公司 一种深度数据获取方法及移动终端
WO2019226555A1 (en) * 2018-05-22 2019-11-28 NanoCore Technologies, Inc. Method and system for automated toolpath generation
US10878590B2 (en) * 2018-05-25 2020-12-29 Microsoft Technology Licensing, Llc Fusing disparity proposals in stereo matching
CN108917640A (zh) * 2018-06-06 2018-11-30 佛山科学技术学院 一种激光盲孔深度检测方法及其系统
CN112740666A (zh) 2018-07-19 2021-04-30 艾科缇弗外科公司 自动手术机器人视觉系统中多模态感测深度的系统和方法
US11067820B2 (en) * 2018-07-31 2021-07-20 Himax Technologies Limited Structured light projector and three-dimensional image sensing module
CN109102540B (zh) * 2018-08-16 2022-01-28 杭州电子科技大学 基于fpga的标记面积块下限分离分道方法
TWI676781B (zh) * 2018-08-17 2019-11-11 鑑微科技股份有限公司 三維掃描系統
US10761337B2 (en) * 2018-08-24 2020-09-01 Himax Technologies Limited Projecting apparatus for spreading non-diffracted light
JP6907277B2 (ja) 2018-08-30 2021-07-21 コグネックス・コーポレイション 歪みが低減された物体の3次元再構成を生成するための方法及び装置
US11039122B2 (en) * 2018-09-04 2021-06-15 Google Llc Dark flash photography with a stereo camera
US10791277B2 (en) * 2018-09-11 2020-09-29 Cognex Corporation Methods and apparatus for optimizing image acquisition of objects subject to illumination patterns
CN109146953B (zh) * 2018-09-11 2021-12-10 杭州电子科技大学 基于fpga的标记面积块上限分离分道方法
US20200082160A1 (en) * 2018-09-12 2020-03-12 Kneron (Taiwan) Co., Ltd. Face recognition module with artificial intelligence models
KR102562360B1 (ko) * 2018-10-05 2023-08-02 엘지이노텍 주식회사 깊이 정보를 획득하는 방법 및 카메라 모듈
CN109532021B (zh) * 2018-10-10 2020-08-25 浙江大学 基于结构光线性异常点的3d打印熔积缺陷逐层检测方法
US11480793B2 (en) * 2018-10-24 2022-10-25 Google Llc Systems, devices, and methods for aligning a lens in a laser projector
JP7146576B2 (ja) * 2018-10-29 2022-10-04 芝浦機械株式会社 積層造形装置、積層造形方法、及びプログラム
US11460931B2 (en) 2018-10-31 2022-10-04 Hewlett-Packard Development Company, L.P. Recovering perspective distortions
US11024037B2 (en) 2018-11-15 2021-06-01 Samsung Electronics Co., Ltd. Foreground-background-aware atrous multiscale network for disparity estimation
US10628968B1 (en) * 2018-12-05 2020-04-21 Toyota Research Institute, Inc. Systems and methods of calibrating a depth-IR image offset
CN109798838B (zh) * 2018-12-19 2020-10-27 西安交通大学 一种基于激光散斑投射的ToF深度传感器及其测距方法
CN109741386B (zh) * 2018-12-26 2020-07-31 豪威科技(武汉)有限公司 立体视觉系统的增强方法及立体视觉系统
US10917568B2 (en) * 2018-12-28 2021-02-09 Microsoft Technology Licensing, Llc Low-power surface reconstruction
US11333895B1 (en) 2019-01-11 2022-05-17 Facebook Technologies, Llc Systems and methods for structured light projector operational safety
JP7211835B2 (ja) * 2019-02-04 2023-01-24 i-PRO株式会社 撮像システムおよび同期制御方法
CN110087057B (zh) * 2019-03-11 2021-10-12 歌尔股份有限公司 一种投影仪的深度图像获取方法和装置
US20200292297A1 (en) * 2019-03-15 2020-09-17 Faro Technologies, Inc. Three-dimensional measurement device
KR20220021920A (ko) 2019-04-08 2022-02-22 액티브 서지컬, 인크. 의료 이미징을 위한 시스템 및 방법
US11039118B2 (en) 2019-04-17 2021-06-15 XRSpace CO., LTD. Interactive image processing system using infrared cameras
EP3731175A1 (en) * 2019-04-26 2020-10-28 XRSpace CO., LTD. Interactive image processing system using infrared cameras
CN110111390A (zh) * 2019-05-15 2019-08-09 湖南科技大学 基于双目视觉光流跟踪的薄壁件全向振动测量方法及系统
CN110012206A (zh) * 2019-05-24 2019-07-12 Oppo广东移动通信有限公司 图像获取方法、图像获取装置、电子设备和可读存储介质
CN110209363A (zh) * 2019-05-30 2019-09-06 大连理工大学 基于遗传算法的智能3d打印路径规划方法
WO2021035094A1 (en) 2019-08-21 2021-02-25 Activ Surgical, Inc. Systems and methods for medical imaging
CN110524874B (zh) * 2019-08-23 2022-03-08 源秩科技(上海)有限公司 光固化3d打印装置及其打印方法
MX2022003020A (es) 2019-09-17 2022-06-14 Boston Polarimetrics Inc Sistemas y metodos para modelado de superficie usando se?ales de polarizacion.
CN112559037B (zh) * 2019-09-25 2024-04-12 阿里巴巴集团控股有限公司 一种指令执行方法、单元、装置及系统
EP4042101A4 (en) 2019-10-07 2023-11-22 Boston Polarimetrics, Inc. SYSTEMS AND METHODS FOR DETECTING SURFACE NORMALS USING POLARIZATION
US11796829B1 (en) * 2019-10-31 2023-10-24 Meta Platforms Technologies, Llc In-field illuminator for eye depth sensing
US10890839B1 (en) * 2019-11-06 2021-01-12 Himax Technologies Limited Structured light imaging device
JP7329143B2 (ja) 2019-11-30 2023-08-17 ボストン ポーラリメトリックス,インコーポレイティド 偏光キューを用いた透明な物体のセグメンテーションのためのシステム及び方法
CN113009705A (zh) * 2019-12-19 2021-06-22 苏州苏大维格科技集团股份有限公司 一种消除零级衍射影响的结构光组件
US11132804B2 (en) * 2020-01-07 2021-09-28 Himax Technologies Limited Hybrid depth estimation system
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
CN115428028A (zh) 2020-01-30 2022-12-02 因思创新有限责任公司 用于合成用于在包括偏振图像的不同成像模态下训练统计模型的数据的系统和方法
CN113365035B (zh) * 2020-03-04 2022-10-21 合肥君正科技有限公司 一种图像色彩还原的校准系统
US11503266B2 (en) * 2020-03-06 2022-11-15 Samsung Electronics Co., Ltd. Super-resolution depth map generation for multi-camera or other environments
CN111678457B (zh) * 2020-05-08 2021-10-01 西安交通大学 一种OLED透明屏下ToF装置及测距方法
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
CN111787084A (zh) * 2020-06-23 2020-10-16 杭州数澜科技有限公司 一种圈选对象的方法和装置
KR20220033924A (ko) 2020-09-10 2022-03-17 삼성전자주식회사 증강 현실 장치 및 그 제어 방법
CN114268774A (zh) * 2020-09-16 2022-04-01 Oppo广东移动通信有限公司 图像采集方法、图像传感器、装置、设备以及存储介质
US11657529B2 (en) * 2020-10-12 2023-05-23 Black Sesame Technologies Inc. Multiple camera system with flash for depth map generation
DE102020133085A1 (de) 2020-12-11 2022-06-15 Dürr Assembly Products GmbH Verfahren zur Vermessung der Kotflügelkante eines Fahrzeugs in einem Prüfstand
CN112959661B (zh) * 2021-01-26 2024-02-02 深圳市创必得科技有限公司 Lcd光固化3d打印均光优化补偿方法及装置
EP4281289A1 (en) * 2021-01-29 2023-11-29 Essentium IPCO, LLC Contour smoothing for material extrusion three-dimensionally printed parts
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11636623B2 (en) * 2021-06-28 2023-04-25 Motional Ad Llc Systems and methods for camera alignment using pre-distorted targets
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
IL310484A (en) * 2021-08-06 2024-03-01 Ppg Ind Ohio Inc System and method for 3D printing on a non-planar surface
US11852439B2 (en) * 2021-11-24 2023-12-26 Wrap Technologies, Inc. Systems and methods for generating optical beam arrays
CN116800947A (zh) * 2022-03-16 2023-09-22 安霸国际有限合伙企业 用于大规模生产过程的快速rgb-ir校准验证
KR20230174621A (ko) * 2022-06-21 2023-12-28 삼성전자주식회사 깊이 맵 생성을 위한 전자 장치 및 그 동작 방법
US11972504B2 (en) * 2022-08-10 2024-04-30 Zhejiang Lab Method and system for overlapping sliding window segmentation of image based on FPGA
CN116448250A (zh) * 2023-06-14 2023-07-18 国网山西省电力公司超高压变电分公司 一种电力设备红外热成像辅助定位装置及辅助定位方法

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1414412A (zh) * 2002-10-09 2003-04-30 天津大学 投影结构光的产生方法及装置
CN1414420A (zh) * 2002-10-09 2003-04-30 天津大学 动态多分辨率的三维数字成像的方法及装置
US20040105580A1 (en) * 2002-11-22 2004-06-03 Hager Gregory D. Acquisition of three-dimensional images by an active stereo technique using locally unique patterns
CN1541483A (zh) * 2001-07-06 2004-10-27 �����͡��Կ��� 图像投影装置和方法
US20050279172A1 (en) * 2004-06-18 2005-12-22 Schreier Hubert W Visualization, measurement and analysis of vibrating objects
US20070009150A1 (en) * 2005-07-08 2007-01-11 Omron Corporation Method and apparatus for generating projecting pattern
US20070145273A1 (en) * 2005-12-22 2007-06-28 Chang Edward T High-sensitivity infrared color camera
JP4011039B2 (ja) * 2004-05-31 2007-11-21 三菱電機株式会社 撮像装置及び信号処理方法
CN101124514A (zh) * 2005-01-26 2008-02-13 讯宝科技公司 彩色图像投影设备和方法
US20080118143A1 (en) * 2006-11-21 2008-05-22 Mantis Vision Ltd. 3D Geometric Modeling And Motion Capture Using Both Single And Dual Imaging
CN101501442A (zh) * 2006-03-14 2009-08-05 普莱姆传感有限公司 三维传感的深度变化光场
CN101878409A (zh) * 2007-10-02 2010-11-03 双镜头公司 激光束图案投影仪
EP2295932A1 (en) * 2008-06-13 2011-03-16 Techno Dream 21 Co., Ltd. Image processing device, image processing method, and program
US20120242829A1 (en) * 2011-03-25 2012-09-27 Yunsup Shin Apparatus for obtaining 3-dimensional content
CN102760234A (zh) * 2011-04-14 2012-10-31 财团法人工业技术研究院 深度图像采集装置、系统及其方法

Family Cites Families (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3938102A (en) 1974-08-19 1976-02-10 International Business Machines Corporation Method and apparatus for accessing horizontal sequences and rectangular sub-arrays from an array stored in a modified word organized random access memory system
EP0085210A1 (en) 1982-01-29 1983-08-10 International Business Machines Corporation Image processing system
US5351152A (en) 1991-07-23 1994-09-27 The Board Of Governers Of Wayne State University Direct-view stereoscopic confocal microscope
US5471326A (en) 1993-04-30 1995-11-28 Northrop Grumman Corporation Holographic laser scanner and rangefinder
US5586200A (en) 1994-01-07 1996-12-17 Panasonic Technologies, Inc. Segmentation based image compression system
US5739906A (en) 1996-06-07 1998-04-14 The United States Of America As Represented By The Secretary Of Commerce Interferometric thickness variation test method for windows and silicon wafers using a diverging wavefront
US6105139A (en) 1998-06-03 2000-08-15 Nec Usa, Inc. Controller-based power management for low-power sequential circuits
TW495749B (en) 1998-08-03 2002-07-21 Matsushita Electric Ind Co Ltd Optical head
JP3450792B2 (ja) 1999-03-25 2003-09-29 キヤノン株式会社 奥行き画像計測装置及び方法、並びに複合現実感提示システム
US6751344B1 (en) 1999-05-28 2004-06-15 Champion Orthotic Investments, Inc. Enhanced projector system for machine vision
GB0008303D0 (en) 2000-04-06 2000-05-24 British Aerospace Measurement system and method
US6826299B2 (en) 2000-07-31 2004-11-30 Geodetic Services, Inc. Photogrammetric image correlation and measurement system and method
US6850872B1 (en) 2000-08-30 2005-02-01 Microsoft Corporation Facial image processing methods and systems
US7554737B2 (en) 2000-12-20 2009-06-30 Riake Corporation Illumination device and method using adaptable source and output format
US6895115B2 (en) 2001-04-23 2005-05-17 The United States Of America As Represented By The United States National Aeronautics And Space Administration Method for implementation of recursive hierarchical segmentation on parallel computers
JP4635392B2 (ja) 2001-08-09 2011-02-23 コニカミノルタホールディングス株式会社 3次元物体の表面形状モデリング装置、および、プログラム
US6940538B2 (en) 2001-08-29 2005-09-06 Sony Corporation Extracting a depth map from known camera and model tracking data
RU2237284C2 (ru) 2001-11-27 2004-09-27 Самсунг Электроникс Ко., Лтд. Способ генерирования структуры узлов, предназначенных для представления трехмерных объектов с использованием изображений с глубиной
US7762964B2 (en) 2001-12-10 2010-07-27 Candela Corporation Method and apparatus for improving safety during exposure to a monochromatic light source
JP4075418B2 (ja) 2002-03-15 2008-04-16 ソニー株式会社 画像処理装置及び画像処理方法、印刷物製造装置及び印刷物製造方法、並びに印刷物製造システム
US6771271B2 (en) 2002-06-13 2004-08-03 Analog Devices, Inc. Apparatus and method of processing image data
US7399220B2 (en) 2002-08-02 2008-07-15 Kriesel Marshall S Apparatus and methods for the volumetric and dimensional measurement of livestock
JP2004135209A (ja) 2002-10-15 2004-04-30 Hitachi Ltd 広視野高解像度映像の生成装置及び方法
GB2395261A (en) 2002-11-11 2004-05-19 Qinetiq Ltd Ranging apparatus
US7154157B2 (en) 2002-12-30 2006-12-26 Intel Corporation Stacked semiconductor radiation sensors having color component and infrared sensing capability
JP3938120B2 (ja) 2003-09-17 2007-06-27 ノーリツ鋼機株式会社 画像処理装置、方法、及びプログラム
FR2870621B1 (fr) 2004-05-21 2006-10-27 Inst Francais Du Petrole Methode pour generer un maillage hybride conforme en trois dimensions d'une formation heterogene traversee par une ou plusieurs discontinuites geometriques dans le but de realiser des simulations
US7315383B1 (en) * 2004-07-09 2008-01-01 Mohsen Abdollahi Scanning 3D measurement technique using structured lighting and high-speed CMOS imager
WO2006016303A2 (en) 2004-08-11 2006-02-16 Philips Intellectual Property & Standards Gmbh Stripe-based image data storage
WO2006025271A1 (ja) 2004-09-03 2006-03-09 Konica Minolta Opto, Inc. カップリングレンズ及び光ピックアップ装置
JP4883517B2 (ja) 2004-11-19 2012-02-22 学校法人福岡工業大学 三次元計測装置および三次元計測方法並びに三次元計測プログラム
US7719533B2 (en) 2004-11-24 2010-05-18 General Electric Company Graph extraction labelling and visualization
WO2006074310A2 (en) 2005-01-07 2006-07-13 Gesturetek, Inc. Creating 3d images of objects by illuminating with infrared patterns
JP4506501B2 (ja) 2005-02-21 2010-07-21 株式会社日立製作所 画像合成装置及び撮像システム
US7512262B2 (en) 2005-02-25 2009-03-31 Microsoft Corporation Stereo-based image processing
US7295771B2 (en) 2005-04-25 2007-11-13 Delphi Technologies, Inc. Method and apparatus for minimizing ambient illumination effects in a vision system
EP1934945A4 (en) 2005-10-11 2016-01-20 Apple Inc METHOD AND SYSTEM FOR RECONSTRUCTING AN OBJECT
US8390821B2 (en) 2005-10-11 2013-03-05 Primesense Ltd. Three-dimensional sensing using speckle patterns
US7821552B2 (en) 2005-12-27 2010-10-26 Sanyo Electric Co., Ltd. Imaging apparatus provided with imaging device having sensitivity in visible and infrared regions
JP4466569B2 (ja) 2006-01-10 2010-05-26 株式会社豊田中央研究所 カラー画像再生装置
DE102006007170B4 (de) 2006-02-08 2009-06-10 Sirona Dental Systems Gmbh Verfahren und Anordnung zur schnellen und robusten chromatisch konfokalen 3D-Messtechnik
US7970177B2 (en) 2006-03-23 2011-06-28 Tyzx, Inc. Enhancing stereo depth measurements with projected texture
GB0718706D0 (en) 2007-09-25 2007-11-07 Creative Physics Ltd Method and apparatus for reducing laser speckle
JP5248482B2 (ja) 2006-05-09 2013-07-31 シリコン ハイブ ビー・ヴィー プログラマブルデータ処理回路
JP5317206B2 (ja) 2006-09-21 2013-10-16 トムソン ライセンシング 3次元モデル取得のための方法及びシステム
US8077034B2 (en) * 2006-09-28 2011-12-13 Bea Sa Sensor for presence detection
US7616328B2 (en) 2006-11-07 2009-11-10 Rudolph Technologies, Inc. Method and system for providing a high definition triangulation system
EP2084491A2 (en) 2006-11-21 2009-08-05 Mantisvision Ltd. 3d geometric modeling and 3d video content creation
US8167999B2 (en) 2007-01-10 2012-05-01 3D Systems, Inc. Three-dimensional printing material system with improved color, article performance, and ease of use
US8326020B2 (en) 2007-02-28 2012-12-04 Sungkyunkwan University Foundation Structural light based depth imaging method and system using signal separation coding, and error correction thereof
US7683962B2 (en) 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
FR2914422B1 (fr) 2007-03-28 2009-07-03 Soitec Silicon On Insulator Procede de detection de defauts de surface d'un substrat et dispositif mettant en oeuvre ledit procede.
WO2008133957A1 (en) 2007-04-23 2008-11-06 California Institute Of Technology Single-lens, single-sensor 3-d imaging device with a central aperture for obtaining camera position
JP2008288629A (ja) * 2007-05-15 2008-11-27 Sony Corp 画像信号処理装置、撮像素子、および画像信号処理方法、並びにコンピュータ・プログラム
JP5018282B2 (ja) 2007-07-04 2012-09-05 マツダ株式会社 製品の3次元形状モデルデータ作成方法
WO2009018647A1 (en) 2007-08-08 2009-02-12 Tony Mayer Non-retro-reflective license plate imaging system
US7933056B2 (en) 2007-09-26 2011-04-26 Che-Chih Tsao Methods and systems of rapid focusing and zooming for volumetric 3D displays and cameras
US8446470B2 (en) * 2007-10-04 2013-05-21 Magna Electronics, Inc. Combined RGB and IR imaging sensor
IL191615A (en) 2007-10-23 2015-05-31 Israel Aerospace Ind Ltd A method and system for producing tie points for use in stereo adjustment of stereoscopic images and a method for identifying differences in the landscape taken between two time points
US8384997B2 (en) 2008-01-21 2013-02-26 Primesense Ltd Optical pattern projection
US7861193B2 (en) 2008-02-21 2010-12-28 Oracle America, Inc. Reuse of circuit labels for verification of circuit recognition
US7958468B2 (en) 2008-02-21 2011-06-07 Oracle America, Inc. Unidirectional relabeling for subcircuit recognition
US8788990B2 (en) 2008-02-21 2014-07-22 Oracle America, Inc. Reuse of circuit labels in subcircuit recognition
US8368753B2 (en) 2008-03-17 2013-02-05 Sony Computer Entertainment America Llc Controller with an integrated depth camera
BRPI0906187A2 (pt) 2008-03-18 2020-07-14 Novadaq Technologies Inc. método e sistema de representação de imagens para aquisição de imagens nir e imagens em cor total
US8405727B2 (en) * 2008-05-01 2013-03-26 Apple Inc. Apparatus and method for calibrating image capture devices
NZ567986A (en) 2008-05-02 2010-08-27 Auckland Uniservices Ltd Real-time stereo image matching system
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
JP4513905B2 (ja) 2008-06-27 2010-07-28 ソニー株式会社 信号処理装置、信号処理方法、プログラム及び記録媒体
KR101530930B1 (ko) 2008-08-19 2015-06-24 삼성전자주식회사 패턴투영장치, 이를 구비한 3차원 이미지 형성장치, 및 이에 사용되는 초점 가변 액체렌즈
US8442940B1 (en) 2008-11-18 2013-05-14 Semantic Research, Inc. Systems and methods for pairing of a semantic network and a natural language processing information extraction system
JP5430138B2 (ja) 2008-12-17 2014-02-26 株式会社トプコン 形状測定装置およびプログラム
CN101509764A (zh) 2009-02-27 2009-08-19 东南大学 一种快速获取物体三维形状的方法
DE102009001889A1 (de) 2009-03-26 2010-09-30 Robert Bosch Gmbh Lasermarkierung mit Koordinatensystem
US8823775B2 (en) 2009-04-30 2014-09-02 Board Of Regents, The University Of Texas System Body surface imaging
US9582889B2 (en) 2009-07-30 2017-02-28 Apple Inc. Depth mapping based on pattern matching and stereoscopic information
US8204904B2 (en) 2009-09-30 2012-06-19 Yahoo! Inc. Network graph evolution rule generation
KR101173668B1 (ko) 2009-10-27 2012-08-20 서울대학교산학협력단 다중 공간 주파수를 이용한 3차원 물체의 깊이 측정 방법 및 그 장치
US9047674B2 (en) 2009-11-03 2015-06-02 Samsung Electronics Co., Ltd. Structured grids and graph traversal for image processing
KR101377325B1 (ko) 2009-12-21 2014-03-25 한국전자통신연구원 스테레오 영상, 다시점 영상 및 깊이 영상 획득 카메라 장치 및 그 제어 방법
US20130278631A1 (en) 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
US20110222757A1 (en) 2010-03-10 2011-09-15 Gbo 3D Technology Pte. Ltd. Systems and methods for 2D image and spatial data capture for 3D stereo imaging
JP2011191221A (ja) 2010-03-16 2011-09-29 Sanyo Electric Co Ltd 物体検出装置および情報取得装置
US8619143B2 (en) 2010-03-19 2013-12-31 Pixim, Inc. Image sensor including color and infrared pixels
KR20110132260A (ko) 2010-05-29 2011-12-07 이문기 모니터 기반 증강현실 시스템
US8670029B2 (en) 2010-06-16 2014-03-11 Microsoft Corporation Depth camera illuminator with superluminescent light-emitting diode
EP2400261A1 (de) 2010-06-21 2011-12-28 Leica Geosystems AG Optisches Messverfahren und Messsystem zum Bestimmen von 3D-Koordinaten auf einer Messobjekt-Oberfläche
GB2481459B (en) 2010-06-25 2017-05-03 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E V Capturing a surface structure of an object surface
US8357899B2 (en) 2010-07-30 2013-01-22 Aptina Imaging Corporation Color correction circuitry and methods for dual-band imaging systems
US9036158B2 (en) * 2010-08-11 2015-05-19 Apple Inc. Pattern projector
DE102010039246A1 (de) 2010-08-12 2012-02-16 Robert Bosch Gmbh Verfahren zum Kalibrieren eines Messsystems und Vorrichtung zum Durchführen des Verfahrens
US20120056982A1 (en) 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
US8903119B2 (en) 2010-10-11 2014-12-02 Texas Instruments Incorporated Use of three-dimensional top-down views for business analytics
JP5787508B2 (ja) 2010-11-11 2015-09-30 キヤノン株式会社 回折光学素子及び光学系
US20120154397A1 (en) 2010-12-03 2012-06-21 Old Dominion University Research Foundation Method and system for generating mesh from images
KR101694292B1 (ko) 2010-12-17 2017-01-09 한국전자통신연구원 스테레오 영상 정합 장치 및 그 방법
CN102867328B (zh) 2011-01-27 2014-04-23 深圳泰山在线科技有限公司 一种物体表面重建的系统
US9247238B2 (en) 2011-01-31 2016-01-26 Microsoft Technology Licensing, Llc Reducing interference between multiple infra-red depth cameras
DE102011004663B4 (de) * 2011-02-24 2018-11-22 Robert Bosch Gmbh Vorrichtung zur Fahrzeugvermessung
KR101289595B1 (ko) 2011-02-28 2013-07-24 이경자 격자패턴투영장치
KR101792501B1 (ko) 2011-03-16 2017-11-21 한국전자통신연구원 특징기반의 스테레오 매칭 방법 및 장치
US8718748B2 (en) 2011-03-29 2014-05-06 Kaliber Imaging Inc. System and methods for monitoring and assessing mobility
WO2012137434A1 (ja) * 2011-04-07 2012-10-11 パナソニック株式会社 立体撮像装置
US8760499B2 (en) 2011-04-29 2014-06-24 Austin Russell Three-dimensional imager and projection device
WO2012151173A1 (en) 2011-05-02 2012-11-08 Faro Technologies, Inc. Three-dimensional scanner for hand-held phones
US9536312B2 (en) 2011-05-16 2017-01-03 Microsoft Corporation Depth reconstruction using plural depth capture units
US9245307B2 (en) * 2011-06-01 2016-01-26 Empire Technology Development Llc Structured light projection for motion detection in augmented reality
CN102831380A (zh) 2011-06-15 2012-12-19 康佳集团股份有限公司 一种基于深度图像感应的肢体动作识别方法及系统
US9530192B2 (en) 2011-06-30 2016-12-27 Kodak Alaris Inc. Method for determining stereo quality score and automatically improving the quality of stereo images
EP2748675B1 (en) 2011-07-29 2018-05-23 Hewlett-Packard Development Company, L.P. Projection capture system, programming and method
US8867825B2 (en) 2011-08-30 2014-10-21 Thompson Licensing Method and apparatus for determining a similarity or dissimilarity measure
AU2012307095B2 (en) 2011-09-07 2017-03-30 Commonwealth Scientific And Industrial Research Organisation System and method for three-dimensional surface imaging
US9285871B2 (en) 2011-09-30 2016-03-15 Microsoft Technology Licensing, Llc Personal audio/visual system for providing an adaptable augmented reality environment
US9248623B2 (en) 2011-10-14 2016-02-02 Makerbot Industries, Llc Grayscale rendering in 3D printing
US9098908B2 (en) 2011-10-21 2015-08-04 Microsoft Technology Licensing, Llc Generating a depth map
US20140098342A1 (en) 2011-11-04 2014-04-10 The General Hospital Corporation System and method for corneal irradiation
JP5910043B2 (ja) * 2011-12-02 2016-04-27 富士通株式会社 撮像装置、画像処理プログラム、画像処理方法、および画像処理装置
JP5898484B2 (ja) 2011-12-19 2016-04-06 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、およびプログラム
CN102572485B (zh) 2012-02-02 2015-04-22 北京大学 一种自适应加权立体匹配算法、立体显示采集装置及系统
US20130229396A1 (en) * 2012-03-05 2013-09-05 Kenneth J. Huebner Surface aware, object aware, and image aware handheld projector
JP5994715B2 (ja) 2012-04-10 2016-09-21 パナソニックIpマネジメント株式会社 計算機ホログラム型表示装置
KR20130120730A (ko) 2012-04-26 2013-11-05 한국전자통신연구원 변이 공간 영상의 처리 방법
US9514522B2 (en) 2012-08-24 2016-12-06 Microsoft Technology Licensing, Llc Depth data processing and compression
US9332243B2 (en) 2012-10-17 2016-05-03 DotProduct LLC Handheld portable optical scanner and method of using
US10674135B2 (en) 2012-10-17 2020-06-02 DotProduct LLC Handheld portable optical scanner and method of using
US9117267B2 (en) 2012-10-18 2015-08-25 Google Inc. Systems and methods for marking images for three-dimensional image generation
US20140120319A1 (en) 2012-11-01 2014-05-01 Benjamin E. Joseph 3d mapping using structured light and formation of custom surface contours
KR20140075163A (ko) 2012-12-11 2014-06-19 한국전자통신연구원 구조광 방식을 활용한 패턴 프로젝팅 방법 및 장치
US10049281B2 (en) 2012-11-12 2018-08-14 Shopperception, Inc. Methods and systems for measuring human interaction
US10386178B2 (en) 2012-11-29 2019-08-20 Philips Photonics Gmbh Laser device for projecting a structured light pattern onto a scene
DE202012104890U1 (de) 2012-12-14 2013-03-05 Faro Technologies, Inc. Vorrichtung zum optischen Abtasten und Vermessen einer Umgebung
US9298945B2 (en) 2012-12-26 2016-03-29 Elwha Llc Ad-hoc wireless sensor package
US9292927B2 (en) 2012-12-27 2016-03-22 Intel Corporation Adaptive support windows for stereoscopic image correlation
US9251590B2 (en) 2013-01-24 2016-02-02 Microsoft Technology Licensing, Llc Camera pose estimation for 3D reconstruction
US20140241612A1 (en) 2013-02-23 2014-08-28 Microsoft Corporation Real time stereo matching
US20140293011A1 (en) * 2013-03-28 2014-10-02 Phasica, LLC Scanner System for Determining the Three Dimensional Shape of an Object and Method for Using
US10268885B2 (en) 2013-04-15 2019-04-23 Microsoft Technology Licensing, Llc Extracting true color from a color and infrared sensor
US9191643B2 (en) 2013-04-15 2015-11-17 Microsoft Technology Licensing, Llc Mixing infrared and color component data point clouds
US20140320605A1 (en) 2013-04-25 2014-10-30 Philip Martin Johnson Compound structured light projection system for 3-D surface profiling
CN103308517B (zh) 2013-05-21 2015-09-30 谢绍鹏 中药颜色客观化方法及中药图像获取装置

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1541483A (zh) * 2001-07-06 2004-10-27 �����͡��Կ��� 图像投影装置和方法
CN1414420A (zh) * 2002-10-09 2003-04-30 天津大学 动态多分辨率的三维数字成像的方法及装置
CN1414412A (zh) * 2002-10-09 2003-04-30 天津大学 投影结构光的产生方法及装置
US20040105580A1 (en) * 2002-11-22 2004-06-03 Hager Gregory D. Acquisition of three-dimensional images by an active stereo technique using locally unique patterns
JP4011039B2 (ja) * 2004-05-31 2007-11-21 三菱電機株式会社 撮像装置及び信号処理方法
US20050279172A1 (en) * 2004-06-18 2005-12-22 Schreier Hubert W Visualization, measurement and analysis of vibrating objects
CN101124514A (zh) * 2005-01-26 2008-02-13 讯宝科技公司 彩色图像投影设备和方法
US20070009150A1 (en) * 2005-07-08 2007-01-11 Omron Corporation Method and apparatus for generating projecting pattern
US20070145273A1 (en) * 2005-12-22 2007-06-28 Chang Edward T High-sensitivity infrared color camera
CN101501442A (zh) * 2006-03-14 2009-08-05 普莱姆传感有限公司 三维传感的深度变化光场
US20080118143A1 (en) * 2006-11-21 2008-05-22 Mantis Vision Ltd. 3D Geometric Modeling And Motion Capture Using Both Single And Dual Imaging
CN101878409A (zh) * 2007-10-02 2010-11-03 双镜头公司 激光束图案投影仪
EP2295932A1 (en) * 2008-06-13 2011-03-16 Techno Dream 21 Co., Ltd. Image processing device, image processing method, and program
US20120242829A1 (en) * 2011-03-25 2012-09-27 Yunsup Shin Apparatus for obtaining 3-dimensional content
CN102760234A (zh) * 2011-04-14 2012-10-31 财团法人工业技术研究院 深度图像采集装置、系统及其方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112243485A (zh) * 2018-06-07 2021-01-19 拉迪莫公司 对三维表面的形貌建模
US11561088B2 (en) 2018-06-07 2023-01-24 Pibond Oy Modeling the topography of a three-dimensional surface
CN112243485B (zh) * 2018-06-07 2023-09-12 彼博股份有限公司 对三维表面的形貌建模
CN111246073A (zh) * 2020-03-23 2020-06-05 维沃移动通信有限公司 成像装置、方法及电子设备
CN111246073B (zh) * 2020-03-23 2022-03-25 维沃移动通信有限公司 成像装置、方法及电子设备

Also Published As

Publication number Publication date
CN105308650A (zh) 2016-02-03
US20140307047A1 (en) 2014-10-16
US9959465B2 (en) 2018-05-01
KR102207768B1 (ko) 2021-01-25
US20180260623A1 (en) 2018-09-13
EP2986931A1 (en) 2016-02-24
EP2987138A1 (en) 2016-02-24
CN105247859A (zh) 2016-01-13
CN105247859B (zh) 2019-11-29
EP2987138B1 (en) 2021-09-22
US10268885B2 (en) 2019-04-23
US20140307307A1 (en) 2014-10-16
US20140307058A1 (en) 2014-10-16
EP2986936A1 (en) 2016-02-24
BR112015025819A2 (pt) 2017-07-25
US20140307055A1 (en) 2014-10-16
EP2987323A1 (en) 2016-02-24
US9508003B2 (en) 2016-11-29
US10816331B2 (en) 2020-10-27
US20180218210A1 (en) 2018-08-02
WO2014172231A1 (en) 2014-10-23
KR102130187B1 (ko) 2020-07-03
US10928189B2 (en) 2021-02-23
US20140310496A1 (en) 2014-10-16
EP2987132A1 (en) 2016-02-24
US20180173947A1 (en) 2018-06-21
AU2014254219A1 (en) 2015-10-22
KR20150140838A (ko) 2015-12-16
EP2987132B1 (en) 2017-11-01
US20140307953A1 (en) 2014-10-16
EP2987320B1 (en) 2021-02-03
WO2014172227A1 (en) 2014-10-23
MX2015014577A (es) 2017-02-15
AU2014254219B2 (en) 2017-07-27
EP2986936B1 (en) 2020-08-26
US20140307098A1 (en) 2014-10-16
MX357307B (es) 2018-07-04
US20230332886A1 (en) 2023-10-19
CN105210112A (zh) 2015-12-30
CN105229411B (zh) 2019-09-03
BR112015025819A8 (pt) 2019-12-24
JP2016522889A (ja) 2016-08-04
WO2014172228A1 (en) 2014-10-23
EP2987320A1 (en) 2016-02-24
US9697424B2 (en) 2017-07-04
US9760770B2 (en) 2017-09-12
CN105143817A (zh) 2015-12-09
CN105230003A (zh) 2016-01-06
US20140309764A1 (en) 2014-10-16
US20150078672A1 (en) 2015-03-19
WO2014172276A1 (en) 2014-10-23
CN105230003B (zh) 2019-07-16
US9922249B2 (en) 2018-03-20
CN105210112B (zh) 2019-08-30
CN105308650B (zh) 2020-09-25
EP2986935B1 (en) 2021-03-31
US20140307057A1 (en) 2014-10-16
CN105143817B (zh) 2021-02-09
KR20150140841A (ko) 2015-12-16
WO2014172222A1 (en) 2014-10-23
CA2907895C (en) 2020-10-27
WO2014172221A1 (en) 2014-10-23
EP2986935A1 (en) 2016-02-24
EP3757510B1 (en) 2022-06-29
EP2987323B1 (en) 2020-10-21
CN105229696A (zh) 2016-01-06
EP3757510A1 (en) 2020-12-30
CN105229412B (zh) 2018-12-07
WO2014172223A1 (en) 2014-10-23
RU2015143654A (ru) 2017-04-28
US9928420B2 (en) 2018-03-27
CN105229411A (zh) 2016-01-06
US10929658B2 (en) 2021-02-23
EP2987131A1 (en) 2016-02-24
RU2663329C2 (ru) 2018-08-03
JP6469080B2 (ja) 2019-02-13
WO2014172229A1 (en) 2014-10-23
CA2907895A1 (en) 2014-10-23

Similar Documents

Publication Publication Date Title
CN105229412A (zh) 用于主动立体的强度调制光图案
Du et al. DepthLab: Real-time 3D interaction with depth maps for mobile augmented reality
CN102222329B (zh) 深度检测的光栅扫描
US9001226B1 (en) Capturing and relighting images using multiple devices
CN105264401B (zh) 用于tof系统的干扰减小
JP4883460B2 (ja) コンピュータプログラムとのインタフェース時に深さと方向の検出を可能とする方法およびシステム
CN103143167B (zh) 游戏控制器
CN100534158C (zh) 产生虚拟图像和真实图像的合成图像
CN104010706B (zh) 视频游戏的方向输入
US20160012640A1 (en) User-generated dynamic virtual worlds
CN105765631A (zh) 对跟踪和映射误差稳健的大规模表面重构
CN103748893B (zh) 照亮捕捉设备的视野以捕捉经照亮的图像的方法及系统
CN105393158A (zh) 共享的和私有的全息物体
IL302172B2 (en) Depth sensing techniques for virtual, augmented and mixed reality systems
US20120315965A1 (en) Locational Node Device
JP2020523691A (ja) 中心窩レンダリングシステムにおける、遅延ライティングの最適化、パーティクルの中心窩適応、及びシミュレーションモデル
US11508072B2 (en) Smart phones for motion capture
Sayyad et al. Panotrace: interactive 3d modeling of surround-view panoramic images in virtual reality
US20190325244A1 (en) System and method to enable creative playing on a computing device
Zhang et al. An efficient method for creating virtual spaces for virtual reality
RU2783218C1 (ru) Способ и система управления отображением виртуальных туров в многопользовательском режиме
CN113487662A (zh) 画面显示方法、装置、电子设备和存储介质
CN111679806A (zh) 播放控制方法、装置、电子设备及存储介质
Vieta et al. WaveScape: a practical robust display with a 3D gesture interface
Janis Interactive natural user interfaces

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant