CN108688654A - 枝叶检测训练系统和方法 - Google Patents
枝叶检测训练系统和方法 Download PDFInfo
- Publication number
- CN108688654A CN108688654A CN201810311912.9A CN201810311912A CN108688654A CN 108688654 A CN108688654 A CN 108688654A CN 201810311912 A CN201810311912 A CN 201810311912A CN 108688654 A CN108688654 A CN 108688654A
- Authority
- CN
- China
- Prior art keywords
- data
- roi
- branches
- leaves
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000012549 training Methods 0.000 title claims abstract description 46
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 32
- 238000010801 machine learning Methods 0.000 claims abstract description 31
- 238000001514 detection method Methods 0.000 claims abstract description 18
- 238000012360 testing method Methods 0.000 claims description 18
- 238000004891 communication Methods 0.000 claims description 11
- 238000013528 artificial neural network Methods 0.000 claims description 6
- 238000002604 ultrasonography Methods 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 2
- 238000003860 storage Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000006378 damage Effects 0.000 description 5
- 239000007787 solid Substances 0.000 description 5
- 230000004888 barrier function Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 244000025254 Cannabis sativa Species 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 241000196324 Embryophyta Species 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 208000014674 injury Diseases 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 241001504664 Crossocheilus latius Species 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 229910002056 binary alloy Inorganic materials 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 125000000524 functional group Chemical group 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000005036 potential barrier Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000003134 recirculating effect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000013403 standard screening design Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/862—Combination of radar systems with sonar systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/865—Combination of radar systems with lidar systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/867—Combination of radar systems with cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
- G01S15/931—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/411—Identification of targets based on measurements of radar reflectivity
- G01S7/412—Identification of targets based on measurements of radar reflectivity based on a comparison between measured values and known or stored values
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/417—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section involving the use of neural networks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/4802—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/13—Satellite images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/165—Anti-collision systems for passive traffic, e.g. including static obstacles, trees
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9323—Alternative operation using light waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9324—Alternative operation using ultrasonic waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9327—Sensor installation details
- G01S2013/93271—Sensor installation details in the front of the vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9327—Sensor installation details
- G01S2013/93272—Sensor installation details in the back of the vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/40—Means for monitoring or calibrating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N7/00—Computing arrangements based on specific mathematical models
- G06N7/01—Probabilistic graphical models, e.g. probabilistic networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Mathematical Physics (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Electromagnetism (AREA)
- Automation & Control Theory (AREA)
- Acoustics & Sound (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Business, Economics & Management (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Astronomy & Astrophysics (AREA)
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Train Traffic Observation, Control, And Security (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Abstract
本公开描述了示例枝叶检测训练系统和方法。在一个实施方式中,一种方法接收与多个车载传感器相关联的数据并且基于接收到的数据定义多个感兴趣区域(ROI)。该方法对每个ROI实施标记,此处标记对与ROI相关联的枝叶类型进行分类。枝叶检测训练系统基于ROI和相关的标记训练机器学习算法。
Description
技术领域
本公开涉及训练和测试枝叶检测系统(例如车辆使用的枝叶检测系统)的系统以及方法。
背景技术
机动车辆和其他车辆为商业、政府和私人实体提供了运输的重要部分。目前正在开发和部署自主车辆和驾驶辅助系统,以提供安全功能、减少所需的用户输入量甚至完全消除用户的参与。例如,一些驾驶辅助系统(例如碰撞避免系统)可以在人类驾驶时监视车辆的驾驶、位置和速度以及其他对象。当系统检测到即将发生撞击或碰撞时,碰撞避免系统可以介入并实施制动、转向车辆或执行其他避免或安全操纵。作为另一个示例,自主车辆可以在较少或没有用户输入的情况下驾驶、导航和/或停放车辆。由于障碍避免是自动驾驶或辅助驾驶的关键部分,因此正确检测和分类检测到的对象或表面是非常重要的。在某些情况下,如果检测到的障碍物是枝叶,则确定枝叶类型并预测由特定枝叶呈现给车辆的危险是很重要的。例如,大型树干比小型植物或灌木对车辆更危险。
发明内容
根据本发明,提供一种方法,该方法包含:
接收与多个车载传感器相关联的数据;
通过枝叶检测训练系统基于接收到的数据来定义多个感兴趣区域(Regions ofInterest,ROI);
对每个ROI实施标记,其中标记对与ROI相关联的枝叶类型进行分类;以及
通过枝叶检测训练系统基于ROI和相关的标记来训练机器学习算法。
根据本发明的一个实施例,其中多个车载传感器包括激光雷达传感器、雷达传感器、超声波传感器和摄像机中的至少一个。
根据本发明的一个实施例,该方法还包含预处理接收到的数据,其中接收到的数据的预处理包括以下中的至少一个:消除来自数据的噪声、执行数据的登记、地理参考数据以及消除异常值。
根据本发明的一个实施例,该方法还包含使用从安装到车辆的至少一个传感器接收到的实际数据在车辆中测试机器学习算法。
根据本发明的一个实施例,该方法还包含通过自动驾驶系统在车辆中实施机器学习算法,其中机器学习算法基于从安装到车辆的至少一个传感器接收到的数据对车辆附近的枝叶进行分类。
根据本发明的一个实施例,其中机器学习算法是深度神经网络。
根据本发明的一个实施例,其中实施于每个ROI的标记包括非植被、危险植被、非危险植被和未知植被中的一种。
根据本发明的一个实施例,其中与多个车载传感器相关联的接收到的数据包括计算机生成的图像数据、计算机生成的雷达数据、计算机生成的激光雷达数据以及计算机生成的超声数据中的至少一个。
根据本发明的一个实施例,其中与多个车载传感器相关联的接收到的数据包括在邻近车辆的不同位置处的不同类型的枝叶的随机生成。
根据本发明的一个实施例,其中与多个车载传感器相关联的接收到的数据包括虚拟数据。
根据本发明的一个实施例,该方法还包含将机器学习算法结合到车辆中的枝叶检测系统中。
根据本发明,提供一种方法,该方法包含:
接收与多个车载传感器相关联的数据;
预处理接收到的数据,其中接收到的数据的预处理包括以下中的至少一个:消除来自数据的噪声、执行数据的登记、地理参考数据以及消除异常值;
通过枝叶检测训练系统基于预处理的数据定义多个感兴趣区域(ROI);
对每个ROI实施标记,其中标记对与ROI相关联的枝叶类型进行分类;以及
通过枝叶检测训练系统基于ROI和相关的标记来训练机器学习算法。
根据本发明的一个实施例,其中多个车载传感器包括激光雷达传感器、雷达传感器、超声波传感器和摄像机中的至少一个。
根据本发明的一个实施例,该方法还包含使用从安装到车辆的至少一个传感器接收到的实际数据在车辆中测试机器学习算法。
根据本发明的一个实施例,其中实施于每个ROI的标记包括非植被、危险植被、非危险植被和未知植被中的一种。
根据本发明的一个实施例,其中机器学习算法是深度神经网络。
根据本发明,提供一种装置,该装置包含:
通信管理器,该通信管理器被配置为接收与多个车载传感器相关联的数据;
感兴趣区域模块,该感兴趣区域模块被配置为基于接收到的数据定义多个感兴趣区域(ROI);
数据标记模块,该数据标记模块被配置为对每个ROI进行标记,其中标记对与ROI相关联的枝叶类型进行分类;以及
训练管理器,该训练管理器被配置为基于ROI和相关的标记来训练机器学习算法。
根据本发明的一个实施例,该装置还包含测试模块,测试模块被配置为使用从安装到车辆的至少一个传感器接收到的实际数据在车辆中测试机器学习算法。
根据本发明的一个实施例,其中机器学习算法是深度神经网络。
根据本发明的一个实施例,其中实施于每个ROI的标记包括非植被、危险植被、非危险植被和未知植被中的一种。
附图说明
参考以下附图来描述本公开的非限制性和非穷举性实施例,其中除非另有说明,否则贯穿各附图的相同的附图标记指代相同的部分。
图1是示出车辆控制系统的实施例的框图;
图2是示出了枝叶检测训练系统的实施例的框图;
图3示出了具有安装到车辆的多个传感器的车辆的实施例;
图4示出了车辆附近的枝叶的示例视图;
图5示出了用于训练和测试枝叶检测系统的方法的实施例。
具体实施方式
在下面的公开中,参考形成其一部分的附图,并且其中通过图示的方式示出了其中可以实施本公开的具体实施方式。应该理解的是可以利用其他实施方式并且可以进行结构改变而不偏离本公开的范围。说明书中对“一个实施例”,“实施例”,“示例实施例”等的引用指示所描述的实施例可以包括特定特征、结构或特点,但是每个实施例可能不一定包括特定特征、结构或特点。而且,这样的短语不一定是指相同的实施例。此外,当结合实施例描述特定特征、结构或特点时,认为结合其它实施例影响这种特征、结构或特点是在本领域技术人员的知识范围内,无论是有没有明确描述。
本文公开的系统、设备和方法的实现可以包含或利用包括计算机硬件(诸如例如如本文所讨论的一个或多个处理器和系统存储器)的专用或通用计算机。在本公开的范围内的实施方式还可以包括用于携带或存储计算机可执行指令和/或数据结构的物理和其他计算机可读介质。这样的计算机可读介质可以是可以被通用或专用计算机系统访问的任何可用介质。存储计算机可执行指令的计算机可读介质是计算机存储介质(设备)。携带计算机可执行指令的计算机可读介质是传输介质。因此,作为示例而非限制,本公开的实现可以包含至少两种截然不同的计算机可读介质:计算机存储介质(设备)和传输介质。
计算机存储介质(设备)包括随机存取存储器(RAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、只读光盘驱动器(CD-ROM)、例如基于RAM的固态驱动器(solidstate drives,“SSDs”)、闪存、相变存储器(phase-change memory,“PCM”)、其他存储器类型、其他光盘存储器、磁盘存储器或其他磁性存储设备或可用于以计算机可执行指令或数据结构的形式存储期望的程序代码方法的任何其他介质,并且该任何其他介质可以通过通用或专用计算机访问。
这里公开的设备、系统和方法的实施可以通过计算机网络进行通信。“网络”被定义为能够在计算机系统和/或模块和/或其他电子设备之间传输电子数据的一个或多个数据链路。当信息通过网络或其他通信连接(硬连线、无线连接或者硬连线或无线连接的结合)传输或提供给计算机时,计算机将连接正确地视为传输媒介。传输介质可以包括网络和/或数据链路,网络和/或数据链路可以用于以计算机可执行指令或数据结构的形式携带期望的程序代码方法并且网络和/或数据链路可以由通用或专用计算机访问。上述的组合也应该包括在计算机可读介质的范围内。
计算机可执行指令包含例如当在处理器处执行时使通用计算机、专用计算机或专用处理设备执行特定功能或功能组的指令和数据。计算机可执行指令可以是例如二进制文件、诸如汇编语言的中间格式指令或者甚至是源代码。尽管以结构特征和/或方法动作专用的语言来描述主题,但应理解的是,所附权利要求中限定的主题不一定限于在此描述的所描述的特征或动作。相反,所描述的特征和行为被公开为实施权利要求的示例形式。
本领域技术人员将认识到的是本公开可以在具有许多类型的计算机系统配置的网络计算环境中实践,包括车内计算机、个人计算机、台式计算机、便携式计算机、消息处理器、手持设备、多处理器系统、基于微处理器或可编程消费性电子产品、网络PC(personalcomputer)、小型计算机、大型计算机、移动电话,PDA(personal digital assistant,掌上电脑)、平板电脑、寻呼机、路由器、交换机、各种存储设备等。本发明还可以在分布式系统环境中实施,其中本地和远程计算机系统都通过网络连接(通过硬连线数据链路、无线数据链路或通过硬连线和无线数据链路的组合)执行任务。在分布式系统环境中,程序模块可以位于本地和远程内存存储设备中。
此外,在适当的情况下,本文描述的功能可以在以下中的一个或多个中执行:硬件、软件、固件、数字部件或模拟部件。例如,一个或多个专用集成电路(ApplicationSpecific Integrated Circuit,ASIC)可以被编程以执行这里描述的一个或多个系统和过程。整个说明书和权利要求中使用了某些术语来指代特定的系统部件。如本领域技术人员将认识到的,部件可以用不同的名称来引用。本文不打算区分名称不同但功能相同的部件。
应该注意的是这里讨论的传感器实施例可以包含计算机硬件、软件、固件或其任何组合以执行其功能的至少一部分。例如,传感器可以包括被配置为在一个或多个处理器中执行的计算机代码,并且可以包括由计算机代码控制的硬件逻辑/电路。这些示例设备在本文中被提供用于说明的目的,而不旨在限制。如相关领域的技术人员所知,本公开的实施例可以在其他类型的设备中实现。
本公开的至少一些实施例针对包含存储在任何计算机可用介质上的这种逻辑(例如,以软件的形式)的计算机程序产品。这种软件当在一个或多个数据处理设备中执行时使设备如本文所述进行操作。
图1是示出包括障碍物检测系统104的车辆内的车辆控制系统100的实施例的框图。自动驾驶/辅助系统102可以用于自动化或控制车辆的操作或向人类驾驶员提供帮助。例如,自动驾驶/辅助系统102可以控制车辆的制动、转向、安全带张力、加速度、灯光、警报、驾驶员通知、无线电、车辆锁或任何其他辅助系统中的一个或多个。在另一个示例中,自动驾驶/辅助系统102可能不能够提供驾驶的任何控制(例如,转向、加速或制动),但可以提供帮助人类驾驶员安全驾驶的通知和警报。
车辆控制系统100包括障碍物检测系统104,障碍物检测系统104与车辆控制系统中的各种部件相互作用以检测和响应位于车辆附近(例如,在车辆的路径中)的潜在(或可能)障碍物。在一个实施例中,障碍物检测系统104检测车辆附近(例如车辆前方或车辆后方)的枝叶。如本文所用,“枝叶”是指叶子、草、植物、花、矮树丛、灌木、树枝等。尽管障碍物检测系统104在图1中被示为单独的部件,但在替代实施例中,障碍物检测系统104可以结合到自动驾驶/辅助系统102或任何其他车辆部件中。
车辆控制系统100还包括用于检测附近对象(或障碍物)的存在或确定母车辆(例如,包括车辆控制系统100的车辆)的位置的一个或多个传感器系统/设备。例如,车辆控制系统100可以包括一个或多个雷达系统106、一个或多个激光雷达(LIDAR)系统108、一个或多个摄像机系统110、全球定位系统(Global Positioning System,GPS)112和/或超声系统114。一个或多个摄像机系统110可以包括安装到车辆(例如,车辆的后部)的后向摄像机、前向摄像机和侧向摄像机。摄像机系统110还可以包括捕捉车辆内乘客和其他对象的图像的一个或多个内部摄像机。车辆控制系统100可以包括用于存储用于导航和安全的相关或有用数据(例如地图数据、驾驶历史或其他数据)的数据存储器116。车辆控制系统100还可以包括用于与移动或无线网络、其他车辆、基础设施或任何其他通信系统进行无线通信的收发器118。
车辆控制系统100可以包括车辆控制致动器120,车辆控制致动器120控制车辆驾驶的各个方面(诸如电动马达、开关或其它致动器)以控制制动、加速、转向、安全带张紧、门锁等。车辆控制系统100还可以包括一个或多个显示器122、扬声器124或其他设备,以便可以给人类驾驶员或乘客提供通知。显示器122可以包括可以由车辆的驾驶员或乘客看到的抬头显示器、仪表板显示器或指示器、显示屏或任何其他视觉指示器。扬声器124可以包括车辆的音响系统的一个或多个扬声器,或者可以包括专用于驾驶员或乘客通知的扬声器。
应该理解的是图1的实施例仅作为示例给出。在不脱离本公开的范围的情况下,其它实施例可以包括更少或附加的部件。另外,所示部件可以被组合或被包括在其他部件中而没有限制。
在一个实施例中,自动驾驶/辅助系统102被配置为控制母车辆的驾驶或导航。例如,自动驾驶/辅助系统102可以控制车辆控制致动器120以在道路的路径上、停车场、车道或其他位置行驶。例如,自动驾驶/辅助系统102可以基于由部件106-118中的任何部件提供的信息或感知数据来确定路径。路径也可以基于操纵车辆的路线来确定,以避免或减轻与另一车辆或对象的潜在碰撞。传感器系统/设备106-110和114可以用于获得实时传感器数据,使得自动驾驶/辅助系统102可以实时帮助驾驶员或驾驶车辆。
图2是示出枝叶检测训练系统200的实施例的框图。如图2所示,枝叶检测训练系统200包括通信管理器202、处理器204和存储器206。通信管理器202允许枝叶检测训练系统200与其他系统(诸如自动驾驶/辅助系统102)和提供虚拟训练数据的数据源通信。如本文所讨论的,处理器204执行实施由枝叶检测训练系统200提供的功能的各种指令。存储器206存储这些指令以及由处理器204和包含在枝叶检测训练系统200中的其他模块和部件使用的其他数据。
另外,枝叶检测训练系统200包括接收和管理与多个车辆传感器相关联的数据的车辆传感器数据管理器208。如本文所讨论的,接收到的数据可以包括来自一个或多个实际车辆的实际传感器数据。另外,接收到的数据可以包括为了训练和测试枝叶检测系统的目的而创建的虚拟数据。在一些实施例中,虚拟数据包括计算机生成的图像数据、计算机生成的雷达数据、计算机生成的激光雷达数据或计算机生成的超声数据。车辆传感器数据管理器208还可以识别和管理接收到的数据内的对象级别数据或原始级别数据。感兴趣区域模块210从接收到的数据中识别一个或多个感兴趣区域(ROI)。数据标记模块212帮助标记每个ROI并存储与每个ROI相关联的标记有关的数据。如本文所讨论的,可以标记每个ROI以对存在于ROI中的枝叶的类型(如果有的话)分类。例如,数据可以被归类为非植被、危险植被、非危险植被或未知植被。
枝叶检测训练系统200还包括允许一个或多个用户与枝叶检测训练系统200交互的用户界面模块214。例如,一个或多个用户可以辅助标记每个ROI。训练管理器216辅助机器学习算法218(例如深度神经网络、卷积神经网络、深度置信网络、循环网络等)的训练。测试模块220对机器学习算法218执行各种测试以确定机器学习算法218在车辆传感器数据中检测枝叶的准确性和一致性。
图3示出了具有安装到车辆的多个传感器的车辆302的实施例。车辆302包括任何数量的传感器,诸如本文讨论的各种类型的传感器。在图3的具体示例中,车辆302包括激光雷达传感器304和310、前向摄像头306、后向摄像头312以及雷达传感器308和314。车辆302可以具有安装在多个车辆位置中的任何数量的附加传感器(未示出)。例如,车辆302的特定实施例还可以包括其他类型的传感器,例如超声波传感器。在图3的示例中,传感器304-314安装在车辆302的前部和后部附近。在替代实施例中,可以将任何数量的传感器安装在车辆的不同位置,例如在车辆的侧面、车辆的车顶或任何其他安装位置。
图4示出了车辆附近的区域400的示例视图,该区域400包含可使用本文所述类型的一个或多个车载传感器来检测的枝叶。区域400包括可由车辆的传感器检测的固体对象和枝叶。具体而言,枝叶包括矮树丛402,草404和其他灌木406。在一些情况下,车辆接触或碾过枝叶是可接受的,因为对车辆或人员的损害可能较少。区域400中示出的固体对象包括路缘408和杆410,路缘408和杆410可以导致对车辆、乘客或对象本身的损害或伤害。如本文所讨论的,可以捕获或生成传感器数据(例如,虚拟数据),该数据模拟区域400中示出的固体对象和/或枝叶的至少一部分。该捕获或生成的传感器数据如下面更详细讨论的用于训练和测试枝叶检测系统。在一些实施例中,所生成的传感器数据包括在车辆附近的随机位置中的枝叶物品的随机类型。
图5示出了用于训练和测试枝叶检测系统的方法500的实施例。最初,枝叶检测训练系统(例如,枝叶检测训练系统200)接收502与多个车辆传感器(例如激光雷达(LIDAR)传感器、雷达传感器、超声波传感器或摄像机)相关联的数据。接收到的数据可以是安装在实际车辆上的由传感器捕获的实际数据。或者,接收到的数据可以是已经产生的用于模拟传感器输出数据来用于训练和测试枝叶检测系统的虚拟数据。接收到的数据可以被称为“训练数据”,例如用于训练和测试枝叶检测系统。在一些实施例中,方法500预处理接收到的数据以消除噪声、记录来自不同传感器的数据、执行地理参考等。
枝叶检测训练系统定义504预处理的数据,诸如已经去噪、地理参考并且没有异常值的数据。在一些实施例中,数据的预处理包括以下中的一个或多个:从每个感测模态(例如,每个实际或模拟车辆传感器)接收数据、分析数据以消除(或减少)噪声、对数据执行记录、地理参考数据、消除异常值等。这个数据表示例如图4所示的示例视图的至少一部分。随着枝叶检测训练系统从预处理数据中识别506一个或多个感兴趣区域(ROI),方法500继续。ROI可以包括一个或多个枝叶物品或代表车辆潜在障碍物的其他对象。在一些实施例中,使用已知的聚类和/或数据分段技术来识别对象和相关的ROI。在一些实施例中,可以使用诸如分层、基于密度、子空间等的聚类方法来获得ROI。另外,可以使用诸如基于直方图、区域生长、马尔可夫随机场(Markov Random field)等的方法的分割方法来获得ROI。ROI的使用有助于降低分析数据的计算成本,因为计算仅限于可能包含枝叶物品或其他对象的特定ROI。
枝叶检测训练系统然后标记508每个ROI。标记每个ROI包括将每个枝叶对象分类为:危险植被、非危险植被、未知植被或非植被。危险植被分类器对应于如果发生碰撞时枝叶(或植被)可能对车辆造成即时伤害的情况。危险植被的一个示例是大树干。非危险植被分类器对应于即使车辆与植被碰撞植被也不太可能对车辆的完整性造成任何伤害的情况。非危险植被的示例包括草和小矮树丛。未知植被分类器对应于难以评估对车辆伤害程度的情况。未知植被的示例包括茂密的树枝或高大且茂密的矮树丛。非植被分类器对应于不是植被或枝叶的所有物品或对象,例如行人、杆、墙壁、路缘等。在一些实施例中,标记每个ROI由人类用户执行。在其他实施例中,标记每个ROI由计算系统自动执行或由具有人类用户验证的计算系统执行。
随着枝叶检测训练系统使用来自每个ROI和对应标记的数据训练510机器学习算法,方法500继续。在一些实施例中,机器学习算法是深度神经网络、卷积神经网络、深度置信网络、递归网络、自动编码器或任何其他机器学习算法。如上所述,所得到的机器学习算法在分类枝叶物品中是有用的。
机器学习算法在实际车辆中被测试512以基于从一个或多个车辆传感器接收到的数据来识别和分类枝叶。在一些实施例中,机器学习算法的测试包括确认机器学习算法是否准确识别所有枝叶物品并且准确地分类枝叶物品的用户输入。
如果测试不成功514,则该方法返回到502并且继续接收用于进一步训练机器学习算法的附加数据。如果测试成功514,则在一个或多个生产车辆中实施516机器学习算法。例如,机器学习算法可以被结合到车辆中的枝叶检测系统或障碍物检测系统中。基于所识别的枝叶物品及其相关分类,自动驾驶/辅助系统可以确定在车辆运行期间遇到(或碾过)枝叶物品的潜在危险。
尽管在此描述了本公开的各种实施例,但应该理解的是它们仅作为示例呈现,而不是限制。对于相关领域的技术人员来说显而易见的是,在不脱离本公开的精神和范围的情况下,可以在其中进行形式和细节上的各种改变。因此,本公开的广度和范围不应被任何所描述的示例性实施例限制,而应仅根据下面的权利要求及其等同物来限定。这里的描述是为了说明和描述的目的而呈现的。这并不是穷尽性的或将本公开限制为所公开的确切形式。鉴于所公开的教导,许多修改和变化是可能的。此外,应该注意的是,可以以期望的任何组合来使用这里讨论的任何或全部替代实施方式,以形成本公开的另外的混合实现。
Claims (15)
1.一种方法,该方法包含:
接收与多个车载传感器相关联的数据;
通过枝叶检测训练系统基于所述接收到的数据来定义多个感兴趣区域(ROI);
对每个所述ROI实施标记,其中所述标记对与所述ROI相关联的枝叶类型进行分类;以及
通过所述枝叶检测训练系统基于所述ROI和相关的标记来训练机器学习算法。
2.根据权利要求1所述的方法,还包含预处理所述接收到的数据,其中所述接收到的数据的预处理包括以下中的至少一个:消除来自所述数据的噪声、执行所述数据的登记、地理参考所述数据以及消除异常值。
3.根据权利要求1所述的方法,还包含通过自动驾驶系统在车辆中实施所述机器学习算法,其中所述机器学习算法基于从安装到所述车辆的至少一个传感器接收到的数据对所述车辆附近的枝叶进行分类。
4.根据权利要求1所述的方法,其中与所述多个车载传感器相关联的所述接收到的数据包括计算机生成的图像数据、计算机生成的雷达数据、计算机生成的激光雷达数据以及计算机生成的超声数据中的至少一个。
5.根据权利要求1所述的方法,其中与所述多个车载传感器相关联的所述接收到的数据包括在邻近所述车辆的不同位置处的不同类型的枝叶的随机生成。
6.根据权利要求1所述的方法,其中与所述多个车载传感器相关联的所述接收到的数据包括虚拟数据。
7.根据权利要求1所述的方法,还包含将所述机器学习算法结合到车辆中的枝叶检测系统中。
8.一种方法,该方法包含:
接收与多个车载传感器相关联的数据;
预处理所述接收到的数据,其中所述接收到的数据的预处理包括以下中的至少一个:消除来自所述数据的噪声、执行所述数据的登记、地理参考所述数据以及消除异常值;
通过枝叶检测训练系统基于所述预处理的数据定义多个感兴趣区域(ROI);
对每个所述ROI实施标记,其中所述标记对与ROI相关联的枝叶类型进行分类;以及
通过所述枝叶检测训练系统基于所述ROI和相关的标记来训练机器学习算法。
9.根据权利要求1或8所述的方法,其中所述多个车载传感器包括激光雷达传感器、雷达传感器、超声波传感器和摄像机中的至少一个。
10.根据权利要求1或8所述的方法,还包含使用从安装到车辆的至少一个传感器接收到的实际数据在所述车辆中测试所述机器学习算法。
11.根据权利要求1或8所述的方法,其中实施于每个所述ROI的所述标记包括非植被、危险植被、非危险植被和未知植被中的一种。
12.根据权利要求1或8所述的方法,其中所述机器学习算法是深度神经网络。
13.一种装置,该装置包含:
通信管理器,所述通信管理器被配置为接收与多个车载传感器相关联的数据;
感兴趣区域模块,所述感兴趣区域模块被配置为基于所述接收到的数据定义多个感兴趣区域(ROI);
数据标记模块,所述数据标记模块被配置为对每个所述ROI进行标记,其中所述标记对与所述ROI相关联的枝叶类型进行分类;以及
训练管理器,所述训练管理器被配置为基于所述ROI和相关的标记来训练机器学习算法。
14.根据权利要求13所述的装置,还包含测试模块,所述测试模块被配置为使用从安装到车辆的至少一个传感器接收到的实际数据在所述车辆中测试所述机器学习算法。
15.根据权利要求13所述的装置,其中实施于每个所述ROI的所述标记包括非植被、危险植被、非危险植被和未知植被中的一种。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/486,099 | 2017-04-12 | ||
US15/486,099 US20180300620A1 (en) | 2017-04-12 | 2017-04-12 | Foliage Detection Training Systems And Methods |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108688654A true CN108688654A (zh) | 2018-10-23 |
Family
ID=62202764
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810311912.9A Withdrawn CN108688654A (zh) | 2017-04-12 | 2018-04-09 | 枝叶检测训练系统和方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20180300620A1 (zh) |
CN (1) | CN108688654A (zh) |
DE (1) | DE102018108361A1 (zh) |
GB (1) | GB2563137B (zh) |
MX (1) | MX2018004244A (zh) |
RU (1) | RU2018112646A (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10229363B2 (en) * | 2015-10-19 | 2019-03-12 | Ford Global Technologies, Llc | Probabilistic inference using weighted-integrals-and-sums-by-hashing for object tracking |
IT201700058505A1 (it) * | 2017-05-30 | 2018-11-30 | Volta Robots S R L | Metodo di controllo di un mezzo di lavorazione del terreno sulla base di elaborazioni d'immagini e relativo sistema |
US10551838B2 (en) * | 2017-08-08 | 2020-02-04 | Nio Usa, Inc. | Method and system for multiple sensor correlation diagnostic and sensor fusion/DNN monitor for autonomous driving application |
US11091162B2 (en) * | 2018-01-30 | 2021-08-17 | Toyota Motor Engineering & Manufacturing North America, Inc. | Fusion of front vehicle sensor data for detection and ranging of preceding objects |
US11022693B1 (en) * | 2018-08-03 | 2021-06-01 | GM Global Technology Operations LLC | Autonomous vehicle controlled based upon a lidar data segmentation system |
JP2022531092A (ja) | 2019-04-29 | 2022-07-06 | エヌビディア コーポレーション | 自律マシン・アプリケーションのための変換された現実世界センサ・データから現実的試験データをシミュレーションすること |
US11428550B2 (en) * | 2020-03-03 | 2022-08-30 | Waymo Llc | Sensor region of interest selection based on multisensor data |
US11919451B2 (en) * | 2022-02-28 | 2024-03-05 | Nissan North America, Inc. | Vehicle data display system |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016065071A1 (en) * | 2014-10-21 | 2016-04-28 | Tolo, Inc. | Remote detection of insect infestation |
US10150414B2 (en) * | 2016-07-08 | 2018-12-11 | Ford Global Technologies, Llc | Pedestrian detection when a vehicle is reversing |
-
2017
- 2017-04-12 US US15/486,099 patent/US20180300620A1/en not_active Abandoned
-
2018
- 2018-04-06 MX MX2018004244A patent/MX2018004244A/es unknown
- 2018-04-09 GB GB1805890.9A patent/GB2563137B/en not_active Expired - Fee Related
- 2018-04-09 CN CN201810311912.9A patent/CN108688654A/zh not_active Withdrawn
- 2018-04-09 DE DE102018108361.0A patent/DE102018108361A1/de not_active Withdrawn
- 2018-04-10 RU RU2018112646A patent/RU2018112646A/ru not_active Application Discontinuation
Also Published As
Publication number | Publication date |
---|---|
GB2563137A (en) | 2018-12-05 |
GB2563137B (en) | 2021-11-10 |
DE102018108361A1 (de) | 2018-10-18 |
MX2018004244A (es) | 2018-11-09 |
RU2018112646A (ru) | 2019-10-10 |
GB2563137A8 (en) | 2018-12-19 |
GB201805890D0 (en) | 2018-05-23 |
US20180300620A1 (en) | 2018-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108688654A (zh) | 枝叶检测训练系统和方法 | |
CN108334081A (zh) | 用于对象检测的循环深度卷积神经网络 | |
CN106980814A (zh) | 用显著性地图的行人检测 | |
CN108398686A (zh) | 龙卷风探测系统和方法 | |
CN107015559A (zh) | 使用散列加权积分和求和的目标跟踪的概率推理 | |
US10754344B2 (en) | Method and apparatus for road hazard detection | |
CN106980813A (zh) | 机器学习的注视生成 | |
CN107545232A (zh) | 车道探测系统和方法 | |
CN108073893A (zh) | 使用距离数据检测植物 | |
CN106370162B (zh) | 动物种类判定装置 | |
CN108305478A (zh) | 用于避免与公共汽车发生干扰的系统和方法 | |
US10710599B2 (en) | System and method for online probabilistic change detection in feature-based maps | |
CN106339692B (zh) | 一种疲劳驾驶状态信息确定方法及系统 | |
CN113228040A (zh) | 多级对象行进方向估计 | |
CN112906515A (zh) | 车内异常行为识别方法、系统、电子设备及存储介质 | |
CN108263360A (zh) | 紧随场景下用于车辆控制的系统和方法 | |
CN108275152A (zh) | 紧随场景下用于车辆控制的系统和方法 | |
CN115470836A (zh) | 用于重新配置车辆内使用的机器学习模型的超声波系统和方法 | |
CN114968187A (zh) | 用于自动驾驶系统的感知系统开发的平台 | |
US11897501B2 (en) | ADS perception development | |
US11983918B2 (en) | Platform for perception system development for automated driving system | |
US11745766B2 (en) | Unseen environment classification | |
CN115470835A (zh) | 用于调谐在机器学习算法内使用的机器学习分类器的超声波系统和方法 | |
JP2022056153A (ja) | 一時停止検出装置、一時停止検出システム、及び一時停止検出プログラム | |
CN110032172A (zh) | 一种车辆驾驶控制系统精度检测方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20181023 |