CN114114182A - 利用机器学习增加和处理雷达数据 - Google Patents
利用机器学习增加和处理雷达数据 Download PDFInfo
- Publication number
- CN114114182A CN114114182A CN202110994293.XA CN202110994293A CN114114182A CN 114114182 A CN114114182 A CN 114114182A CN 202110994293 A CN202110994293 A CN 202110994293A CN 114114182 A CN114114182 A CN 114114182A
- Authority
- CN
- China
- Prior art keywords
- source
- target
- radar
- tensor
- reflection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/40—Means for monitoring or calibrating
- G01S7/4052—Means for monitoring or calibrating by simulation of echoes
- G01S7/4082—Means for monitoring or calibrating by simulation of echoes using externally generated reference signals, e.g. via remote reflector or transponder
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/06—Systems determining position data of a target
- G01S13/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/867—Combination of radar systems with cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/89—Radar or analogous systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/89—Radar or analogous systems specially adapted for specific applications for mapping or imaging
- G01S13/90—Radar or analogous systems specially adapted for specific applications for mapping or imaging using synthetic aperture techniques, e.g. synthetic aperture radar [SAR] techniques
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/414—Discriminating targets with respect to background clutter
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/417—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section involving the use of neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Theoretical Computer Science (AREA)
- Electromagnetism (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Radar Systems Or Details Thereof (AREA)
- Traffic Control Systems (AREA)
Abstract
用于将雷达系统的源配置的源雷达数据转换成雷达系统的目标配置的目标雷达数据的方法,包括步骤:为源反射位置的空间坐标提供网格单元的二维或更多维源阵列;为每个网格单元从所有源反射位置的空间坐标中确定针对一个或多个源反射位置位于网格单元中的概率和/或频率并且分配给相应网格单元;构成源张量,其至少包括以概率和/或频率占据的源阵列;将源张量变换成目标张量,其包括用于目标反射位置的空间坐标的网格单元的至少一个目标阵列,其中目标阵列为每个网格单元说明针对在利用目标配置观察场景时获得的目标反射位置位于相应网格单元中的概率和/或频率;根据在目标阵列中的概率和/或频率,对目标反射位置的空间坐标进行采样使得形成目标雷达数据。
Description
技术领域
本发明涉及从已经存在的雷达数据中产生真实雷达数据,以及完全一般性地涉及借助于机器学习处理雷达数据。
背景技术
为了使车辆能够在道路交通中至少部分自动地移动,需要检测车辆的环境并且如果面临与车辆的环境中的对象碰撞的危险,则引入对策。创建环境表示以及定位对于安全自动驾驶也是必要的。
借助于雷达检测对象与照明条件无关并且例如即使在夜间在较大的距离上也是可能的,而不通过远光灯使迎面车流目眩。此外,对象的距离和速度也直接由雷达数据得知。这些信息对于评价是否可能发生与对象的碰撞是重要的。然而,不能直接从雷达信号中识别出是哪种类型的对象。这种识别当前通过从数字信号处理中计算属性来解决。
经训练的机器学习模型、诸如神经网络,在这里尤其是对于对象识别可以做出主要贡献。为了训练这些模型,需要训练数据,经常根据试验行驶记载所述数据并且随后用在分别观察的场景中实际包含的对象进行注释(“标记”)。标记需要许多手动工作,并且因此是昂贵的。DE 10 2018 204 494 B3公开一种发生器,利用该发生器可以给给定的训练数据储备扩展合成雷达数据。
发明内容
在本发明的范围中,开发了一种用于将源雷达数据转换为目标雷达数据的方法。源雷达数据是通过利用雷达系统的源配置观察场景获得的雷达数据。目标雷达数据是在利用雷达系统的目标配置观察相同场景时应该预期的雷达数据。雷达系统的源配置以及目标配置均分别包括用于雷达辐射的至少一个发射器和接收器,并且附加地可以通过诸如发射器和/或接收器的设定之类的其他参数来表征。
在此,源配置可以与目标配置相同。在这种情况下,可以对用于雷达系统的配置的给定雷达数据储备扩展真实的合成雷达数据,正如这例如可以利用开头提到的发生器实现的那样。
然而,利用本方法,基于利用雷达系统的源配置记录的源雷达数据,也可以获得在利用相同或不同的雷达系统的完全不同的目标配置观察相同的场景时真实地应该预期的目标雷达数据。以这种方式,同一雷达数据储备例如可以作为训练数据被重新用于利用雷达系统的任意新目标配置进行对象识别,所述同一雷达数据储备可能也已经被标记。由此节省用于物理地记录其他雷达数据的巨大耗费。只要雷达系统由车辆携带,就尤其是例如可以大大降低用于执行其他试验行驶的附加耗费。
例如,在利用安装在车辆的特定部位处的雷达传感器已经执行了非常多的试验行驶的时间点,可以作出决定:将来可以将雷达传感器安置在车辆的另一部位处。由此改变雷达传感器的记录特性。尤其是,可观察的视野和视角发生变化。迄今,在先前试验行驶上记录的雷达数据不能再被用于基于从传感器的新位置记录的雷达数据来训练对象识别或其他评估。代替地,训练数据的记录必须再次从零开始。
迄今,将雷达传感器装入到其他制造商的车辆中也可能导致之前为训练目的记录的雷达数据不再可用。雷达传感器对每个最终客户不在视觉上显得引人注目,并且因此经常安装在车辆制造商的标志后面。在穿过这种标志时,雷达辐射被影响,并且如果用另一制造商的标志替换一个制造商的标志,这种影响发生变化。就此而论,在第一标志后面记录的雷达数据仅有条件地与记录在第二标志后面的雷达数据可比较。利用本方法,可以人工地产生这种信号变化,使得即使在用第二标志替换第一标志之后,也可以继续使用在第一标志后面记录的训练数据储备。
通常,源雷达数据或目标雷达数据至少包括源反射位置或目标反射位置的空间坐标,由所述源反射位置或目标反射位置反射的雷达辐射入射到雷达系统中。在该方法的范围中,现在首先为源反射位置的空间坐标提供网格单元的二维或更多维源阵列。为每个网格单元从所有源反射位置的空间坐标中确定针对一个或多个源反射位置位于网格单元中的概率和/或频率,并分配给相应的网格单元。构成源张量,所述源张量至少包括以概率和/或频率占据的源阵列。
为此,例如可以将1的占用概率分配给围绕源反射位置具有预给定半径的圆或球体。然后可以根据面积份额或体积份额将该占用概率分布到圆的面积或球体的体积分布到的源阵列的所有网格单元上。
已经认识到,利用雷达辐射的观察的特定物理特性导致雷达数据的不确定性。例如利用摄像机或利用激光雷达的光学观察使用与要成像的结构相比极其短波的辐射,并且因此提供非常清晰的图像。与此相比,雷达辐射是显著更长波的,使得辐射的波特性明显地显露出来,并且所测量的反射在很大程度上具有随机特性。
具体来说,这意味着雷达反射
•在时间上波动,即在相继的单测量中显现并且再次消失,以及
•在空间上波动,即在雷达辐射好像来自的位置的空间坐标中摆动和有噪声。
因此,周围环境的真正图像典型地只能经由大量的雷达测量作为平均值和/或单测量的叠加从雷达测量中获得。
因为该源张量包含表征雷达数据的概率分布的参量,所以这种不确定性在源张量中大部分地被抑制。因此,源张量基本上包含利用同样仅在空间上可变的、与时间无关的传递函数处理来自所观察的场景的空间信息的结果。
源张量现在被变换成目标张量,所述目标张量包括用于目标反射位置的空间坐标的网格单元的至少一个目标阵列。该目标阵列对于每个网格单元说明针对在利用目标配置观察场景时获得的目标反射位置位于相应的网格单元中的概率和/或频率。根据目标阵列中的概率和/或频率,对目标反射位置的空间坐标进行采样,使得形成目标雷达数据。
在开头提到的简单情况下,其中仅使用单个配置并且应该扩展对于该配置存在的雷达数据储备,源配置与目标配置相同,并且源张量相同地被采用为目标配置。然后从恰好根据原始雷达数据确定的概率分布中抽取新样本。
而如果源配置和目标配置不相同,则寻求的目标反射位置又经由空间上的与时间无关的传递函数与目标张量相关。源张量和目标张量之间的关系于是通过源配置和目标配置之间的差异引起,并且同样与时间无关。虽然如此,对于这种关系通常不存在封闭公式。然而,从源张量到目标张量的路径对于机器学习是可访问的。这意味着可以利用经训练的机器学习模型将源张量变换成目标张量。机器学习模型又可以利用与源配置相关的雷达数据和与目标配置相关的雷达数据被训练。
在此,相比于在具体应用中通常适用于转换成目标雷达数据的源雷达数据量,用于这样的训练所需要的训练数据量小。如果该源雷达数据量可供使用并且需要至少相同大小的目标雷达数据量,则因此用于获取训练数据和随后训练将源张量变换为目标张量并且从而最终从源雷达数据引导到目标雷达数据的机器学习模型的耗费明显低于用于直接在测量技术上获取所寻求的目标雷达数据的耗费。此外,也可以一再地使用机器学习模型来将其他雷达数据从源配置变换到目标配置。
如上所阐述的,源配置和目标配置尤其是例如可以至少如下不同,即
•两种配置包括不同的雷达传感器,和/或
•雷达传感器在两种配置中在空间上不同地布置,和/或
•在这两种配置中,通过布置在至少一个雷达传感器和所观察的场景之间的材料以不同的方式影响雷达辐射。
在这里介绍的方法因此具有以下效果:这种配置切换不使在切换之前已获取的雷达数据储备“无效”。代替地,可以仅仅获取针对这种切换特定地训练的机器学习模型,或者可以训练这样的模型。
相反,这意味着使先前获取的雷达数据“无效”不再是针对所力求的配置切换的重要论据。如果例如表明用于车辆的新雷达传感器提供具有比迄今为止使用的雷达传感器明显更好的质量的雷达数据,则迄今利用旧雷达传感器执行的所有试验行驶的重复同样地可能对于更换(Umstieg)是如此高的成本,使得更换归根结底不再是经济的。如果该成本强烈地被降低,则没有什么可以再阻碍更换。
在一个特别有利的扩展方案中,机器学习模型包括具有编码器和解码器的编码器-解码器装置,所述编码器将源张量映射到具有所降低维数的表示上,所述解码器将该表示映射到目标张量上。这样的装置可以被训练为使得编码器在将源张量压缩成所述表示时基本上忽略源配置的细节,并且获得关于所观察的场景的最重要的信息,所述信息很难被放入明确表达的条件中。然后解码器相反地将目标配置的细节添加到经压缩的表示,并且从而产生目标张量。
在另一特别有利的扩展方案中,机器学习模型包括生成对抗网络(GenerativeAdversarial Network)GAN的发生器。可以训练这样的发生器,用于从与源配置相关的源张量中产生目标张量,所述目标张量不能或很难与在与从源雷达数据中产生源张量相同的路径上从实际测量的目标雷达数据中产生的这样的目标张量相区别。这种训练可以与鉴别器协力地被执行,所述鉴别器被训练,用于将从源张量产生的目标张量与从实际测量的目标雷达数据产生的目标张量相区别。发生器和鉴别器一起构成GAN。如果在此涉及CycleGAN,则即使虽然许多利用源配置测量的源雷达数据和许多利用目标配置测量的目标雷达数据可供使用,但是由与相同的场景相关的源雷达数据和目标雷达数据组成的对不可供使用,也可以对其进行训练。
以先前描述的方式由源雷达数据构成源张量不仅适用于产生新的雷达数据,可以以与利用雷达系统的源配置或目标配置实际测量的雷达数据相同的方式使用所述新的雷达数据。更确切地,将源雷达数据表示为源张量中的概率和/或频率的分布通常是有利的,以便将源雷达数据的评估(诸如对象识别或向类的其他分配)与雷达反射的随机波动屏蔽开。
因此,本发明也涉及一种用于利用神经网络处理源雷达数据的方法,所述源雷达数据通过利用雷达系统的源配置观察场景而获得。源雷达数据至少包括源反射位置的空间坐标,由所述源反射位置反射的雷达辐射入射到雷达系统中。
在该方法情况下,为源反射位置的空间坐标提供网格单元的二维或更多维源阵列。为每个网格单元从所有源反射位置的空间坐标中确定针对一个或多个源反射位置位于网格单元中的概率和/或频率,并且分配给相应的网格单元。构成源张量,所述源张量至少包括以概率和/或频率占据的源阵列。该源张量被馈送给神经网络。
以这种方式,源雷达数据带有的不确定性不再影响由神经网络提供的结果。从而,首先记录源雷达数据、将这些源雷达数据处理成结果并且基于该结果例如操控车辆的总系统变得更可靠。
例如,源张量可以由神经网络映射到预给定分类的一个或多个类。这些类例如可以表示对象,源雷达数据指示所述对象的存在。然而,这些类也可以例如表示车辆所处于的交通状况,从所述车辆检测源雷达数据。
因此,尤其是例如可以从由神经网络提供的输出中为车辆构成操控信号,并且可以利用该操控信号来操控车辆。
与是否应该由源张量最终产生新的真实目标雷达数据或其他处理结果无关地,源张量和必要时目标张量可以分别包括从源雷达数据或从目标雷达数据中可推导的至少一个其他附加参量到源阵列或目标阵列的网格单元的分配。
附加参量尤其是可以例如包括
•在源雷达系统和源反射位置之间或在目标雷达系统和目标反射位置之间的间距,和/或
•雷达辐射入射到源雷达系统或目标雷达系统的角度,和/或
•反射雷达辐射的对象的速度,和/或
•反射雷达辐射的对象到预给定分类的一个或多个类的归属性,和/或
•所反射的雷达辐射的信号强度。
如果利用神经网络直接从源张量中确定处理结果,则可以例如使用附加参量的值,以便解决在识别对象时的多义性。如果例如附加参量之一说明特定源雷达反射属于的对象以特定的速度独立地移动,则该对象不可能是交通标志或类似的固定安装的对象。
如果从源张量中确定目标张量,并且从目标张量中又确定目标雷达数据,则可以与将源阵列变换到目标阵列一起也学习:在从源配置切换成目标配置时附加参量的值到网格单元的分配如何变化。
如果例如雷达传感器在目标配置中从与在源配置中不同的角度观看场景,则目标雷达数据提供关于与源雷达数据不同的对象速度分量的信息。例如,与雷达传感器在源配置中看到源反射位置所采取的角度相比,雷达传感器在目标配置中看到目标反射位置所采取的角度也发生了变化。
这可以尤其是例如被映射,其方式是在一个特别有利的扩展方案中,从附加参量的一个或多个值中针对目标阵列的一个或多个网格单元构成附加参量的新值并且在目标雷达数据中将其添写到目标反射位置,所述网格单元有助于对具体目标反射位置进行采样。
通常,源阵列与源张量中的附加参量的结合使继续使用机器学习模型变得容易,所述机器学习模型最初被设计用于处理图像。具有多个颜色通道的图像同样可以被表示为张量,所述张量具有与源张量非常相似的形式。
尤其是,这些方法可以完全或部分地是计算机实施的。因此,本发明也涉及一种具有机器可读指令的计算机程序,当所述指令在一个或多个计算机上被执行时,所述指令促使所述一个或多个计算机执行所描述的方法之一。在这个意义上,也可以将用于车辆的控制设备和用于同样能够执行机器可读指令的技术设备的嵌入式系统视为计算机。
同样,本发明也涉及机器可读数据载体和/或具有计算机程序的下载产品。下载产品是可以经由数据网络传输、即可以由数据网络的用户下载的数字产品,所述数字产品例如可以在在线商店中被出售用于立即下载。
此外,计算机可以配备有计算机程序、机器可读数据载体或下载产品。
附图说明
在下面与本发明的优选实施例的描述一起根据附图更详细地示出改善本发明的其他措施。
图1示出用于将源雷达数据3转换成目标雷达数据5的方法100的实施例;
图2示出观察具有雷达系统的不同配置2、4的车辆50的示例性情形;
图3示出用于利用神经网络7处理源雷达数据3的方法200的实施例。
具体实施方式
图1示出用于将源雷达数据3转换成目标雷达数据5的方法200的一种实施例的示意性流程图。源雷达数据3通过利用雷达系统的源配置2观察场景1而获得。目标雷达数据5是在利用雷达系统的目标配置4观察相同场景1时应该预期的雷达数据。
源雷达数据3至少包括源反射位置31的空间坐标,由所述源反射位置反射的雷达辐射入射到雷达系统上。在步骤110中,为这些空间坐标提供网格单元32a的二维或更多维源阵列32。在步骤120中,为每个网格单元32a从所有源反射位置31的空间坐标中确定针对一个或多个源反射位置31位于网格单元32a中的概率和/或频率32b并且分配给相应的网格单元32a。
为此,例如按照块121,可以将1的占用概率分配给围绕源反射位置31具有预给定半径的圆或球体。然后按照块122,可以根据面积份额或体积份额将该占用概率分布到圆的面积或球体的体积分布到的源阵列32的所有网格单元32a上。
在步骤130中,构成源张量33,所述源张量至少包括以概率和/或频率32b占据的源阵列32。源张量33除此之外例如还可以包括附加参量8的值,所述附加参量分别分配给源阵列32的网格单元32a。
源张量33在步骤140中被变换成目标张量53,所述目标张量包括用于目标反射位置51的空间坐标的网格单元52a的至少一个目标阵列52。该目标阵列52对于每个网格单元52a说明针对在利用目标配置4观察场景1时获得的目标反射位置51位于相应网格单元52a中的概率和/或频率52b。
如果源配置2与目标配置4相同,则为此目的例如按照块141可以采用与目标张量53相同的源张量33。
而如果目标配置4不同于源配置2,则源张量33可以例如按照块142将源张量33利用经训练的机器学习模型6变换成目标张量53。
在步骤150中,根据目标阵列52中的概率和/或频率52b对目标反射位置51的空间坐标进行采样,使得形成目标雷达数据5。在此情况下,尤其是按照块151,对于有助于对具体目标反射位置51进行采样的目标阵列52的一个或多个网格单元52a,可以由附加参量8的一个或多个值构成附加参量(8)的新值8'。然后可以按照块152将该新值8'添写给目标反射位置51。
图2示意性地阐明利用雷达系统的源配置2获得的场景1的源雷达数据3如何以及为什么不同于利用相同或不同的雷达系统的目标配置4在相同的场景1处获得的目标雷达数据5。
在图2中所示的示例中,场景1示出车辆50。利用包括发射器2a和接收器2b的源配置2,在源反射位置31处记录雷达反射,为清楚起见在图2中仅绘入所述源反射位置中的三个。而利用包括在另一空间位置处的发射器4a和接收器4b的目标配置4,在目标反射位置51处记录雷达反射,为了清楚起见在图2中仅绘入了所述目标反射位置中的三个。
图3是用于处理源雷达数据3的方法200的一种实施例的示意性流程图。该方法首先以与上述方法100类似的方式开始。
如在上述方法100中那样,源雷达数据3至少包括源反射位置31的空间坐标,由所述源反射位置反射的雷达辐射入射到雷达系统上。在步骤210中,为这些空间坐标提供网格单元32a的二维或更多维源阵列32。在步骤220中,为每个网格单元32a从所有源反射位置31的空间坐标中确定针对一个或多个源反射位置31位于网格单元32a中的概率和/或频率32b并且分配给相应的网格单元32a。
为此,例如按照块221,可以将1的占用概率分配给围绕源反射位置31具有预给定半径的圆或球体。然后按照块222,可以根据面积份额或体积份额将该占用概率分布到圆的面积或球体的体积分布到的源阵列32的所有网格单元32a上。
在步骤230中,构成源张量33,所述源张量至少包括以概率和/或频率32b占据的源阵列32。源张量33除此之外例如还可以包括附加参量8的值,所述附加参量分别分配给源阵列32的网格单元32a。
源张量33在步骤240中被馈送给神经网络7并且由该神经网络7处理成输出240a。在此,源张量7尤其是例如可以被映射到预给定分类的一个或多个类上。
在图3所示的示例中,在步骤250中,由输出240a为车辆50构成操控信号250a,并且在步骤260中,利用操控信号250a操控车辆50。
Claims (16)
1.一种用于将通过利用雷达系统的源配置(2)观察场景(1)获得的源雷达数据(3)转换成在利用雷达系统的目标配置(4)观察相同的场景(1)时应该预期的目标雷达数据(5)的方法(100),其中所述源雷达数据(3)或所述目标雷达数据(5)至少包括源反射位置(31)或目标反射位置(51)的空间坐标,由所述源反射位置或目标反射位置反射的雷达辐射入射到雷达系统中,并且其中所述方法(100)包括以下步骤:
·为所述源反射位置(31)的空间坐标提供(110)网格单元(32a)的二维或更多维源阵列(32);
•为每个网格单元(32a)从所有源反射位置(31)的空间坐标中确定针对一个或多个源反射位置(31)位于所述网格单元(32a)中的概率和/或频率(32b)并且分配(120)给相应的网格单元(32a);
·构成(130)源张量(33),所述源张量至少包括以概率和/或频率(32b)占据的源阵列(32);
·将所述源张量(33)变换(140)成目标张量(53),所述目标张量包括用于所述目标反射位置(51)的空间坐标的网格单元(52a)的至少一个目标阵列(52),其中所述目标阵列(52)为每个网格单元(52a)说明针对在利用目标配置(4)观察所述场景(1)时获得的目标反射位置(51)位于相应的网格单元(52a)中的概率和/或频率(52b);
•根据在所述目标阵列(52)中的概率和/或频率(52b),对目标反射位置(51)的空间坐标进行采样(150),使得形成所述目标雷达数据(5)。
2.根据权利要求1所述的方法(100),其中所述源配置(2)与所述目标配置(4)相同,并且其中所述源张量(33)与所述目标张量(53)相同地被采用(141)。
3.根据权利要求1所述的方法(100),其中所述源配置(2)不同于所述目标配置(4)并且其中所述源张量(33)利用经训练的机器学习模型(6)被变换(142)成所述目标张量(53)。
4.根据权利要求3所述的方法(100),其中所述源配置(2)与所述目标配置(4)至少有如下区别,即
•两种配置(2、4)包含不同的雷达传感器,和/或
•所述雷达传感器在两种配置(2、4)中在空间上不同地布置,和/或
•在两种配置(2、4)中,通过布置在至少一个雷达传感器和所观察的场景(1)之间的材料以不同方式影响雷达辐射。
5.根据权利要求3至4中任一项所述的方法(100),其中所述机器学习模型(6)包括具有编码器和解码器的编码器-解码器装置,所述编码器将所述源张量(33)映射到具有所降低的维数的表示上,所述解码器将所述表示映射到所示目标张量(53)上。
6.根据权利要求3至5中任一项所述的方法(100),其中所述机器学习模型包括生成对抗网络GAN的发生器。
7.一种用于利用神经网络(7)来处理通过利用雷达系统的源配置(2)观察场景(1)所获得的源雷达数据(3)的方法(200),其中所述源雷达数据(3)至少包括源反射位置(31)的空间坐标,由所述源反射位置反射的雷达辐射入射到所述雷达系统中,并且其中所述方法(200)包括以下步骤:
·为所述源反射位置(31)的空间坐标提供(210)网格单元(32a)的二维或更多维源阵列(32);
•为每个网格单元(32a)从所有源反射位置(31)的空间坐标中确定针对一个或多个源反射位置(31)位于网格单元(32a)中的概率和/或频率(32b)并且分配(220)给相应的网格单元(32a);
·构成(230)源张量(33),所述源张量至少包括以概率和/或频率(32b)占据的源阵列(32);
•将所述源张量(33)馈送(240)给所述神经网络(7)。
8.根据权利要求7所述的方法(200),其中所述源张量(33)由所述神经网络(7)映射(241)到预给定分类的一个或多个类上。
9.根据权利要求7至8中任一项所述的方法(200),其中从由所述神经网络(7)提供的输出(240a)中为车辆(50)构成(250)操控信号(250a)并且其中利用所述操控信号(250a)操控(260)所述车辆(50)。
10.根据权利要求1至9中任一项所述的方法(100、200),其中所述源张量(33)和必要时所述目标张量(53)分别包括从所述源雷达数据(3)或者从所述目标雷达数据(5)中可推导的至少一个其他附加参量(8)到所述源阵列(32)或所述目标阵列(52)的网格单元(32a、52a)的分配。
11.根据权利要求10所述的方法(200),其中为目标阵列(52)的有助于对具体目标反射位置(51)进行采样的一个或多个网格单元(52a)从所述附加参量(8)的一个或多个值中构成(151)所述附加参量(8)的新值(8')并且在所述目标雷达数据(5)中添写(152)所述目标反射位置(51)。
12.根据权利要求10至11中任一项所述的方法(100、200),其中所述附加参量(8)包括
•在所述源雷达系统和所述源反射位置(31)之间或在所述目标雷达系统和所述目标反射位置(51)之间的间距,和/或
•所述雷达辐射入射到所述源雷达系统或所述目标雷达系统所采取的角度,和/或
•反射所述雷达辐射的对象的速度,和/或
•反射所述雷达辐射的对象到预给定分类的一个或多个类的归属性,和/或
•所反射的雷达辐射的信号强度。
13.根据权利要求1至12中任一项所述的方法(100、200),其中给围绕所述源反射位置(31)具有预给定半径的圆或球体分配1的占用概率(121、221)并且其中根据面积份额或体积份额将所述占用概率分布(122、222)到所述源阵列(32)的所有网格单元(32a)上,其中圆的面积或球体的体积分布到所述网格单元上。
14.一种计算机程序,所述计算机程序包含机器可读指令,当所述机器可读指令在一个或多个计算机上被执行时,所述机器可读指令促使所述一个或多个计算机执行根据权利要求1至13中任一项所述的方法(100、200)。
15.一种具有根据权利要求13所述的计算机程序的机器可读数据载体和/或下载产品。
16.一种计算机,所述计算机配备有根据权利要求14所述的计算机程序和/或根据权利要求15所述的机器可读数据载体和/或下载产品。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020210887.0 | 2020-08-28 | ||
DE102020210887.0A DE102020210887B3 (de) | 2020-08-28 | 2020-08-28 | Vermehrung und Verarbeitung von Radardaten mit Machine Learning |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114114182A true CN114114182A (zh) | 2022-03-01 |
Family
ID=78605429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110994293.XA Pending CN114114182A (zh) | 2020-08-28 | 2021-08-27 | 利用机器学习增加和处理雷达数据 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11899131B2 (zh) |
JP (1) | JP2022040099A (zh) |
CN (1) | CN114114182A (zh) |
DE (1) | DE102020210887B3 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102022205574A1 (de) | 2022-06-01 | 2023-12-07 | Robert Bosch Gesellschaft mit beschränkter Haftung | Verfahren und Vorrichtung zum Bereitstellen von Trainingsdatensätzen für ein Klassifikationsmodell zur Objektidentifikation für ein Ultraschall-Sensorsystem in einer mobilen Einrichtung |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008063689A2 (en) * | 2006-04-11 | 2008-05-29 | Research Foundation Of The City University Of New York | Time-compressed clutter covariance signal processor |
US9887456B2 (en) * | 2014-02-19 | 2018-02-06 | Kymeta Corporation | Dynamic polarization and coupling control from a steerable cylindrically fed holographic antenna |
DE102016210534A1 (de) | 2016-06-14 | 2017-12-14 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zum Klassifizieren einer Umgebung eines Fahrzeugs |
EP3460516B1 (en) | 2017-09-20 | 2020-05-27 | Aptiv Technologies Limited | A device and a method for distinguishing between traversable and non-traversable objects |
DE102018204494B3 (de) | 2018-03-23 | 2019-08-14 | Robert Bosch Gmbh | Erzeugung synthetischer Radarsignale |
EP3690753A1 (en) | 2019-02-04 | 2020-08-05 | Elektrobit Automotive GmbH | Determination of the driving context of a vehicle |
-
2020
- 2020-08-28 DE DE102020210887.0A patent/DE102020210887B3/de active Active
-
2021
- 2021-08-02 US US17/391,307 patent/US11899131B2/en active Active
- 2021-08-27 JP JP2021139023A patent/JP2022040099A/ja active Pending
- 2021-08-27 CN CN202110994293.XA patent/CN114114182A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
DE102020210887B3 (de) | 2021-12-09 |
US20220065989A1 (en) | 2022-03-03 |
US11899131B2 (en) | 2024-02-13 |
JP2022040099A (ja) | 2022-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11867831B2 (en) | Generation of synthetic radar signals | |
JP7337931B2 (ja) | レーダによるまたは問合せ電磁放射線の使用によるオブジェクトの向きの決定 | |
CN112668603A (zh) | 产生识别传感器数据中的对象的识别模型用的训练数据的方法和设备、训练方法和操控方法 | |
CN110261856A (zh) | 一种基于多雷达协同探测的雷达探测方法及装置 | |
KR20200101424A (ko) | 물체의 적어도 하나의 파라미터를 결정하는 방법 및 장치 | |
US11797858B2 (en) | Translation of training data between observation modalities | |
CN111352111B (zh) | 对象的定位和/或分类 | |
KR102557620B1 (ko) | 객체를 분류하는 레이더 장치 및 방법 | |
US20180366000A1 (en) | Method for evaluating a hazardous situation which is sensed by at least one sensor of a vehicle, method for controlling reproduction of a hazard warning and method for reproducing a hazard warning | |
CN112444822A (zh) | 合成激光雷达信号的产生 | |
US20220215197A1 (en) | Data processing method and apparatus, chip system, and medium | |
CN112313665A (zh) | 对物理测量数据的更逼真的仿真 | |
CN114114182A (zh) | 利用机器学习增加和处理雷达数据 | |
US11585894B2 (en) | Processing of radar signals including suppression of motion artifacts | |
CN112990253A (zh) | 来自动态场景的雷达数据的更可靠分类 | |
CN109814076B (zh) | 用于测试检测器的性能的测试系统和方法 | |
Grimm et al. | Hypothesis test for the detection of moving targets in automotive radar | |
US20220099799A1 (en) | Transforming measured data between various configurations of measuring systems | |
US20200258379A1 (en) | Determination of movement information with surroundings sensors | |
CN116964472A (zh) | 用于借助于雷达传感器系统的反射信号来探测环境的至少一个对象的方法 | |
CN117152708A (zh) | 欺骗攻击检测方法、装置、设备及存储介质 | |
CN115965579A (zh) | 一种变电站巡检三维缺陷识别和定位的方法及系统 | |
JP2022048585A (ja) | Isar画像データ学習装置、目標類別装置及びレーダ装置 | |
JP2021156882A (ja) | 距離測定データの取得 | |
CN115035359A (zh) | 一种点云数据处理方法、训练数据处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |