CN113269165B - 数据获取方法及其装置 - Google Patents

数据获取方法及其装置 Download PDF

Info

Publication number
CN113269165B
CN113269165B CN202110807572.0A CN202110807572A CN113269165B CN 113269165 B CN113269165 B CN 113269165B CN 202110807572 A CN202110807572 A CN 202110807572A CN 113269165 B CN113269165 B CN 113269165B
Authority
CN
China
Prior art keywords
road
lane change
vehicle
original
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110807572.0A
Other languages
English (en)
Other versions
CN113269165A (zh
Inventor
李芹卜
朱磊
李成军
张海强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhidao Network Technology Beijing Co Ltd
Original Assignee
Zhidao Network Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhidao Network Technology Beijing Co Ltd filed Critical Zhidao Network Technology Beijing Co Ltd
Priority to CN202110807572.0A priority Critical patent/CN113269165B/zh
Publication of CN113269165A publication Critical patent/CN113269165A/zh
Application granted granted Critical
Publication of CN113269165B publication Critical patent/CN113269165B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本申请是关于一种数据获取方法及其装置,用于通过坐标变换获取车道变换场景下的变道模拟数据,降低变道模拟数据的采集难度,可以大量采集变道模拟数据,同时节约数据采集成本。该获取方法,包括:获取在直行状态下车辆周边的原始道路图像;根据车辆在车道变换过程中的位置,确定车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,道路元素是从原始道路图像中选取的;在原始道路图像中,将道路元素由原始像素坐标移动至目标像素坐标对应的位置,得到变道模拟图像,其中,原始像素坐标为道路元素在原始道路图像中的像素坐标;从变道模拟图像中提取相应的变道模拟数据,变道模拟数据用于对检测路面元素的神经网络模型进行数据训练。

Description

数据获取方法及其装置
技术领域
本申请涉及自动驾驶技术领域,尤其涉及一种数据获取方法及其装置。
背景技术
随着自动驾驶技术的不断发展,自动驾驶车辆的自主变道方法也得到了更多的关注,自动变道要求自动驾驶汽车在道路上自主选择行驶车道并进行变道操作,适当的变道决策可以更好地完成驾驶任务,还可以避免交通拥堵,提高通行效率,避免交通事故,保证道路安全。因此,自主变道已成为当前自动驾驶技术面临的重大问题。
在目前相关的自主变道技术中,在车道线、箭头、停止线、斑马线等路面元素感知任务中,会遇到车辆变道时刻,而这种时刻图片数据量占比很少并且采集较为困难,尤其是在高速、环路等车辆比较多或者车速比较快等场景下的数据采集,使得车辆对路面元素的感知能力弱。可见目前的自动驾驶汽车对变道数据的采集困难,可能会带来安全隐患。
发明内容
为克服相关技术中存在的问题,本申请提供一种数据获取方法及其装置,用于通过坐标变换获取车道变换场景下的变道模拟数据,降低变道模拟数据的采集难度,可以大量采集变道模拟数据,同时节约数据采集成本。
本申请第一方面提供了一种数据获取方法,包括:
在第一方面的一种可能的实现方式中,所述根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,包括:
确定所述道路元素的原始像素坐标;
将所述原始像素坐标转换为车体坐标系下对应的原始车体坐标,其中,所述车体坐标系是以所述车体为坐标原点的三维坐标系;
根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标车体坐标;
将所述目标车体坐标进行坐标转换得到所述目标像素坐标。
在第一方面的一种可能的实现方式中,所述方法还包括:根据所述车辆在车道变换过程中的位置确定所述车辆对应的偏移量和旋转角度;
根据所述偏移量和所述旋转角度,对所述车辆执行以下至少一项操作:旋转、偏移。
在第一方面的一种可能的实现方式中,所述原始道路图像包括在变道开始时刻车载摄像头采集到的图像,所述车载摄像头用于采集所述车辆前方的道路信息;
此种情况下,所述目标像素坐标是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的;所述变道模拟图像是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的。
在第一方面的一种可能的实现方式中,在所述获取在直行状态下车辆周边的原始道路图像之后,所述方法还包括:
对所述原始道路图像中的道路元素进行标注,得到带有标注的原始数据图像。
在第一方面的一种可能的实现方式中,所述从所述变道模拟图像中提取相应的变道模拟数据,包括:
根据所述变道模拟图像中被标注的道路元素提取所述变道模拟数据。
在第一方面的一种可能的实现方式中,所述道路元素包括:在所述车道变换过程中,所述原始道路图像中其位置或形状大小发生改变的以下至少一项:车道线、车道中心线、指示箭头、停止线、或人行横道线。
在第一方面的一种可能的实现方式中,所述变道模拟数据包括在车道变换过程中所述车辆周边的道路元素对应的数据。
本申请第二方面提供了一种数据获取装置,包括:获取模块、坐标确定模块、坐标转换模块和提取模块;
获取模块,用于获取在直行状态下车辆周边的原始道路图像;
坐标确定模块,用于根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,所述道路元素是从所述原始道路图像中选取的;
坐标转换模块,用于在所述原始道路图像中,将所述道路元素由原始像素坐标移动至所述目标像素坐标对应的位置,得到变道模拟图像,其中,所述原始像素坐标为所述道路元素在所述原始道路图像中的像素坐标;
提取模块,用于从所述变道模拟图像中提取相应的变道模拟数据,所述变道模拟数据用于对检测路面元素的神经网络模型进行数据训练。
本申请第三方面提供了一种数据获取装置,包括:处理器和存储器;所述存储器,用于存储可执行代码;
所述处理器,用于通过调用所述可执行代码,以执行如上述第一方面及其任意一种可能的实现方式中所述的数据获取方法。
本申请第四方面提供了一种非暂时性机器可读存储介质,其上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器执行如上第一方面及其任意一种可能的实现方式中所述的数据获取方法。
在本申请的技术方案中,根据车辆在车道变换过程中的位置,确定车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标;在原始道路图像中,将道路元素由原始像素坐标移动至目标像素坐标对应的位置,得到变道模拟图像;从变道模拟图像中提取相应的变道模拟数据。由于是通过坐标变换取车道变换场景下的变道模拟数据,因此,可以有效地降低变道场景数据的采集难度,可以大量采集变道模拟数据,同时节约数据采集成本。
进一步的,采集后的变道模拟数据包括车辆在车道变换过程中在不同位置对应的变道模拟图像,因此,其获取的变道模拟数据较为丰富,用于神经网络的数据训练,可以提升神经网络模型中模型参数的准确性,从而增强神经网络模型对路面元素的感知能力,最终可以提高自动驾驶或辅助驾驶的安全性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
通过结合附图对本申请示例性实施方式进行更详细的描述,本申请的上述以及其它目的、特征和优势将变得更加明显,其中,在本申请示例性实施方式中,相同的参考标号通常代表相同部件。
图1为本申请实施例中提供的一种网络架构图;
图2为本申请实施例中提供的数据获取方法的一个流程示意图;
图3为本申请实施例中提供的数据获取装置的一个结构示意图;
图4为本申请实施例中提供的数据获取装置的另一个结构示意图。
具体实施方式
下面将参照附图更详细地描述本申请的优选实施方式。虽然附图中显示了本申请的优选实施方式,然而应该理解,可以以各种形式实现本申请而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了使本申请更加透彻和完整,并且能够将本申请的范围完整地传达给本领域的技术人员。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语“第一”、“第二”、“第三”等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
本申请实施例提供的方案涉及人工智能的自动驾驶等技术,具体通过如下实施例进行说明:
图1是本申请实施例中提供的一种网络架构图。如图1所示,该网络架构可以包括业务服务器100以及终端设备,其中,上述终端设备的数量可以是两个或两个以上,如图1所示,具体可以包括终端设备10a、终端设备10b、……、终端设备10n。如图1所示,终端设备10a、终端设备10b、……、终端设备10n可以分别与上述业务服务器100进行网络连接,以便于每个终端设备可以通过该网络连接与业务服务器100进行数据交互,以便于上述业务服务器100可以接收到来自于每个终端设备的业务数据。
本申请中,每个终端设备均可以是车载终端或手机终端。终端设备配置在行驶的车辆上,每辆车辆上都可以配置终端设备,以便通过终端设备与业务服务器的数据交互,得到用于自动驾驶的控制命令,终端设备通过该控制命令控制车辆进行自动驾驶。需要说明的是,车载终端也可以称之为车机终端。
为了更好地理解本申请中车辆变道场景数据的获取方法,下面将结合附图对本申请实施例进行详细说明。
请参阅图2,图2为本申请实施例中提供的数据获取方法的一个流程示意图。
如图2所示,本申请实施例中数据获取方法的一个实施例,包括:
201、数据获取装置获取在直行状态下车辆周边的原始道路图像。
本申请实施例中,一方面,原始道路图像可以是通过车辆上的图像采集设备采集到的,该图像采集设备可以是车载摄像头。另一方面,原始道路图像可以是车辆前方的道路状况,也可以是车辆两侧或后侧的道路状况,对此本申请不做任何限制。
可选的,在本申请的一些可能的实施方式中,原始道路图像是在变道开始时刻车载摄像头采集到的图像,其中,车载摄像头用于采集车辆前方的道路信息,道路信息等同于上述的道路状况。
直行状态即是车辆沿着某一车道向前行驶;原始道路图像中的道路状况可以是驾驶场景数据,其中,驾驶场景数据是车辆在行驶过程中的路面元素和车辆自身的灯光状态、行驶速度等数据。
可选的,在本申请的一些可能的实施方式中,上述原始道路图像为车辆在直行状态下的图像,其中该图像中包括以下至少一项路面元素:车道线、车道中心线、指示箭头、停止线、或人行横道线,当然,该图像中还可以包括车辆本身。
可选的,在本申请的一些实施方式中,原始道路图像中并不是所有的道路元素在车道变换过程中都会发生变化,仅提取预计会发生变化或较为重要的道路元素即可,可以预先对道路元素进行标注。具体来说,在获取到原始道路图像之后,数据获取装置可以根据应用场景或实际需求对原始道路图像中道路元素进行标注,得到带有标注的原始道路图像。
在本申请实施例中,车辆是指具有自动驾驶功能或辅助驾驶功能的机动车,具体的,上述车辆可以是:自动驾驶汽车,或具有辅助驾驶功能的汽车,该汽车可以是传统燃油车、或新能源汽车。
202、数据获取装置根据车辆在车道变换过程中的位置确定车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标。
本申请实施例中,车道变换是指车辆在行驶过程中其车道发生改变,具体可以是车辆转弯、车辆变道等场景中的车道变换。在车道变换过程中,车辆的位置会随着车辆的变道轨迹不断改变,以及车身也可能会发生旋转。车辆在车道变换过程中的位置不同,车辆周边的道路元素与车辆之间的相对位置也会发生改变。
像素坐标是指在原始道路图像的像素坐标系下的坐标,其中该像素坐标系的原点可以是原始道路图像的中心。
在本申请实施例中,数据获取装置可以执行以下具体操作获取目标像素坐标:首先,确定道路元素的原始像素坐标;其次,将原始像素坐标转换为车体坐标系下对应的原始车体坐标,其中,车体坐标系是以车体为坐标原点的三维坐标系;再次,根据车辆在车道变换过程中的位置,确定车辆在不同位置下道路元素发生位置变化后对应的目标车体坐标;最后,将目标车体坐标进行坐标转换得到目标像素坐标。在上述方案中,实现二维像素坐标(即图像像素2D坐标)到三维车体坐标(即车体3D坐标)的转换。
上述像素坐标到车体坐标之间的转换可以通过相机标定方式实现。具体来说,如上述步骤201中所述,在原始道路图像是在变道开始时刻车载摄像头采集到的图像的情况下,数据获取装置可以对车载摄像头的内部参数、外部参数中的至少一项进行标定,实现将原始道路图像中的道路元素的像素坐标转换至车体坐标系下。
在车道变换过程中,车身也可能会发生旋转、偏移。可选的,在本申请的一些实施方式中,在获取目标像素坐标之后,数据处理装置还执行以下操作:根据车辆在车道变换过程中的位置确定车辆对应的偏移量和旋转角度;根据偏移量和旋转角度,对车辆执行以下至少一项操作:旋转、偏移。在该方案中,通过小角度的平行地面的旋转和偏移,实现3D场景即车体3D坐标下的变换模拟真实变道场景。
道路元素是从原始道路图像中选取的。在车道变换过程中,原始图像中的道路元素的位置、形状大小等会随着改变,容易理解,视角不同,其车辆与道路元素之间的相对位置也随之改变。
可选的,在本申请的一些实施方式中,道路元素包括:在车道变换过程中,原始道路图像中其位置或形状大小发生改变的以下至少一项:车道线、车道中心线、指示箭头、停止线、或人行横道线。其中,位置变换包括车辆与道路元素之间相对位置的改变。
203、在原始道路图像中,数据获取装置将道路元素由原始像素坐标移动至目标像素坐标对应的位置得到变道模拟图像。
本申请实施例中,与目标像素坐标相对应,原始像素坐标为道路元素在原始道路图像中的像素坐标。目标像素坐标是道路元素在变道模拟图像中的像素坐标。
上述像素坐标到车体坐标之间的转换可以通过相机标定方式实现。具体来说,如上述步骤201中所述,在原始道路图像是在变道开始时刻车载摄像头采集到的图像的情况下,数据获取装置可以对车载摄像头的内部参数、外部参数中的至少一项进行标定,实现将原始像素坐标移动至目标像素坐标对应的位置。
204、数据获取装置从变道模拟图像中提取相应的变道模拟数据。
本申请实施例中,变道模拟数据包括在车道变换过程中所述车辆周边的道路元素对应的数据。
如上述步骤201中所述,在对原始道路图像进行了标注的情况下,数据获取装置从变道模拟图像中提取相应的变道模拟数据具体可以是:根据变道模拟图像中被标注的道路元素提取相应的变道模拟数据。
该变道模拟数据可以用于但不限于对检测路面元素的神经网络模型进行数据训练。
在本申请的技术方案中,根据车辆在车道变换过程中的位置,确定车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标;在原始道路图像中,将道路元素由原始像素坐标移动至目标像素坐标对应的位置,得到变道模拟图像;从变道模拟图像中提取相应的变道模拟数据。由于是通过坐标变换取车道变换场景下的变道模拟数据,因此,可以有效地降低变道场景数据的采集难度,可以大量采集变道模拟数据,同时节约数据采集成本。
进一步的,采集后的变道模拟数据包括车辆在车道变换过程中在不同位置对应的变道模拟图像,因此,其获取的变道模拟数据较为丰富,用于神经网络的数据训练,可以提升神经网络模型中模型参数的准确性,从而增强神经网络模型对路面元素的感知能力,最终可以提高自动驾驶或辅助驾驶的安全性。
与前述应用功能实现方法实施例相对应,本申请还提供了一种数据获取装置、车载终端及相应的实施例。
请参阅图3,图3为本申请实施例中数据获取装置的一个结构示意图。
如图3所示,本申请实施例中数据获取装置300包括:获取模块301、坐标确定模块302、坐标转换模块303和提取模块304。
获取模块301,用于获取在直行状态下车辆周边的原始道路图像;
坐标确定模块302,用于根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,所述道路元素是从所述原始道路图像中选取的;
坐标转换模块303,用于在所述原始道路图像中,将所述道路元素由原始像素坐标移动至所述目标像素坐标对应的位置,得到变道模拟图像,其中,所述原始像素坐标为所述道路元素在所述原始道路图像中的像素坐标;
提取模块304,用于从所述变道模拟图像中提取相应的变道模拟数据,所述变道模拟数据用于对检测路面元素的神经网络模型进行数据训练。
可选的,在本申请的一些实施方式中,坐标确定模块302具体用于执行以下操作以确定目标坐标:
确定所述道路元素的原始像素坐标;
将所述原始像素坐标转换为车体坐标系下对应的原始车体坐标,其中,所述车体坐标系是以所述车体为坐标原点的三维坐标系;
根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标车体坐标;
将所述目标车体坐标进行坐标转换得到所述目标像素坐标。可选的,在本申请的一些实施方式中,如图3中虚线部分所示,可选的,数据获取装置300还可以包括旋转偏移模块305,用于执行以下操作:根据所述车辆在车道变换过程中的位置确定所述车辆对应的偏移量和旋转角度;根据所述偏移量和所述旋转角度,对所述车辆执行以下至少一项操作:旋转、偏移。
可选的,在本申请的一些实施方式中,所述原始道路图像包括在变道开始时刻车载摄像头采集到的图像,所述车载摄像头用于采集所述车辆前方的道路信息;
此种情况下,所述目标像素坐标是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的;所述变道模拟图像是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的。
可选的,在本申请的一些实施方式中,在所述获取在直行状态下车辆周边的原始道路图像之后,获取模块301还用于:
对所述原始道路图像中的道路元素进行标注,得到带有标注的原始数据图像。
可选的,在本申请的一些实施方式中,提取模块305具体用于:根据所述变道模拟图像中被标注的道路元素提取所述变道模拟数据。
可选的,在本申请的一些实施方式中,所述道路元素包括:在所述车道变换过程中,所述原始道路图像中其位置或形状大小发生改变的以下至少一项:车道线、车道中心线、指示箭头、停止线、或人行横道线。
可选的,在本申请的一些实施方式中,所述变道模拟数据包括在车道变换过程中所述车辆周边的道路元素对应的数据。
可选的,在本申请的一些实施方式中,第一获取模块301获取的当前场景图像中的车辆可以是自动驾驶汽车,或具有辅助驾驶功能的汽车。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不再做详细阐述说明。
请参阅图4,图4为本申请实施例中数据获取装置的另一个结构示意图。
如图4所示,数据获取装置400包括存储器401和处理器402。
处理器402可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列 (Field-Programmable Gate Array,FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器401可以包括各种类型的存储单元,例如系统内存、只读存储器(ROM),和永久存储装置。其中,ROM可以存储处理器402或者计算机的其他模块需要的静态数据或者指令。永久存储装置可以是可读写的存储装置。永久存储装置可以是即使计算机断电后也不会失去存储的指令和数据的非易失性存储设备。在一些实施方式中,永久性存储装置采用大容量存储装置(例如磁或光盘、闪存)作为永久存储装置。另外一些实施方式中,永久性存储装置可以是可移除的存储设备(例如软盘、光驱)。系统内存可以是可读写存储设备或者易失性可读写存储设备,例如动态随机访问内存。系统内存可以存储一些或者所有处理器在运行时需要的指令和数据。此外,存储器401可以包括任意计算机可读存储媒介的组合,包括各种类型的半导体存储芯片(DRAM,SRAM,SDRAM,闪存,可编程只读存储器),磁盘和/或光盘也可以采用。在一些实施方式中,存储器401可以包括可读和/或写的可移除的存储设备,例如激光唱片(CD)、只读数字多功能光盘(例如DVD-ROM,双层DVD-ROM)、只读蓝光光盘、超密度光盘、闪存卡(例如SD卡、min SD卡、Micro-SD卡等等)、磁性软盘等等。计算机可读存储媒介不包含载波和通过无线或有线传输的瞬间电子信号。
存储器401上存储有可执行代码,当可执行代码被处理器402处理时,可以使处理器402执行上文述及的方法中的部分或全部。
上文中已经参考附图详细描述了本申请的方案。在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详细描述的部分,可以参见其他实施例的相关描述。本领域技术人员也应该知悉,说明书中所涉及的动作和模块并不一定是本申请所必须的。另外,可以理解,本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减,本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。
本申请实施例中还提供了一种车载终端,该车载终端包括:上述图3或图4中所述的数据处理装置,该数据处理装置用于执行上述图2中所述方法中的部分或全部操作。
此外,根据本申请的方法还可以实现为一种计算机程序或计算机程序产品,该计算机程序或计算机程序产品包括用于执行本申请的上述方法中部分或全部步骤的计算机程序代码指令。
或者,本申请还可以实施为一种非暂时性机器可读存储介质(或计算机可读存储介质、或机器可读存储介质),其上存储有可执行代码(或计算机程序、或计算机指令代码),当所述可执行代码(或计算机程序、或计算机指令代码)被电子设备(或电子设备、服务器等)的处理器执行时,使所述处理器执行根据本申请的上述方法的各个步骤的部分或全部。
本领域技术人员还将明白的是,结合这里的申请所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。
附图中的流程图和框图显示了根据本申请的多个实施例的系统和方法的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标记的功能也可以以不同于附图中所标记的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本申请的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (7)

1.一种数据获取方法,其特征在于,所述数据获取方法用于通过坐标变换获取车道变换场景下的变道模拟数据,所述方法包括:
获取在直行状态下车辆周边的原始道路图像;对所述原始道路图像中的道路元素进行标注;
根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,所述道路元素是从所述原始道路图像中选取的;其中包括:确定所述道路元素的原始像素坐标;将所述原始像素坐标转换为车体坐标系下对应的原始车体坐标,其中,所述车体坐标系是以所述车体为坐标原点的三维坐标系,所述原始像素坐标到所述车体坐标的转换通过相机标定方式实现;根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标车体坐标;将所述目标车体坐标进行坐标转换得到所述目标像素坐标;
在所述原始道路图像中,将所述道路元素由原始像素坐标移动至所述目标像素坐标对应的位置,得到变道模拟图像,其中,所述原始像素坐标为所述道路元素在所述原始道路图像中的像素坐标,所述目标像素坐标是所述道路元素在所述变道模拟图像中的像素坐标;
从所述变道模拟图像中提取相应的变道模拟数据,所述变道模拟数据用于对检测路面元素的神经网络模型进行数据训练;其中,所述变道模拟数据包括在车道变换过程中所述车辆周边的道路元素对应的数据。
2.根据权利要求1所述的方法,其特征在于,
所述方法还包括:根据所述车辆在车道变换过程中的位置确定所述车辆对应的偏移量和旋转角度;
根据所述偏移量和所述旋转角度,对所述车辆执行以下至少一项操作:旋转、偏移。
3.根据权利要求1所述的方法,其特征在于,
所述原始道路图像包括在变道开始时刻车载摄像头采集到的图像,所述车载摄像头用于采集所述车辆前方的道路信息;
此种情况下,所述目标像素坐标是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的;所述变道模拟图像是通过对所述车载摄像头的内部参数、外部参数中至少一项进行标定得到的。
4.根据权利要求1所述的方法,其特征在于,
所述从所述变道模拟图像中提取相应的变道模拟数据,包括:
根据所述变道模拟图像中被标注的道路元素提取所述变道模拟数据。
5.根据权利要求1所述的方法,其特征在于,
所述道路元素包括:在所述车道变换过程中,所述原始道路图像中其位置或形状大小发生改变的以下至少一项:车道线、车道中心线、指示箭头、停止线、或人行横道线。
6.一种数据获取装置,其特征在于,包括:
获取模块,用于获取在直行状态下车辆周边的原始道路图像;对所述原始道路图像中的道路元素进行标注;
坐标确定模块,用于根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标像素坐标,所述道路元素是从所述原始道路图像中选取的;其中包括:确定所述道路元素的原始像素坐标;将所述原始像素坐标转换为车体坐标系下对应的原始车体坐标,其中,所述车体坐标系是以所述车体为坐标原点的三维坐标系,所述原始像素坐标到所述车体坐标的转换通过相机标定方式实现;根据所述车辆在车道变换过程中的位置,确定所述车辆在不同位置下道路元素发生位置变化后对应的目标车体坐标;将所述目标车体坐标进行坐标转换得到所述目标像素坐标;
坐标转换模块,用于在所述原始道路图像中,将所述道路元素由原始像素坐标移动至所述目标像素坐标对应的位置,得到变道模拟图像,其中,所述原始像素坐标为所述道路元素在所述原始道路图像中的像素坐标,所述目标像素坐标是所述道路元素在所述变道模拟图像中的像素坐标;
提取模块,用于从所述变道模拟图像中提取相应的变道模拟数据,所述变道模拟数据用于对检测路面元素的神经网络模型进行数据训练;其中,所述变道模拟数据包括在车道变换过程中所述车辆周边的道路元素对应的数据。
7.一种数据获取装置,其特征在于,包括:
处理器和存储器;所述存储器,用于存储可执行代码;
所述处理器,用于通过调用所述可执行代码,以执行如上述权利要求1-5中任一项所述的数据获取方法。
CN202110807572.0A 2021-07-16 2021-07-16 数据获取方法及其装置 Active CN113269165B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110807572.0A CN113269165B (zh) 2021-07-16 2021-07-16 数据获取方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110807572.0A CN113269165B (zh) 2021-07-16 2021-07-16 数据获取方法及其装置

Publications (2)

Publication Number Publication Date
CN113269165A CN113269165A (zh) 2021-08-17
CN113269165B true CN113269165B (zh) 2022-04-22

Family

ID=77236598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110807572.0A Active CN113269165B (zh) 2021-07-16 2021-07-16 数据获取方法及其装置

Country Status (1)

Country Link
CN (1) CN113269165B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105825173A (zh) * 2016-03-11 2016-08-03 福州华鹰重工机械有限公司 通用道路和车道检测系统与方法
CN109147393A (zh) * 2018-10-18 2019-01-04 清华大学苏州汽车研究院(吴江) 基于视频分析的车辆变道检测方法
CN110399762A (zh) * 2018-04-24 2019-11-01 北京四维图新科技股份有限公司 一种基于单目图像的车道线检测的方法及装置
CN111231950A (zh) * 2020-03-05 2020-06-05 北京百度网讯科技有限公司 规划车辆变道路径的方法、装置、设备及可读存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109034047B (zh) * 2018-07-20 2021-01-22 京东方科技集团股份有限公司 一种车道线检测方法及装置
KR102628012B1 (ko) * 2018-10-23 2024-01-22 삼성전자주식회사 캘리브레이션 방법 및 장치
CN109961013A (zh) * 2019-02-21 2019-07-02 杭州飞步科技有限公司 车道线的识别方法、装置、设备及计算机可读存储介质
CN112667837A (zh) * 2019-10-16 2021-04-16 上海商汤临港智能科技有限公司 图像数据自动标注方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105825173A (zh) * 2016-03-11 2016-08-03 福州华鹰重工机械有限公司 通用道路和车道检测系统与方法
CN110399762A (zh) * 2018-04-24 2019-11-01 北京四维图新科技股份有限公司 一种基于单目图像的车道线检测的方法及装置
CN109147393A (zh) * 2018-10-18 2019-01-04 清华大学苏州汽车研究院(吴江) 基于视频分析的车辆变道检测方法
CN111231950A (zh) * 2020-03-05 2020-06-05 北京百度网讯科技有限公司 规划车辆变道路径的方法、装置、设备及可读存储介质

Also Published As

Publication number Publication date
CN113269165A (zh) 2021-08-17

Similar Documents

Publication Publication Date Title
US11967109B2 (en) Vehicle localization using cameras
US10628690B2 (en) Systems and methods for automated detection of trailer properties
US20140365109A1 (en) Apparatus and method for recognizing driving lane
CN112069643A (zh) 一种自动驾驶仿真场景生成方法及装置
CN111178122A (zh) 道路场景中三维车道的检测及平面表示
CN113112524A (zh) 自动驾驶中移动对象的轨迹预测方法、装置及计算设备
CN115205311B (zh) 图像处理方法、装置、车辆、介质及芯片
CN118038409A (zh) 车辆可行驶区域检测方法、装置、电子设备及存储介质
CN111210411B (zh) 图像中灭点的检测方法、检测模型训练方法和电子设备
CN113269165B (zh) 数据获取方法及其装置
CN111553181A (zh) 车载相机语义识别方法、系统及装置
CN113591543B (zh) 交通标志识别方法、装置、电子设备及计算机存储介质
CN113269162A (zh) 数据获取方法及其装置
US20220414385A1 (en) Use of dbscan for lane detection
US20210155249A1 (en) Device and method for estimating the attention level of a driver of a vehicle
CN111174796B (zh) 一种基于单灭点的导航方法、电子设备和存储介质
CN113724390A (zh) 匝道生成方法及装置
JP6861911B2 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
CN113994391A (zh) 车辆通行提醒方法、装置及车载终端
CN108022250B (zh) 基于自适应阈值分割的自动驾驶处理方法及装置
CN117952978B (zh) 路口检测方法、计算机可读存储介质及智能设备
CN115147794B (zh) 车道线确定方法、装置、车辆、介质及芯片
US20240223915A1 (en) Systems and methods for downsampling images
Aron et al. Current Approaches in Traffic Lane Detection: a minireview
CN115723775A (zh) 感知目标显示方法、装置和计算可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant