CN105488534A - 交通场景深度解析方法、装置及系统 - Google Patents
交通场景深度解析方法、装置及系统 Download PDFInfo
- Publication number
- CN105488534A CN105488534A CN201510887525.6A CN201510887525A CN105488534A CN 105488534 A CN105488534 A CN 105488534A CN 201510887525 A CN201510887525 A CN 201510887525A CN 105488534 A CN105488534 A CN 105488534A
- Authority
- CN
- China
- Prior art keywords
- neural network
- image
- module
- road
- original image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了交通场景深度解析方法及装置,包括:使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本,通过拉普拉斯金字塔变换方式,将其中各原始图像缩放为多个不同尺度,并输入与不同尺度分别对应的神经网络,神经网络由卷积神经网络部分与反卷积神经网络部分联合组成,通过与神经网络链接的全链接层输出与原始图像像素相同的一维数组,并还原为与原始图像相同大小的结果图像,其中标出不同类型的道路,使用预置标准对结果图像进行处理,以还原出道路的分割结果,将待检测图像输入训练成功的神经网络中,得到完成道路分割与待检测图像对应的结果图像。本发明可提高交通场景解析的准确度。
Description
技术领域
本发明属于数据分析技术领域,尤其涉及一种交通场景深度解析方法、装置及系统。
背景技术
交通场景对汽车驾驶来说极其复杂,采用摄像头采样进行分析的方法能高效快速地评估当前场景,应用到自动驾驶系统和辅助驾驶系统中,最重要的功能之一就是要准确地分析该场景图像中道路区域信息。
现有技术中,有的是使用四线激光雷达探测道路,但这种探测方法对道路边缘要求极高,在无明显边界的道路中,道路探测效果不好并且在变化万千的交通场景中道路数据的采样性不具有通用型。有的采用了统计学习方法来拟合相邻像素的特征,只要增加不同类型道路的训练样本,也可以解决道路多样性问题,但是使用最大流/最小割算法获得道路区域,由于权值估计会因为实际道路样本的扭曲和不清晰等原因,无法很好地通过权值估计器获得正确的参数,在一些光照等原因导致特别敏感的场景,该方法也失去了去识别道路的能力。在以上现有技术中,由于实际上交通场景非常多样化,它们针对不同的路况不具有自适应的能力,对交通场景道路情况的识别精确性不高。
发明内容
本发明提供交通场景深度解析方法及装置,可通过将多尺度的图像输入卷积神经网络与反卷神经网络构成的神经网络,可有效地学习目标道路特征,并且通过回归拟合来提高深度神经网络学习的特征的准确性,提高交通场景解析的准确度。
本发明提供的交通场景深度解析方法,包括:
使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本;通过拉普拉斯金字塔变换方式,将所述训练样本中的各原始图像缩放为多个不同尺度;将缩放后的图像输入与不同尺度分别对应的神经网络,以通过所述神经网络提取道路特征,所述神经网络由卷积神经网络部分与反卷积神经网络部分联合组成;利用训练缩放后的图像和所述缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;通过与所述神经网络链接的全链接层输出与原始图像像素相同的一维数组,并将所述一维数组还原为与所述原始图像相同大小的结果图像,所述结果图像中标出不同类型的道路;使用预置标准对所述结果图像进行处理,以还原出道路的分割结果;将待检测图像输入训练成功的所述神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
本发明提供的交通场景深度解析装置,包括:
样本确定模块,用于使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本;变换模块,用于通过拉普拉斯金字塔变换方式,将所述训练样本中的各原始图像缩放为多个不同尺度;提取模块,用于将缩放后的图像输入与不同尺度分别对应的神经网络,以通过所述神经网络提取道路特征,所述神经网络由卷积神经网络部分与反卷积神经网络部分联合组成;训练模块,用于利用训练缩放后的图像和所述缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;输出模块,用于通过与所述神经网络链接的全链接层输出与原始图像像素相同的一维数组;还原模块,用于将所述一维数组还原为与所述原始图像相同大小的结果图像,所述结果图像中标出不同类型的道路;所述还原模块,还用于使用预置标准对所述结果图像进行处理,以还原出道路的分割结果;检测模块,用于将待检测图像输入训练成功的所述神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
从上述本发明实施例可知,本发明通过将多尺度的图像输入神经网络,能有效地提取局部道路特征,且卷积神经网络与反卷神经网络构成的神经网络能有效地学习目标道路特征,并且通过回归拟合来提高深度神经网络学习的特征的准确性,不仅在道路识别精度上有非常高的性能,而且非常有效地提高了在不同交通场景下的适应能力,通过pixel-wise方法针对图像每一个像素进行预测,极大地提高了区域内分割的进度,另外,为无人驾驶和辅助驾驶使用了摄像头相关的传感器也极大地降低了成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的交通场景深度解析方法的实现流程示意图;
图2是本发明第一实施例中交通场景深度解析方法的数据处理流程示意图;
图3是本发明第二实施例提供的交通场景深度解析装置的结构示意图;
图4是本发明第三实施例提供的交通场景深度解析装置的结构示意图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而非全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明各实施例的方案主要针对交通场景中的道路与道路线进行分割。通过训练样本训练出一个像素级的分类器,可对采集到的交通图像中每一个像素进行分类,来判断交通图像中不同区域所属类别,以还原交通图像对应的实际交通场景的道路状况。
请参阅图1,图1为本发明第一实施例提供的交通场景深度解析方法的实现流程示意图,主要包括以下步骤S101至步骤S107:
S101、使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本。
例如使用KITTI-ROAD与LabelMe的图像数据集和这些图像对应的道路区域标定作为训练样本,中间加入少量扭曲与旋转的图像,增加训练出的分类器的准确度。
为便于后续图像的处理,可将多个交通场景数据库中的原始图像数据集中的各原始图像进行归一化处理后,和归一化处理后的图像对应的道路区域标定作为训练样本。具体地,对原始图像数据集中的各个图像进行标注和归一化处理,标注的方法与KITTI-ROAD的标注方法相同,将所有已标注的图像归一到同一尺度,例如图像大小为375*375。
S102、通过拉普拉斯金字塔变换方式,将该训练样本中的各原始图像缩放为多个不同尺度。
将训练样本中的各图像进行拉普拉斯金字塔变换进行尺度缩放,若进行了归一化处理,则是归一化处理后的各原始图像按照拉普拉斯金字塔变换方式进行尺度的缩放,即按照设置的比例缩放到多个不同的尺度。数量默认为4个尺度,可根据道路的复杂情况进行不同尺度数量的增加,例如存在多条不相连的道路时,认为是复杂情况,可适量增加不同尺度的数量。
S103、将缩放后的图像输入与不同尺度分别对应的神经网络,以通过该神经网络提取道路特征,该神经网络由卷积神经网络部分与反卷积神经网络部分联合组成;
其中卷积神经网络部分使用的是VGG16层的卷积网络结构,而反卷积神经网络则像卷积网络的倒影般相反,对应于卷积部分的卷积层,反卷积部分为反卷积层,而池化层则为反池化层,这样的网络部署可提升图像的分辨率。
将不同尺度大小的图像,对应输入不同的神经网络,由该神经网络提取图像中的道路特征。这些神经网络的结构相同,为卷积神经网络与反卷积神经网络组成。
卷积神经网络(CNN,ConvolutionalNeuralNetwork)由一个或多个卷积层和顶端的全链接层(对应经典的神经网络)组成,同时也包括关联权重和池化层(poolinglayer)。这一结构使得卷积神经网络能够利用输入数据的二维结构。与其他深度学习结构相比,卷积神经网络在图像识别方面能够给出更优的结果。这一模型也可以使用反向传播算法进行训练。相比较其他深度、前馈神经网络,卷积神经网络需要估计的参数更少。一般地,CNN的基本结构包括两层,其一为特征提取层,每个神经元的输入与前一层的局部接受域相连,并提取该局部的特征。一旦该局部特征被提取后,它与其它特征间的位置关系也随之确定下来;其二是特征映射层,网络的每个计算层由多个特征映射组成,每个特征映射是一个平面,平面上所有神经元的权值相等。特征映射结构采用影响函数核小的sigmoid函数作为卷积网络的激活函数,使得特征映射具有位移不变性。此外,由于一个映射面上的神经元共享权值,因而减少了网络自由参数的个数。卷积神经网络中的每一个卷积层都紧跟着一个用来求局部平均与二次提取的计算层,这种特有的两次特征提取结构减小了特征分辨率。深度学习的本质类似于统计学习方法,构建具有多隐层的机器学习模型后,通过海量的训练数据来学习特征,从而提高分类和预测的准确率。深度学习对比与浅层学习来说,强调了模型结构的深度(层数),同时明确提出特征学习的重要性。
具体地,给定输入图像I,其中待划分多尺度的图像为Xn,n为正整数,可得:X1与I有着相同的分辨率。为了保证图像局部邻域具有零均值和单位标准偏差,使用拉普拉斯金字塔作为多尺度预处理。对多尺度中的特征图maps,通过scaling/normalizing函数gn来计算,可得:Xn=gn(I),n∈{1,...,S}。然后给定一个卷积神经网络与反卷积神经网络串联fn和其参数θn,则多尺度神经网络会通过实例化单个神经网络的尺度n,并共享所有的参数:
θ=θ0,
S104、利用训练缩放后的图像和缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;
缩放后的图像对应的道路区域标定是指缩放后的图像上,根据预置的标定方法对缩放后的图像中的道路区域进行的标定。
S105、通过与该神经网络链接的全链接层输出与原始图像像素相同的一维数组,并将该一维数组还原为与该原始图像相同大小的结果图像,该结果图像中标出不同类型的道路。
神经网络与全链接层相链接,神经网络将提取的道路特征相关数据通过全链接层输出,通过pixel-wise的方法对图像中每一个像素点进行预测,在该全链接层输出与训练样本中的原始图像像素相同的一维数组。将该一维数组还原转换为与该原始图像相同大小的结果图像。该图像为原始图像提取出来的mask,该结果图像中标出不同类型的道路,例如,标注时,通过不同颜色代表国道、省道、县道等不同类型的道路。
在输出该一位数组之前,为了更好的区分道路区域和边缘,通过欧氏距离对提出的道路特征的像素进行回归拟合,之后再输出该一维数组。
此时,可对该结果图像进行纠错,当验证出该训练样本训练失败时,使用GroundTruth进行fine-tuning并拟合GroundTruth纠正发生错误的训练样本的训练结果。可以是,1)通过拟合GroundTruth来纠正分类错误的样本;2)根据特定测试图像的错误增加正负样本的修正;3)实际上,训练的样本数量级还是偏少,为了避免过拟合,使用dropout的办法作为tricks。
至此,神经网络完成对图像的学习和训练。
S106、使用预置标准对该结果图像进行处理,以还原出道路的分割结果。
使用KITTI-ROAD提供的标准进行图像处理,还原出道路分割的结果,生成对原始图像的交通道路情况深度分析后的最终图像,该最终图像可以反映交通道路各区域。
S107、将待检测图像输入训练成功的该神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
该待检测图像来自不同的交通场景图片或者数据集中的测试图片。
将待检测图像输入训练成功的该神经网络中,结果会输出一幅与原待检测图像尺度相同但类别不同的mask图像,即结果图像,该结果图像中标出了不同道路类型。通过KITTI-ROAD提供的工具对该结果图像进行精度评估和结果美化。
本发明实施例中,通过将多尺度的图像输入神经网络,能有效地提取局部道路特征,且卷积神经网络与反卷神经网络构成的神经网络能有效地学习目标道路特征,并且通过回归拟合来提高深度神经网络学习的特征的准确性,不仅在道路识别精度上有非常高的性能,而且非常有效地提高了在不同交通场景下的适应能力,通过pixel-wise方法针对图像每一个像素进行预测,极大地提高了区域内分割的进度,另外,为无人驾驶和辅助驾驶使用了摄像头相关的传感器也极大地降低了成本。
请参阅图2,图2是本发明第一实施例中交通场景深度解析方法的数据处理流程示意图。
该方法的处理流程可分为训练与测试两个部分。
其中,训练部分由以下步骤完成:
1)将原始图像归一化;
使用多个户外交通场景的原始图像集合作为训练样本,用KITTI-ROAD的方法标注各个原始图像。对于所有已标注的原始图像,归一到同一尺度;
2)对归一化后的原始图像进行多尺度处理;
归一化之后,通过拉普拉斯金字塔按照一定的比例将各原始图像分别缩放到多个不同的尺度;
3)对应不同大小尺度的图片,提取道路特征对应使用不同的网络;
网络结构相同,均为卷积神经网络和反卷积神经网络构成。
4)在全链接层通过欧氏距离进行回归拟合;
5)输出结果图像;
具体通过pixel-wise的方法从全链接层输出与原始图像素数量一样的一维数组,并转换为与原始图像大小相同的结果图像,该结果图像中道路分类是通过不同的颜色表示的。
在验证结果后,比较当前网络输出的道路预测与GroundTruth(标准)中实际道路的误差,并根据误差调整神经网络的参数。然后以,调整参数后的神经网络重新预测道路区域。重复上述过程,直至网络参数收敛或误差小于期望。
6)通过KITTI-ROAD方法将输出结果图像转化为道路已分割完毕的最终图像;
测试部分由以下步骤完成:
1)确定待测试图像;
选择不同的交通场景图片或者数据集中的图像作为待测试图像;
2)输入训练好的模型中;
在上述训练阶段训练好的神经网络框架中测试。
3)输出对应的最终图像。
结果会从训练好的模型中输出与待测试图像大小相同类别不同的mask,通过KITTI-ROAD提供的工具对该mask进行评估精度和美化结果。该结果图像中道路已经分好类。
请参阅图3,图3是本发明第二实施例提供的交通场景深度解析装置的结构示意图,为了便于说明,仅示出了与本发明实施例相关的部分。图3示例的解析装置可以是前述图1所示实施例提供的交通场景深度解析方法的执行主体。图3示例的交通场景深度解析装置,主要包括:
样本确定模块301、变换模块302、提取模块303、训练模块304、输出模块305、还原模块306以及检测模块307。
以上各功能模块详细说明如下:
其中,样本确定模块301,用于使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本;
变换模块302,用于通过拉普拉斯金字塔变换方式,将该训练样本中的各原始图像缩放为多个不同尺度;
提取模块303,用于将缩放后的图像输入与不同尺度分别对应的神经网络,以通过该神经网络提取道路特征,该神经网络由卷积部分与反卷积部分联合组成;
训练模块304,用于利用训练缩放后的图像和该缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;
输出模块305,用于通过与该神经网络链接的全链接层输出与原始图像像素相同的一维数组;
还原模块306,用于将该一维数组还原为与该原始图像相同大小的结果图像,该结果图像中标出不同类型的道路;
还原模块306,还用于使用预置标准对该结果图像进行处理,以还原出道路的分割结果;
检测模块307,用于将待检测图像输入训练成功的该神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
本实施例未尽之细节,请参阅前述图1和图2所示实施例的描述,此处不再赘述。
需要说明的是,以上图3示例的交通场景深度解析装置的实施方式中,各功能模块的划分仅是举例说明,实际应用中可以根据需要,例如相应硬件的配置要求或者软件的实现的便利考虑,而将上述功能分配由不同的功能模块完成,即将交通场景深度解析装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。而且,实际应用中,本实施例中的相应的功能模块可以是由相应的硬件实现,也可以由相应的硬件执行相应的软件完成;本说明书提供的各个实施例都可应用上述描述原则。
本发明实施例,通过将多尺度的图像输入神经网络,能有效地提取局部道路特征,且卷积神经网络与反卷神经网络构成的神经网络能有效地学习目标道路特征,并且通过回归拟合来提高深度神经网络学习的特征的准确性,不仅在道路识别精度上有非常高的性能,而且非常有效地提高了在不同交通场景下的适应能力,通过pixel-wise方法针对图像每一个像素进行预测,极大地提高了区域内分割的进度,另外,为无人驾驶和辅助驾驶使用了摄像头相关的传感器也极大地降低了成本。
请参阅图4,本发明第三实施例提供的交通场景深度解析装置,主要包括:
样本确定模块401、变换模块402、提取模块403、训练模块404、输出模块405、还原模块406、预测模块4061、归一模块4062、检测模块407、拟合模块408以及纠正模块409。
以上各功能模块详细说明如下:
其中,样本确定模块401,用于使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本。
样本确定模块401,还用于将多个交通场景数据库中的原始图像数据集中的各原始图像进行归一化处理后,作为训练样本。
变换模块402,用于通过拉普拉斯金字塔变换方式,将该训练样本中的各原始图像缩放为多个不同尺度。
提取模块403,用于将缩放后的图像输入与不同尺度分别对应的神经网络,以通过该神经网络提取道路特征,该神经网络由卷积部分与反卷积部分联合组成。
训练模块404,用于利用训练缩放后的图像和该缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;
输出模块405,用于通过与该神经网络链接的全链接层输出与原始图像像素相同的一维数组。
还原模块406,用于将该一维数组还原为与该原始图像相同大小的结果图像,该结果图像中标出不同类型的道路。
还原模块406,还用于使用预置标准对该结果图像进行处理,以还原出道路的分割结果。
检测模块407,用于将待检测图像输入训练成功的该神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
进一步地,该装置还包括:
拟合模块408,用于在该全链接层中对提取的道路特征对应的像素进行回归拟合。
进一步地,还原模块406还包括:预测模块4061和归一模块4062。
预测模块4061,用于按照pixel-wise方法根据所述一维数组,对该结果图像的每一个像素点进行预测。
归一模块4062,用于通过插值将不同尺度的结果图像归一到原始图像大小的结果图像。
进一步地,该装置还包括:
纠正模块409,用于当验证出所述训练样本训练失败时,使用GroundTruth进行fine-tuning并拟合GroundTruth纠正发生错误的训练样本的训练结果。纠正模块409执行过程具体请参考前述其他模块,此处不再赘述。
进一步地,样本确定模块401,还用于将多个交通场景数据库中的原始图像数据集中的各原始图像进行归一化处理后,和归一化处理后的图像对应的道路区域标定作为训练样本。
本实施例未尽之细节,请参阅前述图1和图2所示实施例的描述,此处不再赘述。
本发明实施例,通过将多尺度的图像输入神经网络,能有效地提取局部道路特征,且卷积神经网络与反卷神经网络构成的神经网络能有效地学习目标道路特征,并且通过回归拟合来提高深度神经网络学习的特征的准确性,不仅在道路识别精度上有非常高的性能,而且非常有效地提高了在不同交通场景下的适应能力,通过pixel-wise方法针对图像每一个像素进行预测,极大地提高了区域内分割的进度,另外,为无人驾驶和辅助驾驶使用了摄像头相关的传感器也极大地降低了成本。
在本申请所提供的多个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信链接可以是通过一些接口,装置或模块的间接耦合或通信链接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本发明所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上为对本发明所提供的交通场景深度解析方法及装置的描述,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种交通场景深度解析方法,其特征在于,所述方法包括:
使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本;
通过拉普拉斯金字塔变换方式,将所述训练样本中的各原始图像缩放为多个不同尺度;
将缩放后的图像输入与不同尺度分别对应的神经网络,以通过所述神经网络提取道路特征,所述神经网络由卷积神经网络部分与反卷积神经网络部分联合组成;
利用训练缩放后的图像和所述缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;
通过与所述神经网络链接的全链接层输出与原始图像像素相同的一维数组,并将所述一维数组还原为与所述原始图像相同大小的结果图像,所述结果图像中标出不同类型的道路;
使用预置标准对所述结果图像进行处理,以还原出道路的分割结果;
将待检测图像输入训练成功的所述神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
2.根据权利要求1所述的方法,其特征在于,所述通过与所述神经网络链接的全链接层输出与原始图像像素相同的一维数组之前包括:
在所述全链接层中对提取的道路特征对应的像素进行回归拟合。
3.根据权利要求1或2所述的方法,其特征在于,所述将所述一维数组还原为与所述原始图像相同大小的结果图像包括:
按照pixel-wise方法根据所述一维数组,对所述结果图像的每一个像素点进行预测,并通过插值将不同尺度的结果图像归一到原始图像大小的结果图像。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
比较当前网络输出的道路区域预测结果与预置标准中实际道路区域的误差,并根据误差调整神经网络的参数;
按照调整参数后的神经网络重新预测道路区域,直至网络参数达到预置期望值。
5.根据权利要求4所述的方法,其特征在于,所述使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本包括:
将多个交通场景数据库中的原始图像数据集中的各原始图像进行归一化处理后,和归一化处理后的图像对应的道路区域标定作为训练样本。
6.一种交通场景深度解析装置,其特征在于,所述装置包括:
样本确定模块,用于使用多个交通场景数据库中的原始图像数据集和原始图像对应的道路区域标定作为训练样本;
变换模块,用于通过拉普拉斯金字塔变换方式,将所述训练样本中的各原始图像缩放为多个不同尺度;
提取模块,用于将缩放后的图像输入与不同尺度分别对应的神经网络,以通过所述神经网络提取道路特征,所述神经网络由卷积神经网络部分与反卷积神经网络部分联合组成;
训练模块,用于利用训练缩放后的图像和所述缩放后的图像对应的道路区域标定,对卷积神经网络与反卷积神经网络的参数进行训练;
输出模块,用于通过与所述神经网络链接的全链接层输出与原始图像像素相同的一维数组;
还原模块,用于将所述一维数组还原为与所述原始图像相同大小的结果图像,所述结果图像中标出不同类型的道路;
所述还原模块,还用于使用预置标准对所述结果图像进行处理,以还原出道路的分割结果;
检测模块,用于将待检测图像输入训练成功的所述神经网络中,得到完成道路分割与该待检测图像对应的结果图像。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
拟合模块,用于在所述全链接层中对提取的道路特征对应的像素进行回归拟合。
8.根据权利要求6或7所述的装置,其特征在于,所述还原模块包括:
预测模块,用于按照pixel-wise方法根据所述一维数组,对所述结果图像的每一个像素点进行预测;
归一模块,用于通过插值将不同尺度的结果图像归一到原始图像大小的结果图像。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
纠正模块,用于比较当前网络输出的道路区域预测结果与预置标准中实际道路区域的误差,并根据误差调整神经网络的参数。
10.根据权利要求9所述的装置,其特征在于,所述样本确定模块,还用于将多个交通场景数据库中的原始图像数据集中的各原始图像进行归一化处理后,和归一化处理后的图像对应的道路区域标定作为训练样本。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510887525.6A CN105488534B (zh) | 2015-12-04 | 2015-12-04 | 交通场景深度解析方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510887525.6A CN105488534B (zh) | 2015-12-04 | 2015-12-04 | 交通场景深度解析方法、装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105488534A true CN105488534A (zh) | 2016-04-13 |
CN105488534B CN105488534B (zh) | 2018-12-07 |
Family
ID=55675505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510887525.6A Active CN105488534B (zh) | 2015-12-04 | 2015-12-04 | 交通场景深度解析方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105488534B (zh) |
Cited By (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105956532A (zh) * | 2016-04-25 | 2016-09-21 | 大连理工大学 | 一种基于多尺度卷积神经网络的交通场景分类方法 |
CN106097353A (zh) * | 2016-06-15 | 2016-11-09 | 北京市商汤科技开发有限公司 | 基于多层次局部区域融合的物体分割方法及装置、计算设备 |
CN106155327A (zh) * | 2016-08-01 | 2016-11-23 | 乐视控股(北京)有限公司 | 手势识别方法和系统 |
CN106203311A (zh) * | 2016-07-01 | 2016-12-07 | 蔡雄 | 一种能够自主导航清洁车 |
CN106296667A (zh) * | 2016-08-01 | 2017-01-04 | 乐视控股(北京)有限公司 | 手形检测方法和系统 |
CN106295607A (zh) * | 2016-08-19 | 2017-01-04 | 北京奇虎科技有限公司 | 道路识别方法及装置 |
CN106558058A (zh) * | 2016-11-29 | 2017-04-05 | 北京图森未来科技有限公司 | 分割模型训练方法、道路分割方法、车辆控制方法及装置 |
CN106682730A (zh) * | 2017-01-10 | 2017-05-17 | 西安电子科技大学 | 基于vgg16图像反卷积的网络性能评估方法 |
CN106709924A (zh) * | 2016-11-18 | 2017-05-24 | 中国人民解放军信息工程大学 | 基于深度卷积神经网络和超像素的图像语义分割方法 |
CN106971155A (zh) * | 2017-03-21 | 2017-07-21 | 电子科技大学 | 一种基于高度信息的无人车车道场景分割方法 |
CN107403160A (zh) * | 2017-07-28 | 2017-11-28 | 中国地质大学(武汉) | 一种智能驾驶场景中图像检测方法、设备及其存储设备 |
CN107590811A (zh) * | 2017-09-29 | 2018-01-16 | 北京奇虎科技有限公司 | 基于场景分割的风景图像处理方法、装置及计算设备 |
CN107609602A (zh) * | 2017-09-28 | 2018-01-19 | 吉林大学 | 一种基于卷积神经网络的驾驶场景分类方法 |
CN107729948A (zh) * | 2017-10-31 | 2018-02-23 | 京东方科技集团股份有限公司 | 图像处理方法及装置、计算机产品和存储介质 |
CN107767413A (zh) * | 2017-09-20 | 2018-03-06 | 华南理工大学 | 一种基于卷积神经网络的图像深度估计方法 |
CN107944375A (zh) * | 2017-11-20 | 2018-04-20 | 北京奇虎科技有限公司 | 基于场景分割的自动驾驶处理方法及装置、计算设备 |
CN108154153A (zh) * | 2016-12-02 | 2018-06-12 | 北京市商汤科技开发有限公司 | 场景分析方法和系统、电子设备 |
CN108229273A (zh) * | 2017-02-27 | 2018-06-29 | 北京市商汤科技开发有限公司 | 多层神经网络模型训练、道路特征识别的方法和装置 |
WO2018120013A1 (en) * | 2016-12-30 | 2018-07-05 | Nokia Technologies Oy | Artificial neural network |
CN108335303A (zh) * | 2018-01-28 | 2018-07-27 | 浙江大学 | 一种应用于手掌x光片的多尺度手掌骨骼分割方法 |
CN108345875A (zh) * | 2018-04-08 | 2018-07-31 | 北京初速度科技有限公司 | 可行驶区域检测模型训练方法、检测方法和装置 |
CN108846385A (zh) * | 2018-07-10 | 2018-11-20 | 浪潮通用软件有限公司 | 基于卷积-反卷积神经网络的图像识别、校正方法和装置 |
WO2018218643A1 (en) * | 2017-06-02 | 2018-12-06 | Shanghaitech University | Method and apparatus for estimating depth of field information |
CN109002840A (zh) * | 2018-06-26 | 2018-12-14 | 北京纵目安驰智能科技有限公司 | 一种基于级联的语义分割方法、系统、终端和存储介质 |
CN109299656A (zh) * | 2018-08-13 | 2019-02-01 | 浙江零跑科技有限公司 | 一种车载视觉系统场景视深确定方法 |
CN109657614A (zh) * | 2018-12-19 | 2019-04-19 | 沈阳天择智能交通工程有限公司 | 航拍道路交通事故现场勘查中道路及车辆自动识别方法 |
CN109740441A (zh) * | 2018-12-10 | 2019-05-10 | 平安科技(深圳)有限公司 | 基于图像识别的目标检测方法、装置及终端设备 |
CN109902600A (zh) * | 2019-02-01 | 2019-06-18 | 清华大学 | 一种道路区域检测方法 |
CN109997150A (zh) * | 2017-01-04 | 2019-07-09 | 高通股份有限公司 | 用于对道路特征进行分类的系统和方法 |
US10345822B1 (en) | 2018-01-26 | 2019-07-09 | Ford Global Technologies, Llc | Cognitive mapping for vehicles |
CN110478911A (zh) * | 2019-08-13 | 2019-11-22 | 苏州钛智智能科技有限公司 | 基于机器学习的智能游戏车无人驾驶方法及智能车、设备 |
WO2019238126A1 (zh) * | 2018-06-15 | 2019-12-19 | 北京市商汤科技开发有限公司 | 图像分割及分割网络训练方法和装置、设备、介质、产品 |
CN110633597A (zh) * | 2018-06-21 | 2019-12-31 | 北京京东尚科信息技术有限公司 | 一种可行驶区域检测方法和装置 |
WO2020007363A1 (zh) * | 2018-07-06 | 2020-01-09 | 京东数字科技控股有限公司 | 识别目标数量的方法、装置及计算机可读存储介质 |
CN110893860A (zh) * | 2018-09-12 | 2020-03-20 | 华为技术有限公司 | 一种智能驾驶方法及智能驾驶系统 |
CN111064905A (zh) * | 2018-10-17 | 2020-04-24 | 上海交通大学 | 面向自动驾驶的视频场景转换方法 |
CN111191654A (zh) * | 2019-12-30 | 2020-05-22 | 重庆紫光华山智安科技有限公司 | 道路数据生成方法、装置、电子设备及存储介质 |
CN111465938A (zh) * | 2017-12-11 | 2020-07-28 | 大陆汽车有限责任公司 | 用于自动行驶的确定道路标记的装置 |
CN111477028A (zh) * | 2020-04-28 | 2020-07-31 | 北京百度网讯科技有限公司 | 用于生成信息的方法和装置 |
WO2020224244A1 (zh) * | 2019-05-07 | 2020-11-12 | 深圳云天励飞技术有限公司 | 一种景深图获取方法及装置 |
CN111985378A (zh) * | 2020-08-13 | 2020-11-24 | 中国第一汽车股份有限公司 | 道路目标的检测方法、装置、设备及车辆 |
CN113096172A (zh) * | 2021-03-22 | 2021-07-09 | 西安交通大学 | 一种iToF深度数据到原始raw数据的反向生成方法 |
CN113286999A (zh) * | 2018-12-19 | 2021-08-20 | 阿科迪墨公司 | 用于分析即时检验结果的图像的系统和方法 |
US11293763B2 (en) | 2017-12-06 | 2022-04-05 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for determining new roads on a map |
US11562241B2 (en) | 2019-12-31 | 2023-01-24 | Beijing Baidu Netcom Science and Technology Co., Ltd | Data output method, data acquisition method, device, and electronic apparatus |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102610092A (zh) * | 2012-03-23 | 2012-07-25 | 天津大学 | 基于rbf神经网络城市道路速度预测方法 |
US20120239518A1 (en) * | 2009-10-06 | 2012-09-20 | Bullock Roddy Mckee | Method For Monetizing Online Content on the Internet |
CN104134067A (zh) * | 2014-07-07 | 2014-11-05 | 河海大学常州校区 | 基于智能视觉物联网的道路车辆监控系统 |
CN104517103A (zh) * | 2014-12-26 | 2015-04-15 | 广州中国科学院先进技术研究所 | 一种基于深度神经网络的交通标志分类方法 |
CN105046196A (zh) * | 2015-06-11 | 2015-11-11 | 西安电子科技大学 | 基于级联卷积神经网络的前车车辆信息结构化输出方法 |
-
2015
- 2015-12-04 CN CN201510887525.6A patent/CN105488534B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120239518A1 (en) * | 2009-10-06 | 2012-09-20 | Bullock Roddy Mckee | Method For Monetizing Online Content on the Internet |
CN102610092A (zh) * | 2012-03-23 | 2012-07-25 | 天津大学 | 基于rbf神经网络城市道路速度预测方法 |
CN104134067A (zh) * | 2014-07-07 | 2014-11-05 | 河海大学常州校区 | 基于智能视觉物联网的道路车辆监控系统 |
CN104517103A (zh) * | 2014-12-26 | 2015-04-15 | 广州中国科学院先进技术研究所 | 一种基于深度神经网络的交通标志分类方法 |
CN105046196A (zh) * | 2015-06-11 | 2015-11-11 | 西安电子科技大学 | 基于级联卷积神经网络的前车车辆信息结构化输出方法 |
Non-Patent Citations (2)
Title |
---|
DAN LEVI ET AL: "StixelNet: A Deep Convolutional Network for Obstacle Detection and Road Segmentation", 《CONFERENCE: CONFERENCE: BRITISH MACHINE VISION CONFERENCE 2015》 * |
LIMIN WANG ET AL: "Object-Scene Convolutional Neural Networks for Event Recognition in Images", 《2015 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION WORKSHOPS (CVPRW)》 * |
Cited By (65)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105956532A (zh) * | 2016-04-25 | 2016-09-21 | 大连理工大学 | 一种基于多尺度卷积神经网络的交通场景分类方法 |
CN105956532B (zh) * | 2016-04-25 | 2019-05-21 | 大连理工大学 | 一种基于多尺度卷积神经网络的交通场景分类方法 |
US10489913B2 (en) | 2016-06-15 | 2019-11-26 | Beijing Sensetime Technology Development Co., Ltd. | Methods and apparatuses, and computing devices for segmenting object |
CN106097353A (zh) * | 2016-06-15 | 2016-11-09 | 北京市商汤科技开发有限公司 | 基于多层次局部区域融合的物体分割方法及装置、计算设备 |
CN106097353B (zh) * | 2016-06-15 | 2018-06-22 | 北京市商汤科技开发有限公司 | 基于多层次局部区域融合的物体分割方法及装置、计算设备 |
CN106203311A (zh) * | 2016-07-01 | 2016-12-07 | 蔡雄 | 一种能够自主导航清洁车 |
CN106155327A (zh) * | 2016-08-01 | 2016-11-23 | 乐视控股(北京)有限公司 | 手势识别方法和系统 |
CN106296667A (zh) * | 2016-08-01 | 2017-01-04 | 乐视控股(北京)有限公司 | 手形检测方法和系统 |
CN106295607A (zh) * | 2016-08-19 | 2017-01-04 | 北京奇虎科技有限公司 | 道路识别方法及装置 |
CN106709924A (zh) * | 2016-11-18 | 2017-05-24 | 中国人民解放军信息工程大学 | 基于深度卷积神经网络和超像素的图像语义分割方法 |
CN106709924B (zh) * | 2016-11-18 | 2019-11-22 | 中国人民解放军信息工程大学 | 基于深度卷积神经网络和超像素的图像语义分割方法 |
CN106558058A (zh) * | 2016-11-29 | 2017-04-05 | 北京图森未来科技有限公司 | 分割模型训练方法、道路分割方法、车辆控制方法及装置 |
CN108154153A (zh) * | 2016-12-02 | 2018-06-12 | 北京市商汤科技开发有限公司 | 场景分析方法和系统、电子设备 |
WO2018120013A1 (en) * | 2016-12-30 | 2018-07-05 | Nokia Technologies Oy | Artificial neural network |
CN109997150B (zh) * | 2017-01-04 | 2023-10-24 | 高通股份有限公司 | 用于对道路特征进行分类的系统和方法 |
CN109997150A (zh) * | 2017-01-04 | 2019-07-09 | 高通股份有限公司 | 用于对道路特征进行分类的系统和方法 |
CN106682730B (zh) * | 2017-01-10 | 2019-01-08 | 西安电子科技大学 | 基于vgg16图像反卷积的网络性能评估方法 |
CN106682730A (zh) * | 2017-01-10 | 2017-05-17 | 西安电子科技大学 | 基于vgg16图像反卷积的网络性能评估方法 |
CN108229273A (zh) * | 2017-02-27 | 2018-06-29 | 北京市商汤科技开发有限公司 | 多层神经网络模型训练、道路特征识别的方法和装置 |
CN106971155B (zh) * | 2017-03-21 | 2020-03-24 | 电子科技大学 | 一种基于高度信息的无人车车道场景分割方法 |
CN106971155A (zh) * | 2017-03-21 | 2017-07-21 | 电子科技大学 | 一种基于高度信息的无人车车道场景分割方法 |
CN110476185A (zh) * | 2017-06-02 | 2019-11-19 | 上海科技大学 | 景深信息估算方法和装置 |
WO2018218643A1 (en) * | 2017-06-02 | 2018-12-06 | Shanghaitech University | Method and apparatus for estimating depth of field information |
US10645368B1 (en) | 2017-06-02 | 2020-05-05 | Shanghaitech University | Method and apparatus for estimating depth of field information |
CN107403160A (zh) * | 2017-07-28 | 2017-11-28 | 中国地质大学(武汉) | 一种智能驾驶场景中图像检测方法、设备及其存储设备 |
CN107767413A (zh) * | 2017-09-20 | 2018-03-06 | 华南理工大学 | 一种基于卷积神经网络的图像深度估计方法 |
CN107767413B (zh) * | 2017-09-20 | 2020-02-18 | 华南理工大学 | 一种基于卷积神经网络的图像深度估计方法 |
CN107609602A (zh) * | 2017-09-28 | 2018-01-19 | 吉林大学 | 一种基于卷积神经网络的驾驶场景分类方法 |
CN107590811B (zh) * | 2017-09-29 | 2021-06-29 | 北京奇虎科技有限公司 | 基于场景分割的风景图像处理方法、装置及计算设备 |
CN107590811A (zh) * | 2017-09-29 | 2018-01-16 | 北京奇虎科技有限公司 | 基于场景分割的风景图像处理方法、装置及计算设备 |
US12094193B2 (en) | 2017-10-31 | 2024-09-17 | Boe Technology Group Co., Ltd. | Image processing method and image processing device |
CN107729948A (zh) * | 2017-10-31 | 2018-02-23 | 京东方科技集团股份有限公司 | 图像处理方法及装置、计算机产品和存储介质 |
US11138738B2 (en) | 2017-10-31 | 2021-10-05 | Boe Technology Group Co., Ltd. | Image processing method and image processing device |
CN107944375A (zh) * | 2017-11-20 | 2018-04-20 | 北京奇虎科技有限公司 | 基于场景分割的自动驾驶处理方法及装置、计算设备 |
US11293763B2 (en) | 2017-12-06 | 2022-04-05 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for determining new roads on a map |
CN111465938A (zh) * | 2017-12-11 | 2020-07-28 | 大陆汽车有限责任公司 | 用于自动行驶的确定道路标记的装置 |
US10345822B1 (en) | 2018-01-26 | 2019-07-09 | Ford Global Technologies, Llc | Cognitive mapping for vehicles |
CN108335303A (zh) * | 2018-01-28 | 2018-07-27 | 浙江大学 | 一种应用于手掌x光片的多尺度手掌骨骼分割方法 |
CN108345875A (zh) * | 2018-04-08 | 2018-07-31 | 北京初速度科技有限公司 | 可行驶区域检测模型训练方法、检测方法和装置 |
CN108345875B (zh) * | 2018-04-08 | 2020-08-18 | 北京初速度科技有限公司 | 可行驶区域检测模型训练方法、检测方法和装置 |
WO2019238126A1 (zh) * | 2018-06-15 | 2019-12-19 | 北京市商汤科技开发有限公司 | 图像分割及分割网络训练方法和装置、设备、介质、产品 |
CN110633597A (zh) * | 2018-06-21 | 2019-12-31 | 北京京东尚科信息技术有限公司 | 一种可行驶区域检测方法和装置 |
CN110633597B (zh) * | 2018-06-21 | 2022-09-30 | 北京京东尚科信息技术有限公司 | 一种可行驶区域检测方法和装置 |
CN109002840A (zh) * | 2018-06-26 | 2018-12-14 | 北京纵目安驰智能科技有限公司 | 一种基于级联的语义分割方法、系统、终端和存储介质 |
WO2020007363A1 (zh) * | 2018-07-06 | 2020-01-09 | 京东数字科技控股有限公司 | 识别目标数量的方法、装置及计算机可读存储介质 |
CN108846385B (zh) * | 2018-07-10 | 2021-11-09 | 浪潮通用软件有限公司 | 基于卷积-反卷积神经网络的图像识别、校正方法和装置 |
CN108846385A (zh) * | 2018-07-10 | 2018-11-20 | 浪潮通用软件有限公司 | 基于卷积-反卷积神经网络的图像识别、校正方法和装置 |
CN109299656A (zh) * | 2018-08-13 | 2019-02-01 | 浙江零跑科技有限公司 | 一种车载视觉系统场景视深确定方法 |
US11724700B2 (en) | 2018-09-12 | 2023-08-15 | Huawei Technologies Co., Ltd. | Intelligent driving method and intelligent driving system |
CN110893860A (zh) * | 2018-09-12 | 2020-03-20 | 华为技术有限公司 | 一种智能驾驶方法及智能驾驶系统 |
CN111064905A (zh) * | 2018-10-17 | 2020-04-24 | 上海交通大学 | 面向自动驾驶的视频场景转换方法 |
CN111064905B (zh) * | 2018-10-17 | 2021-05-11 | 上海交通大学 | 面向自动驾驶的视频场景转换方法 |
CN109740441A (zh) * | 2018-12-10 | 2019-05-10 | 平安科技(深圳)有限公司 | 基于图像识别的目标检测方法、装置及终端设备 |
CN109657614B (zh) * | 2018-12-19 | 2023-02-03 | 沈阳天择智能交通工程有限公司 | 航拍道路交通事故现场勘查中道路自动识别方法 |
CN113286999A (zh) * | 2018-12-19 | 2021-08-20 | 阿科迪墨公司 | 用于分析即时检验结果的图像的系统和方法 |
CN109657614A (zh) * | 2018-12-19 | 2019-04-19 | 沈阳天择智能交通工程有限公司 | 航拍道路交通事故现场勘查中道路及车辆自动识别方法 |
CN109902600A (zh) * | 2019-02-01 | 2019-06-18 | 清华大学 | 一种道路区域检测方法 |
WO2020224244A1 (zh) * | 2019-05-07 | 2020-11-12 | 深圳云天励飞技术有限公司 | 一种景深图获取方法及装置 |
CN110478911A (zh) * | 2019-08-13 | 2019-11-22 | 苏州钛智智能科技有限公司 | 基于机器学习的智能游戏车无人驾驶方法及智能车、设备 |
CN111191654A (zh) * | 2019-12-30 | 2020-05-22 | 重庆紫光华山智安科技有限公司 | 道路数据生成方法、装置、电子设备及存储介质 |
US11562241B2 (en) | 2019-12-31 | 2023-01-24 | Beijing Baidu Netcom Science and Technology Co., Ltd | Data output method, data acquisition method, device, and electronic apparatus |
CN111477028A (zh) * | 2020-04-28 | 2020-07-31 | 北京百度网讯科技有限公司 | 用于生成信息的方法和装置 |
CN111985378A (zh) * | 2020-08-13 | 2020-11-24 | 中国第一汽车股份有限公司 | 道路目标的检测方法、装置、设备及车辆 |
CN113096172A (zh) * | 2021-03-22 | 2021-07-09 | 西安交通大学 | 一种iToF深度数据到原始raw数据的反向生成方法 |
CN113096172B (zh) * | 2021-03-22 | 2023-10-27 | 西安交通大学 | 一种iToF深度数据到原始raw数据的反向生成方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105488534B (zh) | 2018-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105488534A (zh) | 交通场景深度解析方法、装置及系统 | |
Li et al. | Deep neural network for structural prediction and lane detection in traffic scene | |
US11741368B2 (en) | Image segmentation | |
Kanagaraj et al. | Deep learning using computer vision in self driving cars for lane and traffic sign detection | |
CN110674874B (zh) | 基于目标精细组件检测的细粒度图像识别方法 | |
CN112183635A (zh) | 一种多尺度反卷积网络实现植物叶部病斑分割与识别方法 | |
Nguyen et al. | Hybrid deep learning-Gaussian process network for pedestrian lane detection in unstructured scenes | |
CN108230330B (zh) | 一种快速的高速公路路面分割和摄像机定位的方法 | |
CN112990282B (zh) | 一种细粒度小样本图像的分类方法及装置 | |
CN111242046B (zh) | 一种基于图像检索的地面交通标志识别方法 | |
CN112686242B (zh) | 一种基于多层聚焦注意力网络的细粒度图像分类方法 | |
CN114694039A (zh) | 一种遥感高光谱与激光雷达图像融合分类方法及装置 | |
Hoang et al. | Optimizing YOLO performance for traffic light detection and end-to-end steering control for autonomous vehicles in Gazebo-ROS2 | |
Wang et al. | Occluded vehicle detection with local connected deep model | |
Barodi et al. | An enhanced artificial intelligence-based approach applied to vehicular traffic signs detection and road safety enhancement | |
Yildiz et al. | Hybrid image improving and CNN (HIICNN) stacking ensemble method for traffic sign recognition | |
Alharbi et al. | Learning interpretation with explainable knowledge distillation | |
Rezaei et al. | An efficient method for license plate localization using multiple statistical features in a multilayer perceptron neural network | |
Luo et al. | Lane line detection algorithm based on improved UNet network | |
Langenberg | Deep Learning Metadata Fusion for Traffic Light to Lane Assignment | |
Pydipogu et al. | Robust lane detection and object tracking In relation to the intelligence transport system | |
WO2024134812A1 (ja) | 路面標示識別方法及び路面標示識別装置 | |
Aydin et al. | Traffic Sign Recognition System for Imbalanced Dataset. | |
Helmy et al. | Towards Safer Driving: ADAS Enhancements in Lane Keeping and Sign Detection | |
Chatterjee | Computer Vision and Machine Learning in Sustainable Mobility: The Case of Road Surface Defects |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |