CN109934119B - 调整车辆行驶方向方法、装置、计算机设备及存储介质 - Google Patents
调整车辆行驶方向方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN109934119B CN109934119B CN201910124097.XA CN201910124097A CN109934119B CN 109934119 B CN109934119 B CN 109934119B CN 201910124097 A CN201910124097 A CN 201910124097A CN 109934119 B CN109934119 B CN 109934119B
- Authority
- CN
- China
- Prior art keywords
- sample
- angle value
- neural network
- picture
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000013528 artificial neural network Methods 0.000 claims abstract description 83
- 238000006243 chemical reaction Methods 0.000 claims abstract description 25
- 238000012360 testing method Methods 0.000 claims description 58
- 238000012549 training Methods 0.000 claims description 56
- 238000013527 convolutional neural network Methods 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 16
- 238000000605 extraction Methods 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/02—Control of vehicle driving stability
- B60W30/045—Improving turning performance
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/18—Propelling the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/04—Traffic conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Theoretical Computer Science (AREA)
- Biomedical Technology (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Biophysics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种调整车辆行驶方向方法、装置、计算机设备及存储介质,应用于神经网络技术领域,用于解决现有自动驾驶转弯角度不准确的问题。本发明提供的方法包括:通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;从目标视频中等间隔提取视频帧,得到各个路况图片;按照各个路况图片在目标视频中的时间顺序,将各个路况图片依次输入至预先训练好的快速卷积神经网络,得到快速卷积神经网络依次输出的各个角度值,角度值是指目标车辆面对当前路况转弯所需的角度;根据预设的指令转换规则将各个角度值分别转换为各个控制指令;依次将各个控制指令发送至目标车辆的中控系统,使得目标车辆的中控系统按照控制指令调整目标车辆的行驶方向。
Description
技术领域
本发明涉及神经网络技术领域,尤其涉及调整车辆行驶方向方法、装置、计算机设备及存储介质。
背景技术
随着智能化技术的快速发展,自动驾驶已经成为当前科研的重点方向之一,尤其是在汽车驾驶领域中,自动驾驶技术将可以辅助甚至替代驾驶员驾驶汽车,大大减轻了驾驶员的负担,受到市场的热烈欢迎。
但是,目前自动驾驶汽车技术仍不成熟,尤其是在面对复杂路况时的车辆转弯上,常常出现转弯角度不准确或者错误的情况。因此,寻找一种能够准确控制汽车转弯的自动驾驶方法成为本领域技术人员亟需解决的问题。
发明内容
本发明实施例提供一种调整车辆行驶方向方法、装置、计算机设备及存储介质,以解决现有自动驾驶转弯角度不准确的问题。
一种调整车辆行驶方向方法,包括:
通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
从所述目标视频中等间隔提取各个视频帧作为各个路况图片;
按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照所述控制指令调整所述目标车辆的行驶方向。
一种调整车辆行驶方向装置,包括:
图像采集模块,用于通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
视频帧提取模块,用于从所述目标视频中等间隔提取各个视频帧作为各个路况图片;
路况图片输入模块,用于按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
指令转换模块,用于根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
指令发送模块,用于依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照所述控制指令调整所述目标车辆的行驶方向。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述调整车辆行驶方向方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述调整车辆行驶方向方法的步骤。
上述调整车辆行驶方向方法、装置、计算机设备及存储介质,首先,通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;然后,从所述目标视频中等间隔提取各个视频帧作为各个路况图片;接着,按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;再之,根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;最后,依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照控制指令调整所述目标车辆的行驶方向。可见,本发明利用预先训练好的快速卷积神经网络可以识别目标车辆前方路况,并及时输出角度值,然后将角度值转换为控制指令来控制目标车辆的行驶方向,可以准确控制目标车辆转弯,且提高了自动驾驶汽车时转弯控制的响应速度。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例中调整车辆行驶方向方法的一应用环境示意图;
图2是本发明一实施例中调整车辆行驶方向方法的一流程图;
图3是本发明一实施例中调整车辆行驶方向方法在一个应用场景下预先训练快速卷积神经网络的流程示意图;
图4是本发明一实施例中调整车辆行驶方向方法步骤205在一个应用场景下的流程示意图;
图5为本发明一实施例中快速卷积神经网络在一个应用场景下的结构示意图;
图6是本发明一实施例中调整车辆行驶方向方法在一个应用场景下自动采集和生成训练样本的流程示意图;
图7是本发明一实施例中调整车辆行驶方向装置在一个应用场景下的结构示意图;
图8是本发明一实施例中调整车辆行驶方向装置在另一个应用场景下的结构示意图;
图9是本发明一实施例中样本图片输入模块的结构示意图;
图10是本发明一实施例中计算机设备的一示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请提供的调整车辆行驶方向方法,可应用在如图1的应用环境中,其中,终端设备通过网络与服务器进行通信。其中,该终端设备可以但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,比如可以是装载车辆中控系统的设备。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一实施例中,如图2所示,提供一种调整车辆行驶方向方法,以该方法应用在图1中的服务器为例进行说明,包括如下步骤:
101、通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
本实施例中,可以预先在目标车辆上安装摄像头,比如安装在目标车辆的车头位置附近,摄像头的方向对准车辆前方,从而服务器可以通过摄像头实时采集目标车辆前方路况的图像,得到目标视频。
102、从所述目标视频中等间隔提取各个视频帧作为各个路况图片;
可以理解的是,该目标视频中的各个视频帧均为目标车辆前方路况的图像,这些图像包含了路况信息,因此,服务器需要从所述目标视频中等间隔提取视频帧,得到各个路况图片,以便提供给快速卷积神经网络进行识别。
需要说明的是,服务器在等间隔提取视频帧时,间隔提取的间隔时间可以根据实际使用情况确定,比如可以设定为0.5毫秒,即每0.5毫秒提取一个视频帧。优选地,由于目标车辆行驶速度越快,前方路况变动越快,反之,目标车辆行驶速度越慢,前方路快变动越慢。因此,为了保证提取到的各个路况图片能够及时地反应目标车辆的前方路况,服务器提取视频帧的间隔时间可以依据目标车辆的当前速度决定,其中,间隔时间与当前速度负相关,目标车辆的当前速度越快,则间隔时间越短。
103、按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
本实施例中,服务器可以预先训练好该快速卷积神经网络,该快速卷积神经网络可以识别输入的路况图片,依据路况图片中包含的路况信息输出对应的角度值,该角度值是指所述目标车辆面对当前路况转弯所需的角度。在自动驾驶中,目标车辆应当按照实际路况作出及时、准确的反应,并且应当按照实际遇到的路况的先后顺序来控制车辆,因此,服务器可以按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值。
为便于理解,下面将对该快速卷积神经网络进行详细描述。如图3所示进一步地,所述快速卷积神经网络通过以下步骤预先训练好:
201、获取通过采集测试车辆前方路况的图像得到的样本视频,以及与所述样本视频对应的针对所述测试车辆的控制日志;
202、从所述样本视频中等间距提取各个视频帧作为各个样本图片;
203、从所述控制日志中提取出与所述各个样本图片在时间上对应的各个控制指令;
204、根据预设的指令转换规则将所述各个控制指令转换为各个样本角度值;
205、针对每个样本图片,将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值;
206、以输出的所述训练角度值作为调整目标,调整所述快速卷积神经网络的参数,以最小化得到的所述训练角度值与所述每个样本图片对应的样本角度值之间的误差;
207、若所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件,则确定所述快速卷积神经网络已训练好。
对于上述步骤201,可以理解的是,可以预先采集测试车辆前方路况的图像得到的样本视频,例如,可以通过向多辆测试车辆分配摄像头,这些测试车辆平日驾驶时摄像头会记录测试车辆在行驶过程中前方路况,从而形成多个样本视频。同时,在形成样本视频的过程中,驾驶员会根据前方路况控制车辆形式,这个过程中可以通过测试车辆上预设的装置记录驾驶员控制测试车辆的控制日志,包括控制车辆的加减速、前进后退、转弯角度等信息。可知,不论是样本视频还是控制日志中均对应有系统时间,从而两者可以通过系统时间对应起来。例如,同一测试车辆上某个样本视频的系统时间为2018年2月2日9:00-10:00,某段控制日志的系统时间也为2018年2月2日9:00-10:00,因此这个样本视频与这段控制日志对应。
上述步骤202与上述步骤102同理,服务器可以从所述样本视频中等间距提取各个视频帧作为各个样本图片,此处不再赘述。
对于上述步骤203,可以理解的是,服务器在提取得到各个样本图片后,这些样本图片中每个样本图片包含的路况信息均不相同,驾驶员在驾驶测试车辆时可能采取不同的控制指令,为了训练该快速卷积神经网络,服务器需要将各个样本图片与控制日志中的控制指令对应起来,因此,服务器可以从所述控制日志中提取出与所述各个样本图片在时间上对应的各个控制指令。例如,假设某个样本图片的系统时间为2018年2月2日9:00,同一测试车辆的控制日志中的某条控制指令的系统时间也为2018年2月2日9:00,则该样本图片与该控制指令对应。
对于上述步骤204,服务器在提取出所述各个控制指令后,还需要根据预设的指令转换规则将所述各个控制指令转换为各个样本角度值,该指令转换规则记录了控制指令与角度值之间的对应关系,因此,服务器可以将控制指令转换为样本角度值。例如,假设该控制指令为“控制车辆右转30度”,则服务器可以将其转换得到样本角度值为“+30度”;若该控制指令为“控制车辆左转20度”,则服务器可以将其转换得到样本角度值为“-20度”。
对于上述步骤205,在训练快速卷积神经网络时,无需按照各个样本图片的次序进行,只需投入这些样本图片分别进行训练即可。因此,针对每个样本图片,服务器可以将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。需要说明的是,服务器在将样本图片投入快速卷积神经网络之前,可以先将样本图片转换为数据矩阵,再将该数据矩阵输入到该快速卷积神经网络中,这是因为,样本图片数字化后更有利于快速卷积神经网络的识别和训练。
在自动驾驶汽车的应用场景中,对服务器运算的处理效率要求较高,因此,在将样本图片或路况图片投入到该快速卷积神经网络,该快速卷积神经网络的运算效率越快越好。为此,本实施例中对现有的卷积神经网络的基础上改动得到该快速卷积神经网络,其对比现有的卷积神经网络来说,在卷积层的运算补充略有不同,但可以大幅减少网络计算量,从而提升了快速卷积神经网络的运算效率。下面以将该样本图片投入到该快速卷积神经网络后卷积层的计算过程展开描述。
更进一步地,如图4所示,所述快速卷积神经网络的卷积层设置有预设数量个二维卷积核和1*1卷积核,所述步骤205可以包括:
301、将每个样本向量与所述预设数量个二维卷积核分别进行卷积,得到各个卷积通道上的第一层卷积输出,所述每个样本向量是指所述每个样本图片在向量化后得到的向量;
302、将各个所述第一层卷积输出分别在各个所述卷积通道上与1*1卷积核进行卷积,得到第二层卷积输出;
303、将所述第二层卷积输出投入至所述快速卷积神经网络的全连接层,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。
对于上述步骤301,请参阅图5,假设该样本向量为5*5*2的矩阵,卷积时,共分为2个5*5的一维特征图(I1,I2),该快速卷积神经网络的卷积层中共2个3*3的二维卷积核(K1,K2),则I1与K1卷积得到第一层卷积输出F1,I2与K2卷积得到第一层卷积输出F2。
对于上述步骤302,假设共3个卷积通道,每个卷积通道上均设有1个1*1卷积核,分别为P1、P2和P3,因此,在步骤301得到第一层卷积输出F1和F2之后,F1和F2分别与P1、P2和P3进行卷积,从而得到第二层卷积输出O1、O2和O3。
对于上述步骤303,在得到第二层卷积输出O1、O2和O3之后,服务器即可将这些第二层卷积输出O1、O2和O3投入至所述快速卷积神经网络的全连接层,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。
从上述快速卷积神经网络的卷积层的运算可以看出,本实施例提供的快速卷积神经网络相比现有的卷积神经网络来说,计算量更少,运算效率更快,论证如下:
现有的卷积神经网络卷积层的运算过程中,假设面对N个通道L*L输入,使用M个C*C的N通道卷积核进行计算,网络的输出通道数为M,则其运算量为L*L*N*C*C*M。
本实施例提供的快速卷积神经网络卷积层的运算过程中,假设面对N个通道L*L输入,设置N个C*C的二维卷积核,逐通道卷积后,再使用N通道的1*1卷积核进行叠加,卷积核个数与现有卷积神经网络输出的通道数M一致,其运算量为:第一步的运算量为L*L*N*C*C,第二步的运算量为L*L*M*N*1*1。
可知,该快速卷积神经网络与现有的卷积神经网络在卷积层的计算量相比为:
(L*L*N*C*C+L*L*M*N*1*1)/(L*L*N*C*C*M)=1/M+1/(C*C)
因此,该快速卷积神经网络相比现有的卷积神经网络大大减少了计算量,如上述步骤301-303中所举例子,M=3,C=3,1/M+1/(C*C)=0.44。
对于上述步骤206,可以理解的是,在训练快速卷积神经网络的过程中,可以通过调整该快速卷积神经网络的参数,尽量使得该快速卷积神经网络输出的训练角度值与样本图片对应的样本角度值逼近,也即误差最小。假设当前的样本图片对应的样本角度值为-10度,而该样本图片投入该快速卷积神经网络后输出的训练角度值为-15度,则服务器可以通过调整该快速卷积神经网络的参数来使得训练角度值逐渐向-10度靠拢。
对于上述步骤207,在执行上述步骤205和步骤206,将所有样本图片均投入到该快速卷积神经网络之后,为了验证该快速卷积神经网络是否训练完成,服务器可以判断所述各个样本图片对应的训练角度值与样本角度值之间的误差是否满足预设条件,若满足,则说明该快速卷积神经网络中的各个参数已经调整到位,可以确定该快速卷积神经网络已训练完成;反之,若不满足,则说明该快速卷积神经网络还需要继续训练。
需要说明的是,服务器可以根据实际使用情况具体设置该预设条件,详细内容将在下面进行具体描述。
更进一步地,在步骤207之前,本方法还可以通过下述方式一或方式二来判定该快速卷积神经网络是否训练完成。
方式一包括下述步骤401-402:
401、判断所述每个样本图片对应的训练角度值与样本角度值之间的误差是否均小于预设的第一误差值;
402、若所述每个样本图片对应的训练角度值与样本角度值之间的误差均小于预设的第一误差值,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件。
对于方式一,可以理解的是,服务器可以根据实际使用情况设定第一误差值,比如3%,当所述每个样本图片对应的训练角度值与样本角度值之间的误差小于3%时,则说明该快速卷积神经网络在识别这些样本图片得到的结果与真实的样本角度值相差不多,误差在可以接受的范围之内,因此可以认为该快速卷积神经网络已训练完成。
方式二包括下述步骤403-404:
403、判断符合条件的样本图片在所有所述样本图片中的占比是否超过预设的比例阈值,所述符合条件的样本图片是指训练角度值与样本角度值之间的误差小于预设的第二误差值的样本图片;
404、若符合条件的样本图片在所有所述样本图片中的占比超过预设的比例阈值,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件。
对于上述方式二,可以理解的是,服务器可以根据实际使用情况设定第二误差值,训练角度值与样本角度值之间的误差小于该第二误差值的样本图片可以称为符合条件的样本图片,在所有样本图片中,如果符合条件的样本图片所占比例超过预设比例阈值,比如超过98%,则也说明该快速卷积神经网络在整体上识别这些样本图片得到的结果与真实的样本角度值相差不多,误差在可以接受的范围之内,因此可以认为该快速卷积神经网络已训练完成。
更进一步地,训练样本的采集:安装摄像头在车辆上,由专业车手驾驶,采集车手驾驶过程中的控制角度和对应的实时视频图像,从而自动生成大量的训练样本。因此,本实施例中,如图6所示,在步骤201之前,本方法还可以包括:
501、在测试车辆行驶的过程中,通过预先安装在测试车辆上的摄像头实时采集所述测试车辆前方路况的图像,得到各个样本视频;
502、请求所述测试车辆的中控系统,提取所述测试车辆的控制日志,所述控制日志包括驾驶员驾驶所述测试车辆时所产生的、用于控制所述测试车辆转弯的控制指令;
503、根据样本视频和控制日志上记录的系统时间建立所述各个样本视频与所述控制日志之间的对应关系。
对于上述步骤501,本实施例中,可以预先在各个测试车辆上安装摄像头,该摄像头的安装位置可以根据测试车辆的实际情况调整,只要使得该摄像头能否拍摄到测试车辆在行驶过程中的前方路况即可。一般来说,可以将摄像头安装在测试车辆的车内后视镜左侧或右侧,或者安装在中控系统的上方,将摄像头的拍摄角度对准正前方。
在一台测试车辆上安装好摄像头后,可以让驾驶员驾驶测试车辆行驶,为了样本的多样性,驾驶员在驾驶测试车辆过程中应当优选行驶经过不同路况的路段。这样,在测试车辆行驶的过程中,服务器即可通过预先安装在测试车辆上的摄像头实时采集所述测试车辆前方路况的图像,得到各个样本视频;
对于上述步骤502,另一方面,服务器除了获取各个样本视频以外,还需要获取驾驶员面对样本视频中的前方路况所作出的应对操作,也即对测试车辆的控制指令。因此,服务器可以通过与该测试车辆通信连接,向该测试车辆的中控系统发送提取请求,从而中控系统可以提取所述测试车辆的控制日志并提供给服务器。该控制日志包括了驾驶员驾驶所述测试车辆时所产生的、用于控制所述测试车辆转弯的控制指令。举例说明,某驾驶员驾驶测试车辆A行驶了一个小时,从而产生样本视频S,服务器获取该样本视频S,并且,请求该测试车辆A的中控系统提取出这一个小时内的控制日志C。
对于上述步骤503,可以理解的是,服务器在获取到样本视频和控制日志之后,可以根据样本视频和控制日志上记录的系统时间建立所述各个样本视频与所述控制日志之间的对应关系。承接上述举例,服务器获取到样本视频S,该样本视频S的系统时间为2018年2月1日19:00-20:00,控制日志C的系统时间为2018年2月1日19:00-20:00,两者系统时间相同,从而可以建立样本视频S与控制日志C的对应关系。
104、根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
可以理解的是,服务器可以预先设置指令转换规则,该指令转换规则与上述步骤204中所述的指令转换规则相同,该指令转换规则记录了控制指令与角度值之间的对应关系,因此,服务器可以依据该指令转换规则将所述各个角度值分别转换为各个控制指令。例如,若某个角度值为“+30度”,则服务器可以将其转换得到控制指令为“控制车辆右转30度”;若某个角度值为“-20度”,则服务器可以将其转换得到控制指令为“控制车辆左转20度”。可知,该指令转换规则中默认为角度值为正值,表示控制车辆右转,反之,角度值为负值,表示控制车辆左转。
105、依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照控制指令调整所述目标车辆的行驶方向。
可以理解的是,如上述步骤103中所述,在自动驾驶中,目标车辆应当按照实际路况作出及时、准确的反应,并且应当按照实际遇到的路况的先后顺序来控制车辆,因此,在得到各个控制指令之后,服务器应当依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照控制指令调整所述目标车辆的行驶方向。
本发明实施例中,首先,通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;然后,从所述目标视频中等间隔提取各个视频帧作为各个路况图片;接着,按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;再之,根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;最后,依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照控制指令调整所述目标车辆的行驶方向。可见,本发明利用预先训练好的快速卷积神经网络可以识别目标车辆前方路况,并及时输出角度值,然后将角度值转换为控制指令来控制目标车辆的行驶方向,可以准确控制目标车辆转弯,且提高了自动驾驶汽车时转弯控制的响应速度。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种调整车辆行驶方向装置,该调整车辆行驶方向装置与上述实施例中调整车辆行驶方向方法一一对应。如图7所示,该调整车辆行驶方向装置包括图像采集模块601、视频帧提取模块602、路况图片输入模块603、指令转换模块604和指令发送模块605。各功能模块详细说明如下:
图像采集模块601,用于通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
视频帧提取模块602,用于从所述目标视频中等间隔提取各个视频帧作为各个路况图片;
路况图片输入模块603,用于按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
指令转换模块604,用于根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
指令发送模块605,用于依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照控制指令调整所述目标车辆的行驶方向。
如图8所示,进一步地,所述快速卷积神经网络可以通过以下模块预先训练好:
样本视频采集模块606,用于获取通过采集测试车辆前方路况的图像得到的样本视频,以及与所述样本视频对应的针对所述测试车辆的控制日志;
样本图片提取模块607,用于从所述样本视频中等间距提取各个视频帧作为各个样本图片;
控制指令提取模块608,用于从所述控制日志中提取出与所述各个样本图片在时间上对应的各个控制指令;
样本角度值转换模块609,用于根据预设的指令转换规则将所述各个控制指令转换为各个样本角度值;
样本图片输入模块610,用于针对每个样本图片,将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值;
网络参数调整模块611,用于以输出的所述训练角度值作为调整目标,调整所述快速卷积神经网络的参数,以最小化得到的所述训练角度值与所述每个样本图片对应的样本角度值之间的误差;
训练完成确定模块612,用于若所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件,则确定所述快速卷积神经网络已训练好。
如图9所示,进一步地,所述快速卷积神经网络的卷积层设置有预设数量个二维卷积核和1*1卷积核,所述样本图片输入模块610可以包括:
第一卷积单元6101,用于将每个样本向量与所述预设数量个二维卷积核分别进行卷积,得到各个卷积通道上的第一层卷积输出,所述每个样本向量是指所述每个样本图片在向量化后得到的向量;
第二卷积单元6102,用于将各个所述第一层卷积输出分别在各个所述卷积通道上与1*1卷积核进行卷积,得到第二层卷积输出;
训练角度值输出单元6103,用于将所述第二层卷积输出投入至所述快速卷积神经网络的全连接层,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。
进一步地,所述调整车辆行驶方向装置还可以包括:
第一判断模块,用于判断所述每个样本图片对应的训练角度值与样本角度值之间的误差是否均小于预设的第一误差值;
第一确定模块,用于若所述第一判断模块的判断结果为是,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件;
或
第二判断模块,用于判断符合条件的样本图片在所有所述样本图片中的占比是否超过预设的比例阈值,所述符合条件的样本图片是指训练角度值与样本角度值之间的误差小于预设的第二误差值的样本图片;
第二确定模块,用于若所述第二判断模块的判断结果为是,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件。
进一步地,所述调整车辆行驶方向装置还可以包括:
摄像头采集模块,用于在测试车辆行驶的过程中,通过预先安装在测试车辆上的摄像头实时采集所述测试车辆前方路况的图像,得到各个样本视频;
控制日志提取模块,用于请求所述测试车辆的中控系统,提取所述测试车辆的控制日志,所述控制日志包括驾驶员驾驶所述测试车辆时所产生的、用于控制所述测试车辆转弯的控制指令;
关系建立模块,用于根据样本视频和控制日志上记录的系统时间建立所述各个样本视频与所述控制日志之间的对应关系。
关于调整车辆行驶方向装置的具体限定可以参见上文中对于调整车辆行驶方向方法的限定,在此不再赘述。上述调整车辆行驶方向装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储调整车辆行驶方向方法中涉及到的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种调整车辆行驶方向方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例中调整车辆行驶方向方法的步骤,例如图2所示的步骤101至步骤105。或者,处理器执行计算机程序时实现上述实施例中调整车辆行驶方向装置的各模块/单元的功能,例如图7所示模块601至模块605的功能。为避免重复,这里不再赘述。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述实施例中调整车辆行驶方向方法的步骤,例如图2所示的步骤101至步骤105。或者,计算机程序被处理器执行时实现上述实施例中调整车辆行驶方向装置的各模块/单元的功能,例如图7所示模块601至模块605的功能。为避免重复,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (6)
1.一种调整车辆行驶方向方法,其特征在于,包括:
通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
从所述目标视频中等间隔提取出各个视频帧作为各个路况图片;
按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照所述控制指令调整所述目标车辆的行驶方向;
所述快速卷积神经网络通过以下步骤预先训练好:
获取通过采集测试车辆前方路况的图像得到的样本视频,以及与所述样本视频对应的针对所述测试车辆的控制日志;
从所述样本视频中等间距提取各个视频帧作为各个样本图片;
从所述控制日志中提取出与所述各个样本图片在时间上对应的各个控制指令;
根据预设的指令转换规则将所述各个控制指令转换为各个样本角度值;
针对每个样本图片,将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值;
以输出的所述训练角度值作为调整目标,调整所述快速卷积神经网络的参数,以最小化得到的所述训练角度值与所述每个样本图片对应的样本角度值之间的误差;
若所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件,则确定所述快速卷积神经网络已训练好;
所述快速卷积神经网络的卷积层设置有预设数量个二维卷积核和1*1卷积核,所述针对每个样本图片,将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值包括:
将每个样本向量与所述预设数量个二维卷积核分别进行卷积,得到各个卷积通道上的第一层卷积输出,所述每个样本向量是指所述每个样本图片在向量化后得到的向量;
将各个所述第一层卷积输出分别在各个所述卷积通道上与1*1卷积核进行卷积,得到第二层卷积输出;
将所述第二层卷积输出投入至所述快速卷积神经网络的全连接层,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。
2.根据权利要求1所述的调整车辆行驶方向方法,其特征在于,在确定所述快速卷积神经网络已训练好之前,还包括:
判断所述每个样本图片对应的训练角度值与样本角度值之间的误差是否均小于预设的第一误差值;
若所述每个样本图片对应的训练角度值与样本角度值之间的误差均小于预设的第一误差值,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件;
或
判断符合条件的样本图片在所有所述样本图片中的占比是否超过预设的比例阈值,所述符合条件的样本图片是指训练角度值与样本角度值之间的误差小于预设的第二误差值的样本图片;
若符合条件的样本图片在所有所述样本图片中的占比超过预设的比例阈值,则确定所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件。
3.根据权利要求1或2所述的调整车辆行驶方向方法,其特征在于,在获取通过采集测试车辆前方路况的图像得到的样本视频,以及与所述样本视频对应的针对所述测试车辆的控制日志之前,还包括:
在测试车辆行驶的过程中,通过预先安装在测试车辆上的摄像头实时采集所述测试车辆前方路况的图像,得到各个样本视频;
请求所述测试车辆的中控系统,提取所述测试车辆的控制日志,所述控制日志包括驾驶员驾驶所述测试车辆时所产生的、用于控制所述测试车辆转弯的控制指令;
根据样本视频和控制日志上记录的系统时间建立所述各个样本视频与所述控制日志之间的对应关系。
4.一种调整车辆行驶方向装置,其特征在于,包括:
图像采集模块,用于通过摄像头实时采集目标车辆前方路况的图像,得到目标视频;
视频帧提取模块,用于从所述目标视频中等间隔提取各个视频帧作为各个路况图片;
路况图片输入模块,用于按照所述各个路况图片在所述目标视频中的时间顺序,将所述各个路况图片依次输入至预先训练好的快速卷积神经网络,得到所述快速卷积神经网络依次输出的各个角度值,所述角度值是指所述目标车辆面对当前路况转弯所需的角度;
指令转换模块,用于根据预设的指令转换规则将所述各个角度值分别转换为各个控制指令;
指令发送模块,用于依次将所述各个控制指令发送至所述目标车辆的中控系统,使得所述目标车辆的中控系统按照所述控制指令调整所述目标车辆的行驶方向;
所述快速卷积神经网络通过以下模块预先训练好:
样本视频采集模块,用于获取通过采集测试车辆前方路况的图像得到的样本视频,以及与所述样本视频对应的针对所述测试车辆的控制日志;
样本图片提取模块,用于从所述样本视频中等间距提取各个视频帧作为各个样本图片;
控制指令提取模块,用于从所述控制日志中提取出与所述各个样本图片在时间上对应的各个控制指令;
样本角度值转换模块,用于根据预设的指令转换规则将所述各个控制指令转换为各个样本角度值;
样本图片输入模块,用于针对每个样本图片,将所述每个样本图片分别输入至所述快速卷积神经网络,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值;
网络参数调整模块,用于以输出的所述训练角度值作为调整目标,调整所述快速卷积神经网络的参数,以最小化得到的所述训练角度值与所述每个样本图片对应的样本角度值之间的误差;
训练完成确定模块,用于若所述各个样本图片对应的训练角度值与样本角度值之间的误差满足预设条件,则确定所述快速卷积神经网络已训练好;
所述快速卷积神经网络的卷积层设置有预设数量个二维卷积核和1*1卷积核,所述样本图片输入模块包括:
第一卷积单元,用于将每个样本向量与所述预设数量个二维卷积核分别进行卷积,得到各个卷积通道上的第一层卷积输出,所述每个样本向量是指所述每个样本图片在向量化后得到的向量;
第二卷积单元,用于将各个所述第一层卷积输出分别在各个所述卷积通道上与1*1卷积核进行卷积,得到第二层卷积输出;
训练角度值输出单元,用于将所述第二层卷积输出投入至所述快速卷积神经网络的全连接层,得到所述快速卷积神经网络输出的、与所述每个样本图片对应的训练角度值。
5.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至3中任一项所述调整车辆行驶方向方法。
6.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至3中任一项所述调整车辆行驶方向方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910124097.XA CN109934119B (zh) | 2019-02-19 | 2019-02-19 | 调整车辆行驶方向方法、装置、计算机设备及存储介质 |
PCT/CN2019/091843 WO2020168660A1 (zh) | 2019-02-19 | 2019-06-19 | 调整车辆行驶方向方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910124097.XA CN109934119B (zh) | 2019-02-19 | 2019-02-19 | 调整车辆行驶方向方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109934119A CN109934119A (zh) | 2019-06-25 |
CN109934119B true CN109934119B (zh) | 2023-10-31 |
Family
ID=66985757
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910124097.XA Active CN109934119B (zh) | 2019-02-19 | 2019-02-19 | 调整车辆行驶方向方法、装置、计算机设备及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109934119B (zh) |
WO (1) | WO2020168660A1 (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110347043B (zh) * | 2019-07-15 | 2023-03-10 | 武汉天喻信息产业股份有限公司 | 一种智能驾驶控制方法及装置 |
CN113963307A (zh) * | 2020-07-02 | 2022-01-21 | 上海际链网络科技有限公司 | 目标上内容的识别及视频采集方法、装置、存储介质、计算机设备 |
CN114018275B (zh) * | 2020-07-15 | 2024-08-20 | 广州汽车集团股份有限公司 | 一种车辆在路口处的行驶控制方法、系统及计算机可读存储介质 |
CN112364695A (zh) * | 2020-10-13 | 2021-02-12 | 杭州城市大数据运营有限公司 | 一种行为预测方法、装置、计算机设备和存储介质 |
CN112766307B (zh) * | 2020-12-25 | 2024-08-13 | 北京迈格威科技有限公司 | 图像处理方法、装置、电子设备及可读存储介质 |
CN112785466A (zh) * | 2020-12-31 | 2021-05-11 | 科大讯飞股份有限公司 | 一种硬件的ai赋能方法、装置、存储介质及设备 |
CN113095266B (zh) * | 2021-04-19 | 2024-05-10 | 北京经纬恒润科技股份有限公司 | 一种角度识别方法、装置及设备 |
CN113537002B (zh) * | 2021-07-02 | 2023-01-24 | 安阳工学院 | 一种基于双模神经网络模型的驾驶环境评估方法及装置 |
CN114639037B (zh) * | 2022-03-03 | 2024-04-09 | 青岛海信网络科技股份有限公司 | 确定高速服务区的车辆饱和的方法及电子设备 |
CN117649779B (zh) * | 2023-10-29 | 2024-08-16 | 柳州市广恒科技有限公司 | 一种基于ar技术的停车管理方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1744292A2 (en) * | 2005-07-08 | 2007-01-17 | Van de Weijdeven, Everhardus Franciscus | Method for determining data of vehicles |
CN107633220A (zh) * | 2017-09-13 | 2018-01-26 | 吉林大学 | 一种基于卷积神经网络的车辆前方目标识别方法 |
CN108124485A (zh) * | 2017-12-28 | 2018-06-05 | 深圳市锐明技术股份有限公司 | 针对肢体冲突行为的告警方法、装置、存储介质及服务器 |
CN108491827A (zh) * | 2018-04-13 | 2018-09-04 | 腾讯科技(深圳)有限公司 | 一种车辆检测方法、装置及存储介质 |
CN108803604A (zh) * | 2018-06-06 | 2018-11-13 | 深圳市易成自动驾驶技术有限公司 | 车辆自动驾驶方法、装置以及计算机可读存储介质 |
CN109165562A (zh) * | 2018-07-27 | 2019-01-08 | 深圳市商汤科技有限公司 | 神经网络的训练方法、横向控制方法、装置、设备及介质 |
CN109204308A (zh) * | 2017-07-03 | 2019-01-15 | 上海汽车集团股份有限公司 | 车道保持算法的确定方法、车道保持的控制方法及系统 |
-
2019
- 2019-02-19 CN CN201910124097.XA patent/CN109934119B/zh active Active
- 2019-06-19 WO PCT/CN2019/091843 patent/WO2020168660A1/zh active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1744292A2 (en) * | 2005-07-08 | 2007-01-17 | Van de Weijdeven, Everhardus Franciscus | Method for determining data of vehicles |
CN109204308A (zh) * | 2017-07-03 | 2019-01-15 | 上海汽车集团股份有限公司 | 车道保持算法的确定方法、车道保持的控制方法及系统 |
CN107633220A (zh) * | 2017-09-13 | 2018-01-26 | 吉林大学 | 一种基于卷积神经网络的车辆前方目标识别方法 |
CN108124485A (zh) * | 2017-12-28 | 2018-06-05 | 深圳市锐明技术股份有限公司 | 针对肢体冲突行为的告警方法、装置、存储介质及服务器 |
CN108491827A (zh) * | 2018-04-13 | 2018-09-04 | 腾讯科技(深圳)有限公司 | 一种车辆检测方法、装置及存储介质 |
CN108803604A (zh) * | 2018-06-06 | 2018-11-13 | 深圳市易成自动驾驶技术有限公司 | 车辆自动驾驶方法、装置以及计算机可读存储介质 |
CN109165562A (zh) * | 2018-07-27 | 2019-01-08 | 深圳市商汤科技有限公司 | 神经网络的训练方法、横向控制方法、装置、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109934119A (zh) | 2019-06-25 |
WO2020168660A1 (zh) | 2020-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109934119B (zh) | 调整车辆行驶方向方法、装置、计算机设备及存储介质 | |
US11003893B2 (en) | Face location tracking method, apparatus, and electronic device | |
CN111507172B (zh) | 通过预测周围物体移动支持安全的自动驾驶的方法和装置 | |
CN110136222B (zh) | 虚拟车道线生成方法、装置及系统 | |
US20220277558A1 (en) | Cascaded Neural Network-Based Attention Detection Method, Computer Device, And Computer-Readable Storage Medium | |
WO2021196873A1 (zh) | 车牌字符识别方法、装置、电子设备和存储介质 | |
WO2021134325A1 (zh) | 基于无人驾驶技术的障碍物检测方法、装置和计算机设备 | |
US11505187B2 (en) | Unmanned lane keeping method and device, computer device, and storage medium | |
WO2021184564A1 (zh) | 基于图像的事故定责方法、装置、计算机设备和存储介质 | |
CN113343873B (zh) | 信号灯识别方法、装置、设备、介质及产品 | |
EP3710993B1 (en) | Image segmentation using neural networks | |
WO2020125138A1 (zh) | 一种物体碰撞预测方法及装置 | |
CN112026782A (zh) | 一种基于开关式深度学习网络模型的自动驾驶决策方法及系统 | |
CN109584299A (zh) | 一种定位方法、定位装置、终端及存储介质 | |
CN111383455A (zh) | 交通路口对象流量统计方法、装置、计算机设备和介质 | |
CN111814667A (zh) | 一种智能路况识别方法 | |
US20210326619A1 (en) | Image recognition processing method and apparatus | |
CN114051116A (zh) | 一种驾考车辆的视频监控方法、装置以及系统 | |
CN110719487B (zh) | 视频预测方法和装置、电子设备及车辆 | |
CN112109729A (zh) | 用于车载系统的人机交互方法、装置和系统 | |
CN113824892B (zh) | 图像采集方法、装置、设备及存储介质 | |
WO2021147365A1 (zh) | 一种图像处理模型训练方法及装置 | |
EP3817374A1 (en) | Method, apparatus and system for adjusting field of view of observation, and storage medium and mobile apparatus | |
CN113596369A (zh) | 多终端协同执法记录方法 | |
KR102371588B1 (ko) | 영상기반 장애물 인식 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |