CN114822169A - 一种教练车驾驶辅助练习方法及装置 - Google Patents

一种教练车驾驶辅助练习方法及装置 Download PDF

Info

Publication number
CN114822169A
CN114822169A CN202210484120.8A CN202210484120A CN114822169A CN 114822169 A CN114822169 A CN 114822169A CN 202210484120 A CN202210484120 A CN 202210484120A CN 114822169 A CN114822169 A CN 114822169A
Authority
CN
China
Prior art keywords
learner
field
point
driven vehicle
exercise
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210484120.8A
Other languages
English (en)
Other versions
CN114822169B (zh
Inventor
巩荣芬
刘淑明
储茂祥
王莹
杨永辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Science and Technology Liaoning USTL
Original Assignee
University of Science and Technology Liaoning USTL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Science and Technology Liaoning USTL filed Critical University of Science and Technology Liaoning USTL
Priority to CN202210484120.8A priority Critical patent/CN114822169B/zh
Publication of CN114822169A publication Critical patent/CN114822169A/zh
Application granted granted Critical
Publication of CN114822169B publication Critical patent/CN114822169B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/16Control of vehicles or other craft
    • G09B19/167Control of land vehicles
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Abstract

本发明提供一种教练车驾驶辅助练习方法及装置,包括:步骤1:根据场地进行系统初始设置;步骤2:在场地图像上建立坐标系,自动生成场地关键点和练习路线的驾驶辅助练习信息;步骤3:从场地图像中获取教练车的初始位置;步骤4:动态跟踪运动的教练车,确定教练车的车身中心坐标和后轴中心坐标信息;步骤5:根据教练车运动方向和练习路线切线方向自动生成偏离角度的驾驶辅助练习信息;步骤6:根据场地关键点、练习路线和偏离角度生成教练车的驾驶辅助提示信息,并进行语音提示;步骤7:判断是否切换练习项目的场地。为科目二的倒车入库、侧方停车、曲线行驶、直角转弯和坡道定点共五个练习项目的场地提供教练车驾驶辅助练习功能。

Description

一种教练车驾驶辅助练习方法及装置
技术领域
本发明涉及模式识别技术领域,特别涉及一种教练车驾驶辅助练习方法及装置。
随着人口增加,私家车的数量逐年增加。2021年全国机动车保有量3.95亿辆,比2020年增加2350万辆,增长6.32%。生活中,私家车已经成为了必备的代步工具。据公安部发布2021年全国驾驶人数据,新领证驾驶人2750万人,同比增长23.25%。从数据集可以看出,人们不可避免地要进行驾驶证的考试。然而在驾校学习过程中,一方面存在教练少、学员多的情况,导致教练不能照顾到每一位学员,直接影响到学员的练习进度和效果;另一方面学员在学习的过程中难以直观的理解教练传授的驾驶技巧。学员的驾驶练习包括四个科目,其中科目二的驾驶练习最容易出现上述的情况。公开号为CN111667742A的中国专利公开的一种教练车智能辅助训练方法及系统,提供了一种无教练指导情况下的教练车驾驶辅助练习方法。但是该专利存在一些不足:练习路线是预设的,造成练习路线对于不同的教练车和练习项目场地的自适应性差,不利于推广应用;未给出驾驶过程中的起始、结束、方向盘打满操作等场地关键点信息,不利于学员对练车路线关键位置的驾车练习。
发明内容
为了解决背景技术提出的技术问题,本发明提出了一种教练车驾驶辅助练习方法及装置,驾校场地的摄像头实时监控学员的驾驶练习过程,学员从教练车驾驶室的触摸显示屏上实时观察自己的驾驶路线,并可通过触摸显示屏上显示的场地关键点、练习路线等驾驶辅助练习信息进行驾驶练习,又可通过语音提示的驾驶辅助练习信息进行驾驶练习。本发明重点提供一种训练项目场地的关键点和练习路线的自动实现方法,提供一种教练车偏离角度的自动实现方法,根据教练车参数和场地参数自动生成驾驶辅助练习信息,增强了驾驶辅助练习信息对教练车和练习项目场地的自适应性,有利于教练车驾驶辅助练习方法及装置的推广应用;实现了教练车的实时跟踪和跟踪框的可倾斜,提高了教练车位置信息的准确性。本发明为科目二的倒车入库、侧方停车、曲线行驶、直角转弯和坡道定点共五个练习项目的场地提供教练车驾驶辅助练习功能。
为了达到上述目的,本发明采用以下技术方案实现:
一种教练车驾驶辅助练习方法,包括如下步骤:
步骤1:根据场地进行系统初始设置;
步骤2:在场地图像上建立坐标系,自动生成场地关键点和练习路线的驾驶辅助练习信息;
步骤3:从场地图像中获取教练车的初始位置;
步骤4:动态跟踪运动的教练车,确定教练车的车身中心坐标和后轴中心坐标信息;
步骤5:根据教练车运动方向和练习路线切线方向自动生成偏离角度的驾驶辅助练习信息;
步骤6:根据场地关键点、练习路线和偏离角度生成教练车的驾驶辅助提示信息,并进行语音提示;
步骤7:判断是否切换练习项目的场地,如果是则转到步骤1,否则转到步骤4。
进一步,所述的步骤1初始设置,步骤如下:
步骤1-1:根据对应的场地调用场地摄像头;
步骤1-2:根据触摸显示屏显示的场地图像调整摄像头的方向和焦距;
步骤1-3:根据实际驾驶的教练车选择教练车的模板图像,从数据库中读取教练车的模板图像数据。
进一步,所述的步骤2生成场地关键点和练习路线,步骤如下:
步骤2-1:读取摄像头采集的场地图像;
步骤2-2:根据场地标线矫正图像的畸变,获得矫正后的场地图像;
步骤2-3:在矫正后的场地图像上标定坐标系原点的位置,并在原点处建立坐标系,将原点与坐标系显示在触摸显示屏上;
步骤2-4:根据教练车参数、场地参数在坐标系中生成关键点坐标,将关键点显示在触摸显示屏上;
步骤2-5:根据教练车参数、场地参数和关键点坐标在坐标系中生成练习路线,将练习路线显示在触摸显示屏上。
进一步所述的步骤2-2矫正场地图像过程如下:
根据场地标线颜色是黄色的特征筛选出图像中的黄色像素点,使用传统的轮廓检测算法获得黄色标线的轮廓数据,根据轮廓数据确定轮廓的最小外接四边形,获取最小外接四边形的四顶点,利用传统的透视变换算法矫正四个顶点,获得矫正后的场地图像。
进一步,所述的步骤2-3坐标系原点包括:
科目二有五个练习项目的场地,五个场地的坐标系原点是不同的;
倒车入库场地的坐标系原点为车库入口的中心点,侧方停车场地的坐标系原点为侧方库的右边拐角点,曲线行驶场地的坐标系原点为两个弯道斜街处的中间点,直角转弯场地的坐标系原点为直角方向两行车道中心线的交点,坡道定点场地的坐标系原点为桩杆线与右边缘线的交点。
进一步,所述的步骤2-4生成关键点坐标过程如下:
从数据库中读取教练车和场地的参数,教练车的参数包括车身长度Vl、车身宽度Vw、车身轴距L、车身轴宽W、车辆方向最大转弯角β,倒车入库场地的参数有车库深度Rh、车库宽度Rw、行车道宽Rx、控制线距离Rk,侧方停车场地的参数有车位长度Pl、车位宽度Pw、行车道宽Px,曲线行驶场地的参数有弯道半径Tr,直角转弯场地的参数有行车道宽Qx、行车道长Ql,坡道定点场地的参数有定点坡长Sl
根据教练车和场地的参数计算教练车后轴中心的转弯半径R,如下:
Figure BDA0003628930410000031
科目二有五个练习项目的场地,在坐标系中生成的五个场地关键点坐标是不同的,并且在降低教练车压线风险的原则上确定关键点坐标与场地标线之间的最优距离;
倒车入库场地的关键点有AV(xV1,yV1)、BV(xV2,yV2)、CV(xV3,yV3)、DV(xV4,yV4)、EV(xV5,yV5)和FV(xV6,yV6),AV(xV1,yV1)定义为左侧入库起始点和左侧出库结束点,BV(xV2,yV2)定义为左测入库方向盘左打满点和左测出库方向盘回正点,CV(xV3,yV3)定义为右测入库方向盘右打满点和右测出库方向盘回正点,DV(xV4,yV4)定义为右侧入库起始点和右侧出库结束点,EV(xV5,yV5)定义为入库方向盘回正点、左测出库方向盘左打满点和右测出库方向盘右打满点,FV(xV6,yV6)定义为入库结束点和出库起始点;
根据教练车和场地的参数生成倒车入库场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000032
Figure BDA0003628930410000033
Figure BDA0003628930410000034
Figure BDA0003628930410000041
Figure BDA0003628930410000042
Figure BDA0003628930410000043
侧方停车场地的关键点有AP(xP1,yP1)、BP(xP2,yP2)、CP(xP3,yP3)、DP(xP4,yP4)和EP(xP5,yP5),AP(xP1,yP1)定义为入侧方位结束点和出侧方位起始点,BP(xP2,yP2)定义为入侧方位方向盘左打满点和出侧方位方向盘回正点,CP(xP3,yP3)定义为入侧方位方向盘回正点和出侧方位方向盘右打满点,DP(xP4,yP4)定义为入侧方位方向盘右打满点和出侧方位方向盘回正点,EP(xP5,yP5)定义为入侧方位起始点和出侧方位结束点;
根据教练车和场地的参数生成侧方停车场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000044
Figure BDA0003628930410000045
Figure BDA0003628930410000046
Figure BDA0003628930410000047
Figure BDA0003628930410000048
曲线行驶场地的关键点有AT(xT1,yT1)、BT(xT2,yT2)和O(0,0),AT(xT1,yT1)定义为入弯道起始点和方向盘左打点,BT(xT2,yT2)定义为出弯道结束点,O(0,0)定义为方向盘切换右打点;
根据教练车和场地的参数生成曲线行驶场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000049
Figure BDA00036289304100000410
直角转弯场地的关键点有AQ(xQ1,yQ1)、BQ(xQ2,yQ2)、CQ(xQ3,yQ3)和DQ(xQ4,yQ4),AQ(xQ1,yQ1)定义为入直角起始点,BQ(xQ2,yQ2)定义为入直角方向盘左打满点,CQ(xQ3,yQ3)定义为出直角方向盘回正点,DQ(xQ4,yQ4)定义为出直角结束点;
根据教练车和场地的参数生成直角转弯场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000051
(xQ2,yQ2)=(-R,0)
(xQ3,yQ3)=(0,R)
Figure BDA0003628930410000052
半坡定点场地的关键点有AS(xS1,yS1)和BS(xS2,yS2),AS(xS1,yS1)定义为入半坡起始点,BS(xS2,yS2)定义为定点停车点;
根据教练车和场地的参数生成半坡定点场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000053
Figure BDA0003628930410000054
进一步,所述的步骤2-5生成练习路线过程如下:
科目二有五个练习项目的场地,在坐标系中生成的五个场地练习路线是不同的,并且在降低教练车压线风险的原则上确定练习路线与场地标线之间的最优距离;
倒车入库场地的左侧是以AV-BV-EV-FV为练习路线,倒车入库场地的右侧是以DV-CV-EV-FV为练习路线;
根据教练车参数、场地参数和关键点坐标生成倒车入库场地的练习路线,倒车入库场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000055
侧方停车场地是以EP-DP-CP-BP-AP为练习路线;
根据教练车参数、场地参数和关键点坐标生成侧方停车场地的练习路线,侧方停车场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000061
曲线行驶场地是以AT-O-BT为练习路线;
根据教练车参数、场地参数和关键点坐标生成曲线行驶场地的练习路线,曲线行驶场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000062
直角转弯场地是以AQ-BQ-CQ-DQ为练习路线;
根据教练车参数、场地参数和关键点坐标生成直角转弯场地的练习路线,直角转弯场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000063
坡道定点场地是以AS-BS为练习路线;
根据教练车参数、场地参数和关键点坐标生成坡道定点场地的练习路线,坡道定点场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
y=yS1,xS1≤x≤xS2
进一步,所述的步骤3获取教练车的初始位置过程如下:
从摄像头采集的场地图像中搜索区域图像,通过传统的SIFT特征匹配算法计算模板图像与区域图像的匹配度,将最大匹配度的区域图像确定为教练车的初始图像,通过传统的透视变换算法对教练车的初始图像进行矫正,在坐标系中确定矫正后教练车的初始图像位置,将初始图像位置确定为教练车的初始跟踪框位置。
进一步,所述的步骤4动态跟踪教练车过程如下:
调用传统的DSST目标跟踪模型,输入摄像头采集的场地图像和教练车的初始跟踪框位置,在坐标系中获得教练车的新跟踪框位置;
更新初始跟踪框位置,重复上述的过程,实现动态跟踪教练车。
针对教练车跟踪框中的图像调用传统的轮廓检测算法,提取教练车的最外侧轮廓,根据外侧轮廓确定教练车的可倾斜跟踪框,依据可倾斜跟踪框在坐标系中的位置信息确定教练车的车身中心坐标和后轴中心坐标;
可倾斜跟踪框完全贴合教练车的外轮廓,确定的教练车位置更为准确。
进一步,所示的步骤5生成偏离角度过程如下:
根据当前帧场地图像中的车身中心坐标和上一帧场地图像中的车身中心坐标,生成教练车的运动方向角度α1,计算公式如下:
Figure BDA0003628930410000071
(xt1,yt1)为当前帧场地图像中教练车的车身中心坐标,(xt1-1,yt1-1)为上一帧场地图像中教练车的车身中心坐标;
根据当前帧场地图像中的后轴中心坐标和上一帧场地图像中的后轴中心坐标,生成教练车的运动方向角度α2,如下:
Figure BDA0003628930410000072
(xt2,yt2)为当前帧场地图像中教练车的后轴中心坐标,(xt2-1,yt2-1)为上一帧场地图像中教练车的后轴中心坐标;
科目二有五个练习项目的场地,在坐标系中生成的五个场地练习路线切线方向角度是不同的;
生成倒车入库场地的练习路线切线方向角度αV,计算公式如下:
Figure BDA0003628930410000073
生成侧方停车场地的练习路线切线方向角度αP,计算公式如下:
Figure BDA0003628930410000074
生成曲线行驶场地的练习路线切线方向角度αT,计算公式如下:
Figure BDA0003628930410000081
生成直角转弯场地的练习路线切线方向角度αQ,计算公式如下:
Figure BDA0003628930410000082
生成坡道定点场地的练习路线切线方向角度αS,计算公式如下:
αS=0°,xS1≤xt1≤xS2
科目二有五个练习项目的场地,在坐标系中五个场地的教练车运动方向偏离练习路线切线方向的角度是不同的;
倒车入库场地的偏离角度为α=a2V,侧方停车场地的偏离角度为α=a2P,曲线行驶场地的偏离角度为α=a1T,直角转弯场地的偏离角度为α=a2Q,坡道定点场地的偏离角度为α=a1S
对偏离角度的象限进行调整,如下:
Figure BDA0003628930410000083
进一步,所述步骤6语音提示过程如下:
科目二有五个练习项目的场地,当学员驾驶教练车经过五个场地的关键点坐标位置时语音提示是不同的,系统根据步骤2-4中五个场地的关键点定义进行语音提示,用于辅助学员对驾驶过程中起始、结束、方向盘操作等关键点的练习;
偏离角度反应了教练车运动方向偏离练习路线切线方向的程度,用于辅助学员驾驶练习最优路线,根据偏离角度语音提示学员驾驶的教练车是否偏离练习路线;
并且,当偏离角度α大于5度时且正向行驶时提示向右微打方向盘,当偏离角度α大于5度时且倒向行驶时提示向左微打方向盘,当偏离角度α小于-5度且正向行驶时提示向左微打方向盘,当偏离角度α小于-5度且倒向行驶时提示向右微打方向盘。
进一步,所述的步骤7切换场地过程如下:
如果学员需要切换练习项目的场地,会在触摸显示屏的显示窗口选择场地,系统转到步骤1;
如果学员未选择新的场地,系统转到步骤4。
一种教练车驾驶辅助练习装置,包括以下模块:
摄像头模块,由五个摄像头组成,用于实现实时采集五个练习项目的场地图像,并具有WIFI数据传输、变焦倍数可调、云台方向可调功能;
显示模块,由触摸显示屏组成,用于实时显示窗口布局、场地图像、教练车、跟踪框和驾驶辅助练习信息;
练习信息生成模块,用于生成场地坐标系、场地关键点和练习路线的驾驶辅助练习信息;
目标跟踪模块,包含特征匹配模型、目标跟踪模型和轮廓检测模型,用于动态跟踪教练车、生成可倾斜跟踪框和确定教练车实时位置信息;
练习信息提示模块,用于生成偏离角度的驾驶辅助练习信息,并根据场地关键点和偏离角度语音提示教练车操作的信息;
数据库模块,用于保存教练车驾驶辅助练习方法的程序、数据和参数;
嵌入式模块,用于教练车驾驶辅助练习装置的驱动和运行教练车驾驶辅助练习方法的程序;
嵌入式模块与显示模块触摸显示屏相连,嵌入式模块与摄像头模块的摄像头通过WIFI无线连接;
嵌入式模块运行练习信息生成模块,实现场地坐标系、场地关键点和练习路线的自动生成;
嵌入式模块运行跟踪模块实现教练车的动态跟踪、跟踪框的实时生成和教练车位置信息的实时更新;
嵌入式模块运行练习信息提示模块,完成偏离角度的自动生成,语音提示教练车操作的信息;
嵌入式模块运行数据库模块,实现对教练车驾驶辅助练习的程序、数据和参数的保存;
嵌入式模块为跟踪模块、练习信息生成模块和练习信息提示模块提供运算能力。
与现有技术相比,本发明的有益效果是:
1)本发明的一种教练车驾驶辅助练习方法及装置,提供了根据教练车参数和场地参数自动生成五个训练项目场地的关键点和练习路线的方法,提供了根据教练车参数、场地参数和关键点坐标自动生成五个训练项目场地的教练车偏离角度的方法,增强了练习路线、场地关键点和偏离角度等驾驶辅助练习信息对教练车和练习项目场地的自适应性,有利于教练车驾驶辅助练习方法及装置的推广应用;
2)本发明的一种教练车驾驶辅助练习方法及装置,实现了五种练习项目场地的智能化教练车驾驶辅助练习,实现了场地关键点和练习路线的驾驶辅助练习信息的可视化观察,实现了场地关键点、练习路线偏离、方向盘操作等驾驶辅助练习信息的语音式提示;
3)本发明的一种教练车驾驶辅助练习方法及装置,通过目标跟踪模块结合特征匹配模型、目标跟踪模型和轮廓检测模型,实现了教练车跟踪框的可倾斜和实时跟踪,提高了教练车位置信息的准确性。
附图说明
图1是本发明实施例提供的一种教练车驾驶辅助练习方法的主流程图;
图2是本发明实施例提供的一种初始设置的子流程图;
图3是本发明实施例提供的一种生成场地关键点和练车路线的子流程图;
图4是本发明实施例提供的一种窗口1布局示意图;
图5是本发明实施例提供的一种窗口2布局示意图;
图6是本发明实施例提供的一种窗口3布局示意图;
图7是本发明实施例提供的一种窗口4布局示意图;
图8是本发明实施例提供的一种含五个练习项目的场地布局示意图;
图9是本发明实施例提供的一种教练车相关尺寸示意图;
图10是本发明实施例提供的一种倒车入库场地示意图;
图11是本发明实施例提供的一种侧方停车场地示意图;
图12是本发明实施例提供的一种曲线行驶场地示意图;
图13是本发明实施例提供的一种直角转弯场地示意图;
图14是本发明实施例提供的一种坡道定点场地示意图;
图15是本发明实施例提供的一种教练车驾驶辅助练习装置的功能模块图。
具体实施方式
以下结合附图对本发明提供的具体实施方式进行详细说明。
图1-图3流程图中,标号的第1个字母S表示步骤,第2个数字的值1表示流程图,第3个数字表示主流程图的步骤,第4个数字表示子流程图的步骤。
本发明的一种教练车驾驶辅助练习方法,主流程如图1所示,包括如下步骤:
S1.1.0:初始设置。
当学员进入教练车时会在窗口1选择场地,或者学员切换场地时也会在窗口1选择场地;系统会根据场地进行初始设置,包括调用场地的摄像头、调整摄像头的方向和焦距和选择教练车的模板图像。
所述的S1.1.0初始设置,子流程如图2所示,步骤如下:
S1.1.1:调用场地摄像头。
根据学员在窗口1选择的场地,系统通过WIFI向相应场地的摄像头发送调用摄像头指令;当摄像头处于空闲状态时,摄像头给系统反馈空闲指令;系统收到摄像头反馈的指令后,提示是否调用摄像头;学员点击确认后,系统进入窗口2。
所述的S1.1.1窗口1包括:
如图4所示,触摸显示屏上显示窗口1;场地选择区域包括倒车入库、侧方停车、曲线行驶、直角转弯和坡道定点共五个组件,用于选择练习项目的场地;确认组件用于进入窗口2;窗口1的提示区域用于显示提示信息。
S1.1.2:调整摄像头的方向和焦距。
进入窗口2后,系统会通过WIFI接收摄像头采集的场地图像,并在窗口2中显示;学员检查窗口2中显示的场地图像;当窗口2没有全面显示场地图像时,学员需要通过窗口2中的旋钮组件调整摄像头的方向,直到窗口2全面显示场地图像为止;拖动窗口2中的滑块组件调整摄像头的焦距,直到清晰显示场地图像为止;调整摄像头完成后,学员通过点击确认进入窗口3。
摄像头1采集的是倒车入库的场地图像,摄像头2采集的是侧方停车的场地图像,摄像头3采集的是曲线行驶的场地图像,摄像头4采集的是直角转弯的场地图像,摄像头5采集的是坡道定点的场地图像。
所述的S1.1.2窗口2包括:
如图5所示,触摸显示屏上显示窗口2;图像显示区域用于显示摄像头采集的场地图像;旋钮组件用于调整摄像头的方向,滑块组件用于调整摄像头的焦距,确认组件用于进入窗口3,返回组件用于退回窗口1。
S1.1.3:选择教练车的模板图像。
进入窗口3后,系统自动选择教练车的模板图像,并框选出推荐的教练车模板图像;学员检查窗口3框选的教练车模板图像是否是当前实际驾驶的教练车;如果模板图像是当前教练车,学员需要点击确认,系统进入窗口4;如果模板图像不是当前教练车,学员需要选择窗口3中显示的教练车模板图像,选择完成后学员点击确认,系统从数据库中读取教练车的模板图像数据,进入窗口4。
所述的S1.1.3窗口3包括:
如图6所示,触摸显示屏上显示窗口3;模板选择区域包括6个不同的教练车模板图像;教练车的外框表示选中了一个教练车模板图像;确认组件于进入窗口4,返回组件用于退回窗口2。
所述的S1.1.3窗口4包括:
如图7所示,触摸显示屏上显示窗口4;图像显示区域用于显示场地图像;返回组件用于退回窗口3。
S1.2.0:生成场地关键点和练习路线。
在摄像头采集的场地图像上建立坐标系、生成场地关键点坐标和生成练习最优路线,用于学员驾驶练习场地关键点和最优路线的可视化观察。
所述的S1.2.0生成场地关键点和练习路线,子流程如图3所示,步骤如下:
S1.2.1:读取摄像头采集的场地图像。
S1.2.2:矫正场地图像。
根据场地标线矫正图像的畸变,获得矫正后的场地图像。
所述的S1.2.2矫正场地图像过程如下:
根据场地标线颜色是黄色的特征筛选出图像中的黄色像素点,使用传统的轮廓检测算法获得黄色标线的轮廓数据;根据轮廓数据确定轮廓的最小外接四边形,获取最小外接四边形的四顶点;利用传统的的透视变换算法矫正四个顶点,获得矫正后的场地图像。
S1.2.3:建立坐标系。
在矫正后的场地图像中上标定坐标系原点O的位置;根据原点位置建立直角坐标系,以原点的水平方向作为X轴,竖直方向作为Y轴;将原点与坐标系显示在触摸显示屏上。
所述的S1.2.3坐标系原点包括:
科目二有五个练习项目的场地,五个场地的坐标系原点是不同的。
倒车入库场地的坐标系原点为车库入口的中心点,侧方停车场地的坐标系原点为侧方库的右边拐角点,曲线行驶场地的坐标系原点为两个弯道斜街处的中间点,直角转弯场地的坐标系原点为直角方向两行车道中心线的交点,坡道定点场地的坐标系原点为桩杆线与右边缘线的交点。
S1.2.4:生成关键点坐标。
根据教练车参数、场地参数在坐标系中生成关键点坐标的驾驶辅助练习信息,关键点坐标用于辅助学员对驾驶过程中起始、结束、方向盘操作等关键点的练习;将关键点显示在触摸显示屏上。
所述的S1.2.4计算关键点坐标过程如下:
从数据库中读取教练车和场地的参数;如图9所示,教练车的参数包括车身长度Vl、车身宽度Vw、车身轴距L、车身轴宽W、车辆方向最大转弯角β;如图10所示,倒车入库场地的参数有车库深度Rh、车库宽度Rw、行车道宽Rx、控制线距离Rk;如图11所示,侧方停车场地的参数有车位长度Pl、车位宽度Pw、行车道宽Px;如图12所示,曲线行驶场地的参数有弯道半径Tr;如图13所示,直角转弯场地的参数有行车道宽Qx、行车道长Ql;如图14所示,坡道定点场地的参数有定点坡长Sl
根据教练车和场地的参数计算教练车后轴中心的转弯半径参数R,如下:
Figure BDA0003628930410000131
科目二有五个练习项目的场地,在坐标系中生成的五个场地关键点坐标是不同的,并且在降低教练车压线风险的原则上确定关键点坐标与场地标线之间的最优距离。
如图10所示,倒车入库场地的关键点有AV(xV1,yV1)、BV(xV2,yV2)、CV(xV3,yV3)、DV(xV4,yV4)、EV(xV5,yV5)和FV(xV6,yV6),AV(xV1,yV1)定义为左侧入库起始点和左侧出库结束点,BV(xV2,yV2)定义为左测入库方向盘左打满点和左测出库方向盘回正点,CV(xV3,yV3)定义为右测入库方向盘右打满点和右测出库方向盘回正点,DV(xV4,yV4)定义为右侧入库起始点和右侧出库结束点,EV(xV5,yV5)定义为入库方向盘回正点、左测出库方向盘左打满点和右测出库方向盘右打满点,FV(xV6,yV6)定义为入库结束点和出库起始点;根据教练车和场地的参数生成倒车入库场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000132
Figure BDA0003628930410000141
Figure BDA0003628930410000142
Figure BDA0003628930410000143
Figure BDA0003628930410000144
Figure BDA0003628930410000145
如图11所示,侧方停车场地的关键点有AP(xP1,yP1)、BP(xP2,yP2)、CP(xP3,yP3)、DP(xP4,yP4)和EP(xP5,yP5),AP(xP1,yP1)定义为入侧方位结束点和出侧方位起始点,BP(xP2,yP2)定义为入侧方位方向盘左打满点和出侧方位方向盘回正点,CP(xP3,yP3)定义为入侧方位方向盘回正点和出侧方位方向盘右打满点,DP(xP4,yP4)定义为入侧方位方向盘右打满点和出侧方位方向盘回正点,EP(xP5,yP5)定义为入侧方位起始点和出侧方位结束点;根据教练车和场地的参数生成侧方停车场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000146
Figure BDA0003628930410000147
Figure BDA0003628930410000148
Figure BDA0003628930410000149
Figure BDA00036289304100001410
如图12所示,曲线行驶场地的关键点有AT(xT1,yT1)、BT(xT2,yT2)和O(0,0),AT(xT1,yT1)定义为入弯道起始点和方向盘左打点,BT(xT2,yT2)定义为出弯道结束点,O(0,0)定义为方向盘切换右打点;根据教练车和场地的参数生成曲线行驶场地的关键点坐标,计算公式如下:
Figure BDA00036289304100001411
Figure BDA0003628930410000151
如图13所示,直角转弯场地的关键点有AQ(xQ1,yQ1)、BQ(xQ2,yQ2)、CQ(xQ3,yQ3)和DQ(xQ4,yQ4),AQ(xQ1,yQ1)定义为入直角起始点,BQ(xQ2,yQ2)定义为入直角方向盘左打满点,CQ(xQ3,yQ3)定义为出直角方向盘回正点,DQ(xQ4,yQ4)定义为出直角结束点;根据教练车和场地的参数生成直角转弯场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000152
(xQ2,yQ2)=(-R,0)
(xQ3,yQ3)=(0,R)
Figure BDA0003628930410000153
如图14所示,半坡定点场地的关键点有AS(xS1,yS1)和BS(xS2,yS2),AS(xS1,yS1)定义为入半坡起始点,BS(xS2,yS2)定义为定点停车点;根据教练车和场地的参数生成半坡定点场地的关键点坐标,计算公式如下:
Figure BDA0003628930410000154
Figure BDA0003628930410000155
S1.2.5生成练习路线。
根据教练车参数、场地参数和关键点坐标在坐标系中生成练习路线的驾驶辅助练习信息,练习路线用于辅助学员练习最优路线的驾驶;将练习路线显示在触摸显示屏上。
所述的S1.2.5计算练习路线过程如下:
科目二有五个练习项目的场地,在坐标系中生成的五个场地练习路线是不同的,并且在降低教练车压线风险的原则上确定练习路线与场地标线之间的最优距离。
如图10所示,倒车入库场地的左侧是以AV-BV-EV-FV为练习路线,倒车入库场地的右侧是以DV-CV-EV-FV为练习路线;根据教练车参数、场地参数和关键点坐标生成倒车入库场地的练习路线,倒车入库场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000161
如图11所示,侧方停车场地是以EP-DP-CP-BP-AP为练习路线;根据教练车参数、场地参数和关键点坐标生成侧方停车场地的练习路线,侧方停车场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000162
如图12所示,曲线行驶场地是以AT-O-BT为练习路线;根据教练车参数、场地参数和关键点坐标生成曲线行驶场地的练习路线,曲线行驶场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000163
如图13所示,直角转弯场地是以AQ-BQ-CQ-DQ为练习路线;根据教练车参数、场地参数和关键点坐标生成直角转弯场地的练习路线,直角转弯场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure BDA0003628930410000164
如图14所示,坡道定点场地是以AS-BS为练习路线;根据教练车参数、场地参数和关键点坐标生成坡道定点场地的练习路线,坡道定点场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
y=yS1,xS1≤x≤xS2
S1.3.0:获取教练车的初始位置。
当教练车出现在练习项目的场地时,系统通过特征匹配的方式获取教练车的初始位置。
所述的S1.3.0获取教练车的初始位置过程如下:
从摄像头采集的场地图像中搜索区域图像,通过传统的SIFT特征匹配算法计算模板图像与区域图像的匹配度;将最大匹配度的区域图像确定为教练车的初始图像,通过传统的的透视变换算法对教练车的初始图像进行矫正;在坐标系中确定矫正后教练车的初始图像位置,将初始图像位置确定为教练车的初始跟踪框位置。
S1.4.0:动态跟踪教练车。
调用目标跟踪算法,动态跟踪运动的教练车,确定教练车的动态跟踪结果获取教练车的车身中心坐标和后轴中心坐标信息。
所述的S.1.4.0动态跟踪教练车过程如下:
调用传统的DSST目标跟踪算法,输入摄像头采集的场地图像和教练车的初始跟踪框位置,在坐标系中获得教练车的新跟踪框位置;更新初始跟踪框位置,重复上述的过程,实现动态跟踪教练车。
针对教练车跟踪框中的图像调用传统的轮廓检测算法,提取教练车的最外侧轮廓,根据外侧轮廓确定教练车的可倾斜跟踪框,依据可倾斜跟踪框在坐标系中的位置信息确定教练车的车身中心坐标和后轴中心坐标;可倾斜跟踪框完全贴合教练车的外轮廓,确定的教练车位置更为准确。
S1.5.0:生成偏离角度。
根据教练车的车身中心坐标和后轴中心坐标生成教练车运动方向,根据关键点坐标和练习路线生成切线方向,根据教练车运动方向和练习路线切线方向自动生成偏离角度的驾驶辅助练习信息。
所述的S1.5.0生成偏离角度过程如下:
根据当前帧场地图像中的车身中心坐标和上一帧场地图像中的车身中心坐标,生成教练车的运动方向角度α1,计算公式如下:
Figure BDA0003628930410000171
(xt1,yt1)为当前帧场地图像中教练车的车身中心坐标,(xt1-1,yt1-1)为上一帧场地图像中教练车的车身中心坐标。
根据当前帧场地图像中的后轴中心坐标和上一帧场地图像中的后轴中心坐标,生成教练车的运动方向角度α2,计算公式如下:
Figure BDA0003628930410000181
(xt2,yt2)为当前帧场地图像中教练车的后轴中心坐标,(xt2-1,yt2-1)为上一帧场地图像中教练车的后轴中心坐标。
科目二有五个练习项目的场地,在坐标系中生成的五个场地练习路线切线方向角度是不同的。
生成倒车入库场地的练习路线切线方向角度αV,计算公式如下:
Figure BDA0003628930410000182
生成侧方停车场地的练习路线切线方向角度αP,计算公式如下:
Figure BDA0003628930410000183
生成计算曲线行驶场地的练习路线切线方向角度αT,计算公式如下:
Figure BDA0003628930410000184
生成直角转弯场地的练习路线切线方向角度αQ,计算公式如下:
Figure BDA0003628930410000185
生成坡道定点场地的练习路线切线方向角度αS,计算公式如下:
αS=0°,xS1≤xt1≤xS2
科目二有五个练习项目的场地,在坐标系中五个场地的教练车运动方向偏离练习路线切线方向的角度是不同的。
倒车入库场地的偏离角度为α=a2V,侧方停车场地的偏离角度为α=a2P,曲线行驶场地的偏离角度为α=a1T,直角转弯场地的偏离角度为α=a2Q,坡道定点场地的偏离角度为α=a1S,对偏离角度的象限进行调整,如下:
Figure BDA0003628930410000191
S1.6.0:语音提示。
根据场地关键点、练习路线和偏离角度生成教练车驾驶辅助提示信息,并进行语音提示。
所述S1.6.0语音提示过程如下:
科目二有五个练习项目的场地,当学员驾驶教练车经过五个场地的关键点坐标位置时语音提示是不同的,系统根据S1.2.4中五个场地的关键点定义进行语音提示,用于辅助学员对驾驶过程中起始、结束、方向盘操作等关键点的练习。
偏离角度反映了教练车运动方向偏离练习路线切线方向的程度,用于辅助学员驾驶练习最优路线,根据偏离角度语音提示学员驾驶的教练车是否偏离练习路线;当偏离角度α大于5度时且正向行驶时提示向右微打方向盘,当偏离角度α大于5度时且倒向行驶时提示向左微打方向盘,当偏离角度α小于-5度且正向行驶时提示向左微打方向盘,当偏离角度α小于-5度且倒向行驶时提示向右微打方向盘。
S1.7.0:切换场地。
判断是否切换练习项目的场地。
所述的S1.7.0切换场地过程如下:
如果学员需要切换练习项目的场地,会在窗口1选择场地,系统转到步骤S1.1.0;如果学员未选择新的场地,系统转到步骤S1.4.0。
一种教练车驾驶辅助练习装置,功能结构如图15所示,包括以下模块:
摄像头模块10,由五个户外全景式摄像头组成,用于实现实时采集五个练习项目的场地图像,并具有WIFI数据传输、变焦倍数可调、云台方向可调功能,包括:
实时采集五个练习项目的场地图像;实时采集出现在场地中的教练车图像;通过变焦倍数调节摄像头,支撑窗口2滑块组件调节摄像头的清晰度;通过云台方向调节摄像头,支撑窗口2旋钮组件调节摄像头的监控方向;通过WIFI接收系统的指令和传输采集的场地图像数据。
显示模块20,由11寸触摸显示屏组成,用于实时显示窗口布局、场地图像、教练车、跟踪框和驾驶辅助练习信息,包括:
显示窗口1、2、3和4的布局,为操作者提供可视化的区域;可触摸操作显示窗口上的操作组件;显示摄像头实时采集的场地图像;显示出现在场地的教练车;显示练习项目场地的坐标系;显示练习信息生成模块提供的场地关键点;显示练习信息生成模块提供的练习路线;显示跟踪模块提供的教练车可倾斜跟踪框。
练习信息生成模块30,用于自动生成场地坐标系、场地关键点和练习路线的驾驶辅助练习信息,包括:
选择五个练习项目场地的原点并生成坐标系;生成五个练习项目场地的关键点坐标;生成五个练习项目场地的练习路线。
目标跟踪模块40,包含特征匹配模型、目标跟踪模型和轮廓检测模型,用于动态跟踪教练车、生成跟踪框和确定教练车实时位置信息,包括:
通过特征匹配模型获取教练车的初始跟踪框;通过目标跟踪模型调整跟踪框的位置,动态跟踪教练车;通过轮廓检测模型生成可倾斜跟踪框;通过可倾斜跟踪框确定教练车的车身中心坐标和后轴中心坐标实时位置信息。
练习信息提示模块50,由嵌入式模块中的语音输出单元组成,用于生成偏离角度的驾驶辅助练习信息,并根据场地关键点和偏离角度语音提示教练车操作的信息,包括:
生成教练车运动方向偏离练习路线切线方向的角度;根据偏离角度语音提示教练车运动方向是否偏离练习路线;根据偏离角度语音提示方向盘转向操作的信息;根据五个练习项目的场地关键点语音提示教练车起始、停止和方向盘转向的操作信息。
数据库模块60,由嵌入式模块中的存储硬盘组成,用于保存教练车驾驶辅助练习方法的程序、数据和参数,包括:
保存窗口的布局数据;保存教练车的模板图像;保存车练车的参数;保存五个练习项目场地的参数;缓存教练车驾驶辅助练习方法的辅助数据;保持教练车驾驶辅助练习方法的程序。
嵌入式模块70,由嵌入式主板组成,具有处理器、内存、存储硬盘、语音输出单元、WIFI单元和触摸显示屏接口,用于教练车驾驶辅助练习装置的驱动和运行教练车驾驶辅助练习方法的程序,包括:
通过WIFI单元,对摄像头进行指令控制和数据读取,运行摄像头模块;与触摸显示屏相连,对显示屏进行驱动,运行显示模块;运行练习信息生成模块,实现场地坐标系、场地关键点和练习路线的自动生成;运行跟踪模块,实现教练车的动态跟踪、跟踪框的实时生成和教练车位置信息的实时更新;运行练习信息提示模块,完成偏离角度的自动生成,通过语音输出单元提示教练车操作的信息;运行数据库模块,通过存储硬盘实现对教练车驾驶辅助练习的程序、数据和参数的保存;为跟踪模块、练习信息生成模块和练习信息提示模块提供运算能力。
如图8所示,摄像头模块的五个摄像头分别安装在五个练习项目场地的上方,五个摄像头分别全景监控五个练习项目的场地,摄像头1监控倒车入库场地,摄像头2监控侧方停车场地,摄像头3监控曲线行驶场地,摄像头4监控直角转弯场地,摄像头5监控坡道定点场地;五个练习项目的场地标线是黄颜色的;摄像头模块通过WIFI与嵌入式模块进行无线连接,显示模块通过HDMI接口与嵌入式模块相连。
以上实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于上述的实施例。

Claims (10)

1.一种教练车驾驶辅助练习方法,其特征在于,包括如下步骤:
步骤1:根据场地进行系统初始设置;
步骤2:在场地图像上建立坐标系,自动生成场地关键点和练习路线的驾驶辅助练习信息;
步骤3:从场地图像中获取教练车的初始位置;
步骤4:动态跟踪运动的教练车,确定教练车的车身中心坐标和后轴中心坐标信息;
步骤5:根据教练车运动方向和练习路线切线方向自动生成偏离角度的驾驶辅助练习信息;
步骤6:根据场地关键点、练习路线和偏离角度生成教练车的驾驶辅助提示信息,并进行语音提示;
步骤7:判断是否切换练习项目的场地,如果是则转到步骤1,否则转到步骤4。
2.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤1的系统初始设置,步骤如下:
步骤1-1:根据对应的场地调用场地摄像头;
步骤1-2:根据触摸显示屏显示的场地图像调整摄像头的方向和焦距;
步骤1-3:根据实际驾驶的教练车选择教练车的模板图像,从数据库中读取教练车的模板图像数据。
3.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤2的生成场地关键点和练习路线,步骤如下:
步骤2-1:读取摄像头采集的场地图像;
步骤2-2:根据场地标线矫正图像的畸变,获得矫正后的场地图像;
步骤2-3:在矫正后的场地图像上标定坐标系原点的位置,并在原点处建立坐标系,将原点与坐标系显示在触摸显示屏上;
步骤2-4:根据教练车参数、场地参数在坐标系中生成关键点坐标,将关键点显示在触摸显示屏上;
步骤2-5:根据教练车参数、场地参数和关键点坐标在坐标系中生成练习路线,将练习路线显示在触摸显示屏上。
4.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤2-3的坐标系原点包括:
科目二有多个练习项目的场地,每个场地的坐标系原点是不同的;
倒车入库场地的坐标系原点为车库入口的中心点,侧方停车场地的坐标系原点为侧方库的右边拐角点,曲线行驶场地的坐标系原点为两个弯道斜街处的中间点,直角转弯场地的坐标系原点为直角方向两行车道中心线的交点,坡道定点场地的坐标系原点为桩杆线与右边缘线的交点。
5.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤2-4的生成关键点坐标的过程如下:
从数据库中读取教练车和场地的参数,教练车的参数包括车身长度Vl、车身宽度Vw、车身轴距L、车身轴宽W、车辆方向最大转弯角β,倒车入库场地的参数有车库深度Rh、车库宽度Rw、行车道宽Rx、控制线距离Rk,侧方停车场地的参数有车位长度Pl、车位宽度Pw、行车道宽Px,曲线行驶场地的参数有弯道半径Tr,直角转弯场地的参数有行车道宽Qx、行车道长Ql,坡道定点场地的参数有定点坡长Sl
根据教练车和场地的参数计算教练车后轴中心的转弯半径R,如下:
Figure FDA0003628930400000021
科目二有多个练习项目的场地,在坐标系中生成的每个场地关键点坐标是不同的,并且在降低教练车压线风险的原则上确定关键点坐标与场地标线之间的最优距离;
倒车入库场地的关键点有AV(xV1,yV1)、BV(xV2,yV2)、CV(xV3,yV3)、DV(xV4,yV4)、EV(xV5,yV5)和FV(xV6,yV6),AV(xV1,yV1)定义为左侧入库起始点和左侧出库结束点,BV(xV2,yV2)定义为左测入库方向盘左打满点和左测出库方向盘回正点,CV(xV3,yV3)定义为右测入库方向盘右打满点和右测出库方向盘回正点,DV(xV4,yV4)定义为右侧入库起始点和右侧出库结束点,EV(xV5,yV5)定义为入库方向盘回正点、左测出库方向盘左打满点和右测出库方向盘右打满点,FV(xV6,yV6)定义为入库结束点和出库起始点;
根据教练车和场地的参数生成倒车入库场地的关键点坐标,计算公式如下:
Figure FDA0003628930400000022
Figure FDA0003628930400000023
Figure FDA0003628930400000031
Figure FDA0003628930400000032
Figure FDA0003628930400000033
Figure FDA0003628930400000034
侧方停车场地的关键点有AP(xP1,yP1)、BP(xP2,yP2)、CP(xP3,yP3)、DP(xP4,yP4)和EP(xP5,yP5),AP(xP1,yP1)定义为入侧方位结束点和出侧方位起始点,BP(xP2,yP2)定义为入侧方位方向盘左打满点和出侧方位方向盘回正点,CP(xP3,yP3)定义为入侧方位方向盘回正点和出侧方位方向盘右打满点,DP(xP4,yP4)定义为入侧方位方向盘右打满点和出侧方位方向盘回正点,EP(xP5,yP5)定义为入侧方位起始点和出侧方位结束点;
根据教练车和场地的参数生成侧方停车场地的关键点坐标,计算公式如下:
Figure FDA0003628930400000035
Figure FDA0003628930400000036
Figure FDA0003628930400000037
Figure FDA0003628930400000038
Figure FDA0003628930400000039
曲线行驶场地的关键点有AT(xT1,yT1)、BT(xT2,yT2)和O(0,0),AT(xT1,yT1)定义为入弯道起始点和方向盘左打点,BT(xT2,yT2)定义为出弯道结束点,O(0,0)定义为方向盘切换右打点;
根据教练车和场地的参数生成曲线行驶场地的关键点坐标,计算公式如下:
Figure FDA00036289304000000310
Figure FDA00036289304000000311
直角转弯场地的关键点有AQ(xQ1,yQ1)、BQ(xQ2,yQ2)、CQ(xQ3,yQ3)和DQ(xQ4,yQ4),AQ(xQ1,yQ1)定义为入直角起始点,BQ(xQ2,yQ2)定义为入直角方向盘左打满点,CQ(xQ3,yQ3)定义为出直角方向盘回正点,DQ(xQ4,yQ4)定义为出直角结束点;
根据教练车和场地的参数生成直角转弯场地的关键点坐标,计算公式如下:
Figure FDA0003628930400000041
(xQ2,yQ2)=(-R,0)
(xQ3,yQ3)=(0,R)
Figure FDA0003628930400000042
半坡定点场地的关键点有AS(xS1,yS1)和BS(xS2,yS2),AS(xS1,yS1)定义为入半坡起始点,BS(xS2,yS2)定义为定点停车点;
根据教练车和场地的参数生成半坡定点场地的关键点坐标,计算公式如下:
Figure FDA0003628930400000043
Figure FDA0003628930400000044
6.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤2-5的生成练习路线的过程如下:
科目二有多个练习项目的场地,在坐标系中生成的每个场地练习路线是不同的,并且在降低教练车压线风险的原则上确定练习路线与场地标线之间的最优距离;
倒车入库场地的左侧是以AV-BV-EV-FV为练习路线,倒车入库场地的右侧是以DV-CV-EV-FV为练习路线;
根据教练车参数、场地参数和关键点坐标生成倒车入库场地的练习路线,倒车入库场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure FDA0003628930400000045
侧方停车场地是以EP-DP-CP-BP-AP为练习路线;
根据教练车参数、场地参数和关键点坐标生成侧方停车场地的练习路线,侧方停车场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure FDA0003628930400000051
曲线行驶场地是以AT-O-BT为练习路线;
根据教练车参数、场地参数和关键点坐标生成曲线行驶场地的练习路线,曲线行驶场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure FDA0003628930400000052
直角转弯场地是以AQ-BQ-CQ-DQ为练习路线;
根据教练车参数、场地参数和关键点坐标生成直角转弯场地的练习路线,直角转弯场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
Figure FDA0003628930400000053
坡道定点场地是以AS-BS为练习路线;
根据教练车参数、场地参数和关键点坐标生成坡道定点场地的练习路线,坡道定点场地的练习路线上一点(x,y)按照下面的分段函数计算,如下:
y=yS1,xS1≤x≤xS2
7.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤4的动态跟踪教练车过程如下:
调用DSST目标跟踪模型,输入摄像头采集的场地图像和教练车的初始跟踪框位置,在坐标系中获得教练车的新跟踪框位置;
更新初始跟踪框位置,重复上述的过程,实现动态跟踪教练车。
针对教练车跟踪框中的图像调用轮廓检测算法,提取教练车的最外侧轮廓,根据外侧轮廓确定教练车的可倾斜跟踪框,依据可倾斜跟踪框在坐标系中的位置信息确定教练车的车身中心坐标和后轴中心坐标;
可倾斜跟踪框完全贴合教练车的外轮廓,确定的教练车位置更为准确。
8.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所示步骤5的生成偏离角度过程如下:
根据当前帧场地图像中的车身中心坐标和上一帧场地图像中的车身中心坐标,生成教练车的运动方向角度α1,计算公式如下:
Figure FDA0003628930400000061
(xt1,yt1)为当前帧场地图像中教练车的车身中心坐标,(xt1-1,yt1-1)为上一帧场地图像中教练车的车身中心坐标;
根据当前帧场地图像中的后轴中心坐标和上一帧场地图像中的后轴中心坐标,生成教练车的运动方向角度α2,如下:
Figure FDA0003628930400000062
(xt2,yt2)为当前帧场地图像中教练车的后轴中心坐标,(xt2-1,yt2-1)为上一帧场地图像中教练车的后轴中心坐标;
科目二有多个练习项目的场地,在坐标系中生成的每个场地练习路线切线方向角度是不同的;
生成倒车入库场地的练习路线切线方向角度αV,计算公式如下:
Figure FDA0003628930400000063
生成侧方停车场地的练习路线切线方向角度αP,计算公式如下:
Figure FDA0003628930400000064
生成曲线行驶场地的练习路线切线方向角度αT,计算公式如下:
Figure FDA0003628930400000071
生成直角转弯场地的练习路线切线方向角度αQ,计算公式如下:
Figure FDA0003628930400000072
生成坡道定点场地的练习路线切线方向角度αS,计算公式如下:
αS=0°,xS1≤xt1≤xS2
科目二有多个练习项目的场地,在坐标系中每个场地的教练车运动方向偏离练习路线切线方向的角度是不同的;
倒车入库场地的偏离角度为α=a2V,侧方停车场地的偏离角度为α=a2P,曲线行驶场地的偏离角度为α=a1T,直角转弯场地的偏离角度为α=a2Q,坡道定点场地的偏离角度为α=a1S
对偏离角度的象限进行调整,如下:
Figure FDA0003628930400000073
9.根据权利要求1所述的一种教练车驾驶辅助练习方法,其特征在于,所述步骤6的语音提示过程如下:
科目二有多个练习项目的场地,当学员驾驶教练车经过各个场地的关键点坐标位置时语音提示是不同的,系统根据步骤2-4中多个场地的关键点定义进行语音提示,用于辅助学员对驾驶过程中起始、结束、方向盘操作的关键点的练习;
偏离角度反应了教练车运动方向偏离练习路线切线方向的程度,用于辅助学员驾驶练习最优路线,根据偏离角度语音提示学员驾驶的教练车是否偏离练习路线;
并且,当偏离角度α大于设定正角度时且正向行驶时提示向右微打方向盘,当偏离角度α大于设定正角度时且倒向行驶时提示向左微打方向盘,当偏离角度α小于设定负角度且正向行驶时提示向左微打方向盘,当偏离角度α小于设定负角度且倒向行驶时提示向右微打方向盘。
10.一种教练车驾驶辅助练习装置,包括以下模块:
摄像头模块,由多个摄像头组成,用于实现实时采集多个练习项目的场地图像,并具有WIFI数据传输、变焦倍数可调、云台方向可调功能;
显示模块,由触摸显示屏组成,用于实时显示窗口布局、场地图像、教练车、跟踪框和驾驶辅助练习信息;
练习信息生成模块,用于生成场地坐标系、场地关键点和练习路线的驾驶辅助练习信息;
目标跟踪模块,包含特征匹配模型、目标跟踪模型和轮廓检测模型,用于动态跟踪教练车、生成可倾斜跟踪框和确定教练车实时位置信息;
练习信息提示模块,用于生成偏离角度的驾驶辅助练习信息,并根据场地关键点和偏离角度语音提示教练车操作的信息;
数据库模块,用于保存教练车驾驶辅助练习方法的程序、数据和参数;
嵌入式模块,用于教练车驾驶辅助练习装置的驱动和运行教练车驾驶辅助练习方法的程序;
嵌入式模块与显示模块触摸显示屏相连,嵌入式模块与摄像头模块的摄像头通过WIFI无线连接;
嵌入式模块运行练习信息生成模块,实现场地坐标系、场地关键点和练习路线的自动生成;
嵌入式模块运行跟踪模块实现教练车的动态跟踪、跟踪框的实时生成和教练车位置信息的实时更新;
嵌入式模块运行练习信息提示模块,完成偏离角度的自动生成,语音提示教练车操作的信息;
嵌入式模块运行数据库模块,实现对教练车驾驶辅助练习的程序、数据和参数的保存;
嵌入式模块为跟踪模块、练习信息生成模块和练习信息提示模块提供运算能力。
CN202210484120.8A 2022-05-06 2022-05-06 一种教练车驾驶辅助练习方法及装置 Active CN114822169B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210484120.8A CN114822169B (zh) 2022-05-06 2022-05-06 一种教练车驾驶辅助练习方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210484120.8A CN114822169B (zh) 2022-05-06 2022-05-06 一种教练车驾驶辅助练习方法及装置

Publications (2)

Publication Number Publication Date
CN114822169A true CN114822169A (zh) 2022-07-29
CN114822169B CN114822169B (zh) 2023-06-09

Family

ID=82512251

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210484120.8A Active CN114822169B (zh) 2022-05-06 2022-05-06 一种教练车驾驶辅助练习方法及装置

Country Status (1)

Country Link
CN (1) CN114822169B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115402324A (zh) * 2022-11-01 2022-11-29 北京千种幻影科技有限公司 一种用于侧方入库的虚拟驾驶智能引导控制方法及系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011126379A1 (en) * 2010-04-04 2011-10-13 Driving Performance Solutions As A system and method for drivers training
WO2015112646A1 (en) * 2014-01-21 2015-07-30 The Football Educator, Llc Virtual team sport trainer
CN108389477A (zh) * 2018-03-05 2018-08-10 广州星唯信息科技有限公司 一种驾培场地训练的纠偏指导方法
US20180362073A1 (en) * 2017-06-14 2018-12-20 Denso Corporation Method and apparatus for assisting steering of vehicle
CN110597245A (zh) * 2019-08-12 2019-12-20 北京交通大学 基于二次型规划和神经网络的自动驾驶换道轨迹规划方法
CN111402671A (zh) * 2018-10-19 2020-07-10 上海肩并肩电子科技有限公司 一种驾校车语音视频教学方法及装置
CN111523465A (zh) * 2020-04-23 2020-08-11 中船重工鹏力(南京)大气海洋信息系统有限公司 基于摄像机标定及深度学习算法的船舶身份识别系统
CN111619624A (zh) * 2020-06-01 2020-09-04 北京全路通信信号研究设计院集团有限公司 一种基于深度强化学习的有轨电车运行控制方法和系统
KR20210043174A (ko) * 2019-10-11 2021-04-21 엘지전자 주식회사 운동 코칭 기능을 제공하는 방법 및 이를 수행하는 전자 장치
WO2021164975A1 (fr) * 2020-02-17 2021-08-26 Renault S.A.S Procede de parametrage d'un calculateur, dispositif d'aide a la conduite comportant un tel calculateur et vehicule automobile equipe d'un tel dispositif
CN113674361A (zh) * 2021-08-21 2021-11-19 深圳普捷利科技有限公司 一种车载环视校准实现方法及系统
WO2022016583A1 (zh) * 2020-07-20 2022-01-27 南京智金科技创新服务中心 一种教练车智能辅助训练方法及系统

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011126379A1 (en) * 2010-04-04 2011-10-13 Driving Performance Solutions As A system and method for drivers training
WO2015112646A1 (en) * 2014-01-21 2015-07-30 The Football Educator, Llc Virtual team sport trainer
US20180362073A1 (en) * 2017-06-14 2018-12-20 Denso Corporation Method and apparatus for assisting steering of vehicle
CN108389477A (zh) * 2018-03-05 2018-08-10 广州星唯信息科技有限公司 一种驾培场地训练的纠偏指导方法
CN111402671A (zh) * 2018-10-19 2020-07-10 上海肩并肩电子科技有限公司 一种驾校车语音视频教学方法及装置
CN110597245A (zh) * 2019-08-12 2019-12-20 北京交通大学 基于二次型规划和神经网络的自动驾驶换道轨迹规划方法
KR20210043174A (ko) * 2019-10-11 2021-04-21 엘지전자 주식회사 운동 코칭 기능을 제공하는 방법 및 이를 수행하는 전자 장치
WO2021164975A1 (fr) * 2020-02-17 2021-08-26 Renault S.A.S Procede de parametrage d'un calculateur, dispositif d'aide a la conduite comportant un tel calculateur et vehicule automobile equipe d'un tel dispositif
CN111523465A (zh) * 2020-04-23 2020-08-11 中船重工鹏力(南京)大气海洋信息系统有限公司 基于摄像机标定及深度学习算法的船舶身份识别系统
CN111619624A (zh) * 2020-06-01 2020-09-04 北京全路通信信号研究设计院集团有限公司 一种基于深度强化学习的有轨电车运行控制方法和系统
WO2022016583A1 (zh) * 2020-07-20 2022-01-27 南京智金科技创新服务中心 一种教练车智能辅助训练方法及系统
CN113674361A (zh) * 2021-08-21 2021-11-19 深圳普捷利科技有限公司 一种车载环视校准实现方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
韩志军;孙少斌;陈璐;李大鹏;: "某新型坦克综合射击训练仿真系统", 系统仿真学报, no. 11, pages 2881 - 2884 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115402324A (zh) * 2022-11-01 2022-11-29 北京千种幻影科技有限公司 一种用于侧方入库的虚拟驾驶智能引导控制方法及系统

Also Published As

Publication number Publication date
CN114822169B (zh) 2023-06-09

Similar Documents

Publication Publication Date Title
CN1831479B (zh) 驾驶辅助系统
CN108806371A (zh) 一种基于驾考科目训练的智能判定方法及系统
US8010283B2 (en) Driving evaluation system and server
Pomerleau et al. Rapidly adapting machine vision for automated vehicle steering
DE112007003787B4 (de) Karteninformations-Verarbeitungsvorrichtung
CN109741617A (zh) 一种停车场泊车导航方法及装置
CN106373091A (zh) 全景泊车中鸟瞰图像的自动拼接方法、系统及车辆
CN107161082B (zh) 辅助停车方法
JP2000229547A (ja) 運転操作補助装置および記録媒体
DE112018004521T5 (de) Anzeigevorrichtung eines überlagerten Bildes und Computerprogramm
DE112009005298T5 (de) Einparkhilfevorrichtung
KR20090096736A (ko) 주차 지원 장치, 주차 지원 장치 부품, 주차 지원 방법, 주차 지원 프로그램을 기록한 컴퓨터 판독가능 매체, 차량 주행 파라미터의 산출 방법 및 산출 프로그램을 기록한 컴퓨터 판독가능 매체, 차량 주행 파라미터 산출 장치, 그리고 차량 주행 파라미터 산출 장치 부품
DE10037573A1 (de) Navigationsverfahren in einem Kraftfahrzeug
CN112908016B (zh) 基于停车位监控摄像的引导车辆驾驶的方法
JP2008174000A (ja) 駐車支援装置、駐車支援装置部品、駐車支援方法及び駐車支援プログラム
DE102006008703A1 (de) Fahrunterstützungssystem und Navigationssystem für ein Fahrzeug
CN114822169A (zh) 一种教练车驾驶辅助练习方法及装置
DE112018004519T5 (de) Anzeigevorrichtung eines überlagerten Bildes und Computerprogramm
CN106444765A (zh) 一种agv、基于视觉的agv导航方法及其系统
CN103824296B (zh) 基于单位正方形的车辆全景显示系统鱼眼图像校正方法
JP2003063338A (ja) 運転支援装置および運転ガイドデータ作成方法
CN106627373A (zh) 一种用于智能泊车的图像处理方法和系统
CN109031262B (zh) 一种定位寻车系统及其方法
CN116494957A (zh) 一种基于深度学习的泊车辅助系统
CN111241923B (zh) 一种实时检测立体车库的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant