CN114582146A - 红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 - Google Patents
红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 Download PDFInfo
- Publication number
- CN114582146A CN114582146A CN202210313168.2A CN202210313168A CN114582146A CN 114582146 A CN114582146 A CN 114582146A CN 202210313168 A CN202210313168 A CN 202210313168A CN 114582146 A CN114582146 A CN 114582146A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- user
- remaining time
- traffic light
- traffic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/096—Arrangements for giving variable traffic instructions provided with indicators in which a mark progresses showing the time elapsed, e.g. of green phase
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种红绿灯剩余时长智能提醒方法、系统、存储介质及汽车，包括以下步骤，S1、获取车辆的行驶车道信息，确定车辆的行驶方向；S2、识别车辆前方的红色交通灯，并筛选出与行驶车道相对应的交通灯；S3、识别该与行驶车道相对应的交通灯的剩余时长数字；S4、当剩余时长数字小于预设值时，提醒用户。本发明通过车辆行驶方向判断、交通灯检测、红灯剩余时长识别、提醒用户，能够在用户停车等红灯时提醒用户红灯剩余时长，让用户不错过最佳起步时间，同时乘客可在等红灯期间进行短暂的闭目养神，不用担心错过红灯，提升道路通行成本，充分利用车辆现有设备，不增加任何成本。
Description
技术领域
本发明属于汽车智能座舱技术领域，更具体涉及一种红绿灯剩余时长智能提醒方法、系统、存储介质及汽车。
背景技术
在日常驾驶过程等红灯时，需驾驶员实时关注红灯状态，若驾驶员在等红灯时看手机或其他情况未关注时，往往会错过最佳起步时间，一是带来后方驾驶人员的不满情绪，二是影响路口通行效率，加重交通堵塞。V2X技术，可通过交通灯与车辆实时通信来提前提醒用户，但目前V2X技术未普及，交通设施升级完善还需要大量时间，短时间内无法解决该问题。目前大多数车辆已配置360的全景摄像头，且基于深度学习的视觉感知技术也已经非常成熟，可实时探测交通灯状态。
如我国专利CN107945552A提供一种交通信号灯提醒方法，包括：采集交通信号灯的图像，所述交通信号灯具有时间信息；对所采集的图像进行图像处理并获取所述图像中交通信号灯的状态及时间信息；判断交通信号灯的状态，在交通信号灯为红灯时根据所述时间信息设置等待时间；在等待时间剩余预设时间值时输出提醒信息。该交通信号灯提醒方法，通过采集并识别交通信号灯上的状态信息和时间信息，根据获取的状态信息和时间信息可以对驾驶员进行提前提醒，以让驾驶员做好车辆启动前行准备，给用户带来更智能、更人性化的驾驶体验。该发明还提供交通信号灯提醒装置和车辆。但是该技术未具体描述剩余时长的检测方法。
又如我国专利CN108665719A公开的关于一种对信号灯变灯时间进行提示的方法及装置，属于AR技术领域。所述方法包括：当目标信号灯为红灯时，确定该目标信号灯在当前时间之后最近一次由红灯变为绿灯的时间，得到目标时间，并根据该目标时间生成第一提示信息，在AR设备的显示界面中显示该第一提示信息。由于目标信号灯为当前待经过路口处且与该AR设备所处的位置对应的信号灯，也即，当待经过路口处的信号灯为红灯时，AR设备可以确定该目标信号灯的变灯时间，并在AR显示界面中显示根据该变灯时间确定的第一提示信息，以提示用户该目标信号灯的变灯时间，避免了需要用户通过直接观察该目标信号灯才能确定该目标信号灯的变灯时间。该发明未解决路口多车道，多红绿灯情况下如何选择相应的红绿灯时间进行提醒。
发明内容
为解决上述问题，本发明提供了一种红绿灯剩余时长智能提醒方法、系统、存储介质及汽车，在不对交通设施做任何改动同时不增加车辆成本的前提下，利用车辆已配置的360°环视摄像头，应用深度学习技术，在消耗极少算力情况下，实现红灯剩余时长的智能提醒功能。
为了解决上述技术问题，本发明采用的技术方案是这样的：一种红绿灯剩余时长智能提醒方法，包括以下步骤，
S1、获取车辆的行驶车道信息，确定车辆的行驶方向；
S2、识别车辆前方的红色交通灯，并筛选出与行驶车道相对应的交通灯；
S3、识别该与行驶车道相对应的交通灯的剩余时长数字；
S4、当剩余时长数字小于预设值时，提醒用户。
作为优化，通过车载360°环视摄像头拍摄车辆前方图片，并识别该图片中的地面标识和车道线获取车辆的行驶车道信息，确定车辆的行驶方向为直行或左转或右转。
作为优化，在车辆停车时，获取车辆的行驶车道信息。
作为优化，步骤S3包括，
S301、确定与行驶车道相对应的交通灯的检测框；
S302、将所述检测框扩大预设像素，覆盖交通灯剩余时长的显示区域，作为红灯时长识别区；
S303、提取所述红灯时长识别区，并识别所述剩余时长数字。
作为优化，步骤S4还包括，将所述剩余时长数字同步到车辆的车机或仪表进行显示。
作为优化，步骤S4还包括，获取车辆的DMS系统信号，并判断用户的视线是否关注车辆前方，若未关注车辆前方，且剩余时长数字小于预设值时，提醒用户。
作为优化，步骤S4中，通过语音或提示音提醒用户。
基于上述方法，本发明还提供了一种红绿灯剩余时长智能提醒系统，包括，
360°环视摄像头，用于拍摄车辆前方图片；
DMS系统，用于采集用户的动作信息；
车机系统，用于对所述图片中的地面标识和车道线进行识别，获取车辆的行驶车道信息；还用于识别红色交通灯，筛选与车辆行驶车道相对应的交通灯，并提取和识别该交通灯的剩余时长数字；还用于根据所述动作信息判断用户的视线是否关注车辆前方；
显示模块，用于同步显示剩余时长数字；
提醒模块，当剩余时长数字小于预设值，且用户的视线未关注车辆前方，用于对用户进行语音或提示音提醒。
基于上述方法，本发明还提供了一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序被处理器运行时，执行所述的红绿灯剩余时长智能提醒方法的步骤。
基于上述系统，本发明还提供了一种汽车，在汽车上安装有所述的红绿灯剩余时长智能提醒系统，在车辆停止在路口时启动。
与现有技术相比，本发明具有如下优点：
本发明通过车辆行驶方向判断、交通灯检测、红灯剩余时长识别、提醒用户，能够在用户停车等红灯时提醒用户红灯剩余时长，让用户不错过最佳起步时间，同时乘客可在等红灯期间进行短暂的闭目养神，不用担心错过红灯，提升道路通行成本，充分利用车辆现有设备，不增加任何成本，且利用车辆已配置的360°环视摄像头，应用深度学习技术，在消耗极少算力情况下，实现红灯剩余时长的智能提醒功能。
附图说明
图1 为本发明的流程图；
图2 车道标识识别区域示意图；
图3 剩余时长识别区域示意图。
具体实施方式
下面将结合附图及实施例对本发明作进一步说明。
实施例：参见图1-图3，
一种红绿灯剩余时长智能提醒方法，包括以下步骤，
S1、获取车辆的行驶车道信息，确定车辆的行驶方向；具体的，在车辆行驶过程中不断缓存360环视前方摄像头拍摄的图片，每秒提取2张，缓存5秒数据。
车辆停止后，通过识别缓存图片中的地面标识识别区域，如图2所示，的地面标识和车道线定位车辆停止在直行、左转还是右转车道判断出车辆下一步的行驶方向，仅在停止时识别，降低整个行驶过程算力需求。
地面标识识别区域的确定：
通过标定后可求得真实世界物体宽度（x）与其相机中成像的宽度（x’）的比例α，
α= x/x’ ；
取车辆正前方3.5米宽的区域即x为3.5，则在图片中占像素x’=3.5/α；
则地面标识识别区域为（u1=(u-x’)/2,0）(u2=u1+x’,v)。
S2、识别车辆前方的红色交通灯，并筛选出与行驶车道相对应的交通灯；具体的，将车辆前方存在的红色交通灯全部检出并定位。根据S1判断的车辆行驶方向，筛选出一个与车辆行驶车道相对应的交通灯。
S3、识别该与行驶车道相对应的交通灯的剩余时长数字；
S301、确定与行驶车道相对应的交通灯的检测框；
S302、将所述检测框扩大预设像素，覆盖交通灯剩余时长的显示区域，作为红灯时长识别区；
红灯时长识别区的确定：如图3所示，
检测到的红绿灯检测框的左上角位置，如坐标为（u1,v1）；
则按照3倍的比例扩充像素后，右下角的位置坐标为:
u4=u1+3*(u2-u1)。
v4=v1+3*(v2-v1)。
S303、提取所述红灯时长识别区，并识别所述剩余时长数字。
S4、当剩余时长数字小于5秒时，提醒用户。
识别到剩余时长数字后，将所述剩余时长数字同步到车辆的车机或仪表进行可视化倒计时显示。获取车辆的DMS系统信号，并判断用户的视线是否关注车辆前方，若未关注车辆前方，且剩余时长数字小于5秒时，通过语音或提示音提醒用户。
基于上述方法，本发明还提供了一种红绿灯剩余时长智能提醒系统，包括，
360°环视摄像头或前视摄像头，用于拍摄车辆前方图片；
DMS系统，用于采集用户的动作信息；
车机系统，用于对所述图片中的地面标识和车道线进行识别，获取车辆的行驶车道信息；还用于识别红色交通灯，筛选与车辆行驶车道相对应的交通灯，并提取和识别该交通灯的剩余时长数字；还用于根据所述动作信息判断用户的视线是否关注车辆前方；
显示模块，用于同步显示剩余时长数字；
提醒模块，当剩余时长数字小于预设值，且用户的视线未关注车辆前方，用于对用户进行语音或提示音提醒。
基于上述方法，本发明还提供了一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序被处理器运行时，执行所述的红绿灯剩余时长智能提醒方法的步骤。
基于上述系统，本发明还提供了一种汽车，在汽车上安装有所述的红绿灯剩余时长智能提醒系统，在车辆停止在路口时启动。
本发明通过车辆行驶方向判断、交通灯检测、红灯剩余时长识别、提醒用户，能够在用户停车等红灯时提醒用户红灯剩余时长，让用户不错过最佳起步时间，同时乘客可在等红灯期间进行短暂的闭目养神，不用担心错过红灯，提升道路通行成本，充分利用车辆现有设备，不增加任何成本，且利用车辆已配置的360°环视摄像头，应用深度学习技术，在消耗极少算力情况下，实现红灯剩余时长的智能提醒功能。
最后需要说明的是，以上实施例仅用以说明本发明的技术方案而非限制技术方案，本领域的普通技术人员应当理解，那些对本发明的技术方案进行修改或者等同替换，而不脱离本技术方案的宗旨和范围，均应涵盖在本发明的权利要求范围当中。
Claims (10)
1.一种红绿灯剩余时长智能提醒方法，其特征在于，包括以下步骤，
S1、获取车辆的行驶车道信息，确定车辆的行驶方向；
S2、识别车辆前方的红色交通灯，并筛选出与行驶车道相对应的交通灯；
S3、识别该与行驶车道相对应的交通灯的剩余时长数字；
S4、当剩余时长数字小于预设值时，提醒用户。
2.根据权利要求1所述的一种红绿灯剩余时长智能提醒方法，其特征在于，通过车载360°环视摄像头拍摄车辆前方图片，并识别该图片中的地面标识和车道线获取车辆的行驶车道信息，确定车辆的行驶方向为直行或左转或右转。
3.根据权利要求1所述的一种红绿灯剩余时长智能提醒方法，其特征在于，在车辆停车时，获取车辆的行驶车道信息。
4.根据权利要求1-3任一所述的一种红绿灯剩余时长智能提醒方法，其特征在于，步骤S3包括，
S301、确定与行驶车道相对应的交通灯的检测框；
S302、将所述检测框扩大预设像素，覆盖交通灯剩余时长的显示区域，作为红灯时长识别区；
S303、提取所述红灯时长识别区，并识别所述剩余时长数字。
5.根据权利要求4所述的一种红绿灯剩余时长智能提醒方法，其特征在于，步骤S4还包括，将所述剩余时长数字同步到车辆的车机或仪表进行显示。
6.根据权利要求4所述的一种红绿灯剩余时长智能提醒方法，其特征在于，步骤S4还包括，获取车辆的DMS系统信号，并判断用户的视线是否关注车辆前方，若未关注车辆前方，且剩余时长数字小于预设值时，提醒用户。
7.根据权利要求5或6所述的一种红绿灯剩余时长智能提醒方法，其特征在于，步骤S4中，通过语音或提示音提醒用户。
8.一种红绿灯剩余时长智能提醒系统，其特征在于，包括，
360°环视摄像头，用于拍摄车辆前方图片；
DMS系统，用于采集用户的动作信息；
车机系统，用于对所述图片中的地面标识和车道线进行识别，获取车辆的行驶车道信息；还用于识别红色交通灯，筛选与车辆行驶车道相对应的交通灯，并提取和识别该交通灯的剩余时长数字；还用于根据所述动作信息判断用户的视线是否关注车辆前方；
显示模块，用于同步显示剩余时长数字；
提醒模块，当剩余时长数字小于预设值，且用户的视线未关注车辆前方，用于对用户进行语音或提示音提醒。
9.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序被处理器运行时，执行如权利要求1~7中任一所述的红绿灯剩余时长智能提醒方法的步骤。
10.一种汽车，其特征在于，在汽车上安装有如权利要求8所述的红绿灯剩余时长智能提醒系统，在车辆停止在路口时启动。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210313168.2A CN114582146A (zh) | 2022-03-28 | 2022-03-28 | 红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210313168.2A CN114582146A (zh) | 2022-03-28 | 2022-03-28 | 红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114582146A true CN114582146A (zh) | 2022-06-03 |
Family
ID=81777154
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210313168.2A Withdrawn CN114582146A (zh) | 2022-03-28 | 2022-03-28 | 红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114582146A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115457791A (zh) * | 2022-11-09 | 2022-12-09 | 北京数字众智科技有限公司 | 一种基于数字化协议的信号传输方法和系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN205810121U (zh) * | 2016-07-04 | 2016-12-14 | 浙江吉利控股集团有限公司 | 一种车用信号灯智能提醒装置 |
| CN107945552A (zh) * | 2017-11-30 | 2018-04-20 | 北京小米移动软件有限公司 | 对信号灯变灯时间进行提示的方法、装置及存储介质 |
| CN108665719A (zh) * | 2017-03-28 | 2018-10-16 | 比亚迪股份有限公司 | 交通信号灯提醒方法、装置和车辆 |
| CN109801495A (zh) * | 2019-01-29 | 2019-05-24 | 合肥革绿信息科技有限公司 | 一种基于图像识别的信号灯提示系统和方法 |
| CN114120693A (zh) * | 2021-12-10 | 2022-03-01 | 智己汽车科技有限公司 | 一种用于车辆的交通灯提醒系统、方法、存储介质 |
| CN114148332A (zh) * | 2021-12-17 | 2022-03-08 | 上汽大众汽车有限公司 | 一种车辆驾驶启动提示方法、车辆驾驶启动提示系统及计算机可读存储介质 |
-
2022
- 2022-03-28 CN CN202210313168.2A patent/CN114582146A/zh not_active Withdrawn
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN205810121U (zh) * | 2016-07-04 | 2016-12-14 | 浙江吉利控股集团有限公司 | 一种车用信号灯智能提醒装置 |
| CN108665719A (zh) * | 2017-03-28 | 2018-10-16 | 比亚迪股份有限公司 | 交通信号灯提醒方法、装置和车辆 |
| CN107945552A (zh) * | 2017-11-30 | 2018-04-20 | 北京小米移动软件有限公司 | 对信号灯变灯时间进行提示的方法、装置及存储介质 |
| CN109801495A (zh) * | 2019-01-29 | 2019-05-24 | 合肥革绿信息科技有限公司 | 一种基于图像识别的信号灯提示系统和方法 |
| CN114120693A (zh) * | 2021-12-10 | 2022-03-01 | 智己汽车科技有限公司 | 一种用于车辆的交通灯提醒系统、方法、存储介质 |
| CN114148332A (zh) * | 2021-12-17 | 2022-03-08 | 上汽大众汽车有限公司 | 一种车辆驾驶启动提示方法、车辆驾驶启动提示系统及计算机可读存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115457791A (zh) * | 2022-11-09 | 2022-12-09 | 北京数字众智科技有限公司 | 一种基于数字化协议的信号传输方法和系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109427199B (zh) | 用于辅助驾驶的增强现实的方法及装置 | |
| CN105825696B (zh) | 基于信号灯信息提示的驾驶辅助系统 | |
| CN107506760B (zh) | 基于gps定位与视觉图像处理的交通信号检测方法及系统 | |
| JP4725391B2 (ja) | 車両用視程測定装置、及び運転支援装置 | |
| US8089512B2 (en) | Driving support device, driving support method and computer program | |
| US20200324787A1 (en) | Augmented reality method and apparatus for driving assistance | |
| JP5299026B2 (ja) | 車両用表示装置 | |
| EP1930863A2 (en) | Detecting and recognizing traffic signs | |
| JP5890294B2 (ja) | 映像処理システム | |
| CN106314424B (zh) | 基于汽车的超车辅助方法、装置及汽车 | |
| JP2016220011A (ja) | 画像処理装置、電子ミラーシステム、及び画像処理方法 | |
| JP2014153167A (ja) | 物体認識装置、物体認識方法及び物体認識プログラム | |
| CN105809095B (zh) | 交通路口通行状态的确定 | |
| CN110533945B (zh) | 交通信号灯的预警方法、系统、车辆及存储介质 | |
| JP2009226978A (ja) | 車両用周囲監視装置 | |
| CN112001208A (zh) | 用于车辆盲区的目标检测方法、装置和电子设备 | |
| CN114582146A (zh) | 红绿灯剩余时长智能提醒方法、系统、存储介质及汽车 | |
| KR20080004833A (ko) | 주간 및 야간 주행 차량을 조도상황에 따라 검출하는 방법및 장치 | |
| JP2005202787A (ja) | 車両用表示装置 | |
| JP4986070B2 (ja) | 車両用周囲監視装置 | |
| KR101428094B1 (ko) | 차선이 표시된 측방/후방 영상 제공 시스템 | |
| CN108765934B (zh) | 一种行人通过道路口提醒系统及方法 | |
| JP6459809B2 (ja) | 画像処理装置およびこれを備えた交通管理システム、画像処理方法 | |
| CN115447600B (zh) | 基于深度学习的车辆防拥堵方法、控制器和存储介质 | |
| CN109987025B (zh) | 用于夜晚环境的车辆驾驶辅助系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20220603 |