CN110371140A - 一种基于全景环视图像处理的车门开启预警系统及方法 - Google Patents

一种基于全景环视图像处理的车门开启预警系统及方法 Download PDF

Info

Publication number
CN110371140A
CN110371140A CN201910712354.1A CN201910712354A CN110371140A CN 110371140 A CN110371140 A CN 110371140A CN 201910712354 A CN201910712354 A CN 201910712354A CN 110371140 A CN110371140 A CN 110371140A
Authority
CN
China
Prior art keywords
car door
vehicle
door opening
closing
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910712354.1A
Other languages
English (en)
Other versions
CN110371140B (zh
Inventor
陈勇
吴贵新
陈军
刘心文
凌政锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FJ Motor Group Yudo New Energy Automobile Co Ltd
Original Assignee
FJ Motor Group Yudo New Energy Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FJ Motor Group Yudo New Energy Automobile Co Ltd filed Critical FJ Motor Group Yudo New Energy Automobile Co Ltd
Priority to CN201910712354.1A priority Critical patent/CN110371140B/zh
Publication of CN110371140A publication Critical patent/CN110371140A/zh
Application granted granted Critical
Publication of CN110371140B publication Critical patent/CN110371140B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B60R16/0231Circuits relating to the driving or the functioning of the vehicle
    • B60R16/0232Circuits relating to the driving or the functioning of the vehicle for measuring vehicle parameters and indicating critical, abnormal or dangerous conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Emergency Alarm Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及一种基于全景环视图像处理的车门开启预警系统及方法,所述系统包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。

Description

一种基于全景环视图像处理的车门开启预警系统及方法
技术领域
本发明涉及智能汽车技术领域,特别涉及一种基于全景环视图像处理的车门开启预警系统及方法。
背景技术
全景环视系统(AVM),该系统通过广角摄像头分别采集车辆前、后、左、右4个方向的图像信息,然后传送给中央控制器,经过摄像头参数校正、镜头扭曲校正、鸟瞰视角转换、白平衡匹配和图像缝合处理,最终在显示器上显示一个可直观监视车辆周围环境的全景鸟瞰画面,能有效减少盲区,提高安全性。
通常情况下,当车辆车门开启时,AVM画面中的车模(通常是左侧的全景鸟瞰图)会模拟当前车门开启状态。但由于目前该功能只是用于提醒用户车门是否处于开启或关闭状态,未对车门开启最大化的位置进行实车标定;而无车门开启过程中的障碍物检测,导致实车车门开启后可能引起障碍物碰撞,对车门造成损伤。
发明内容
为此,需要提供一种基于全景环视图像处理的车门开启预警系统及方法,解决现有全景环视系统中无法实现车门开启时障碍物检测,导致实车车门开启后可能引起障碍物碰撞的问题。
为实现上述目的,发明人提供了一种基于全景环视图像处理的车门开启预警系统,包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;
所述车门检测模块包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器;
所述摄像头模块包括四个摄像头,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器;
所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示。
进一步优化,所述AVM控制器还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
进一步优化,所述AVM控制器还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
进一步优化,所述娱乐显示屏还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器,所述AVM控制器还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断回触碰到障碍物时,则向娱乐显示屏发送预警信息。
进一步优化,还包括仪表,所述仪表连接于AVM控制器,所述AVM控制器还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表,所述仪表用于接收到报警信息后,发出声音报警。
发明人还提供了另一个技术方案:一种基于全景环视图像处理的车门开启预警方法,其特征在于,包括以下步骤:
监测车辆车门的开启或关闭的幅度值,判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
进一步优化,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:
在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
进一步优化,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:
当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
进一步优化,还包括以下步骤:
通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;
当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
进一步优化,所述“若存在障碍物”之后还包括以下步骤:
发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。
区别于现有技术,上述技术方案,通过监测车辆开启或关闭的幅度值进行判断车门是否开启或关闭,当判断车门开启或关闭,采集车辆四个方向的图像信息,并生成全景鸟瞰图,模拟车门开启或关闭,判断车门在开启或关闭的活动区域内是否有障碍物,若有障碍物,则进行预警,提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
附图说明
图1为具体实施方式所述基于全景环视图像处理的车门开启预警系统的一种结构示意图;
图2为具体实施方式所述全景鸟瞰图的一种示意图;
图3为具体实施方式所述填充条纹的全景鸟瞰图的一种示意图。
图4为具体实施方式所述基于全景环视图像处理的车门开启预警方法的一种流程示意图;
附图标记说明:
110、AVM控制器;
120、车门检测模块;
131、摄像头;
140、娱乐显示屏;
150、仪表。
具体实施方式
为详细说明技术方案的技术内容、构造特征、所实现目的及效果,以下结合具体实施例并配合附图详予说明。
请参阅图1-2,本实施例提供了一种基于全景环视图像处理的车门开启预警系统,包括AVM控制器110、车门检测模块120、摄像头模块及娱乐显示屏140;
所述车门检测模块120包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器110,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器110;
所述摄像头模块包括四个摄像头131,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器110;
所述AVM控制器110用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏140上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏140用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示。
通过布置在车辆的车门转向柱上的车门检测传感器进行实时监测车门的开启或关闭的幅度值,其中,车门检测传感器的个数根据车辆的车门的个数进行设置,若车辆的车门为四个,则车门检测传感器的个数为四个,分别安装在车辆的四个车门的转向柱上,将车门检测传感器监测到车门开启或关闭的幅度值发送至车门检测控制器,车门检测控制器将车门检测传感器监测到车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器,AVM控制器可以根据该CAN网络信号判断当前车辆哪个车门开启或关闭。当AVM控制器通过车门检测模块监测到当前车辆的车门开启或关闭时,通过摄像头模块分别采集当前车辆的四个方向的图像信息,即左视、右视、前视及后视四个方向的图像信息,然后根据采集的四个图像信息在娱乐显示屏上生成当前车辆的全景鸟瞰图,全景鸟瞰图中显示当前车辆的车模,然后AVM控制器根据车辆检测控制器发送的CAN网络信号模拟车模上相应的车门开启或关闭,即如车辆开启或关闭的是车辆左前门,相对应在车模的左前门模拟车门开启;当模拟车门开启的过程中,判断车门开启或关闭的活动区域中是否存在障碍物,即判断车门是否会触碰到障碍物,其中,通过车门所对应的图像信息进行判断是否存在障碍物,如车辆左边的车门通过左视方向的图像信息进行判断是否会触碰到障碍物,而车辆右边的车门通过右视方向的图像信息进行判断是否会触碰到障碍物;其中,障碍物主要为人、车、墙壁及电线杆等;当判断车门在开启或关闭的过程中,会触碰到障碍物,即车门的活动区域内存在障碍物,则向娱乐显示屏发送预警信息,当娱乐显示屏接收到预警信息后,在全景鸟瞰图上车模相应的车门以预警颜色显示,进行提示车门开启或关闭的过程中可能会触碰到障碍物,如当判断到左前门的活动区域内存在障碍物,则将车模的左前门用预警颜色显示;其中娱乐显示屏可以通过其他方式进行提醒,如文字等。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
请参阅图3,在现有技术中,当车门开启后,全景鸟瞰图中相应视角的图像进行条纹填充处理,原因是由于左、右摄像头相对于车身的位置会随着车门开启而变化,从而改变了摄像头的图像采集方向,破坏了图像拼接效果,为了解决该问题,所述AVM控制器110还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。当在全景鸟瞰图中的车模模拟车门打开时,保证其相应视角在车门关闭时的图像信息,使得车模打开时,全景鸟瞰图的图像信息不会发生变化,不需要通过条纹进行填充,达到该车门在车辆静止及周边环境下的实时模拟。
在本实施例中,为了减少车门检测模块实时监测造成能源浪费,所述AVM控制器110还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块120监测车门开启或关闭的幅度值。当AVM控制器110检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块120监测车门开启或关闭的幅度值,使得在正常情况下车门检测模块处于休眠状态,可以减少能源上的消耗。
在本实施例中,为了进一步增加用户的体验,所述娱乐显示屏140还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器110,所述AVM控制器110还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断回触碰到障碍物时,则向娱乐显示屏发送预警信息。用户可以通过娱乐显示屏上车模进行模拟车门打开,当用户在娱乐显示屏上操作车模模拟车门打开,娱乐显示屏将用户在车模上模拟车门开启或关闭的操作信号发送给AVM控制器,AVM控制器进行判断车门的活动区域内是否有障碍物,及判断车门在开区或关闭的过程中是否会触碰到障碍物,当判断存在障碍物时,即车门会触碰到障碍物时,则向娱乐显示屏发送预警信息,娱乐显示屏接收到预警信息后,将车模对应的车门用预警颜色进行显示,以提示用户车门可能会触碰到障碍物,通过用户操作娱乐显示屏进行模拟车门开启,并判断车门开启是否会触碰到障碍物,可以避免车门开启过程中触碰障碍物,同时增加用户的体验。
在本实施例中,为了进一步对用户进行预警,避免用户未看到娱乐显示屏的预警信号,还包括仪表150,所述仪表150连接于AVM控制器110,所述AVM控制器110还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表150,所述仪表150用于接收到报警信息后,发出声音报警。当AVM控制器110判断当前车门开启或关闭的过程中会触碰到障碍物,则向仪表150发送报警信息,当仪表150接收到报警信息后,发出声音报警,对用户进行提醒,使得用户可以知晓车门开启的过程中可能会触碰到障碍物,可以及时作出反应,避免车门开启或关闭时触碰到障碍物。
请参阅图4。在另一个实施例中,一种基于全景环视图像处理的车门开启预警方法,应用于上述实施例中的基于全景环视图像处理的车门开启预警系统,该系统包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏,该方法包括以下步骤:
步骤S410:监测车辆车门的开启或关闭的幅度值;
步骤S410:判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,执行步骤S410:采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
步骤S410:根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
步骤S410:根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则执行步骤S410:在全景鸟瞰图中车模相应的车门以预警颜色显示。
通过布置在车辆的车门转向柱上的车门检测传感器进行实时监测车门的开启或关闭的幅度值,其中,车门检测传感器的个数根据车辆的车门的个数进行设置,若车辆的车门为四个,则车门检测传感器的个数为四个,分别安装在车辆的四个车门的转向柱上,将车门检测传感器监测到车门开启或关闭的幅度值发送至车门检测控制器,车门检测控制器将车门检测传感器监测到车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器,AVM控制器可以根据该CAN网络信号判断当前车辆哪个车门开启或关闭。当AVM控制器通过车门检测模块监测到当前车辆的车门开启或关闭时,通过摄像头模块分别采集当前车辆的四个方向的图像信息,即左视、右视、前视及后视四个方向的图像信息,然后根据采集的四个图像信息在娱乐显示屏上生成当前车辆的全景鸟瞰图,全景鸟瞰图中显示当前车辆的车模,然后AVM控制器根据车辆检测控制器发送的CAN网络信号模拟车模上相应的车门开启或关闭,即如车辆开启或关闭的是车辆左前门,相对应在车模的左前门模拟车门开启;当模拟车门开启的过程中,判断车门开启或关闭的活动区域中是否存在障碍物,即判断车门是否会触碰到障碍物,其中,通过车门所对应的图像信息进行判断是否存在障碍物,如车辆左边的车门通过左视方向的图像信息进行判断是否会触碰到障碍物,而车辆右边的车门通过右视方向的图像信息进行判断是否会触碰到障碍物;其中,障碍物主要为人、车、墙壁及电线杆等;当判断车门在开启或关闭的过程中,会触碰到障碍物,即车门的活动区域内存在障碍物,则向娱乐显示屏发送预警信息,当娱乐显示屏接收到预警信息后,在全景鸟瞰图上车模相应的车门以预警颜色显示,进行提示车门开启或关闭的过程中可能会触碰到障碍物,如当判断到左前门的活动区域内存在障碍物,则将车模的左前门用预警颜色显示;其中娱乐显示屏可以通过其他方式进行提醒,如文字等。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
在本实施例中,如图所示,在现有技术中,当车门开启后,全景鸟瞰图中相应视角的图像进行条纹填充处理,原因是由于左、右摄像头相对于车身的位置会随着车门开启而变化,从而改变了摄像头的图像采集方向,破坏了图像拼接效果,为了解决该问题,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。当在全景鸟瞰图中的车模模拟车门打开时,保证其相应视角在车门关闭时的图像信息,使得车模打开时,全景鸟瞰图的图像信息不会发生变化,不需要通过条纹进行填充,达到该车门在车辆静止及周边环境下的实时模拟。
在本实施例中,为了减少车门检测模块实时监测造成能源浪费,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。当AVM控制器检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值,使得在正常情况下车门检测模块处于休眠状态,可以减少能源上的消耗。
在本实施例中,为了进一步增加用户的体验,还包括以下步骤:通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。用户可以通过娱乐显示屏上车模进行模拟车门打开,当用户在娱乐显示屏上操作车模模拟车门打开,娱乐显示屏将用户在车模上模拟车门开启或关闭的操作信号发送给AVM控制器,AVM控制器进行判断车门的活动区域内是否有障碍物,及判断车门在开区或关闭的过程中是否会触碰到障碍物,当判断存在障碍物时,即车门会触碰到障碍物时,则向娱乐显示屏发送预警信息,娱乐显示屏接收到预警信息后,将车模对应的车门用预警颜色进行显示,以提示用户车门可能会触碰到障碍物,通过用户操作娱乐显示屏进行模拟车门开启,并判断车门开启是否会触碰到障碍物,可以避免车门开启过程中触碰障碍物,同时增加用户的体验。
在本实施例中,为了进一步对用户进行预警,避免用户未看到娱乐显示屏的预警信号,所述“若存在障碍物”之后还包括以下步骤:发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。当AVM控制器判断当前车门开启或关闭的过程中会触碰到障碍物,则向仪表发送报警信息,当仪表接收到报警信息后,发出声音报警,对用户进行提醒,使得用户可以知晓车门开启的过程中可能会触碰到障碍物,可以及时作出反应,避免车门开启或关闭时触碰到障碍物。
需要说明的是,尽管在本文中已经对上述各实施例进行了描述,但并非因此限制本发明的专利保护范围。因此,基于本发明的创新理念,对本文所述实施例进行的变更和修改,或利用本发明说明书及附图内容所作的等效结构或等效流程变换,直接或间接地将以上技术方案运用在其他相关的技术领域,均包括在本发明的专利保护范围之内。

Claims (10)

1.一种基于全景环视图像处理的车门开启预警系统,其特征在于,包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;
所述车门检测模块包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器;
所述摄像头模块包括四个摄像头,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器;
所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示。
2.根据权利要求1所述基于全景环视图像处理的车门开启预警系统,其特征在于,所述AVM控制器还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
3.根据权利要求1所述基于全景环视图像处理的车门开启预警系统,其特征在于,所述AVM控制器还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
4.根据权利要求1所述基于全景环视图像处理的车门开启预警系统,其特征在于,所述娱乐显示屏还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器,所述AVM控制器还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断回触碰到障碍物时,则向娱乐显示屏发送预警信息。
5.根据权利要求1所述基于全景环视图像处理的车门开启预警系统,其特征在于,还包括仪表,所述仪表连接于AVM控制器,所述AVM控制器还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表,所述仪表用于接收到报警信息后,发出声音报警。
6.一种基于全景环视图像处理的车门开启预警方法,其特征在于,包括以下步骤:
监测车辆车门的开启或关闭的幅度值,判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
7.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:
在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
8.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:
当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
9.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,还包括以下步骤:
通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;
当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
10.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“若存在障碍物”之后还包括以下步骤:
发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。
CN201910712354.1A 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警系统及方法 Active CN110371140B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910712354.1A CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910712354.1A CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警系统及方法

Publications (2)

Publication Number Publication Date
CN110371140A true CN110371140A (zh) 2019-10-25
CN110371140B CN110371140B (zh) 2021-08-06

Family

ID=68257846

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910712354.1A Active CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警系统及方法

Country Status (1)

Country Link
CN (1) CN110371140B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111674328A (zh) * 2020-06-04 2020-09-18 纵目科技(上海)股份有限公司 一种全景感知模块的显示系统、终端和存储介质
CN111757057A (zh) * 2020-06-17 2020-10-09 广州市泰睿科技有限公司 一种全景环视显示方法、装置、设备及存储介质
CN112406780A (zh) * 2020-11-20 2021-02-26 广州橙行智动汽车科技有限公司 车门的控制方法、控制装置、车辆和存储介质
CN112796609A (zh) * 2019-11-13 2021-05-14 北京新能源汽车股份有限公司 一种车门预警方法、装置、设备及汽车
CN113183876A (zh) * 2021-06-03 2021-07-30 辽宁工程技术大学 一种预防车辆碰撞预警提示系统
CN113232585A (zh) * 2021-05-07 2021-08-10 广州小鹏汽车科技有限公司 车辆开门防碰撞方法、装置、车辆及存储介质
CN114435244A (zh) * 2022-01-28 2022-05-06 中国第一汽车股份有限公司 一种车门开关障碍物检测方法、装置、设备和介质
WO2022135479A1 (zh) * 2020-12-23 2022-06-30 奇瑞汽车股份有限公司 行车安全提醒系统、方法及车辆

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793684A (zh) * 2012-10-30 2014-05-14 现代自动车株式会社 用于全景式监控系统的检测障碍物的设备和方法
CN104508724A (zh) * 2012-07-27 2015-04-08 大众汽车有限公司 用于避免碰撞的方法和装置
CN104554254A (zh) * 2013-10-11 2015-04-29 现代摩比斯株式会社 利用全景监控的车辆用迎宾系统及其工作方法
CN105539289A (zh) * 2015-12-14 2016-05-04 宁波裕兰信息科技有限公司 一种基于四颗摄像头360度环视的停车开门预警方法
CN106740470A (zh) * 2016-11-21 2017-05-31 奇瑞汽车股份有限公司 一种基于全景影像系统的盲区监测方法及系统
CN207433379U (zh) * 2017-11-02 2018-06-01 重庆长安汽车股份有限公司 集成开门预警功能的360°全景泊车系统
CN109131071A (zh) * 2017-06-16 2019-01-04 通用汽车环球科技运作有限责任公司 汽车车门打开危险警告系统和方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104508724A (zh) * 2012-07-27 2015-04-08 大众汽车有限公司 用于避免碰撞的方法和装置
CN103793684A (zh) * 2012-10-30 2014-05-14 现代自动车株式会社 用于全景式监控系统的检测障碍物的设备和方法
CN104554254A (zh) * 2013-10-11 2015-04-29 现代摩比斯株式会社 利用全景监控的车辆用迎宾系统及其工作方法
CN105539289A (zh) * 2015-12-14 2016-05-04 宁波裕兰信息科技有限公司 一种基于四颗摄像头360度环视的停车开门预警方法
CN106740470A (zh) * 2016-11-21 2017-05-31 奇瑞汽车股份有限公司 一种基于全景影像系统的盲区监测方法及系统
CN109131071A (zh) * 2017-06-16 2019-01-04 通用汽车环球科技运作有限责任公司 汽车车门打开危险警告系统和方法
CN207433379U (zh) * 2017-11-02 2018-06-01 重庆长安汽车股份有限公司 集成开门预警功能的360°全景泊车系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112796609A (zh) * 2019-11-13 2021-05-14 北京新能源汽车股份有限公司 一种车门预警方法、装置、设备及汽车
CN111674328A (zh) * 2020-06-04 2020-09-18 纵目科技(上海)股份有限公司 一种全景感知模块的显示系统、终端和存储介质
CN111757057A (zh) * 2020-06-17 2020-10-09 广州市泰睿科技有限公司 一种全景环视显示方法、装置、设备及存储介质
CN111757057B (zh) * 2020-06-17 2022-06-17 广州市泰睿科技有限公司 一种全景环视显示方法、装置、设备及存储介质
CN112406780A (zh) * 2020-11-20 2021-02-26 广州橙行智动汽车科技有限公司 车门的控制方法、控制装置、车辆和存储介质
WO2022135479A1 (zh) * 2020-12-23 2022-06-30 奇瑞汽车股份有限公司 行车安全提醒系统、方法及车辆
CN113232585A (zh) * 2021-05-07 2021-08-10 广州小鹏汽车科技有限公司 车辆开门防碰撞方法、装置、车辆及存储介质
CN113183876A (zh) * 2021-06-03 2021-07-30 辽宁工程技术大学 一种预防车辆碰撞预警提示系统
CN114435244A (zh) * 2022-01-28 2022-05-06 中国第一汽车股份有限公司 一种车门开关障碍物检测方法、装置、设备和介质

Also Published As

Publication number Publication date
CN110371140B (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN110371140A (zh) 一种基于全景环视图像处理的车门开启预警系统及方法
US20130113614A1 (en) Systems and methods for vehicle door clearance zone projection
CN208344074U (zh) 一种基于机器视觉的汽车综合辅助驾驶系统
CN104385987B (zh) 一种汽车监控方法及系统
CN104065930B (zh) 集成摄像头模组和光传感器的视觉辅助方法及装置
WO2015064980A1 (ko) 동작, 안면, 눈, 입모양 인지를 통한 2단계 졸음운전 방지 장치
CN109153359A (zh) 一种汽车盲区的监测方法及系统
CN111267728A (zh) 车辆车门安全监控方法、系统、设备及存储介质
CN104627076A (zh) 一种汽车防撞预警系统及汽车
CN107953830A (zh) 一种大型客车盲区检测警报系统及其检测警报方法
CN109552315A (zh) 全视野摄像头主机控制系统
CN201240344Y (zh) 嵌入式集成视觉辅助行车安全系统
CN109552173A (zh) 全视野摄像头主机控制系统
CN107672551A (zh) 一种前车防撞预警系统及其控制方法
JP2004203126A (ja) 車両用周辺監視装置
CN109552174A (zh) 全视野摄像头主机控制单元
CN113276770B (zh) 基于安全和低成本需求的商用车全盲区监测系统和方法
CN107472128A (zh) 车辆盲区的监控方法、系统及车辆
CN107705634A (zh) 基于行车记录仪的交叉口紧急情况处理系统及方法
CN108973861A (zh) 一种智能a柱行车安全系统
CN202939772U (zh) 基于智能视频的校车监测系统
CN108944680A (zh) 一种基于环视系统的雷达辅助行车系统
KR20120105943A (ko) 차량용 도어 열림 강도 조절장치 및 방법
CN106585548A (zh) 车门开启安全预警辅助控制方法及系统
CN204526997U (zh) 一种汽车防撞预警系统及汽车

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant after: Yundu New Energy Automobile Co.,Ltd.

Address before: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant before: FJ MOTOR GROUP, YUDO NEW-ENERGY AUTOMOBILE Co.,Ltd.

Address after: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant after: Yundu New Energy Vehicle Co.,Ltd.

Address before: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant before: Yundu New Energy Automobile Co.,Ltd.

GR01 Patent grant
GR01 Patent grant