CN113291296A - 基于无人机的辅助泊车系统及方法 - Google Patents

基于无人机的辅助泊车系统及方法 Download PDF

Info

Publication number
CN113291296A
CN113291296A CN202110563485.5A CN202110563485A CN113291296A CN 113291296 A CN113291296 A CN 113291296A CN 202110563485 A CN202110563485 A CN 202110563485A CN 113291296 A CN113291296 A CN 113291296A
Authority
CN
China
Prior art keywords
vehicle
unmanned aerial
aerial vehicle
parking
parking space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110563485.5A
Other languages
English (en)
Inventor
杨志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dilu Technology Co Ltd
Original Assignee
Dilu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dilu Technology Co Ltd filed Critical Dilu Technology Co Ltd
Priority to CN202110563485.5A priority Critical patent/CN113291296A/zh
Publication of CN113291296A publication Critical patent/CN113291296A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00Equipment not otherwise provided for
    • B64D47/02Arrangements or adaptations of signal or lighting devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00Equipment not otherwise provided for
    • B64D47/08Arrangements of cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Mechanical Engineering (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种基于无人机的辅助泊车系统及方法,包括:利用终端交互设备与无人机建立通信连接,并控制无人机飞行到车辆的上方;无人机执行飞行任务并拍摄获取车辆的顶视图,识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离,将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备显示,控制车辆进行泊车,控制无人机飞回车辆内部。本发明可实现高精度识别,提高泊车效率和精准度,实现安全快速泊车,降低事故率。

Description

基于无人机的辅助泊车系统及方法
技术领域
本发明涉及一种基于无人机的辅助泊车系统方法,属于车辆控制的技术领域。
背景技术
当前阶段,车主进行泊车时,主要依靠自己观察后视镜、超声波雷达及周边情况来做出判断。车主通过自己的视角观察周边环境进行判断,获取的信息都只是局部的,没有一个全局的视野,容易发生擦碰事故。
目前无人机,是利用无线电遥控设备和自备的程序控制装置操纵的不载人飞机,或者由车载计算机完全地或间歇地自主地操作。它具有体积小、造价低、使用方便、对飞行环境要求低等优点。目前在航拍、农业、植保、微型自拍、快递运输、灾难救援、观察野生动物、监控传染病、测绘、新闻报道、电力巡检、救灾、影视拍摄、制造浪漫等领域的应用,大大的拓展了无人机本身的用途。
而现有的车辆在泊车时的局限性,导致泊车过程存在缺陷,如何将无人机运用于车载系统中,实现辅助车辆泊车,具有重要意义。
发明内容
本发明所要解决的技术问题在于克服现有技术中车辆在泊车中仅依靠观察后视镜、超声波雷达及周边情况来做出判断,导致局部信息不能准确泊车的问题,提供一种基于无人机的辅助泊车系统及方法,通过终端交互设备和无人机建立通信连接,车主泊车时通过无人机提供车辆的顶视图,实现高精度识别,提高泊车效率和精准度。
本发明具体采用以下技术方案解决上述技术问题:
基于无人机的辅助泊车系统,包括:
设置于车内的终端交互设备,用于与无人机建立通信连接,并控制无人机飞行到车辆的上方和飞回车辆内部;并显示无人机发送的反馈信息,并控制车辆进行泊车;
无人机,用于执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离;以及,将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备。
进一步地,作为本发明的一种优选技术方案:所述终端交互设备通过WIFI网络或蓝牙与无人机建立通信连接。
进一步地,作为本发明的一种优选技术方案:所述无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
进一步地,作为本发明的一种优选技术方案:所述终端交互设备还包括根据无人机发送的反馈信息调整无人机的飞行位置。
本发明还提出一种基于无人机的辅助泊车方法,该方法基于设置于车内的终端交互设备和无人机,包括以下步骤:
步骤1、利用终端交互设备与无人机建立通信连接,并控制无人机飞行到车辆的上方;
步骤2、无人机执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离;
步骤3、无人机将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备;
步骤4、终端交互设备显示无人机发送的反馈信息,并控制车辆进行泊车,以及控制无人机飞回车辆内部。
进一步地,作为本发明的一种优选技术方案:所述步骤1中终端交互设备通过WIFI网络或蓝牙与无人机建立通信连接。
进一步地,作为本发明的一种优选技术方案:所述步骤2中无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
进一步地,作为本发明的一种优选技术方案:所述步骤4还包括终端交互设备根据无人机发送的反馈信息调整无人机的飞行位置。
本发明采用上述技术方案,能产生如下技术效果:
本发明的基于无人机的辅助泊车系统及方法,通过终端交互设备和无人机建立通信连接,车主泊车时通过无人机提供车辆的顶视图,无人机识别泊车位和各种障碍物,计算泊位是否适合泊车、泊车过程中我方车辆尺寸及其与障碍物的实时距离,实现高精度识别。并将车辆的顶视图、识别出的泊车位信息及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离信息实时显示在车辆的屏幕上,车主可以根据这个全局视野和辅助信息进行判断,提高泊车效率和精准度,减少车主在复杂、狭小空间进行泊车时的事故率、
实现安全快速泊车,降低事故率。
附图说明
图1为本发明基于无人机的辅助泊车方法的流程示意图。
具体实施方式
下面结合说明书附图对本发明的实施方式进行描述。
本发明涉及一种基于无人机的辅助泊车系统,主要包括:设置于车内的终端交互设备和无人机,通过终端交互设备和无人机建立通信连接,实现快速泊车。
其中,所述设置于车内的终端交互设备,用于与无人机建立通信连接,并控制无人机飞行到车辆的上方和飞回车辆内部;并显示无人机发送的反馈信息,并控制车辆进行泊车;
所述无人机,用于执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离;以及,将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备。
优选地,本系统中,所述终端交互设备通过WIFI网络或蓝牙与无人机建立通信连接,利用WIFI网络的广泛性和稳定性,可以提高通信连接质量,或利用蓝牙的便捷性,提高连接速度,实现稳定的无线控制。
以及,本系统中,所述无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
另外,本系统中,所述终端交互设备还可以包括根据无人机发送的反馈信息调整无人机的飞行位置,根据实时的反馈信息有效调整无人机的飞行情况,实现更好位置的拍摄,便于终端交互设备进行更好的观察。
根据上述系统,本发明还涉及一种基于无人机的辅助泊车方法,该方法基于设置于车内的终端交互设备和无人机,如图1所示,主要包括以下步骤:
步骤1、车主开始泊车时,利用终端交互设备与无人机建立通信连接,并控制无人机飞行到车辆的上方,具体步骤如下:
步骤1.1:车主开启车辆内的终端交互设备和无人机。
步骤1.2:终端交互设备建立无线通信网络,本实施例中采用WIFI网络或蓝牙。无人机通过WIFI网络连接到终端交互设备建立的WIFI网络,或通过蓝牙直接与终端交互设备建立通信连接。
步骤1.3:车内的终端交互设备提供显示界面,控制无人机的移动,控制无人机飞行到车辆的上方。
步骤2、无人机执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离,具体步骤如下:
步骤2.1:无人机执行飞行任务,并利用自身携带的摄像头拍摄获取车辆的顶视图。
步骤2.2:无人机调用图像处理模块,识别出图像里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,在判断出泊车位适合停车时继续识别车辆的顶视图中泊车位内部和周边的障碍物,如识别泊车位内部的地锁或者锥桶等障碍物,泊车位周边的障碍物包括静态物体、动态的行人、动物、其他车辆等,进入步骤2.3。否则,返回泊车位不适合的信息至终端交互设备,由终端交互设备显示当前识别的泊车位不适合本车辆,提供给车主进行自主选择。
步骤2.3:当判断出泊车位适合车辆停车时,无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
步骤3、无人机将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备,具体步骤如下:
步骤3.1:无人机将拍摄的车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离,都一并作为反馈信息送到车辆上的终端交互设备进行显示。
步骤4、终端交互设备显示无人机发送的反馈信息,并控制车辆进行泊车,以及控制无人机飞回车辆内部,具体步骤如下:
步骤4.1:终端交互设备显示无人机发送的反馈信息,显示出车辆的顶视图、泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离等,车主观察终端交互设备上的车辆的顶视图和对应信息,确定好泊车位位置后,控制车辆进行泊车。
步骤4.2:车主还可以通过终端交互设备调整无人机的飞行位置,根据实时的反馈信息有效调整无人机的位置,调整飞行高度和距离,实现更好位置的拍摄,便于终端交互设备进行更好的观察。
步骤4.3:完成车辆泊车后,车主通过终端交互设备控制无人机飞回车内,关闭无人机,结束停车过程。
综上,本发明的基于无人机的辅助泊车系统及方法,通过终端交互设备和无人机建立通信连接,车主泊车时通过无人机提供车辆的顶视图,无人机实时识别和计算,车主可以根据这个全局视野和辅助信息进行判断,提高泊车效率和精准度,减少车主在复杂、狭小空间进行泊车时的事故率,实现安全快速泊车,降低事故率。
上面结合附图对本发明的实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。

Claims (8)

1.基于无人机的辅助泊车系统,其特征在于,包括:
设置于车内的终端交互设备,用于与无人机建立通信连接,并控制无人机飞行到车辆的上方和飞回车辆内部;并显示无人机发送的反馈信息,并控制车辆进行泊车;
无人机,用于执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离;以及,将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备。
2.根据权利要求1所述基于无人机的辅助泊车系统,其特征在于:所述终端交互设备通过WIFI网络或蓝牙与无人机建立通信连接。
3.根据权利要求1所述基于无人机的辅助泊车系统,其特征在于:所述无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
4.根据权利要求1所述基于无人机的辅助泊车系统,其特征在于:所述终端交互设备还包括根据无人机发送的反馈信息调整无人机的飞行位置。
5.基于无人机的辅助泊车方法,其特征在于,该方法基于设置于车内的终端交互设备和无人机,包括以下步骤:
步骤1、利用终端交互设备与无人机建立通信连接,并控制无人机飞行到车辆的上方;
步骤2、无人机执行飞行任务并拍摄获取车辆的顶视图,利用图像处理模块识别出车辆的顶视图里的泊车位,根据识别出的泊车位和车辆的尺寸判断是否适合停车,并且在判断出适合停车时利用图像处理模块识别车辆的顶视图中泊车位内部和周边的障碍物,实时计算车辆尺寸、车辆和各个障碍物的距离;
步骤3、无人机将获取车辆的顶视图、识别出的泊车位及其内部和周边的障碍物、计算的车辆尺寸及其与各个障碍物的距离一并作为反馈信息发送至终端交互设备;
步骤4、终端交互设备显示无人机发送的反馈信息,并控制车辆进行泊车,以及控制无人机飞回车辆内部。
6.根据权利要求5所述基于无人机的辅助泊车方法,其特征在于:所述步骤1中终端交互设备通过WIFI网络或蓝牙与无人机建立通信连接。
7.根据权利要求5所述基于无人机的辅助泊车方法,其特征在于:所述步骤2中无人机利用图像处理模块根据车辆及其与泊车位、周边的障碍物在车辆的顶视图中的像素占比,实时计算得到车辆尺寸、车辆和各个障碍物的距离。
8.根据权利要求5所述基于无人机的辅助泊车方法,其特征在于:所述步骤4还包括终端交互设备根据无人机发送的反馈信息调整无人机的飞行位置。
CN202110563485.5A 2021-05-24 2021-05-24 基于无人机的辅助泊车系统及方法 Pending CN113291296A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110563485.5A CN113291296A (zh) 2021-05-24 2021-05-24 基于无人机的辅助泊车系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110563485.5A CN113291296A (zh) 2021-05-24 2021-05-24 基于无人机的辅助泊车系统及方法

Publications (1)

Publication Number Publication Date
CN113291296A true CN113291296A (zh) 2021-08-24

Family

ID=77324168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110563485.5A Pending CN113291296A (zh) 2021-05-24 2021-05-24 基于无人机的辅助泊车系统及方法

Country Status (1)

Country Link
CN (1) CN113291296A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016215301A1 (de) * 2016-08-17 2018-02-22 Robert Bosch Gmbh Verfahren zum Unterstützen eines Parkvorgangs eines Fahrzeugs
CN109693666A (zh) * 2019-02-02 2019-04-30 中国第一汽车股份有限公司 一种用于泊车的人机交互系统及泊车方法
CN110562248A (zh) * 2019-09-17 2019-12-13 浙江吉利汽车研究院有限公司 一种基于无人机的自动泊车系统及自动泊车方法
CN110606071A (zh) * 2019-09-06 2019-12-24 中国第一汽车股份有限公司 一种泊车方法、装置、车辆和存储介质
CN112141087A (zh) * 2020-06-24 2020-12-29 上汽通用五菱汽车股份有限公司 自动泊车过程的安全防护方法、装置、设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016215301A1 (de) * 2016-08-17 2018-02-22 Robert Bosch Gmbh Verfahren zum Unterstützen eines Parkvorgangs eines Fahrzeugs
CN109693666A (zh) * 2019-02-02 2019-04-30 中国第一汽车股份有限公司 一种用于泊车的人机交互系统及泊车方法
CN110606071A (zh) * 2019-09-06 2019-12-24 中国第一汽车股份有限公司 一种泊车方法、装置、车辆和存储介质
CN110562248A (zh) * 2019-09-17 2019-12-13 浙江吉利汽车研究院有限公司 一种基于无人机的自动泊车系统及自动泊车方法
CN112141087A (zh) * 2020-06-24 2020-12-29 上汽通用五菱汽车股份有限公司 自动泊车过程的安全防护方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN107168360B (zh) 无人飞行器的飞行辅助方法和装置
CN106292684B (zh) 搭载飞行器的车辆
DE102019100559A1 (de) Verfahren und systeme zur unterstützung des betriebs eines strassenfahrzeugs mit einer flugdrohne
CN112326686B (zh) 无人机智能巡航路面病害检测方法、无人机和检测系统
DE102019105307A1 (de) Dynamische merkmalsverfügbarkeitsabbildung für ein fahrzeug
CN107483529B (zh) 车辆的多方泊车控制方法、系统、服务平台、泊车控制器
DE102020104236A1 (de) Fahrzeugbetrieb als Reaktion auf ein Notfallereignis
CN105956081B (zh) 地面站地图更新方法及装置
CN112162565B (zh) 一种基于多机协同作业的不间断自主杆塔巡检方法
CN110929703B (zh) 信息确定方法、装置和电子设备
JP2018151845A (ja) 農作業車の作業地地図データ作成装置
DE102018112233B4 (de) Bereitstellung eines verkehrsspiegelinhalts für einen fahrer
JPWO2018198313A1 (ja) 無人飛行体のアクションプラン作成システム、方法及びプログラム
WO2016011590A1 (zh) 一种数据处理方法、装置及飞行器
CN208938350U (zh) 一种自适应巡航模式下的车载hmi显示系统
DE102018213562A1 (de) Verfahren zum Betreiben einer Ausgabeeinrichtung eines Kraftfahrzeugs, Steuereinrichtung, Kraftfahrzeug
CN112422927A (zh) 无人机拍摄视频与地图实时结合方法及系统
CN112817336A (zh) 基于民用小型无人机的高精度放射源搜寻定位系统及定位方法
CN112163483A (zh) 一种目标数量检测系统
CN106184793A (zh) 一种用于汽车的空中俯视影像监视系统
CN105718867A (zh) 一种基于导航飞艇的城市空中街景处理系统及方法
US20210229804A1 (en) Traffic information processing equipment, system and method
CN112598756B (zh) 路边传感器标定方法、装置和电子设备
CN114240769A (zh) 一种图像处理方法以及装置
CN110597275A (zh) 利用无人机来生成地图的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210824

RJ01 Rejection of invention patent application after publication