TW201823898A - 利用無人駕駛飛行器監測對使用者的危險的系統和方法 - Google Patents

利用無人駕駛飛行器監測對使用者的危險的系統和方法 Download PDF

Info

Publication number
TW201823898A
TW201823898A TW106117151A TW106117151A TW201823898A TW 201823898 A TW201823898 A TW 201823898A TW 106117151 A TW106117151 A TW 106117151A TW 106117151 A TW106117151 A TW 106117151A TW 201823898 A TW201823898 A TW 201823898A
Authority
TW
Taiwan
Prior art keywords
user
uav
determining
travel path
processor
Prior art date
Application number
TW106117151A
Other languages
English (en)
Inventor
多隆 柏魯克
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201823898A publication Critical patent/TW201823898A/zh

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENTS OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D1/00Dropping, ejecting, releasing, or receiving articles, liquids, or the like, in flight
    • B64D1/02Dropping, ejecting, or releasing articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U20/00Constructional aspects of UAVs
    • B64U20/80Arrangement of on-board electronics, e.g. avionics systems or wiring
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/14Direct-mode setup
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • B64U10/13Flying platforms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • B64U10/13Flying platforms
    • B64U10/14Flying platforms with four distinct rotor axes, e.g. quadcopters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U20/00Constructional aspects of UAVs
    • B64U20/80Arrangement of on-board electronics, e.g. avionics systems or wiring
    • B64U20/87Mounting of imaging devices, e.g. mounting of gimbals
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/15UAVs specially adapted for particular uses or applications for conventional or electronic warfare
    • B64U2101/17UAVs specially adapted for particular uses or applications for conventional or electronic warfare for detecting, disrupting or countering communications
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/20UAVs specially adapted for particular uses or applications for use as communications relays, e.g. high-altitude platforms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • B64U2101/31UAVs specially adapted for particular uses or applications for imaging, photography or videography for surveillance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/55UAVs specially adapted for particular uses or applications for life-saving or rescue operations; for medical use
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/60UAVs specially adapted for particular uses or applications for transporting passengers; for transporting goods other than weapons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2201/00UAVs characterised by their flight controls
    • B64U2201/10UAVs characterised by their flight controls autonomous, i.e. by navigating independently from ground or air stations, e.g. by using inertial navigation systems [INS]
    • B64U2201/104UAVs characterised by their flight controls autonomous, i.e. by navigating independently from ground or air stations, e.g. by using inertial navigation systems [INS] using satellite radio beacon positioning systems, e.g. GPS
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U30/00Means for producing lift; Empennages; Arrangements thereof
    • B64U30/20Rotors; Rotor supports
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U30/00Means for producing lift; Empennages; Arrangements thereof
    • B64U30/20Rotors; Rotor supports
    • B64U30/29Constructional aspects of rotors or rotor supports; Arrangements thereof
    • B64U30/294Rotors arranged in the UAV body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U50/00Propulsion; Power supply
    • B64U50/10Propulsion
    • B64U50/19Propulsion using electrically powered motors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U50/00Propulsion; Power supply
    • B64U50/20Transmission of mechanical power to rotors or propellers
    • B64U50/23Transmission of mechanical power to rotors or propellers with each propulsion means having an individual motor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U50/00Propulsion; Power supply
    • B64U50/30Supply or distribution of electrical power
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U60/00Undercarriages
    • B64U60/50Undercarriages with landing legs

Abstract

用於利用無人駕駛飛行器(UAV)來監測對使用者的危險的各種方法可以包括:將UAV相對於使用者保持在監測位置,針對接近物件而監測使用者周圍的區域,偵測接近物件,決定接近物件是否對使用者構成危險,以及回應於決定接近物件對使用者構成危險而執行一或多個動作以減輕接近物件的危險。

Description

利用無人駕駛飛行器監測對使用者的危險的系統和方法
本案內容係關於利用無人駕駛飛行器監測對使用者的危險的系統和方法。
車輛與行人和騎車人之間的事故是常見的。這種意外可能是由於能見度不佳、天氣條件差、駕駛者及/或行人不注意、盲點及駕駛者看不到行人及反之亦然的其他原因導致的。這種意外通常會對行人或騎車人造成嚴重傷害或死亡。對於幼兒、老人和殘疾人來說,傷害可能尤為嚴重。
用於防止車輛/行人事故的解決方案通常集中在車輛上。例如,可以在馬路上放置標誌或其他安全措施,以引起駕駛者對危險區域的注意。車輛亦可以被設計為感測車輛周圍的環境,並向駕駛者警告危險。一些最新高端車型包括可以偵測行人/騎車人的感測器,並自動應用剎車。然而,安全解決方案一般不針對行人和騎車人。
各種實施例包括利用無人駕駛飛行器(UAV)來監測對使用者的危險的方法。各種實施例可以包括一種UAV,將UAV相對於使用者保持在監測位置,針對接近物件而監測使用者周圍的區域,偵測接近物件,決定接近物件是否對使用者構成危險,以及回應於決定接近物件對使用者構成危險而執行一或多個動作以減輕接近物件的危險。
在一些實施例中,將UAV相對於使用者保持在監測位置可以包括決定使用者的一或多個屬性,以及基於使用者的一或多個屬性來決定監測位置。在一些實施例中,決定使用者的一或多個屬性可以包括決定使用者的位置、速度和高度中的至少一個。一些實施例可以進一步包括決定與使用者在一起的一或多個額外的人的一或多個屬性,其中決定監測位置可以進一步基於一或多個額外的人的一或多個屬性。一些實施例可以進一步包括決定一或多個環境條件,其中決定監測位置可以進一步基於一或多個環境條件。在一些實施例中,決定一或多個環境條件可以包括決定使用者周圍的一或多個靜止物件的高度、照明條件、天氣條件和當前時間中的至少一個。
在一些實施例中,針對接近物件而監測使用者周圍的區域可以包括估計使用者的行進路徑,基於使用者的估計行進路徑決定要掃瞄的區域,掃瞄所決定的區域以偵測物件,估計所偵測的物件的行進路徑,以及決定使用者的估計行進路徑是否與所偵測的物件的估計行進路徑以至少預定概率相交。在一些實施例中,估計使用者的行進路徑可以包括基於至少使用者的位置和速度估計使用者的行進路徑,以及估計所偵測的物件的行進路徑可以包括基於至少偵測物件的位置和速度來估計所偵測的物件的行進路徑。在一些實施例中,預定概率可以由使用者指定。在一些實施例中,可以在指定時間範圍內估計使用者的估計行進路徑和所偵測的物件的估計行進路徑。在一些實施例中,決定要掃瞄的區域可以包括決定距使用者的估計行進路徑的所有點一定距離內的區域。在一些實施例中,該距離可以由使用者指定。
在一些實施例中,決定要掃瞄的區域亦可以包括決定使用者周圍指定半徑和距使用者的在前行進路徑的所有點一定距離內的區域中的至少一個。一些實施例可以進一步包括決定使用者的估計行進路徑和偵測物件的估計行進路徑中的每一個的準確度的概率。在一些實施例中,掃瞄所決定的區域以偵測物件可以包括經由設備到設備或蜂巢通訊與一或多個物件進行通訊。
在一些實施例中,決定接近物件是否對使用者構成危險可以包括決定接近物件的一或多個屬性,將該一或多個屬性與一或多個閾值進行比較,決定該接近物件的一或多個屬性是否超過該一或多個閾值中的至少一個,以及回應於決定該接近物件的該一或多個屬性超過該一或多個閾值中的至少一個而決定該接近物件對該使用者構成危險。在一些實施例中,該一或多個屬性可以包括接近物件的位置、接近物件的速度、接近物件的大小、接近物件的類型以及接近物件的危險特性中的一或多個。在一些實施例中,使用者可以指定該一或多個閾值。在一些實施例中,可以經由與接近物件的設備到設備或蜂巢通訊來獲得該一或多個屬性。
在一些實施例中,執行一或多個動作可以包括以下中的至少一個:產生視覺警告、發出音訊警告、向接近物件發送警告、向使用者攜帶的無線通訊設備發送警告、護送使用者通過危險、阻擋使用者的行進路徑以及阻擋接近物件的行進路徑。一些實施例亦可以包括決定接近物件是否仍然對使用者構成危險,以及回應於決定接近物件仍然對使用者構成危險而繼續一或多個動作。在一些實施例中,決定接近物件是否仍然對使用者構成危險可以包括估計使用者的行進路徑和接近物件的行進路徑中的至少一個,以及將接近物件的一或多個屬性與一或多個閾值進行比較。
另外的實施例包括一種UAV,其包括配置有執行上述方法的操作的處理器可執行指令的處理器。另外的實施例包括一種非暫態處理器可讀儲存媒體,其上儲存有處理器可執行軟體指令,該等處理器可執行軟體指令被配置為使UAV的處理器執行上述方法的操作。另外的實施例包括一種UAV,該UAV包括用於執行上述方法的操作的功能的模組。
將參考附圖詳細描述各種實施例。儘可能地,在整個附圖中將使用相同的元件符號來代表相同或相似的部分。對特定實例和實施方式的引用是為了說明性目的,並且並非意欲限制請求項的範疇。
諸如無人駕駛飛行器(UAV)的飛行器可以用於執行用於軍事和民用應用的監測、偵察和勘探任務。這種飛行器可以攜帶被配置為執行特定功能(例如個人攝影和攝像)的有效載荷。另外,UAV可以被配置為追蹤和跟隨使用者(例如,「跟隨我」模式)。然而,無人機亦沒有應用於行人安全應用。
本文描述的各種系統和方法提供UAV,UAV被配置為隨著使用者行進(例如,在街道上或其他開放區域中)而停留在使用者(例如,行人、慢跑者、騎車人等)附近,並且監測使用者正在接近及/或正在接近使用者的對使用者的潛在危險。例如,UAV可以監測使用者周圍區域內的固定物件和結構,以評估此類物件或結構是否構成潛在危險。作為另一實例,UAV可以監測諸如汽車的移動物件,以評估此類物件是否朝向使用者行進,或者將與使用者的運動相交,並對使用者構成潛在的危險。為了便於參考,在說明書和申請專利範圍中使用術語「接近物件」來代表使用者正在接近的物件(亦即,使用者朝向物件行進)、朝向使用者行進的物件(即朝向使用者移動的物件)以及由於使用者和物件的組合運動而正在接近使用者的物件。
UAV或協同工作的多個UAV可以決定相對於使用者的監測位置,以及可能與使用者一起行進的其他人。監測位置可以基於使用者的位置、速度和高度以及各種環境條件(如灌木之類的周圍物件的高度,以及當前的照明和天氣條件)來決定。例如,UAV可以將其本身定位在使用者面前2-3米(或其他距離),以及在使用者上方1-2米(或其他距離)。
UAV可以利用各種感測器、相機、影像處理和圖案辨識應用、追蹤演算法和全球定位系統(GPS)和導航系統來針對物件掃瞄使用者周圍的區域,並決定這些物件是否對使用者構成任何危險。例如,UAV可以偵測到在將來的時間可能與使用者的估計行進路徑相交的接近車輛。UAV可以感測車輛的速度、位置、大小及/或當前交通燈狀況,以決定車輛可能對使用者構成危險。UAV亦可以與車輛的電子系統通訊,以使用設備到設備通訊及/或蜂巢通訊從車輛獲得資訊。
回應於決定接近物件確實對使用者構成威脅,UAV可以執行一或多個動作以減輕接近物件所構成的危險。這種動作可以包括向使用者提供音訊或視覺警告、阻擋使用者的行進路徑、護送使用者通過危險、向使用者攜帶的行動設備發送警告及/或向接近物件傳送警告(例如,向機動車輛的電子系統發送警告)。UAV可以繼續執行(多個)動作,直到危險已經過去(例如,車輛經由或為使用者而停止)。隨著使用者行進,UAV可以繼續監測危險。使用者亦可以在UAV上設置各種參數,以定製可以觸發減輕動作的偵測到的危險的各種類型、緊迫性和嚴重性。
術語全球定位系統(GPS)和全球導航衛星系統(GNSS)在本文中可互換使用,以用於代表各種衛星輔助導航系統中的任何一種,例如由美國部署的GPS、俄國軍方使用的GLObal導航衛星系統(GLONASS)和在歐盟中民用的伽利略,以及增強基於衛星的導航信號或提供獨立導航資訊的陸地通訊系統。
圖1圖示用於本文揭示的各種實施例的實例UAV 100。UAV 100是具有固定到框架105上的四個水準配置的旋轉提升螺旋槳或轉子101和電機的「四軸飛行器」。框架105可以支撐控制單元110、著陸滑橇和推進電機、電源(電力單元150)(例如,電池)、有效載荷固定機構(有效載荷固定單元107)以及其他組件。
UAV 100可以提供有控制單元110。控制單元110可以包括處理器120、(多個)通訊資源130、(多個)感測器140和電力單元150。處理器120可以耦合到記憶體單元121和導航單元125。處理器120可以配置有用於控制UAV 100的飛行和其他操作(包括各種實施例的操作)的處理器可執行指令。在一些實施例中,處理器120可以耦合到有效載荷固定單元107和著陸單元155。處理器120可以由電力單元150(例如電池)供電。處理器120可以配置有處理器可執行指令,以控制電力單元150的充電,例如經由使用充電控制電路執行充電控制演算法。替代地或補充地,電力單元150可以被配置為管理充電。處理器120可以耦合到被配置為管理驅動轉子101的電機的電機系統123。電機系統123可以包括一或多個螺旋槳驅動器。每個螺旋槳驅動器包括電機、電機軸和螺旋槳。
經由控制轉子101的各個電機,可以在飛行中控制UAV 100。在處理器120中,導航單元125可以收集資料並決定UAV 100的當前位置和朝向,朝向目的地的適當路線,及/或執行特定功能的最佳方式。
導航單元125的航空電子組件126可以被配置為提供飛行控制相關資訊,例如可以用於導航目的的高度、姿態、空速、航向和類似資訊。航空電子組件126亦可以提供可以用於導航計算中的關於UAV 100的朝向和加速度的資料。在一些實施例中,由包括航空電子組件126的導航單元125產生的資訊取決於UAV 100上的(多個)感測器140的能力和類型。
控制單元110可以包括耦合到處理器120的至少一個感測器140,其可以向導航單元125及/或航空電子組件126提供資料。例如,(多個)感測器140可以包括慣性感測器,例如一或多個加速度計(提供運動感測讀數),一或多個陀螺儀(提供旋轉感測讀數),一或多個磁力計(提供方向感測)或其任何組合。(多個)感測器140亦可以包括GPS接收器、氣壓計、溫度計、音訊感測器、運動感測器等。慣性感測器可以提供導航資訊,例如經由航位元推算,包括UAV 100的位置、朝向和速度(例如,運動的方向和速率)中的至少一個。氣壓計可以提供用於近似UAV 100的高程水準(例如,絕對高程水準)的環境壓力讀數。
在一些實施例中,(多個)通訊資源130可以包括GPS接收器,使得能夠將GNSS信號提供給導航單元125。GPS或GNSS接收器可以經由處理從三個或更多個GPS或GNSS衛星接收的信號而向UAV 100提供三維座標資訊。GPS和GNSS接收器可以為UAV 100提供緯度、經度和高度態樣的準確位置,並且經由隨時間監測位置變化,導航單元125可以決定行進方向和對地速度以及高度變化率。在一些實施例中,導航單元125可以使用除了GNSS或GPS之外的額外或替代定位信號源。例如,導航單元125或一或多個通訊資源130可以包括被配置為從無線電節點接收導航信標或其他信號的一或多個無線電接收器,無線電節點例如是導航信標(例如,超高頻(VHF)全向導航(VOR)信標)、Wi-Fi存取點、蜂巢網路網站、廣播電臺等。在一些實施例中,處理器120的導航單元125可以被配置為從(多個)通訊資源130接收適合於決定位置的資訊。在一些實施例中,UAV 100可以使用替代的定位信號源(亦即,除了GNSS、GPS等之外的)。由於UAV通常在低空(例如,低於400英尺)飛行,UAV 100可以掃瞄與具有已知位置的發射器(例如,信標、Wi-Fi存取點、藍芽信標、小型細胞(微微細胞、毫微微細胞等)等)相關聯的本端無線電信號(例如,Wi-Fi信號、藍芽信號、蜂巢信號等),發射器例如是在飛行路徑附近的限制或不受限制區域內的信標或其他信號源。導航單元125可以在某些應用中將與替代信號源相關聯的位置資訊以及額外資訊(例如,結合最後的可信GNSS/GPS位置的航位推算,結合UAV起飛區的位置的航位推算等)用於定位和導航。因此,UAV 100可以使用導航技術的組合來導航,包括航位推算、基於相機的UAV 100下方和周圍的陸地特徵的辨識(例如,辨識馬路、地標、公路標牌等)等,其可以根據偵測到的無線存取點的已知位置代替或結合GNSS/GPS位置決定和三角量測或三邊量測來使用。
在一些實施例中,控制單元110可以包括相機127和成像系統129。成像系統129可以被實施為處理器120的一部分,或者可以被實施為單獨的處理器,例如特殊應用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)或其他邏輯電路。例如,成像系統129可以被實施為儲存在記憶體單元121中的可執行指令集,該可執行指令集在耦合到相機127的處理器120上執行。相機127可以包括除了圖像或視訊採集感測器之外的子部件,包括自動對焦電路、國際標準組織(ISO)調整電路和快門速度調節電路等。
控制單元110可以包括一或多個通訊資源130,其可以耦合到至少一個發射/接收天線131並且包括一或多個收發機。(多個)收發機可以包括調制器、解調器、編碼器、解碼器、加密模組、解密模組、放大器和濾波器中的任何一個。(多個)通訊資源130能夠與其他UAV、使用者攜帶的無線通訊設備(例如,智慧型電話)、UAV控制器和其他設備或電子系統(例如,車輛電子系統)進行設備到設備及/或蜂巢通訊。
處理器120及/或導航單元125可以被配置為借助(多個)通訊資源130與無線通訊設備170經由無線連接(例如,蜂巢資料網路)進行通訊,以從伺服器接收輔助資料並向伺服器提供UAV位置資訊及/或其他資訊。
可以在(多個)通訊資源130的發射/接收天線131和無線通訊設備170的發射/接收天線171之間建立雙向無線通訊鏈路132。在一些實施例中,無線通訊設備170和UAV 100可以經由諸如一或多個無線網路節點或其他通訊設備之類的中間通訊鏈路進行通訊。例如,無線通訊設備170可以經由蜂巢網路基地台或細胞信號塔連接到UAV 100的(多個)通訊資源130。另外,無線通訊設備170可以經由本端無線存取節點(例如,WiFi存取點)或經由在蜂巢網路中建立的資料連接與UAV 100的(多個)通訊資源130進行通訊。
在一些實施例中,(多個)通訊資源130可以被配置為根據UAV 100的位置和高度在蜂巢連接和Wi-Fi連接之間切換。例如,在為UAV傳輸量指定的高度飛行中時,(多個)通訊資源130可以與蜂巢基礎設施進行通訊,以便保持與無線通訊設備170的通訊。例如,UAV 100可以被配置為在地面上約400英尺或更低的高度上飛行,例如可以由政府機關(如FAA)為UAV飛行傳輸量指定。在該高度,使用短距離無線電通訊鏈路(例如,Wi-Fi)可能難以與無線通訊設備170建立通訊鏈路。因此,當UAV 100處於飛行高度時,可以使用蜂巢式電話網路來建立與無線通訊設備170的通訊。當UAV 100移動更接近無線存取點時,與無線通訊設備170的通訊可以轉換到短距離通訊鏈路(例如,Wi-Fi或藍芽)。
儘管圖1中將控制單元110的各種組件示出為單獨的組件,但一些或所有組件(例如,處理器120、電機系統123、(多個)通訊資源130和其他單元)可以一起整合在單個設備或單元中,例如片上系統。 UAV 100和控制單元110亦可以包括圖1中未圖示的其他組件。
UAV可以被配置為追蹤和跟隨使用者,即所謂的「跟隨我」模式。例如,UAV可以被配置為跟隨使用者的後面或前面(或上方)並追蹤使用者,例如經由攝製或拍攝使用者的視訊(例如,在滑雪的使用者之前或之後飛行,同時錄製使用者的視訊)。
各種實施例包括UAV,UAV被配置為在使用者前面飛行,監測使用者前面和周圍的區域而不是拍攝使用者,或除了拍攝使用者以外亦監測使用者前面和周圍的區域。UAV可以被配置為針對潛在危險監測使用者周圍及/或前方的區域,並向使用者警告這些危險。此類UAV可以在行人/騎車人安全及其他情況下應用,例如老年人導航嚮導,或大型商業或公共場所(如遊樂園、停車場和購物區)中的顧客的導航輔助。
圖2A-2B是示出根據各種實施例的針對危險監測使用者周圍區域並減輕偵測到的危險的UAV(例如,100)的圖。參考圖1-2B,圖200a包括使用者202,使用者202可以是在諸如人行道、馬路等的開放空間中行進的行人、騎車人、慢跑者或其他人。使用者202可以控制諸如UAV 100之類的UAV。例如,使用者202可以具有無線通訊設備(例如,無線通訊設備170),例如智慧型電話、智慧手錶等,其可以用於控制UAV 100並且亦從UAV 100接收訊息和警告。
UAV 100可以被配置為相對於使用者202保持一定的監測位置。例如,UAV 100可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統和其他硬體及/或軟體組件以決定使用者202的一或多個屬性。在一些實施例中,使用者202的屬性可以經由使用者202的圖像辨識和追蹤獲得。在其他實施例中,使用者202的屬性可以從使用者202攜帶的UAV 100可以與之通訊的設備(例如,無線通訊設備)獲得。換言之,UAV 100可以追蹤由使用者202攜帶的設備,並且由設備量測及/或獲得的屬性可以被用作使用者202的屬性。屬性可以包括使用者202的當前位置、使用者202的當前速度(亦即,速率和方向)、使用者202的高度、使用者202的大小(或使用者以及伴隨使用者202的額外的人的大小)中的一或多個。這些屬性可以説明決定UAV 100相對於使用者202的監測位置。例如,使用者202的速度可以用於決定UAV 100的速度,以便相對於使用者202保持靜止位置。使用者202的高度可以用於決定UAV 100的高度(例如,若使用者202是子代而不是成年人,則UAV 100可以飛得更低)。例如,對於成年慢跑者,UAV 100可以將自身定位在慢跑者前面3-4米處,並且在慢跑者上方1-2米處。因此,例如,在一些實施例中,距使用者202的距離可以隨著使用者202的速度增加而增加,反之亦然。相比之下,對於步行的子代,UAV 100可以將自身定位在子代前面1-2米處,並且在子代上方0.5米處。
若有額外的人與使用者202一起行進,UAV 100亦可以決定額外的人的一或多個屬性。UAV 100可以平均所有偵測到的人的屬性以決定監測位置,或者可以利用屬性的最小值或最大值,或者可以經由給定組中所有人的屬性的其他方法來決定其監測位置。
UAV 100亦可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及從各種通訊網路(例如,行動電話網路)獲得的資訊來決定可能影響監測位置的某些環境條件。這種環境條件可以包括例如照明和天氣條件、當前時間和附近靜止物體的高度。例如,UAV 100在黑暗時或者當有霧或下雨時可以停留在更靠近使用者202處。在另一個實例中,若在使用者202附近有固定物體208(例如,灌木叢),則UAV 100可以在高於固定物體208的高度飛行,以便具有周圍區域的無阻礙的視野。
UAV 100可以被配置為使得使用者202能夠例如經由使用無線通訊設備或UAV控制器來手動配置UAV 100的監測位置。例如,使用者202可以指定當使用者202騎自行車時UAV 100應保持在前方遠處,並且可以指定當使用者在黑暗中獨自行走時UAV 100應保持靠近。UAV 100可以週期性地重新計算監測位置以考慮使用者速度或方向的變化。
UAV 100可以針對潛在危險而監測使用者202周圍的區域。為了監測危險,UAV 100可以使用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及其他硬體及/或軟體組件來決定使用者202的估計行進路徑210。例如,UAV 100可以根據使用者的當前位置和速度、使用者的在前行進路徑、導航資料(例如,若使用者202已經將目的地輸入到UAV 100)、周圍區域的地理資訊及/或其他資訊來決定在指定的未來時間範圍期間使用者202的可能位置和速度。例如,若使用者202正走在通向交叉路口206的街道上則UAV 100可以預測使用者202可以沿相同方向繼續沿著相同的街道並穿過交叉路口206。UAV 100可以決定估計行進路徑210的準確度或不決定性的概率,其可以表示為估計行進路徑210是準確的概率或置信度值(例如,90%準確度)、誤差的標準差或一些其他統計表示。
UAV 100可以估計行進路徑的指定時間範圍可以取決於使用者的當前位置和速度、UAV 100的監測位置、使用者配置的偏好以及其他因素。例如,若使用者202以相對較高的速度行進(例如,騎自行車),則UAV 100可以估計使用者202在下一分鐘的行進路徑。若使用者202以相對較慢的速度行進(例如,行走),則UAV 100可以估計使用者202在接下來的30秒內的行進路徑。若UAV 100的監測位置在使用者202前面很遠,UAV 100就可以估計比UAV 100的監測位置更靠近使用者202時更長的行進路徑。使用者202亦可以配置UAV 100以估計使用者202在指定的未來時間範圍內的行進路徑。
UAV 100可以基於使用者202的估計行進路徑210來決定要掃瞄的區域。要掃瞄的區域亦可以基於使用者202的位置和速度或使用者定義的設置。例如,若使用者202以相對較高的速度行進(例如,跑步或騎自行車)行進,則UAV 100可以掃瞄距離估計行進路徑210的所有點高達1公里的區域。若使用者202以相對較慢的速度行進,則UAV 100可以掃瞄距離估計行進路徑210的所有點高達0.5公里的區域。使用者202亦可以指定UAV 100的掃瞄距離。要掃瞄的區域可以亦包括使用者側面和後面的區域,以偵測可能從各方接近使用者202的危險。例如,除了掃瞄估計行進路徑210周圍的區域之外,UAV 100亦可以掃瞄使用者202的當前位置的某一半徑內的區域。UAV 100亦可以掃瞄使用者202的在前行進路徑周圍的區域。
UAV 100可以針對物件掃瞄所決定的區域。UAV 100可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統和其他硬體及/或軟體組件來掃瞄決定的區域並偵測區域中的物件。例如,UAV 100可以利用相機來採集決定區域的圖像和視訊,並使用影像處理和追蹤演算法來偵測靜止和移動物件(例如車輛、人、動物、灌木、樹木、路緣石)。在一些實施例中,使用者202可以設置物件的大小(及/或速度)的閾值。例如,使用者202可以配置UAV 100以偵測至少是車輛大小的物件,而不是人、動物或植物的大小。
UAV 100亦可以與能夠進行無線通訊的其他物件(例如其他UAV、無線通訊設備或車輛)通訊,以便決定這些物件是否存在於所決定的掃瞄區域中。例如,UAV 100可以經由設備到設備及/或蜂巢通訊協定或經由Wi-Fi與位於所決定的區域內的車輛204的電子系統進行通訊。車輛204可以是自主車輛,亦可以具有駕駛者。車輛204可以向UAV 100提供關於車輛204的資訊,例如車輛的位置和速度。
UAV100可以估計UAV 100在所決定的掃瞄區域內偵測到的每個物件的行進路徑。該估計可以與使用者202的估計行進路徑210類似地執行。若物件是靜止的,則估計行進路徑可以是物件保持在相同的位置。例如,UAV 100可以使用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及其他硬體及/或軟體組件來獲得每個物件的位置和速度。UAV 100可以使用該資訊來決定每個物件的行進路徑。為其估計行進路徑的指定時間範圍可以與用於使用者202的估計行進路徑210的相同。例如,UAV 100可以計算使用者202在一分鐘的持續時間內的估計行進路徑210,並且亦計算車輛204在一分鐘的持續時間內的估計行進路徑212。UAV 100可以決定估計行進路徑212的準確度或不決定性的概率,其可以表示為估計行進路徑212是準確的概率或置信度值(例如,90%準確度)、誤差的標準差,或一些其他統計表示。
UAV 100可以決定任何偵測到的物件的估計行進路徑是否與使用者202的估計行進路徑210以至少預定概率相交。若任何物件確實與估計行進路徑210相交,則UAV 100可以決定物件是接近物件。 UAV 100可以利用各種數學或統計分析方法來決定兩個估計行進路徑是否以至少預定概率相交。在一些實施例中,預定概率可以由使用者202指定。例如,若根據統計分析估計行進路徑相交至少有75%的概率,則使用者202可以指定認為兩個估計行進路徑相交。UAV 100可以決定使用者202的估計行進路徑210和車輛204的估計行進路徑212將以85%的概率相交,並且因此滿足使用者202所指定的預定概率。
對於每個接近物件(亦即,將與使用者202的估計行進路徑210以至少預定概率相交的每個物件),UAV 100可以決定這些接近物件是否可能對使用者構成危險。為了評估潛在的危險,UAV 100可以決定每個接近物件的一或多個屬性。屬性可以包括但不限於接近物件的位置、接近物件的速度、接近物件的大小和物件的危險特性(例如,火、毒性、潛在的跌倒危險等)。可以使用UAV 100中的感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及其他硬體及/或軟體組件來獲得這些屬性。屬性可以在偵測到接近物件並估計其行進路徑時預先獲得。例如,UAV 100可以使用設備到設備及/或蜂巢通訊與車輛204通訊,以獲得車輛204的位置、速度、大小和其他屬性。
在一些實施例中,UAV 100可以將接近物件的屬性與一或多個閾值進行比較。UAV 100可以儲存每個屬性的閾值,例如距離閾值、速度閾值和大小或類型閾值。若接近物件的屬性超過一或多個閾值,則UAV 100可以決定接近物件對使用者202構成危險。例如,UAV 100可以儲存25 公里/小時(km/h)的速度閾值,並且車輛204可以以50 km/h行駛。因此,UAV 100可以決定車輛204可能對使用者202構成危險。在另一個實例中,UAV 100可以儲存小型乘用車的大小閾值。閾值可以經由參照示例(例如,動物、人、乘用車、卡車等)來表示,或者可以以數位形式(例如,1平方米)表示。UAV 100可以決定車輛204至少是小型乘用車的大小,因此可能對使用者202構成危險。在另一實例中,UAV 100可以決定交叉路口206滿足交叉路口物件的類型閾值並且可能對使用者202構成危險,而不管車輛是否將穿過交叉路口206。使用者202可以根據使用者的偏好或當前使用情況配置每個閾值。
若UAV 100決定接近物件的估計行進路徑將與使用者202的估計行進路徑相交,並且接近物件的至少一個屬性超過閾值,則可以認為接近物件對使用者202構成危險。UAV 100可以執行一或多個動作來減輕危險,如圖200b所示。圖200b圖示接近交叉路口206的使用者202和車輛204。UAV 100可以執行一或多個動作來警告使用者202或車輛204,或者防止碰撞。動作可以包括但不限於向使用者202產生視覺警告(例如,閃爍的燈)、向使用者202發出音訊警告(例如,從UAV上的揚聲器)、阻擋使用者202朝向物件(或與物件的交叉點)的路徑、護送使用者202經由物件所構成的危險、阻擋接近物件的路徑、向使用者202攜帶的無線通訊設備發送警告,以及使用設備到設備及/或蜂巢通訊向接近物件發送警告。例如,在圖200b中,UAV 100可以將自身定位在交叉路口206的前方以阻擋使用者202的路徑,向使用者202顯示視覺警告,並與車輛204通訊以指示使用者202正接近交叉路口206。
只要UAV 100決定接近物件仍然構成危險,UAV 100就可以繼續執行一或多個動作以減輕危險。為了決定危險是否仍然存在,UAV 100可以決定接近物件的估計行進路徑是否仍然與使用者202的估計行進路徑在預定概率內相交,及/或接近物件的一或多個屬性是否仍然超過至少一個閾值。例如,若車輛204已經經由交叉路口206,則UAV 100可以決定使用者202的估計行進路徑210和車輛204的估計行進路徑212不再相交,並且因此車輛204不再構成危險。在另一實例中,UAV 100可以決定車輛204在交叉路口206前停止,因此車輛204不再構成危險。一旦危險已經過去,UAV 100可以在其監測位置繼續前進,並繼續針對危險掃瞄使用者202周圍的區域,並減輕偵測到的危險。
在一些實施例中,可以有多於一個的UAV來監測對使用者202的危險。例如,單獨的UAV可以監測來自不同方向的危險或不同類型的危險(例如,一個監測車輛,另一個監測其他行人,再另一個監測無生命物件)。UAV可以使用設備到設備及/或蜂巢通訊來彼此通訊。可以有主UAV,其控制其他UAV,從其他UAV接收資訊,決定偵測到的接近物件是否對使用者構成危險,並控制其他UAV執行各種動作以減輕危險。
圖3圖示根據各種實施例的用於利用至少一個UAV(例如,圖1-2B中的100)來監測對使用者的危險的方法300。參考圖1-3,方法300的操作可以由一或多個UAV的一或多個處理器(例如,處理器120)執行。UAV可以具有感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及用於偵測UAV周圍的物件(例如控制UAV的使用者和使用者附近的可以對使用者構成危險的物件)的其他硬體及/或軟體組件。使用者可以是在開放空間中行進(例如經由馬路和街道)的行人、騎車人或其他人。使用者可以攜帶可以控制UAV的無線通訊設備。
在方塊302中,至少一個UAV的(多個)處理器可以決定(多個)UAV相對於使用者的監測位置。監測位置可以是UAV能夠監測使用者的行進路徑中的潛在危險的位置。例如,UAV可以決定比使用者高幾米的監測位置,使得UAV具有到各種附近物件的視線,並且在使用者前面幾米,使得在使用者到達UAV的位置之前有足夠的時間來減輕任何偵測到的危險。UAV可以根據使用者的各種屬性(例如,位置、速度、高度)、各種環境條件(例如,照明、天氣、時間、周圍的靜止物件的高度)及/或類似物來決定監測位置。在一些實施例中,使用者可以手動指定UAV的監測位置,因此處理器可以跳過方塊302中的操作。參考方法400(圖4)更詳細地描述了決定UAV的監測位置。
在方塊304中,(多個)處理器可以針對物件監測使用者周圍的區域。處理器可以基於使用者的位置、速度、行進路徑歷史及/或由使用者輸入的導航資訊來首先估計使用者的行進路徑。處理器可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統和其他硬體及/或軟體組件來偵測在使用者的估計行進路徑周圍的決定區域中的移動或靜止物件(例如,其他人、動物、車輛、建築物、樹木和植物、路緣石、交叉路口和其他靜止或移動物件)。決定區域可以取決於使用者的位置和速度,或者可以由使用者手動指定。決定區域亦可以包括使用者周圍的指定半徑,及/或使用者的在前行進路徑周圍的區域,以便掃瞄從使用者側面或從後方接近的危險。例如,針對物件要掃瞄的決定區域可以在距估計行進路徑和在前行進路徑的所有點0-2公里之間,以及距當前使用者的當前位置的半徑1公里的半徑。處理器可以估計每個偵測到的物件的行進路徑,隨後決定任何物件的估計行進路徑是否與使用者的估計行進路徑相交。參考方法500(圖5)更詳細地描述了針對物件對使用者周圍區域進行監測。
在方塊306中,(多個)處理器可以偵測接近物件。接近物件可以是估計行進路徑與使用者的估計行進路徑以至少預定概率相交的物件(例如,將穿過使用者將要穿過的相同交叉路口的車輛)。例如,處理器可以決定每個估計行進路徑的準確度或不決定性的概率,物件或使用者將實際沿行進路徑而行的置信度值或概率。處理器可以進行統計分析以決定兩個行進路徑是否將以至少預定概率在物件的危險半徑內相交。預定概率可以由使用者指定。
在決定方塊308中,(多個)處理器可以決定接近物件是否對使用者構成危險。處理器可以決定接近物件的一或多個屬性(例如,位置、速度、大小、類型、危害等),並將屬性與一或多個對應的閾值進行比較。若屬性超過閾值中的至少一個,則可以認為接近物件是對使用者的危險。例如,若車輛以高速度接近並且車輛和使用者處於碰撞路線上,則處理器可以決定車輛對使用者構成危險。作為另一實例,若車輛和使用者的估計最接近的接近點大於閾值距離(例如,例如10英尺),則處理器可以決定車輛不對使用者構成危險。作為另一實例,若接近物件是火或危險化學品,則處理器可以決定使用者的路徑是否會使使用者足夠接近物件(基於危害的性質)而對使用者構成危險。
在一些實施例和情形下,處理器可以利用設備到設備及/或蜂巢通訊來與一些物件(例如,具有電子通訊系統的車輛、無線通訊設備、其他UAV)進行通訊,並從電子物件獲得屬性。參考方法600(圖6)更詳細地描述了決定接近物件是否對使用者造成危險。
回應於決定接近物件不對使用者構成危險(亦即,決定方塊308 =「否」),(多個)處理器可以在方塊304中繼續針對物件監測使用者周圍的區域。替代地,在方塊302中,處理器可以重新決定UAV相對於使用者的監測位置。例如,每隔幾秒鐘,處理器可以重新決定監測位置以考慮使用者的位置和速度的變化。處理器重新決定監測位置的頻率可以取決於使用者的速度和其他因素。例如,若使用者以相對較高的速度行進(例如,在自行車上),則處理器可以更頻繁地重新決定監測位置。
回應於決定接近物件對使用者構成危險(亦即,決定方塊308 =「是」),(多個)處理器可以在方塊310中執行一或多個動作以減輕接近物件的危險。可以執行的動作的一些非限制性實例包括向使用者產生視覺警告(例如,閃爍的燈)、向使用者發出音訊警告、阻擋使用者的路徑、護送使用者通過危險、阻擋接近物件的路徑、向使用者攜帶的無線通訊設備發送警告,以及使用設備到設備及/或蜂巢通訊向接近物件發送警告。
(多個)處理器可以在決定方塊308中繼續決定接近物件是否對使用者構成危險。例如,處理器可以重新估計使用者和接近物件的行進路徑,以決定它們是否仍然相交,並且亦決定接近物件的一或多個屬性是否仍然超過至少一個閾值。只要接近物件繼續對使用者構成危險,處理器就可以繼續執行一或多個動作以減輕動作直到危險已經過去(例如,若車輛經由使用者的行進路徑,或者若車輛停止)。以此方式,方法300提供了利用UAV來監測和減輕對在開放空間中行進的使用者的危險的方法。
圖4圖示根據各種實施例的用於決定UAV相對於使用者的監測位置的方法400。方法400可以實施由方法300的方塊302表示的操作。參考圖1-4,方法400的操作可以由一或多個UAV的一或多個處理器(例如,處理器120)執行。UAV可以具有感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及用於偵測UAV周圍的物件(例如控制UAV的使用者和使用者附近的可以對使用者構成危險的物件)的其他硬體及/或軟體組件。使用者可以是在開放空間中行進(例如經由馬路和街道)的行人、騎車人或其他人。使用者可以攜帶可以控制UAV的無線通訊設備。
在方塊402中,UAV處理器可以決定使用者的一或多個屬性。屬性可以包括但不限於使用者的位置、速度和使用者的高度。這些屬性可以例如決定UAV應該位於使用者前面多遠,UAV可以位於使用者上方多高以及UAV應該多快地移動以便跟上使用者。UAV可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及其他硬體及/或軟體組件來採集使用者的圖像和移動,並將該資訊與GPS和導航資料組合。在一些實施例中,UAV可以與使用者攜帶的設備(例如,無線通訊設備)通訊,並從該設備獲得使用者的一或多個屬性。例如,設備可以決定其當前位置和速度,這也是使用者的相同位置和速度,並將資訊發送到UAV。
在方塊404中,處理器可以任選地決定與使用者一起行進的一或多個額外的人的一或多個屬性。若使用者正在與一組人群一起行進,則處理器亦可以決定組中每個人的屬性(例如,位置、速度、高度)。這允許UAV能夠監測對整組人的危險。額外的人的屬性可以以與使用者的屬性相似的方式獲得。
在方塊406中,處理器可以決定可以影響UAV的監測位置的一或多個環境條件。環境條件可以包括但不限於照明條件、天氣條件、當前時間和附近靜止物件的高度。例如,UAV應該在夜間或者在有霧、下雨或下雪時保持更接近使用者。在另一實例中,附近物件的高度可以決定UAV的高度,以使得UAV的相機和感測器不被物件阻擋。處理器可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統以及經由網路連接獲得的資訊(例如,利用衛星或行動電話網路資料來決定當前天氣)來決定一或多個環境條件。
在方塊408中,處理器可以基於使用者和與使用者在一起的任何額外的人的一或多個屬性以及一或多個環境條件來決定UAV的監測位置。例如,若使用者是在街道上行走的小孩,則處理器可以決定UAV的監測位置可以在使用者前面1米,且在使用者上方0.5米。若使用者是晚上獨自行走的成年人,則處理器可以決定UAV的監測位置可以在使用者前面2米,且在使用者上方1米。若使用者騎自行車,則處理器可以決定UAV的監測位置可以在使用者前面3米,且在使用者上方2米。若有多個人一起行進,則處理器可以平均所有人的屬性、採用最小或最大屬性值或其他方法,以便決定監測位置。例如,UAV的高度可以根據最高的人的高度來決定,或者UAV的速度可以根據組中每個人的速度的平均值來決定。處理器可以在方法300的方塊304中針對物件監測使用者周圍的區域。
圖5圖示根據各種實施例的利用UAV來針對物件監測使用者周圍的區域的方法500。方法500可以實施由方法300的方塊304表示的操作。參考圖1-5,方法500的操作可以由一或多個UAV的一或多個處理器(例如,處理器120)執行。UAV可以具有感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及用於偵測UAV周圍的物件(例如控制UAV的使用者和使用者附近的可以對使用者構成危險的物件)的其他硬體及/或軟體組件。使用者可以是在開放空間中行進(例如經由馬路和街道)的行人、騎車人或其他人。使用者可以攜帶可以控制UAV的無線通訊設備。
在方法300的方塊302中,在決定UAV相對於使用者的監測位置之後,處理器可以在方塊502中估計使用者的行進路徑。估計行進路徑可以是使用者在指定的未來時間範圍內最有可能跟隨的行進路徑。例如,處理器可以決定使用者在下一分鐘最可能的行進路徑。用於估計行進路徑的指定時間範圍可以取決於使用者的位置和速度(例如,若使用者行進較快,則用於估計的時間範圍可以更長),或者可以由使用者手動指定。
處理器可以根據使用者的當前位置和速度、使用者的在前行進路徑、導航資料(例如,若使用者已經將目的地輸入到UAV)、周圍區域的地理資訊及/或其他資訊估計使用者在給定的時間範圍內的未來位置、速度和行進路徑。UAV可以使用UAV中的感測器、相機、影像處理、圖案辨識、追蹤演算法、GPS、導航系統和其他硬體及/或軟體組件來收集該資訊。例如,若使用者正走在通向交叉路口的街道上,則處理器可以決定使用者可以沿相同方向繼續沿著相同的街道走下去,並且在下一分鐘內穿過交叉路口。估計行進路徑繼而在下一分鐘可以是沿著街道的直線路徑。處理器可以決定行進路徑的估計的準確度或不決定性的概率,其可以表示為估計行進路徑準確的概率或置信度值(例如,90%準確度)、誤差的標準差或一些其他的統計表示。
在方塊504中,處理器可以基於使用者的估計行進路徑來決定要掃瞄的區域。例如,處理器可以決定應當掃瞄距估計行進路徑中的任何點一定距離內的所有區域。要掃瞄的區域亦可以基於使用者的位置和速度。例如,若使用者以相對較高的速度行進,則處理器可以將掃瞄區域決定為距估計行進路徑的所有點高達1公里的區域。若使用者以相對較慢的速度行進,則UAV將掃瞄區域決定為距估計行進路徑的所有點0.5公里的區域。要掃瞄的區域亦可以包括自使用者的當前位置的指定半徑,及/或亦可以包括使用者的在前行進路徑周圍的區域(例如,距在前行進路徑的所有點高達1公里)。這可以允許UAV掃瞄從側面或從後面接近使用者的危險。在一些實施例中,使用者可以手動指定用於UAV的決定的掃瞄區域,並且因此處理器可以不執行方塊504中的操作。
在方塊506中,處理器可以針對一或多個物件掃瞄所決定的區域。處理器可以利用感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及其他硬體及/或軟體組件來掃瞄該區域並偵測物件。例如,相機可以用於採集決定區域內的圖像和視訊,並且影像處理、圖案辨識和追蹤演算法可以用於從圖像和視訊中偵測和辨識物件。物件可以包括諸如動物、其他人和車輛之類的移動物件,以及諸如樹、灌木叢、交叉路口、消防栓、郵箱和街道路緣石之類的靜止物件。在一些實施例中,可以存在用於偵測物件的大小閾值,其可由使用者手動指定。例如,UAV可以被配置為偵測至少車輛大小的物件,並忽略小於車輛的物件。
處理器可以利用設備到設備及/或蜂巢通訊或Wi-Fi來偵測一些物件。例如,UAV可以經由各種通訊協定與車載電子系統、無線通訊設備或其他UAV進行通訊,以偵測車輛、設備和人員在決定區域內的存在。處理器亦可以從物件獲得各種屬性,例如物件的位置、速度、大小和危險性質。
在方塊508中,處理器可以估計所決定的區域中的偵測物件的行進路徑。該估計可以類似於使用者的行進路徑的估計。例如,處理器可以根據偵測物件的當前位置和速度、偵測物件的在前行進路徑(若已知)、周圍區域的地理資訊及/或其他資訊來決定偵測物件在指定時間範圍內的未來位置、速度和行進路徑。若偵測物件是靜止的,則行進路徑可以是物件保持在相同的位置。為其估計行進路徑的指定時間範圍可以與用於估計使用者的行進路徑的相同。例如,處理器可以估計使用者和偵測物件在下一分鐘的行進路徑。處理器可以決定偵測物件的行進路徑的估計的準確度或不決定性的概率,其可以表示為估計行進路徑準確的概率或置信度值(例如,90%準確度)、誤差的標準差或一些其他的統計表示。
在決定方塊510中,處理器可以決定使用者和偵測物件的估計行進路徑是否以至少預定的概率相交。處理器可以利用數學或統計分析方法來決定兩個估計行進路徑是否將以至少預定概率相交。預定概率可以由使用者手動指定,或者UAV可以儲存預設值。例如,若根據統計分析估計行進路徑相交至少有75%的概率,則使用者可以指定認為兩個估計行進路徑相交。使用者的估計行進路徑可以是95%準確的,並且偵測物件的估計行進路徑可以是90%準確的。在此情況下,兩個估計行進路徑準確的整體概率可以計算為95%×90%= 85.5%。這超過了使用者指定的預定概率,並且因此處理器可以決定使用者和偵測物件的估計行進路徑以至少預定概率相交。
回應於決定使用者和偵測物件的估計行進路徑不以至少預定概率相交(亦即,決定方塊510 =「否」),處理器可以在方塊506和508中針對物件繼續掃瞄決定區域並為每個偵測物件估計行進路徑。換言之,處理器可以針對可以與使用者的估計行進路徑相交的物件繼續監測決定區域。
回應於決定使用者和偵測物件的估計行進路徑以至少預定概率相交(亦即,決定方塊510 =「是」),處理器可以決定偵測物件應被視為如方法300的方塊306中所述的接近物件,
圖6圖示根據各種實施例的用於由UAV決定接近物件是否對使用者構成危險的方法600。方法600可以實施由方法300的決定方塊308表示的操作。參考圖1-6,方法600的操作可以由一或多個UAV的一或多個處理器(例如,處理器120)執行。UAV可以具有感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及用於偵測UAV周圍的物件(例如控制UAV的使用者和使用者附近的可以對使用者構成危險的物件)的其他硬體及/或軟體組件。使用者可以是在開放空間中行進(例如經由馬路和街道)的行人、騎車人或其他人。使用者可以攜帶可以控制UAV的無線通訊設備。
在方法300的方塊306中偵測到接近物件之後,處理器可以在方塊602中決定接近物件的一或多個屬性。一或多個屬性可以包括但不限於接近物件的位置、速度、大小、物件類型、危險性質(如毒物、熱、絆倒風險、攻擊潛力等)。可以使用UAV中的感測器、相機、影像處理、圖案辨識、追蹤演算法、設備到設備及/或蜂巢通訊、GPS、導航系統以及其他硬體及/或軟體組件來獲得一或多個屬性。若接近物件能夠進行設備到設備通訊及/或蜂巢通訊及/或Wi-Fi通訊(例如,車輛電子系統、另一UAV、無線通訊設備),則UAV亦可以與接近物件進行通訊以獲得屬性。當處理器估計接近物件的行進路徑時,可以預先獲得屬性。
在方塊604中,處理器可以將接近物件的一或多個屬性與一或多個閾值進行比較。UAV可以在記憶體中儲存每個屬性的對應閾值(例如,速度閾值、距離閾值、大小閾值、類型閾值)。閾值的值可以由使用者手動指定。
在決定方塊606中,處理器可以決定接近物件的一或多個屬性是否超過一或多個閾值中的至少一個。例如,處理器可以決定接近物件的速度是否超過速度閾值,接近物件的大小是否超過大小閾值,及/或接近物件的位置是否在距離閾值內。
回應於決定接近物件的一或多個屬性超過一或多個閾值中的至少一個(亦即,決定方塊606 =「是」),處理器可以在方法300的方塊310中執行一或多個動作以減輕接近物件的危險。
回應於決定接近物件的一或多個屬性不超過一或多個閾值中的至少一個(亦即,決定方塊606 =「否」),處理器可以在方塊304中針對物件繼續監測使用者周圍的區域,或者替代地在方法300的方塊302中重新決定UAV相對於使用者的監測位置。
各種實施例可以在各種UAV內實現,其中圖7中圖示四轉子UAV的形式的實例,其適用於各種實施例。參考圖1-7,UAV 100可以包括可以由適合於飛行的塑膠、金屬或其他材料的任何組合製成的主體700(即機身、框架等)。主體700可以包括處理器730,其被配置為監測和控制UAV 100的各種功能、子系統及/或其他組件。例如,處理器730可以被配置為監測和控制UAV 100的各種功能,例如與推進、導航、電源管理、感測器管理及/或穩定性管理相關的模組、軟體、指令、電路、硬體等的任何組合。
處理器730可以包括一或多個處理單元701,例如被配置為執行處理器可執行指令(例如,應用、常式、腳本、指令集等)的一或多個處理器,被配置為儲存資料(例如,飛行計畫、獲得的感測器資料、接收的訊息、應用等)的記憶體及/或儲存單元702,以及用於發送和接收無線信號的無線收發機704和天線706(例如,Wi-Fi ®無線電和天線、Bluetooth ®、RF等)。在一些實施例中,UAV 100亦可以包括用於經由諸如蜂巢網路收發機或晶片和相關天線(未圖示)的各種廣域網進行通訊的組件。在一些實施例中,UAV 100的處理器730亦可以包括用於從操作者接收資料及/或用於收集指示與UAV 100相關的各種條件的資料的各種輸入單元708。例如,輸入單元708可以包括(多個)相機、(多個)麥克風、位置資訊功能(例如,用於接收GPS座標的全球定位系統(GPS)接收器)、飛行儀器(例如(多個)姿態指示器、(多個)陀螺儀、(多個)加速度計、(多個)高度計、(多個)羅盤等)、(多個)鍵盤等。處理器730的各種組件可以經由匯流排710或其他類似的電路連接。
主體700可以包括具有各種設計和目的的起落架720,例如支腿、滑橇、輪子、浮筒等。主體700亦可以包括有效載荷機構721,其被配置為保持、鉤住、抓住、包圍和以其他方式攜帶各種有效載荷,如箱體。在一些實施例中,有效載荷機構721可以包括及/或耦合到致動器、軌跡、軌道、壓艙物、電機和其他組件,以用於調整由UAV 100承載的有效載荷的位置及/或朝向。例如,有效載荷機構721可以包括可移動地附接到軌道的箱體,以使得箱內的有效載荷可以沿著軌道來回移動。有效載荷機構721可以耦合到處理器730,並且因此可以被配置為接收配置或調整指令。例如,有效載荷機構721可以被配置為基於從處理器730接收的指令來啟用電機以重新定位有效載荷。
UAV 100可以是直升機設計,其利用由對應的電機722驅動的一或多個轉子724來提供垂直升空(或起飛)以及其他空中運動(例如,向前前進、上升、下降、橫向運動、傾斜、旋轉等)。UAV 100可以利用多個電機722和對應的轉子724來垂直升空並提供空中推進。例如,UAV 100可以是配備有四個電機722和對應轉子724的「四軸飛行器」。電機722可以耦合到處理器730,並且因此可以被配置為從處理器730接收操作指令或信號。例如,電機722可以被配置為基於從處理器730接收的指令來增加其對應轉子724的轉速等。在一些實施例中,電機722可以由處理器730獨立控制,以使得一些轉子724可以以不同的速度啟用,使用不同的功率量,及/或提供不同輸出級,以用於移動UAV 100。例如,主體700一側上的電機722可以被配置為使其對應轉子724以比主體700的相對側上的轉子724更高的每分鐘旋轉速度(RPM)旋轉,以平衡負載有偏心有效載荷的UAV 100。
主體700可以包括電源712,電源712可被耦合到並配置為為UAV 100的各種其他組件供電。例如,電源712可以是可充電電池,以用於提供電力來操作電機722、有效載荷機構721及/或處理器730的單元。
本文描述的各種處理器可以是任何可程式設計微處理器、微電腦或多處理器晶片或多個晶片,其可以由軟體指令(應用程式)來配置以執行各種功能,功能包括本文所述的各種實施例的功能。在各種設備中,可以提供多個處理器,例如專用於無線通訊功能的一個處理器和專用於執行其他應用程式的一個處理器。通常,軟體應用程式可以在被存取並載入到處理器之前儲存在內部記憶體中。處理器可以包括足以儲存應用軟體指令的內部記憶體。在許多設備中,內部記憶體可以是揮發性或非揮發性記憶體,例如快閃記憶體,或二者的混合。為了本說明書的目的,對記憶體的一般引用是指可由處理器存取的記憶體,包括內部記憶體或插入各種設備中的卸載式存放裝置器以及處理器內的記憶體。
僅僅作為實例而提供了所示和所述的各種實施例以描述請求項的各種特徵。然而,關於任何給定實施例所示和所述的特徵不一定限於相關聯的實施例,並且可以與所示和所述的其他實施例一起使用或組合。此外,請求項並非意欲受任何一個實例實施例的限制。
前述方法描述和程式流程圖僅作為說明性實例提供,並且並非意欲要求或暗示各種實施例的操作必須以所呈現的循序執行。如本發明所屬領域中具有通常知識者將理解的,可以以任何循序執行前述實施例中的步驟的順序。諸如「此後」、「隨後」、「下一個」等的詞語並非意欲限制步驟的順序;這些單詞用於指導讀者完成方法的描述。此外,例如使用冠詞「一」、「一個」或「該」的對單數形式的請求項要素的引用不應被解釋為將要素限制為單數。
結合本文所揭示的實施例描述的各種說明性的邏輯區塊、模組、電路和演算法步驟可以實施為電子硬體、電腦軟體或二者的組合。為了清楚地說明硬體和軟體之間的這種可互換性,上面在功能態樣對各種說明性組件、方塊、模組、電路和步驟進行了整體描述。這種功能是被實施為硬體還是軟體,取決於特定的應用和對整個系統所施加的設計約束條件。本發明所屬領域中具有通常知識者可以針對每個特定應用,以變通的方式實現所描述的功能,但是,不應將這種實現決策解釋為脫離本請求項的範疇。
可以利用通用處理器、數位訊號處理器(DSP)、特殊應用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)或其他可程式設計邏輯裝置、個別閘門或電晶體邏輯單元、個別硬體組件或者被設計用於執行本文所述功能的其任何組合,來實施或執行用於實施結合本文揭示的各態樣描述的各種說明性邏輯單元、邏輯區塊、模組和電路的硬體。通用處理器可以是微處理器,但是替代地,該處理器亦可以是任何習知的處理器、控制器、微控制器或者狀態機。處理器亦可以被實施為接收器智慧物件的組合,例如,DSP和微處理器的組合、複數個微處理器的組合、一或多個微處理器與DSP核心的組合或者任何其他此種構造。替代地,一些步驟或方法可以由專用於給定功能的電路來執行。
在一或多個示例性態樣中,所描述的功能可以在硬體、軟體、韌體或其任何組合中實施。當在軟體中實施時,該功能可以作為一或多個指令或代碼儲存在非暫態電腦可讀儲存媒體或非暫態處理器可讀儲存媒體上。本文揭示的方法或演算法的步驟可以體現在處理器可執行軟體中,其可以常駐在非暫態電腦可讀或處理器可讀儲存媒體上。非暫態電腦可讀或處理器可讀儲存媒體可以是可由電腦或處理器存取的任何儲存媒體。經由實例而非限制的方式,此類非暫態電腦可讀或處理器可讀儲存媒體可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、電子可抹除可程式設計ROM(EEPROM)、快閃記憶體、緊致光碟ROM(CD-ROM)或其他光碟儲存設備、磁碟儲存設備或其他磁儲存智慧物件或者任何其他媒體,該其他媒體可以用於以指令或資料結構的形式儲存所需程式碼並且能夠被電腦存取。本文所使用的磁碟和光碟包括CD、雷射光碟、光碟、數位多功能光碟(DVD)、軟碟和藍光光碟,其中磁碟通常磁性地再現資料,而光碟通常利用鐳射光學地再現資料。本文所述的記憶體的組合亦包括在非暫態電腦可讀和處理器可讀儲存媒體的範疇內。另外,方法或演算法的操作可以作為代碼及/或指令中的一個或任何組合或集合常駐在非暫態處理器可讀儲存媒體及/或電腦可讀儲存媒體上,其可以併入電腦程式產品中。
提供了所揭示的實施例的前述說明,以使本發明所屬領域中任何具有通常知識者能夠實現或使用本請求項。對這些實施例的各種修改對於本發明所屬領域中具有通常知識者將是顯而易見的,在不脫離請求項的精神或範疇的情況下,本文所定義的一般原理可以應用於一些實施例。因此,請求項不意欲限於本文所示的實施例,而應被給予與所附申請專利範圍及本文揭示的原理和新穎特徵一致的最寬範疇。
100‧‧‧無人駕駛飛行器(UAV)
101‧‧‧轉子
105‧‧‧框架
107‧‧‧有效載荷固定單元
110‧‧‧控制單元
120‧‧‧處理器
121‧‧‧記憶體單元
123‧‧‧電機系統
125‧‧‧導航單元
126‧‧‧航空電子組件
127‧‧‧相機
129‧‧‧成像系統
130‧‧‧通訊資源
131‧‧‧發射/接收天線
132‧‧‧雙向無線通訊鏈路
140‧‧‧感測器
150‧‧‧電力單元
155‧‧‧著陸單元
170‧‧‧無線通訊設備
171‧‧‧發射/接收天線
200a‧‧‧圖
200b‧‧‧圖
202‧‧‧使用者
204‧‧‧車輛
206‧‧‧交叉路口
208‧‧‧固定物體
210‧‧‧估計行進路徑
212‧‧‧估計行進路徑
300‧‧‧方法
302‧‧‧方塊
304‧‧‧方塊
306‧‧‧方塊
308‧‧‧方塊
310‧‧‧方塊
400‧‧‧方法
402‧‧‧方塊
404‧‧‧方塊
406‧‧‧方塊
408‧‧‧方塊
500‧‧‧方法
502‧‧‧方塊
504‧‧‧方塊
506‧‧‧方塊
508‧‧‧方塊
510‧‧‧方塊
600‧‧‧方法
602‧‧‧方塊
604‧‧‧方塊
606‧‧‧方塊
700‧‧‧主體
701‧‧‧處理單元
702‧‧‧記憶體及/或儲存單元
704‧‧‧無線收發機
706‧‧‧天線
708‧‧‧輸入單元
710‧‧‧匯流排
712‧‧‧電源
720‧‧‧起落架
721‧‧‧有效載荷機構
722‧‧‧電機
724‧‧‧轉子
730‧‧‧處理器
併入本文並且構成本說明書的一部分的附圖圖示請求項的示例性實施例,並且與本文提供的一般描述和詳細描述一起用於解釋請求項的特徵。
圖1是示出適用於各種實施例的典型無人駕駛飛行器(UAV)系統的組件的方塊圖。
圖2A是示出根據各種實施例的針對危險而監測使用者周圍的區域的UAV的圖。
圖2B是示出根據各種實施例的減輕對使用者構成的危險的UAV的圖。
圖3是示出根據各種實施例的利用至少一個UAV來監測對使用者的危險的方法的程式流程圖。
圖4是示出根據各種實施例的用於決定UAV相對於使用者的監測位置的方法的程式流程圖。
圖5是示出根據各種實施例的用於針對接近物件監測使用者周圍的區域的方法的程式流程圖。
圖6是示出根據各種實施例的用於決定接近物件是否對使用者構成危險的方法的程式流程圖。
圖7是適用於各種實施例的UAV的組件方塊圖。
國內寄存資訊 (請依寄存機構、日期、號碼順序註記) 無
國外寄存資訊 (請依寄存國家、機構、日期、號碼順序註記) 無

Claims (41)

  1. 一種利用一無人駕駛飛行器(UAV)來監測對一使用者的危險的方法,該方法包括以下步驟: 將該UAV相對於該使用者保持在一監測位置; 由該UAV針對接近物件而監測該使用者周圍的一區域; 由該UAV偵測一接近物件; 由該UAV決定該接近物件是否對該使用者構成一危險;及 由該UAV回應於決定該接近物件對使用者構成一危險而執行一或多個動作以減輕該接近物件的危險。
  2. 根據請求項1之方法,其中將該UAV相對於該使用者保持在一監測位置包括以下步驟: 由該UAV決定該使用者的一或多個屬性;及 由該UAV基於該使用者的一或多個屬性來決定該監測位置。
  3. 根據請求項2之方法,其中決定該使用者的該一或多個屬性包括決定該使用者的一位置、一速度和一高度中的至少一個。
  4. 根據請求項2之方法,進一步包括以下步驟: 由該UAV決定與該使用者在一起的一或多個額外的人的一或多個屬性, 其中決定該監測位置進一步基於該一或多個額外的人的一或多個屬性。
  5. 根據請求項2之方法,進一步包括以下步驟: 由該UAV決定一或多個環境條件; 其中決定該監測位置進一步基於該一或多個環境條件。
  6. 根據請求項5之方法,其中決定一或多個環境條件包括決定該使用者周圍的一或多個靜止物件的一高度、一照明條件、一天氣條件或一當前時間中的至少一個。
  7. 根據請求項1之方法,其中針對接近物件而監測該使用者周圍的該區域包括以下步驟: 由該UAV估計該使用者的一行進路徑; 由該UAV基於該使用者的該估計行進路徑來決定要掃瞄的一區域; 由該UAV掃瞄所決定的區域以偵測物件; 由該UAV估計一偵測物件的一行進路徑;及 由該UAV決定該使用者的該估計行進路徑是否與該偵測物件的該估計行進路徑以至少一預定概率相交。
  8. 根據請求項7之方法,其中: 估計該使用者的該行進路徑包括至少基於該使用者的一位置和一速度來估計該使用者的該行進路徑;及 估計該偵測物件的該行進路徑包括至少基於該偵測物件的一位置和一速度來估計該偵測物件的該行進路徑。
  9. 根據請求項7之方法,其中該預定概率由該使用者指定。
  10. 根據請求項7之方法,其中在一指定時間範圍內估計該使用者的該估計行進路徑和該偵測物件的該估計行進路徑。
  11. 根據請求項7之方法,其中決定該要掃瞄的區域包括決定距該使用者的該估計行進路徑的所有點一定距離內的一區域。
  12. 根據請求項11之方法,其中該距離由該使用者指定。
  13. 根據請求項7之方法,其中決定該要掃瞄的區域進一步包括決定該使用者周圍的一指定半徑和距該使用者的在一前行進路徑的所有點一定距離內的一區域中的至少一個。
  14. 根據請求項7之方法,進一步包括決定該使用者的該估計行進路徑和該偵測物件的該估計行進路徑中的每一個的準確度的一概率。
  15. 根據請求項7之方法,其中掃瞄該所決定的區域以偵測物件包括經由設備到設備通訊或蜂巢通訊與一或多個物件進行通訊。
  16. 根據請求項1之方法,其中決定該接近物件是否對該使用者構成一危險包括以下步驟: 由該UAV決定該接近物件的一或多個屬性; 由該UAV將該一或多個屬性與一或多個閾值進行比較; 由該UAV決定該接近物件的該一或多個屬性是否超過該一或多個閾值中的至少一個;及 由該UAV回應於決定該接近物件的該一或多個屬性超過該一或多個閾值中的至少一個而決定該接近物件對該使用者構成一危險。
  17. 根據請求項16之方法,其中該一或多個屬性包括該接近物件的一位置、該接近物件的一速度、該接近物件的一大小、該接近物件的一類型以及該接近物件的一危險特性中的一或多個。
  18. 根據請求項16之方法,其中由該使用者指定該一或多個閾值。
  19. 根據請求項16之方法,其中經由與該接近物件的設備到設備通訊或蜂巢通訊來獲得該一或多個屬性。
  20. 根據請求項1之方法,其中執行該一或多個動作包括以下中的至少一個:產生一視覺警告、發出一音訊警告、向該接近物件發送一警告、向該使用者攜帶的一無線通訊設備發送一警告、護送該使用者通過該危險、阻擋該使用者的一行進路徑或阻擋該接近物件的一行進路徑。
  21. 根據請求項1之方法,進一步包括以下步驟: 由該UAV決定該接近物件是否仍然對該使用者構成一危險;及 由該UAV回應於決定該接近物件仍然對該使用者構成一危險而繼續該一或多個動作。
  22. 根據請求項21之方法,其中決定該接近物件是否仍然對該使用者構成一危險包括以下中的至少一個: 由該UAV估計該使用者的一行進路徑和該接近物件的一行進路徑;及 將該接近物件的一或多個屬性與一或多個閾值進行比較。
  23. 一種無人駕駛飛行器(UAV),包括: 一處理器,該處理器配置有處理器可執行指令,以用於: 將該UAV相對於一使用者保持在一監測位置; 針對一接近物件而監測該使用者周圍的一區域; 偵測一接近物件; 決定該接近物件是否對該使用者構成一危險;及 回應於決定該接近物件對該使用者構成一危險而執行一或多個動作以減輕該接近物件的該危險。
  24. 根據請求項23之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於經由以下方式將該UAV相對於該使用者保持在一監測位置: 決定該使用者的一或多個屬性;及 基於該使用者的該一或多個屬性來決定該監測位置。
  25. 根據請求項24之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於決定該使用者的一或多個屬性,該一或多個屬性包括該使用者的一位置、一速度和一高度中的至少一個的。
  26. 根據請求項24之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於: 決定與該使用者在一起的一或多個額外的人的一或多個屬性, 其中決定該監測位置進一步基於該一或多個額外的人的一或多個屬性。
  27. 根據請求項24之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於: 決定一或多個環境條件; 其中決定該監測位置進一步基於該一或多個環境條件。
  28. 根據請求項27之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於決定一或多個環境條件,該一或多個環境條件包括該使用者周圍的一或多個靜止物件的一高度、一照明條件、一天氣條件或一當前時間中的至少一個。
  29. 根據請求項23之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於經由以下方式來針對接近物件而監測該使用者周圍的該區域: 估計該使用者的一行進路徑; 基於該使用者的該估計行進路徑來決定要掃瞄的一區域; 掃瞄該所決定的區域以偵測物件; 估計一偵測物件的一行進路徑;及 決定該使用者的該估計行進路徑是否與該偵測物件的該估計行進路徑以至少一預定概率相交。
  30. 根據請求項29之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於: 至少基於該使用者的一位置和一速度來估計該使用者的該行進路徑;及 至少基於該偵測物件的一位置和一速度來估計該偵測物件的該行進路徑。
  31. 根據請求項29之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於在一指定時間範圍內估計該使用者的該估計行進路徑和該偵測物件的該估計行進路徑。
  32. 根據請求項29之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於決定該要掃瞄的區域,該要掃瞄的區域包括距該使用者的該估計行進路徑的所有點一定距離內的該區域。
  33. 根據請求項29之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於決定該要掃瞄的區域,該要掃瞄的區域包括該使用者周圍的一指定半徑和距該使用者的在一前行進路徑的所有點一定距離內的一區域中的至少一個。
  34. 根據請求項29之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於借助經由設備到設備通訊或蜂巢通訊與一或多個物件進行通訊來掃瞄該所決定的區域以偵測物件。
  35. 根據請求項23之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於經由以下方式來決定該接近物件是否對該使用者構成一危險: 決定該接近物件的一或多個屬性; 將該一或多個屬性與一或多個閾值進行比較; 決定該接近物件的該一或多個屬性是否超過該一或多個閾值中的至少一個;及 回應於決定該接近物件的該一或多個屬性超過該一或多個閾值中的至少一個而決定該接近物件對該使用者構成一危險。
  36. 根據請求項35之UAV,其中該一或多個屬性包括該接近物件的一位置、該接近物件的一速度、該接近物件的一大小、該接近物件的一類型或該接近物件的一危險特性中的一或多個。
  37. 根據請求項23之UAV,其中該一或多個動作包括以下中的至少一個:產生一視覺警告、發出一音訊警告、向該接近物件發送一警告、向該使用者攜帶的一無線通訊設備發送一警告、護送該使用者通過該危險、阻擋該使用者的一行進路徑或阻擋該接近物件的一行進路徑。
  38. 根據請求項23之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於: 決定該接近物件是否仍然對該使用者構成一危險;及 回應於決定該接近物件仍然對該使用者構成一危險而繼續該一或多個動作。
  39. 根據請求項38之UAV,其中該處理器進一步被配置有處理器可執行指令,以用於決定該接近物件是否仍然對該使用者構成一危險,決定該接近物件是否仍然對該使用者構成一危險包括以下中的至少一個: 估計該使用者的一行進路徑和該接近物件的一行進路徑;及 將該接近物件的一或多個屬性與一或多個閾值進行比較。
  40. 一種非暫態電腦可讀儲存媒體,其上儲存有處理器可執行軟體指令,該等處理器可執行軟體指令被配置為使一無人駕駛飛行器(UAV)的處理器執行操作,該等操作包括: 將該UAV相對於一使用者保持在一監測位置; 針對接近物件而監測該使用者周圍的一區域; 偵測一接近物件; 決定該接近物件是否對該使用者構成一危險;及 回應於決定該接近物件對該使用者構成一危險而執行一或多個動作以減輕該接近物件的該危險。
  41. 一種無人駕駛飛行器(UAV),包括: 用於將該UAV相對於一使用者保持在一監測位置的模組; 用於針對一接近物件而監測該使用者周圍的一區域的模組; 用於偵測一接近物件的模組; 用於決定該接近物件是否對該使用者構成一危險的模組;及 用於回應於決定該接近物件對該使用者構成一危險而執行一或多個動作以減輕該接近物件的該危險的模組。
TW106117151A 2016-07-28 2017-05-24 利用無人駕駛飛行器監測對使用者的危險的系統和方法 TW201823898A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/221,711 US10351237B2 (en) 2016-07-28 2016-07-28 Systems and methods for utilizing unmanned aerial vehicles to monitor hazards for users
US15/221,711 2016-07-28

Publications (1)

Publication Number Publication Date
TW201823898A true TW201823898A (zh) 2018-07-01

Family

ID=59071075

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106117151A TW201823898A (zh) 2016-07-28 2017-05-24 利用無人駕駛飛行器監測對使用者的危險的系統和方法

Country Status (5)

Country Link
US (1) US10351237B2 (zh)
EP (1) EP3491478B1 (zh)
CN (1) CN109564437B (zh)
TW (1) TW201823898A (zh)
WO (1) WO2018022177A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI768746B (zh) * 2020-05-19 2022-06-21 日商馬自達汽車股份有限公司 車輛之停車位置通知系統
TWI771231B (zh) * 2020-11-27 2022-07-11 日商樂天集團股份有限公司 感測系統、感測資料取得方法及控制裝置

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10173776B2 (en) * 2016-08-25 2019-01-08 International Business Machines Corporation Aerial drone for deploying a warning sign
KR20180080892A (ko) * 2017-01-05 2018-07-13 삼성전자주식회사 전자 장치 및 그 제어 방법
US10600295B2 (en) * 2017-05-05 2020-03-24 Tg-17, Inc. System and method for threat monitoring, detection, and response
US10654570B2 (en) * 2017-06-05 2020-05-19 International Business Machines Corporation Vehicular alert system
JP6839625B2 (ja) * 2017-07-27 2021-03-10 京セラ株式会社 飛行体、通信端末、及びプログラム
US20190114920A1 (en) * 2017-10-13 2019-04-18 Aptiv Technologies Limited Automated vehicle safety system that protects pedestrians
US10829110B2 (en) * 2017-10-26 2020-11-10 Robert Bosch Gmbh Method and device for adapting a driving behavior of a semi, highly or fully automated vehicle
WO2019168793A1 (en) * 2018-02-28 2019-09-06 Walmart Apollo, Llc System and method for indicating drones flying overhead
US10300888B1 (en) * 2018-03-06 2019-05-28 GM Global Technology Operations LLC Performing remote vehicle commands using live camera supervision
US11216954B2 (en) * 2018-04-18 2022-01-04 Tg-17, Inc. Systems and methods for real-time adjustment of neural networks for autonomous tracking and localization of moving subject
US11454975B2 (en) * 2018-06-28 2022-09-27 Uatc, Llc Providing actionable uncertainties in autonomous vehicles
US10926876B2 (en) 2018-10-24 2021-02-23 Here Global B.V. Traffic control system, controller and method for directing vehicle behavior at a defined spatial location
US11235872B2 (en) * 2018-10-26 2022-02-01 Here Global B.V. Method and apparatus for utilizing an unmanned air vehicle to define or provide guidance along a route
US10685679B1 (en) * 2018-11-27 2020-06-16 Canon Kabushiki Kaisha System and method of determining a virtual camera path
US20200285255A1 (en) * 2019-03-08 2020-09-10 Here Global B.V. Method and apparatus for providing drone-based alerting of movement of a part of a vehicle into a path of travel
EP3748602A1 (en) * 2019-06-03 2020-12-09 Sony Corporation Monitoring vehicle movement for traffic risk mitigation
CN110210638A (zh) * 2019-06-04 2019-09-06 北京百度网讯科技有限公司 无人公共交通车辆预约链接推送方法和装置、设备、介质
US20210001981A1 (en) * 2019-07-02 2021-01-07 Nokia Solutions And Networks Oy Position determination of mobile objects
US11776396B2 (en) 2019-12-17 2023-10-03 Denso International America, Inc. Intersection infrastructure warning system
US11493586B2 (en) * 2020-06-28 2022-11-08 T-Mobile Usa, Inc. Mobile proximity detector for mobile electronic devices
US11879745B2 (en) * 2020-07-20 2024-01-23 Ford Global Technologies, Llc Systems and methods for facilitating a final leg of a journey
US11532221B1 (en) * 2021-08-05 2022-12-20 Ford Global Technologies, Llc System and method for vehicle security monitoring

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7818127B1 (en) * 2004-06-18 2010-10-19 Geneva Aerospace, Inc. Collision avoidance for vehicle control systems
DK2606482T3 (da) * 2011-05-23 2017-11-06 Ion Geophysical Corp Havtrusselovervågnings- og forsvarssystem
US20150134143A1 (en) 2013-10-04 2015-05-14 Jim Willenborg Novel tracking system using unmanned aerial vehicles
WO2014080388A2 (en) 2014-03-25 2014-05-30 Alshdaifat, Wasfi Police drone
WO2015179797A1 (en) 2014-05-23 2015-11-26 Lily Robotics, Inc. Unmanned aerial copter for photography and/or videography
JP6062079B2 (ja) * 2014-05-30 2017-01-18 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd 無人型航空輸送機(uav)の動作を制御するための制御器および方法ならびに乗り物
WO2015200209A1 (en) 2014-06-23 2015-12-30 Nixie Labs, Inc. Wearable unmanned aerial vehicles, launch- controlled unmanned aerial vehicles, and associated systems and methods
WO2016029170A1 (en) 2014-08-22 2016-02-25 Cape Productions Inc. Methods and apparatus for automatic editing of video recorded by an unmanned aerial vehicle
US9463875B2 (en) * 2014-09-03 2016-10-11 International Business Machines Corporation Unmanned aerial vehicle for hazard detection
US9928748B2 (en) 2015-11-25 2018-03-27 International Business Machines Corporation Dynamic geo-fence for drone
US9665098B1 (en) 2016-02-16 2017-05-30 Gopro, Inc. Systems and methods for determining preferences for flight control settings of an unmanned aerial vehicle
CN105867405A (zh) 2016-05-23 2016-08-17 零度智控(北京)智能科技有限公司 无人机、无人机降落控制装置及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI768746B (zh) * 2020-05-19 2022-06-21 日商馬自達汽車股份有限公司 車輛之停車位置通知系統
TWI771231B (zh) * 2020-11-27 2022-07-11 日商樂天集團股份有限公司 感測系統、感測資料取得方法及控制裝置

Also Published As

Publication number Publication date
US20180029706A1 (en) 2018-02-01
WO2018022177A1 (en) 2018-02-01
CN109564437A (zh) 2019-04-02
US10351237B2 (en) 2019-07-16
EP3491478B1 (en) 2020-12-23
CN109564437B (zh) 2020-06-09
EP3491478A1 (en) 2019-06-05

Similar Documents

Publication Publication Date Title
CN109564437B (zh) 用于利用无人飞行器监测对用户的危险的系统和方法
US11294398B2 (en) Personal security robotic vehicle
US8559673B2 (en) Traffic signal mapping and detection
JP2020500763A (ja) 静止及び移動体に対する無人航空機の飛行方法
CN105247593A (zh) 飞行禁区的飞行控制
TW202132810A (zh) 使用全球導航衛星系統載波相位決定相對位置的方法和裝置
EP3776108B1 (en) Tracking stolen robotic vehicles
JP2022095865A (ja) 情報生成装置、情報生成方法、および、情報生成装置用プログラム
US11900803B2 (en) Road-side detection and alert system and method
CN111971207B (zh) 追回机器人运载工具的方法、机器人运载工具和处理设备
KR102525215B1 (ko) Lidar에 대한 견고한 눈 안전성
JP6899608B2 (ja) ルート管理制御サーバ、方法及びシステム並びにこれに用いられる第1飛行体及び第2飛行体
JP6899605B2 (ja) ルート管理制御サーバ、方法及びシステム並びにこれに用いられる第1飛行体及び第2飛行体
JP6899607B2 (ja) ルート管理制御サーバ、方法及びシステム並びにこれに用いられる第1飛行体及び第2飛行体
US20240135811A1 (en) Road-side detection and alert system and method
JP2022003585A (ja) 情報生成装置、情報生成方法、および、情報生成装置用プログラム