CN111656356B - 利用分布式神经网络的对象识别系统 - Google Patents

利用分布式神经网络的对象识别系统 Download PDF

Info

Publication number
CN111656356B
CN111656356B CN201980010349.4A CN201980010349A CN111656356B CN 111656356 B CN111656356 B CN 111656356B CN 201980010349 A CN201980010349 A CN 201980010349A CN 111656356 B CN111656356 B CN 111656356B
Authority
CN
China
Prior art keywords
neural network
roi
video
base station
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980010349.4A
Other languages
English (en)
Other versions
CN111656356A (zh
Inventor
M·费根布茨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rockwell Collins Deutschland GmbH
Original Assignee
Rockwell Collins Deutschland GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rockwell Collins Deutschland GmbH filed Critical Rockwell Collins Deutschland GmbH
Publication of CN111656356A publication Critical patent/CN111656356A/zh
Application granted granted Critical
Publication of CN111656356B publication Critical patent/CN111656356B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C19/00Aircraft control not otherwise provided for
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/04Protocols specially adapted for terminals or networks with limited capabilities; specially adapted for terminal portability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

本发明涉及一种利用分布式神经网络的对象识别系统,其中该神经网络的资源密集部分设置在基站上(位于地面上),而该神经网络的资源密集度较低的部分,特别是该神经网络的其余部分,设置在前端(例如远程控制交通工具)上。由此可以减少前端方以及基站与前端之间的数据传输的技术工作量。

Description

利用分布式神经网络的对象识别系统
技术领域
本发明涉及一种利用分布式神经网络的对象识别系统。
背景技术
基本上,经典卷积神经网络(Convolutional Neural Network-CNN)的结构由一个或多个卷积层组成,然后是池化层。这种单元原则上可以重复任意多次;在重复足够多次的情况下就称之为深度卷积神经网络,属于深度学习领域。
用于高分辨率视频中的实时对象识别的卷积神经网络需要足够的计算能力、存储空间和特殊的复杂图形模块的支持。上述计算机资源通常有相当大的功率需求和空间需求,并且相应地也很沉重。
在中小型远程控制交通工具(在此特别是无人驾驶飞行器)上,对于尺寸、重量和功率需求的要求可能无法得到满足。
另一个问题是这种解决方案在交通工具上的成本。对于中小型交通工具,这既针对单位成本,也针对未来改进的成本。
此外,必须通过例子来训练这样的网络,并且在训练阶段之后(无反馈)不能独立地继续学习。
发明内容
本发明的任务在于,提出一种利用神经网络技术的实时对象识别,用于具有有限计算机资源和有限链路带宽的远程控制交通工具。对此,应借助于分布式网络来改进利用神经网络技术的实时对象识别。此外,在特定情况下,应当实现已训练神经网络的连续自动的继续学习。
该任务通过具有本发明的特征的系统来实现。在本发明的其它实施例中给出了有利的实施方案。
在利用分布式神经网络进行对象识别的系统中,神经网络的资源密集部分转移到了基站(地面上),该基站在大小、重量和功耗方面没有明显限制,而在前端(例如远程控制交通工具)仅处理特征映射或表征。
在一个变形方案中,高性能神经网络可以设置在基站(位于地面上)上,而较低性能神经网络则可以设置在前端上,特别是在交通工具,例如飞行器上。
在此,可以在前端上设置高分辨率摄像机设备,以生成高分辨率视频。前端方神经网络可以设计用于在视频中识别和标记“感兴趣的”图像区域。“感兴趣的”图像区域在此应理解为包含特征(根据对象识别使命的任务)的图像区域,该特征有可能可以表明待识别对象,但是最终的评估和表征尚不可行。
可以设置视频处理设备,用于基于先前识别的感兴趣的图像区域选择和定义ROI(“Region of Interest”感兴趣区域),并将该ROI编码到视频中。在这方面,ROI是先前表征为“感兴趣的”图像区域的区域的延续。
此外,可以设置数据无线连接,用于将视频从视频处理设备传输到基站。
基站方神经网络可以设计用于评估从接收到的视频中提取的ROI,并识别ROI中存在的对象。在基站中,从接收到的视频中提取ROI,并将其提供给神经网络。
基站方神经网络设计得比前端方神经网络要深得多。因此基站方的神经网络可以有近乎无限的资源用于分析和对象识别。最后,委托AI计算机(人工智能)重新编译整个视频,并特别是补充由基站方神经网络所识别的对象。视频可以包含具有新对象边界和已识别对象的分类的ROI以及未编码为ROI的其他区域的符号。
可以设置显示设备,用于显示由基站方神经网络识别的对象或由此产生的视频。
可以设置用于改变系统参数的操作设备;其中,至少一个参数选自以下组:
+ROI的位置
+ROI的大小
+对ROI的评估
+ROI的显示
+定义新的ROI
+确定彩色显示还是黑白显示
借助该操作设备,地面上的操作员可以动态改变显示。
此外,提出一种用于对象识别的方法,其包括以下步骤:
-在基站上装备高性能神经网络;
-在前端上装备较低性能神经网络;
-在前端生成高分辨率视频;
-通过前端方神经网络识别视频中的感兴趣的图像区域并标记这些图像区域;
-基于先前识别的感兴趣的图像区域选择和定义ROI(“Region ofInterest”感兴趣区域),并将这些ROI编码到视频中。
-从前端向基站传输该视频;
-从接收到的视频提取ROI;
-通过基站方神经网络评估所提取的ROI并识别这些ROI中存在的对象。
由此可以减少前端方以及基站与前端之间的数据传输的技术工作量。
建议的解决方案有助于改进所有利用视频处理方式(例如远程控制应用程序)寻址对象识别的系统。
这样的系统例如可以用于无人驾驶飞行器(例如无人机)。应用领域之一可以是无人机辅助的自然灾害受害者搜索。无人机就可以借助于分配在无人机自身和基站上的神经网络形式的人工智能,寻找和识别需要帮助的受害者。以这种方式可以大大简化并加快救助服务的工作。
附图说明
下面借助实施例参照附图说明本发明。其中:
图1示出了对象识别系统的示意图,分为特征映射层和全连接层;
图2示出了图1的图表的不同表示形式;
图3示出了特征映射层和全连接层中的学习参数的比例的概况的表格;
图4以另一表示形式示出了对象识别系统;
图5再以另外的表示形式示出了对象识别系统;
图6示出了对象识别系统的变形。
具体实施方式
提出的解决方案允许将神经网络的资源密集部分转移到基站(地面上),该基站在大小、重量和功耗方面没有明显限制。
另一方面,在前端(例如远程控制交通工具)仅处理特征映射或表征(见图1和2)。
如图3中的表格所示,网络的后续的“全连接”部分中的学习参数数量大大增加,而特征映射层(卷积和池化层)中的参数数量却很少。
同时,像素/数据数量减少到原始(视频)图像的最小部分。
信息在特征映射层和“全连接层”之间序列化,即高度和宽度=1,且深度对应于上一层的场/像素的最大数量。
该解决方案设置为,在“传输参数”数量最小的位置(例如在“卷积层”和“全连接层”之间)将网络分为在交通工具中保留的部分和基站中的部分。全连接的巨大连接数和相关参数的巨大数量就可以通过基站的计算机实现,而具有少量学习参数的卷积层和池化层则在交通工具上计算。
取代压缩视频流的数兆字节/秒的传输(时常由于数据链路的带宽波动而无法提供稳定的图像质量),所说明的方法仅需要进行千字节/秒范围内的传输,即使对于高分辨率视频中的对象识别也是如此。
所说明的分为两个部分(例如基站、交通工具)的对象识别的方法原理可以用于持续地改进对象识别的质量(参见图4),以及实现该技术在计算机资源有限的环境中的使用。
通过使用多个交通工具或附加的固定传感器,可以将不同源的特征表征作为序列化的代表集中到基站,并通过共同的全连接网络进行处理。其前提是同步图像源。
这导致了预测质量的提高,尤其是在对象识别方面。
实现多个并行网络也是可能的,它们从不同的角度或以不同的网络结构来分析相同的对象,或者使用不同的训练图像集进行训练,可以通过比较结果为输出节点相互提供反馈,并由此可以自动地继续学习。
与已知系统相比,所说明的解决方案还可用于远程控制或自动驾驶的中小型交通工具。
该系统也可以根据载具(交通工具)的能力进行继续学习,而无需修改交通工具。改进可以在基站进行(另参见图5)。
与已知系统相比,所说明的解决方案可以从不同角度自动分析对象,并通过通用分类层改进结果(另参见图5)。
图6以功能和操作原理的形式示出了变形方案。下面编号的段落涉及的是图6中的序号(圆圈中的数字)。
(1)为了分析大面积的场景,例如地震后的灾区,以使用无人机为例,除现有的日光传感器和红外传感器外,还配备有群集摄像机。该群集摄像机由多个单独的摄像机(摄像机1-3)组成,它们共同确保了非常宽的视角。以这种方式可以完全覆盖更大的区域或地形。
(2)群集摄像机的各个视频在无人机上的视频处理单元中合并(所谓的“Stitching拼接”)成4k分辨率的单个视频(例如UHD视频)。该视频的规范化(缩放)版本传输到嵌入式神经网络以进行分析和对象识别,而完整的视频则以全分辨率并行传输到视频处理单元。因此,该嵌入式神经网络是前端方的神经网络,即在飞行器(例如无人机)上。
(3)嵌入式神经网络能够识别“感兴趣的”图像区域或对象(例如自然灾害的可能受害者、被毁的房屋等),并输出所找到的对象的边界的坐标(所谓的“边界框”)以及评估预测概率的相关权重(“得分”)。
由此,该嵌入式神经网络已经可以对得出的视频数据进行一定的预评估,并借助于现有的人工智能标记可能的感兴趣的图像区域或对象。
在此,嵌入式神经网络的计算能力通常不足以以足够的安全性和准确性来鉴别识别为“感兴趣”的图像区域或在那里找到的对象。
(4)由神经网络识别的坐标和概率被视频处理单元用来定义所谓的ROI(ROI-“感兴趣区域”)。ROI的面积可以大于先前定义的对象边界,并且还可以包含多个这种标记。如果例如神经网络识别出了彼此紧挨着的多个“感兴趣的”对象,则这些对象可以合并成一个ROI。
根据概率参数,将最重要的ROI直接编码到视频中,而低概率的区域则可以通过具有颜色代码的符号进行标记。
为了进一步提高压缩率,可以选择以黑白格式传输ROI之外的区域,如图6所示。在相应的无线带宽的情况下,当然也可以完全以彩色格式传输。
(5)通过无人机的数据无线连接将编码视频以符号坐标和ROI的形式发送到地面控制站,然后在那里再次解码。因此,视频具有高分辨率区域(具有ROI)和低分辨率区域(可能只是黑白的)(根据无人机与地面站之间连接的带宽)。
(6)为了对ROI进行详细分析,会自动将这些ROI从视频中剪切并传输到地面支持的神经网络。该网络在具有高性能处理器和多个GPU的专用AI计算机上运行。
地面上的处理最终通过ROI的机制实现,即使在无线带宽波动的情况下,ROI仍提供这些区域的稳定的高质量视频材料。
(7)设置于地面的AI计算机使用的神经网络比飞行器上的机载组件所使用的深得多,并为分析和对象识别提供了近乎无限的资源。
(8)最后,AI计算机在地面的显示单元上显示完整的视频。该视频包含具有新对象边界和已识别对象的分类的ROI以及未编码为ROI的其他区域的符号。
地面上的操作员可以动态更改显示。他例如可以:
·动态移动显示的ROI,和/或
·更改ROI的大小
·选择符号并使其作为ROI显示(得分最低的ROI则消失并成为符号)
·自己定义ROI
·选择彩色显示或黑白显示。

Claims (4)

1.一种利用分布式神经网络的对象识别系统,其中
-高性能神经网络设置在基站上;
-较低性能神经网络设置在前端上,其中所述较低性能神经网络与所述高性能神经网络相比具有较小的深度并因而具有较低的性能;
-在所述前端上设置高分辨率摄像机设备,以生成高分辨率视频;
-所述前端方神经网络设计用于在所述视频中识别和标记感兴趣的图像区域,其中,所述感兴趣的图像区域是包含能够推断出根据对象识别任务要识别出的对象的特征的图像区域,其中,由于所述前端方神经网络的性能较低无法进行最终评估和表征;
-设置视频处理设备,用于基于先前识别的所述感兴趣的图像区域选择和定义感兴趣区域即ROI,并将所述ROI编码到所述视频中;
-设置数据无线连接,用于将所述视频从所述视频处理设备传输到所述基站;
-所述基站方神经网络设计用于评估从接收到的所述视频中提取的ROI,并识别所述ROI中存在的对象。
2.根据权利要求1所述的系统,其中,
-设置显示设备,用于显示由所述基站方神经网络识别的对象。
3.根据权利要求1或2所述的系统,其中,
-设置用于改变所述系统的参数的操作设备;其中,
-至少一个所述参数选自以下组:
+ROI的位置
+ROI的大小
+对ROI的评估
+ROI的显示
+定义新的ROI
+确定彩色显示还是黑白显示。
4.一种用于对象识别的方法,其具有以下步骤:
-在基站上装备高性能神经网络;
-在前端上装备较低性能神经网络,其中所述较低性能神经网络与所述高性能神经网络相比具有较小的深度并因而具有较低的性能;
-在所述前端生成高分辨率视频;
-通过所述前端方神经网络识别所述视频中的感兴趣的图像区域并标记所述图像区域,其中,所述感兴趣的图像区域是包含能够推断出根据对象识别任务要识别出的对象的特征的图像区域,其中,由于所述前端方神经网络的性能较低无法进行最终评估和表征;
-基于先前识别的所述感兴趣的图像区域选择和定义感兴趣区域即ROI,并将所述ROI编码到所述视频中;
-从所述前端向所述基站传输所述视频;
-从接收到的所述视频提取ROI;
-通过所述基站方神经网络评估所提取的所述ROI并识别所述ROI中存在的对象。
CN201980010349.4A 2018-03-16 2019-03-14 利用分布式神经网络的对象识别系统 Active CN111656356B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
DE102018106222.2 2018-03-16
DE102018106222 2018-03-16
DE102018110828.1 2018-05-04
DE102018110828.1A DE102018110828A1 (de) 2018-03-16 2018-05-04 System zur Objekterkennung mittels verteilter Neuronaler Netze
PCT/EP2019/056418 WO2019175309A1 (de) 2018-03-16 2019-03-14 System zur objekterkennung mittels verteilter neuronaler netze

Publications (2)

Publication Number Publication Date
CN111656356A CN111656356A (zh) 2020-09-11
CN111656356B true CN111656356B (zh) 2023-08-08

Family

ID=67774380

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980010349.4A Active CN111656356B (zh) 2018-03-16 2019-03-14 利用分布式神经网络的对象识别系统

Country Status (10)

Country Link
US (1) US11816567B2 (zh)
EP (1) EP3765999B1 (zh)
JP (1) JP7058334B2 (zh)
CN (1) CN111656356B (zh)
AU (1) AU2019233666B2 (zh)
CA (1) CA3094121C (zh)
DE (1) DE102018110828A1 (zh)
ES (1) ES2916727T3 (zh)
IL (1) IL276178B2 (zh)
WO (1) WO2019175309A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020204109A1 (de) 2020-03-30 2021-09-30 Airbus Operations Gmbh Überwachungssystemnetzwerk und verfahren zum betreiben eines überwachungssystemnetzwerks
CN113469117A (zh) * 2021-07-20 2021-10-01 国网信息通信产业集团有限公司 一种多路视频实时检测方法及系统
WO2023127388A1 (ja) * 2021-12-28 2023-07-06 ソニーグループ株式会社 無線基地局、無線基地局の制御方法、通信制御装置、通信制御装置の制御方法およびプログラム

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009505288A (ja) * 2005-08-15 2009-02-05 エブリックス・テクノロジーズ・インコーポレイテッド 画像から得られる情報のインターネットおよびその他の検索エンジンのための検索基準としての使用
CN103632143A (zh) * 2013-12-05 2014-03-12 冠捷显示科技(厦门)有限公司 结合云计算基于影像的物件识别系统
CN104077613A (zh) * 2014-07-16 2014-10-01 电子科技大学 一种基于级联多级卷积神经网络的人群密度估计方法
WO2017095948A1 (en) * 2015-11-30 2017-06-08 Pilot Ai Labs, Inc. Improved general object detection using neural networks
CN107003989A (zh) * 2014-12-19 2017-08-01 英特尔公司 用于人工神经网络中的分布式与协作计算的方法和装置
CN107135237A (zh) * 2017-07-07 2017-09-05 三星电子(中国)研发中心 一种呈现目标增强信息的实现方法和装置
CN107368886A (zh) * 2017-02-23 2017-11-21 奥瞳系统科技有限公司 基于重复使用小规模卷积神经网络模块的神经网络系统
CN107368832A (zh) * 2017-07-26 2017-11-21 中国华戎科技集团有限公司 基于图像的目标检测及分类方法
CN107368857A (zh) * 2017-07-24 2017-11-21 深圳市图芯智能科技有限公司 图像对象检测方法、系统及模型处理方法、设备、终端
WO2017200622A2 (en) * 2016-02-29 2017-11-23 Satellogic Overseas, Inc. (Bvi) System for planetary-scale analytics

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170076195A1 (en) * 2015-09-10 2017-03-16 Intel Corporation Distributed neural networks for scalable real-time analytics
US20220269910A1 (en) * 2017-07-01 2022-08-25 Algolux Inc. Method and system for determining auto-exposure for high-dynamic range object detection using neural network
US10816693B2 (en) * 2017-11-21 2020-10-27 Reliance Core Consulting LLC Methods, systems, apparatuses and devices for facilitating motion analysis in a field of interest

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009505288A (ja) * 2005-08-15 2009-02-05 エブリックス・テクノロジーズ・インコーポレイテッド 画像から得られる情報のインターネットおよびその他の検索エンジンのための検索基準としての使用
CN103632143A (zh) * 2013-12-05 2014-03-12 冠捷显示科技(厦门)有限公司 结合云计算基于影像的物件识别系统
CN104077613A (zh) * 2014-07-16 2014-10-01 电子科技大学 一种基于级联多级卷积神经网络的人群密度估计方法
CN107003989A (zh) * 2014-12-19 2017-08-01 英特尔公司 用于人工神经网络中的分布式与协作计算的方法和装置
WO2017095948A1 (en) * 2015-11-30 2017-06-08 Pilot Ai Labs, Inc. Improved general object detection using neural networks
WO2017200622A2 (en) * 2016-02-29 2017-11-23 Satellogic Overseas, Inc. (Bvi) System for planetary-scale analytics
CN107368886A (zh) * 2017-02-23 2017-11-21 奥瞳系统科技有限公司 基于重复使用小规模卷积神经网络模块的神经网络系统
CN107135237A (zh) * 2017-07-07 2017-09-05 三星电子(中国)研发中心 一种呈现目标增强信息的实现方法和装置
CN107368857A (zh) * 2017-07-24 2017-11-21 深圳市图芯智能科技有限公司 图像对象检测方法、系统及模型处理方法、设备、终端
CN107368832A (zh) * 2017-07-26 2017-11-21 中国华戎科技集团有限公司 基于图像的目标检测及分类方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Surat Teerapittayanon 等.Distributed Deep Neural Networks over the Cloud, the Edge and End Devices.《arXiv》.2017,1-12. *

Also Published As

Publication number Publication date
DE102018110828A1 (de) 2019-09-19
EP3765999B1 (de) 2022-05-04
CN111656356A (zh) 2020-09-11
IL276178B1 (en) 2023-05-01
WO2019175309A1 (de) 2019-09-19
JP7058334B2 (ja) 2022-04-21
CA3094121C (en) 2023-03-28
CA3094121A1 (en) 2019-09-19
JP2021517289A (ja) 2021-07-15
US11816567B2 (en) 2023-11-14
US20210027059A1 (en) 2021-01-28
IL276178A (en) 2020-09-30
AU2019233666A1 (en) 2020-11-12
ES2916727T3 (es) 2022-07-05
EP3765999A1 (de) 2021-01-20
IL276178B2 (en) 2023-09-01
AU2019233666B2 (en) 2022-02-03

Similar Documents

Publication Publication Date Title
US10678256B2 (en) Generating occlusion-aware bird eye view representations of complex road scenes
CN111656356B (zh) 利用分布式神经网络的对象识别系统
US9911340B2 (en) Real-time system for multi-modal 3D geospatial mapping, object recognition, scene annotation and analytics
Geraldes et al. UAV-based situational awareness system using deep learning
RU2694016C1 (ru) Обнаружение состояния объектов с использованием системы обработки изображения, соответствующий способ и постоянный машиночитаемый носитель
RU2669656C2 (ru) Обнаружение состояния с использованием обработки изображений
US9928605B2 (en) Real-time cascaded object recognition
CN106326858A (zh) 一种基于深度学习的公路交通标志自动识别与管理系统
US11574462B1 (en) Data augmentation for detour path configuring
US11699282B1 (en) Data augmentation for vehicle control
Lu et al. Knowing where I am: exploiting multi-task learning for multi-view indoor image-based localization.
Sun et al. Road and car extraction using UAV images via efficient dual contextual parsing network
US20240001849A1 (en) Data Augmentation for Driver Monitoring
CN112233079B (zh) 多传感器图像融合的方法及系统
Šul'aj et al. UAV management system for the smart city
Anderson et al. Indoor navigation using convolutional neural networks and floor plans
Šuľaj et al. UAV Management system for the smart city
KR20240007729A (ko) 임베디드 장치에서 딥러닝을 통해 객체를 탐지하는 방법 및 그 방법을 위한 기기
Emilyn et al. Entity Perception Using Remotely Piloted Aerial Vehicle
Rubin On creativity and intelligence in computational systems
Kaljahi Image Classification and Segmentation for Efficient Surveillance Applications
CN116168250A (zh) 一种用于rgb-d目标识别的多层级特征学习方法
CN117456495A (zh) 场景识别方法、模型训练方法、装置以及电子设备
CN114359258A (zh) 红外移动对象目标部位的检测方法、装置及系统
CN116798117A (zh) 一种基于视频理解的矿井下异常动作识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant