CN114995804A - 一种智能驾驶系统开发工具链系统及其运行方法 - Google Patents
一种智能驾驶系统开发工具链系统及其运行方法 Download PDFInfo
- Publication number
- CN114995804A CN114995804A CN202210667699.1A CN202210667699A CN114995804A CN 114995804 A CN114995804 A CN 114995804A CN 202210667699 A CN202210667699 A CN 202210667699A CN 114995804 A CN114995804 A CN 114995804A
- Authority
- CN
- China
- Prior art keywords
- data
- tool
- module
- interface
- development
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000033772 system development Effects 0.000 title claims abstract description 47
- 238000011161 development Methods 0.000 claims abstract description 90
- 230000018109 developmental process Effects 0.000 claims abstract description 90
- 238000004891 communication Methods 0.000 claims description 51
- 238000012545 processing Methods 0.000 claims description 40
- 238000007726 management method Methods 0.000 claims description 26
- 238000009877 rendering Methods 0.000 claims description 18
- 230000003993 interaction Effects 0.000 claims description 17
- 230000006835 compression Effects 0.000 claims description 14
- 238000007906 compression Methods 0.000 claims description 14
- 238000002372 labelling Methods 0.000 claims description 14
- 238000012800 visualization Methods 0.000 claims description 14
- 238000012805 post-processing Methods 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 8
- 238000013523 data management Methods 0.000 claims description 8
- 230000006837 decompression Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 8
- 230000011664 signaling Effects 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 4
- 230000010354 integration Effects 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 9
- 230000000644 propagated effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/34—Graphical or visual programming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/36—Software reuse
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/38—Creation or generation of source code for implementing user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/547—Remote procedure calls [RPC]; Web services
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Stored Programmes (AREA)
Abstract
本发明提供一种智能驾驶系统开发工具链系统的运行方法,所述系统包括开发平台层、开发工具集模块、工具管理中心模块和显示与操作界面,所述方法包括:响应于所接收的界面操作,在界面上添加所需的工具对应的控件;所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;所述工具管理中心对加载的工具进行资源初始化;响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。本发明能够实现智能驾驶开发工具的高效协同与整合。
Description
技术领域
本发明主要涉及车机系统开发领域,尤其涉及一种智能驾驶系统开发工具链系统及其运行方法。
背景技术
随着智能驾驶技术的快速发展,在感知、融合、规划以及控制各个环节需要的辅助工具越来越多,包括多种功能开发工具。智能驾驶相关开发人员在开发过程中往往是根据需要使用不同的工具,多种智能驾驶工具缺乏工具链方式的较为系统的管理,使用起来较为凌乱,从而影响了开发与测试的效率。
发明内容
本发明要解决的技术问题是提供一种智能驾驶系统开发工具链系统及其运行方法,实现智能驾驶开发工具的高效管理与整合。
为解决上述技术问题,本发明提供了一种智能驾驶系统开发工具链系统的运行方法,所述系统包括开发平台层、开发工具集模块、工具管理中心模块和显示与操作界面,所述开发平台层包括运行于开发设备端的第一类通信框架和运行于车端的第一域控制器,所述第一类通信框架和第一域控制器具有相应的通信接口模块;所述第一域控制器的通信接口模块用于获取车辆运行数据,所述第一域控制器将获取的车辆运行数据传输至所述第一类通信框架,所述开发工具集模块中的各个模块通过所述第一类通信框架的通信接口模块获取所述车辆运行数据,所述开发工具集模块包括数据源工具模块,所述工具管理中心模块包括开发接口模块,所述方法包括:响应于所接收的界面操作,在界面上添加所需的工具对应的控件;所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;所述工具管理中心对加载的工具进行资源初始化;响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。
在本发明的一实施例中,所述方法还包括:在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;如果为离线模式,则所述数据源工具模块向所述工具管理中心模块请求离线数据;所述工具管理中心模块在接收到所述离线数据请求时,判断当前数据处理状态是否为数据回放;如果是数据回放状态,则对运行数据中的回放数据进行管理并获取对应的数据缓存;如果不是数据回放状态,则直接获取离线数据缓存,并对离线数据进行处理分发;所述数据源工具模块通过数据队列对所述离线数据进行接收与管理。
在本发明的一实施例中,所述方法还包括:在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;如果为在线模式,则所述数据源工具模块通过所述第一类通信框架的通信接口模块接收到所述车辆运行数据后,通过数据队列进行管理,根据是否接到可视化选择操作判断是否回调数据;如果接受到可视化选择操作,则所述数据源工具模块依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调数据,所述显示与操作界面通过渲染控件对回调的数据进行可视化处理;
如果未接受到可视化选择操作,则所述数据源工具模块继续通过数据队列继续遍历数据。
在本发明的一实施例中,所述开发工具集模块还包括标注工具模块,所述方法还包括:所述标注工具模块通过数据源工具模块获取车辆运行数据后进行标注操作;完成标注操作后,依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调标注结果;所述显示与操作界面通过渲染控件渲染显示所述标注操作的处理结果。
在本发明的一实施例中,所述工具管理中心模块还包括数据管理子模块、工具加载子模块、工具驱动子模块和运行文件管理子模块;其中,数据管理子模块用于数据缓存、数据回放等数据处理操作的管理;工具加载子模块用于加载所述界面操作选择的一个或多个工具的加载;工具驱动子模块用于根据信令驱动工具运行;运行文件管理子模块用于配置信息文件、图像数据、点云数据以及运行基础数据的保存与载入,所述运行文件管理子模块涉及文件压缩解压的操作采用外部压缩库实现压缩与解压。
在本发明的一实施例中,所述开发工具集模块还包括数据转包工具和点云数据处理工具;所述数据转包工具对从车端获取的数据包进行解析,以获取相应的图像视频流数据和/或点云数据。
在本发明的一实施例中,所述系统还包括交互协议模块,所述显示与操作界面基于所述交互协议模块定义的传输协议与所述工具管理中心模块以及开发接口模块实现数据传输。
在本发明的一实施例中,所述开发工具集模块还包括自定义工具模块,所述工具管理中心模块还包括自定义工具管理子模块,所述方法还包括:在所述界面接收到开发自定义工具模块的操作时,继承所述的工具链系统的开发接口模块提供的自定义工具模块开发的代码模块;对所述自定义工具模块作初始化接口生成操作,用于所述工具管理中心模块驱动对应自定义工具初始化;基于所述自定义工具模块的数据交互需求的选择操作,进行参数配置接口生成操作,用于所述工具管理中心驱动对应的自定义工具模块进行参数设置与获取;对所述自定义工具模块作处理接口生成操作,所述自定义工具模块的处理逻辑在所述处理接口中实现,所述工具管理中心驱动对应的自定义工具模块基于所述处理逻辑进行工具内部逻辑处理;基于对输出结果需求的选择操作,进行所述自定义工具模块的输出结果接口生成操作,用于所述工具管理中心模块驱动对应的自定义工具模块进行结果输出操作;基于对资源管理需求或数据后处理需求的选择操作,进行所述自定义工具模块的后处理接口生成操作,用于所述工具管理中心模块的自定义工具管理子模块驱动对应的自定义工具模块进行数据后处理操作。
本发明还提供一种智能驾驶系统开发工具链系统,包括:开发平台层,包括运行于开发设备端的第一类通信框架和运行于车端的第一域控制器,所述第一类通信框架和第一域控制器具有相应的通信接口模块;所述第一域控制器的通信接口模块用于获取车辆运行数据,所述第一域控制器将获取的车辆运行数据传输至所述第一类通信框架;开发工具集模块,包括数据源工具模块;工具管理中心模块,包括开发接口模块;显示与操作界面;所述系统被配置为执行如下操作:响应于所接收的界面操作,在界面上添加所需的工具对应的控件;所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;所述工具管理中心对加载的工具进行资源初始化;响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。
与现有技术相比,本发明具有以下优点:本申请的技术方案,支持多个平台的数据采集与协议解析,便于开发工具的整合、管理与协同,支持用户开发自定义工具与集成操作,支持不同工具的流程化配置和工具间数据传输与共享,提高了系统的扩展性和开放性。
附图说明
附图是为提供对本申请进一步的理解,它们被收录并构成本申请的一部分,附图示出了本申请的实施例,并与本说明书一起起到解释本申请原理的作用。附图中:
图1是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。
图2是本申请一实施例的智能驾驶系统开发工具链系统的运行方法的流程示意图。
图3是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。
图4是本申请一实施例的智能驾驶系统开发工具链系统的自定义工具模块开发步骤示意图。
图5是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。
具体实施方式
为了更清楚地说明本申请的实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本申请的一些示例或实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图将本申请应用于其他类似情景。除非从语言环境中显而易见或另做说明,图中相同标号代表相同结构或操作。
如本申请和权利要求书中所示,除非上下文明确提示例外情形,“一”、“一个”、“一种”和/或“该”等词并非特指单数,也可包括复数。一般说来,术语“包括”与“包含”仅提示包括已明确标识的步骤和元素,而这些步骤和元素不构成一个排它性的罗列,方法或者设备也可能包含其他的步骤或元素。除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本申请的范围。
此外,需要说明的是,使用“第一”、“第二”等词语来限定零部件或组件,仅仅是为了便于对相应零部件或组件进行区别,如没有另行声明,上述词语并没有特殊含义,因此不能理解为对本申请保护范围的限制。此外,尽管本申请中所使用的术语是从公知公用的术语中选择的,但是本申请说明书中所提及的一些术语可能是申请人按他或她的判断来选择的,其详细含义在本文的描述的相关部分中说明。此外,要求不仅仅通过所使用的实际术语,而是还要通过每个术语所蕴含的意义来理解本申请。
本申请中使用了流程图用来说明根据本申请的实施例的系统所执行的操作。应当理解的是,前面或下面操作不一定按照顺序来精确地执行。相反,可以按照倒序或同时处理各种步骤。同时,或将其他操作添加到这些过程中,或从这些过程移除某一步或数步操作。
本申请的实施例描述一种智能驾驶系统开发工具链系统及其运行方法。
图1是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。图2是本申请一实施例的智能驾驶系统开发工具链系统的运行方法流程示意图。
参考图1和图2,智能驾驶系统开发工具链系统包括开发平台层、开发工具集模块、工具管理中心模块和显示与操作界面。显示与操作界面也可简称为界面或主界面。
图5是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。参考图1和图5,所述开发平台层包括运行于开发设备端的第一类通信框架和运行于车端的第一域控制器,所述第一类通信框架和第一域控制器具有相应的通信接口模块;所述第一域控制器的通信接口模块用于获取车辆运行数据,所述第一域控制器将获取的车辆运行数据传输至所述第一类通信框架。第一类通信框架和第一域控制器在系统中也可具体称为第一类通信框架模块和第一域控制器模块。
在一些实施例中,所述第一类通信框架模块例如包括ROS通信框架和Cyber RT通信框架。第一域控制器例如包括MDC域控制器。ROS通信框架、Cyber RT通信框架和MDC域控制器可由车机系统开发厂商提供。MDC域控制器是移动数据中心(Mobile Data Center)域控制器的简称。Apollo Cyber RT框架是用于自动驾驶技术设计的通信框架。ROS通信框架是一种分布式框架。ROS通信框架、Cyber RT通信框架例如为在×86端(指CPU类型)开发,开发设备端例如为PC设备端。MDC域控制器如为基于ARM端开发,具体例如为车载ARM端,或称为车端ARM。
第一域控制器将获取的车辆运行数据传输至所述第一类通信框架,所述开发工具集模块中的各个模块通过所述第一类通信框架的通信接口模块获取所述车辆运行数据,所述开发工具集模块包括数据源工具模块,所述工具管理中心模块包括开发接口模块。
在一些实施例中,参考图2,智能驾驶系统开发工具链系统的运行方法包括,步骤101,响应于所接收的界面操作(或称为用户操作),在界面上添加所需的工具对应的控件;步骤102,所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;步骤103,所述工具管理中心对加载的工具进行资源初始化;步骤104,响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。
在一些实施例中,参考图2,智能驾驶系统开发工具链系统的运行方法还包括,步骤201,在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;步骤202,如果为离线模式,则所述数据源工具模块向所述工具管理中心模块请求离线数据;步骤203,所述工具管理中心模块在接收到所述离线数据请求时,判断当前数据处理状态是否为数据回放;步骤204,如果是数据回放状态,则对运行数据中的回放数据进行管理并获取对应的数据缓存;如果不是数据回放状态,则直接获取离线数据缓存,并对离线数据进行处理分发;步骤205,所述数据源工具模块通过数据队列对所述离线数据进行接收与管理。
图2是本申请一实施例的智能驾驶系统开发工具链系统的运行方法的流程示意图,也是本申请一实施例的智能驾驶系统开发工具链系统的信号流转示意图。
在一些实施例中,智能驾驶系统开发工具链系统的运行方法还包括,步骤301,在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;步骤302,如果为在线模式,则所述数据源工具模块通过所述第一类通信框架的通信接口模块接收到所述车辆运行数据后,通过数据队列进行管理,根据是否接到可视化选择操作判断是否回调数据;步骤303,如果接受到可视化选择操作,则所述数据源工具模块依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调数据,所述显示与操作界面通过渲染控件对回调的数据进行可视化处理;步骤304,如果未接受到可视化选择操作,则所述数据源工具模块继续通过数据队列继续遍历数据。
在一些实施例中,参考图1和图2,所述开发工具集模块还包括标注工具模块,所述运行方法还包括,步骤401,所述标注工具模块通过数据源工具模块获取车辆运行数据后进行标注操作;步骤402,完成标注操作后,依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调标注结果;步骤403,所述显示与操作界面通过渲染控件渲染显示所述标注操作的处理结果。
图3是本申请一实施例的智能驾驶系统开发工具链系统的架构示意图。
在一些实施例中,参考图1和图3,所述工具管理中心模块还包括数据管理子模块、工具加载子模块、工具驱动子模块和运行文件管理子模块。
其中,数据管理子模块用于数据缓存、数据回放等数据处理操作的管理;工具加载子模块用于加载所述界面操作选择的一个或多个工具的加载。
工具驱动子模块用于根据信令驱动工具运行;运行文件管理子模块用于配置信息文件、图像数据、点云数据以及运行基础数据的保存与载入,所述运行文件管理子模块涉及文件压缩解压的操作采用外部压缩库实现压缩与解压。信令例如系统或用户预先设置的信令。外部压缩库也可称为第三方压缩库。
在一些实施例中,所述开发工具集模块还包括数据转包工具和点云数据处理工具;所述数据转包工具对从车端获取的数据包进行解析,以获取相应的图像视频流数据和/或点云数据。
在一些实施例中,所述系统还包括交互协议模块,所述显示与操作界面基于所述交互协议模块定义的传输协议与所述工具管理中心模块以及开发接口模块实现数据传输。交互协议模块例如对应于图3中的第三方协议库的标示。在一些实施例中,参考图5,交互协议模块例如包括Protobuf协议。
在一些实施例中,所述显示与操作界面包括界面主体框架模块、2D/3D渲染控件和工具配置控件,所述2D/3D渲染控件用于所述车辆运行数据的渲染显示。所述2D/3D渲染控件例如基于OpenGL库与OpenCV库进行实现。显示与操作界面例如支持2D/3D数据可视化,包括相机采集图像、AVM(around view monitor,全景式影像监控)拼接图与点云数据等。渲染过程支持与获取的车辆运行数据刷新同步。显示与操作界面例如还支持目标标注框(bounding box)的标注、选中与删除,支持分割标注可视化的透明度调节、分割区域的隐藏与显示操纵。
在一些实施例中,参考图1,智能驾驶系统开发工具链系统还包括Web端界面,所述方法还包括,步骤501,所述Web端界面从所述开发接口模块获取车辆运行数据;步骤502,通过所述Web端界面实现所述系统与云端的数据交互及数据交互过程的可视化。
在一些实施例中,参考图3,智能驾驶系统开发工具链系统还包括客户端接口模块(例如图3中的Http Client模块),所述方法还包括:所述客户端接口模块与云端对应的服务端接口模块(例如图3中的Http Server模块)通信,实现系统与云端的数据交互。
图1、图3和图5中,为清晰展现智能驾驶系统开发工具链系统的架构,工具管理中心模块的开发接口模块与工具管理中心模块采用分开图示方式。
图4是本申请一实施例的智能驾驶系统开发工具链系统的自定义工具模块开发步骤示意图。
在一些实施例中,参考图1至图4,所述开发工具集模块还包括自定义工具模块,所述工具管理中心模块还包括自定义工具管理子模块,所述方法还包括:步骤601,在所述界面接收到开发自定义工具模块的操作时,继承所述的工具链系统的开发接口模块提供的自定义工具模块开发的代码模块;步骤602,对所述自定义工具模块作初始化接口生成操作,用于所述工具管理中心模块驱动对应自定义工具初始化;步骤603,基于所述自定义工具模块的数据交互需求的选择操作,进行参数配置接口生成操作,用于所述工具管理中心驱动对应的自定义工具模块进行参数设置与获取;步骤604,对所述自定义工具模块作处理接口生成操作,所述自定义工具模块的处理逻辑在所述处理接口(图4标示为Process接口)中实现,所述工具管理中心驱动对应的自定义工具模块基于所述处理逻辑进行工具内部逻辑处理;步骤605,基于对输出结果需求的选择操作,进行所述自定义工具模块的输出结果接口生成操作,用于所述工具管理中心模块驱动对应的自定义工具模块进行结果输出操作;步骤606,基于对资源管理需求或数据后处理需求的选择操作,进行所述自定义工具模块的后处理接口生成操作,用于所述工具管理中心模块的自定义工具管理子模块驱动对应的自定义工具模块进行数据后处理操作。
工具管理中心模块驱动对应的自定义工具模块进行结果输出操作例如也可通过工具管理中心模块中的自定义工具管理子模块实现。
本申请还提供一种智能驾驶系统开发工具链系统。智能驾驶系统开发工具链系统的组成例如前文所描述。
在一些实施例中,智能驾驶系统开发工具链系统被配置为执行如步骤101至步骤104或步骤201至步骤205对应的操作。前述其他的操作步骤不再赘述。
本申请的智能驾驶系统开发工具链系统及其运行方法,支持多个平台的数据采集与协议解析,便于开发工具的整合、管理与协同,支持用户开发自定义工具与集成操作,支持不同工具的流程化配置和工具间数据传输与共享,提高智能驾驶系统开发效率。
通过不同工具的流程化配置,实现不同工具的执行顺序的控制,便于系统开发测试流程的顺畅进行。
本申请使用了特定词语来描述本申请的实施例。如“一个实施例”、“一实施例”、和/或“一些实施例”意指与本申请至少一个实施例相关的某一特征、结构或特点。因此,应强调并注意的是,本说明书中在不同位置两次或多次提及的“一实施例”或“一个实施例”或“一替代性实施例”并不一定是指同一实施例。此外,本申请的一个或多个实施例中的某些特征、结构或特点可以进行适当的组合。
本申请的一些方面可以完全由硬件执行、可以完全由软件(包括固件、常驻软件、微码等)执行、也可以由硬件和软件组合执行。以上硬件或软件均可被称为“数据块”、“模块”、“引擎”、“单元”、“组件”或“系统”。处理器可以是一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DAPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器或者其组合。此外,本申请的各方面可能表现为位于一个或多个计算机可读介质中的计算机产品,该产品包括计算机可读程序编码。例如,计算机可读介质可包括,但不限于,磁性存储设备(例如,硬盘、软盘、磁带……)、光盘(例如,压缩盘CD、数字多功能盘DVD……)、智能卡以及闪存设备(例如,卡、棒、键驱动器……)。
计算机可读介质可能包含一个内含有计算机程序编码的传播数据信号,例如在基带上或作为载波的一部分。该传播信号可能有多种表现形式,包括电磁形式、光形式等等、或合适的组合形式。计算机可读介质可以是除计算机可读存储介质之外的任何计算机可读介质,该介质可以通过连接至一个指令执行系统、装置或设备以实现通讯、传播或传输供使用的程序。位于计算机可读介质上的程序编码可以通过任何合适的介质进行传播,包括无线电、电缆、光纤电缆、射频信号、或类似介质、或任何上述介质的组合。
同理,应当注意的是,为了简化本申请披露的表述,从而帮助对一个或多个发明实施例的理解,前文对本申请实施例的描述中,有时会将多种特征归并至一个实施例、附图或对其的描述中。但是,这种披露方法并不意味着本申请对象所需要的特征比权利要求中提及的特征多。实际上,实施例的特征要少于上述披露的单个实施例的全部特征。
虽然本申请已参照当前的具体实施例来描述,但是本技术领域中的普通技术人员应当认识到,以上的实施例仅是用来说明本申请,在没有脱离本申请精神的情况下还可作出各种等效的变化或替换,因此,只要在本申请的实质精神范围内对上述实施例的变化、变型都将落在本申请的权利要求书的范围内。
Claims (17)
1.一种智能驾驶系统开发工具链系统的运行方法,所述系统包括开发平台层、开发工具集模块、工具管理中心模块和显示与操作界面,所述开发平台层包括运行于开发设备端的第一类通信框架和运行于车端的第一域控制器,所述第一类通信框架和第一域控制器具有相应的通信接口模块;所述第一域控制器的通信接口模块用于获取车辆运行数据,所述第一域控制器将获取的车辆运行数据传输至所述第一类通信框架,所述开发工具集模块中的各个模块通过所述第一类通信框架的通信接口模块获取所述车辆运行数据,所述开发工具集模块包括数据源工具模块,所述工具管理中心模块包括开发接口模块,所述方法包括:
响应于所接收的界面操作,在界面上添加所需的工具对应的控件;
所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;
所述工具管理中心对加载的工具进行资源初始化;
响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。
2.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,还包括:
在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;
如果为离线模式,则所述数据源工具模块向所述工具管理中心模块请求离线数据;
所述工具管理中心模块在接收到所述离线数据请求时,判断当前数据处理状态是否为数据回放;
如果是数据回放状态,则对运行数据中的回放数据进行管理并获取对应的数据缓存;如果不是数据回放状态,则直接获取离线数据缓存,并对离线数据进行处理分发;
所述数据源工具模块通过数据队列对所述离线数据进行接收与管理。
3.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,还包括:
在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;
如果为在线模式,则所述数据源工具模块通过所述第一类通信框架的通信接口模块接收到所述车辆运行数据后,通过数据队列进行管理,根据是否接到可视化选择操作判断是否回调数据;
如果接受到可视化选择操作,则所述数据源工具模块依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调数据,所述显示与操作界面通过渲染控件对回调的数据进行可视化处理;
如果未接受到可视化选择操作,则所述数据源工具模块继续通过数据队列继续遍历数据。
4.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述开发工具集模块还包括标注工具模块,所述方法还包括:
所述标注工具模块通过数据源工具模块获取车辆运行数据后进行标注操作;
完成标注操作后,依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调标注结果;
所述显示与操作界面通过渲染控件渲染显示所述标注操作的处理结果。
5.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述工具管理中心模块还包括数据管理子模块、工具加载子模块、工具驱动子模块和运行文件管理子模块;
其中,数据管理子模块用于数据缓存、数据回放等数据处理操作的管理;工具加载子模块用于加载所述界面操作选择的一个或多个工具的加载;
工具驱动子模块用于根据信令驱动工具运行;运行文件管理子模块用于配置信息文件、图像数据、点云数据以及运行基础数据的保存与载入,所述运行文件管理子模块涉及文件压缩解压的操作采用外部压缩库实现压缩与解压。
6.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述开发工具集模块还包括数据转包工具和点云数据处理工具;
所述数据转包工具对从车端获取的数据包进行解析,以获取相应的图像视频流数据和/或点云数据。
7.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述系统还包括交互协议模块,所述显示与操作界面基于所述交互协议模块定义的传输协议与所述工具管理中心模块以及开发接口模块实现数据传输。
8.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述显示与操作界面包括界面主体框架模块、2D/3D渲染控件和工具配置控件,
所述2D/3D渲染控件用于所述车辆运行数据的渲染显示。
9.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述系统还包括Web端界面,所述方法还包括:
所述Web端界面从所述开发接口模块获取车辆运行数据;
通过所述Web端界面实现所述系统与云端的数据交互及数据交互过程的可视化。
10.根据权利要求9所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述系统还包括客户端接口模块,所述方法还包括:
所述客户端接口模块与云端对应的服务端接口模块通信,实现所述系统与云端的数据交互。
11.根据权利要求1所述的智能驾驶系统开发工具链系统的运行方法,其特征在于,所述开发工具集模块还包括自定义工具模块,所述工具管理中心模块还包括自定义工具管理子模块,所述方法还包括:
在所述界面接收到开发自定义工具模块的操作时,继承所述的工具链系统的开发接口模块提供的自定义工具模块开发的代码模块;
对所述自定义工具模块作初始化接口生成操作,用于所述工具管理中心模块驱动对应自定义工具初始化;
基于所述自定义工具模块的数据交互需求的选择操作,进行参数配置接口生成操作,用于所述工具管理中心驱动对应的自定义工具模块进行参数设置与获取;
对所述自定义工具模块作处理接口生成操作,所述自定义工具模块的处理逻辑在所述处理接口中实现,所述工具管理中心驱动对应的自定义工具模块基于所述处理逻辑进行工具内部逻辑处理;
基于对输出结果需求的选择操作,进行所述自定义工具模块的输出结果接口生成操作,用于所述工具管理中心模块驱动对应的自定义工具模块进行结果输出操作;
基于对资源管理需求或数据后处理需求的选择操作,进行所述自定义工具模块的后处理接口生成操作,用于所述工具管理中心模块的自定义工具管理子模块驱动对应的自定义工具模块进行数据后处理操作。
12.一种智能驾驶系统开发工具链系统,包括:
开发平台层,包括运行于开发设备端的第一类通信框架和运行于车端的第一域控制器,所述第一类通信框架和第一域控制器具有相应的通信接口模块;所述第一域控制器的通信接口模块用于获取车辆运行数据,所述第一域控制器将获取的车辆运行数据传输至所述第一类通信框架;
开发工具集模块,包括数据源工具模块;
工具管理中心模块,包括开发接口模块;
显示与操作界面;
所述系统被配置为执行如下操作:
响应于所接收的界面操作,在界面上添加所需的工具对应的控件;
所述界面通过调用开发接口模块通知工具管理中心模块加载所述开发工具模块中的相应工具,同时在所述界面加载相应工具的界面资源;
所述工具管理中心对加载的工具进行资源初始化;
响应于在所述界面接收到的数据源选择操作,通过调用开发接口模块通知工具管理中心模块进行绑定对应数据源操作,所述工具管理中心模块驱动数据源工具模块绑定对应的车辆运行数据。
13.根据权利要求12所述的智能驾驶系统开发工具链系统,其特征在于,所述系统还被配置为执行如下操作:
在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;
如果为离线模式,则所述数据源工具模块向所述工具管理中心模块请求离线数据;
所述工具管理中心模块在接收到所述离线数据请求时,判断当前数据处理状态是否为数据回放;
如果是数据回放状态,则对运行数据中的回放数据进行管理并获取对应的数据缓存;如果不是数据回放状态,则直接获取离线数据缓存,并对离线数据进行处理分发;
所述数据源工具模块通过数据队列对所述离线数据进行接收与管理。
14.根据权利要求12所述的智能驾驶系统开发工具链系统,其特征在于,所述系统还被配置为执行如下操作:
在绑定对应的车辆运行数据时,所述数据源工具模块判断数据处于在线模式或离线模式;
如果为在线模式,则所述数据源工具模块通过所述第一类通信框架的通信接口模块接收到所述车辆运行数据后,通过数据队列进行管理,根据是否接到可视化选择操作判断是否回调数据;
如果接受到可视化选择操作,则所述数据源工具模块依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调数据,所述显示与操作界面通过渲染控件对回调的数据进行可视化处理;
如果未接受到可视化选择操作,则所述数据源工具模块继续通过数据队列继续遍历数据。
15.根据权利要求12所述的智能驾驶系统开发工具链系统,其特征在于,所述开发工具集模块还包括标注工具模块,所述系统还被配置为执行如下操作:
所述标注工具模块通过数据源工具模块获取车辆运行数据后进行标注操作;
完成标注操作后,依次通过所述工具管理中心模块以及开发接口模块向所述显示与操作界面回调标注结果;
所述显示与操作界面通过渲染控件渲染显示所述标注操作的处理结果。
16.根据权利要求12所述的智能驾驶系统开发工具链系统,其特征在于,所述工具管理中心模块还包括数据管理子模块、工具加载子模块、工具驱动子模块和运行文件管理子模块;
其中,数据管理子模块用于数据缓存、数据回放等数据处理操作的管理;工具加载子模块用于加载所述界面操作选择的一个或多个工具的加载;
工具驱动子模块用于根据信令驱动工具运行;运行文件管理子模块用于配置信息文件、图像数据、点云数据以及运行基础数据的保存与载入,所述运行文件管理子模块涉及文件压缩解压的操作采用外部压缩库实现压缩与解压。
17.根据权利要求12所述的智能驾驶系统开发工具链系统,其特征在于,所述开发工具集模块还包括数据转包工具和点云数据处理工具;
所述数据转包工具对从车端获取的数据包进行解析,以获取相应的图像视频流数据和/或点云数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210667699.1A CN114995804B (zh) | 2022-06-14 | 2022-06-14 | 一种智能驾驶系统开发工具链系统及其运行方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210667699.1A CN114995804B (zh) | 2022-06-14 | 2022-06-14 | 一种智能驾驶系统开发工具链系统及其运行方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114995804A true CN114995804A (zh) | 2022-09-02 |
CN114995804B CN114995804B (zh) | 2024-05-03 |
Family
ID=83035875
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210667699.1A Active CN114995804B (zh) | 2022-06-14 | 2022-06-14 | 一种智能驾驶系统开发工具链系统及其运行方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114995804B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150248227A1 (en) * | 2014-03-03 | 2015-09-03 | Microsoft Technology Licensing, Llc | Configurable reusable controls |
US20170268948A1 (en) * | 2014-04-30 | 2017-09-21 | Avl List Gmbh | System and method for analysing the energy efficiency of a vehicle |
CN109857801A (zh) * | 2019-01-02 | 2019-06-07 | 哈尔滨鸿德亦泰数码科技有限责任公司 | 基于四层架构的智慧灌区e平台及数据处理方法 |
WO2019143412A1 (en) * | 2018-01-19 | 2019-07-25 | Umajin Inc. | Configurable server kit |
CN113076096A (zh) * | 2021-04-29 | 2021-07-06 | 成都星云智联科技有限公司 | 一种桌面应用程序开发方法、装置、设备及存储介质 |
CN113704650A (zh) * | 2020-05-21 | 2021-11-26 | 阿里巴巴集团控股有限公司 | 信息展示方法、装置、系统、设备及存储介质 |
CN113821247A (zh) * | 2020-06-19 | 2021-12-21 | 比亚迪股份有限公司 | 车载软件开发平台 |
-
2022
- 2022-06-14 CN CN202210667699.1A patent/CN114995804B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150248227A1 (en) * | 2014-03-03 | 2015-09-03 | Microsoft Technology Licensing, Llc | Configurable reusable controls |
US20170268948A1 (en) * | 2014-04-30 | 2017-09-21 | Avl List Gmbh | System and method for analysing the energy efficiency of a vehicle |
WO2019143412A1 (en) * | 2018-01-19 | 2019-07-25 | Umajin Inc. | Configurable server kit |
CN109857801A (zh) * | 2019-01-02 | 2019-06-07 | 哈尔滨鸿德亦泰数码科技有限责任公司 | 基于四层架构的智慧灌区e平台及数据处理方法 |
CN113704650A (zh) * | 2020-05-21 | 2021-11-26 | 阿里巴巴集团控股有限公司 | 信息展示方法、装置、系统、设备及存储介质 |
CN113821247A (zh) * | 2020-06-19 | 2021-12-21 | 比亚迪股份有限公司 | 车载软件开发平台 |
CN113076096A (zh) * | 2021-04-29 | 2021-07-06 | 成都星云智联科技有限公司 | 一种桌面应用程序开发方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114995804B (zh) | 2024-05-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101849224B (zh) | 用于远程处理三维图像数据的方法和系统 | |
US8793301B2 (en) | Method and system for dynamic image processing | |
CN110516678B (zh) | 图像处理方法和装置 | |
CN107547474A (zh) | 一种异构型双系统的图形显示方法和设备 | |
CN109284180A (zh) | 一种任务调度方法、装置、电子设备及存储介质 | |
KR20210058768A (ko) | 객체 라벨링 방법 및 장치 | |
CN112688991B (zh) | 用于执行点云扫描操作的方法、相关装置及存储介质 | |
CN114995804A (zh) | 一种智能驾驶系统开发工具链系统及其运行方法 | |
US20170339201A1 (en) | Streaming data on data processes | |
CN111966934A (zh) | 一种电网信息显示方法、设备、系统及存储介质 | |
CN115378937B (zh) | 任务的分布式并发方法、装置、设备和可读存储介质 | |
CN110119721B (zh) | 用于处理信息的方法和装置 | |
CN114510523A (zh) | 系统间的数据传输方法、装置、终端设备及介质 | |
CN113893525A (zh) | 云游戏运行方法、装置、电子设备及计算机可读介质 | |
CN102256041B (zh) | 图像形成设备和获取识别信息的方法 | |
CN116761080B (zh) | 图像数据的处理方法和终端设备 | |
CN110844785B (zh) | 用于生成塔机吊臂信息的方法、装置、设备和介质 | |
CN113589927B (zh) | 分屏显示方法、头戴式显示设备和计算机可读介质 | |
CN118276885A (zh) | 共享空间应用加载方法、程序包生成方法、设备和介质 | |
CN118573918A (zh) | 一种视频处理方法、装置、设备、介质以及产品 | |
CN116361107A (zh) | 一种车辆仿真场景监听方法、系统、电子设备及存储介质 | |
CN116993909A (zh) | 三维机房渲染交互方法、装置、存储介质及电子设备 | |
CN117710525A (zh) | 标签图像生成方法、信息发送方法、装置、设备和介质 | |
CN117112139A (zh) | 集群缩容方法、装置、设备及计算机可读存储介质 | |
CN117032684A (zh) | 服务集成处理方法、服务集成系统、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 314500 988 Tong Tong Road, Wu Tong Street, Tongxiang, Jiaxing, Zhejiang Applicant after: United New Energy Automobile Co.,Ltd. Address before: 314500 988 Tong Tong Road, Wu Tong Street, Tongxiang, Jiaxing, Zhejiang Applicant before: Hozon New Energy Automobile Co., Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |