CN116888927A - 用于交通工具的集成电路芯片 - Google Patents

用于交通工具的集成电路芯片 Download PDF

Info

Publication number
CN116888927A
CN116888927A CN202180093275.2A CN202180093275A CN116888927A CN 116888927 A CN116888927 A CN 116888927A CN 202180093275 A CN202180093275 A CN 202180093275A CN 116888927 A CN116888927 A CN 116888927A
Authority
CN
China
Prior art keywords
data
bus
chip
coupled
environmental
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180093275.2A
Other languages
English (en)
Inventor
夏晶
段楠
蔡春晓
信恒超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN116888927A publication Critical patent/CN116888927A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40Bus networks
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2637Vehicle, car, auto, wheelchair
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40Bus networks
    • H04L2012/40267Bus for use in transportation systems
    • H04L2012/40273Bus for use in transportation systems the transportation system being a vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)

Abstract

本公开涉及一种芯片、电子组件、交通工具和用于生成控制信号的方法。芯片包括网状总线和环形总线。网状总线耦合至各个传感器以接收和传输感知数据。环形总线耦合至处理器和网状总线。处理器接收诸如来自摄像头和激光雷达之类的不同传感器的不同类型的感知数据,并且进行数据融合以生成用于控制执行装置的控制信号。在本公开中,通过在单个芯片内将数量众多的感知传感器耦合至网状总线并且将数量较少的控制器耦合至环形总线,可以分别利用各个总线的优势,降低成本和资源消耗。此外,通过将不同类型的数据进行融合,可以降低硬件成本需求并且同时提升芯片和使用该芯片的交通工具的安全等级。

Description

用于交通工具的集成电路芯片 技术领域
本公开涉及电子领域,更具体而言涉及用于交通工具的集成电路芯片和电子组件。
背景技术
随着信息技术的发展,诸如智能汽车之类的智能交通工具越来越多。对于智能交通工具而言,诸如自动驾驶、语音交互和驾驶员检测之类的功能成为智能交通工具的核心竞争力。这些功能的实现往往依赖于相应硬件,例如车载芯片、摄像头、光学雷达(light detection and ranging,LiDAR)、声纳(sorna)、雷达(radar)、麦克风等。
另一方面,对于自动驾驶而言,其与人身安全直接相关,因此用于实现自动驾驶的芯片的安全性尤为关注。一些常规自动驾驶方案是通过双芯片的冗余设计来提升安全规格。然而,双芯片的设计方案往往成本较高并且资源消耗较大。
发明内容
鉴于上述问题,本公开的实施例旨在提供一种芯片、电子组件、交通工具和用于生成控制信号的方法,用于以低成本的方式实现交通工具的控制。
根据本公开的第一方面,提供一种芯片。芯片包括第一总线、第二总线和处理器。第一总线被配置为传输第一感知数据。第二总线耦合至第一总线。第二总线的类型与第一总线的类型不同。第二总线被配置为传输第二感知数据和来自第一总线的第一感知数据。第二感知数据的类型与第一感知数据的类型不同。处理器耦合至第二总线,并且处理器被配置为基于第一感知数据和第二感知数据生成用于控制执行装置的控制信号。通过将各个功能电路基于功能类型(例如感测和决策)分别不同总线耦合,可以在第一总线上传输感知类数据,并且在第二总线上传输决策数据,从而可以分别有效利用各个总线的优势,例如环形总线的低延迟和高效数据传输以及网格总线的扩展性强、大带宽和低延迟,并且减少资源消耗和延迟。
在一种实现方式中,第一总线选自包括网状总线、全连接总线和星形总线的组中。第二总线选自包括环形总线、线形总线和树形总线的组中。
在一种实现方式中,芯片还包括第一处理电路。第一处理电路耦合至第一总线,并且接收来自耦合至第一总线的第一传感器的第一感测数据。第一处理电路对第一感测数据进行处理以生成第一感知数据。通过对感测数据进行本地处理,可以避免传输具有大的数据量的原始感测数据,从而节省带宽和成本。
在一种实现方式中,第一处理电路选自包括人工智能矢量电路和人工智能核芯电路的组。第一传感器选自包括摄像头、光学雷达、声纳和雷达的组中。
在一种实现方式中,芯片还包括第三总线。第三总线耦合至第一总线。第三总线的类型与第二总线相同。第三总线被配置为传输来自第一总线的与第一感知数据对应的第一辅助数据和与第二感知数据对应的第二辅助数据。处理器耦合至第三总线并且处理器被进一步配置为基于第一感知数据、第一辅助数据、第二感知数据和第二辅助数据生成控制信号。通过使用与第二总线相同类型的第三总线来传输辅助数据,可以用于验证在第二总线上传输的感知数据的完整性或正确性以提高数据传输的安全性,从而提升芯片的安全性能。
在一种实现方式中,辅助数据包括循环冗余校验数据。在一种实现方式中,芯片还包括第二处理电路。第二处理电路耦合至第一总线或第二总线,并且接收来自耦合至第一总线或第二总线的第二传感器的第二感测数据。第二处理电路对第二感测数据进行处理以生成第二感知数据。通过对感测数据进行本地处理,可以避免传输具有大的数据量的原始感测数据,从而节省带宽和成本。
在一种实现方式中,第二处理电路选自包括人工智能矢量电路和人工智能核芯电路的组。第二传感器选自包括摄像头、光学雷达、声纳和雷达的组中。
在一种实现方式中,处理器被进一步配置为基于第一感知数据和第一辅助数据确定用于表示环境状况的第一环境数据;基于第二感知数据和第二辅助数据确定用于表示环境状况的第二环境数据;以及基于第一环境数据和第二环境数据生成控制信号。通过使用不同类型的环境数据,可以交互验证环境数据彼此的正确性,例如如果第一环境数据表示前方道路有行人,并且不同类型的第二环境数据也表示前方道路有行人,则可以基于一致性的结果生成对应的控制信号。
在一种实现方式中,处理器被进一步配置为将第一环境数据和第二环境数据进行融合以生成融合数据;以及基于融合数据生成控制信号。在一种实现方式中,处理器被进一步配置为将第一感知数据和第二感知数据进行融合以生成融合数据;以及基于融合数据生成控制信号。通过将诸如摄像头数据和LiDAR数据之类的不同类型的感知数据进行融合,可以验证感知数据的正确性,确保感测到的正确的环境对象并且生成对应的决策或控制信号,以使得交通工具的诸如致动器之类的执行装置可以做出相应的正确操作。这样,可以提高交通工具的安全等级。
在一种实现方式中,芯片还包括:第一交叉站点电路,位于第一总线上并且被配置为传输数据;以及第一处理电路,耦合至第一交叉站点电路并且被配置为基于来自第一传感器的第一感测数据生成第一感知数据,第一传感器耦合至第一交叉站点电路。通过在同一交叉站点电路耦合传感器和处理电路,可以避免大量感测数据在第一总线上的长距离传输,从而减少带宽拥堵并且提高处理速度。
在一种实现方式中,芯片还包括第二交叉站点电路,位于第二总线上并且被配置为传输数据;以及第二处理电路,耦合至第二交叉站点电路并且被配置为基于来自第二传感器的第二感测数据生成第二感知数据,第二传感器耦合至第二交叉站点电路。通过在同一交叉站点电路耦合传感器和处理电路,可以避免大量感测数据在第一总线上的长距离传输,从而减少带宽拥堵并且提高处理速度。
在一种实现方式中,第一总线包括网状总线,以及第二总线包括环形总线,以及第三总线包括环形总线。
根据本公开的第二方面,提供一种电子组件。电子组件包括电路板以及根据第一方面的芯片。芯片被安装在电路板上。通过将芯片中的各个功能电路基于功能类型(例如感测和决策)分别不同总线耦合,可以在第一总线上传输感知类数据,并且在第二总线上传输决策数据,从而可以分别有效利用各个总线的优势,例如环形总线的低延迟和高效数据传输以及网格总线的扩展性强、大带宽和低延迟,并且减少资源消耗和延迟。
根据本公开的第三方面,提供一种交通工具。交通工具包括电源;以及根据第二方面的电子组件。电子组件由电源供电。将交通工具中的芯片中的各个功能电路基于功能类型(例如感测和决策)分别不同总线耦合,可以在第一总线上传输感知类数据,并且在第二总线上 传输决策数据,从而可以分别有效利用各个总线的优势,例如环形总线的低延迟和高效数据传输以及网格总线的扩展性强、大带宽和低延迟,并且减少资源消耗和延迟。
在一种实现方式中,交通工具还包括第一传感器和第二传感器。第一传感器经由第一接口耦合至第一总线并且被配置为生成第一传感器数据并且将第一传感器数据传输至第一总线。第二传感器经由第二接口耦合至第二总线,并且配置为生成第二传感器数据并且将第二传感器数据传输至第二总线。
根据本公开的第四方面,提供一种用于生成控制信号的方法。该方法包括通过第一总线传输第一感知数据;通过第二总线传输第二感知数据和来自于第一总线的第一感知数据,第二总线的类型与第一总线的类型不同,第二感知数据的类型与第一感知数据的类型不同;基于从第二总线获取的第一感知数据和第二感知数据生成用于控制执行装置的控制信号。将芯片中的各个功能电路基于功能类型(例如感测和决策)分别不同总线耦合,可以在第一总线上传输感知类数据,并且在第二总线上传输决策数据,从而可以分别有效利用各个总线的优势,例如环形总线的低延迟和高效数据传输以及网格总线的扩展性强、大带宽和低延迟,并且减少资源消耗和延迟。
在一种实现方式中,方法还包括通过第三总线传输来自第一总线的与第一感知数据对应的第一辅助数据和与第二感知数据对应的第二辅助数据,第三总线耦合至第一总线,第三总线的类型与第二总线相同;以及基于第一感知数据、第一辅助数据、第二感知数据和第二辅助数据生成控制信号。通过使用与第二总线相同类型的第三总线来传输辅助数据,可以用于验证在第二总线上传输的感知数据的完整性或正确性以提高数据传输的安全性,从而提升芯片的安全性能。
在一种实现方式中,基于从第二总线获取的第一感知数据和第二感知数据生成用于控制执行装置的控制信号包括基于第一感知数据和第一辅助数据确定用于表示环境状况的第一环境数据;基于第二感知数据和第二辅助数据确定用于表示环境状况的第二环境数据;以及基于第一环境数据和第二环境数据生成控制信号。通过使用不同类型的环境数据,可以交互验证环境数据彼此的正确性,例如如果第一环境数据表示前方道路有行人,并且不同类型的第二环境数据也表示前方道路有行人,则可以基于一致性的结果生成对应的控制信号。
在一种实现方式中,基于第一环境数据和第二环境数据生成控制信号包括将第一环境数据和第二环境数据进行融合以生成融合数据;以及基于融合数据生成控制信号。。通过使用不同类型的环境数据,可以交互验证环境数据彼此的正确性,例如如果第一环境数据表示前方道路有行人,并且不同类型的第二环境数据也表示前方道路有行人,则可以基于一致性的结果生成对应的控制信号。
应当理解,发明内容部分中所描述的内容并非旨在限定本公开的实施例的关键或重要特征,亦非用于限制本公开的范围。本公开的其它特征将通过以下的描述变得容易理解。
附图说明
结合附图并参考以下详细说明,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。在附图中,相同或相似的附图标记表示相同或相似的元素,其中:
图1示出了根据本公开的一些实施例的环境示意图;
图2示出了根据本公开的一些实施例的电子组件的示意框图;
图3示出了根据本公开的一些实施例的芯片的示意图;
图4示出了根据本公开的一些实施例的环形总线交叉站点的示意图;
图5示出了根据本公开的一些实施例的网状总线交叉站点的示意图;
图6示出了根据本公开的一些实施例的经由网状总线的数据传输的示意图;
图7示出了根据本公开的一些实施例的经由环形总线的数据传输的示意图;以及
图8示出了根据本公开的一些实施例的用于生成控制信号的方法的示意流程图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
在本公开的实施例的描述中,术语“包括”及其类似用语应当理解为开放性包含,即“包括但不限于”。术语“基于”应当理解为“至少部分地基于”。术语“一个实施例”或“该实施例”应当理解为“至少一个实施例”。术语“第一”、“第二”等等可以指代不同的或相同的对象。术语“和/或”表示由其关联的两项的至少一项。例如“A和/或B”表示A、B、或者A和B。下文还可能包括其他明确的和隐含的定义。
应理解,本申请实施例提供的技术方案,在以下具体实施例的介绍中,某些重复之处可能不再赘述,但应视为这些具体实施例之间已有相互引用,可以相互结合。
用于交通工具的芯片的安全性能尤其受到重视。ISO 26262标准对功能安全划分为A级、B级、C级、D级这4个安全等级(Automotive Safety Integrity Level,ASIL),其中ASIL-D为最高等级,代表最严苛的安全要求。在一些常规方案中,通过使用双芯片的冗余设计来提升安全性。每个芯片通常集成了众多功能电路,例如处理器、存储器、缓冲器、人工智能矢量(artificial intelligence vector,AIV)电路、人工智能核芯(artificial intelligence core,AIC)电路、接口电路等,其中每种功能电路的数量可能为一个或多个。这些功能电路分别耦合至位于总线上的多个交叉站点(cross statation,CS)电路,并且多个CS电路可以通过总线进行互连。由于总线上的各个电路的频率并不完全相同,因此总线上的CS电路按照频率以打拍的方式对数据进行接收和发送。例如,CS电路可以从总线上接收经由总线传输的数据并且以打拍的方式将该数据传输至与其相连的功能电路,或以打拍的方式将来自功能电路的数据传输至总线上的其它功能电路。在CS电路并不与源电路和目的地电路直接耦合的情形下,该CS电路可以以打拍的方式在总线上对数据进行中继传输。CS电路使得各个功能电路在彼此之间可以经由总线传递指令和数据。对于使用双芯片冗余设计的架构而言,这要求每个芯片都具有基本相同的配置以实现冗余的相同功能。此外,每个芯片内部通常还具有相同类型的主总线和副总线,例如网状总线,以确保在每个芯片内部的各个电路彼此之间的数据的安全性,例如确保数据在芯片内部传输不会丢失或产生错误。因此,在一些常规方案中,实际上具有相同类型的四总线的双芯片架构以确保安全性。
一种常规总线类型为环形(ring)总线,环形总线上的每个CS电路可以耦合2个功能电路。在常规的环形总线上的功能电路相对较少时,环形总线具有较低的延迟和快速高效的数据传输。然而当芯片系统中的功能电路增多并且导致CS电路增加时,各个功能电路之间的传输延迟变大。另一方面,由于环形总线的承载带宽有限,因此当各个功能电路之间有大量数据传输需求时,会导致环形电路的业务拥堵并且带宽受限。
另一种常规总线类型为网状(mesh)总线,网状总线上的每个CS电路可以耦合4个功能电路。网状总线由多条横向环形总线和多条纵向环形总线彼此交叉形成的二维总线网络。网状总线可扩展性强,并且网状总线上的功能电路彼此之间可以有大带宽和低延迟。然而,当所有的功能电路均经由CS电路耦合至网状总线时,网状总线的结构过于复杂,资源消耗大并且延迟也较大。此外,由于在常规设计中往往采用双芯片的冗余设计,因此这会导致成本和资源消耗更大。
在本公开的一些实施例中,通过将各个功能电路基于功能类型(例如感测和决策)分别与单个芯片内的诸如网状总线之类的第一总线和诸如环形总线之类的第二总线耦合,可以在第一总线上传输感知类数据,并且在第二总线上传输决策数据,从而可以分别有效利用各个总线的优势,例如环形总线的低延迟和高效数据传输以及网格总线的扩展性强、大带宽和低延迟,并且减少资源消耗和延迟。此外,通过将诸如摄像头数据和LiDAR数据之类的不同类型的感知数据进行融合,可以验证感知数据的正确性,确保感测到的正确的环境对象并且生成对应的决策或控制信号,以使得交通工具的诸如致动器之类的执行装置可以做出相应的正确操作。这样,可以提高交通工具的安全等级,例如达到ASIL-D级。
图1示出了根据本公开的一些实施例的环境示意图。在该环境示意图中,交通工具100包括电子组件20。在一个实施例中,交通工具100例如是汽车。备选地,交通工具100也可以是其它交通工具,例如摩托车、空中交通工具或是水面交通工具等。交通工具100还包括其它部件,例如各种传感器和执行装置。各种传感器和执行装置可以电耦合至电子组件20。传感器可以例如包括摄像头、LiDAR、sorna、radar、温度传感器、湿度传感器等,以感测环境数据,并且将所感测到的数据传输至电子组件20中的芯片。电子组件20中的芯片基于所接收的各种数据进行分析、计算(compute)和处理并且生成决策信号或控制信号,例如交通工具启动信号、制动信号、转向信号和开启空调信号等。诸如致动器、刹车和车载空调之类的执行装置可以接收来自电子组件20中的芯片的决策信号或控制信号以分别执行各种操作,例如启动、刹车、转向、开启空调等。
图2示出了根据本公开的一些实施例的电子组件20的示意框图。电子组件20包括电路板21以及安装在电路板上的多个电子部件。电路板21包括印刷电路板(printed circuit board,PCB)和柔性电路板(flexbile printed circuit,FPC)中的至少一个。多个电子部件包括通信芯片22、匹配电路24、电源管理芯片26和芯片30,其中通信芯片22用于与外部设备或其是其它电子装置进行通信,匹配电路24用于对各个电子部件进行匹配,电源管理芯片26例如可以耦合到电源以对所接收的电力进行管理并且将电力分配给各个电子部件。芯片30用于接收上述传感器的感测数据以生成感知数据并且基于感知数据生成控制信号。感测数据表示由传感器所检测到的表示环境状况的原生数据,而感知数据则表示对感测数据进行处理之后表征或描述环境状况的经处理的数据。例如,摄像头所拍摄的原生图像或视频数据是感测数据,但是对图像或视频进行处理并且通过AI算法识别并判断出所拍摄的图像或视频中存在行人并且对此进行表征或描述的数据为感知数据。虽然在图2中示出了四个电子部件,但是可以理解电子组件20可以包括更多或更少的电子部件,本公开对此不进行限制。
图3示出了根据本公开的一些实施例的芯片30的示意图。在一个实施例中,芯片30包括第一总线M1、第二总线R1和第三总线R2。芯片30还包括在第一总线M1上的多个第一CS电路,在第二总线R1上的多个第二CS电路以及在第三总线R2上的多个第三CS电路。芯片30还包括耦合在第一总线M1和第二总线R1之间的桥接电路B1,以及耦合在第一总线 M1和第三总线R2之间的桥接电路B2。芯片30还包括第一节点电路371、第二节点电路372和其它未示出的电路。虽然在图3中示出了芯片30的一种具体配置方式,但是可以理解芯片30可以包括更多或更少的电路,本公开对此不进行限制。此外,虽然使用桥接电路将不同总线进行耦合,但是本公开对此不做限制。用于耦合不同总线的其它方式是可能的。例如,诸如存储器之类一些功能电路充当耦合电路。第一总线M1上的感知数据被存储至存储器,并且第二总线R1上的处理器从存储器获取感知数据。
在一个实施例中,第一总线M1例如是网状总线。在图3中,第一总线M1例如由3个横向环形总线和4个纵向环形总线彼此交叉形成,并且每个交叉点处设置有一个CS电路。例如,第一横向环形总线和4个纵向环形总线的交叉点处设置有CS电路311、312、313和314,并且第一纵向环形总线和3个横向环形总线的交叉点处设置有CS电路311、321和331。虽然在图3中以3×4示出了一种具体的网状总线的配置,但是这仅是示意而非对本公开的范围进行限制。横向总线和纵向总线可以具有更多或更少的数目,并且横向总线的数目和纵向总线的数目可以相同或不同。备选地,第一总线M1也可以是其它类型的总线,例如全连接总线。
第一总线M1上的每个CS电路基本上相同,因此在下文仅以单个CS电路进行描述。可以理解,对该单个CS电路的描述可以应用至第一总线M1上的其它CS电路。在第一总线M1为网状总线的情形下,每个CS电路可以耦合至四个节点(node)电路。节点电路表示可以与总线上的CS电路耦合的不同功能电路,例如,AIC电路、AIV电路、接口电路、缓冲器、等等。本公开不对节点电路进行任何限制。一些外部电子装置,例如LiDAR、摄像头、sorna等,可以经由接口电路耦合至CS电路。在网状电路的情形下,由于各个节点之间具有多条通信线路,因此在操作时可以根据需要选择可用的最近通信路径以在网状总线上传输数据,从而节省传输时间并且提供效率。虽然通过使用CS电路将各个功能电路耦合在总线上,但是本公开对此不做限制。使用其它方式将各个功能电路与总线耦合的方式是可能的。
交通工具100通常具有多个环境状况传感器以从多个维度感测交通工具四周的环境状况。例如,交通工具100可以具有12个摄像头、4个LiDAR、12个radar和4个sonar。在一个实施例中,与上述多个传感器对应的各个接口电路可以耦合至网状电路上的各个CS电路。芯片30可以具有分别与位于第一总线M1上的多个CS电路耦合的多个诸如AIV和/或AIC之类的处理电路。与环形总线相比,这可以避免环形总线在多个接入电路时容易出现的拥堵和带宽有限的情形。
实时感测的数据可以被存储在存储器中,然后由诸如AIV和/或AIC之类的处理电路从存储器读取数据进行初步处理,以生成表征环境状况的感知数据。通过由多个处理电路对感测数据进行并行预处理以生成表征环境状况的感知数据,可以避免所有感测数据都堆积到后端处理器处理,从而可以减小对于处理器的性能要求并且降低处理器的处理操作量。在一个实施例中,可以在与传感器对应的接口电路所耦合的CS电路或邻近CS电路设置对应的存储器和处理电路,从而使得来自传感器的感测数据可以以较短的传输路径传递至处理电路。相比于多个传感器接口和多个处理电路耦合到环形总线上的CS电路的情形,这减少传输和处理所消耗的时间,并且减少总线网络拥堵。备选地,感测数据也可以直接提供给处理电路。
在图3的实施例中,第一总线M1传输第一感知数据。例如,与第一总线M1上的第一CS电路311耦合的摄像头将所拍摄的感测数据传输至与第一总线M1上的第一CS电路312耦合的第一处理电路。备选地,第一处理电路也可以耦合至其它CS电路。第一处理电路对 图像或视频数据进行处理之后生成第一感知数据,并且经由第一总线M1传输至CS电路333,并且随后经由桥接电路B1传输至第二总线R1。此外,其它的感知数据,例如与来自声纳传感器的声纳感测数据对应的声纳感知数据,也可以经由第一总线M1、桥接电路B1传输至第二总线R1。
在一个实施例中,第二总线R1的类型与第一总线M1的类型不同,例如第二总线R1是环形总线。本公开不对节点进行任何限制。一些外部电子装置,例如radar等,可以经由接口电路耦合至第二总线R1上的CS电路。备选地,第二总线R1也可以是星形或线性总线。
第二总线R1上具有多个CS站点,每个CS站点可以耦合两个节点电路。节点表示可以与总线上的CS电路耦合的不同功能电路,例如,处理器、接口电路、等等。如图3所示,第二总线R1上的第二CS电路35与第一节点电路371和第二节点电路372耦合。在一个实施例中,第一节点电路371是处理器,第二节点电路372是接口电路。在一个实施例中,第二总线R1上可以有比图3所示出的5个CS电路更多或更少的CS电路。第二总线R1经由桥接电路B1接收来自第一总线M1的第一感知数据,例如基于由摄像头拍摄的图像或视频感测数据得到的表征环境状况的图像或视频感知数据,并且将其传输至与第二总线R1上的CS电路耦合的节点电路,例如存储器。与第二总线R1上的CS电路耦合的另一节点电路,例如处理器,可以从存储器获取感知数据并且进行处理以生成用于控制执行装置的控制指令。备选地,感知数据也可以被直接传输至处理器,而不经由存储器。
此外,其它类型的感知数据也可以经由第二总线R1进行传输。例如,与第一总线M1上的一个CS电路耦合的sorna可以将sorna感测数据传输至与第一总线M1耦合的处理电路,并且处理电路将该感测数据处理之后生成sorna感知数据。sorna感知数据经由桥接电路B1传输至与第二总线R1耦合的处理器。在另一个实施例中,与第二总线R1耦合的radar可以将所感测的感测数据经由接口电路传输至第二总线R1上,并且与第二总线R1耦合的处理电路在处理感测数据之后生成radar感知数据。radar感知数据经由第二总线R1传输至与第二总线R1耦合的处理器。本公开不对在第二总线R1上传输的第二感知数据的来源进行限制,其可以源于与第一总线M1耦合的传感器或是源于与第二总线R1耦合的传感器。
与第二总线R1耦合的处理器在接收到图像或视频感知数据和sorna感知数据之后可以基于不同类型的感知数据来生成用于控制执行装置的控制指令。例如,如果图像或视频感知数据表示前方环境正中央存在行人,并且sorna感知数据也表示前方环境正中央存在行人,则处理器可以相应地生成制动指令,以使得交通工具100的制动装置紧急制动以避免碰撞行人。通过使用不同类型的感知数据进行数据融合,例如互相验证,可以确保感知数据的正确性并且提高交通工具的安全性。此外,由于使用不同类型的感知数据进行数据融合,因此无需将硬件装置进行冗余配置(例如成倍设置摄像头、sorna或radar),从而减少了硬件配套成本。备选地,处理器也可以使用不同类型的其它感知数据来综合确定环境状况并且生成相应控制指令。例如,处理器可以使用图像或视频感知数据和radar感知数据的融合、或sorna感知数据和radar感知数据的融合来生成用于控制执行装置的控制指令。也可以使用更多种感知数据,例如上述三种感知数据,进行数据融合以进一步提高环境感知的准确性,从而提高决策正确性和安全性。
在图3的实施例中,仅用于决策的电路,例如处理器,被设置为经由CS电路耦合至环形总线,由此可以减小资源消耗和传输延迟。备选地,基于总线业务负荷或性能优化需要,也可以有一些传感器,例如radar,经由接口电路耦合至第二总线R1上的CS电路。如果这 类传感器数量不多,则将少量传感器布置在环形总线上并不会引起环形电路的流量拥堵。此外,由于其被布置在邻近处理器的节点,可以进一步降低传输延迟并且给出相应的快速响应。例如,radar传感器通常用于检测交通工具附近(例如几米或1米以内)的环境状况。通过将其设置在更为靠近做出决策的处理器的相同环路上,可以快速做出响应,避免交通工具碰撞的产生。
在一些实施例中,由于第一总线M1和第二总线R1可能以异步时钟工作,并且数据位宽不同(例如,第一总线M1上传输的数据位宽是1024比特,而第二总线R1上传输的数据位宽是256比特),因此桥接电路B1被配置为进行异步处理以及对数据包进行拼接和拆分处理。
在另一些实施例中,芯片30还可以包括第三总线R2,第三总线R2的配置与第二总线R1的配置基本上相同或相似,因此上面针对第二总线R1的各个方面可以适用于第三总线R2。例如,第三总线R2的类型与第二总线R1相同,例如两者均为环形总线。第三总线R2可以是第二总线R1的副本总线。如图3所示,第一节点电路371和第二节点电路372也耦合至第三总线R2上的一个CS电路,并且第三总线R2通过第二桥接电路B2耦合至第一总线M1。通过设置副本总线,可以进一步提高芯片30的安全性,例如满足ASIL-D的要求。
感知数据从第一总线M1上的发送装置(例如,AIV电路或AIC电路)到第二总线R1上的接收装置(例如处理器)的传输过程中可能会被丢失或产生错误。通过不同类型的数据融合,可以在一定程度上克服上述问题,使得处理器仍能做出正确决策。为了进一步提供交通工具的安全性,在一个实施例中,设置辅助总线或副本总线,例如第三总线R2。由第一总线M1上的发送装置所发送的感知数据可以经由不同路径发送,其中感知数据经由桥接电路B1和第二总线R1到达诸如处理器之类的第一节点371,而辅助数据则经由桥接电路B2和第三总线R2到达第一节点371。通过使用两个不同的传输路径,可以在处理器处对所接收的感知数据和辅助数据进行验证,以确保所接收的感知数据是正确的,如下文针对图6和图7进一步具体描述。
图4示出了根据本公开的一些实施例的环形总线上的CS电路35的示意图。可以理解,第二总线R1上的其它CS电路具有与CS电路35相同的配置,因此在此仅以CS电路35为例进行描述。CS电路35可以与两个节点电路耦合,例如第一节点电路371和第二节点电路372,并且CS电路35包括打拍电路351、上环缓冲器(upload ring buffer)SP1、上环缓冲器SP2、下环缓冲器(download ring buffer)ME1和下环缓冲器ME2。上环缓冲器被配置为将待传输的数据包进行缓存,而下环缓冲器被配置为对从总线接收的数据包进行缓存。打拍电路351则被配置为对命令和数据进行路由传输。
图5示出了根据本公开的一些实施例的网状总线CS电路311的示意图。可以理解,第一总线M1上的其它CS电路具有与CS电路311相同的配置,因此在此仅以CS电路311为例进行描述。CS电路311可以耦合至四个节点电路N1、N2、N3和N4,并且CS电路311包括四个打拍电路P1、P2、P3和P4、四个上环缓冲器SP1、SP2、SP3和SP4、四个下环缓冲器ME1、ME2、ME3和ME4、以及四个换环缓冲器(ring-exchange buffer)TR1、TR2、TR3和TR4。打拍电路被配置在环路总线上按照频率以打拍的方式对数据进行上传、下发或中继传输。上环缓冲器在此被配置为对将传输至横向环状总线的数据包进行缓存,下环缓冲器在此对从纵向环状总线接收的数据包进行缓存,换环缓冲器被配置为从横向环状总线向纵向环状总线传输的数据包进行缓冲。打拍电路则被配置为对命令和数据进行路由传输。
图6示出了根据本公开的一些实施例的经由网状总线的数据传输的示意图。数据从节点 电路N5经由第一总线M1向节点电路N6进行传输。在一个实施例中,节点电路N5例如是与摄像头耦合的接口电路,并且节点电路N6例如是存储器。节点电路N5和节点电路N6也可以是其它器件,例如AIV电路、AIC电路等。由于节点电路N5和节点电路N6均经由CS电路耦合至第一总线M1,因此该数据在第一总线M1上传输。在一个实施例中,所传输的数据包括控制数据、载荷数据和用于校验载荷数据的校验数据,例如循环冗余校验(cyclic redundancy check,CRC)数据。校验数据用于校验载荷数据是否完整和正确。通过使用数据校验,数据在第一总线M1上的传输基本上可以达到ASIL-B的安全等级。不同类型的ASIL-B等级的感知数据在第二总线R1进一步融合,可以进一步达到ASIL-D的安全等级。
图7示出了根据本公开的一些实施例的经由环形总线的数据传输的示意图。数据从节点电路N7经由第二总线R1向节点电路N8进行传输。在一个实施例中,节点电路N7例如是存储器,并且节点电路N8例如是处理器。存储器存储了第一感知数据和第二感知数据中的至少一种,并且存储器还存储了第一辅助数据和第二辅助数据中的至少一种。第一感知数据例如从第一总线M1上的处理电路经由第一总线M1、桥接电路B1和第二总线R1传输至第二总线R1上的存储器。第一辅助数据例如从第一总线M1上的处理电路经由第一总线M1、桥接电路B2和第三总线R2传输至第三总线R1上的存储器,其中存储器同时位于第二总线R1和第三总线R2上。第一辅助数据例如是针对第一感知数据的CRC数据。备选地,第一辅助数据可以是与第一感知数据相同的副本感知数据,或是其它校验数据。辅助数据可以用于验证对应的感知数据的完整性或正确性以获得正确的环境数据,或与感知数据组合以形成正确的环境数据。环境数据是描述芯片所在的交通工具内部或周围环境状况的数据,环境状况例如包括车道状况、周围的建筑物、天气状况、车内温度、附近行人的运动状态等。处理器还可以经由第二总线R1从存储器获取其它数据,例如控制数据,本公开对此不进行限制。
类似地,第二感知数据例如从第一总线M1上的处理电路经由第一总线M1、桥接电路B1和第二总线R1传输至第二总线R1上的存储器。第二辅助数据例如从第一总线M1上的处理电路经由第一总线M1、桥接电路B2和第三总线R2传输至第三总线R2上的存储器。备选地,第二感知数据例如可以从第二总线R1上的另一处理电路传输至第二总线R1上的存储器。第二辅助数据例如从第三总线R2上的另一处理电路传输至第三总线R2上的存储器,其中该另一处理器电路同时位于第二总线R1和第三总线R2上。处理器还可以经由第三总线R2从存储器获取其它数据,例如控制数据副本,本公开对此不进行限制。
处理器继而可以基于第一感知数据和第一辅助数据确定表示环境状况的第一环境数据。例如,处理器使用CRC数据验证第一感知数据是否完整和正确。如果第一感知数据完整和正确,则可以将第一感知数据用作表示环境状况的第一环境数据。例如,第一环境数据可以表示交通工具前方一定距离处存在行人、或者前方交通标志的内容。类似地,处理器可以基于第二感知数据和第二辅助数据确定表示环境状况的第二环境数据。第二感知数据和第二辅助数据的传输路径可以分别与第一感知数据和第一辅助数据的传输路径相似,在此不再赘述。
第二感知数据和第一感知数据的类型不同。例如,第一感知数据可以是源自于摄像头拍摄的图像或视频数据,第二感知数据可以是源自LiDAR测量的数据。处理器继而可以对不同类型的感知数据进行数据融合,并且确定环境状况。例如,当第一感知数据和第二感知数据均表示前方道路中央存在行人时,处理器可以基于第一感知数据和第二感知数据生成融合数据并且基于该融合数据生成用于控制执行装置的控制信号,例如控制制动装置进行紧急制动。此外,处理器还可以基于该融合数据使得车载显示屏显示在前方道路中的行人。备选地,处 理器可以基于第一感知数据和第二感知数据直接生成用于控制执行装置的控制信号。
处理器在生成控制信号之后也分别通过第二总线R1和第三总线R2传输控制信号至与执行装置耦合的接口电路,该接口电路也作为节点电路耦合至第二总线R1和第三总线R2。备选地,处理器也可以通过专用连接线路传输控制信号至执行装置。通过将用于决策的数据分别经由第二总线R1和第三总线R2传输至处理器,处理器可以确保所接收到的感知数据的完整性和正确性,从而进一步提高交通工具的智能芯片所做的决策的准确率并且相应地提高交通工具的安全性能。例如,通过不同类型的数据融合以及通过不同的第二总线和第三总线传输感知数据和控制信号,可以使得芯片30整体达到ASIL-D的安全级别。
图8示出了根据本公开的一些实施例的用于生成控制信号的方法800的示意流程图。方法800可以由前面所描述的芯片30实现。因此,上文针对芯片30所描述的各个方面可以应用于方法800,在此不再赘述。在802,通过第一总线传输第一感知数据。第一总线例如为网状总线,并且第一感知数据例如为摄像头数据。与第一总线相耦合的接口电路从摄像头接收原始图像或视频数据,该原始图像或视频数据例如经由第一总线传输至第一总线上的处理电路,例如AIV或AIC。处理电路对原始图像或视频数据进行处理之后获得第一感知数据。第一感知数据经由第一总线和桥接电路传输至第二总线。
在804,通过第二总线传输第二感知数据和来自于第一总线的第一感知数据,第二总线的类型与第一总线的类型不同,第二感知数据的类型与第一感知数据的类型不同。第二总线例如是环形总线,第二感知数据例如是LiDAR数据。LiDAR可以经由接口电路耦合至第一总线或第二总线。在耦合到第一总线的情形,LiDAR数据的处理和传输方式与摄像头数据相似,在此不再赘述。在LiDAR耦合到第二总线的情形下,LiDAR将原始LiDAR数据经由第二总线传输至处理电路,例如AIV或AIC,以生成第二感知数据。第二感知数据通过第二总线传输至第二总线上的处理器。在806,基于从所述第二总线获取的所述第一感知数据和所述第二感知数据生成用于控制执行装置的控制信号。处理器例如可以使用之前描述的方式基于第一感知数据和第二感知数据生成该控制信号。例如,处理器可以将第一感知数据和第二感知数据进行数据融合,以生成控制信号。在一个实施例中,处理器还可以基于第一感知数据和第一辅助数据确定第一环境数据,并且基于第二感知数据和第二辅助数据确定第二环境数据,然后将第一环境数据和第二环境数据融合以确定环境状况,并且基于所确定的环境状况生成相应的控制信号。备选地,处理器也可以基于第一环境数据和第二环境数据直接确定控制信号。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (15)

  1. 一种芯片,包括:
    第一总线,被配置为传输第一感知数据;
    第二总线,耦合至所述第一总线,所述第二总线的类型与所述第一总线的类型不同,所述第二总线被配置为传输第二感知数据和来自所述第一总线的所述第一感知数据,所述第二感知数据的类型与所述第一感知数据的类型不同;以及
    处理器,耦合至所述第二总线,所述处理器被配置为基于所述第一感知数据和所述第二感知数据生成用于控制执行装置的控制信号。
  2. 根据权利要求1所述的芯片,还包括:
    第三总线,耦合至所述第一总线,所述第三总线的类型与所述第二总线相同,所述第三总线被配置为传输来自所述第一总线的与所述第一感知数据对应的第一辅助数据和与所述第二感知数据对应的第二辅助数据;
    其中所述处理器耦合至所述第三总线并且所述处理器被进一步配置为基于所述第一感知数据、所述第一辅助数据、所述第二感知数据和所述第二辅助数据生成所述控制信号。
  3. 根据权利要求2所述的芯片,其中所述处理器被进一步配置为:
    基于所述第一感知数据和所述第一辅助数据确定用于表示环境状况的第一环境数据;
    基于所述第二感知数据和所述第二辅助数据确定用于表示所述环境状况的第二环境数据;以及
    基于所述第一环境数据和所述第二环境数据生成所述控制信号。
  4. 根据权利要求3所述的芯片,其中所述处理器被进一步配置为:
    将所述第一环境数据和所述第二环境数据进行融合以生成融合数据;以及
    基于所述融合数据生成所述控制信号。
  5. 根据权利要求1所述的芯片,其中所述处理器被进一步配置为将所述第一感知数据和所述第二感知数据进行融合以生成融合数据;以及
    基于所述融合数据生成所述控制信号。
  6. 根据权利要求1-5中任一项所述的芯片,还包括:
    第一交叉站点电路,位于所述第一总线上并且被配置为传输数据;以及
    第一处理电路,耦合至所述第一交叉站点电路并且被配置为基于来自第一传感器的第一感测数据生成所述第一感知数据,所述第一传感器耦合至所述第一交叉站点电路。
  7. 根据权利要求1-6中任一项所述的芯片,还包括:
    第二交叉站点电路,位于所述第二总线上并且被配置为传输数据;以及
    第二处理电路,耦合至所述第二交叉站点电路并且被配置为基于来自第二传感器的第二感测数据生成所述第二感知数据,所述第二传感器耦合至所述第二交叉站点电路。
  8. 根据权利要求1-7中任一项所述的芯片,其中所述第一总线包括网状总线,以及
    所述第二总线包括环形总线。
  9. 一种电子组件,包括:
    电路板;以及
    根据权利要求1-8中任一项所述的芯片,所述芯片被安装在所述电路板上。
  10. 一种交通工具,包括:
    电源;以及
    根据权利要求9所述的电子组件,所述电子组件由所述电源供电。
  11. 根据权利要求10所述的交通工具,还包括:
    第一传感器,经由第一接口耦合至第一总线并且被配置为生成第一传感器数据并且将所述第一传感器数据传输至所述第一总线;以及
    第二传感器,经由第二接口耦合至第二总线,并且配置为生成第二传感器数据并且将所述第二传感器数据传输至所述第二总线。
  12. 一种用于生成控制信号的方法,包括:
    通过第一总线传输第一感知数据;
    通过第二总线传输第二感知数据和来自于所述第一总线的所述第一感知数据,所述第二总线的类型与所述第一总线的类型不同,所述第二感知数据的类型与所述第一感知数据的类型不同;
    基于从所述第二总线获取的所述第一感知数据和所述第二感知数据生成用于控制执行装置的控制信号。
  13. 根据权利要求12所述的方法,还包括:
    通过第三总线传输来自所述第一总线的与所述第一感知数据对应的第一辅助数据和与所述第二感知数据对应的第二辅助数据,所述第三总线耦合至所述第一总线,所述第三总线的类型与所述第二总线相同;以及
    基于所述第一感知数据、所述第一辅助数据、所述第二感知数据和所述第二辅助数据生成所述控制信号。
  14. 根据权利要求13所述的方法,其中基于从所述第二总线获取的所述第一感知数据和所述第二感知数据生成用于控制执行装置的控制信号包括:
    基于所述第一感知数据和所述第一辅助数据确定用于表示环境状况的第一环境数据;
    基于所述第二感知数据和所述第二辅助数据确定用于表示所述环境状况的第二环境数据;以及
    基于所述第一环境数据和所述第二环境数据生成所述控制信号。
  15. 根据权利要求14所述的方法,其中基于所述第一环境数据和所述第二环境数据生成所述控制信号包括:
    将所述第一环境数据和所述第二环境数据进行融合以生成融合数据;以及
    基于所述融合数据生成所述控制信号。
CN202180093275.2A 2021-05-17 2021-05-17 用于交通工具的集成电路芯片 Pending CN116888927A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/094166 WO2022241620A1 (zh) 2021-05-17 2021-05-17 用于交通工具的集成电路芯片

Publications (1)

Publication Number Publication Date
CN116888927A true CN116888927A (zh) 2023-10-13

Family

ID=84141006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180093275.2A Pending CN116888927A (zh) 2021-05-17 2021-05-17 用于交通工具的集成电路芯片

Country Status (4)

Country Link
US (1) US20240089143A1 (zh)
EP (1) EP4325789A1 (zh)
CN (1) CN116888927A (zh)
WO (1) WO2022241620A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104753551B (zh) * 2013-12-31 2017-06-20 中国移动通信集团公司 一种车载终端设备、行车用量数据的采集方法以及系统
CN105527959B (zh) * 2015-12-29 2018-09-14 广州汽车集团股份有限公司 整车数据检测系统以及方法
CN209117870U (zh) * 2018-11-14 2019-07-16 深圳市数聚天源人工智能有限公司 智能车辆的感知系统
US11456890B2 (en) * 2019-07-16 2022-09-27 Baidu Usa Llc Open and safe monitoring system for autonomous driving platform

Also Published As

Publication number Publication date
US20240089143A1 (en) 2024-03-14
WO2022241620A1 (zh) 2022-11-24
EP4325789A1 (en) 2024-02-21

Similar Documents

Publication Publication Date Title
US20240045426A1 (en) Systems and methods for safe and reliable autonomous vehicles
US10072936B2 (en) Estimating a street type using sensor-based surroundings data
CN209842367U (zh) 一种基于自动驾驶系统的网络架构的集散式域控制器系统
Druml et al. Prystine-programmable systems for intelligence in automobiles
US10999719B1 (en) Peer-to-peer autonomous vehicle communication
US20210146953A1 (en) Electronic Control Unit
US20230032305A1 (en) Communicating faults to an isolated safety region of a system on a chip
WO2020105408A1 (ja) 車両制御装置及び車両制御方法
US20210009145A1 (en) Automated factory testflow of processing unit with sensor integration for driving platform
Chitnis et al. Enabling functional safety ASIL compliance for autonomous driving software systems
JP2023065279A (ja) 自律システムのための譲るシナリオのエンコード
US20230036117A1 (en) Isolating a region of a system on a chip for safety critical operations
CN116170779B (zh) 一种协同感知数据传输方法、装置及系统
CN116888927A (zh) 用于交通工具的集成电路芯片
US20230020415A1 (en) Vehicle control system, vehicle integrated control device, electronic control device, network communication device, vehicle control method and computer readable medium
US11573856B1 (en) Transmitting data between regions of varying safety integrity levels in a system on a chip
CN115578716A (zh) 一种车载数据的处理方法、装置、设备及介质
JP7351321B2 (ja) センサ異常推定装置
US20220404154A1 (en) Method and device for determining emergency trajectories and for operating automated vehicles
US20220281459A1 (en) Autonomous driving collaborative sensing
JP2023001859A (ja) 駐車に適した車両進路計画立案の並列処理
US11789730B2 (en) Electronic control device and control method
US20230271628A1 (en) Distributed processing of vehicle sensor data
WO2023206346A1 (en) Detecting hardware faults in data processing pipelines
CN113610135B (zh) 一种图像处理方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination