CN115461732A - 发送器、接收器和通信系统 - Google Patents
发送器、接收器和通信系统 Download PDFInfo
- Publication number
- CN115461732A CN115461732A CN202180029144.8A CN202180029144A CN115461732A CN 115461732 A CN115461732 A CN 115461732A CN 202180029144 A CN202180029144 A CN 202180029144A CN 115461732 A CN115461732 A CN 115461732A
- Authority
- CN
- China
- Prior art keywords
- packet
- phy
- extension
- extended
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2475—Traffic characterised by specific attributes, e.g. priority or QoS for supporting traffic characterised by the type of applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Communication Control (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明涉及发送器、接收器和通信系统,其可以用于更多样化的应用并且可以适应于在发送路径期间禁止分组修改的规则。该发送器将与物理层分组报头不同的扩展分组报头添加到封装发送数据的分组数据,并生成被限制为在发送路径期间禁止修改而被保护的保护范围的专用有效载荷,并且至少将规定的物理层分组报头添加到专用有效载荷以生成物理层分组。接收器接收所发送的物理层分组,并从分组获取专用有效载荷。本发明可以应用于例如在移动装置内部使用或车载相机的连接中使用的通信系统。
Description
技术领域
本公开涉及发送装置、接收装置和通信系统,并且具体地涉及与更多种使用兼容并且可适用于发送路径上的分组修改禁止的规则的发送装置、接收装置和通信系统。
背景技术
目前,在进行标准化的相机串行接口(CSI)-2版本4.0中,定义了对物理层使用C-PHY的分组结构和对物理层使用D-PHY的分组结构两种类型。
此外,近年来,CSI-2标准不仅用于移动装置,而且广泛地用于各种用途,诸如,车载和物联网(IoT)。因此,假设现有分组结构不能支持这些应用。因此,移动行业处理器接口(MIPI)联盟正在检查分组结构(诸如现有分组报头或分组页脚)的扩展,以便支持各种用途。
此外,专利文献1提出了当使用CSI-2标准连接处理装置和多个图像传感器时可以减少数据总线的数量的系统。
参考列表
专利文献
专利文献1:日本专利申请公开第2017-211864号。
发明内容
本发明要解决的问题
如上所述,检查扩展CSI-2标准中的分组的分组结构,并且此时,需要通过能够在保持现有CSI-2标准的兼容性的同时发送更多信息来支持各种用途。此时,不必违反禁止发送路径上的分组的修改的规则。
鉴于这种情况做出本公开,并且使本公开与更多种用途兼容并且可适用于发送路径上的分组修改禁止的规则。
问题的解决方案
根据本公开的第一方面的发送装置包括:专用有效载荷生成单元,被配置为将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,以生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷;以及分组生成单元,被配置为至少将预定的物理层的分组报头添加到专用有效载荷,以生成用于物理层的分组。
在本公开的第一方面中,将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,并且生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷,并且至少将用于预定的物理层的分组报头添加到专用有效载荷,并且生成用于物理层的分组。
根据本公开的第二方面的接收装置包括:分组接收单元,被配置为接收通过至少将用于预定的物理层的分组报头添加到专用有效载荷而获得的用于物理层的分组,该专用有效载荷将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据并且通过禁止发送路径上的修改而被限制为要保护的保护范围;以及专用有效载荷获取单元,被配置为从分组获取专用有效载荷。
在本公开的第二方面中,添加通过至少将用于预定的物理层的分组报头添加到专用有效载荷而获得的用于物理层的分组,该专用有效载荷将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据并且通过禁止发送路径上的修改而被限制为要保护的保护范围,并且从分组获取专用有效载荷。
根据本公开的第三方面的通信系统包括:发送装置,其中,将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,并且生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷,并且包括分组生成单元,该分组生成单元被配置为至少将用于预定的物理层的分组报头添加到专用有效载荷,以生成用于物理层的分组;以及接收装置,包括:分组接收单元,被配置为接收从分组生成单元发送的用于物理层的分组;以及专用有效载荷获取单元,被配置为从分组获取专用有效载荷。
在本公开的第三方面中,将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,并且生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷,并且至少将用于预定的物理层的分组报头添加到专用有效载荷并且生成用于物理层的分组。然后,接收所发送的用于物理层的分组,并且从该分组获取专用有效载荷。
附图说明
图1是示出应用本技术的通信系统的第一实施例的配置示例的框图。
图2是示出应用本技术的通信系统的第二实施例的配置示例的框图。
图3是示出用于D-PHY的扩展分组的总体分组结构的第一结构示例的示图。
图4是示出用于D-PHY的扩展短分组的分组结构的第一结构示例的示图。
图5是示出用于D-PHY的扩展长分组的分组结构的第一结构示例的示图。
图6是示出用于C-PHY的扩展分组的总体分组结构的第一结构示例的示图。
图7是示出用于C-PHY的扩展短分组的分组结构的第一结构示例的示图。
图8是示出用于C-PHY的扩展长分组的分组结构的第一结构示例的示图。
图9是示出图像传感器的配置示例的框图。
图10是示出应用处理器的配置示例的框图。
图11是用于描述图像传感器发送分组的处理的流程图。
图12是用于描述扩展模式发送处理的流程图。
图13是用于描述应用处理器接收分组的处理的流程图。
图14是用于描述扩展模式接收处理的流程图。
图15是示出用于D-PHY的扩展分组的总体分组结构的第二结构示例的示图。
图16是示出用于D-PHY的扩展长分组的分组结构的第二结构示例的示图。
图17是示出用于C-PHY的扩展短分组的分组结构的第二结构示例的示图。
图18是示出用于C-PHY的扩展长分组的分组结构的第二结构示例的示图。
图19是示出用于切换D-PHY和C-PHY的配置的修改的框图。
图20是示出应用本技术的通信系统的第三实施例的配置示例的框图。
图21是示出与分组修改禁止的规则相对应的用于D-PHY的扩展分组的结构示例的示图。
图22是示出与分组修改禁止的规则相对应的用于C-PHY的扩展分组的结构示例的示图。
图23是示出与分组修改禁止的规则相对应的用于A-PHY的扩展分组的结构示例的示图。
图24是用于描述适于分组修改禁止的规则的分组发送/接收处理的流程图。
图25是示出适于分组修改禁止的规则的图像传感器的配置示例的框图。
图26是示出适于分组修改禁止的规则的应用处理器的配置示例的框图。
图27是示出应用本技术的计算机的实施例的配置示例的框图。
具体实施方式
在下文中,将参考附图详细描述应用本技术的具体实施例。
<通信系统的配置示例>
图1是示出应用本技术的通信系统的第一实施例的配置示例的框图。
如图1所示,通信系统11通过经由总线23连接图像传感器21和应用处理器22来配置。例如,通信系统11用于诸如所谓的智能电话的现有移动装置内部的CSI-2连接。
图像传感器21通过结合扩展模式兼容的CSI-2发送电路31以及例如透镜、成像元件(均未示出)等来配置。例如,图像传感器21通过扩展模式兼容的CSI-2发送电路31将通过成像元件的成像获取的图像的图像数据发送至应用处理器22。
应用处理器22通过结合扩展模式兼容的CSI-2接收电路32以及大规模集成(LSI)来配置,该大规模集成(LSI)根据由包括通信系统11的移动装置执行的各种应用执行处理。例如,应用处理器22可以通过扩展模式兼容的CSI-2接收电路32接收从图像传感器21发送的图像数据,并且通过LSI根据应用对图像数据执行处理。
总线23是用于根据CSI-2标准发送信号的通信路径,并且例如,能够发送信号的发送距离为大约30cm。此外,如图所示,总线23通过多个信号线(I2C、CLKP/N、D0P/N、D1P/N、D2P/N和D3P/N)连接图像传感器21和应用处理器22。
扩展模式兼容的CSI-2发送电路31和扩展模式兼容的CSI-2接收电路32与通过扩展CSI-2的标准而获得的扩展模式下的通信兼容,并且能够相互发送和接收信号。注意,下面将参考图9和图10描述扩展模式兼容的CSI-2发送电路31和扩展模式兼容的CSI-2接收电路32的详细配置。
图2是示出应用本技术的通信系统的第二实施例的配置示例的框图。
如图2所示,通信系统11A通过经由总线24-1连接图像传感器21和串行器25、经由总线24-2连接应用处理器22和串并转换器26、以及经由总线27连接串行器25和串并转换器26来配置。例如,通信系统11A用于现有的车载相机中的连接。
这里,图像传感器21和应用处理器22与图1中的图像传感器21和应用处理器22类似地配置,并且省略其详细描述。
与图1中的总线23相似,总线24-1和24-2是用于根据CSI-2的标准发送信号的通信路径,并且包括如图中所示的多个信号线(HS-GPIO、I2C、CLKP/N、D0P/N、D1P/N、D2P/N和D3P/N)。
串行器25包括CSI-2接收电路33和串行串并转换器(SerDes)发送电路34。例如,串行器25通过与符合正常CSI-2的标准的扩展模式兼容的CSI-2发送电路31进行通信的CSI-2接收电路33获取从图像传感器21发送的位并行信号。然后,串行器25将所获取的信号转换为位串行信号,并且SerDes发送电路34在一个通道中与SerDes接收电路35执行通信,从而将信号发送到串并转换器26。
串并转换器26包括SerDes接收电路35和CSI-2发送电路36。例如,串并转换器26获取SerDes接收电路35与SerDes发送电路34在一个通道中进行通信时发送的位串行信号。然后,串并转换器26将所获取的信号转换为位并行信号,并且CSI-2发送电路36与扩展模式兼容的CSI-2接收电路32执行符合正常CSI-2的标准的通信,从而将信号发送到应用处理器22。
总线27是用于根据A-PHY或平板显示器(FPD)-LINK III等的标准发送信号的通信路径,并且例如,能够发送信号的发送距离大约为15m。
如上所述配置的通信系统11和11A可以通过扩展模式兼容的CSI-2发送电路31和扩展模式兼容的CSI-2接收电路32使用具有如下所述的扩展分组结构的分组来发送和接收数据。因此,可以支持更多的各种用途,例如,如下所述的RAW 24、SmartROI(受关注区域)、GLD(优雅链路劣化,Graceful Link Degradation)等。
<分组结构的第一结构示例>
将参考图3至图8描述用于扩展模式兼容的CSI-2发送电路31与扩展模式兼容的CSI-2接收电路32之间的通信的分组的分组结构的第一结构示例。
图3示出在物理层是D-PHY的情况下,在CSI-2的扩展模式中使用的分组(在下文中称为用于D-PHY的扩展分组)的总体分组结构。
如图3所示,用于D-PHY的扩展分组具有其中分组报头和分组页脚与现有CSI-2标准的分组结构相同的分组结构。例如,指示虚拟信道的行数的虚拟信道(VC)、指示数据的类型的数据类型(数据类型)、指示有效载荷的数据长度的字计数(WC)、以及VCX/ECC被存储在分组报头中。此外,循环冗余校验(CRC)被存储在分组页脚中。
这里,在现有CSI-2标准中,作为在分组报头中发送的数据类型,0x38至0x3F被定义为保留。因此,在用于D-PHY的扩展分组中,使用已保留的数据类型新定义用于在接收侧上识别扩展模式的设置信息。
例如,作为数据类型,
-在数据类型[5:3]=3'b111的情况下,扩展模式,
-数据类型[2]=保留(RES:针对未来扩展的保留),以及
-数据类型[1:0]=扩展模式类型(准备四个扩展模式)被定义。
即,例如,在现有CSI-2标准中被定义为保留的数据类型的0x38至0x3F之中,数据类型[5:3]被定义为扩展模式设置信息并且数据类型[1:0]被定义为扩展类型设置信息。扩展模式设置信息指示数据类型是否是扩展模式,并且例如,在数据类型[5:3]是3'b111的情况下,该信息指示扩展模式。此外,当扩展模式0、扩展模式1、扩展模式2以及扩展模式3的四种类型被准备为扩展模式的类型时,扩展类型设置信息指示四种类型的扩展模式中的一种。例如,在数据类型[1:0]是2'b00的情况下,该信息指示扩展模式的类型是扩展模式0。
然后,在扩展模式0(数据类型[1:0]=2'b00)下,例如,定义有效载荷被分为四个的分组结构。即,如图3所示,扩展模式0中的有效载荷被分为扩展分组报头(ePH)、可选扩展分组报头(OePH)、传统有效载荷(legacy payload)和可选扩展分组页脚(OePF)。注意,可以重复地发送扩展分组报头。
扩展分组报头设置在与现有CSI-2标准的有效载荷相对应的头部中,并且需要始终以扩展模式发送。例如,如图所示,扩展分组报头包括设置信息,诸如SROI的识别标志、扩展虚拟信道(VC)、扩展数据类型、OePH的选择标志和OePF的选择标志。这里,现有CSI-2标准中的4位的VC被扩展VC扩展为8位,并且现有CSI-2标准中的4位的数据类型被扩展数据类型扩展为8位。
例如,在用于D-PHY的分组中,现有分组报头的VC的四位已经存在,并且通过将扩展分组报头的扩展VC定义为四位,可以将位的总数设置为八。具体地,可以定义OePH[7:0]={5'h00,RSID,XY_POS,MC}和OePF[3:0]={3'h0,pCRC},并且可以控制每个用途所需的分组发送的接通/关断。
根据用途选择性地发送可选扩展分组报头和可选扩展分组页脚。
传统有效载荷对应于与现有CSI-2标准相同的有效载荷。
以这种方式,通过根据需要设置扩展分组报头、可选扩展分组报头和可选扩展分组页脚,可以发送与各种用途相对应的数据。此外,在扩展分组报头、可选扩展分组报头和可选扩展分组页脚中发送的数据是26位+6位的纠错码(ECC)。因此,可以通过转移现有分组报头的电路来抑制电路规模的增大,并且提高错误耐性。
作为这种用于D-PHY的扩展分组的具体应用示例,图4示出了在物理层是D-PHY的情况下,在CSI-2的扩展模式中使用的短分组(在下文中称为用于D-PHY的扩展短分组)的分组结构。类似地,图5示出了在物理层是D-PHY的情况下,在CSI-2的扩展模式中使用的长分组(在下文中称为用于D-PHY的扩展长分组)的分组结构。
在如图4所示的用于D-PHY的扩展短分组中,存储在分组报头中的数据类型的扩展类型设置信息指示扩展模式的类型是扩展模式0(DT[5:0]=0x1C(5'b111_0_0))。此外,存储在扩展分组报头中的数据类型的短分组设置信息指示该分组是短分组(DT[7:0]=0x00(帧开始码(短分组))))。
如上所述,在扩展模式中并且在存储在扩展分组报头中的数据类型是DT[7:0]=0x00至0x0F的情况下,扩展短分组被设置,并且包括扩展短分组的短分组数据字段的数据总是被发送到可选扩展分组报头。短分组数据字段与现有CSI-2标准中定义的相同。
注意,在发送扩展短分组时,可以发送用于GLD的消息计数(MC)和可选扩展分组报头的车载行号和源ID(RSID),但是传统有效载荷和pCRC是不必要的,并且因此禁止发送。如果传统有效载荷和pCRC被错误地发送,则它们在接收侧被忽略。
然后,与符合现有CSI-2标准的扩展短分组相比,具有如图4所示的分组结构的扩展短分组可以扩展数据类型和虚拟信道的位宽度,并且可以支持在可选扩展分组报头中定义的各种用途。此外,在不需要这些功能的情况下,符合现有CSI-2标准的扩展短分组可以与扩展长分组一起发送。
在如图5所示的用于D-PHY的扩展长分组中,存储在分组报头中的数据类型的扩展类型设置信息指示扩展模式的类型是扩展模式0(DT[5:0]=0x1C(5'b111_0_0))。此外,存储在扩展分组报头中的数据类型的短分组设置信息指示该分组不是短分组(DT[7:0]不是0x00至0x0F(=扩展长分组))。因此,在扩展长分组中,不发送包括短分组数据字段的数据。
此外,根据扩展分组报头的设置,可选扩展分组报头、传统有效载荷和可选扩展分组页脚被存储在现有CSI-2标准中的效载荷中并被发送。以这种方式,由于数据被存储在现有有效载荷中并被发送,所以由现有SerDes发送电路34和SerDes接收电路35(图2)以与在现有有效载荷中发送的图像数据相似的方式识别该数据,并且将该数据照原样发送至后续级。
然后,在最后级的应用处理器22可以根据分组报头的数据类型DT[5:0]确定数据类型是扩展模式。因此,应用处理器22可以从扩展分组报头顺序地解释有效载荷的内容,并且提取期望的扩展模式的数据。
图6示出了在物理层是C-PHY的情况下,在CSI-2的扩展模式中使用的分组(在下文中称为用于C-PHY的扩展分组)的总体分组结构。注意,在图6所示的用于C-PHY的扩展分组中,省略与在图3中用于D-PHY的扩展分组共同的配置的描述,并且将描述不同的配置。
例如,在用于C-PHY的扩展分组中,与图3中用于D-PHY的扩展分组相似,扩展模式由数据类型识别,并且与由应用处理器22执行的每个应用相对应的所有数据被嵌入在有效载荷中并且被发送。
如图6所示,与符合现有CSI-2标准的用于C-PHY的分组类似,用于C-PHY的扩展分组两次发送分组报头,并且为了便于通过C-PHY将16位转换成7个符号,以十六位为单位布置数据。此外,扩展分组报头被布置在有效载荷的头部中。关于虚拟信道,在C-PHY的情况下,为此目的保留现有分组报头的头部。因此,虚拟信道不存储在扩展分组报头中。当然,与用于D-PHY的扩展分组类似,虚拟信道可存储在扩展分组报头中。
此外,由于可选扩展分组报头和可选扩展分组页脚具有长的位深度,所以准备标志OePHF,并且在标志为1的情况下,将OePH/OePF信息发送到下一个位置。然后,在ePH信息和OePH信息之后,CRC作为扩展分组报头被发送,并且类似配置的分组报头被重复发送两次。以这种方式,通过使结构与现有分组报头发送两次的机制相同,可以实现电路复用性和错误耐性两者。
作为这种用于C-PHY的扩展分组的具体应用示例,图7示出了在物理层是C-PHY的情况下,在CSI-2的扩展模式中使用的短分组(在下文中称为用于C-PHY的扩展短分组)的分组结构。类似地,图8示出了在物理层是C-PHY的情况下,在CSI-2的扩展模式中使用的长分组(在下文中称为用于C-PHY的扩展长分组)的分组结构。
注意,图7所示的用于C-PHY的扩展短分组与图4所示的用于D-PHY的扩展短分组在分组结构上没有较大差异,并且图8所示的用于C-PHY的扩展长分组与图5所示的用于D-PHY的扩展长分组在分组结构上没有较大差异。
<图像传感器和应用处理器的配置示例>
图9是示出包括扩展模式兼容的CSI-2发送电路31的图像传感器21的配置示例的框图。
如图9所示,除了扩展模式兼容的CSI-2发送电路31之外,图像传感器21还包括像素41、AD转换器42、图像处理单元43、像素CRC计算单元44、物理层处理单元45、I2C/I3C从机46和寄存器47。此外,扩展模式兼容的CSI-2发送电路31包括封装单元51、分组报头生成单元52、扩展分组报头生成单元53、扩展分组页脚生成单元54、选择单元55和56、CRC计算单元57、通道分配单元58、CCI从机59和控制器60。
像素41输出与所接收的光量相对应的模拟像素信号,并且模数转换器(ADC)42对从像素41输出的像素信号进行数字转换并且将像素信号提供至图像处理单元43。图像处理单元(图像信号处理器:ISP)43将通过基于对像素信号图像应用各种类型的图像处理而获得的图像数据提供到像素CRC计算单元44和封装单元51。此外,图像处理单元43将指示图像数据是否有效的数据使能信号data_en提供到封装单元51和控制器60。
像素CRC计算单元44针对从图像处理单元43提供的图像数据中的每个像素计算并获得CRC,并将该CRC提供给扩展分组页脚生成单元54。
物理层处理单元45可执行C-PHY和D-PHY两者的物理层处理。例如,物理层处理单元45在从控制器60提供的C层使能信号cphy_en有效的情况下执行C-PHY的物理层处理,并且在C层使能信号cphy_en无效的情况下执行D-PHY的物理层处理。然后,物理层处理单元45将由通道分配单元58划分为四个通道的分组发送到应用处理器22。
I2C/I3C从机46基于集成电路间(I2C)或改进的集成电路间(I3C)标准,在应用处理器22的I2C/I3C主机72(图10)的主动下进行通信。
从应用处理器22发送的各种设置经由I2C/I3C从机46和CCI从机59被写入寄存器47。这里,写入寄存器47的设置的示例包括符合CSI-2标准的通信设置、指示是否存在使用扩展的扩展模式设置、以及在扩展模式下通信所需的固定通信设置。
封装单元51执行将从图像处理单元43提供的图像数据存储在分组的有效载荷中的封装处理,并且将有效载荷提供给选择单元55和通道分配单元58。
当根据从控制器60提供的分组报头生成指令信号ph_go指示生成分组报头时,分组报头生成单元52生成分组报头并且将分组报头提供给选择单元55和通道分配单元58。
即,分组报头生成单元52根据现有CSI-2标准生成存储针对分组中发送的数据所设置的条件的设置信息(例如,指示数据的类型的数据类型)的分组报头。此外,分组报头生成单元52在作为指示在分组中发送的数据的类型的设置信息的数据类型中,将指示模式是否是用于使用扩展报头的扩展模式的扩展模式设置信息存储在现有CSI-2标准中被定义为未使用的未使用区域中。此外,分组报头生成单元52将指示作为扩展模式准备的多种类型的扩展模式中的一种的扩展类型设置信息存储在未使用区域中。
扩展分组报头生成单元53根据从控制器60提供的扩展分组报头生成指令信号eph_go和扩展分组报头使能信号ePH_en来生成扩展分组报头和可选扩展分组报头中的每一个,并且将扩展分组报头和可选扩展分组报头提供给选择单元56和通道分配单元58。此外,根据图像传感器21的使用,将车载行号、源ID(标识)等提供至扩展分组报头生成单元53,并且根据需要将其存储在扩展分组报头或可选扩展分组报头中。
换句话说,扩展分组报头生成单元53生成与由分组报头生成单元52生成的分组报头分离的存储如图3所示的设置信息的扩展分组报头。此外,在发送可选扩展分组报头的情况下,扩展分组报头生成单元53将指示发送可选扩展分组报头的可选扩展分组报头设置信息存储在扩展分组报头中作为指示是否发送可选扩展分组报头的可选扩展分组报头设置信息(OePH[7:0]),并且在扩展分组报头之后生成可选扩展分组报头。
扩展分组页脚生成单元54根据从控制器60提供的扩展分组页脚生成指令信号epf_go和扩展分组报头使能信号ePF_en生成可选扩展分组页脚,并且将可选扩展分组页脚提供给选择单元56和车道分配单元58。
即,在以扩展模式发送的分组是存储在现有CSI-2标准中作为有效载荷发送的数据的扩展长分组的情况下,扩展分组页脚生成单元54生成布置在存储数据的传统有效载荷之后的可选扩展分组页脚。
此外,从控制器60将C层使能信号cphy_en提供至分组报头生成单元52、扩展分组报头生成单元53以及扩展分组页脚生成单元54。然后,在C层使能信号cphy_en指示有效的情况下,分组报头生成单元52生成用于C-PHY的分组报头,扩展分组报头生成单元53生成用于C-PHY的扩展分组报头和可选扩展分组报头,并且扩展分组页脚生成单元54生成用于C-PHY的可选扩展分组页脚。另一方面,在C层使能信号cphy_en指示无效的情况下,分组报头生成单元52生成用于D-PHY的分组报头,扩展分组报头生成单元53生成用于D-PHY的扩展分组报头和可选扩展分组报头,并且扩展分组页脚生成单元54生成用于D-PHY的可选扩展分组页脚。
在C层使能信号cphy_en有效的情况下,则根据从控制器60提供的C层使能信号cphy_en,选择单元55选择从分组报头生成单元52提供的分组报头并且将分组报头提供给选择单元56。另一方面,在C层使能信号cphy_en无效的情况下,选择单元55选择从封装单元51提供的有效载荷并且将有效载荷提供给选择单元56。
选择单元56根据从控制器60提供的数据选择信号data_sel选择经由选择单元55选择性地提供的分组报头或有效载荷、从扩展分组报头生成单元53提供的扩展分组报头和可选扩展分组报头以及从扩展分组页脚生成单元54提供的可选扩展分组页脚中的任一个,并且将所选择的一个提供给CRC计算单元57。
CRC计算单元57计算并获得经由选择单元56选择性地提供的分组报头、有效载荷、扩展分组报头、可选扩展分组报头或可选扩展分组页脚的CRC,并且将CRC提供至通道分配单元58。
通道分配单元58在控制器60的控制下将从封装单元51提供的有效载荷、从分组报头生成单元52提供的分组报头、从扩展分组报头生成单元53提供的扩展分组报头和可选扩展分组报头、从扩展分组页脚生成单元54提供的可选扩展分组页脚以及从CRC计算单元57提供的CRC分配给符合CSI-2标准的四个通道,并且将它们提供至物理层处理单元45。
相机控制接口(CCI)从机59基于CSI-2标准在应用处理器22的CCI主机88(图10)的主动下进行通信。
控制器60读取存储在寄存器47中的各种设置,并且根据设置控制构成扩展模式兼容的CSI-2发送电路31的每个块。例如,控制器60根据要发送的数据内容来控制具有符合现有CSI-2标准的分组结构的分组的发送与具有扩展模式下的分组结构的分组的发送之间的切换。
图像传感器21以这种方式配置,并且可生成具有参考图3至图8所描述的分组结构的扩展分组,并且将扩展分组发送至应用处理器22。
图10是示出包括扩展模式兼容的CSI-2接收电路32的应用处理器22的配置示例的框图。
如图10所示,除了扩展模式兼容的CSI-2接收电路32之外,应用处理器22还包括物理层处理单元71、I2C/I3C主机72、寄存器73和控制器74。此外,扩展模式兼容的CSI-2接收电路32包括分组报头检测单元81、通道合并单元82、解释单元83、选择单元84和85、CRC计算单元86、解封装单元87以及CCI主机88。
物理层处理单元71可以执行C-PHY和D-PHY两者的物理层处理。如上所述,图像传感器21的物理层处理单元45执行C-PHY或D-PHY的物理层处理,并且物理层处理单元71执行与在物理层处理单元45中执行的相同的物理层处理。
I2C/I3C主机72基于I2C或I3C标准引导与图像传感器21的I2C/I3C从机46(图9)的通信。
由控制器74将要写入图像传感器21的寄存器47中的各种设置记录在寄存器73中。
控制器74控制构成应用处理器22的每个块。
分组报头检测单元81根据从物理层处理单元71提供的分组检测分组报头并且检查存储在分组报头中的数据类型。然后,在扩展模式设置信息指示分组报头的数据类型中的扩展模式(数据类型[5:3]=3'b111)的情况下,分组报头检测单元81将指示扩展模式的扩展模式检测标志提供给解释单元83、选择单元84和选择单元85。此外,分组报头检测单元81基于分组报头将指示是否启用所划分的四个通道的合并的合并使能信号mrg_en提供至通道合并单元82。
即,分组报头检测单元81根据现有的CSI-2标准检测存储指示针对分组中要发送的数据设置的条件的设置信息(数据类型等)的分组报头。此时,分组报头检测单元81在作为指示在分组中发送的数据的类型的设置信息的数据类型中,根据存储在现有CSI-2标准中被定义为未使用的未使用区域中指示模式是否是用于使用扩展报头的扩展模式的扩展模式设置信息输出扩展模式检测标志,从而切换具有符合现有CSI-2标准的分组结构的分组的接收和具有扩展模式下的分组结构的分组的接收。此外,分组报头检测单元81根据存储在现有CSI-2标准中被定义为未使用的数据类型的未使用区域中的扩展模式类型信息来识别准备作为扩展模式的多种类型的扩展模式中的一种。
在从分组报头检测单元81提供的合并使能信号mrg_en有效的情况下,通道合并单元82将划分为四个通道并从物理层处理单元71提供的分组合并。然后,通道合并单元82将一个通道的分组提供给解释单元83、选择单元84、以及选择单元85。
在从分组报头检测单元81提供的扩展模式检测标志指示扩展模式的情况下,解释单元83基于扩展模式的分组结构从通道合并单元82提供的分组中读取扩展分组报头、可选扩展分组报头和可选扩展分组页脚。然后,解释单元83解释存储在扩展分组报头、可选扩展分组报头和可选扩展分组页脚中的设置信息。
即,解释单元83根据现有CSI-2标准接收设置在有效载荷的头部中的扩展分组报头作为扩展报头,并且解释存储在扩展分组报头中的设置信息。此外,在存储在扩展分组报头中的可选扩展分组报头设置信息指示根据用途选择性地发送的可选扩展分组报头的发送的情况下,解释单元83接收扩展分组报头之后的可选扩展分组报头,并解释存储在可选扩展分组报头中的设置信息。此外,在以扩展模式发送的分组是存储在现有CSI-2标准中作为有效载荷发送的数据的扩展长分组的情况下,解释单元83生成布置在存储数据的传统有效载荷之后的可选扩展分组页脚,并且解释可选扩展分组页脚。
然后,例如,解释单元83读取存储在可选扩展分组报头中的车载行号、源ID等,并且将所读取的信息输出至后级的LSI(未示出)。
注意,在从分组报头检测单元81提供的扩展模式检测标志不指示扩展模式的情况下,即,在提供具有现有分组结构的分组的情况下,解释单元83停止而不执行上述处理。
选择单元84根据从分组报头检测单元81提供的扩展模式检测标志,基于现有分组的分组结构或扩展分组的分组结构,选择性地将数据提供给解封装单元87。
选择单元85根据从分组报头检测单元81提供的扩展模式检测标志,基于现有分组的分组结构或扩展分组的分组结构,选择性地将数据提供给CRC计算单元86。
CRC计算单元86计算经由选择单元85选择性地提供的分组报头、有效载荷、扩展分组报头、可选扩展分组报头或可选扩展分组页脚的CRC。然后,在检测到CRC错误的情况下,CRC计算单元86将指示CRC错误的检测的CRC错误检测信号输出至后级LSI(未示出)。
解封装单元87执行提取存储在经由选择单元84选择性地提供的有效载荷中的图像数据的解封装处理,并且将所获取的图像数据输出至后级LSI(未示出)。
CCI主机88基于CSI-2标准引导与图像传感器21的CCI从机59(图9)的通信。
应用处理器22以这种方式配置,并且可以接收从图像传感器21发送的扩展分组,解释存储在扩展分组报头、可选扩展分组报头和可选扩展分组页脚中的设置信息,并且获取图像数据。
<通信处理>
将参考图11至图14描述由图像传感器21和应用处理器22执行的通信处理。
图11是用于描述图像传感器21发送分组的处理的流程图。
例如,当图像传感器21经由总线23连接至应用处理器22时,开始处理。在步骤S11中,控制器60确定是否使用扩展模式开始与应用处理器22通信。例如,控制器60检查存储在寄存器47中的扩展模式设置,并且在指示扩展模式的使用的扩展模式设置由应用处理器22写入的情况下确定使用扩展模式。
在步骤S11控制器60确定不使用扩展模式的情况下,处理进行到步骤S12。
在步骤S12中,I2C/I3C从机46接收从应用处理器22发送的图像数据的发送开始指令(在以下描述的图13中的步骤S54中)。此外,I2C/I3C从机46根据CSI-2标准接收与发送开始指令一起发送的通信设置,并且经由CCI从机59将通信设置写入寄存器47。
在步骤S13中,图像传感器21基于存储在寄存器47中的通信设置执行将具有符合现有CSI-2标准的分组结构的分组发送至应用处理器22的常规分组发送处理。
另一方面,在步骤S11中控制器60确定使用扩展模式的情况下,处理进行到步骤S14。
在步骤S14中,I2C/I3C从机46接收扩展模式下通信所需的固定通信设置(例如,GLD时每个通道的PH/PF的复制等),并且经由CCI从机59将固定通信设置写入寄存器47。
在步骤S15中,I2C/I3C从机46接收从应用处理器22发送的图像数据的发送开始指令(在下面要描述的图13中的步骤S57中)。此外,I2C/I3C从机46根据CSI-2标准接收与发送开始指令一起发送的通信设置,并且经由CCI从机59将通信设置写入寄存器47。
在步骤S16中,控制器60确定是否开始分组发送,并且等待直到确定开始分组发送为止。
然后,在步骤S16中,在确定开始分组发送的情况下,处理进行到步骤S17,并且控制器60确定是否在扩展模式下发送数据。这里,例如,在如下所述的应用示例的使用情况下要发送数据的情况下,控制器60根据要发送的数据的内容来确定数据要在扩展模式下发送。
在步骤S17中,在控制器60确定要在扩展模式下发送数据的情况下,处理进行至步骤S18,并且执行发送与扩展模式相对应的扩展分组的扩展模式发送处理(参见图12)。
另一方面,在步骤S17中,控制器60确定在扩展模式下不发送数据的情况下,处理进行至步骤S19。
在步骤S19中,控制器60确定是否发送短分组。例如,控制器60确定在帧的开始时和帧的结束时发送短分组。
在步骤S19中,在控制器60确定发送短分组的情况下,处理进行至步骤S20。在步骤S20中,分组报头生成单元52生成分组报头并且将具有常规分组结构的短分组发送到应用处理器22。
另一方面,在步骤S19中,在控制器60确定不发送短分组(即,发送长分组)的情况下,处理进行至步骤S21。在步骤S21中,封装单元51将图像数据存储在有效载荷中,并且CRC计算单元57获得CRC,并且生成具有常规分组结构的长分组并且将该长分组发送到应用处理器22。
在步骤S18、步骤S20或步骤S21的处理之后,处理进行至步骤S22,并且控制器60终止分组发送处理。此后,处理返回至步骤S16,并且类似地重复执行发送用于下一分组的分组的处理。
图12是示出在图11中的步骤S18的处理中执行的扩展模式发送处理的流程图。
在步骤S31中,分组报头生成单元52生成存储VC、数据类型、WC等的分组报头,并且将分组报头发送至应用处理器22。此时,分组报头生成单元52将指示该模式是扩展模式的扩展模式设置信息(数据类型[5:3]=3'b111)和识别扩展模式的模式设置是扩展模式0的扩展类型设置信息(数据类型[1:0]=2'b00)写入分组报头的数据类型。
在步骤S32中,应用处理器22确定是否发送扩展短分组。例如,控制器60确定在帧的开始时和帧的结束时发送扩展短分组。
在步骤S32中,在应用处理器22确定发送扩展短分组的情况下,处理进行至步骤S33。
在步骤S33中,扩展分组报头生成单元53发送在有效载荷的第一个字节中将数据类型(数据类型[7:0])设置为短分组的扩展分组报头。此时,扩展分组报头生成单元53执行存储在扩展分组报头中的各种设置(例如,OePH[7:0]、OePF[3:0]等)。
在步骤S34中,扩展分组报头生成单元53将帧号(FrameNumber:FN)存储在有效载荷的第二个字节中并且发送有效载荷。
在步骤S35中,扩展分组报头生成单元53根据在步骤S33中执行的设置(OePH[7:0])生成并发送如图4所示的可选扩展分组报头。
在步骤S36中,CRC计算单元57获得CRC并且将CRC作为分组页脚发送。
另一方面,在步骤S32中,在应用处理器22确定不发送扩展短分组(即,发送长分组)的情况下,处理进行至步骤S37。
在步骤S37中,扩展分组报头生成单元53发送在有效载荷的第一字节中将数据类型(数据类型[7:0])设置为除了短分组之外的分组的扩展分组报头。此时,扩展分组报头生成单元53执行存储在扩展分组报头中的各种设置(例如,OePH[7:0]、OePF[3:0]等)。
在步骤S38中,扩展分组报头生成单元53根据在步骤S37中执行的设置(OePH[7:0])生成并发送如图5所示的可选扩展分组报头。
在步骤S39中,封装单元51封装从图像处理单元43提供的图像数据,并且生成和发送传统有效载荷。
在步骤S40中,扩展分组页脚生成单元54根据在步骤S37中执行的设置(OePF[3:0]),生成并发送如图4所示的可选扩展分组页脚。
在步骤S41中,CRC计算单元57获得CRC并且发送CRC作为分组页脚。
然后,在步骤S36或S41的处理之后,终止扩展模式发送处理。
如上所述,图像传感器21可生成并发送扩展短分组或扩展长分组。
图13是用于描述应用处理器22接收分组的处理的流程图。
例如,当图像传感器21经由总线23连接至应用处理器22时,开始处理。在步骤S51中,控制器74将图像传感器21的初始设置(例如,C-PHY和D-PHY中的哪一个被用作物理层等)写入寄存器73,并且经由CCI主机88通过I2C/I3C主机72将初始设置发送至图像传感器21。由此,将初始设置写入图像传感器21的寄存器47中。
在步骤S52中,控制器74识别图像传感器21是否与扩展模式兼容。例如,控制器74可以通过获取由I2C/I3C主机72存储在图像传感器21的寄存器47中的设置值(例如,扩展PH/PF兼容能力),来识别图像传感器21是否支持扩展模式。可替代地,控制器74可基于例如手动的输入等预先识别图像传感器21是否与扩展模式兼容。
在步骤S53中,控制器74确定图像传感器21是否与扩展模式兼容并且由应用处理器22执行的应用是否需要使用扩展模式。
在步骤S53中,在控制器74确定图像传感器21与扩展模式不兼容或者不需要使用扩展模式的情况下,处理进行至步骤S54。
在步骤S54中,控制器74使I2C/I3C主机72将图像数据的发送开始指令发送至图像传感器21。此时,控制器74使得根据CSI-2标准发送通信设置。
在步骤S55中,应用处理器22基于在步骤S54中发送的通信设置执行接收具有符合现有CSI-2标准的分组结构的分组的常规分组接收处理。
另一方面,在步骤S53中,在控制器74确定图像传感器21与扩展模式兼容并且由应用处理器22执行的应用需要使用扩展模式的情况下,处理进行至步骤S56。
在步骤S56中,在开始扩展模式下的通信之前,I2C/I3C主机72发送扩展模式下的通信所需的固定通信设置。因此,在图像传感器21的寄存器47中写入固定通信设置(图11中的步骤S14)。
在步骤S57中,控制器74使I2C/I3C主机72将图像数据的发送开始指令发送到图像传感器21。此时,控制器74使得根据CSI-2标准发送通信设置。
在步骤S58中,分组报头检测单元81通过确认从物理层处理单元71提供的数据确定是否已经开始接收分组,并且等待直到确定已经开始接收分组。例如,在从物理层处理单元71提供的数据中检测分组报头的情况下,分组报头检测单元81确定已经开始接收分组。
在步骤S58中,在分组报头检测单元81确定已经开始接收分组的情况下,处理进行至步骤S59。
在步骤S59中,分组报头检测单元81检查在步骤S58中检测到的分组报头的数据类型,并且确定已经开始接收的分组是否是与扩展模式兼容的扩展分组。然后,例如,在扩展模式设置信息指示分组报头的数据类型中的扩展模式(数据类型[5:3]=3'b111)的情况下,分组报头检测单元81确定已经开始接收的分组是扩展分组。
在步骤S59中,在分组报头检测单元81确定已经开始接收的分组是扩展分组的情况下,处理进行至步骤S60,并且执行接收扩展分组的扩展模式接收处理(参见图14)。
另一方面,在步骤S59中,在分组报头检测单元81确定已经开始接收的分组不是扩展分组的情况下,处理进行至步骤S61。
在步骤S61中,分组报头检测单元81检查在步骤S58中检测的分组报头的数据类型(数据类型[5:0]),并且确定已经开始接收的分组是否是短分组。
在步骤S61中,在分组报头检测单元81确定已经开始接收的分组是短分组的情况下,处理进行至步骤S62。在步骤S62中,分组报头检测单元81接收从图像传感器21发送的具有常规分组结构的短分组。
另一方面,在步骤S61中,在分组报头检测单元81确定已经开始接收的分组不是短分组(即,已经开始接收长分组)的情况下,处理进行至步骤S63。在步骤S63中,解封装单元87接收从图像传感器21发送的具有常规分组结构的长分组的有效载荷并提取图像数据,并且CRC计算单元86接收在分组报头之后发送的第(WC+1)个字节作为CRC。
在步骤S60、步骤S62或步骤S63的处理之后,处理进行至步骤S64,并且控制器74终止分组接收处理。此后,处理返回至步骤S58,并且类似地重复执行接收用于下一分组的分组的处理。
图14是示出在图13的步骤S60的处理中执行的扩展模式接收处理的流程图。
在步骤S71中,分组报头检测单元81确定扩展模式的模式设置是否是扩展模式0。例如,在扩展类型设置信息指示分组报头的数据类型中的扩展模式0(数据类型[1:0]=2'b00)的情况下,分组报头检测单元81确定扩展模式的模式设置是扩展模式0。
在步骤S71中,在分组报头检测单元81确定扩展模式的模式设置为扩展模式0的情况下,处理进行至步骤S72。在步骤S72中,解释单元83接收有效载荷的第一个字节作为扩展分组报头。
在步骤S73中,解释单元83检查在步骤S72中接收的扩展分组报头的数据类型(数据类型[7:0]),并且确定已经开始接收的分组是否是扩展短分组。
在步骤S73中,在解释单元83确定分组是扩展短分组的情况下,处理进行至步骤S74。在步骤S74中,解释单元83根据在步骤S72中接收的扩展分组报头中存储的设置(OePH[7:0])接收可选扩展分组报头。
在步骤S75中,CRC计算单元86接收在可选的扩展分组报头之后发送的第(WC+1)个字节作为CRC。
另一方面,在步骤S73中,在解释单元83确定分组不是扩展短分组(即,已经开始接收扩展长分组)的情况下,处理进行至步骤S76。在步骤S76中,解释单元83根据在步骤S72中接收的扩展分组报头中存储的设置(OePH[7:0]),接收可选扩展分组报头。
在步骤S77中,解封装单元87接收从图像传感器21发送的扩展长分组的传统有效载荷,并提取图像数据。
在步骤S78,解释单元83根据在步骤S72接收的扩展分组报头中存储的设置(OePF[3:0]),接收可选扩展分组页脚。
在步骤S79中,CRC计算单元86接收在可选扩展分组脚之后发送的第(WC+1)个字节作为CRC。
然后,在步骤S71中,在确定扩展模式的模式设置不是扩展模式0的情况下,在步骤S75的处理之后或者在步骤S79的处理之后,终止扩展模式接收处理。
如上所述,应用处理器22可通过接收扩展短分组或扩展长分组来获取数据。
<分组结构的第二结构示例>
将参考图15至图18描述用于扩展模式兼容的CSI-2发送电路31与扩展模式兼容的CSI-2接收电路32之间的通信的分组的分组结构的第二结构示例。
在图3至图8所示的第一结构示例中,分组报头和分组页脚具有与现有CSI-2标准的分组结构相同的分组结构,对保持与现有CSI-2标准的兼容性具有重要意义,并且通过扩展分组报头、可选扩展分组报头和可选扩展分组页脚扩展分组结构。同时,在下面描述的第二结构示例中,分组报头和分组页脚与现有CSI-2标准不同,并且通过扩展分组报头和扩展分组页脚扩展分组结构。
图15示出了在物理层是D-PHY的情况下,在CSI-2的扩展模式下使用的短分组(在下文中,用于D-PHY的扩展短分组)的分组结构。
在图15所示的用于D-PHY的扩展短分组中,与图4所示的第一结构示例的用于D-PHY的扩展短分组类似,通过存储在与现有CSI-2标准相同的分组报头中的数据类型来识别扩展模式。
同时,在图15所示的用于D-PHY的扩展短分组中,与根据现有CSI-2标准的短分组相似,帧号被存储在分组报头的数据类型的接下来的16位中的短分组数据字段中。然后,在分组报头之后,发送与图4所示的扩展分组报头类似地配置的扩展分组报头。
因此,接收侧的应用处理器22可以解释存储在扩展分组报头中的数据类型,并且在分组是扩展短分组的情况下确定帧号被存储在分组报头的数据字段中。
注意,图15所示的用于D-PHY的扩展短分组中的可选扩展分组报头与图4所示的第一结构示例的用于D-PHY的扩展短分组中的可选扩展分组报头类似地配置。然而,由于可选扩展分组报头具有未嵌入在有效载荷中的分组结构,因此不需要在最后添加CRC。
图16示出了在物理层是D-PHY的情况下,在CSI-2的扩展模式下使用的长分组(在下文中,用于D-PHY的扩展长分组)的分组结构。
在图16所示的用于D-PHY的扩展长分组中,扩展数据被发送作为分组报头的一部分或分组页脚的一部分而不嵌入在有效载荷中。因此,与现有标准类似,头部分组报头的WC仅指示有效载荷的字节长度。
图17示出了在物理层是C-PHY的情况下,在CSI-2的扩展模式下使用的短分组(在下文中,用于C-PHY的扩展短分组)的分组结构。
由于图17所示的用于C-PHY的扩展短分组中的扩展部分根据现有CSI-2标准被发送为分组报头的扩展,所以在帧号之后插入诸如扩展分组报头的扩展部分。然后,与现有CSI-2标准类似,分组报头以CRC结束。此外,插入SYNC而传送分组报头两次的分组结构与符合现有CSI-2标准的短分组相似。
图18示出了在物理层是C-PHY的情况下,在CSI-2的扩展模式下使用的长分组(在下文中,用于C-PHY的扩展长分组)的分组结构。
如上所述,与现有标准类似,图18所示的用于C-PHY的扩展长分组与图8所示的第一结构示例的用于C-PHY的扩展长分组的不同之处在于头部分组报头的WC仅指示有效载荷的字节长度。
如上所述,与第一结构示例的扩展分组的分组结构(图3至图8)类似,利用图15至图18所示的第二结构示例的扩展分组的分组结构,可以支持与常规结构相比更广泛的用途。
注意,第二结构示例的扩展分组具有其中在扩展数据未嵌入现有有效载荷的情况下扩展现有分组报头和页脚的分组结构。因此,在采用第二结构示例的扩展分组的分组结构的情况下,与采用第一结构示例的扩展分组的分组结构的情况相比,不可能最小化需要改变常规使用的通信系统的影响。即,例如,现有SerDes发送电路34需要相对于SerDes接收电路35(图2)进行改变。
如上所述,通过采用第一结构示例的扩展分组,可以支持诸如车载用途的各种用途,并且可以在最小化需要改变常规使用的通信系统的影响的同时构造车载系统。
此外,通过采用第二结构示例的扩展分组,尽管需要改变常规使用的通信系统,但是可以支持诸如车载用途的各种用途。
<图像传感器和应用处理器的修改>
将参考图19描述图像传感器和应用处理器的修改。
构成上述图9中的图像传感器21或图10中的应用处理器22的每个块被配置为能够执行与用于D-PHY的分组和用于C-PHY的分组两者相对应的处理。相反,例如,可提供专门处理用于D-PHY的分组的块和专门处理用于C-PHY的分组的块两者,并且处理可在每个块中交换。
图19的A所示的图像传感器21A包括D层处理块单元101、C层处理块单元102、切换单元103以及控制器60。
D层处理块单元101包括在构成图9中的图像传感器21的块之中专门执行用于D-PHY的分组的处理的块。C层处理块单元102包括在构成图9中的图像传感器21的块之中专门执行用于C-PHY的分组的处理的块。在控制器60的控制下,切换单元103执行切换,以便在将D-PHY用于物理层的情况下输出在D层处理块单元101中生成的用于D-PHY的分组,并且在将C-PHY用于物理层的情况下输出在C层处理块单元102中生成的用于C-PHY的分组。
图19的B所示的应用处理器22A包括切换单元111、D层处理块单元112、C层处理块单元113以及控制器74。
在控制器74的控制下,切换单元111执行切换,以便将从图像传感器21A发送的分组提供给D层处理块单元112和C层处理块单元113中的一个。D层处理块单元112包括在构成图10中的应用处理器22的块之中专门执行用于D-PHY的分组的处理的块。C层处理块单元113包括在构成图10中的应用处理器22的块之中专门执行用于C-PHY的分组的处理的块。
在如上所述配置的图像传感器21A和应用处理器22A中,可以在通信开始之前在控制器60与控制器74之间设置要使用的物理层。然后,例如,在将D-PHY用于物理层的情况下,经由切换单元103发送在D层处理块单元101中生成的用于D-PHY的分组,经由切换单元111将该分组提供给D层处理块单元112并进行处理。此外,例如,在将C-PHY用于物理层的情况下,经由交换单元103发送在C层处理块单元102中生成的用于C-PHY的分组,经由交换单元111将该分组提供至C层处理块单元113并进行处理。
<扩展分组的应用示例>
例如,已经检查了将上述扩展分组应用于以下用例。
例如,已经检查了将扩展分组应用于发送高清晰度图像(RAW24)的用例。
例如,当图像数据以RAW格式发送时,RAW6、RAW7、RAW8、RAW10、RAW12、RAW14、RAW16和RAW20被定义为根据现有CSI-2标准要存储在分组报头中的数据类型。同时,近年来,为了支持使用车载相机的自动驾驶,期望发送更高清晰度的图像。因此,例如,通过经由应用扩展分组来扩展数据类型的位深度,可以将更高清晰度RAW24定义为扩展分组报头的数据类型。
此外,已经检查了将扩展分组应用于作为用于仅发送画面上的受关注图像区域的技术的SmartROI。
例如,大量相机当前安装在体育场、机场等中。在由这些相机捕获的整个图像经由诸如因特网的网络从相机发送至云服务器的情况下,假设因特网的频带不足、云侧上的计算量或数据量的增大等。因此,通过在边缘(相机侧)仅切出受关注图像区域并且发送受关注图像区域,期望抑制因特网的频带不足、云侧上的计算量或数据量的增大等。
在发送这样的SROI的情况下,需要将矩形区域(ROI)的左上坐标一起发送,以便通知接收侧受关注区域对应于整个画面上的哪个部分。此外,需要根据来自接收侧的指令,以规定的定时发送整个成像画面的数据。因此,例如,SROI图像和整个图像(现有分组报头)的数据以帧为单位混合。
因此,通过应用扩展分组,例如,可以发送X坐标和Y坐标中的每一个的16位或16位以上的坐标数据。
此外,检查应用扩展分组GLD的用例,该扩展分组GLD甚至在发生信道劣化的情况下通过减少频带和通道的数量继续通信。注意,GLD是在CSI-2版本3.0中检查的提案。
例如,在自动驾驶中,即使在碰撞时连接相机的缆线的一部分断线,也需要使用未断线的缆线继续通信,自动退避到安全区域,然后使车辆停止。因此,车载相机接口至少具有断线检测功能,并且需要诸如指示画面上的哪一行的信息的行号(16位)、指示哪个相机已经发送信息的源ID(8位)、以及指示发送号的消息计数器(16位)的信息。此外,在如上所述的与SROI组合使用的情况下,可以设想以帧为单位发送这些信息。
因此,通过应用扩展分组,可以发送这些信息。
<适于E2E保护的配置示例>
将参考图20至图26描述适于禁止发送路径上的分组修改等的规则的配置示例。
例如,在具有参考图2描述的配置的通信系统11A中,在图像传感器21与应用处理器22之间的接口不同的情况下,需要在发送路径上转换分组。即,在图像传感器21的物理层是D-PHY并且应用处理器22的物理层是C-PHY的情况下,例如,串并转换器26需要将用于D-PHY的分组转换为用于C-PHY的分组。
如上所述,在串并转换器26中执行分组转换的配置中,例如,违反由ISO 26262(功能安全)定义的规定,即,发送路径上的规定禁止分组修改等(在下文中,称为E2E(端到端)保护)。
图20是示出作为应用本技术的通信系统的第三实施例的适于E2E保护的通信系统201的配置示例的框图。
如图20所示,通信系统201通过连接图像传感器211、串行器212、串并转换器213以及应用处理器214配置。注意,图20示出了SERDES为A-PHY的情况作为示例,并且还包括使用诸如FPD-LINK 3的其他SERDES标准的连接的情况。另外,在SERDES标准中,可以在保持CIS-2的格式(至少专用有效载荷)的同时基于SERDES标准执行通信。此外,在SERDES中,物理层处理单元237和247可包括除A-PHY之外的其他SERDES标准的多个物理层处理单元,并且物理层处理单元可根据应用来切换。
图像传感器211至少包括扩展模式兼容的CSI-2发送电路221、对应于C-PHY或D-PHY或C-PHY和D-PHY两者的物理层处理单元(在下文中,称为C/D-PHY物理层处理单元)222、对应于I2C或I3C或I2C和I3C两者的从机(在下文中,称为I2C/I3C从机)223、以及CCI从机224。
串行器212至少包括CSI-2接收电路231、C/D-PHY物理层处理单元232、I2C/I3C主机233、CCI主机234、用于CSI-2的A-PHY分组生成单元235、用于CCI的A-PHY分组发送/接收单元236、以及与A-PHY兼容的物理层处理单元237。例如,在串行器212中,将用于C-PHY或D-PHY的分组转换为用于A-PHY的分组,并且基于寄存器设置等来确定该转换。
串并转换器213至少包括CSI-2发送电路241、C/D-PHY物理层处理单元242、I2C/I3C从机243、CCI从机244、用于CSI-2的A-PHY分组接收单元245、用于CCI的A-PHY分组发送/接收单元246以及与A-PHY兼容的物理层处理单元247。例如,在串并转换器213中,将用于A-PHY的分组转换为用于C-PHY或D-PHY的分组,并且基于寄存器设置等确定该转换。
应用处理器214至少包括扩展模式兼容的CSI-2接收电路251、C/D-PHY物理层处理单元252、I2C/I3C主机253和CCI主机254。
以这种方式配置通信系统201,并且从图像传感器211发送并且通过应用处理器214接收具有上述结构的扩展分组。这里,当通信系统201被配置为使得图像传感器211的物理层处理单元222与D-PHY兼容并且应用处理器22的物理层处理单元252与C-PHY兼容时,不必违反E2E保护。
因此,通信系统201将E2E保护的保护范围限制为专用有效载荷(下文称为AS有效载荷),即应用特定的有效载荷,以适应E2E保护。即,在从用于A-PHY的分组转换为用于C-PHY或D-PHY的分组时或在从用于C-PHY或D-PHY的分组转换为用于A-PHY的分组时,AS有效载荷被禁止改变。
图21示出了扩展为与E2E保护兼容的用于D-PHY的扩展分组的结构示例。
如图所示,在用于D-PHY的扩展分组中,包括扩展分组报头(ePH)、分组数据和扩展分组页脚(ePF)的AS有效载荷被限制为E2E保护的保护范围。
然后,在扩展分组报头中,描述在E2E保护的保护范围被限制为AS有效载荷的情况下必要的预定信息。例如,指示存储在AS有效载荷中的数据的数据长度的分组计数PC被添加作为扩展分组报头中描述的预定信息,以便识别分组数据的数据长度。即,分组数据具有由分组计数PC确定的字节数。此外,指示虚拟信道的线路数的虚拟信道VC从现有分组报头复制作为扩展分组报头中描述的预定信息。
图22示出了扩展为与E2E保护兼容的用于C-PHY的扩展分组的结构示例。
如图所示,与用于D-PHY的扩展分组类似,在用于C-PHY的扩展分组中,包括扩展分组标头(ePH)、分组数据和扩展分组页脚(ePF)的AS有效载荷被限制为E2E保护的保护范围。然后,与用于D-PHY的扩展分组类似,分组计数PC和虚拟信道VC在扩展分组报头中被描述为在E2E保护的保护范围被限制为AS有效载荷的情况下必需的预定信息。
图23示出了扩展为与E2E保护兼容的用于A-PHY的扩展分组的结构示例。
如图所示,即使在用于A-PHY的扩展分组中,包括扩展分组报头(ePH)、分组数据和扩展分组页脚(ePF)的AS有效载荷也被限制为E2E保护的保护范围。
这里,如参考图20所描述的,通信系统201根据从图像传感器211发送到串行器212的用于D-PHY或C-PHY的扩展分组生成用于A-PHY的扩展分组。因此,已经在用于A-PHY的扩展分组的扩展分组报头中描述分组计数PC和虚拟信道VC。
通过采用这样的分组结构,通信系统201可以避免发送路径上的AS有效载荷的修改,并且可以遵守E2E保护。注意,图21至图23所示的分组结构可通过用如图3至图8和图15至图18所示的分组结构的对应分组部分地替换来使用,并且分组生成的一部分被替换。
图24是用于描述适于E2E保护的分组发送/接收处理的流程图。
例如,当存储在分组数据中的数据(例如,图像数据等)被提供给扩展模式兼容的CSI-2发送电路221时,开始处理。然后,在步骤S101中,在图像传感器211中,扩展模式兼容的CSI-2发送电路221将所提供的数据存储在分组数据中。此外,扩展模式兼容的CSI-2发送电路221生成如图21或图22所示的描述虚拟信道VC和分组计数PC的扩展分组报头。然后,扩展模式兼容的CSI-2发送电路221通过将扩展分组报头和扩展分组页脚添加到分组数据来生成AS有效载荷。
在步骤S102中,扩展模式兼容的CSI-2发送电路221通过将用于C-PHY或D-PHY的分组报头和用于C-PHY或D-PHY的分组页脚添加到在步骤S101中生成的AS有效载荷来生成用于C-PHY或D-PHY的扩展分组。然后,扩展模式兼容的CSI-2发送电路221经由C/D-PHY物理层处理单元222将用于C-PHY或D-PHY的扩展分组发送到串行器212。
在步骤S103中,在串行器212中,CSI-2接收电路231经由C/D-PHY物理层处理单元232接收在步骤S102中从图像传感器211发送的用于C-PHY或D-PHY的扩展分组。然后,CSI-2接收电路231从所接收的扩展分组获取排除分组报头和分组页脚的AS有效载荷,并且将AS有效载荷照原样提供给用于CSI-2生成单元235的A-PHY分组。
在步骤S104中,在串行器212中,用于CSI-2的A-PHY分组生成单元235通过将用于A-PHY的分组报头和用于A-PHY的分组页脚添加到从CSI-2接收电路231提供的AS有效载荷来生成用于A-PHY的扩展分组。然后,用于CSI-2的A-PHY分组生成单元235经由与A-PHY兼容的物理层处理单元237将用于A-PHY的扩展分组发送到串并转换器213。
在步骤S105中,在串并转换器213中,用于CSI-2的A-PHY分组接收单元245经由与A-PHY兼容的物理层处理单元247接收在步骤S104中从串行器212发送的用于A-PHY的扩展分组。然后,用于CSI-2的A-PHY分组接收单元245从所接收的扩展分组获取排除分组报头和分组页脚的AS有效载荷,并且将AS有效载荷照原样提供给CSI-2发送电路241。
在步骤S106中,CSI-2发送电路241通过在步骤S105中将用于C-PHY或D-PHY的分组报头和用于C-PHY或D-PHY的分组页脚添加至从用于CSI-2的A-PHY分组接收单元245提供的AS有效载荷来生成用于C-PHY或D-PHY的扩展分组。然后,CSI-2发送电路241经由C/D-PHY物理层处理单元242发送将用于C-PHY或D-PHY的扩展分组发送至应用处理器214。
在步骤S107中,在应用处理器214中,扩展模式兼容的CSI-2接收电路251经由C/D-PHY物理层处理单元252接收在步骤S106中从串并转换器213发送的用于C-PHY或D-PHY的扩展分组。然后,扩展模式兼容的CSI-2接收电路251从所接收的扩展分组中获取排除分组报头和分组页脚的AS有效载荷,并且将存储在AS有效载荷的分组数据中的各种数据输出到后级LSI(未示出)。然后,终止适于E2E保护的分组发送/接收处理,并对下一扩展分组重复执行类似处理。
如上所述,通过执行适于E2E保护的分组发送/接收处理,通信系统201可以在不修改发送路径上的AS有效载荷的情况下发送和接收扩展分组。此时,例如,即使在图像传感器211的物理层是D-PHY并且应用处理器214的物理层是C-PHY的情况下,即,即使在相应接口不同的情况下,也可以遵守E2E保护。
图25是示出图像传感器211的详细配置示例的框图。注意,在图25所示的图像传感器211中,与在图9中的图像传感器21的配置相同的配置由相同的参考数字表示,并且省略其详细描述。
即,与图9中的图像传感器21类似,图像传感器211包括像素41、AD转换器42、图像处理单元43、寄存器47和控制器60。此外,包括在图像传感器211中的I2C/I3C从机223和CCI从机224分别对应于图9中的I2C/I3C从机46和CCI从机59。
然后,图像传感器211包括扩展模式兼容的CSI-2发送电路221和物理层处理单元222,并且物理层处理单元222与A-PHY、C-PHY和D-PHY兼容。
除了控制器60和CCI从机224之外,扩展模式兼容的CSI-2发送电路221还包括AS有效载荷生成单元301、选择器302、A-PHY分组生成单元303、C-PHY分组生成单元304、D-PHY分组生成单元305以及选择器306。
AS有效载荷生成单元301生成被限制为E2E保护的保护范围的AS有效载荷,并将该AS有效载荷输出到选择器302。例如,AS有效载荷生成单元301包括封装单元311、扩展分组报头生成单元312和扩展分组页脚生成单元313。
封装单元311将从图像处理单元43提供的图像数据封装为要发送的数据,并且生成由分组计数PC确定的字节数的分组数据。例如,控制器60可根据存储在寄存器47中的设置值(例如,图像尺寸等)控制由封装单元311生成的分组数据的字节数。
例如,如参考图21至图23所述,扩展分组报头生成单元312生成描述分组计数PC和虚拟信道VC的扩展分组报头,并且将扩展分组报头添加到分组数据。扩展分组页脚生成单元313生成扩展分组页脚并将其添加到分组数据。
在控制器60的控制下,选择器302选择并行设置的A-PHY分组生成单元303、C-PHY分组生成单元304和D-PHY分组生成单元305中的一个作为从AS有效载荷生成单元301提供的AS有效载荷的输出目的地。
A-PHY分组生成单元303从经由选择器302提供的AS有效载荷生成用于A-PHY的扩展分组,并且将扩展分组输出至选择器306。例如,A-PHY分组生成单元303包括AAL生成单元321、A-PHY分组报头生成单元322以及A-PHY分组页脚生成单元323。
例如,A-PHY自适应层(AAL)生成单元321在称为自适应层的层级中每380字节划分由AS有效载荷生成单元301生成的AS有效载荷。然后,A-PHY分组报头生成单元322将用于A-PHY的分组报头添加到划分的AS有效载荷中,并且A-PHY分组页脚生成单元323将用于A-PHY的分组页脚添加到划分的AS有效载荷中。
C-PHY分组生成单元304从经由选择器302提供的AS有效载荷生成用于C-PHY的扩展分组,并且将扩展分组输出至选择器306。例如,C-PHY分组生成单元304包括C-PHY分组报头生成单元331、C-PHY分组页脚生成单元332以及C-PHY通道分配单元333。
例如,C-PHY分组报头生成单元331将用于C-PHY的分组报头添加到在AS有效载荷生成单元301中生成的AS有效载荷中,并且C-PHY分组页脚生成单元332将用于C-PHY的分组页脚添加到在AS有效载荷生成单元301中生成的AS有效载荷中。然后,C-PHY通道分配单元333根据CSI-2标准将用于C-PHY的扩展分组分配到三个通道。
D-PHY分组生成单元305从经由选择器302提供的AS有效载荷生成用于D-PHY的扩展分组,并且将扩展分组输出至选择器306。例如,D-PHY分组生成单元305包括D-PHY分组报头生成单元341、D-PHY分组页脚生成单元342和D-PHY通道分配单元343。
例如,D-PHY分组报头生成单元341将用于D-PHY的分组报头添加到在AS有效载荷生成单元301中生成的AS有效载荷中,并且D-PHY分组页脚生成单元342将用于D-PHY的分组页脚添加到在AS有效载荷生成单元301中生成的AS有效载荷中。然后,D-PHY通道分配单元343根据CSI-2标准将用于D-PHY的扩展分组分配到四个通道。
在控制器60的控制下,选择器306选择并行设置的A-PHY分组生成单元303、C-PHY分组生成单元304、以及D-PHY分组生成单元305中的一个作为提供给物理层处理单元222的扩展分组的输出源。
然后,在从A-PHY分组生成单元303提供用于A-PHY的扩展分组的情况下,物理层处理单元222在一个通道中发送用于A-PHY的扩展分组。此外,在从C-PHY分组生成单元304提供用于C-PHY的扩展分组的情况下,物理层处理单元222在三个通道中发送用于C-PHY的扩展分组。此外,在从D-PHY分组生成单元305提供用于D-PHY的扩展分组的情况下,物理层处理单元222在四个通道中发送用于D-PHY的扩展分组。
在如上所述配置的图像传感器211中,扩展模式兼容的CSI-2发送电路221被配置为使得AS有效载荷生成单元301经由选择器302连接至A-PHY分组生成单元303、C-PHY分组生成单元304和D-PHY分组生成单元305。因此,图像传感器211可以通过一个AS有效载荷生成单元301生成对用于A-PHY的扩展分组、用于C-PHY的扩展分组和用于D-PHY的扩展分组共有的AS有效载荷。即,AS有效载荷生成单元301可以由A-PHY分组生成单元303、C-PHY分组生成单元304和D-PHY分组生成单元305共享,从而可以减小电路规模。因此,可以实现图像传感器211的小型化。
图26是示出应用处理器214的详细配置示例的框图。注意,在图26所示的应用处理器214中,与在图10中的应用处理器22的配置相同的配置由相同的参考数字表示,并且省略其详细描述。
即,与图10中的应用处理器22类似,应用处理器214包括寄存器73和控制器74。注意,控制器74可以由软件实现。此外,包括在应用处理器214中的I2C/I3C主机253和CCI主机254分别对应于图10中的I2C/I3C主机72和CCI主机88。
然后,应用处理器214包括扩展模式兼容的CSI-2接收电路251和物理层处理单元252,并且物理层处理单元252与A-PHY、C-PHY和D-PHY兼容。
除了CCI主机254之外,扩展模式兼容的CSI-2接收电路251还包括选择器401、A-PHY分组接收单元402、C-PHY分组接收单元403、D-PHY分组接收单元404、选择器405、以及AS有效载荷接收单元406。
选择器401选择并行设置的A-PHY分组接收单元402、C-PHY分组接收单元403、和D-PHY分组接收单元404中的一个作为从物理层处理单元252提供的扩展分组的输出目的地。
A-PHY分组接收单元402接收经由选择器401提供的用于A-PHY的扩展分组,并且将扩展分组输出至选择器405。例如,A-PHY分组接收单元402包括A-PHY分组报头解释单元411、A-PHY分组页脚验证单元412和AAL处理单元413。
例如,A-PHY分组报头解释单元411解释A-PHY的分组报头中描述的内容,并执行接收用于A-PHY的扩展分组所需的处理,并且A-PHY分组页脚验证单元412使用用于A-PHY的分组页脚来验证是否存在错误。然后,AAL处理单元413执行组合由图25中的AAL生成单元321分割的自适应层的处理。
C-PHY分组接收单元403接收经由选择器401提供的用于C-PHY的扩展分组,并且将扩展分组输出至选择器405。例如,C-PHY分组接收单元403包括C-PHY通道合并单元421、C-PHY分组报头解释单元422和C-PHY分组页脚验证单元423。
例如,C-PHY通道合并单元421合并根据CSI-2标准分配至三个通道并且经由物理层处理单元252提供的用于C-PHY的扩展分组。然后,C-PHY分组报头解释单元422解释用于C-PHY的分组报头中描述的内容,并且执行接收用于C-PHY的扩展分组所需的处理,并且C-PHY分组页脚验证单元423使用用于C-PHY的分组页脚来验证是否存在错误。
D-PHY分组接收单元404接收经由选择器401提供的用于D-PHY的扩展分组,并且将扩展分组输出至选择器405。例如,D-PHY分组接收单元404包括D-PHY通道合并单元431、D-PHY分组报头解释单元432和D-PHY分组页脚验证单元433。
例如,D-PHY通道合并单元431将符合CSI-2标准分配至四个通道并且经由物理层处理单元252提供的用于D-PHY的扩展分组。然后,D-PHY分组报头解释单元432解释在D-PHY的分组报头中描述的内容,并且执行接收用于D-PHY的扩展分组所需的处理,并且D-PHY分组页脚验证单元433使用用于D-PHY的分组页脚来验证是否存在错误。
选择器405选择并行设置的A-PHY分组接收单元402、C-PHY分组接收单元403、和D-PHY分组接收单元404中的一个作为要提供给AS有效载荷接收单元406的扩展分组的输出源。
AS有效载荷接收单元406包括与图25中的AS有效载荷生成单元301相对应的解封装单元441、扩展分组报头解释单元442和扩展分组页脚验证单元443。解封装单元441解封装由封装单元311封装的图像数据拆包。扩展分组报头解释单元442解释由扩展分组报头生成单元312生成的扩展分组报头,并且例如读取分组计数PC和虚拟信道VC。扩展分组页脚验证单元443使用由扩展分组页脚生成单元313添加的扩展分组页脚来验证是否存在错误。然后,AS有效载荷接收单元406将存储在经由选择器405提供的分组数据中的各种类型的数据(例如,图像数据、车载行号、CRC错误、源ID等)输出到后级LSI(未示出)。
在如上所述配置的应用处理器214中,扩展模式兼容的CSI-2接收电路251被配置为使得AS有效载荷接收单元406经由选择器405连接至A-PHY分组接收单元402、C-PHY分组接收单元403、和D-PHY分组接收单元404。由此,应用处理器214可以通过一个AS有效载荷接收单元406接收对用于A-PHY的扩展分组、用于C-PHY的扩展分组和用于D-PHY的扩展分组共有的AS有效载荷。即,A-PHY分组接收单元402、C-PHY分组接收单元403、D-PHY分组接收单元404可以共享AS载荷接收单元406,因此可以减小电路规模。因此,可以实现应用处理器214的小型化。
<计算机的配置示例>
接下来,可以通过硬件或软件执行上述一系列处理(通信方法)。在通过软件执行一系列处理的情况下,在通用计算机等中安装配置软件的程序。
图27是示出通过程序执行上述一系列处理的计算机的硬件的配置示例的框图。
在计算机中,中央处理单元(CPU)501、只读存储器(ROM)502、随机存取存储器(RAM)503、电可擦除可编程只读存储器(EEPROM)504通过总线505相互连接。输入/输出接口506进一步连接至总线505,并且输入/输出接口506连接至外部。
在如上所述配置的计算机中,CPU 501例如经由总线505将存储在ROM 502和EEPROM 504中的程序加载到RAM 503中并执行该程序,使得执行上述一系列处理。此外,由计算机(CPU 501)执行的程序可以预先写入ROM 502中、经由输入/输出接口506从外部安装或者更新到EEPROM 504。
这里,在本说明书中,由计算机根据程序执行的处理不必必须根据如流程图描述的顺序按照时间顺序执行。换句话说,由计算机根据程序执行的处理还包括并行或单独执行的处理(例如,并行处理或由对象处理)。
此外,程序可以由一个计算机(处理器)处理,或者可以由多个计算机以分布式方式处理。此外,程序可以发送给远程计算机并且执行该程序。
此外,在本说明书中,术语“系统”是指多个配置元件(装置、模块(部件)等)的集合,并且所有配置元件是否在同一壳体内无关。因此,容纳在单独壳体中并且经由网络连接的多个装置以及将多个模块容纳在一个壳体中的一个装置两者都是系统。
此外,例如,描述为一个装置(或处理单元)的配置可以被划分为和配置为多个装置(或处理单元)。相反,描述为多个装置(或处理单元)的配置可以被共同地配置为一个装置(或处理单元)。此外,除了上述配置之外的配置可被添加到每个装置(或每个处理单元)的配置。此外,只要系统整体的配置和操作大致相同,则特定装置(或处理单元)的配置的一部分可被包括在另一装置(或另一处理单元)的配置中。
此外,例如,在本技术中,可以采用云计算的配置,其中,通过多个装置经由网络协作地共享和处理一个功能。
此外,例如,上述程序可以由任意装置执行。在这种情况下,装置仅需要具有必要的功能(功能块等)并获得必要的信息。
此外,例如,在上述流程图中描述的步骤可以由一个装置执行或者可以共享方式由多个装置执行。此外,在一个步骤中包括多个处理的情况下,包括在一个步骤中的多个处理可以由一个装置执行或者可以由多个装置共享和执行。换句话说,包括在一个步骤中的多个处理可以作为多个步骤的处理被执行。相反,描述为多个步骤的处理可以作为一个步骤集中执行。
注意,在由计算机执行的程序中,描述程序的步骤的处理可以根据本说明书中描述的顺序按照时间顺序执行,或者可以单独并行执行或者在进行调用时的必要定时执行。即,只要不发生矛盾,就可以以与上述顺序不同的顺序执行每个步骤的处理。此外,描述程序的步骤的处理可以与另一程序的处理并行执行,或者可以与另一程序的处理组合执行。
注意,本说明书中描述的多个本技术可以彼此独立地实现为单个单元,只要不存在不一致性即可。当然,任意数量的本技术可以一起实现。例如,可以结合在另一实施例中描述的本技术的一部分或全部实现任何实施例中描述的本技术的一部分或全部。此外,上述任意本技术的一部分或全部可以与上面未描述的另一技术组合来实现。
<配置的组合示例>
注意,本技术还可以具有以下配置。
(1)
一种发送装置,包括:
专用有效载荷生成单元,被配置为将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,以生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷;以及
分组生成单元,被配置为至少将预定的物理层的分组报头添加到专用有效载荷,以生成物理层的分组。
(2)
根据以上(1)所述的发送装置,其中,
在用于扩展的分组报头中描述了将专用有效载荷作为保护范围发送所需的预定信息。
(3)
根据以上(2)所述的发送装置,其中,
预定信息是指示分组数据的数据长度的分组计数。
(4)
根据以上(1)至(3)中任一项所述的发送装置,其中,
针对多个类型的物理层中的每一个并行设置多个分组生成单元,并且
发送装置进一步包括:
选择器,被配置为切换专用有效载荷从专用有效载荷生成单元至多个分组生成单元的提供。
(5)
根据以上(1)至(4)中任一项所述的发送装置,其中,
分组生成单元生成用于C-PHY或D-PHY的分组并且经由每个相应的物理层将该分组发送至串行器,
串行化器从用于C-PHY或D-PHY的分组获得专用有效载荷,生成用于A-PHY的分组,并且将该分组发送到串并转换器,并且
串并转换器从用于A-PHY的分组获取专用有效载荷,并且生成用于C-PHY或D-PHY的分组。
(6)
一种接收装置,包括:
分组接收单元,被配置为接收通过至少将用于预定的物理层的分组报头添加到专用有效载荷而获得的物理层的分组,该专用有效载荷将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据并且通过禁止发送路径上的修改而被限制为要保护的保护范围;以及
专用有效载荷获取单元,被配置为从分组获取专用有效载荷。
(7)
根据以上(6)所述的接收装置,其中,
在用于扩展的分组报头中描述了将专用有效载荷作为保护范围发送所需的预定信息。
(8)
根据以上(7)所述的接收装置,其中,
预定信息是指示分组数据的数据长度的分组计数。
(9)
根据以上(6)至(8)中任一项所述的接收装置,其中,
针对多个类型的物理层中的每一个并行设置多个分组接收单元,并且
接收装置进一步包括:
选择器,被配置为切换专用有效载荷从多个分组接收单元至专用有效载荷获取单元的提供。
(10)
根据以上(6)至(9)中任一项所述的接收装置,其中,
串行器从用于C-PHY或D-PHY的分组获得专用有效载荷,生成用于A-PHY的分组,并且将该分组发送到串并转换器,
串并转换器从用于A-PHY的分组获取专用有效载荷,并且生成用于C-PHY或D-PHY的分组,以及
用于C-PHY或D-PHY的分组接收单元经由每个相应的物理层接收分组。
(11)
一种通信系统,包括:
发送装置,包括:
专用有效载荷生成单元,被配置为将与物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,以生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷,以及
分组生成单元,被配置为至少将用于预定的物理层的分组报头添加到专用有效载荷,以生成物理层的分组;以及
接收装置,包括:
分组接收单元,被配置为接收从分组生成单元发送的用于物理层的分组,以及
专用有效载荷获取单元,被配置为从分组获取专用有效载荷。
注意,本实施例不限于上述实施例,并且在不背离本公开的主旨的情况下可以进行各种修改。此外,本说明书中描述的效果仅是示例并且不受限制,并且可以表现出其他效果。
参考标记列表
11 通信系统
21 图像传感器
22 应用处理器
23和24 总线
25 串行器
26 串并转换器
27 总线
31 扩展模式兼容的CSI-2发送电路
32 扩展模式兼容的CSI-2接收电路
33 CSI-2接收电路
34 SerDes发送电路
35 SerDes接收电路
36 CSI-2发送电路
41 像素
42 AD转换器
43 图像处理单元
44 像素CRC计算单元
45 物理层处理单元
46 I2C/I3C从机
47 寄存器
51 封装单元
52 分组报头生成单元
53 扩展分组头生成单元
54 扩展分组页脚生成单元
55和56 选择单元
57 CRC计算单元
58 通道分配单元
59 CCI从机
60 控制器
71 物理层处理单元
72 I2C/I3C主机
73 寄存器
74 控制器
81 分组报头检测单元
82 通道合并单元
83 解释单元
84和85 选择单元
86 CRC计算单元
87 解封装单元
88 CCI主机。
Claims (11)
1.一种发送装置,包括:
专用有效载荷生成单元,被配置为将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,以生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷;以及
分组生成单元,被配置为至少将用于预定的物理层的分组报头添加到所述专用有效载荷,以生成用于所述物理层的分组。
2.根据权利要求1所述的发送装置,其中,
在所述用于扩展的分组报头中描述了将所述专用有效载荷作为所述保护范围发送所需的预定信息。
3.根据权利要求2所述的发送装置,其中,
所述预定信息是指示所述分组数据的数据长度的分组计数。
4.根据权利要求1所述的发送装置,其中,
针对多个类型的所述物理层中的每一个并行设置多个所述分组生成单元,并且
所述发送装置进一步包括:
选择器,被配置为切换所述专用有效载荷从所述专用有效载荷生成单元至多个所述分组生成单元的提供。
5.根据权利要求1所述的发送装置,其中,
所述分组生成单元生成用于C-PHY或D-PHY的分组并且经由每个相应的物理层将所述分组发送至串行器,
所述串行器从所述用于C-PHY或D-PHY的分组获得所述专用有效载荷,生成用于A-PHY的分组,并且将所述分组发送到串并转换器,并且
所述串并转换器从所述用于A-PHY的分组获取所述专用有效载荷,并且生成所述用于C-PHY或D-PHY的分组。
6.一种接收装置,包括:
分组接收单元,被配置为接收通过至少将用于预定的物理层的分组报头添加到专用有效载荷而获得的用于物理层的分组,所述专用有效载荷将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据并且通过禁止发送路径上的修改而被限制为要保护的保护范围;以及
专用有效载荷获取单元,被配置为从所述分组获取所述专用有效载荷。
7.根据权利要求6所述的接收装置,其中,
在所述用于扩展的分组报头中描述了将所述专用有效载荷作为所述保护范围发送所需的预定信息。
8.根据权利要求7所述的接收装置,其中,
所述预定信息是指示所述分组数据的数据长度的分组计数。
9.根据权利要求6所述的接收装置,其中,
针对多个类型的所述物理层中的每一个并行设置多个所述分组接收单元,并且
所述接收装置进一步包括:
选择器,被配置为切换所述专用有效载荷从多个所述分组接收单元至所述专用有效载荷获取单元的提供。
10.根据权利要求6所述的接收装置,其中,
串行器从用于C-PHY或D-PHY的分组获得所述专用有效载荷,生成用于A-PHY的分组,并且将所述分组发送到串并转换器,
所述串并转换器从所述用于A-PHY的分组获取所述专用有效载荷,并且生成所述用于C-PHY或D-PHY的分组,以及
用于C-PHY或D-PHY的所述分组接收单元经由每个相应的物理层接收所述分组。
11.一种通信系统,包括:
发送装置,包括:
专用有效载荷生成单元,被配置为将与用于物理层的分组报头不同的用于扩展的分组报头添加到通过对要发送的数据进行封装而获得的分组数据,以生成通过禁止发送路径上的修改而被限制为要保护的保护范围的专用有效载荷,以及
分组生成单元,被配置为至少将用于预定的物理层的分组报头添加到所述专用有效载荷,以生成用于所述物理层的分组;以及
接收装置,包括:
分组接收单元,被配置为接收从所述分组生成单元发送的用于所述物理层的分组,以及
专用有效载荷获取单元,被配置为从所述分组获取所述专用有效载荷。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020077623 | 2020-04-24 | ||
JP2020-077623 | 2020-04-24 | ||
PCT/JP2021/014985 WO2021215269A1 (ja) | 2020-04-24 | 2021-04-09 | 送信装置、受信装置、および通信システム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115461732A true CN115461732A (zh) | 2022-12-09 |
Family
ID=78269140
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180029144.8A Pending CN115461732A (zh) | 2020-04-24 | 2021-04-09 | 发送器、接收器和通信系统 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20230143642A1 (zh) |
EP (1) | EP4141684A4 (zh) |
JP (1) | JPWO2021215269A1 (zh) |
KR (1) | KR20230002347A (zh) |
CN (1) | CN115461732A (zh) |
TW (1) | TW202143685A (zh) |
WO (1) | WO2021215269A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024185482A1 (ja) * | 2023-03-06 | 2024-09-12 | ソニーセミコンダクタソリューションズ株式会社 | 伝送システム、伝送装置、及び伝送方法 |
WO2024209994A1 (ja) * | 2023-04-07 | 2024-10-10 | ソニーセミコンダクタソリューションズ株式会社 | 画像センサ、データ処理装置、および画像センサシステム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8966105B2 (en) * | 2008-06-16 | 2015-02-24 | Telefonaktiebolget L M Ericsson (Publ) | Sending secure media streams |
JP6695739B2 (ja) | 2016-05-26 | 2020-05-20 | ソニーセミコンダクタソリューションズ株式会社 | 処理装置、画像センサ、およびシステム |
US20190260504A1 (en) * | 2018-02-22 | 2019-08-22 | Netspeed Systems, Inc. | Systems and methods for maintaining network-on-chip (noc) safety and reliability |
WO2020050555A1 (en) * | 2018-09-07 | 2020-03-12 | Samsung Electronics Co., Ltd. | Method for uwb transaction and electronic device therefor |
-
2021
- 2021-04-09 KR KR1020227033919A patent/KR20230002347A/ko unknown
- 2021-04-09 US US17/911,939 patent/US20230143642A1/en active Pending
- 2021-04-09 CN CN202180029144.8A patent/CN115461732A/zh active Pending
- 2021-04-09 JP JP2022516961A patent/JPWO2021215269A1/ja active Pending
- 2021-04-09 EP EP21792602.1A patent/EP4141684A4/en active Pending
- 2021-04-09 WO PCT/JP2021/014985 patent/WO2021215269A1/ja unknown
- 2021-04-16 TW TW110113707A patent/TW202143685A/zh unknown
Also Published As
Publication number | Publication date |
---|---|
KR20230002347A (ko) | 2023-01-05 |
EP4141684A4 (en) | 2023-08-16 |
TW202143685A (zh) | 2021-11-16 |
US20230143642A1 (en) | 2023-05-11 |
JPWO2021215269A1 (zh) | 2021-10-28 |
EP4141684A1 (en) | 2023-03-01 |
WO2021215269A1 (ja) | 2021-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7494126B2 (ja) | 通信装置および通信方法、並びにプログラム | |
CN115461732A (zh) | 发送器、接收器和通信系统 | |
US20230205723A1 (en) | Communication device, communication method, and program | |
KR102509132B1 (ko) | 영상 송신 장치 및 영상 수신 장치 | |
CN202889529U (zh) | 图像输出装置、图像处理装置和成像装置 | |
WO2020166378A1 (ja) | 通信装置および通信方法、並びにプログラム | |
KR20200100759A (ko) | 데이터 송신 방법, 전송 장치, 및 수신 장치 | |
US20230222074A1 (en) | Transmission device, reception device, and communication system | |
EP3920498B1 (en) | Transmission device, transmission method, reception device, reception method, and transmission/reception device | |
CN115299038A (zh) | 发送装置、接收装置以及传输系统 | |
US8325224B2 (en) | Head separation camera apparatus | |
MX2010012776A (es) | Transporte con portadora-e multiple sobe dsl. | |
US20220276980A1 (en) | Transmission device and communication system | |
KR20190017397A (ko) | 플러그 앤 플레이 디바이스의 인터페이스 장치 및 그 동작 방법 | |
KR20240136076A (ko) | Mipi a-phy 기반 차량의 카메라의 초기화를 위한 장치 및 방법 | |
KR20240136075A (ko) | Mipi a-phy 기반 차량의 카메라의 동기화를 위한 장치 및 방법 | |
CN118556383A (zh) | 通信装置、通信方法和程序 | |
CN113767619A (zh) | 发射装置、接收装置和通信系统 | |
KR20070082677A (ko) | 영상표시장치의 아날로그 영상 입력에 대한 정보를확인하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |