CN117242771A - 视频准确性校验 - Google Patents

视频准确性校验 Download PDF

Info

Publication number
CN117242771A
CN117242771A CN202280031429.XA CN202280031429A CN117242771A CN 117242771 A CN117242771 A CN 117242771A CN 202280031429 A CN202280031429 A CN 202280031429A CN 117242771 A CN117242771 A CN 117242771A
Authority
CN
China
Prior art keywords
video
data
stream
frames
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280031429.XA
Other languages
English (en)
Inventor
维吉亚·采卡拉
刘鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Texas Instruments Inc
Original Assignee
Texas Instruments Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Texas Instruments Inc filed Critical Texas Instruments Inc
Publication of CN117242771A publication Critical patent/CN117242771A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/04Diagnosis, testing or measuring for television systems or their details for receivers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/0806Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division the signals being two or more video signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本说明书的各方面提供一种方法(400)。在一些实例中,所述方法包含:接收包括多个帧的视频流(404);分析所述视频流,以将表示所述帧中的第一个中的指定位置处的图像像素的数据值与所述帧中的所述第一个中的所述指定位置处的所述图像像素的经编程数据值进行比较(406);响应于表示所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述数据值不同于所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述经编程数据值,确定所述视频流包含不正确数据(408);以及响应于确定所述视频流包含不正确数据而采取动作(410)。

Description

视频准确性校验
背景技术
多种电子系统接收视频流。视频流可为相机输出、传感器输出、所产生的视频、用于仪表盘或用户界面的视频等。有时,在产生视频流时发生错误,使得视频流不准确或包含错误。
发明内容
本说明书的各方面提供一种电路。在一些实例中,电路包含存储器和耦合到存储器的处理器。处理器经配置以:接收包括视频的数据流,所述视频包括多个帧;将表示帧中的第一个中的指定位置处的图像像素的数据值与帧中的第一个中的指定位置处的图像像素的经编程数据值进行比较;以及响应于表示帧中的第一个中的指定位置处的图像像素的数据值不同于帧中的第一个中的指定位置处的图像像素的经编程数据值,确定数据流包含不正确数据。
本说明书的其它方面提供一种系统。在一些实例中,系统包含主机单元、多流产生器和图像验证器。主机单元适于产生各自包括多个帧的至少两个视频流。多流产生器耦合到主机单元且经配置以产生具有经编码包的多流产生器的输出,所述经编码包包含来自至少两个视频流的信息。图像验证器经配置以:接收多流产生器的输出;分析多流产生器的输出,以将表示帧中的第一个中的指定位置处的图像像素的数据值与多个帧中的第一个中的指定位置处的图像像素的经编程数据值进行比较;以及响应于表示帧中的第一个中的指定位置处的图像像素的数据值不同于多个帧中的第一个中的指定位置处的图像像素的经编程数据值,确定多流产生器的输出包含不正确数据。
本说明书的其它方面提供一种方法。在一些实例中,方法包含:接收包括多个帧的视频流;分析视频流,以将表示帧中的第一个中的指定位置处的图像像素的数据值与帧中的第一个中的指定位置处的图像像素的经编程数据值进行比较;响应于表示帧中的第一个中的指定位置处的图像像素的数据值不同于帧中的第一个中的指定位置处的图像像素的经编程数据值,确定视频流包含不正确数据;以及响应于确定视频流包含不正确数据而采取动作。
附图说明
图1为根据各种实例的适于在系统的串行链接的装置之间选择性地转发信息的系统的图式。
图2为根据各种实例的用于视频分发的系统的图式。
图3为展示根据各种实例的视频校验器的图式。
图4为根据各种实例的方法的流程图。
图5为展示根据各种实例的视频校验器的图式。
在附图中使用相同的附图标记(或其它特征指示符)来表示(在功能和/或结构上)相同或类似的特征。
具体实施方式
各种电子系统采用耦合在一起以包括系统的组件。随着系统的功能增加,互连的复杂度也增加。随着更多功能添加到系统(例如,响应于增加的集成和处理能力),连接器的端子的数目增加,这反过来增加了连接器的大小、复杂度和/或成本。
一些电子系统安装在运输平台(例如,飞机或机动车)中。移动平台的结构中的局限性(例如,由于人为因素、安全考量和空气动力学性能)有时限制原本提供到连接器和电子系统的布线的空间。此外,对连接器和布线(例如,用于测试、更换和/或修复)的接入有时受限,例如当电子系统安装在仪表盘中时,在一些实施方案中,仪表盘包含车辆的安全气囊或减少可用于路由连接器和/或布线的空间的其它组件。
可安装于车辆平台中的电子系统的实例为“信息娱乐”系统,其中视频数据可由控制单元(例如,主机单元或其它数据源)产生(或以其它方式传输)。所产生的视频数据可传送到多个显示面板(例如,抬头显示器、仪表板和中央仪表显示器)。为了将不同类型的显示数据从控制单元发送到不同显示器,在控制单元与不同显示器中的每一个之间布置各种电缆/连接器。适于在两个单元(例如,显示器和控制单元)之间传送信号的电缆具有:第一连接器(例如,第一组连接器),其适于连接到第一单元的第一配对连接器;第二连接器(例如,第二组连接器),其适于连接到第二单元的第二配对连接器;以及电缆束(例如,柔性电缆束),其具有经布置以电气方式(或以光学方式)耦合第一连接器与第二连接器之间的信号(例如,单向和/或双向信号)的绝缘电线(或光缆)。
在实例中,系统适于在串行链接的装置之间选择性地转发信息。举例来说,系统可包含耦合到显示单元的串行链(例如,串行链的一端)的控制单元。多流产生器可耦合到控制单元的输出,使得示例多流产生器可将来自多个流的视频数据编码(例如,封装)成可适用于串行链中的不同类型的显示器(例如,菊花链式显示器)的格式。有时,在控制单元与显示单元之间或显示单元之间传输的数据流(例如,包含视频)中可发生错误。举例来说,在产生或对数据流进行编码时的错误有时产生包含不正确数据的数据流的视频。在另一实例中,到多流产生器的输入中的错误有时产生包含不正确数据的数据流的视频。在各种其它实例中,各种其它因素产生包含不正确数据的数据流的视频。如本文所使用,视频流可为包含视频或将视频提供到显示装置的数据流。
如本文中所描述,设备适于以内嵌方式插入视频流源与视频流目的地之间。在一些实例中,设备以内嵌方式插入集流器与分流器之间,如本文别处所描述。在其它实例中,设备插入分流器与显示单元之间,所述显示单元经配置以显示由分流器输出的视频流的一部分。设备经配置以监测在视频流源与视频流目的地之间传输的视频流,所述视频流源例如处理器、处理单元、图形单元(例如,图形处理单元)或其它组件。在至少一些实例中,所述监测将视频流的经限定区域与经编程值比较,以确定视频流的经限定区域内的视频流的准确性或正确性。举例来说,在一些实施方案中,视频流的所关注区域为视频流的经限定区域。所关注区域由系统的用户、系统的编程者、系统的制造商或任何其它合适的一方限定。在一些实例中,所关注区域是根据一对水平或x轴坐标和一对垂直或y轴坐标限定的。还针对所关注区域指定经编程值(例如,待呈现或提供于所关注区域内的预期值)。经编程值由系统的用户、系统的编程者、系统的制造商或任何其它合适的一方指定。在一些实施方案中,经编程值例如为预期所关注区域中所呈现的颜色。
在至少一些实施方案中,设备拦截或以其它方式接收视频流且对所关注区域进行取样以确定表示所关注区域的取样值。将取样值与经编程值进行比较以确定如所关注区域中所呈现的视频流的准确性。在至少一些实例中,如果取样值不匹配经编程值,或不在经编程值的预定义容限范围内,那么设备产生错误信号。在一些实例中,错误信号为中断信号,所述中断信号经配置以基于错误信号的存在而修改视频流目的地的操作。在一些实施方案中,响应于设备产生一个错误信号,修改视频流目的地的操作。在其它实例中,设备对所产生的错误信号的数目进行计数,且响应于数目超出预编程阈值而修改视频流目的地的操作。在一些实例中,阈值连同所关注区域和经编程值一起编程。在其它实例中,由设备或包含设备的系统的用户在或大约在运行时提供阈值。经修改视频流目的地的操作的至少一些实例包含所关注区域填有经编程符号、形状或彩色像素群组。
图1为展示包含适于在系统100的串行链接的装置之间选择性地转发信息的系统100的示例车辆的图式。一般来说,系统100为包含主车辆110的示例系统。示例多个显示系统120可安装在主车辆110中。示例多个显示系统120可包含呈串行链的任何数目个显示器,所述串行链的一端可连接到控制单元。
示例多个显示系统120可包含控制单元(例如,主机单元122)、第一显示器(例如,仪表板显示器CLUSTER 124)、第二显示器(例如,抬头显示器HUD 126)和第三显示器(例如,中央仪表显示器CID 128)。示例多个显示系统120可包含一或多个主机单元122。主机单元122适于(例如,从相机或仪表传感器)接收传感器数据或其它数据(例如,地图和/或GPS信息)且响应于此数据产生视频流。每一主机单元122可传输至少一个所产生的视频流,所述视频流中的每一个可由多流产生器123接收。
多流产生器(MG)123可具有耦合到主机单元122(例如,可由其包含)的输入(例如,视频输入),且可具有耦合到(例如,经由电缆133)分流器125的输入的输出。在实例中,多流产生器123可从相应主机单元122接收视频流。在一些实例中,多流产生器123可从至少一个主机单元122接收视频流(例如,使得可由主机单元122产生一或多个视频流以用于由多流产生器123进行集流)。
分流器(SD)125可具有耦合到显示器CLUSTER 124(例如,可由其包含)的第一输出(例如,本地输出),且可具有耦合到(例如,经由电缆135)分流器127的输入的第二输出(例如,系统输出)。
分流器127可具有耦合到显示器HUD 126(例如,可由其包含)的第一输出(例如,本地输出),且可具有耦合到(例如,经由电缆137)分流器129的输入的第二输出(例如,系统输出)。
分流器129可具有耦合到显示器CID 128(例如,可由其包含)的第一输出(例如,本地输出),且可具有任选地耦合到(例如,经由另一电缆,未展示)任选分流器(未展示)的输入的第二输出(例如,系统输出)以供显示。可将其它分流器连续串接到连接串行链接的显示器的串行链的尾部(例如,其中串行链的尾部与连接到主机单元122的串行链的末端相反)。
多流产生器123经布置以将高分辨率实时视频数据(包含视频相关数据)编码成包格式。多流产生器123可布置为串行器(例如,其适于连续输出视频数据,其中视频数据可由多流产生器123以串行或并行格式异步接收)和/或可经布置以并行方式输出视频数据。每一包可包含用于识别正经编码的特定视频流和/或用于识别包的目的地(例如,识别包寻址到的显示器)的标识符(例如,流标识符)。可根据与相应分流器相关联的模式(例如,默认或编程配置)通过分流器(例如,分流器125、127和/或129中的任一个)来解析标识符。每一包由至少一个分流器(例如,分流器125、127和/或129中的任一个)接收以用于转发(和/或解码/反串行化)。
分流器(例如,125、127和/或129)经布置以接收包(例如,其具有用于指示目的地显示器的标识符),且在分流器第一输出(例如,用于将信息耦合到本地耦合的显示器的本地输出)与分流器第二输出(例如,用于将信息转发到至少一个其它分流器的系统输出)之间进行选择。
在至少一些实施方案中,流校验器130耦合在分流器125与显示器CLUSTER124之间,流校验器131耦合在分流器127与显示器HUD 126之间,和/或流校验器132耦合在分流器129与显示器CID 128之间。出于本文中的描述起见,描述流校验器130。然而,在至少一些实例中,流校验器131、流校验器132和耦合在其它分流器与其它串行链接的显示器之间的其它流校验器(未展示)的操作大体上类似于流校验器130。在至少一些实施方案中,流校验器130拦截由分流器125的第一输出输出的视频流,且基于如上文所描述的各所关注区域、经编程值和经编程容限阈值校验视频流。基于校验结果,流校验器130将视频输出到显示器CLUSTER 124。在一些实例中,由流校验器130输出到显示器CLUSTER 124的视频与由流校验器130从分流器125接收到的视频相同。在其它实例中,由流校验器130输出到显示器CLUSTER 124的视频由流校验器130产生。在一些实施方案中,由流校验器130输出的视频指示由流校验器130从分流器125接收到的视频中的错误的数目已超出经编程容限阈值。下文参考图3进一步描述流校验器130的操作。
图2为用于视频分发的示例系统200的图式。一般来说,系统200为其中产生或接收视频且将其传输到装置以供显示或呈现的任何系统。
在至少一些实例中,系统200包含视频产生装置202和视频呈现装置204。系统200进一步包含以内嵌方式耦合在视频产生装置202与视频呈现装置204之间的视频校验器206。视频产生装置202为能够产生视频流或一系列静态图像帧的任何装置,其范围在本文中不受限制。视频呈现装置204为能够显示或呈现视频流或一系列静态图像帧的任何装置,其范围在本文中不受限制。
视频产生装置202的实例包含相机、计算装置、处理器或能够以任何方式且基于任何输入产生视频或静态图像的任何其它装置或组件。视频呈现装置204的实例包含显示屏幕(例如,发光二极管(LED)、液晶显示器(LCD)等)、投影仪、触摸屏、大型显示器(例如,布置到拼接以形成显示器的面板中的多个LED)、车辆平视显示器、车辆仪表板或仪表盘显示器,或能够以任何方式显示或呈现视频或静态图像而不管所述视频或那些静态图像的来源的任何其它装置或组件。
在至少一些实施方案中,视频校验器206拦截、解析、读取或以其它方式接收由视频产生装置202输出的视频流(或一系列静态图像),且基于如上文所描述的各所关注区域、经编程值和经编程容限阈值校验视频流。基于校验结果,视频校验器206将视频输出到视频呈现装置204。在一些实例中,由视频校验器206输出到视频呈现装置204的视频与由视频校验器206从视频产生装置202接收到的视频相同。在其它实例中,由视频校验器206输出到视频呈现装置204的视频由视频校验器206产生。在一些实施方案中,由视频校验器206输出的视频指示由视频校验器206从分流器125接收到的视频中的错误的数目已超出经编程容限阈值。下文参考图3进一步描述视频校验器206的操作。
虽然在一些实例中视频产生装置202、视频呈现装置204和视频校验器206中的至少一些实施为在物理上分离的装置,但在其它实例中,视频产生装置202、视频呈现装置204和视频校验器206中的至少一些实施于同一装置中。举例来说,在至少一个实施方案中,视频产生装置202为计算装置的处理器,视频呈现装置204为计算装置的图形卡或显示器,且视频校验器206实施于内嵌在计算装置的处理器与计算装置的图形卡或显示器之间的计算装置内。
图3为展示用于校验视频的准确性的示例视频校验器300的图式。在至少一些实例中,视频校验器300适用于实施为图1的流校验器130、流校验器131和/或流校验器132,和/或图2的视频校验器206。在一些实例中,视频校验器300接收视频内容(或静态图像)作为输入且提供视频内容作为输出。为了简单起见,如本文所使用,术语“视频内容”包含视频内容和静态图像两者。在一些实例中,由视频校验器300输出的视频内容等同于或包含由视频校验器300接收的视频内容。在其它实例中,由视频校验器300输出的视频内容由视频校验器300产生且不包含由视频校验器300接收的视频内容。在另外其它实例中,由视频校验器300输出的视频内容为由视频校验器300产生的视频且与由视频校验器300接收的视频内容组合。
在一些实例中,视频校验器300包含输入装置310。输入装置310包含使视频校验器300能够接收视频内容的任何连接、端子、传感器或其它组件。在一些实例中,输入装置310中的至少一些为耦合到收发器(Tx/Rx)320的下游端口,所述收发器为发射器、接收器或其组合。Tx/Rx 320经由输入装置310中的至少一些将数据传输到其它计算装置和/或从其它计算装置接收数据。类似地,视频校验器300包含多个输出装置340。输出装置340包含使视频校验器300能够传输视频内容的任何连接、端子、传感器或其它组件。在一些实例中,输入装置310中的至少一些为耦合到Tx/Rx 320的上游端口。Tx/Rx320经由Tx/Rx 320中的至少一些将数据传输到其它装置和/或从其它装置接收数据。在各种实例中,下游端口和/或上游端口包含电和/或光学传输和/或接收组件。在另一实例中,视频校验器300包含耦合到Tx/Rx 320的天线(未展示)。在一些实例中,Tx/Rx 320经由天线以无线方式传输数据和/或从其它装置接收数据。在另外其它实例中,视频校验器300包含额外Tx/Rx 320,使得视频校验器300具有多个联网或通信接口。
处理器330耦合到Tx/Rx 320和输入装置310和/或输出装置340中的至少一些,且实施可执行指令以例如经由视频校验可执行指令360执行如本文中所描述的视频校验(其可包含图像校验)。在实例中,处理器330包括多核处理器和/或存储器模块350,其充当数据存储器、缓冲器等。处理器330实施为通用处理器或专用集成电路(ASIC)、现场可编程门阵列(FPGA)和/或数字信号处理器(DSP)的部分。尽管示为单一处理器,但处理器330并不限于此,且可替代性地包含多个处理器。
图3还示出存储器模块350耦合到处理器330且为存储各种类型的数据的非暂时性媒体。存储器模块350包括例如只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动器、固态硬盘、数字存储元件(例如,触发器)和/或快闪存储器等存储器装置。在一些实例中,ROM用于存储在程序执行期间被读取的指令和可能的数据。ROM为非易失性存储器装置,相较于其它存储装置的较大存储器容量,其具有较小的存储器容量。在一些实例中,RAM用于存储易失性数据并且可能用于存储指令。
在一些实例中,存储器模块350包含用于执行本文中所描述的各种实例的指令。举例来说,在一些实施方案中,存储器模块350包含视频校验可执行指令360,所述视频校验可执行指令由处理器330执行。
通过将可执行指令编程和/或加载到视频校验器300上,处理器330和/或存储器模块350中的至少一个发生改变,在某种程度上将视频校验器300变换为特定机器或设备,例如具有由本说明书教示的功能的视频校验装置。
视频校验可执行指令360经配置以使视频校验器300将对应于所接收视频内容的所关注区域的值与经编程值进行比较,以校验所接收视频内容。举例来说,视频校验器300从一或多个用户接收输入以对视频校验器300的操作参数进行编程。在各种实例中,操作参数包含所接收视频内容的所关注区域、用于与所关注区域中发现的值进行比较的经编程值和/或经编程容限阈值。
在一些实例中,所关注区域从用户接收,作为就两个或更多个维度(例如,沿着x轴、y轴及/或z轴)中的笛卡尔坐标而言定义的输入。在一些实例中,经编程值从用户接收,作为限定预期存在于所关注区域中的视频特性的输入。在各种实例中,视频特性为颜色(例如,由十六进制值、红-绿-蓝值或任何其它合适的值定义)、所关注区域中不同于其它像素的像素百分比(例如,一种颜色的像素相比于另一种颜色),或指定预期存在于所关注区域中的视频内容或数据(在视频内容准确的情况下)的特性的任何其它合适值。在一些实例中,经编程容限阈值为视频内容的所关注区域的取样值与所接收视频内容中的经编程值或错误之间的失配的阈值数目,随后视频校验器300响应于失配而触发动作。
所关注区域、经编程值和/或经编程容限阈值中的一或多个在或大约在视频校验器300实施于系统中(例如,通过系统的制造商或校准器而非系统的终端用户)时编程到视频校验器300。在其它实例中,所关注区域、经编程值和/或经编程容限阈值中的一或多个在或大约在视频校验器300用于系统中(例如,通过系统的终端用户而非系统的制造商或校准器)时编程到视频校验器300。在一些实例中,所关注区域、经编程值和/或经编程容限阈值中的任何一或多个为存储在处理器330的寄存器中的值。在其它实例中,所关注区域、经编程值和/或经编程容限阈值中的任何一或多个为存储在存储器模块350中的值。
在操作中,视频校验器300经由输入装置310从另一装置接收视频内容。在一些实例中,视频校验器300经由处理器330经由输出装置340将所接收视频内容传输到另一装置,例如显示器或呈现装置。在至少一些实例中,在将所接收视频内容传输到另一装置之前或同时,处理器330根据视频校验可执行指令360分析所接收视频内容。视频校验可执行指令360使处理器330针对多个依序视频帧(或静态图像)对所关注区域内的所接收视频内容进行取样。对任何合适数目的依序视频帧(或静态图像)进行取样,其范围在本文中不受限制。在至少一些实例中,对十个依序视频帧进行取样。在一些实例中,对于每一取样视频帧,样本在所关注区域内具有相同像素或位置。在其它实例中,对于每一取样视频帧,样本在所关注区域内具有随机选择的像素或位置。在至少一些实例中,对所接收视频内容进行取样产生或检测所接收视频内容的每一取样视频帧的取样值。
处理器330进一步将取样值与经编程值进行比较。在一些实例中,如果所接收视频内容准确(例如,所接收视频内容的所关注区域中不存在错误),那么经编程值表示预期存在于所关注区域中的数据。如果取样值不同于经编程值,那么处理器330递增检测到的错误的计数器。如果检测到的错误的计数器的值超出经编程容限阈值,那么处理器330修改视频校验器300的输出。在一些实例中,修改视频校验器300的输出包含产生视频内容且将所接收视频内容与所产生视频内容叠加以形成复合视频内容,随后经由输出装置340传输复合视频内容。在其它实例中,修改视频校验器300的输出包含产生视频内容、经由输出装置340传输所产生视频内容代替所接收视频内容。在至少一些实例中,在检测到的错误的计数器的值超出经编程容限阈值的情况下,视频校验器300进一步将通知传输到另一装置或组件。在一些实例中,处理器330响应于检测到的错误的计数器的值超出经编程容限阈值而发布中断,且在一些实例中,处理器330响应于中断的发布而修改视频校验器300的输出。
图4为用于视频校验的示例方法400的流程图。在至少一些实例中,方法400由视频校验器,例如图3的视频校验器300,或功能类似于或包含视频校验器300的功能的另一处理装置实施。在一些实例中,实施方法400以校验所接收视频内容的所关注区域中的数据的准确性,以确定所接收视频内容的所关注区域中是否存在错误。
在操作402处,接收用户输入。在一些实例中,用户输入为用于校验所接收视频内容的值。举例来说,用户输入包含所关注区域、经编程值和经编程容限阈值,如上文所描述。在一些实例中,用户输入可包含在系统的制造/测试期间存储于存储器中的信息/数据。在其它实施例中,用户输入可包含系统(例如,车辆)制造商经由存储器上传或其它类型的上传(无线或有线)上传到系统的信息/数据。
在操作404处,接收包括多个帧的视频流。从任何合适的源,例如车辆主机单元、车辆中的另一计算装置、处理器、相机或能够提供视频流的任何其它合适的装置接收视频流。
在操作406处,分析视频流。举例来说,分析视频流以确定表示帧中的第一个中的指定位置处的图像像素的数据值。在至少一些实例中,指定位置在操作402处接收到的所关注区域内。将表示帧中的第一个中的指定位置处的图像像素的数据值与帧中的第一个中的指定位置处的图像像素的经编程数据值进行比较。经编程数据值为在操作402处接收到的用户输入或包含在其中。如果表示帧中的第一个中的指定位置处的图像像素的数据值被认为与帧中的第一个中的指定位置处的图像像素的经编程数据值匹配,那么方法400返回到操作404且接收视频流的额外帧以供分析。如果表示帧中的第一个中的指定位置处的图像像素的数据值被认为与帧中的第一个中的指定位置处的图像像素的经编程数据值不匹配,那么方法400进行到操作408。
在操作408处,确定视频流包含不正确数据。举例来说,如果表示帧中的第一个中的指定位置处的图像像素的数据值不同于帧中的第一个中的指定位置处的图像像素的经编程(例如,预期)数据值,那么确定视频流包含不正确数据。在其它实例中,如果表示帧中的某一序数中的指定位置处的图像像素的数据值不同于帧中的所述序数中的指定位置处的图像像素的经编程数据值且帧的数目超出经编程容限阈值,那么确定视频流包含不正确数据。
在操作410处,响应于确定视频流包含不正确数据而采取动作。在一些实例中,动作为以下中的一或多个:重置视频流(或产生视频流的分量)、修改视频流及/或产生指示视频流包含不正确数据的中断信号。
虽然已经描述且用数字参考标注本文中所描述的方法400的操作,但在各种实例中,方法400包含本文中未叙述的额外操作。在一些实例中,本文中所叙述的操作中的任何一或多个包含一或多个子操作。在一些实例中,省略本文中所叙述的操作中的任何一或多个。在一些实例中,按除本文中呈现的顺序之外的顺序(例如,按逆向顺序、大体上同时、重叠等)执行本文中所叙述的操作中的任何一或多个。这些替代方案中的每一个处于本说明书的范围内。
图5为展示用于校验视频的准确性的示例视频校验器500的图式。在至少一些实例中,视频校验器500适用于实施为图1的流校验器130、流校验器131和/或流校验器132,和/或图2的视频校验器206。在至少一些实例中,虽然图3的视频校验器300基于软件实施方案执行视频校验,但视频校验器500基于硬件实施方案执行视频校验。在一些使用情况下,硬件实施方案具有优于软件实施方案的某些益处,例如速度增大、实施方案大小减小等。在其它实例中,软件实施方案具有优于硬件实施方案的某些益处,例如灵活性、再编程和改变的能力等。
在一些实例中,视频校验器500接收视频内容作为输入且提供通过或失败的校验确定。在至少一些实例中,确定通过指示所接收内容的取样或检查区域的数据匹配所述区域的预期或经编程数据。类似地,在至少一些实例中,确定失败指示所接收内容的取样或检查区域的数据不匹配所述区域的预期或经编程数据。在视频校验器500的一些实施方案中,通过由视频校验器500提供具有断言值的输出信号来提供通过的校验确定。类似地,可通过由视频校验器500提供具有解除断言值的输出信号来提供失败的校验确定。在至少一些实例中,视频校验器500将校验确定提供到基于校验确定执行进一步动作的另一装置(未展示)。在一些实施方案中,视频校验器500将校验确定提供到处理器,例如车辆主机单元或其它处理器,所述处理器基于校验确定修改对用户的一或多个视觉呈现。举例来说,如果校验确定失败,那么在一些实施方案中,响应于接收到校验确定,处理器修改或加强呈现给用户的图像以指示图像并不可靠和/或准确。此类指示或视觉输出提示可包含改变图像的颜色、将其它图形叠加在图像的顶部上、替换图像等。
在至少一些实例中,视频校验器500包含逻辑电路502、计数器504、逻辑电路506、寄存器508、逻辑电路510和寄存器512。在视频校验器500的至少一个实施方案中,逻辑电路502经配置以接收像素时钟(PCLK)和显示器使能信号(DE)。将逻辑电路502的输出信号提供到计数器504,且将计数器504的输出信号提供到逻辑电路506。逻辑电路506还经配置以从寄存器508接收输入信号。逻辑电路506将输出信号提供到逻辑电路510。逻辑电路510还经配置以接收图像像素数据(RGB)以供校验,且从寄存器512接收经编程或预期图像数据。
在至少一些实例中,逻辑电路502为能够执行逻辑AND操作的电路,例如AND数字逻辑门或适用于提供类似功能的其它数字或模拟电路系统。逻辑电路506可为能够执行逻辑比较的电路,例如能够执行XNOR操作的电路。举例来说,逻辑电路506可为一或多个XNOR数字逻辑门或适用于提供类似功能的其它数字或模拟电路系统。逻辑电路510可为能够执行逻辑比较的电路,例如能够执行XNOR操作的电路。举例来说,逻辑电路510可为一或多个XNOR数字逻辑门或适用于提供类似功能的其它数字或模拟电路系统。虽然在视频校验器500的组件之间展示单个信号线,但在一些实施方案中,信号线中的至少一些重复和/或为总线,使得并行地传输和/或接收多个数据位以有助于并行处理。
在视频校验器500的操作的实例中,逻辑电路502响应于PCLK和DE两者都具有断言值而提供具有断言值的输出信号。否则,逻辑电路502提供具有解除断言值的输出信号。在至少一些实例中,PCLK为周期性信号,使得逻辑电路502的输出信号也可以是周期性信号。如上文所描述,视频校验器500可确定特定所关注区域的RGB是否具有预期值或经编程值。同样如上文所描述,所关注区域可由笛卡尔坐标定义,垂直方向上沿着y轴且水平方向上沿着x轴。举例来说,DE可具有断言值,而由视频校验器500接收到的RGB数据来自所关注区域内的一排(例如,具有单个y轴值的沿着x轴的一行像素)。响应于DE和PCLK两者都被断言,逻辑电路502提供具有断言值的输出信号,且计数器504递增内部存储计数。在至少一些实例中,计数器504可响应于逻辑电路502的输出信号中的每一信号边沿(例如,上升边沿或下降边沿)递增内部存储计数。在一些实例中,内部存储计数表示给定一排内的RGB数据的特定像素。尽管图5中未展示,但在至少一些实例中,计数器504可响应于DE具有解除断言值而重置,且可响应于DE具有断言值而准许计数(例如,不保持在重置状态中)。在其它实例中,计数器504可基于或根据任何合适的信号而重置。
逻辑电路506可将计数器504的输出与从寄存器508接收的值进行比较。在至少一些实例中,从寄存器508接收的值为表示所关注区域的边界的经编程值。在至少一些实例中,视频校验器500包含多个寄存器508,其中每一寄存器508包含表示所关注区域的拐点或顶点的x轴值。逻辑电路506可响应于计数器504的输出的值与从寄存器508接收的值相同而提供具有断言值的输出信号(例如,compare_start),否则可提供具有解除断言值的compare_start。举例来说,所关注区域可由点y1,x1;y1,x2;y2,x1和y2,x2限定。响应于RGB对应于在[y1:y2]范围内的线,DE可具有断言值。响应于计数器504的输出的值在[x1:x2]范围内,compare_start可具有断言值。
响应于compare_start具有断言值,逻辑电路510可将RGB与寄存器512的输出进行比较。在至少一些实例中,从寄存器512接收的值为表示RGB的特定像素的预期或经编程值的经编程值,所述特定像素对应于由计数器504的输出识别的像素。在至少一些实例中,视频校验器500包含多个寄存器512,其中每一寄存器512包含表示RGB的特定相应像素的预期或经编程值的数据,使得可检查或校验RGB的多个像素。响应于从寄存器512接收的值与所接收图像数据的特定像素的RGB具有相同值(例如,当断言compare_start时),逻辑电路510可提供断言输出信号。否则,逻辑电路510的输出信号可具有解除断言值。
尽管图5中未展示,但在至少一些实例中,视频校验器500包含一定程度的容错性。举例来说,视频校验器500的一些实施方案包含计数器,所述计数器经配置以对逻辑电路510的输出中的故障实例的数目进行计数。响应于逻辑电路510的输出信号中的故障实例的数目超出经编程数目,计数器可提供断言信号。替代地,在一些实例中,接收逻辑电路510的输出信号的装置实施容错性,例如,在连续或累积的故障数目超出经编程数目之前一直不响应于逻辑电路510的输出信号指示故障而行动。
基于确定RGB数据被冻结,可执行各种动作。举例来说,可发布中断,可将视觉输出提示或指示符提供给用户(例如,在冻结RGB数据上叠加、改变RGB数据的颜色等)。
本说明书的至少一些方面可参考2021年4月30日申请的名称为“冻结图像检测(Frozen Image Detection)”的编号为17/245,394号、代理人案号为T92495US01的美国专利申请的各方面进一步理解,且可并有所述美国专利申请的各方面,所述美国专利申请的全部内容以引用的方式并入本文中。
在前述说明书和权利要求书中,术语“包含”和“包括”以开放方式使用,且因此意味着“包含但不限于……”。贯穿本说明书使用术语“耦合”。术语可涵盖实现与本说明书的描述一致的功能关系的连接、通信或信号路径。举例来说,在第一实例中,如果装置A针对控制装置B产生信号以执行动作,那么装置A耦合到装置B,或在第二实例中,如果中间组件C大体上没有改变装置A与装置B之间的功能关系,使得装置B由装置A经由装置A产生的控制信号控制,那么装置A通过中间组件C耦合到装置B。
“经配置以”进行任务或功能的元件或特征可在由制造商制造时经配置(例如,编程或结构上经设计)以进行所述功能,和/或可在制造之后由用户配置(或重新配置)以进行所述功能和/或其它额外或替代功能。配置可为通过装置的固件和/或软件编程、通过装置的硬件组件和互连的构造和/或布局,或其组合。此外,词组“接地”或类似内容在前述描述中的使用包含底座接地、地线接地、浮动接地、虚拟接地、数字接地、通用接地,和/或适用于或适于本说明书的教示的任何其它接地连接形式。除非另外陈述,否则值前面的“约”、“大约”或“大体上”意味着所陈述值的+/-10%。
如本文所使用,术语“端子”、“节点”“互连”、“引脚”和“引线”可互换地使用。除非特别说明为相反,否则这些术语通常用于意指装置元件、电路元件、集成电路、装置或其它电子装置或半导体组件之间的互连或它们的末端。
本文中描述为包含某些组件的电路或装置可实际上适于耦合到那些组件以形成所描述的电路系统或装置。举例来说,被描述为包含一或多个半导体元件(例如,晶体管)、一或多个无源元件(例如,电阻器、电容器和/或电感器)和/或一或多个源(例如,电压源和/或电流源)的结构可实际上仅包含单个物理装置(例如,半导体裸片和/或集成电路(IC)封装)内的半导体元件,且可适于耦合到至少一些所述无源元件和/或源以在制造时或在制造之后例如由终端用户和/或第三方形成所描述结构。本文中所描述的电路可重新配置以包含替换的组件以提供至少部分类似于组件替换之前可用的功能的功能。
在所描述实例中可以进行修改,并且在权利要求书的范围内可具有其它实例。

Claims (20)

1.一种电路,其包括:
存储器;以及
处理器,其耦合到所述存储器且经配置以:
接收包括视频的数据流,所述视频包括多个帧;
将表示所述帧中的第一个中的指定位置处的图像像素的数据值与所述帧中的所述第一个中的所述指定位置处的所述图像像素的经编程数据值进行比较;以及
响应于表示所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述数据值不同于所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述经编程数据值,确定所述数据流包含不正确数据。
2.根据权利要求1所述的电路,其中所述处理器进一步经配置以响应于确定所述数据流包含不正确数据而采取动作。
3.根据权利要求2所述的电路,其中所述动作包括产生中断。
4.根据权利要求2所述的电路,其中所述动作包括产生视觉输出提示,所述视觉输出提示指示所述数据流包含不正确数据的所述确定。
5.根据权利要求2所述的电路,其中所述动作包括通过修改所述数据流来覆写所述视频的至少一部分。
6.根据权利要求1所述的电路,其中所述指定位置由所述处理器根据经编程区域内的像素的随机取样来确定。
7.根据权利要求6所述的电路,其中所述经编程区域由所述处理器接收,作为指定限定所述区域的水平和垂直坐标的输入。
8.根据权利要求1所述的电路,其进一步包括:
图像产生器,其经配置以产生并输出所述数据流;以及
接收器,其经配置以接收并对所述数据流进行解码以显示所述视频。
9.根据权利要求1所述的电路,其中所述处理器进一步经配置以响应于确定所述视频包含不正确数据而修改所述数据流以创建包括经修改视频的经修改数据流,且其中所述电路进一步包括:
图像产生器,其经配置以产生并输出所述数据流;以及
接收器,其经配置以接收并对所述经修改数据流进行解码以显示所述经修改视频。
10.根据权利要求9所述的电路,其中所述处理器进一步经配置以响应于确定所述视频包含不正确数据而产生并输出指示符,所述指示符指示所述视频包含不正确数据,且其中所述电路进一步包括:
图像产生器,其经配置以产生并输出所述数据流;以及
接收器,其经配置以:
接收并对所述数据流进行解码以显示所述视频;
接收所述指示符;以及
基于所述指示符修改所述视频的显示。
11.根据权利要求1所述的电路,其中所述处理器进一步经配置以:
将表示所述帧中的第一个中的多个位置处的图像像素的数据值与所述帧中的第二个中的位置处的图像像素的经编程数据值进行比较;以及
响应于所述帧中的所述第一个中的所述位置处的所述图像像素的经编程容限阈值数目的数据值不同于所述帧中的所述第一个中的所述位置处的所述图像像素的所述经编程容限阈值数目的经编程数据值,确定所述数据流包含不正确数据。
12.根据权利要求1所述的电路,其中所述处理器进一步经配置以响应于表示所述多个帧中的某一数目个帧中的指定位置处的图像像素的数据值不同于所述多个帧中的所述数目个帧中的所述指定位置处的所述图像像素的经编程数据值且所述多个帧的所述数目超出帧的阈值数目,确定所述数据流包含不正确数据。
13.一种系统,其包括:
主机单元,其适于产生各自包括多个帧的至少两个视频流;
多流产生器,其耦合到所述主机单元且经配置以产生具有经编码包的所述多流产生器的输出,所述经编码包包含来自所述至少两个视频流的信息;以及
图像验证器,其经配置以:
接收所述多流产生器的所述输出;
分析所述多流产生器的所述输出,以将表示所述帧中的第一个中的指定位置处的图像像素的数据值与所述多个帧中的第一个中的指定位置处的图像像素的经编程数据值进行比较;以及
响应于表示所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述数据值不同于所述多个帧中的所述第一个中的所述指定位置处的所述图像像素的所述经编程数据值,确定所述多流产生器的所述输出包含不正确数据。
14.根据权利要求13所述的系统,其进一步包括:
第一分流器,其具有经配置以接收所述多流产生器的所述输出的第一流输入,所述第一分流器具有经配置以耦合到第一显示器以显示所述视频流中的第一视频流的第一输出,且所述第一分流器具有经配置以转发所述多流产生器的所述输出的第二输出;以及
第二分流器,其具有耦合到所述第一分流器的所述第二输出的第二流输入,所述第二分流器具有经配置以耦合到第二显示器以显示所述视频流中的第二视频流的第一输出。
15.根据权利要求14所述的系统,其中响应于确定所述多流产生器的所述输出包含不正确数据,所述图像验证器进一步经配置以在由所述第一分流器接收所述多流产生器的所述输出之前修改所述多流产生器的所述输出。
16.根据权利要求14所述的系统,其中响应于确定所述多流产生器的所述输出包含不正确数据,所述图像验证器进一步经配置以产生并输出指示所述多流产生器的所述输出包含不正确数据的中断。
17.根据权利要求16所述的系统,其中所述第一分流器或所述第二分流器中的一个进一步经配置以基于所述中断修改输出。
18.一种方法,其包括:
接收包括多个帧的视频流;
分析所述视频流,以将表示所述帧中的第一个中的指定位置处的图像像素的数据值与所述帧中的所述第一个中的所述指定位置处的所述图像像素的经编程数据值进行比较;
响应于表示所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述数据值不同于所述帧中的所述第一个中的所述指定位置处的所述图像像素的所述经编程数据值,确定所述视频流包含不正确数据;以及
响应于确定所述视频流包含不正确数据而采取动作。
19.根据权利要求18所述的方法,其中响应于确定所述视频流包含不正确数据而采取的所述动作包括以下中的一个:重置所述视频流、修改所述视频流,或产生指示所述视频流包含不正确数据的中断信号。
20.根据权利要求18所述的方法,其进一步包括响应于表示所述帧中的某一数目个帧中的指定位置处的图像像素的数据值不同于所述帧中的所述数目个帧中的所述指定位置处的所述图像像素的经编程数据值且所述帧的所述数目超出经编程容限阈值,确定所述视频流包含不正确数据。
CN202280031429.XA 2021-04-30 2022-04-29 视频准确性校验 Pending CN117242771A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US17/245,336 US20220353490A1 (en) 2021-04-30 2021-04-30 Video accuracy verification
US17/245,336 2021-04-30
PCT/US2022/026885 WO2022232476A1 (en) 2021-04-30 2022-04-29 Video accuracy verification

Publications (1)

Publication Number Publication Date
CN117242771A true CN117242771A (zh) 2023-12-15

Family

ID=83807967

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280031429.XA Pending CN117242771A (zh) 2021-04-30 2022-04-29 视频准确性校验

Country Status (4)

Country Link
US (1) US20220353490A1 (zh)
EP (1) EP4331230A1 (zh)
CN (1) CN117242771A (zh)
WO (1) WO2022232476A1 (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060072174A (ko) * 2004-12-22 2006-06-28 삼성전자주식회사 디스플레이 데이터 전송 장치 및 디스플레이 데이터 전송방법
US8564669B2 (en) * 2009-07-30 2013-10-22 General Instrument Corporation System and method of analyzing video streams for detecting black/snow or freeze
US10078551B2 (en) * 2013-07-15 2018-09-18 Texas Instruments Incorporated Streaming engine with error detection, correction and restart
JP6985915B2 (ja) * 2017-12-15 2021-12-22 日本放送協会 デコードエラー検出推定装置、映像復号装置、及びこれらのプログラム
JP7017207B2 (ja) * 2018-06-12 2022-02-08 アイレック技建株式会社 画像検査装置及び、その画像検査方法
DE102018125091A1 (de) * 2018-10-10 2020-04-16 Motherson Innovations Company Limited Vorrichtung zur Bildrahmenerfassung, Erkennung eingefrorener Bildrahmen, Systeme zur Erkennung eingefrorener Bildrahmen, Verfahren und Fahrzeug
US10904478B2 (en) * 2019-05-23 2021-01-26 Texas Instruments Incorporated Selected forwarding between serially chained devices

Also Published As

Publication number Publication date
US20220353490A1 (en) 2022-11-03
EP4331230A1 (en) 2024-03-06
WO2022232476A1 (en) 2022-11-03

Similar Documents

Publication Publication Date Title
US20200274731A1 (en) Monitoring controller area network (can) nodes
CN100367045C (zh) 基于二分法的电路连线导通测试方法
US7082357B2 (en) Failure diagnosis method of vehicle communication network
US9958318B2 (en) Apparatus and method for checking the integrity of visual display information
US20080294939A1 (en) Debugging device and method using the lpc/pci bus
US20090265590A1 (en) Method And System For Testing The Compliance Of PCIE Expansion Systems
US9952280B2 (en) Electronic device with chip-on-film package
US20100079151A1 (en) Automatic test equipment self test
US20160173344A1 (en) Monitoring and diagnosis of a control device
US10613963B2 (en) Intelligent packet analyzer circuits, systems, and methods
CN117242771A (zh) 视频准确性校验
CN104281258A (zh) 使用图像捕获设备调整透明显示器
US8516176B1 (en) Gang programming of devices
JP2004252963A (ja) 車両用通信ネットワークの故障診断方法
CN117223278A (zh) 冻结图像检测
CN107731154B (zh) Led显示屏数据备份装置、方法及终端设备
CN111562998A (zh) 一种集成电路的内存诊断方法、诊断设备及存储介质
CN109995425B (zh) 一种测试设备通讯端口的方法和工装装置
US20140380111A1 (en) Testing system for serial interface
CN217982803U (zh) 显示测试装置和测试设备
Kragulj et al. One solution of complex ADAS HW system testing
US20090030624A1 (en) Systems and methods for validating power integrity of integrated circuits
JP7187564B2 (ja) 画像処理装置
US7587649B2 (en) Testing of reconfigurable logic and interconnect sources
CN204117136U (zh) 处理器模块检测装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination