CN112995656A - 用于图像处理电路的异常检测方法及系统 - Google Patents

用于图像处理电路的异常检测方法及系统 Download PDF

Info

Publication number
CN112995656A
CN112995656A CN202110241971.5A CN202110241971A CN112995656A CN 112995656 A CN112995656 A CN 112995656A CN 202110241971 A CN202110241971 A CN 202110241971A CN 112995656 A CN112995656 A CN 112995656A
Authority
CN
China
Prior art keywords
image
image processing
test
processing circuit
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110241971.5A
Other languages
English (en)
Other versions
CN112995656B (zh
Inventor
雷志杰
仇志强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Black Sesame Intelligent Technology Shanghai Co Ltd
Original Assignee
Black Sesame Intelligent Technology Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Black Sesame Intelligent Technology Shanghai Co Ltd filed Critical Black Sesame Intelligent Technology Shanghai Co Ltd
Priority to CN202110241971.5A priority Critical patent/CN112995656B/zh
Publication of CN112995656A publication Critical patent/CN112995656A/zh
Priority to US17/686,168 priority patent/US20220284704A1/en
Application granted granted Critical
Publication of CN112995656B publication Critical patent/CN112995656B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本申请涉及一种用于图像处理电路的异常检测方法和系统，该异常检测方法包括：生成测试图像，该测试图像遵循预定的图像配置规则；将测试图像提供给图像处理电路；将用于处理测试图像的第一图像处理参数提供给图像处理电路，其中第一图像处理参数是预先确定的；以及对经处理的测试图像进行检测，以判定图像处理电路是否存在异常，其中经处理的测试图像为图像处理电路基于第一图像处理参数对测试图像进行处理后输出的图像。通过该异常检测方法，可以实现对图像处理电路进行实时有效的监测，而且不会消耗的太多的资源。

Description

用于图像处理电路的异常检测方法及系统
技术领域
本申请涉及芯片功能安全性测试领域，尤其涉及一种用于图像处理电路的异常检测方法和系统。
背景技术
随着自动驾驶的发展，基于人工智能(Artificial Intelligence,AI)视觉的自动驾驶技术得到了越来越广泛的应用。图像处理电路(Image Signal Processor,ISP)是自动驾驶系统级芯片(System-on-Chip，SOC)的重要组成部分，它可以接收并处理车载相机的信号，并输出高质量的图像以供后续的AI视觉系统使用。图像处理电路能否长时间高效地提供高质量的图像信息已成为AI视觉自动驾驶技术的重要前提，因为一旦图像处理电路存在异常，将导致整个SOC芯片都无法正常使用，进而可能造成自动驾驶过程中发生安全事故。
当前，一般通过在芯片设计时在芯片中添加可测性设计(DFT)逻辑，然后在芯片制造完成后，通过利用事先加入的DFT逻辑对芯片进行测试来挑选出没有问题的芯片。然而，这种DFT技术无法做到在芯片使用时实时检测芯片是否正常运行，因此也无法实现对图像处理电路的功能安全性进行实时检测。
当前，还经常会利用奇偶校验或错误检测和纠正(即，Parity/ECC)技术或冗余设计技术来检测芯片中的错误，但是Parity/ECC仅能发现静态随机存取存储器(StaticRandom-Access Memory，SRAM)的错误，而无法检测芯片的逻辑错误，冗余设计则需要消耗较多的面积资源，并且成本较高。因此，这两种技术也都不适合用来对图像处理电路的功能安全性进行实时有效的监测。
因此，有必要提供一种用于图像处理电路的异常检测技术，使得可以对图像处理电路进行实时有效的监测，而且不会消耗的太多的资源。
发明内容
鉴于以上技术问题，本申请提供了一种用于图像处理电路的异常检测方法和系统，使得可以对图像处理电路进行实时有效的监测，而且不会消耗的太多的资源，例如面积资源。
在本申请的第一方面，提供了一种用于图像处理电路的异常检测方法，包括：生成测试图像，所述测试图像遵循预定的图像配置规则；将所述测试图像提供给图像处理电路；将用于处理所述测试图像的第一图像处理参数提供给所述图像处理电路，其中所述第一图像处理参数是预先确定的；以及对经处理的测试图像进行检测，以判定所述图像处理电路是否存在异常，其中所述经处理的测试图像为所述图像处理电路基于所述第一图像处理参数对所述测试图像进行处理后输出的图像。
在本申请的第二方面，提供了一种用于图像处理电路的异常检测系统，包括测试图像生成电路、图像选择电路、图像处理参数选择电路和异常检测电路；其中，所述测试图像生成电路被配置成生成测试图像，所述测试图像遵循预定的图像配置规则；所述图像选择电路被配置成接收正常图像以及由所述测试图像生成电路生成的所述测试图像，并且被配置成选择将正常图像或者所述测试图像提供给所述图像处理电路；所述图像处理参数选择电路被配置成接收用于处理所述测试图像的第一图像处理参数和用于处理所述正常图像的第二图像处理参数，并且被配置成选择将所述第一图像处理参数或者所述第二图像处理参数提供给所述图像处理电路，其中所述第一图像处理参数是预先确定的；所述异常检测电路被配置成从所述图像处理电路接收经处理的测试图像，并且被配置成对所述经处理的测试图像进行检测，以判定所述图像处理电路是否存在异常，其中所述经处理的测试图像为由所述图像处理电路基于所述第一图像处理参数对所述测试图像进行处理后输出的图像。
附图说明
图1示出了根据本申请的实施例的用于图像处理电路的异常检测方法的流程图；
图2示出了根据本申请的实施例的用于图像处理电路的异常检测系统的结构框图；
图3示出了根据本申请的一个实施例的异常检测电路的示意性框图；并且
图4示出了根据本申请的实施例的异常检测系统中的并行检测电路的应用示例的框图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似改进，因此本发明不受下面公开的具体实施例的限制。
在本说明书的描述中，术语“第一”和“第二”等仅用于对不同的技术特征进行区分，而不能理解为指示或暗示所指示技术特征的相对重要性或顺序。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在一个实施例中，本申请提供了一种用于图像处理电路的异常检测方法。如图1所示，该方法可包括步骤101-104。
在步骤101，生成测试图像，该测试图像遵循预定的图像配置规则。该预定的图像配置规则可包括例如图像的帧开始(Start of Frame,SOF)标志须设置在图像的帧结束(End of Frame,EOF)标志之前、图像的水平尺寸(Horizontal size,Hsize)和垂直尺寸(Vertical size,Vsize)须为8或16的整数倍、以及图像的水平消隐间隔(Hblank)须保持不变等。图像的水平尺寸(Horizontal size,Hsize)和垂直尺寸(Vertical size,Vsize)具体为8的整数倍还是16的整数倍取决于所需生成的测试图像的格式(例如，JPEG图像等)。另外，通常，一帧图像由水平消隐间隔分开的行信号序列构成，因此对于每一帧图像来说，无论其在被处理之前还是被处理之后，该图像的水平消隐间隔都应该是保持不变的。
在一种实现示例中，为了避免异常检测方法本身由于某种原因而产生测试逻辑错误，从而导致对图像处理电路的测试失败，因此在每次上电复位期间，即在任何正常图像被提供给图像处理电路之前，都需要对该异常检测方法的测试逻辑做自检测，以保证测试功能的正确性。具体地，在这种情况下，步骤101可包括在图像处理电路的上电复位期间，基于预先确定的图像配置参数(即，这时图像配置参数是固定的，其可存储在相应的寄存器中)生成测试图像。由于这时测试图像是固定的，并且如将在步骤103中提到的，用于处理该测试图像的第一图像处理参数是预先确定的(即固定的)，因此可以事先预期到图像处理电路基于该第一图像处理参数对该测试图像进行处理后会输出的图像，进而可以例如预期该输出图像的循环冗余校验值，随后基于该预期的循环冗余校验值即可判断出该异常检测方法的测试逻辑是否有逻辑错误。也就是说，在本申请中，通过在上电复位期间向图像处理电路提供固定的测试图像和固定的第一图像处理参数，可以实现对该异常检测方法的测试逻辑进行自检测的目的。
在另一实现示例中，为了实现对图像处理电路的实时异常检测，可以在每一帧正常图像处理结束后，下一帧正常图像来之前，都生成一帧测试图像(例如，由随后将结合图2描述的测试图像生成电路来生成)，并将该测试图像插在两帧正常输入图像之间提供给图像处理电路，以用于进行异常检测。具体地，对于任何两个相继到来的正常输入图像，步骤101可包括在第一正常图像已由图像处理电路处理，但第二正常图像尚未到达所述图像处理电路时，基于图像配置参数生成测试图像，其中图像配置参数是根据预定的图像配置规则以及第一正常图像到达所述图像处理电路的到达时间和所述第二正常图像到达所述图像处理电路的预期到达时间之间的时间间隔来配置的(例如，通过软件来进行配置)。由于图像配置参数可根据实际情况进行配置，因此可从一定角度提高该异常检测的灵活性和可信度。应了解，在本申请中，将在例如无人驾驶过程中由安装在车辆上的相机拍摄到并且需要由图像处理电路进行处理的图像均称为正常图像，其中第一正常图像可指示任何正常图像，并且第二正常图像可指示第一正常图像的下一帧正常图像。图像配置参数可包括测试图像的水平尺寸与垂直尺寸、测试图像的帧开始标志和帧结束标志的位置、经处理的测试图像的水平消隐间隔、以及与测试图像的数据流相关联的初始值。在这种情况下，以上提到的水平尺寸、垂直尺寸、帧开始标志和帧结束标志的位置、水平消隐间隔和初始值都是可配置的，具体地可根据预定的图像配置规则以及第一正常图像到达所述图像处理电路的到达时间和所述第二正常图像到达所述图像处理电路的预期到达时间之间的时间间隔来进行配置。在实际应用中，图像一般是通过数据流来表示的。在一种实现中，测试图像的数据流可以通过将以上提到的初始值与预设的步长进行累加得到，例如初始值设为0并且步长设为0x1的情况下，测试图像的数据流可以为0x0、0x1、……，最终生成的测试图像还应满足以上提到的图像配置规则。一般来说，对于任何特定的应用场景，任何两个正常图像到达图像处理电路的时间间隔被预先设置为是固定的，因此对于各应用场景而言，供插在任何两个正常图像之间提供给图像处理电路的任何测试图像都是相同的，因此无需在任何两个正常图像之间都生成测试图像，而是仅需在第一个正常图像和第二个正常图像之间生成测试图像，后续检测过程可直接应用该测试图像。
继续图1，在步骤102，将测试图像提供给图像处理电路。在一种实现中，将测试图像提供给图像处理单元可包括将测试图像提供给图像处理单元中的某个图像处理单元。
在步骤103，将用于处理测试图像的第一图像处理参数提供给图像处理电路，其中第一图像处理参数是预先确定的。在一种实现中，用于处理测试图像的第一图像处理参数所涉及的图像处理涉及图像处理单元中的所有图像处理单元，使得最终的异常检测结果能够比较准确反映整个图像处理电路的工作情况。
具体地，在步骤101具体为在图像处理电路上电复位期间，基于预先确定的图像配置参数生成测试图像的情况下，步骤103可以是将预先确定的第一图像处理参数直接提供给图像处理电路。该第一图像处理参数可存储在相应的寄存器中。
另外，在步骤101为在第一正常图像已由图像处理电路处理，但第二正常图像尚未到达所述图像处理电路时，基于图像配置参数生成测试图像的情况下，步骤103可包括将图像处理电路的图像处理参数从用于处理第一正常图像的第二图像处理参数切换为所述第一图像处理参数。例如，用于处理第一正常图像的第二图像处理参数和第一图像处理参数可分别存储在不同的寄存器中，在使用时可根据需要从不同的寄存器中获取相应的图像处理参数。
回到图1，在步骤104，对经处理的测试图像进行检测，以判定图像处理电路是否存在异常，其中经处理的测试图像为图像处理电路所述第一图像处理参数对测试图像进行处理后输出的图像。
在一种实现中，对经处理的测试图像进行检测包括对经处理的测试图像进行图像配置规则违反检测。该图像配置规则违反检测可包括：检查经处理的测试图像是否违反预定的图像配置规则，并且在经处理的测试图像违反预定的图像配置规则的情况下，判定图像处理电路存在异常。例如，如果经过检测发现，经处理的测试图像的EOF标志在SOF标志之前，则说明图像处理电路存在异常。又如，如果经过检测发现，经处理的测试图像的垂直尺寸或水平尺寸不是8或16的倍数，则说明图像处理电路也存在异常。再如，如果经过检测发现，经处理的测试图像的水平消隐间隔与测试图像的水平消隐间隔不一致，则说明图像处理电路也存在异常，由此可输出相应的错误指示信号。
图像处理电路一般可包括多个并行处理单元(例如不同曝光L/S/V的PreHDR处理单元)，每一处理单元都应实现相同的处理功能，因此有必要对这些并行处理单元的功能一致性进行检测(例如，参见图4)。因此，在另一实现中，将测试图像提供给图像处理电路包括将测试图像提供给图像处理电路的每一并行处理单元，因此经处理的测试图像包括经由每一并行处理单元处理后获得的多个经处理的测试图像。由此，对所述图像处理电路的输出图像进行检测包括对该多个经处理的测试图像进行并行检测，该并行检测可包括：将所述多个经处理的测试图像进行比较，并且当所述多个经处理的测试图像不一致时，判定所述图像处理电路存在异常，由此可输出相应的错误指示信号。
在又一实现中，对经处理的测试图像进行检测包括对经处理的测试图像进行循环冗余校验值(CRC)检测，该CRC检测可包括：计算经处理的测试图像的循环冗余校验值；将循环冗余校验值与预期的循环冗余校验值进行比较，其中该预期的循环冗余校验值是基于测试图像和第一图像处理参数确定的；以及在循环冗余校验值与预期的循环冗余校验值不一致的情况下，判定图像处理电路存在异常，由此可输出相应的错误指示信号。
值得一提的是，对经处理的测试图像进行检测可包括上面提到的图像配置规则违反检测、并行检测和循环冗余校验值检测中的一者或多者。
基于以上错误指示信号，SOC芯片的安全系统可以实时判断图像处理电路是否正常工作，从而可在自动驾驶时避免因为图像信息的异常而做出错误的指令，进而可避免造成安全事故。
在另一实施例中，如图2所示，提供了一种用于图像处理电路的异常检测系统。该异常检测系统包括测试图像生成电路201、图像选择电路202、图像处理参数选择电路203和异常检测电路204。由于异常检测系统仅需包括以上电路，因此其所消耗的面积资源较小。
测试图像生成电路201被配置成生成测试图像，该测试图像遵循预定的图像配置规则。如前面所提到过的，预定的图像配置规则可包括例如图像的帧开始(Start ofFrame,SOF)标志须设置在图像的帧结束(End of Frame,EOF)标志之前、图像的水平尺寸(Horizontal size,Hsize)和垂直尺寸(Vertical size,Vsize)须为8或16的整数倍、以及图像的水平消隐间隔(Hblank)须保持不变等。
图像选择电路202被配置成接收正常图像以及由测试图像生成电路生成的测试图像，并且被配置成选择将正常图像或者所述测试图像提供给所述图像处理电路。
图像处理参数选择电路203被配置成接收用于处理测试图像的第一图像处理参数和用于处理正常图像的第二图像处理参数，并且被配置成选择将第一图像处理参数或者第二图像处理参数提供给图像处理电路，其中第一图像处理参数是预先确定的。
异常检测电路204被配置成从图像处理电路接收经处理的测试图像，并且被配置成对经处理的测试图像进行检测，以判定图像处理电路是否存在异常，其中经处理的测试图像为由图像处理电路基于所述第一图像处理参数对测试图像进行处理后输出的图像。
在一个实现示例中，为避免该异常检测系统本身由于某种原因而产生测试逻辑错误，从而导致对图像处理电路的测试失败，因此在每次上电复位期间，即在任何正常图像被提供给图像处理电路之前，都需要对该异常检测系统的测试逻辑做自检测，以保证测试功能的正确性。具体地，在这种情况下，测试图像生成电路201可被配置成在图像处理电路的上电复位期间，基于预先确定的图像配置参数生成测试图像，并且在这种情况下，图像选择电路202被配置成在图像处理电路的上电复位期间，将所生成的测试图像直接提供给图像处理电路。
在另一实现示例中，为了实现对图像处理电路的实时异常检测，在图像处理电路的实际应用过程中，可以在每一帧正常输入图像处理结束后，下一帧正常图像来之前，都由测试图像生成电路201生成一帧测试图像，并将该测试图像插入到两帧正常输入图像之间提供给图像处理电路，以供用于进行异常检测。具体地，在这种情况下，测试图像生成电路201可被配置成在第一正常图像已由图像处理电路处理，但第二正常图像尚未到达图像处理电路时，基于图像配置参数生成测试图像，其中图像配置参数是根据所述预定的图像配置规则以及第一正常图像到达图像处理电路的到达时间和第二正常图像到达图像处理电路的预期到达时间之间的时间间隔来配置的。并且，在这种情况下，图像选择电路202被配置成在第一正常图像和第二正常图像之间将测试图像提供给图像处理电路，并且图像处理参数选择电路203被配置成，在测试图像被提供给图像处理电路的同时，将图像处理电路的图像处理参数从用于处理第一正常图像的第二图像处理参数切换为第一图像处理参数。在本申请中，将在例如无人驾驶过程中由安装在车辆上的相机拍摄到并且需要由图像处理电路进行处理的图像均称为正常图像，其中第一正常图像可指示任何正常图像，并且第二正常图像可指示第一正常图像的下一帧正常图像。图像配置参数与前面结合异常检测方法中提到的图像配置参数相同，这里不再进行进一步描述。
在一种实现中，如图3所示，异常检测电路204可包括图像配置规则违反检测电路301、并行检测电路302和循环冗余校验值检测电路303中的一者或多者。
图像配置规则违反检测电路301被配置成：检查经处理的测试图像是否违反预定的图像配置规则，并且在经处理的测试图像违反预定的图像配置规则的情况下，判定所述图像处理电路存在异常(例如，SRAM错误/干扰、或者由于图像处理电路的内部损坏造成的逻辑错误等)，由此可输出相应的错误指示信号。例如，如果经过检测发现，经处理的测试图像的EOF标志在SOF标志之前，则说明图像处理电路存在异常。又如，如果经过检测发现，经处理的测试图像的垂直尺寸或水平尺寸不是8或16的倍数，则说明图像处理电路也存在异常。再如，如果经过检测发现，经处理的测试图像的水平消隐间隔与测试图像的水平消隐间隔不一致，则说明图像处理电路也存在异常。
例如，前面所提到的，图像处理电路一般可包括多个并行处理单元(例如不同曝光L/S/V的PreHDR处理单元)，其中每一处理单元都应实现相同的处理功能，因此有必要对这些并行处理单元的功能一致性进行检测(例如，如图4所示的并行处理单元1、并行处理单元2和并行处理单元3)。值得一提的是，虽然图4中示出图像处理电路具有相同处理功能的三个并行处理单元，但是图像处理电路可以具有更多或更少的并行处理单元，并且可能针对不同的处理功能分别具有多个并行处理单元。在这种情况下，图像选择电路202被配置成将测试图像提供给每一并行处理单元(例如，如图4所示的并行处理单元1、并行处理单元2和并行处理单元3)，图像处理参数选择电路203被配置成将第一图像处理参数提供给每一并行处理单元，因此经处理的测试图像包括分别经由每一并行处理单元处理后获得的多个经处理的测试图像。在这种情况下，并行检测电路302被配置成：将来自多个并行处理单元的多个经处理的测试图像进行比较，并且当这些经处理的测试图像不一致时，判定图像处理电路存在异常(例如，由于某个并行处理单元的内部损坏造成的逻辑错误等)，由此可输出相应的错误指示信号。
循环冗余校验值检测电路303被配置成：计算经处理的测试图像的循环冗余校验值(这可以例如由专门的循环冗余校验值生成电路来实现)；将循环冗余校验值与预期的循环冗余校验值进行比较(这可以例如由专门的比较器电路来实现)，其中预期的循环冗余校验值是基于测试图像和第一图像处理参数确定的(该预期的循环容易校验值可例如预先存储在相应的寄存器中)；以及在循环冗余校验值与预期的循环冗余校验值不一致的情况下，判定图像处理电路存在异常(例如，SRAM错误/干扰、或者由于图像处理电路的内部损坏造成的逻辑错误等)，由此可输出相应的错误指示信号。
基于以上错误指示信号，SOC芯片的安全系统可以实时判断图像处理电路是否正常工作，从而可在自动驾驶时避免因为图像信息的异常而做出错误的指令，进而可避免造成安全事故。

Claims (15)

1.一种用于图像处理电路的异常检测方法，其特征在于，包括：
生成测试图像，所述测试图像遵循预定的图像配置规则；
将所述测试图像提供给图像处理电路；
将用于处理所述测试图像的第一图像处理参数提供给所述图像处理电路，其中所述第一图像处理参数是预先确定的；以及
对经处理的测试图像进行检测，以判定所述图像处理电路是否存在异常，其中所述经处理的测试图像为所述图像处理电路基于所述第一图像处理参数对所述测试图像进行处理后输出的图像。
2.根据权利要求1所述的方法，其特征在于，生成测试图像包括在所述图像处理电路的上电复位期间，基于预先确定的图像配置参数生成所述测试图像。
3.根据权利要求1所述的方法，其特征在于，
生成测试图像包括在第一正常图像已由所述图像处理电路处理，但第二正常图像尚未到达所述图像处理电路时，基于图像配置参数生成所述测试图像，其中所述图像配置参数是根据所述预定的图像配置规则以及所述第一正常图像到达所述图像处理电路的到达时间和所述第二正常图像到达所述图像处理电路的预期到达时间之间的时间间隔来配置的；
并且其中，将用于处理所述测试图像的第一图像处理参数提供给所述图像处理电路包括将所述图像处理电路的图像处理参数从用于处理所述第一正常图像的第二图像处理参数切换为所述第一图像处理参数。
4.根据权利要求2或3所述的方法，其特征在于，所述图像配置参数包括所述测试图像的水平尺寸与垂直尺寸、所述测试图像的帧开始标志和帧结束标志的位置、所述经处理的测试图像的水平消隐间隔、以及与所述测试图像的数据流相关联的初始值。
5.根据权利要求1所述的方法，其特征在于，对经处理的测试图像进行检测包括：
检查所述经处理的测试图像是否违反所述预定的图像配置规则，并且在所述经处理的测试图像违反所述预定的图像配置规则的情况下，判定所述图像处理电路存在异常。
6.根据权利要求1所述的方法，其特征在于，所述预定的图像配置规则包括：图像的帧开始标志须设置在图像的帧结束标志之前、图像的水平尺寸和垂直尺寸须为8或16的整数倍、以及图像的水平消隐间隔须保持不变。
7.根据权利要求1所述的方法，其特征在于，
所述图像处理电路包括多个并行处理单元；
将测试图像提供给图像处理电路包括将所述测试图像提供给所述图像处理电路的每一并行处理单元；
所述经处理的测试图像包括经由每一并行处理单元处理后获得的多个经处理的测试图像；
并且，对所述图像处理电路的输出图像进行检测包括：将所述多个经处理的测试图像进行比较，并且当所述多个经处理的测试图像不一致时，判定所述图像处理电路存在异常。
8.根据权利要求1所述的方法，其特征在于，对所述图像处理电路的输出图像进行检测包括：
计算所述经处理的测试图像的循环冗余校验值；
将所述循环冗余校验值与预期的循环冗余校验值进行比较，其中所述预期的循环冗余校验值是基于所述测试图像和所述第一图像处理参数确定的；以及
在所述循环冗余校验值与所述预期的循环冗余校验值不一致的情况下，判定所述图像处理电路存在异常。
9.一种用于图像处理电路的异常检测系统，其特征在于，包括测试图像生成电路、图像选择电路、图像处理参数选择电路和异常检测电路；
其中，所述测试图像生成电路被配置成生成测试图像，所述测试图像遵循预定的图像配置规则；
所述图像选择电路被配置成接收正常图像以及由所述测试图像生成电路生成的所述测试图像，并且被配置成选择将正常图像或者所述测试图像提供给所述图像处理电路；
所述图像处理参数选择电路被配置成接收用于处理所述测试图像的第一图像处理参数和用于处理所述正常图像的第二图像处理参数，并且被配置成选择将所述第一图像处理参数或者所述第二图像处理参数提供给所述图像处理电路，其中所述第一图像处理参数是预先确定的；
所述异常检测电路被配置成从所述图像处理电路接收经处理的测试图像，并且被配置成对所述经处理的测试图像进行检测，以判定所述图像处理电路是否存在异常，其中所述经处理的测试图像为由所述图像处理电路基于所述第一图像处理参数对所述测试图像进行处理后输出的图像。
10.根据权利要求9所述的系统，其特征在于，所述测试图像生成电路被配置成在所述图像处理电路的上电复位期间，基于预先确定的图像配置参数生成所述测试图像，并且所述图像选择电路被配置成在所述图像处理电路的上电复位期间，将所生成的测试图像提供给所述图像处理电路。
11.根据权利要求9所述的系统，其特征在于，
所述测试图像生成电路被配置成在第一正常图像已由所述图像处理电路处理，但第二正常图像尚未到达所述图像处理电路时，基于图像配置参数生成所述测试图像，其中所述图像配置参数是根据所述预定的图像配置规则以及所述第一正常图像到达所述图像处理电路的到达时间和所述第二正常图像到达所述图像处理电路的预期到达时间之间的时间间隔来配置的；
所述图像选择电路被配置成在所述第一正常图像和所述第二正常图像之间将所述测试图像提供给所述图像处理电路；
所述图像处理参数选择电路被配置成，在所述测试图像被提供给所述图像处理电路的同时，将所述图像处理电路的图像处理参数从用于处理所述第一正常图像的第二图像处理参数切换为所述第一图像处理参数。
12.根据权利要求9所述的系统，其特征在于，所述异常检测电路包括图像配置规则违反检测电路，所述图像配置规则违反检测电路被配置成：检查所述经处理的测试图像是否违反所述预定的图像配置规则，并且在所述经处理的测试图像违反所述预定的图像配置规则的情况下，判定所述图像处理电路存在异常。
13.根据权利要求9所述的系统，其特征在于，所述预定的图像配置规则包括：图像的帧开始标志须设置在图像的帧结束标志之前、图像的水平尺寸和垂直尺寸须为8或16的整数倍、以及图像的水平消隐间隔须固定。
14.根据权利要求9所述的系统，其特征在于，
所述图像处理电路包括多个并行处理单元；
所述图像选择电路被配置成将所述测试图像提供给每一并行处理单元；
所述图像处理参数选择电路被配置成将所述第一图像处理参数提供给每一并行处理单元；
所述经处理的测试图像包括分别经由每一并行处理单元处理后获得的多个经处理的测试图像；
所述异常检测电路包括并行检测电路，所述并行检测电路被配置成：将所述多个经处理的测试图像进行比较，并且当所述多个经处理的测试图像不一致时，判定所述图像处理电路存在异常。
15.根据权利要求9所述的系统，其特征在于，所述异常检测电路包括循环冗余校验值检测电路，所述循环冗余校验值检测电路被配置成：计算所述经处理的测试图像的循环冗余校验值；将所述循环冗余校验值与预期的循环冗余校验值进行比较，其中所述预期的循环冗余校验值是基于所述测试图像和所述第一图像处理参数确定的；以及在所述循环冗余校验值与所述预期的循环冗余校验值不一致的情况下，判定所述图像处理电路存在异常。
CN202110241971.5A 2021-03-04 2021-03-04 用于图像处理电路的异常检测方法及系统 Active CN112995656B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110241971.5A CN112995656B (zh) 2021-03-04 2021-03-04 用于图像处理电路的异常检测方法及系统
US17/686,168 US20220284704A1 (en) 2021-03-04 2022-03-03 Anomaly detection method and system for image signal processor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110241971.5A CN112995656B (zh) 2021-03-04 2021-03-04 用于图像处理电路的异常检测方法及系统

Publications (2)

Publication Number Publication Date
CN112995656A true CN112995656A (zh) 2021-06-18
CN112995656B CN112995656B (zh) 2024-05-17

Family

ID=76352816

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110241971.5A Active CN112995656B (zh) 2021-03-04 2021-03-04 用于图像处理电路的异常检测方法及系统

Country Status (2)

Country Link
US (1) US20220284704A1 (zh)
CN (1) CN112995656B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114727082A (zh) * 2022-03-10 2022-07-08 杭州中天微系统有限公司 图像处理装置、图像信号处理器、图像处理方法和介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12106479B2 (en) * 2022-03-22 2024-10-01 T-Jet Meds Corporation Limited Ultrasound image recognition system and data output module

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1188585A (ja) * 1997-09-03 1999-03-30 Fuji Photo Film Co Ltd 画像処理装置
JP2004248131A (ja) * 2003-02-17 2004-09-02 Murata Mach Ltd 画像形成装置及び画像形成装置の検査方法
CN1988604A (zh) * 2005-12-19 2007-06-27 比亚迪股份有限公司 一种cmos图像传感器的isp验证测试系统及方法
JP2007189429A (ja) * 2006-01-12 2007-07-26 Fuji Xerox Co Ltd 異常診断装置
TW201237433A (en) * 2011-03-02 2012-09-16 Nat Univ Chung Hsing Error checking system for high resolution and high frequency image processing chip
JP2013165399A (ja) * 2012-02-10 2013-08-22 Toshiba Corp 固体撮像装置
EP2670147A2 (en) * 2012-05-28 2013-12-04 Ricoh Company, Ltd. Abnormality diagnosis device and method, imager including the abnormality diagnosis device, mobile vehicle control system and mobile vehicle
CN105554493A (zh) * 2014-10-27 2016-05-04 株式会社电装 图像处理装置
CN205453978U (zh) * 2015-04-01 2016-08-10 半导体元件工业有限责任公司 图像处理电路和成像系统
US20160301923A1 (en) * 2014-01-10 2016-10-13 Hitachi Automotive Systems, Ltd. In-Vehicle-Camera Image Processing Device
CN107783856A (zh) * 2016-08-30 2018-03-09 安凯(广州)微电子技术有限公司 一种图像处理器参数的测试方法及系统
JP2018072460A (ja) * 2016-10-26 2018-05-10 セイコーエプソン株式会社 回路装置、電気光学装置、電子機器、移動体及びエラー検出方法
CN108268831A (zh) * 2017-12-01 2018-07-10 百度在线网络技术（北京）有限公司 一种无人车视觉检测的鲁棒性测试方法和系统
JP2018121325A (ja) * 2017-01-25 2018-08-02 キヤノン株式会社 固体撮像装置、撮像システム及び移動体
US20190082172A1 (en) * 2017-09-11 2019-03-14 Kabushiki Kaisha Toshiba Image processing apparatus and failure diagnosis control method
CN109542697A (zh) * 2017-09-21 2019-03-29 株式会社东芝 运算处理装置以及运算处理方法
WO2020250702A1 (ja) * 2019-06-13 2020-12-17 株式会社デンソー 画像処理装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7118911B2 (ja) * 2019-03-08 2022-08-16 株式会社東芝 画像処理装置

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1188585A (ja) * 1997-09-03 1999-03-30 Fuji Photo Film Co Ltd 画像処理装置
JP2004248131A (ja) * 2003-02-17 2004-09-02 Murata Mach Ltd 画像形成装置及び画像形成装置の検査方法
CN1988604A (zh) * 2005-12-19 2007-06-27 比亚迪股份有限公司 一种cmos图像传感器的isp验证测试系统及方法
JP2007189429A (ja) * 2006-01-12 2007-07-26 Fuji Xerox Co Ltd 異常診断装置
TW201237433A (en) * 2011-03-02 2012-09-16 Nat Univ Chung Hsing Error checking system for high resolution and high frequency image processing chip
JP2013165399A (ja) * 2012-02-10 2013-08-22 Toshiba Corp 固体撮像装置
EP2670147A2 (en) * 2012-05-28 2013-12-04 Ricoh Company, Ltd. Abnormality diagnosis device and method, imager including the abnormality diagnosis device, mobile vehicle control system and mobile vehicle
US20160301923A1 (en) * 2014-01-10 2016-10-13 Hitachi Automotive Systems, Ltd. In-Vehicle-Camera Image Processing Device
CN105554493A (zh) * 2014-10-27 2016-05-04 株式会社电装 图像处理装置
CN205453978U (zh) * 2015-04-01 2016-08-10 半导体元件工业有限责任公司 图像处理电路和成像系统
CN107783856A (zh) * 2016-08-30 2018-03-09 安凯(广州)微电子技术有限公司 一种图像处理器参数的测试方法及系统
JP2018072460A (ja) * 2016-10-26 2018-05-10 セイコーエプソン株式会社 回路装置、電気光学装置、電子機器、移動体及びエラー検出方法
JP2018121325A (ja) * 2017-01-25 2018-08-02 キヤノン株式会社 固体撮像装置、撮像システム及び移動体
US20190082172A1 (en) * 2017-09-11 2019-03-14 Kabushiki Kaisha Toshiba Image processing apparatus and failure diagnosis control method
CN109542697A (zh) * 2017-09-21 2019-03-29 株式会社东芝 运算处理装置以及运算处理方法
CN108268831A (zh) * 2017-12-01 2018-07-10 百度在线网络技术（北京）有限公司 一种无人车视觉检测的鲁棒性测试方法和系统
WO2020250702A1 (ja) * 2019-06-13 2020-12-17 株式会社デンソー 画像処理装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114727082A (zh) * 2022-03-10 2022-07-08 杭州中天微系统有限公司 图像处理装置、图像信号处理器、图像处理方法和介质
CN114727082B (zh) * 2022-03-10 2024-01-30 杭州中天微系统有限公司 图像处理装置、图像信号处理器、图像处理方法和介质

Also Published As

Publication number Publication date
CN112995656B (zh) 2024-05-17
US20220284704A1 (en) 2022-09-08

Similar Documents

Publication Publication Date Title
US9778988B2 (en) Power failure detection system and method
US20220284704A1 (en) Anomaly detection method and system for image signal processor
CN110955571B (zh) 面向车规级芯片功能安全的故障管理系统
CN112256507B (zh) 芯片故障诊断方法、装置、可读存储介质及电子设备
KR101044544B1 (ko) 마이크로컴퓨터의 프로그램 실행 모니터링 방법
CN104320308A (zh) 一种服务器异常检测的方法及装置
CN107193680A (zh) 一种心跳检测方法、设备及系统
WO2023020586A1 (zh) 故障诊断电路、方法、装置及计算机可读存储介质
US11715188B1 (en) Permanent fault detection for imaging and vision hardware accelerators
CN116382968B (zh) 外部设备的故障检测方法以及装置
CN117234783A (zh) Pcie设备的检测方法及装置、bios及存储介质
US20180277234A1 (en) Failure prevention of bus monitor
CN115080362A (zh) 一种pcie设备降速上报方法、系统、设备以及存储介质
CN115756935A (zh) 嵌入式软件系统的异常故障定位方法、装置及设备
TW201706844A (zh) 電源失效偵測系統與其方法
JP3169930B2 (ja) テストパタン自動生成装置及びテストパタン自動生成方法
CN113945788B (zh) 检测方法、装置、检测设备、电子设备及可读存储介质
CN115955416B (zh) 测试upi降带宽的方法、装置、设备及存储介质
US20100318854A1 (en) System and method for checking firmware definition file
JPS5911452A (ja) パリテイチエツク回路の試験方式
CN116820863A (zh) 级联测试方法、装置、电子设备及存储介质
CN115842709A (zh) 一种故障检测方法、装置、电子设备及存储介质
JP3326546B2 (ja) コンピュータシステムの故障検知方法
CN107291588B (zh) 一种生成xml日志的方法和装置
CN115548836A (zh) 一种故障确认方法、装置、准分子激光器及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant