CN111683213A - 基于感兴趣区域灰度图像的自适应字符叠加系统及方法 - Google Patents

基于感兴趣区域灰度图像的自适应字符叠加系统及方法 Download PDF

Info

Publication number
CN111683213A
CN111683213A CN202010549910.0A CN202010549910A CN111683213A CN 111683213 A CN111683213 A CN 111683213A CN 202010549910 A CN202010549910 A CN 202010549910A CN 111683213 A CN111683213 A CN 111683213A
Authority
CN
China
Prior art keywords
character
region
interest
fpga
gray
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010549910.0A
Other languages
English (en)
Other versions
CN111683213B (zh
Inventor
王艳永
郭倩雅
张一�
纪超
林桔秋
陈晓宇
姜哲
李丽丹
张孝峥
林青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China North Vehicle Research Institute
Original Assignee
China North Vehicle Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China North Vehicle Research Institute filed Critical China North Vehicle Research Institute
Priority to CN202010549910.0A priority Critical patent/CN111683213B/zh
Publication of CN111683213A publication Critical patent/CN111683213A/zh
Application granted granted Critical
Publication of CN111683213B publication Critical patent/CN111683213B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • G06T5/94

Abstract

本发明属于视频图像信号处理技术领域,具体涉及一种基于感兴趣区域灰度图像的自适应字符叠加系统及方法。本发明所提出的字符叠加系统,包含视频图像解码器、FPGA、FSMC总线、ARM处理器、ROM、行计数器、像素计数器,当感兴趣区域图像信息与所叠加字符的灰度信息相似时,在高清视频数据流中实时统计感兴趣区域图像信息,用于合理估计感兴趣区域灰度分布来动态调整字符叠加区域灰度值,其字符显示方式简捷,可辨识度高,视觉效果好,可靠性高,处理灵活,成本较低,运算速度快。可有效保护所叠加的字符信息不被原始视频图像信息覆盖或影响,可正常辨别,不影响使用。

Description

基于感兴趣区域灰度图像的自适应字符叠加系统及方法
技术领域
本发明属于视频图像信号处理技术领域,具体涉及一种基于感兴趣区域灰度图像的自适应字符叠加系统及方法。
背景技术
字符叠加是在视频信号流中加入字符,可以让字符在显示器屏幕上的指定位置与原视频图像同时显示的技术。根据叠加字符类型,可分为动态字符叠加和静态字符叠加。动态字符叠加是指依据特定通讯协议,处理器解析协议内容,字符可在屏幕中任意指定位置显示或隐藏,并可修改字符内容。静态字符叠加则不需要通讯协议,在固定位置显示或隐藏字符,且字符内容不可调整。基本原理为:依据不同需求在FPGA(Field Programmable GateArray,现场可编程门阵列)片上或外接ROM(Read-Only Memory,只读存储器)中存储相应的字库数据形成专有字符数据库,处理器依据通讯协议实时获取要显示的字符数据、位置数据和显示/隐藏等字符控制信息,由计数器与位置数据进行比较,将要显示的字符数据嵌入至原始视频图像数据流中,最后将加工处理后的视频图像信号送至显示器屏幕显示。这种基于FPGA完成字符叠加功能,电路简单,易于实现,操作方便,具有较高的性价比。
但在显示过程中,当感兴趣区域图像信息与所叠加字符的灰度信息相似时,如何保证所叠加的字符信息不被原始视频图像信息覆盖或影响,确保正常区分,不影响使用,已成为目前制约该技术发展的一项缺陷。
发明内容
(一)要解决的技术问题
本发明要解决的技术问题是:当感兴趣区域图像信息与所叠加字符的灰度信息相似时,如何保证所叠加的字符信息不被原始视频图像信息覆盖或影响,确保正常区分,不影响使用。
(二)技术方案
为解决上述技术问题,本发明提供一种基于感兴趣区域灰度图像的自适应字符叠加系统,其包括:视频图像解码器、FSMC总线、ARM处理器、FPGA模块、ROM模块、行计数器、像素计数器;其中,
所述视频图像解码器为与相机接口编码芯片相匹配的视频图像解码芯片,用于将来自相机的串行差分视频信号转换为并行视频数据,并发送至所述FPGA模块;
所述FSMC总线用作芯片之间的通信接口,用于所述ARM处理器与FPGA模块通信使用;
所述ARM处理器用于按照既定协议实时解析字符叠加控制器的字符控制信息,通过所述FSMC总线将解析后的字符控制信息发送至所述FPGA模块;
所述像素计数器用于依据视频图像时钟上升沿对并行视频数据的行同步有效信号进行逐行像素点计数统计;
所述行计数器用于在FPGA模块的控制下,对并行视频数据的场同步有效信号进行行数计数统计;
所述ROM模块用于存放依据不同项目需求在FPGA片上或外接ROM中存储相应的字库数据所形成的专有字符数据库;
所述FPGA模块用于接收到所述ARM处理器发送的字符控制信息和所述视频图像解码器产生的并行视频数据,并且根据所述像素计数器及行计数器的实时统计数据,结合解析后的字符控制信息,按要求将ROM模块的专有字符数据库的字符显示在显示器屏幕上。
其中,所述并行视频数据为28~32位的视频数据。
其中,所述ARM处理器、FSMC总线集成为一个ARM逻辑单元。
其中,所述集成而成的ARM逻辑单元为STM32F207芯片。
其中,所述FPGA、ROM集成为一个FPGA逻辑单元。
其中,所述集成而成的FPGA逻辑单元为XC6SLX150T芯片。
其中,所述像素计数器、行计数器与FPGA逻辑单元集成为一个逻辑控制模块。
此外,本发明还提供一种基于感兴趣区域灰度图像的自适应字符叠加方法,所述方法基于前述自适应字符叠加系统来实施,所述方法包括以下步骤:
步骤1:所述ROM模块存储按照不同项目需求生成的专有字符数据库;
步骤3:所述FPGA模块接收所述ARM处理器发送的第i个字符数据chari、字符水平位置Xi、字符垂直位置Yi、字符显示/隐藏字符电子开关Si信息;
步骤4:所述像素计数器Cp在FPGA模块的控制下,依据并行视频数据的时钟上升沿对并行视频数据的行同步有效信号HSACTIVE进行逐行像素点计数统计;
步骤5:所述行计数器Cl在FPGA模块的控制下,对并行视频数据的场同步有效信号VSACTIVE进行行数计数统计;
步骤6:所述FPGA获取像素计数器Cp及行计数器Cl统计的像素点计数数据及行数计数数据,当像素点计数过程中所计数的像素点的当前位置及行数计数过程中所计数的像素点的当前位置均达到所述字符水平位置Xi和字符垂直位置Yi时,所述FPGA统计感兴趣区域图像信息总和sumi,计算公式为:
Figure BDA0002542071780000031
其中,
Figure BDA0002542071780000032
为第i个字符的感兴趣区域视频图像坐标(j,k)处的灰度值,ΔXaoi和ΔYaoi分别为感兴趣区域水平方向大小和垂直方向大小;
步骤7:计算第i个字符的感兴趣区域图像信息平均值meani,计算公式为:
Figure BDA0002542071780000041
步骤8:第i个字符chari所在位置的字符叠加后的图像灰度值为Gi,计算公式为:
Figure BDA0002542071780000042
其中,所述步骤8的公式可简化为:
Figure BDA0002542071780000043
此外,本发明还提供一种利用所述叠加系统,在高清视频信号中,通过合理估计感兴趣区域灰度分布,从而动态调整字符叠加区域灰度值,进而完成字符叠加的用途。
(三)有益效果
与现有技术相比较,本发明具备如下有益效果:
(1)字符叠加显示方式简捷,可辨识度高,视觉效果好,可靠性高。
(2)基于FPGA完成字符叠加功能,可灵活处理,成本较低,运算速度快,资源充足。
附图说明
图1为本发明技术方案原理示意图。
具体实施方式
为使本发明的目的、内容、和优点更加清楚,下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。
为解决现有技术问题,本发明提供一种基于感兴趣区域灰度图像的自适应字符叠加系统,如图1所示,其包括:视频图像解码器、FSMC总线(Flexible Static MemoryController,可变静态存储控制器)、ARM处理器、FPGA模块、ROM模块、行计数器、像素计数器;其中,
所述视频图像解码器为与相机接口编码芯片相匹配的视频图像解码芯片,用于将来自相机的串行差分视频信号转换为并行视频数据,并发送至所述FPGA模块;
所述FSMC总线用作芯片之间的通信接口,用于所述ARM处理器与FPGA模块通信使用;
所述ARM处理器用于按照既定协议实时解析字符叠加控制器的字符控制信息,通过所述FSMC总线将解析后的字符控制信息发送至所述FPGA模块;
所述像素计数器用于依据视频图像时钟上升沿对并行视频数据的行同步有效信号进行逐行像素点计数统计;
所述行计数器用于在FPGA模块的控制下,对并行视频数据的场同步有效信号进行行数计数统计;
所述ROM模块用于存放依据不同项目需求在FPGA片上或外接ROM中存储相应的字库数据所形成的专有字符数据库;
所述FPGA模块用于接收到所述ARM处理器发送的字符控制信息和所述视频图像解码器产生的并行视频数据,并且根据所述像素计数器及行计数器的实时统计数据,结合解析后的字符控制信息,按要求将ROM模块的专有字符数据库的字符显示在显示器屏幕上。
其中,所述并行视频数据为28~32位的视频数据。
其中,所述ARM处理器、FSMC总线集成为一个ARM逻辑单元。
其中,所述集成而成的ARM逻辑单元为STM32F207芯片。
其中,所述FPGA、ROM集成为一个FPGA逻辑单元。
其中,所述集成而成的FPGA逻辑单元为XC6SLX150T芯片。
其中,所述像素计数器、行计数器与FPGA逻辑单元集成为一个逻辑控制模块。
此外,本发明还提供一种基于感兴趣区域灰度图像的自适应字符叠加方法,所述方法基于前述自适应字符叠加系统来实施,所述方法包括以下步骤:
步骤1:所述ROM模块存储按照不同项目需求生成的专有字符数据库;
步骤3:所述FPGA模块接收所述ARM处理器发送的第i个字符数据chari、字符水平位置Xi、字符垂直位置Yi、字符显示/隐藏字符电子开关Si信息;
步骤4:所述像素计数器Cp在FPGA模块的控制下,依据并行视频数据的时钟上升沿对并行视频数据的行同步有效信号HSACTIVE进行逐行像素点计数统计;
步骤5:所述行计数器Cl在FPGA模块的控制下,对并行视频数据的场同步有效信号VSACTIVE进行行数计数统计;
步骤6:所述FPGA获取像素计数器Cp及行计数器Cl统计的像素点计数数据及行数计数数据,当像素点计数过程中所计数的像素点的当前位置及行数计数过程中所计数的像素点的当前位置均达到所述字符水平位置Xi和字符垂直位置Yi时,所述FPGA统计感兴趣区域图像信息总和sumi,计算公式为:
Figure BDA0002542071780000061
其中,
Figure BDA0002542071780000062
为第i个字符的感兴趣区域视频图像坐标(j,k)处的灰度值,ΔXaoi和ΔYaoi分别为感兴趣区域水平方向大小和垂直方向大小;
步骤7:计算第i个字符的感兴趣区域图像信息平均值meani,计算公式为:
Figure BDA0002542071780000063
步骤8:第i个字符chari所在位置的字符叠加后的图像灰度值为Gi,计算公式为:
Figure BDA0002542071780000071
其中,所述步骤8的公式可简化为:
Figure BDA0002542071780000072
此外,本发明还提供一种利用前述叠加系统,在高清视频信号中,通过合理估计感兴趣区域灰度分布,从而动态调整字符叠加区域灰度值,进而完成字符叠加的用途。
综上,本发明所提出的字符叠加系统,包含视频图像解码器、FPGA、FSMC总线、ARM处理器、ROM、行计数器、像素计数器,当感兴趣区域图像信息与所叠加字符的灰度信息相似时,在高清视频数据流中实时统计感兴趣区域图像信息,用于合理估计感兴趣区域灰度分布来动态调整字符叠加区域灰度值,其字符显示方式简捷,可辨识度高,视觉效果好,可靠性高,处理灵活,成本较低,运算速度快。可有效保护所叠加的字符信息不被原始视频图像信息覆盖或影响,可正常辨别,不影响使用。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。

Claims (10)

1.一种基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,其包括:视频图像解码器、FSMC总线、ARM处理器、FPGA模块、ROM模块、行计数器、像素计数器;其中,
所述视频图像解码器为与相机接口编码芯片相匹配的视频图像解码芯片,用于将来自相机的串行差分视频信号转换为并行视频数据,并发送至所述FPGA模块;
所述FSMC总线用作芯片之间的通信接口,用于所述ARM处理器与FPGA模块通信使用;
所述ARM处理器用于按照既定协议实时解析字符叠加控制器的字符控制信息,通过所述FSMC总线将解析后的字符控制信息发送至所述FPGA模块;
所述像素计数器用于依据视频图像时钟上升沿对并行视频数据的行同步有效信号进行逐行像素点计数统计;
所述行计数器用于在FPGA模块的控制下,对并行视频数据的场同步有效信号进行行数计数统计;
所述ROM模块用于存放依据不同项目需求在FPGA片上或外接ROM中存储相应的字库数据所形成的专有字符数据库;
所述FPGA模块用于接收到所述ARM处理器发送的字符控制信息和所述视频图像解码器产生的并行视频数据,并且根据所述像素计数器及行计数器的实时统计数据,结合解析后的字符控制信息,按要求将ROM模块的专有字符数据库的字符显示在显示器屏幕上。
2.如权利要求1所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述并行视频数据为28~32位的视频数据。
3.如权利要求1所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述ARM处理器、FSMC总线集成为一个ARM逻辑单元。
4.如权利要求3所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述集成而成的ARM逻辑单元为STM32F207芯片。
5.如权利要求1所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述FPGA、ROM集成为一个FPGA逻辑单元。
6.如权利要求5所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述集成而成的FPGA逻辑单元为XC6SLX150T芯片。
7.如权利要求5所述的基于感兴趣区域灰度图像的自适应字符叠加系统,其特征在于,所述像素计数器、行计数器与FPGA逻辑单元集成为一个逻辑控制模块。
8.一种基于感兴趣区域灰度图像的自适应字符叠加方法,其特征在于,所述方法基于前述权利要求1所述的自适应字符叠加系统来实施,所述方法包括以下步骤:
步骤1:所述ROM模块存储按照不同项目需求生成的专有字符数据库;
步骤3:所述FPGA模块接收所述ARM处理器发送的第i个字符数据chari、字符水平位置Xi、字符垂直位置Yi、字符显示/隐藏字符电子开关Si信息;
步骤4:所述像素计数器Cp在FPGA模块的控制下,依据并行视频数据的时钟上升沿对并行视频数据的行同步有效信号HSACTIVE进行逐行像素点计数统计;
步骤5:所述行计数器Cl在FPGA模块的控制下,对并行视频数据的场同步有效信号VSACTIVE进行行数计数统计;
步骤6:所述FPGA获取像素计数器Cp及行计数器Cl统计的像素点计数数据及行数计数数据,当像素点计数过程中所计数的像素点的当前位置及行数计数过程中所计数的像素点的当前位置均达到所述字符水平位置Xi和字符垂直位置Yi时,所述FPGA统计感兴趣区域图像信息总和sumi,计算公式为:
Figure FDA0002542071770000031
其中,
Figure FDA0002542071770000032
为第i个字符的感兴趣区域视频图像坐标(j,k)处的灰度值,ΔXaoi和ΔYaoi分别为感兴趣区域水平方向大小和垂直方向大小;
步骤7:计算第i个字符的感兴趣区域图像信息平均值meani,计算公式为:
Figure FDA0002542071770000033
步骤8:第i个字符chari所在位置的字符叠加后的图像灰度值为Gi,计算公式为:
Figure FDA0002542071770000034
9.如权利要求8所述的基于感兴趣区域灰度图像的自适应字符叠加方法,其特征在于,所述步骤8的公式可简化为:
Figure FDA0002542071770000035
10.一种利用权利要求1的系统,在高清视频信号中,通过合理估计感兴趣区域灰度分布,从而动态调整字符叠加区域灰度值,进而完成字符叠加的用途。
CN202010549910.0A 2020-06-16 2020-06-16 基于感兴趣区域灰度图像的自适应字符叠加系统及方法 Active CN111683213B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010549910.0A CN111683213B (zh) 2020-06-16 2020-06-16 基于感兴趣区域灰度图像的自适应字符叠加系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010549910.0A CN111683213B (zh) 2020-06-16 2020-06-16 基于感兴趣区域灰度图像的自适应字符叠加系统及方法

Publications (2)

Publication Number Publication Date
CN111683213A true CN111683213A (zh) 2020-09-18
CN111683213B CN111683213B (zh) 2022-08-16

Family

ID=72435900

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010549910.0A Active CN111683213B (zh) 2020-06-16 2020-06-16 基于感兴趣区域灰度图像的自适应字符叠加系统及方法

Country Status (1)

Country Link
CN (1) CN111683213B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114286073A (zh) * 2021-11-18 2022-04-05 中国北方车辆研究所 一种基于图形编码的视频图像在线检测系统及方法
WO2023184850A1 (zh) * 2022-03-31 2023-10-05 晶晨半导体(上海)股份有限公司 视频图像处理方法及装置、设备以及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060041026A (ko) * 2004-11-08 2006-05-11 엘지전자 주식회사 Tv 겸용 디스플레이 장치 및, 그것에 의한 시계 표시방법과 영상 차단 방법
CN101325664A (zh) * 2008-07-25 2008-12-17 航天恒星科技股份有限公司 一种数字图像中处理叠加信息颜色的方法
CN103685977A (zh) * 2013-09-11 2014-03-26 中国科学院电子学研究所 一种实时显示合成孔径雷达图像的装置
US20160066024A1 (en) * 2014-07-23 2016-03-03 Comigo Ltd. Reducing interference of an overlay with underlying content
CN106534722A (zh) * 2016-12-19 2017-03-22 中国科学院长春光学精密机械与物理研究所 基于fpga的视频流字符叠加处理系统及处理方法
CN107155074A (zh) * 2017-05-17 2017-09-12 威创集团股份有限公司 视频字符叠加方法和系统
CN109714548A (zh) * 2018-12-18 2019-05-03 中国航空工业集团公司洛阳电光设备研究所 一种基于fpga的实时视频叠加处理系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060041026A (ko) * 2004-11-08 2006-05-11 엘지전자 주식회사 Tv 겸용 디스플레이 장치 및, 그것에 의한 시계 표시방법과 영상 차단 방법
CN101325664A (zh) * 2008-07-25 2008-12-17 航天恒星科技股份有限公司 一种数字图像中处理叠加信息颜色的方法
CN103685977A (zh) * 2013-09-11 2014-03-26 中国科学院电子学研究所 一种实时显示合成孔径雷达图像的装置
US20160066024A1 (en) * 2014-07-23 2016-03-03 Comigo Ltd. Reducing interference of an overlay with underlying content
CN106534722A (zh) * 2016-12-19 2017-03-22 中国科学院长春光学精密机械与物理研究所 基于fpga的视频流字符叠加处理系统及处理方法
CN107155074A (zh) * 2017-05-17 2017-09-12 威创集团股份有限公司 视频字符叠加方法和系统
CN109714548A (zh) * 2018-12-18 2019-05-03 中国航空工业集团公司洛阳电光设备研究所 一种基于fpga的实时视频叠加处理系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
赵凤怡: "基于FPGA的图像字符叠加器设计", 《电脑知识与技术》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114286073A (zh) * 2021-11-18 2022-04-05 中国北方车辆研究所 一种基于图形编码的视频图像在线检测系统及方法
CN114286073B (zh) * 2021-11-18 2024-04-19 中国北方车辆研究所 一种基于图形编码的视频图像在线检测系统及方法
WO2023184850A1 (zh) * 2022-03-31 2023-10-05 晶晨半导体(上海)股份有限公司 视频图像处理方法及装置、设备以及存储介质

Also Published As

Publication number Publication date
CN111683213B (zh) 2022-08-16

Similar Documents

Publication Publication Date Title
CN109379625B (zh) 视频处理方法、装置、电子设备和计算机可读介质
CN109242802B (zh) 图像处理方法、装置、电子设备及计算机可读介质
WO2020140698A1 (zh) 表格数据的获取方法、装置和服务器
US10134106B2 (en) Method and device for selective display refresh
CN111683213B (zh) 基于感兴趣区域灰度图像的自适应字符叠加系统及方法
CN112200187A (zh) 一种目标检测方法、装置、机器可读介质及设备
CN107493448A (zh) 图像处理系统、图像显示方法及显示装置
CN110472539B (zh) 一种文本检测方法、装置及计算机存储介质
US20220207889A1 (en) Method for recognizing vehicle license plate, electronic device and computer readable storage medium
WO2018209824A1 (zh) 视频字符叠加方法和系统
WO2022001091A1 (zh) 一种危险驾驶行为识别方法、装置、电子设备及存储介质
US10360687B2 (en) Detection and location of active display regions in videos with static borders
WO2022179362A1 (zh) 一种图像融合方法以及装置
US20110261256A1 (en) Displaying data on lower resolution displays
US20020085016A1 (en) Method and apparatus for stretch blitting using a 3d pipeline
US20030189575A1 (en) System and method for improved pixel rendering performance
US4656468A (en) Pattern data processing apparatus
CN104639969A (zh) 一种页面全屏显示方法和装置
WO2022178668A1 (zh) 处理多图层图像的方法、装置及终端设备
US11749231B2 (en) Device and method for foveated rendering
TWI466544B (zh) 跑馬燈文字擷取系統及其方法
CN114022498A (zh) 空白区域检测方法、装置、设备和存储介质
CN114792354B (zh) 模型处理方法、装置、存储介质及电子设备
CN116128951A (zh) 一种基于fpga实现的pfd画面中横滚参数监控方法
CN109788346B (zh) 视频文件配置解析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant