CN102209205A - 电视跟踪器中的视频叠加显示装置 - Google Patents

电视跟踪器中的视频叠加显示装置 Download PDF

Info

Publication number
CN102209205A
CN102209205A CN 201110157967 CN201110157967A CN102209205A CN 102209205 A CN102209205 A CN 102209205A CN 201110157967 CN201110157967 CN 201110157967 CN 201110157967 A CN201110157967 A CN 201110157967A CN 102209205 A CN102209205 A CN 102209205A
Authority
CN
China
Prior art keywords
image
character
row
buffer storage
storage district
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201110157967
Other languages
English (en)
Other versions
CN102209205B (zh
Inventor
李桂菊
武治国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN2011101579677A priority Critical patent/CN102209205B/zh
Publication of CN102209205A publication Critical patent/CN102209205A/zh
Application granted granted Critical
Publication of CN102209205B publication Critical patent/CN102209205B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明涉及一种电视跟踪器中的视频叠加显示装置,该装置包括数字信号处理器,可编程逻辑阵列,同步动态随机存储器;数字信号处理器负责计算黑、白目标阈值、组织待更新的显示字符、计算目标窗口位置。可编程逻辑阵列负责图像的抽行抽列处理、图像的二值化处理、跟踪窗口和鼠标的显示;同步动态随机存储器用于存储原始图像、二值化图像和包含字符的图像。本发明可以直接利用嵌入式跟踪器平台的DSP、FPGA和SDRAM对跟踪信息进行叠加显示,由于不增加器件,不会加大线路板尺寸,有利于小型化;由于图像处理由FPGA完成,减小了DSP的压力,提高了DSP程序的执行效率,在不影响跟踪实时性前提下,有效实现了跟踪信息的叠加显示。

Description

电视跟踪器中的视频叠加显示装置
技术领域
本发明涉及一种电视跟踪器,特别涉及一种电视跟踪器中的视频叠加显示装置。
背景技术
电视跟踪器是利用光电成像技术,对跟踪器工作范围内的各类目标进行跟踪的系统,在软件上借助算法的改进和新算法的提出,在硬件上借助高速数字信号处理器的开发和换代,使实时条件下不仅能进行目标的检测、提取、识别、跟踪,而且能精确计算出各个目标的参数。
随着数字信号处理器(DSP)芯片集成度、运算速度、数据吞吐率等性能的不断提高,DSP已被广泛应用于实时图像处理领域。
在电视跟踪中,为方便使用人员了解当前跟踪状态,以及目标提取情况,显示屏上除需显示原始图像外,常常还需要在屏幕上叠加显示一些文字信息,如时间,日期,跟踪方式,脱靶量等,同时还需要叠加显示一些图形和图像信息,如跟踪窗口、目标的二值信息。这些若在pc机上实现很容易,但在嵌入式跟踪器上实现则相对复杂。嵌入式系统叠加显示主要有两种实现方案,一种是使用专用的字符叠加器件实现,但是增加字符叠加器件,必然会加大线路板尺寸,增加功耗,不利于小型化。另一种解决方法是将待显示的所有信息一起由数字信号处理器(DSP)准备好后送可编程逻辑阵列(FPGA)。但由于DSP既要完成跟踪功能,又要完成显示功能,必然会导致程序执行效率低下,影响实时性。
发明内容
本发明要解决的技术问题是提供一种在不影响跟踪实时性和不增加器件前提下,能够有效实现跟踪信息叠加显示的电视跟踪器中的视频叠加显示装置。
为了解决上述技术问题,本发明的电视跟踪器中的视频叠加显示装置包括数字信号处理器,可编程逻辑阵列,同步动态随机存储器;
所述同步动态随机存储器包括原始图像存储区、第一图像存储区、第二图像存储区和第三图像存储区;
所述数字信号处理器包括:
字库提取软件模块:用于针对可能用到的所有字符建立M×N的字库点阵数组,其中M为点阵数组的行数,N为点阵数组的列数;点阵数组中各点灰度数据取值0或255,分别对应某个字符中对应像素点的亮度值;
上电初始时字符和大十字丝组织模块:放置初始显示字符并画大十字丝,在内存中分配与第三图像存储区大小相同的第一图像缓存区并清零,从字库中获取上电初始时待显示的字符在点阵数组中的位置;将待显示的所有字符灰度数据存到第一图像缓存区中;将第一图像缓存区中的字符和大十字丝作为第三层图像存储到第三图像存储区,其中字符存储于第三图像存储区中对应于图像上部字符显示区的位置;释放该图像缓存区;
信息读取模块:从串口读取外部时统终端发来的时间码信息,读取外部控制计算机发来的命令信息,并将时间码信息、命令信息传送到实时跟踪时字符组织模块;
阈值计算模块:读取图像并根据图像像素灰度最大值max、灰度最小值min和灰度平均值mean计算出白目标阈值Twhite和黑目标阈值Tblack:
Twhite=mean+(max-mean)/2
Tblack=mean-(mean-min)/2
将白目标阈值Twhite和黑目标阈值Tblack送到可编程逻辑阵列内部的二值化模块;
窗口和鼠标位置传送模块:实时跟踪时将目标所在的窗口位置和鼠标位置送到可编程逻辑阵列内部作为控制多路选择器选通信号;
实时跟踪时字符组织模块:在内存中分配第二图像缓存区,从字库中获取与串口读取的时间码信息、命令信息对应的待显示字符在点阵数组中的位置,然后将待显示字符灰度数据存到第二图像缓存区;将第二图像缓存区中的字符作为第三层图像存储到第三图像存储区中,其中与命令信息对应的待显示字符存储到对应于图像上部字符显示区的位置,与时间码信息对应的待显示字符存储到对应于图像下部字符显示区的位置;释放该图像缓存区;
所述可编程逻辑阵列包括:
抽行抽列模块:将摄像机拍摄的原始图像作为第一层图像存储到第一图像存储区或者对摄像机拍摄的原始图像进行抽行抽列后将降低了分辨率后的图像作为第一层图像存储到第一图像存储区;
二值化模块:根据数字信号处理器计算出的白目标阈值Twhite和黑目标阈值Tblack对原始图像或抽行抽列后的图像进行二值化处理,将得到二值化图像作为第二层图像存储于第二图像存储区;
运算模块:将同步动态随机存储器3传输的第一层图像、第二层图像和第三层图像中各像素乘以比例系数后按点对点的方式进行灰度值相加得到叠加后的视频图像;将叠加后的视频图像送到多路选择器;
多路选择器:根据数字信号处理器传送的跟踪窗口位置和鼠标位置产生跟踪窗口和鼠标图形,将跟踪窗口和鼠标图形与运算模块送来的图像叠加,叠加后的图像通过D/A转换器送给显示器显示。
所述第一层图像各像素所乘的比例系数为4/8;第二层图像各像素所乘的比例系数为1/8;第三层图像各像素所乘的比例系数为3/8。将1/8的倍数作为比例系数的目的是除8运算可以左移3位完成,避免了复杂的除法运算。
所述数字信号处理器还包括图像组织模块,图像组织模块用于:在不需要实时跟踪,需要看图像增强、多目标时每个目标的二值化情况时,将窗口位置和大小置0,鼠标位置置0,送到可编程逻辑阵列内部作为控制多路选择器的选通信号;将黑目标阈值Tblack置0,白目标阈值Twhite置255,送到可编程逻辑阵列内部的二值化模块,使其产生的二值信号为0;在内存中分配第三图像缓存区并清零,画大十字丝,画待显示的字符信息;对原始图像进行增强处理、抽行抽列,对所跟踪的各个目标按各自的阈值Twhite和Tblack进行二值化,增强的图像、抽行抽列后的图像及二值化图像乘以比例系数后与大十字丝、字符信息按点对点的方式叠加到第三图像缓存区;将目标所在的窗口位置和鼠标位置叠加到第三图像缓存区;将第三图像缓存区中的叠加图像送到第三图像存储区,释放该图像缓存区;
所述增强的图像各像素所乘的比例系数为4/8;抽行抽列后的图像各像素所乘的比例系数为1/8;二值化图像各像素所乘的比例系数为3/8。由于DSP软件实现的灵活性,该比例系数可以修改。
本发明在不改变硬件结构的情况下可以直接利用嵌入式跟踪器平台的DSP、FPGA和SDRAM对跟踪信息进行叠加显示,由于不增加器件,因而不会加大线路板尺寸,降低了系统功耗,有利于小型化。图像的抽行抽列处理、图像的二值化处理、跟踪窗口和鼠标显示由FPGA完成;DSP在完成实时跟踪的同时负责计算黑、白目标阈值、组织待更新的显示字符、计算目标窗口位置。由于图像处理由FPGA完成,减小了DSP的压力,提高了DSP程序的执行效率,在不影响跟踪实时性前提下,有效实现了跟踪信息的叠加显示。DSP软件在实时跟踪的基础上完成字符叠加功能,字符仅放在屏幕的上方和下方。由于与命令信息对应的字符变化频率低,当这些字符没有变化时,DSP只需将与时间码信息对应的变化了的字符存储到同步动态随机存储器3第三图像存储区中对应于图像下部字符显示区的位置。这样,进一步减轻了DSP的压力。本发明具有可靠性高、速度快等优点,利用DSP组织字符,字符内容修改方便。另外,当不需实时跟踪时还可以看图像增强,各窗口内目标提取情况等特殊显示效果。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细说明。
图1为本发明的电视跟踪器中的视频叠加显示装置结构框图。
图2为叠加后显示的图像示意图。
图3为存储了字母X、Y的20×20点阵数组示意图。
图4为数字信号处理器程序流程图。
具体实施方式
如图1所示,本发明的电视跟踪器中的视频叠加显示装置包括数字信号处理器1,可编程逻辑阵列2,同步动态随机存储器3。
本发明利用嵌入式跟踪器平台内部的数字信号处理器(DSP)、可编程逻辑阵列(FPGA)和同步动态随机存储器(SDRAM)共同完成视频图像的叠加。叠加后的图像通过D/A转换器送给显示器显示。
如图2所示,待显示的视频图像分成三层:第一层为摄像机拍摄的原始图像或原始图像降分辨率后得到的图像,是否降分辨率取决于输入图像的大小;第二层是二值化图像;第三层是要叠加的字符图像和十字丝等不需要更新的图像。
如图1所示,同步动态随机存储器3可以采用大于8M的SDRAM,SDRAM分成N个2M大小的块,每块可单独寻址,分别作为原始图像存储区(存储摄像机来的原始图像)、第一图像存储区(存储摄像机拍摄的原始图像或原始图像降分辨率后得到的图像)、第二图像存储区(存储二值化图像)、第三图像存储区(存储字符图像和十字丝等不需要更新的图像)。
显示可分成以下几部分,分别为是原始图像、二值图像、字符、十字丝、鼠标和跟踪窗口。
叠加显示是在嵌入式跟踪器平台上由FPGG和DSP共同完成。以8位1280×1024大小的输入图像为例,fpga实现流程图如图3所示。显示分三层,将大于8M的sdram分成N个2M大小的块,每块可单独寻址,各层图像分别放在不同的块中。第一层是原始图像,或原始图像降分辨率后得到的图像,是否降分辨率取决于输入图像的大小,第二层是要叠加的字符图像,第三层是二值化图像,各层按比例加。
摄像机拍摄的目标图像分为两路,一路经同步动态随机存储器3的原始图像存储区缓存后输出给数字信号处理器1,由数字信号处理器1对目标进行跟踪处理,另一路输出到可编程逻辑阵列2。
所述数字信号处理器1包括字库提取软件模块,上电初始时字符和大十字丝组织模块,信息读取模块,阈值计算模块,窗口和鼠标位置传送模块,实时跟踪时字符组织模块和图像组织模块。
字库提取软件模块:用于针对可能用到的所有字符建立M×N的字库点阵数组(M为点阵数组的行数,N为点阵数组的列数,M和N的大小应能够放置所有要显示的字符,并且能够保证字符显示清楚),点阵数组中各点灰度数据取值0或255,分别对应某个字符中对应像素点的亮度值。例如,图3所示为20×20的点阵数组,该点阵数组存放了字符X和Y,第1行第2、6、9、13列各点、第2行第3、5、10、12列各点、第3行第4、11列各点、第4行第3、5、11列各点和第5行第2、6、11列的各点灰度数据取值255,其他各点的灰度数据取值0。存放点阵数组时,为方便显示调用,不是把一个字符的点阵数组连续存放,而是把点阵数组中第一行N个点连续存放,再连续存第二行N个点,以此类推。
上电初始时字符和大十字丝组织模块:画大十字丝(即将大十字丝位置的像素灰度值置255);在DSP在内存中分配与第三图像存储区大小相同的第一图像缓存区并清零,从字库中获取上电初始时需要显示的如图2上部的“跟踪方式:”、“阈值:”、“二值:”等不需要更新的字符在点阵数组中的位置;将要显示的所有字符第一行灰度数据存到第一图像缓存区后,修改点阵数据指针和图像位置指针到下一行,循环执行M次;将存储的字符和大十字丝图像作为第三层图像存储到同步动态随机存储器3的第三图像存储区,其中字符存储于第三图像存储区中对应于图像上部字符显示区的位置;释放该图像缓存区。
信息读取模块:从串口读取外部时统终端发来的时间码信息,读取外部控制计算机发来的跟踪方式(如重心、边缘、相关等)、阈值调节(↑↓)及是否显示二值图像(显示、不显示)等命令,并将时间码、命令等信息传送到实时跟踪时字符组织模块。
阈值计算模块:读取图像,计算直方图,求出图像的像素灰度最大值max、灰度最小值min和平均值mean,然后根据像素灰度最大值max、灰度最小值min和平均值mean计算出白目标阈值Twhite和黑目标阈值Tblack:
Twhite=mean+(max-mean)/2
Tblack=mean-(mean-min)/2
将白目标阈值Twhite和黑目标阈值Tblack送到可编程逻辑阵列内部的二值化模块。
窗口和鼠标位置传送模块:实时跟踪时将目标所在的窗口位置和鼠标位置送到可编程逻辑阵列内部作为控制多路选择器选通信号;
实时跟踪时字符组织模块:在内存中分配第二图像缓存区,从字库中获取与串口读取的时间码、命令等信息对应的待显示字符在点阵数组中的位置;将所有字符第一行灰度数据存到第二图像缓存区后,修改点阵数据指针和图像位置指针到下一行,循环执行M次;将与命令信息对应的待显示字符作为第三层图像存储到同步动态随机存储器3第三图像存储区中对应于图像上部字符显示区的位置,将与时间码信息对应的待显示字符存储到同步动态随机存储器3第三图像存储区中对应于图像下部字符显示区的位置;当与命令信息对应的字符没有变化时,只将变化了的与时间码信息对应的字符存储到同步动态随机存储器3第三图像存储区中对应于图像下部字符显示区的位置;释放该图像缓存区。
图像组织模块:在不需要实时跟踪,需要看图像增强、多目标时每个目标的二值化等情况时,将窗口位置和大小置0,鼠标位置置0,送到可编程逻辑阵列内部作为控制多路选择器的选通信号;将黑目标阈值Tblack置0,白目标阈值Twhite置255,送到可编程逻辑阵列内部的二值化模块,使其产生的二值信号为0;在DSP内存中分配第三图像缓存区并清零,画大十字丝,画待显示的字符信息;对原始图像进行增强处理、抽行抽列,对所跟踪的各个目标按各自的阈值Twhite和Tblack进行二值化,增强的图像、抽行抽列后的图像及二值化图像乘以比例系数后与大十字丝、字符信息按点对点的方式叠加到第三图像缓存区;将目标所在的窗口位置和鼠标位置叠加到第三图像缓存区;将图像缓存区中的叠加图像送到同步动态随机存储器3的第三图像存储区,释放该图像缓存区。
所述增强的图像的比例系数为4/8;抽行抽列后的图像比例系数为1/8;二值化图像比例系数为3/8。由于DSP软件实现的灵活性,该比例系数可以修改。
DSP软件在实时跟踪的基础上完成字符叠加功能,字符仅放在屏幕的上方和下方。由于与命令信息对应的字符变化频率低,当这些字符没有变化时,DSP只需将与时间码信息对应的变化了的字符存储到第三图像存储区中对应于图像下部字符显示区的位置。这样,进一步减轻了DSP的压力。
可编程逻辑阵列2包括抽行抽列模块,二值化模块,运算模块和多路选择器(MUX)。
抽行抽列模块:将摄像机拍摄的原始图像作为第一层图像存储到同步动态随机存储器3的第一图像存储区或者对摄像机拍摄的原始图像进行抽行抽列后将降低了分辨率后的图像作为第一层图像存储到同步动态随机存储器3的第一图像存储区;
二值化模块:根据数字信号处理器计算出的白目标阈值Twhite和黑目标阈值Tblack对原始图像或抽行抽列后的图像进行二值化处理,将得到二值化图像作为第二层图像存储于同步动态随机存储器3的第二图像存储区;
二值化模块将原始图像或抽行抽列后的图像中灰度值在0~Tblack之间的像素赋值255,表示黑目标,将灰度值在Tblack~Twhite之间的像素赋值0,表示背景;将灰度值在Twhite-255之间的像素赋值255,表示亮目标,从而得到二值化图像;
运算模块:将同步动态随机存储器3传输的第一层图像、第二层图像和第三层图像中各像素乘以比例系数后按点对点的方式进行灰度值相加得到叠加后的视频图像;将叠加后的视频图像送到多路选择器;
为了使显示效果更适合于人眼习惯,本发明中第一层图像(原始图像或降分辨率后得到的图像)分配较大的比例,占50%。由于显示二值化图像只是为查看目标提取效果,所以第二层图像可分配较少的比例,占12.5%。第三层图像(字符图像和十字丝等不需要更新的图像)占37.5%。将各层图像中的各像素乘以系数后按点对点的方式进行灰度值相加得到叠加后的视频图像。例如第一层图像中第i行第j列的像素值为200,第二层图像中第i行第j列的像素值为255,第三层图像中第i行第j列的像素值为255,则叠加后的视频图像第i行第j列的像素值为200×4/8+255×3/8+255×1/8≈228。将1/8的倍数作为比例系数的目的是除8运算可以左移3位完成,避免了复杂的除法运算。
多路选择器:根据数字信号处理器传送的跟踪窗口位置和鼠标位置产生跟踪窗口和鼠标图形,将跟踪窗口和鼠标图形与运算模块送来的图像叠加,叠加后的图像通过D/A转换器送给显示器显示。
对于窗口左上角和右下角坐标分别为(x1,y1),(x2,y2)水平计数和垂直计数器分别是Hcnt,Vcnt,输出信号为Win_o,pixel_clk为图像的像素时钟,窗口控制信号可以由如下进程完成,
Figure BDA0000068021320000101
如图4所示,DSP的工作流程如下:
1)上电初始化:初始化DSP本身的外设,以及D/A转换器等外围芯片;
2)建立字库:采用字库提取软件,对可能用到的所有字符建立M×N的字库点阵数组,(M为点阵数组的行数,N为点阵数组的列数,M和N的大小应能够放置所有要显示的字符,并且能够保证字符显示清楚),点阵数组中各点灰度数据取值0或255,分别对应某个字符中对应像素点的亮度值。存放点阵数组时,为方便显示调用,不是把一个字符的点阵数组连续存放,而是把点阵数组中第一行N个点连续存放,再连续存第二行N个点,以此类推。
3)组织第三层图像:在内存中分配第一图像缓存区并清零,画大十字丝(即将大十字丝位置置255);画上电初始时需要显示的字符信息:获取上电初始时需要显示的字符在点阵数组中的位置,取字库大小对应的点数放在第一图像缓存区相应位置处,将要显示的所有字符第一行灰度数据存到第一图像缓存区后,修改点阵数据指针和图像位置指针到下一行,循环执行M次。写第一图像缓存区中的图像到同步动态随机存储器3的第三图像存储区,释放该图像缓存区;
4)等待场中断到来;
5)从串口读取跟踪所需命令(跟踪命令)及时间码等信息;
6)读摄像机拍摄的原始图像、滤波、计算阈值(白目标阈值Twhite和黑目标阈值Tblack);
7)捕获跟踪目标;
8)将白目标阈值Twhite和黑目标阈值Tblack送到FPGA的二值化模块,供FPGA二值化用,若不需要显示二值化图像时,Twhite和黑目标阈值Tblack分别设为最大和最小灰度值;实时跟踪时将窗口位置和鼠标位置送到FPGA的多路选择器,供FPGA显示窗口和鼠标用;
9)在不需要特殊显示时,按步骤3中的方法组织输出变化的字符;将变化的字符图像通过FPGA输出到同步动态随机存储器3,转步骤4;
10)在不需要实时跟踪可以特殊显示时,需要看图像增强、多目标时每个目标的二值化等情况时,将窗口位置和大小置0,鼠标位置置0,送到FPGA内部作为控制多路选择器的选通信号内部作为控制多路选择器的选通信号,将黑目标阈值Tblack置0,白目标阈值Twhite置255,送到可编程逻辑阵列内部的二值化模块,使其产生的二值信号为0;在内存中分配第三显示图像缓存区并清零,画大十字丝,画待显示的字符信息,对原始图像进行增强处理,抽行抽列,对所跟踪的各个目标按各自的阈值Twhite和Tblack进行二值化,将增强的图像、抽行抽列后的图像及二值化图像乘以比例系数后与大十字丝、字符信息按点对点的方式叠加到第三图像缓存区;将目标所在的窗口位置和鼠标位置叠加到第三图像缓存区;将第三图像缓存区中的叠加图像送到同步动态随机存储器3的第三图像存储区,释放该图像缓存区;转步骤4。

Claims (4)

1.一种电视跟踪器中的视频叠加显示装置,其特征在于包括数字信号处理器(1),可编程逻辑阵列(2),同步动态随机存储器(3);
所述同步动态随机存储器(3)包括原始图像存储区、第一图像存储区、第二图像存储区和第三图像存储区;
所述数字信号处理器(1)包括:
字库提取软件模块:用于针对可能用到的所有字符建立M×N的字库点阵数组,其中M为点阵数组的行数,N为点阵数组的列数;点阵数组中各点灰度数据取值0或255,分别对应某个字符中对应像素点的亮度值;
上电初始时字符和大十字丝组织模块:放置初始显示字符并画大十字丝,在内存中分配与第三图像存储区大小相同的第一图像缓存区并清零,从字库中获取上电初始时待显示的字符在点阵数组中的位置;将待显示的所有字符灰度数据存到第一图像缓存区中;将第一图像缓存区中的字符和大十字丝作为第三层图像存储到第三图像存储区,其中字符存储于第三图像存储区中对应于图像上部字符显示区的位置;释放该图像缓存区;
信息读取模块:从串口读取外部时统终端发来的时间码信息,读取外部控制计算机发来的命令信息,并将时间码信息、命令信息传送到实时跟踪时字符组织模块;
阈值计算模块:读取图像并根据图像像素灰度最大值max、灰度最小值min和灰度平均值mean计算出白目标阈值Twhite和黑目标阈值Tblack:
Twhite=mean+(max-mean)/2
Tblack=mean-(mean-min)/2
将白目标阈值Twhite和黑目标阈值Tblack送到可编程逻辑阵列内部的二值化模块;
窗口和鼠标位置传送模块:实时跟踪时将目标所在的窗口位置和鼠标位置送到可编程逻辑阵列内部作为控制多路选择器选通信号;
实时跟踪时字符组织模块:在内存中分配第二图像缓存区,从字库中获取与串口读取的时间码信息、命令信息对应的待显示字符在点阵数组中的位置,然后将待显示字符灰度数据存到第二图像缓存区;将第二图像缓存区中的字符作为第三层图像存储到第三图像存储区中,其中与命令信息对应的待显示字符存储到对应于图像上部字符显示区的位置,与时间码信息对应的待显示字符存储到对应于图像下部字符显示区的位置;释放该图像缓存区;
所述可编程逻辑阵列(2)包括:
抽行抽列模块:将摄像机拍摄的原始图像作为第一层图像存储到第一图像存储区或者对摄像机拍摄的原始图像进行抽行抽列后将降低了分辨率后的图像作为第一层图像存储到第一图像存储区;
二值化模块:根据数字信号处理器计算出的白目标阈值Twhite和黑目标阈值Tblack对原始图像或抽行抽列后的图像进行二值化处理,将得到二值化图像作为第二层图像存储于第二图像存储区;
运算模块:将同步动态随机存储器3传输的第一层图像、第二层图像和第三层图像中各像素乘以比例系数后按点对点的方式进行灰度值相加得到叠加后的视频图像;将叠加后的视频图像送到多路选择器;
多路选择器:根据数字信号处理器传送的跟踪窗口位置和鼠标位置产生跟踪窗口和鼠标图形,将跟踪窗口和鼠标图形与运算模块送来的图像叠加,叠加后的图像通过D/A转换器送给显示器显示。
2.根据权利要求1所述的电视跟踪器中的视频叠加显示装置,其特征在于所述第一层图像各像素所乘的比例系数为4/8;第二层图像各像素所乘的比例系数为1/8;第三层图像各像素所乘的比例系数为3/8。
3.根据权利要求1所述的电视跟踪器中的视频叠加显示装置,其特征在于所述数字信号处理器1还包括图像组织模块,图像组织模块用于:在不需要实时跟踪,需要看图像增强、多目标时每个目标的二值化情况时,将窗口位置和大小置0,鼠标位置置0,送到可编程逻辑阵列内部作为控制多路选择器的选通信号;将黑目标阈值Tblack置0,白目标阈值Twhite置255,送到可编程逻辑阵列内部的二值化模块,使其产生的二值信号为0;在内存中分配第三图像缓存区并清零,画大十字丝,画待显示的字符信息;对原始图像进行增强处理、抽行抽列,对所跟踪的各个目标按各自的阈值Twhite和Tblack进行二值化,增强的图像、抽行抽列后的图像及二值化图像乘以比例系数后与大十字丝、字符信息按点对点的方式叠加到第三图像缓存区;将目标所在的窗口位置和鼠标位置叠加到第三图像缓存区;将第三图像缓存区中的叠加图像送到第三图像存储区,释放该图像缓存区;
4.根据权利要求3所述的电视跟踪器中的视频叠加显示装置,其特征在于所述增强的图像各像素所乘的比例系数为4/8;抽行抽列后的图像各像素所乘的比例系数为1/8;二值化图像各像素所乘的比例系数为3/8。
CN2011101579677A 2011-06-14 2011-06-14 电视跟踪器中的视频叠加显示装置 Expired - Fee Related CN102209205B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011101579677A CN102209205B (zh) 2011-06-14 2011-06-14 电视跟踪器中的视频叠加显示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011101579677A CN102209205B (zh) 2011-06-14 2011-06-14 电视跟踪器中的视频叠加显示装置

Publications (2)

Publication Number Publication Date
CN102209205A true CN102209205A (zh) 2011-10-05
CN102209205B CN102209205B (zh) 2012-11-07

Family

ID=44697845

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101579677A Expired - Fee Related CN102209205B (zh) 2011-06-14 2011-06-14 电视跟踪器中的视频叠加显示装置

Country Status (1)

Country Link
CN (1) CN102209205B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857703A (zh) * 2012-09-07 2013-01-02 天津市亚安科技股份有限公司 高清视频字符叠加系统及控制方法
CN105844656A (zh) * 2016-04-22 2016-08-10 中国电子科技集团公司第三研究所 一种图像二值化目标分割装置及方法
CN107807777A (zh) * 2017-09-28 2018-03-16 中国科学院长春光学精密机械与物理研究所 多核嵌入式电视跟踪器人机交互装置及方法
CN108259797A (zh) * 2018-01-09 2018-07-06 武汉精测电子集团股份有限公司 一种对图像进行字符叠加的方法及装置
CN108319918A (zh) * 2018-02-05 2018-07-24 中国科学院长春光学精密机械与物理研究所 一种嵌入式跟踪器及应用于嵌入式跟踪器的目标跟踪方法
CN111311479A (zh) * 2020-01-14 2020-06-19 成都智明达电子股份有限公司 一种基于fpga字符叠加的方法
CN112492239A (zh) * 2019-09-12 2021-03-12 北京嗨动视觉科技有限公司 字符叠加显示方法、装置及系统以及计算机可读存储介质
CN113259679A (zh) * 2021-06-30 2021-08-13 四川赛狄信息技术股份公司 基于国产dsp芯片实现图像压缩的图像处理系统
CN113709399A (zh) * 2021-08-31 2021-11-26 中国电子科技集团公司第五十八研究所 一种基于dsp+fpga的视觉目标跟踪系统
CN114938433A (zh) * 2022-07-25 2022-08-23 四川赛狄信息技术股份公司 基于fpga的视频图像处理方法、系统、终端及介质
WO2023184850A1 (zh) * 2022-03-31 2023-10-05 晶晨半导体(上海)股份有限公司 视频图像处理方法及装置、设备以及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402549A (zh) * 2001-12-07 2003-03-12 中国科学院长春光学精密机械与物理研究所 一种电视跟踪实时测量系统字符叠加显示方式
CN101414866A (zh) * 2007-10-17 2009-04-22 中卫视讯卫星科技(北京)有限公司 移动目标卫星跟踪定位、识别、语音视频、数据传输终端机
CN101753919A (zh) * 2008-12-17 2010-06-23 康佳集团股份有限公司 一种增大电视自动频点跟踪范围的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402549A (zh) * 2001-12-07 2003-03-12 中国科学院长春光学精密机械与物理研究所 一种电视跟踪实时测量系统字符叠加显示方式
CN101414866A (zh) * 2007-10-17 2009-04-22 中卫视讯卫星科技(北京)有限公司 移动目标卫星跟踪定位、识别、语音视频、数据传输终端机
CN101753919A (zh) * 2008-12-17 2010-06-23 康佳集团股份有限公司 一种增大电视自动频点跟踪范围的方法

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857703A (zh) * 2012-09-07 2013-01-02 天津市亚安科技股份有限公司 高清视频字符叠加系统及控制方法
CN105844656A (zh) * 2016-04-22 2016-08-10 中国电子科技集团公司第三研究所 一种图像二值化目标分割装置及方法
CN105844656B (zh) * 2016-04-22 2018-08-03 中国电子科技集团公司第三研究所 一种图像二值化目标分割装置及方法
CN107807777B (zh) * 2017-09-28 2021-03-19 中国科学院长春光学精密机械与物理研究所 多核嵌入式电视跟踪器人机交互装置及方法
CN107807777A (zh) * 2017-09-28 2018-03-16 中国科学院长春光学精密机械与物理研究所 多核嵌入式电视跟踪器人机交互装置及方法
CN108259797A (zh) * 2018-01-09 2018-07-06 武汉精测电子集团股份有限公司 一种对图像进行字符叠加的方法及装置
CN108319918A (zh) * 2018-02-05 2018-07-24 中国科学院长春光学精密机械与物理研究所 一种嵌入式跟踪器及应用于嵌入式跟踪器的目标跟踪方法
CN108319918B (zh) * 2018-02-05 2022-07-08 中国科学院长春光学精密机械与物理研究所 一种嵌入式跟踪器及应用于嵌入式跟踪器的目标跟踪方法
CN112492239A (zh) * 2019-09-12 2021-03-12 北京嗨动视觉科技有限公司 字符叠加显示方法、装置及系统以及计算机可读存储介质
CN111311479A (zh) * 2020-01-14 2020-06-19 成都智明达电子股份有限公司 一种基于fpga字符叠加的方法
CN111311479B (zh) * 2020-01-14 2023-09-29 成都智明达电子股份有限公司 一种基于fpga字符叠加的方法
CN113259679A (zh) * 2021-06-30 2021-08-13 四川赛狄信息技术股份公司 基于国产dsp芯片实现图像压缩的图像处理系统
CN113709399A (zh) * 2021-08-31 2021-11-26 中国电子科技集团公司第五十八研究所 一种基于dsp+fpga的视觉目标跟踪系统
CN113709399B (zh) * 2021-08-31 2024-03-08 中国电子科技集团公司第五十八研究所 一种基于dsp+fpga的视觉目标跟踪系统
WO2023184850A1 (zh) * 2022-03-31 2023-10-05 晶晨半导体(上海)股份有限公司 视频图像处理方法及装置、设备以及存储介质
CN114938433A (zh) * 2022-07-25 2022-08-23 四川赛狄信息技术股份公司 基于fpga的视频图像处理方法、系统、终端及介质

Also Published As

Publication number Publication date
CN102209205B (zh) 2012-11-07

Similar Documents

Publication Publication Date Title
CN102209205B (zh) 电视跟踪器中的视频叠加显示装置
US10504400B2 (en) Method and apparatus for performing correction processing on grayscale of a pixel in an image
CN100530343C (zh) 多屏合成显示装置及方法
CN205140493U (zh) 控制显示屏进行横竖屏切换的装置
CN109493814B (zh) 画面补偿方法、装置、显示装置和计算机可读存储介质
KR102048885B1 (ko) 그래픽 프로세싱 유닛, 이를 포함하는 그래픽 프로세싱 시스템, 및 이를 이용한 렌더링 방법
WO2017052976A1 (en) A method and system of low-complexity histogram of gradients generation for image processing
US9804709B2 (en) Vector fill segment method and apparatus to reduce display latency of touch events
WO2019222889A1 (zh) 一种图像特征提取方法及装置
CN106843493A (zh) 一种图像追踪方法及应用该方法的扩增实境实现方法
US9811334B2 (en) Block operation based acceleration
CN104951127A (zh) 用于生成显示覆盖的系统和方法以及显示系统
US20010028354A1 (en) System and method for buffer clearing for use in three-dimensional rendering
US9984430B2 (en) Ordering threads as groups in a multi-threaded, multi-core graphics compute system
US9972062B2 (en) Parallel flood-fill techniques and architecture
CN106683155A (zh) 一种三维模型综合动态调度方法
US9148544B2 (en) System, process, and computer program product for implementing a document scanner in a hand-held device
CN113641290A (zh) 触摸和显示控制设备、显示设备及其操作方法、电子系统
CN112740278A (zh) 混合邻近分格
US20210358135A1 (en) Feature detection, sorting, and tracking in images using a circular buffer
CN114742970A (zh) 虚拟三维模型的处理方法、非易失性存储介质及电子装置
US9558560B2 (en) Connected component labeling in graphics processors
CN115880127A (zh) 一种渲染格式选择方法及其相关设备
CA1190335A (en) Graphics display system and method
CN116453131B (zh) 文档图像矫正方法、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121107

Termination date: 20140614

EXPY Termination of patent right or utility model