CN111436214B - 图像信号处理装置和方法 - Google Patents

图像信号处理装置和方法 Download PDF

Info

Publication number
CN111436214B
CN111436214B CN201880002189.4A CN201880002189A CN111436214B CN 111436214 B CN111436214 B CN 111436214B CN 201880002189 A CN201880002189 A CN 201880002189A CN 111436214 B CN111436214 B CN 111436214B
Authority
CN
China
Prior art keywords
parameter
image signal
type
processing unit
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880002189.4A
Other languages
English (en)
Other versions
CN111436214A (zh
Inventor
陈泓辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Goodix Technology Co Ltd
Original Assignee
Shenzhen Goodix Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Goodix Technology Co Ltd filed Critical Shenzhen Goodix Technology Co Ltd
Publication of CN111436214A publication Critical patent/CN111436214A/zh
Application granted granted Critical
Publication of CN111436214B publication Critical patent/CN111436214B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/60Memory management

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种图像信号处理方法,其特征在于,所述方法包括:在多个时间刻分别取得第一图像信号;在多个时间刻分别取得参数组,其包括对应第一类型运算的第一类型参数及对应第二类型运算的第二类型参数,其中所述第一类型运算不同于所述第二类型运算;依据在时间刻T所取得的参数组以及对应所述时间刻T的第一图像信号,进行所述第一类型运算,产生第二图像信号;以及依据对应时间刻T所产生的第二图像信号以及在时间刻T+1所取得的所述参数组进行所述第二类型运算,产生第三图像信号。

Description

图像信号处理装置和方法
技术领域
本发明涉及图像信号处理,尤其涉及一种能减少因外部参数读取延迟而造成运算错误的图像信号处理装置和方法。
背景技术
在一般的图像信号处理中,针对每个像素进行运算处理,通常会将处理程序分成好几个处理模块,各个处理模块间会有不同的处理延迟。因此,图像中的同一个像素点位置,会在不同的时序进行运算处理。一般的处理延迟可能会差距数条图像输入线的时间差,假使这些处理模块取用存储在外部针对每个像素的调整参数,则取得这些调整参数的时序,必须跟像素进行运算处理的时序匹配。
现有的作法是将不同模块的调整参数分别存储,因此在读取外部的调整参数时,各个处理模块会在需要使用到相对应参数时,才分别去读取所需要的参数,会造成额外的读取时间损失。
发明内容
本发明的目的之一在于提供一种图像信号处理装置和方法,来解决现有技术中图像处理调整参数读取存在额外读取时间损失的技术问题。
本发明的一实施例公开了一种图像信号处理方法。图像信号处理方法包含以下步骤:在多个时间刻分别取得第一图像信号;在多个时间刻分别取得参数组,其包括对应第一类型运算的第一类型参数及对应第二类型运算的第二类型参数,其中所述第一类型运算不同于所述第二类型运算;依据在时间刻T所取得的参数组以及对应所述时间刻T的第一图像信号,进行所述第一类型运算,产生第二图像信号;以及依据对应时间刻T所产生的第二图像信号以及在时间刻T+1所取得的所述参数组进行所述第二类型运算,产生第三图像信号。
本发明的一实施例公开了一种图像信号处理装置。图像信号处理装置包含存储单元,存储第一参数组,所述第一参数组包含对应第一类型运算的第一参数及对应第二类型运算的第二参数,其中所述第一类型运算不同于所述第二类型运算;第一处理单元,接收所述第一参数组及第一图像信号,并依据所述第一参数及所述第一图像信号进行所述第一类型运算,产生第二图像信号;以及第二处理单元,从所述第一处理单元接收所述第一参数组的所述第二参数及所述第二图像信号,并依据所述第二参数及所述第二图像信号进行所述第二类型运算,产生第三图像信号。
本发明实施例提供的图像信号处理方法和装置,通过将不同类型处理单元所需要的参数组合为参数组一次读取出来,而可减少处理单元读取的次数,降低读取时间的损失。
附图说明
图1是本发明一图像信号处理装置的一实施例的功能方框示意图。
图2是本发明一图像信号处理装置的另一实施例的功能方框示意图。
图3A至图3D是本发明一图像信号处理装置的一实施例的工作过程示意图。
图4是本发明一图像信号处理装置的又一实施例的功能方框示意图。
图5是本发明一图像信号处理方法的一实施例的流程图。
图6是本发明一图像信号处理方法的另一实施例的流程图。
其中,附图标记说明如下:
100、200、300、400 图像信号处理装置
110 存储单元
111、411 多个参数组
112、312、412、512、612、712 参数组
120 第一处理单元
122 第一参数暂存单元
124 第一信号缓存单元
130 第二处理单元
132 第二参数暂存单元
134 第二信号缓存单元
140 第三处理单元
142 第三参数暂存单元
144 第三信号缓存单元
150 信号源
210 控制单元
500、600 图像信号处理方法
502、504、506、508、602、604、606、608、610 步骤
A1、A2、A3 第一参数
B1、B2 第二参数
C1 第三参数
DA1 第一虚设参数
DB1、DB2 第二虚设参数
DC1、DC2、DC3 第三虚设参数
S1 第一图像信号
S2 第二图像信号
S3 第三图像信号
S4 第四图像信号
T1 第一时间
T2 第二时间
T3 第三时间
T4 第四时间
具体实施方式
在说明书及之前的权利要求书当中使用了某些词汇来指称特定的组件。本领域的技术人员应可理解,制造商可能会用不同的名词来称呼同样的组件。本说明书及之前的权利要求书并不以名称的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的基准。在通篇说明书及之前的权利要求书当中所提及的“包含”为一开放式的用语,故应解释成“包含但不限定于”。此外,“耦接”一词在此包含任何直接和间接的电连接手段。因此,若文中描述一第一装置耦接于一第二装置,则代表所述第一装置可直接电连接于所述第二装置,或通过其它装置或连接手段间接地电连接到所述第二装置。
本发明所公开图像信号处理装置和方法的可通过将所需要的参数组合为参数组一次读取出来,让进行图像处理读取参数组时,可减少处理单元读取的次数,降低读取时间的损失。进一步的说明如下。
图1是本发明一图像信号处理装置100的一实施例的功能方框示意图。图像信号处理装置100可包含(但不限于)存储单元110、第一处理单元120及第二处理单元130。在某些实施例,图像信号处理装置100更可包含第三处理单元140。在某些实施例,第一处理单元120可以进行第一类型运算,第二处理单元130可以进行第二类型运算,第三处理单元140可以进行第三类型运算。第一类型运算、第二类型运算及第三类型运算分别对图像数据进行不同的运算处理,第一类型运算、第二类型运算及第三类型运算分别包含不同的图像处理相关算法。举例来说,但本发明不限于此,第一类型运算系用来进行图像平坦度运算处理,第二类型运算系用来进行像素缺陷运算处理,第三类型运算系用来进行变形运算处理。具体来说,第二处理单元130系依据第一处理单元120的输出第二图像信号S2再加以运算,以及第三处理单元140系依据第二处理单元130的输出第三图像信号S3再加以运算。
多个参数组111(包含参数组112)可以存储在存储单元110中。存储单元110可以是非易失性的存储器,存储单元110也可以是闪速存储器。第一、第二以及第三处理单元120、130以及140分别可具有(但不限于)第一、第二以及第三参数暂存单元122、132以及142及第一、第二以及第三信号缓存单元124、134以及144,第一、第二以及第三参数暂存单元122、132以及142用来暂存从存储单元110读取出来的参数组;第一信号缓存单元124用来暂存从信号源(例如影像传感器)150读取出来的图像信号,第二以及第三信号缓存单元134以及144用来暂存从处理单元输出的图像信号。当第一、第二以及第三处理单元120、130以及140在进行第一、第二以及第三类型运算时,会分别依据第一、第二以及第三参数暂存单元122、132以及142以及第一、第二以及第三信号缓存单元124、134以及144所暂存的数据进行运算,第一、第二以及第三处理单元120、130以及140可分别包含运算单元以及控制单元(未绘示于图中)。
举例来说,第一、第二以及第三参数暂存单元122、132、142可以是行缓冲器(linebuffer)。第一处理单元120、第二处理单元130及第三处理单元140每次进行的运算可以是涵盖不同的图像信号的信号量,例如,第一处理单元120会针对影像的每一行分别进行运算,第二处理单元130会搜集第一处理单元120运算后的超过一行的数据一起进行运算。因此,第一处理单元120、第二处理单元130及第三处理单元140可以分别具有不同的处理时间,也就是说,因为第一处理单元120、第二处理单元130及第三处理单元140每次所要处理的信号量可以不同,所以可能需要等待而造成时序延迟。多个参数组111中的每一个参数组包含第一参数AN、第二参数BN及第三参数CN,其中N为正整数,代表输出的顺序,例如第一个输出的参数组112包含第一参数A1、第二参数B1及第三参数C1。举例来说,存储单元110输出参数组112时,会将第一参数A1、第二参数B1及第三参数C1以连续的序列输出。第一、第二以及第三参数暂存单元122、132、142可以分别用来暂存参数组112的第一参数A1、第二参数B1及第三参数C1。第一参数A1、第二参数B1及第三参数C1是实设参数,实质上分别为第一、第二以及第三类型运算所需的参数。
第一、第二以及第三信号缓存单元124、134、144可以是行缓冲器,分别是用于暂存输入到第一处理单元120、第二处理单元130、第三处理单元140的图像信号S1、S2、S3。藉此,第一处理单元120、第二处理单元130、第三处理单元140可以分别从参数暂存单元122、132、142取得第一参数A1、第二参数B1及第三参数C1,再对图像信号S1、S2、S3分别进行运算处理。
以下,详细说明图像信号处理装置100的工作过程。
如图1所示,第一处理单元120可以接收参数组112,并且从信号源(例如影像传感器)150接收第一图像信号S1。第一图像信号S1例如是还未进行调整处理的图像数据(或称原始图像数据)。第一图像信号S1可以是一帧中的一行或数行像素数据,也可以是一帧中的某个区块的像素数据。在某些实施例中,参数组112可以包含(但不限于)对应第一类型运算的第一参数A1、对应第二类型运算的第二参数B1及对应第三类型运算的第三参数C1。举例来说(但本发明不限于此),参数组112可以包含增益(gain)参数、偏移(offset)参数、像素缺陷(bad pixel)参数或位移(displacement)参数等。参数组112可以是第一参数A1、第二参数B1及第三参数C1的组合。例如,第一参数A1排列在第二参数B1之前,第二参数B1排列在第三参数C1之前。以上仅为举例说明,本发明并不以此为限。
因此,当第一图像信号S1输入到第一处理单元120的第一信号缓存单元124,参数组112也可以由存储单元110输入到第一处理单元120。第一处理单元120可以依据参数组112的第一参数A1对第一图像信号S1进行第一类型运算,并将参数组112的第二参数B1及第三参数C1输出至第二处理单元130。第二处理单元130可以依据第二参数B1对第二图像信号S2进行第二类型运算,并将参数组112的第三参数C1输出至第三处理单元140。第三处理单元140可以依据第三参数C1对第三图像信号S3进行第三类型运算。具體來說,参数组112當中的第一参数A1可以暫存在第一参数暂存单元122中;参数组112當中的第二参数B1可以暫存在第二参数暂存单元132中;参数组112當中的第三参数C1可以暫存在第三参数暂存单元142中,並等待對應的圖像訊號就位,也就是說,当第一处理单元120对第一图像信号S1进行第一类型运算后,产生并输出第二图像信号S2到第二处理单元130,這時才會使用到第二参数B1,後續會有更詳細的說明。在某些實施例中,参数组112輸入到第一处理单元120的時間也可以早於第一图像信号S1输入到第一处理单元120的時間。
当第二处理单元130接收到第一处理单元120输出(传递)的参数组112的第二参数B1及第三参数C1时,第二处理单元130可能还没有开始进行第二类型运算。因此,第二处理单元130可以先将参数组112的第二参数B1暂存在第二参数暂存单元132,并将参数组112的第三参数C1输出至第三处理单元140,第三处理单元140将接收到的第三参数C1暂存在第三参数暂存单元142。换句话说,虽然第二处理单元130会同时接收到第二参数B1及第三参数C1,但是第二处理单元130会依据第二参数B1及第三参数C1中所包含的识别信息来辨别出对应第二类型运算的第二参数B1,并暂存在第二参数暂存单元132,并将其不需使用的第三参数C1输出至第三处理单元140,让第三处理单元140暂存在第三参数暂存单元142。
第二图像信号S2会持续输入至第二处理单元130的第二信号缓存单元134,当第二处理单元130接收到默认数据量后,第二处理单元130会准备开始进行第二类型运算,第二处理单元130可以从第二参数暂存单元132取出第二参数B1,依据第二参数B1对第二图像信号S2进行第二类型运算。当第二处理单元130对第二图像信号S2进行第二类型运算后,产生并输出第三图像信号S3到第三处理单元140。
当第三处理单元140接收到第二处理单元130输出的参数组112的第三参数C1时,第三处理单元140可能还没有开始进行第三类型运算。因此,第三处理单元140可以将参数组112的第三参数C1暂存在第三参数暂存单元142。
第三图像信号S3会持续输入至第三处理单元140的第三信号缓存单元144,当第三处理单元140接收到默认数据量后,第三处理单元140可以从第三参数暂存单元142取出第三参数C1,依据第三参数C1对第三图像信号S3进行第三类型运算。当第三处理单元140对第三图像信号S3进行第三类型运算后,就会产生并输出第四图像信号S4,在本实施例中,第四图像信号S4可以作为最终输出的经过处理的图像信号。在某些實施例中,图像信号处理装置100也可以具有多于或少於三个的处理单元,在此仅是举例说明,本发明不限于此。
在现有的图像信号处理中,会在各个处理单元需要使用到相对应参数时,才分别去读取所需要的参数。而在本实施例中,則是藉由将不同类型处理单元(例如第一处理单元120、第二处理单元130及第三处理单元140)所需要的参数组合为参数组112一次读取出来,也就是让第一参数A1、第二参数B1及第三参数C1组合成为一个数据是连续序列的参数组112,在某些实施例中,在存储单元110中,第一参数A1、第二参数B1及第三参数C1即是以连续的方式储存。因此,处理单元在取得参数时,可以快速的一次取得不同类型处理单元所对应的参数。藉此,处理单元取得参数时,可减少读取的次数,而可以降低读取时间的损失。换句话说,参数组112可以通过串流(stream)的方式传输,另外将第二参数B1存储在第二处理单元130的第二参数暂存单元132,将第三参数C1存储在第三处理单元140的第三参数暂存单元142,这样可以让取得第二参数B1及第三参数C1的时间,延迟到第二处理单元130及第三处理单元140开始对图像信号S2、S3进行不同类型运算的时间,而不会让第二处理单元130及第三处理单元140取得第二参数B1及第三参数C1及开始对图像信号S2、S3进行算之间有时间差,造成运算错误。
图2是本发明一图像信号处理装置200的一实施例的功能方框示意图。图像信号处理装置200与图像信号处理装置100的差异在于:图像信号处理装置200还包含控制单元210,该控制单元210与存储单元110耦接。控制单元210用于接收且输出参数组112。
控制单元210可以自存储单元110一次取得参数组112(如上述,第一参数A1、第二参数B1及第三参数C1可以组合成为一个数据是连续的参数组),控制单元210并且可以输出参数组112当中的第一参数A1到第一处理单元120,输出参数组112当中的第二参数B1到第二处理单元130及输出参数组112当中的第三参数C1到第三处理单元140。举例来说(但本发明不限于此),于某些实施例中,控制单元210可以利用硬件或软件来进行控制,控制单元210例如可以是微控制单元(micro control unit,MCU)。
如上所述,由于处理的数据量不同,第二类型运算也许需要等待多个第一类型运算,第三类型运算也许需要等待多个第二类型运算,因此在第一类型运算及第二类型运算之间,以及在第二类型运算及第三类型运算之间都可能需要等待而造成会有时序延迟。因此,在本实施例中,控制单元210可以对参数组112的输出做时序的控制。换句话说,控制单元210可以在第一、第二或第三类型运算开始时,才输出第一参数A1、第二参数B1或第三参数C1到第一、第二或第三处理单元120、130或140。或者,可以利用参数组112来作控制,举例来说,参数组112可以包括多个虚设(dummy)参数,以分别对应第一类型运算之前的准备时间、第一类型运算及第二类型运算之间的时序延迟、以及在第二类型运算及第三类型运算之间的时序延迟,控制单元210读取完虚设参数输出第一参数A1、第二参数B1或第三参数C1,刚好对应到第一、第二或第三类型运算开始的时间。
藉此,在第一处理单元120开始进行第一类型运算时,控制单元210才输出参数组112的第一参数A1到第一处理单元120,在第二处理单元130开始进行第二类型运算时,控制单元210才输出参数组112的第二参数B1到第二处理单元130,在第三处理单元140开始进行第三类型运算时,控制单元210才输出参数组112的第三参数C1到第三处理单元140。
具体来说,第一、第二及第三处理单元120、130及140在分别接收到第一、第二及第三图像信号S1、S2及S3后,可能不会立即进行运算。因此,控制单元210输出参数组112到各个处理单元的时序,会在各个处理单元接收到图像信号之后,而与各个处理单元开始进行运算同时。也就是说,藉由控制单元210让各个处理单元接收到参数组112的时序与开始进行运算的时序相同。
藉由此种方式,因为控制单元210可以处理第一、第二及第三处理单元120、130及140之间的时序延迟,第一、第二以及第三参数暂存单元122、132、142例如可以利用先进先出(First In First Out,FIFO)内存,来降低第一处理单元120、第二处理单元130及第三处理单元140的面积以及成本。
图3A至图3D是本发明一图像信号处理装置300的另一实施例的工作过程示意图。图像信号处理装置300与图像信号处理装置100或200的差异在于:通过在适当的时间点插入虚设参数,图像信号处理装置300的第一处理单元120、第二处理单元130及第三处理单元140可不需要设置参数暂存单元,且不需控制单元。具体来说,图像信号处理装置300的参数组可包含虚设参数,即空白参数。
以下,详细说明图像信号处理装置300的工作过程,图3A对应第一时间T1,图3B对应第二时间T2,图3C对应第三时间T3,图3D对应第四时间T4,其中第一、第二、第三以及第四时间T1~T4为依序发生。
如图3A所示,在第一時間T1的时候,因为第一图像信号S1尚未到达,或是尚未从第一图像信号S1搜集到默认数量的数据,第一处理单元120不能立刻开始进行运算,第二以及第三处理单元130、140当然也不能开始进行运算。此时若给予第一、第二以及第三处理单元120、130以及140真正的参数,就必须要暂存起来。又因为没有控制单元,因此本实施例必须要预先配置好参数组,并连续不间断的供应给第一、第二以及第三处理单元120、130以及140。所以,在初始阶段,参数组312中包含了第一、第二以及第三虚设参数DA1、DB1以及DC1来填补初始阶段的准备时间。也就是说,第一虚设参数DA1是特别用来对应进行第一类型运算前的准备时间。在一实施例中,第一处理单元120取得第一虚设参数DA1,并可直接将虚设参数组312的第二虚设参数DB1及第三虚设参数DC1输出至第二处理单元130。第二处理单元130可直接将第三虚设参数DC1输出至第三处理单元140。
如图3B所示,在第二时间T2的时候,第一图像信号S1到达,或是已经从第一图像信号S1搜集到默认数量的数据,第一处理单元120同時取得参数组412。参数组412包含第一参数A1、第二虚设参数DB2及第三虚设参数DC2。第一参数A1是实设参数,用于对第一图像信号S1进行第一类型运算。在一實施例中,第一处理单元120会将第二虚设参数DB2及第三虚设参数DC2直接输出至第二处理单元130。第二处理单元130取得第二虚设参数DB2后,将第三虚设参数DC2输出至第三处理单元140。
因此,在第一处理单元120对第一图像信号S1开始进行第一类型运算时,第一处理单元120也同时取得对应第一类型运算的第一参数A1。藉此,第一处理单元120可以依据第一参数A1对第一图像信号S1进行第一类型运算,并产生第二图像信号S2。
另一方面,第二处理单元130在开始进行第二类型运算之前,第二处理单元130会先读取第二虚设参数DB2。第三处理单元140在开始进行第三类型运算之前,第三处理单元140会先读取第三虚设参数DC2。同上,藉此可避免第二类型运算及第三类型运算的起始与第二参数B1及第三参数C1的取得在时序上的不匹配。
如图3C所示,在第三時間T3的时候,第二处理单元130已经从第二图像信号S2搜集到默认数量的数据,第二处理单元130同时取得参数组512的第二参数B1。首先,第一处理单元120先取得参数组512,参数组512包含第一参数A2、第二参数B1及第三虚设参数DC3。第一参数A2、第二参数B1是实设参数,分别用于对第一、第二图像信号S1、S2进行第一、第二类型运算。第一处理单元120取得参数组512的第一参数A2后,会将第二参数B1及第三虚设参数DC3输出至第二处理单元130。第二处理单元130取得第二参数B1后,将第三参数DC3输出至第三处理单元140。
也就是说,图3A到图3B里的第二虚设参数DB1、DB2是特别用来对应进行第一类型运算与第二类型运算之间的时序延迟。
与图3B相同的,第一处理单元120可以依据新的第一参数A2对新的第一图像信号S1进行第一类型运算,并产生新的第二图像信号S2。
另外,在第二处理单元130第二图像信号S2接收到默认数据量后,第二处理单元130会开始对第二图像信号S2进行第二类型运算时,第二处理单元130也同时取得对应第二类型运算的第二参数B1。藉此,第二处理单元130可以依据第二参数B1对第二图像信号S2进行第二类型运算,并产生第三图像信号S3。
在这个时间点,第三处理单元140仍然还没开始开始进行第三类型运算,所以第三处理单元140仍然继续读取第三虚设参数DC3。如同以上所说的,藉此可避免取得第三参数C1会早于开始第三类型运算的时间点。换句话说,让第三处理单元140取得第三参数C1的时间点等待到第三处理单元140开始对第三图像信号S3进行第三类型运算,而不会让第三处理单元140取得第三参数C1及开始对第三图像信号S3进行第三类型运算之间有时间差,造成运算错误。
如图3D所示,在第四時間T4的时候,第三处理单元140已经从第三图像信号S3搜集到默认数量的数据,第三处理单元140同时取得参数组612的第三参数C1。首先,第一处理单元120先取得参数组612。参数组612包含第一参数A3、第二参数B2及第三参数C1。第一参数A2、第二参数B1及第三参数C1是实设参数,分別用于对第一、第二及第三图像信号S1、S2及S3进行第一、第二及第三类型运算。第一处理单元120取得参数组612的第一参数A3后,会将第二参数B2及第三参数C1输出至第二处理单元130。第二处理单元130取得第二参数B2后,将第三参数C1输出至第三处理单元140。
也就是说,图3A到图3C里的第三虚设参数DC1、DC2、DC3是特别用来对应进行第二类型运算与第三类型运算之间的时序延迟。
与图3B及图3C相同的,第一处理单元120可以依据新的第一参数A3对新的第一图像信号S1进行第一类型运算,并产生新的第二图像信号S2,第二处理单元130可以依据新的第二参数B2对新的第二图像信号S2进行第二类型运算,并产生新的第三图像信号S3。
另外,在第三处理单元140接收到默认数据量后,第三处理单元140会开始对第三图像信号S3进行第三类型运算时,第三处理单元140也同时取得对应第三类型运算的第三参数C1。藉此,第三处理单元140可以依据第三参数C1对第三图像信号S3进行第三类型运算,并产生处理完成的第四图像信号S4(未表示在图中,会在下一个时间点输出)。
綜上所述,以图3A-3D的工作过程为例,依次说明图像信号处理装置300在各个時間點T1~T4的操作。
Figure BDA0001884576760000131
Figure BDA0001884576760000141
如上所述,在本实施例中,参数组112可以通过串流(stream)的方式传输时,藉由设置虚设参数(例如第一虚设参数、第二虚设参数及第三虚设参数)可以让取得第一参数A1、第二参数B1及第三参数C1的时间,延迟到第一处理单元120、第二处理单元130及第三处理单元140开始对图像信号S1、S2、S3进行不同类型运算的时间,而不会让第一处理单元120、第二处理单元130及第三处理单元140取得第一参数A1、第二参数B1及第三参数C1及开始对图像信号S1、S2、S3进行算之间有时间差,造成运算错误。另外,藉由设置虚设参数也可以让图像信号处理装置300可以不具有控制单元,各个处理单元内可以不用设置参数暂存单元,进一步降低读取时间的损失,并降低成本。
图4是本发明一图像信号处理装置400的一实施例的功能方框示意图。图像信号处理装置400与图像信号处理装置100、200、300的差异在于:存储单元110可以存储另一种类型的多个参数组(包含第二参数组712)。第二参数组712与上述参数组112或612的差异在于,第二参数组712不具有某些类型运算的参数。
举例来说,当使用者选择不需要进行第二类型运算时,第一图像信号S1输入到第一处理单元120时,第一处理单元120可以改从存储单元110取得第二参数组712。第二参数组712只有包含对应第一类型运算的第一参数A1及对应第三类型运算的第三参数C1。换句话说,参数组712不具有对应第二类型运算的第二参数B1。当然,上述选择哪种类型运算只是举例说明,本发明不限于此。
因此,第一处理单元120可以依据第二参数组712的第一参数A1对第一图像信号S1进行第一类型运算。当第一处理单元120对第一图像信号S1进行第一类型运算后,产生的第二图像信号S2会直接输出到第三处理单元140。第三处理单元140可以依据第二参数组712的第三参数C1,直接对第二图像信号S2进行第三类型运算,并产生处理完成的第四图像信号S4。
当然,在开始第一及第三类型运算之前,都可能会有准备时间,因此有关第一处理单元120与第三处理单元140之间的时序延迟的处理方式,可以利用如图1、图2或图3A到图3D的图像信号处理装置100、200、300的处理方式,在此不再重复叙述。在某些实施例中,图像信号处理装置400可以如图1或图3A到图3D的图像信号处理装置100、300不具有控制单元,而且各个处理单元可以不具有参数暂存单元。
在本实施例中,藉由在存储单元存储不同类型的参数组,可以进一步增加本发明对应不同使用者需求的不同应用方式。
图5是本发明一图像信号处理方法500的一实施例的流程图。图像信号处理方法500包含步骤502、504、506、508。步骤502是取得第一图像信号。步骤504是取得参数组。参数组包含对应第一类型运算的第一参数及对应第二类型运算的第二参数,其中第一类型运算不同于第二类型运算。步骤506是依据第一图像信号及参数组的第一参数进行第一类型运算,产生第二图像信号。步骤508是在第一类型运算之后,依据第二图像信号及第二参数进行第二类型运算,产生第三图像信号。
图像信号处理方法500的流程已于图1、图2、图3A至图3D及图4中详细叙述,在此不再重复叙述。
图6是本发明另一图像信号处理方法600的一实施例的流程图。图像信号处理方法600包含步骤602、604、606、608、610。步骤602是取得第一图像信号。步骤604是取得第一参数组,第一参数组包括对应第一类型运算的第一参数及对应第二类型运算的第二参数。步骤606是依据第一图像信号及第一参数组的第一参数进行第一类型运算,产生第二图像信号。步骤608是在取得第一参数组之后,取得第二参数组,第二参数组包括对应第一类型运算的第三参数及对应第二类型运算的第四参数。步骤610是依据第二图像信号及第二参数组的第四参数进行上述第二类型运算,产生第三图像信号。
图像信号处理方法600的流程已于图3A至图3D及图4中详细叙述,在此不再重复叙述。
综上,在现有的图像信号处理中,会在各个处理单元需要使用到相对应参数时,才分别去读取所需要的参数。而在本实施例中,則是藉由将不同类型处理单元(例如第一处理单元、第二处理单元及第三处理单元)所需要的参数组合为参数组一次读取出来,也就是让第一参数、第二参数及第三参数组合成为一个数据是连续序列的参数组,在某些实施例中,在存储单元中,第一参数、第二参数及第三参数即是以连续的方式储存。因此,处理单元在取得参数时,可以快速的一次取得不同类型处理单元所对应的参数。藉此,处理单元取得参数时,可减少读取的次数,而可以降低读取时间的损失。在某些实施例中,参数组可以通过串流(stream)的方式传输时,藉由设置虚设参数(例如第一虚设参数、第二虚设参数及第三虚设参数)可以让取得第一参数、第二参数及第三参数的时间,延迟到第一处理单元0、第二处理单元及第三处理单元开始对图像信号进行不同类型运算的时间,而不会让第一处理单元、第二处理单元及第三处理单元取得第一参数、第二参数及第三参数及开始对图像信号进行算之间有时间差,造成运算错误。另外,藉由设置虚设参数也可以让图像信号处理装置可以不具有控制单元,各个处理单元内可以不用设置参数暂存单元,进一步降低读取时间的损失,并降低成本。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种图像信号处理方法,其特征在于,所述方法包括:
在多个时间刻分别取得第一图像信号;
在多个时间刻分别取得参数组,其包括对应第一类型运算的第一类型参数及对应第二类型运算的第二类型参数,其中所述第一类型运算不同于所述第二类型运算,所述第一类型参数包括第一虚设参数,以及所述第二类型参数包括第二虚设参数;
依据在时间刻T所取得的参数组以及对应所述时间刻T的第一图像信号,进行所述第一类型运算,在时间刻T+1,产生第二图像信号;以及
依据对应所述时间刻T+1所产生的第二图像信号以及在所述时间刻T+1所取得的所述参数组进行所述第二类型运算,在时间刻T+2,产生第三图像信号;
其中:
所述第一虚设参数对应所述第一类型运算开始之前的准备时间,用来使所述第一虚设参数以外的所述第一类型参数被输出的时间对应到所述第一类型运算开始的时间;以及
所述第二虚设参数对应所述第一类型运算及所述第二类型运算之间的时序延迟,用来使所述第二虚设参数以外的所述第二类型参数被输出的时间对应到所述第二类型运算开始的时间。
2.如权利要求1所述的图像信号处理方法,其特征在于,所述依据在时间刻T所取得的参数组以及对应所述时间刻T的第一图像信号,进行所述第一类型运算,在时间刻T+1,产生第二图像信号的步骤包括:
依据在时间刻T所取得的参数组中的第一类型参数以及对应所述时间刻T的第一图像信号,进行所述第一类型运算,在时间刻T+1,产生第二图像信号。
3.如权利要求1所述的图像信号处理方法,其特征在于,所述依据对应时间刻T+1所产生的第二图像信号以及在所述时间刻T+1所取得的所述参数组进行所述第二类型运算,在时间刻T+2,产生第三图像信号的步骤包括:
依据对应时间刻T+1所产生的第二图像信号以及在所述时间刻T+1所取得的所述参数组中的第二类型参数进行所述第二类型运算,在时间刻T+2,产生第三图像信号。
4.如权利要求1所述的图像信号处理方法,其特征在于,所述在多个时间刻分别取得第一图像信号的步骤包含:
在多个时间刻从影像传感器分别取得第一图像信号。
5.如权利要求1所述的图像信号处理方法,其特征在于,所述第一类型运算包括图像平坦度运算。
6.如权利要求1所述的图像信号处理方法,其特征在于,所述第二类型运算包括像素缺陷运算。
7.如权利要求1所述的图像信号处理方法,其特征在于,所述参数组进一步包括用于第三类型运算的第三类型参数,所述方法进一步包括:
依据对应时间刻T+2所产生的第三图像信号以及在所述时间刻T+2所取得的所述参数组中的第三类型参数进行所述第三类型运算,产生第四图像信号。
8.如权利要求7所述的图像信号处理方法,其特征在于,所述第三类型运算包括变形运算。
9.如权利要求1-8中任意一项所述的图像信号处理方法,其特征在于,所述参数组以连续的序列被输出。
10.一种图像信号处理装置,其特征在于,包含:
存储单元,存储第一参数组,所述第一参数组包含对应第一类型运算的第一参数及对应第二类型运算的第二参数,其中所述第一类型运算不同于所述第二类型运算,所述第一参数组更包括多个虚设参数,以及所述多个虚设参数包括第一虚设参数及第二虚设参数;
第一处理单元,接收所述第一参数组及第一图像信号,并依据所述第一参数及所述第一图像信号进行所述第一类型运算,产生第二图像信号;以及
第二处理单元,从所述第一处理单元接收所述第一参数组的所述第二参数及所述第二图像信号,并依据所述第二参数及所述第二图像信号进行所述第二类型运算,产生第三图像信号;
其中:
所述第一虚设参数对应所述第一类型运算开始之前的准备时间,用来使所述第一虚设参数以外的所述第一类型参数被输出的时间对应到所述第一类型运算开始的时间;以及
所述第二虚设参数对应所述第一类型运算及所述第二类型运算之间的时序延迟,用来使所述第二虚设参数以外的所述第二类型参数被输出的时间对应到所述第二类型运算开始的时间。
11.如权利要求10所述的图像信号处理装置,其特征在于,所述第二处理单元具有参数暂存单元,所述参数暂存单元接收并存储所述第二参数。
12.如权利要求10所述的图像信号处理装置,其特征在于,另包含第三处理单元,所述第一参数组更包含对应第三类型运算的第三参数,所述第三处理单元从所述第二处理单元接收所述第一参数组的所述第三参数及第三图像信号,并依据所述第三参数及所述第三图像信号进行所述第三类型运算。
13.如权利要求12所述的图像信号处理装置,其特征在于,存储单元更存储第二参数组,所述第二参数组包含对应所述第一类型运算的所述第一参数及对应所述第三类型运算的所述第三参数,且不包含对应所述第二类型运算的所述第二参数。
CN201880002189.4A 2018-11-13 2018-11-13 图像信号处理装置和方法 Active CN111436214B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/115200 WO2020097788A1 (zh) 2018-11-13 2018-11-13 图像信号处理装置和方法

Publications (2)

Publication Number Publication Date
CN111436214A CN111436214A (zh) 2020-07-21
CN111436214B true CN111436214B (zh) 2023-06-27

Family

ID=70730210

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880002189.4A Active CN111436214B (zh) 2018-11-13 2018-11-13 图像信号处理装置和方法

Country Status (2)

Country Link
CN (1) CN111436214B (zh)
WO (1) WO2020097788A1 (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4092921B2 (ja) * 2002-01-30 2008-05-28 ソニー株式会社 情報信号処理装置、情報信号処理方法および画像表示装置、それに使用される係数種データの生成装置および生成方法、係数データの生成装置および生成方法、並びに各方法を実行するためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な媒体
JP2005079661A (ja) * 2003-08-28 2005-03-24 Fuji Photo Film Co Ltd 画像処理装置、および画像処理プログラム
JP4723313B2 (ja) * 2005-08-24 2011-07-13 パナソニック株式会社 画像処理装置
US20070171308A1 (en) * 2006-01-25 2007-07-26 Chih-Lin Hsuan Methods of color index searching
TWI366181B (en) * 2007-06-12 2012-06-11 Au Optronics Corp Method and apparatus for image enlargement and enhancement
US20140133547A1 (en) * 2011-08-30 2014-05-15 Sony Corporation Image processing device and image processing method
JP6189240B2 (ja) * 2014-03-26 2017-08-30 株式会社東芝 画像処理装置、治療システム及び画像処理方法
JP6613699B2 (ja) * 2015-08-10 2019-12-04 株式会社リコー 画像処理装置
CN106464895A (zh) * 2016-10-01 2017-02-22 深圳市汇顶科技股份有限公司 指纹图像处理系统
CN108230230B (zh) * 2017-12-29 2022-02-01 深圳开立生物医疗科技股份有限公司 一种图像参数的隔离方法、装置和计算机可读存储介质

Also Published As

Publication number Publication date
CN111436214A (zh) 2020-07-21
WO2020097788A1 (zh) 2020-05-22

Similar Documents

Publication Publication Date Title
EP2770477B1 (en) Dynamically reconfigurable pipelined pre-processor
US10282805B2 (en) Image signal processor and devices including the same
JP5907687B2 (ja) 撮像装置および信号転送装置
US9519959B2 (en) Image processing apparatus, imaging apparatus, and method for processing image
CN111436214B (zh) 图像信号处理装置和方法
CN107710177B (zh) 数据输送装置和数据输送方法
US8922676B2 (en) Video frame buffer
JP2007048264A (ja) 複数チップ間の同期合わせ機能を有したデータ処理装置
US20100005271A1 (en) Memory controller
CN108055484B (zh) 序列转换模块、高动态范围图像序列转换模块及转换方法
JP2003304481A (ja) 画像処理装置と画像処理方法
JP5225068B2 (ja) 画像処理装置及び画像処理方法
US20120131315A1 (en) Data processing apparatus
KR101000036B1 (ko) 실시간 영상 처리를 위한 서브 샘플링 시스템
US7558424B2 (en) Scene change determination device/method and data transfer device/method
JP2018191154A (ja) 画像処理装置、画像処理方法及びプログラム
US20120144150A1 (en) Data processing apparatus
JP4343484B2 (ja) イメージデータ処理装置及び撮像システム
US20150189108A1 (en) Transmission circuit and camera system
JP5271567B2 (ja) 画像前処理装置
US10672107B2 (en) Image processing apparatus and method of controlling the same
US7193928B2 (en) Signal output device and method for the same
JP5123770B2 (ja) 画像処理装置及びプログラム
JPH08289138A (ja) 画像縮小装置
JP4987957B2 (ja) ヘッド分離型撮像装置、その制御ユニット、および信号処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant