CN107018297A - 图像获取装置 - Google Patents

图像获取装置 Download PDF

Info

Publication number
CN107018297A
CN107018297A CN201611065426.0A CN201611065426A CN107018297A CN 107018297 A CN107018297 A CN 107018297A CN 201611065426 A CN201611065426 A CN 201611065426A CN 107018297 A CN107018297 A CN 107018297A
Authority
CN
China
Prior art keywords
buffer
pixel data
image
acquiring device
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611065426.0A
Other languages
English (en)
Other versions
CN107018297B (zh
Inventor
陈永纬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eys 3d Co Ltd
Original Assignee
Eys 3d Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eys 3d Co Ltd filed Critical Eys 3d Co Ltd
Publication of CN107018297A publication Critical patent/CN107018297A/zh
Application granted granted Critical
Publication of CN107018297B publication Critical patent/CN107018297B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils

Abstract

本发明公开了一種图像获取装置。所述图像获取装置包含一第一缓冲器、一第二缓冲器及一数据分割器。所述第一缓冲器用于储存有关一图像的多个像素数据。所述数据分割器用于重新储存所述多个像素数据的部分像素数据中有关一相同色彩的子像素数据至所述第二缓冲器内的同一列存储单元。因此,相较于现有技术,本发明可通过所述数据分割器减少一图像处理器产生一存取指令的次数,也就是说所述图像获取装置可减少所述图像获取装置内读取数据的耗时。

Description

图像获取装置
技术领域
本发明涉及一种图像获取装置,尤其涉及一种能够减少读取数据耗时的图像获取装置。
背景技术
如果图像获取装置内的图像处理器欲存取所述图像获取装置内的缓冲器所储存的多个像素串行数据以执行图像处理(例如图像扭曲恢复(Dewarping)处理),则因为所述缓冲器是动态随机存取存储器(Dynamic random access memory,DRAM),所以所述图像处理器存取所述缓冲器内位于不同列的相同色彩的子像素数据会非常耗时。例如当所述图像处理器根据一存取指令存取完所述缓冲器内位于第一列的红光子像素数据后,欲再存取所述缓冲器内位于另一列的红光子像素数据时,所述图像处理器必须再产生另一存取指令至所述缓冲器以存取所述缓冲器内位于所述另一列的红光子像素数据。如此,图像处理器将耗費許多时间在所述另一存取指令上。
发明内容
本发明的一實施例公開一種图像获取装置。所述图像获取装置包含一第一缓冲器、一第二缓冲器及一数据分割器。所述第一缓冲器用于储存有关一图像的多个像素数据。所述数据分割器用于重新储存所述多个像素数据的部分像素数据中有关一相同色彩的子像素数据至所述第二缓冲器内的同一列存储单元。
本发明的另一实施例公开一种图像获取装置。所述图像获取装置包含一第一缓冲器、一第二缓冲器及一图像处理器。所述第一缓冲器用于储存有关一图像的多个像素数据,其中所述多个像素数据包含一像素数据组储存于所述第一缓冲器的不同列存储单元。所述第二缓冲器用于储存被重新排列至所述第二缓冲器的同一列存储单元的所述像素数据组。所述图像处理器,用于产生一存取指令以对储存于所述第二缓冲器中的所述像素数据组进行存取。
本发明的另一实施例公开一种图像获取装置。所述图像获取装置包含一图像传感器、一第一缓冲器、一第二缓冲器、一数据分割器及一图像处理器。所述图像传感器用于感测有关一图像的多个像素数据。所述第一缓冲器用于储存有关所述图像的多个像素数据,所述多个像素数据包含一像素数据组储存于所述第一缓冲器的不同列存储单元。所述数据分割器用于重新储存所述像素数据组至所述第二缓冲器的同一列存储单元。所述图像处理器用于产生一存取指令以对储存于所述第二缓冲器中的所述像素数据组进行存取。
本发明公开一种图像获取装置。所述图像获取装置是利用一数据分割器将原本储存在一第一缓冲器内不同列存储单元的一像素数据组重新储存至一第二缓冲器的同一列存储单元,所以相较于现有技术,本发明可减少一图像处理器产生一存取指令的次数,也就是说本发明所公开的图像获取装置可减少所述图像获取装置内读取数据的耗时。
附图说明
图1是本发明的一第一实施例所公开的一种图像获取装置的示意图。
图2是说明第一缓冲器利用多个贝尔样式单元储存多个像素串行数据的示意图。
图3是说明数据分割器将第一缓冲器所储存的多个像素串行数据重新储存至第二缓冲器的示意图。
其中,附图标记说明如下:
100 图像获取装置
102 第一缓冲器
104 第二缓冲器
106 数据分割器
108 输入接口
110 图像传感器
112 图像处理器
1021、1402 第一列存储单元
1023、1404 第二列存储单元
1406 第三列存储单元
1408 第四列存储单元
1410 第五列存储单元
1412 第六列存储单元
1414 第七列存储单元
1416 第八列存储单元
200 贝尔样式单元
300-306 处理窗口
B11、B31、B13、B33、B15、B35、 蓝光子像素数据
B17、B37、B31、B51、B33、B53、
B35、B55、B37、B57
G01、G21、G03、G23、G05、G25、 绿光子像素数据
G07、G27、G21、G41、G23、G43、
G25、G45、G27、G47
IR10、IR30、IR12、IR32、IR14、IR34、 红外光子像素数据
IR16、IR36、IR30、IR50、IR32、IR52、
IR34、IR54、IR36、IR56
PSD 像素串行数据
PSD1 像素数据
RPD 原始平行像素数据
R00、R20、R02、R22、R04、R24、 红光子像素数据
R06、R26、R20、R40、R22、R42、
R24、R44、R26、R46
具体实施方式
请参照图1,图1是本发明的一第一实施例所公开的一种图像获取装置100的示意图,其中图像获取装置100包含一第一缓冲器102、一第二缓冲器104、一数据分割器106和一输入接口108,第一缓冲器102和第二缓冲器104是动态随机存取存储器(Dynamic randomaccess memory,DRAM),输入接口108耦接于第一缓冲器102,数据分割器106耦接于第一缓冲器102,以及第二缓冲器104耦接于数据分割器106。如图1所示,输入接口108用于接收一图像传感器110所产生的有关一图像的多个原始平行像素数据RPD(例如多个原始平行像素数据RPD为图像传感器110所包含的一左眼图像传感单元与一右眼图像传感单元所产生的平行像素数据),且将多个原始平行像素数据RPD转换成有关所述图像的多个像素串行数据PSD,并储存多个像素串行数据PSD于第一缓冲器102。如图2所示,第一缓冲器102是利用多个贝尔样式(bayer pattern)单元储存多个像素串行数据PSD,也就是说第一缓冲器102是利用所述多个贝尔样式单元中的每一贝尔样式单元储存多个像素串行数据PSD的每一像素数据中的子像素数据,其中每一贝尔样式单元包含一红光子像素数据、一绿光子像素数据、一蓝光子像素数据和一红外光子像素数据。例如,如图2所示,一贝尔样式单元200包含多个像素串行数据PSD的一像素数据PSD1中的一红光子像素数据R00、一绿光子像素数据G01、一蓝光子像素数据B11和一红外光子像素数据IR10,其中像素数据PSD1是对应原始平行像素数据RPD内的一对应位置。另外,本发明并不受限于如图2所示的所述左眼图像传感单元与所述右眼图像传感单元所产生的多个原始平行像素数据RPD,也就是说所述左眼图像传感单元与所述右眼图像传感单元也可产生多个原始红蓝绿(RGB)像素数据或多个原始YUV像素数据。
请参照图3,图3是说明数据分割器106将第一缓冲器102所储存的多个像素串行数据PSD重新储存至第二缓冲器104的示意图。如图3所示,数据分割器106可重新储存第一缓冲器102内有关数据分割器106的一处理窗口的一相同色彩的子像素数据组至第二缓冲器104内的同一列存储单元。例如数据分割器106可重新储存图2所示的第一缓冲器102内有关数据分割器106的一处理窗口300的红光子像素数据组R00、R20、R02、R22(其中红光子像素数据R00、R02储存于第一缓冲器102的第一列存储单元1021以及红光子像素数据R20、R22储存于第一缓冲器102的第二列存储单元1023)至第二缓冲器104内的第一列存储单元1402,重新储存第一缓冲器102内有关数据分割器106的一处理窗口302的红光子像素数据组R04、R24、R06、R26至第二缓冲器104内的第一列存储单元1402,重新储存第一缓冲器102内有关数据分割器106的一处理窗口304的红光子像素数据组R20、R40、R22、R42至第二缓冲器104内的第二列存储单元1404,以及重新储存第一缓冲器102内有关数据分割器106的一处理窗口306的红光子像素数据组R24、R44、R26、R46至第二缓冲器104内的第二列存储单元1404。另外,处理窗口300-306为3乘3的窗口,但本发明并不受限于处理窗口300-306为3乘3的窗口。另外,图3仅是用于说明本发明的一种实施方式,也就是说本发明并不受限于图3所示的红光子像素数据R00、R20、R02、R22、R04、R24、R06、R26在第二缓冲器104的第一列存储单元1402的排列顺序。
另外,数据分割器106也可利用上述方式将图2所示的第一缓冲器102内的绿光子像素数据组G01、G21、G03、G23、G05、G25、G07、G27重新储存至第二缓冲器104内的第三列存储单元1406,以及将第一缓冲器102内的绿光子像素数据组G21、G41、G23、G43、G25、G45、G27、G47重新储存至第二缓冲器104内的第四列存储单元1408。另外,数据分割器106也可利用上述方式将图2所示的第一缓冲器102内的蓝光子像素数据组B11、B31、B13、B33、B15、B35、B17、B37重新储存至第二缓冲器104内的第五列存储单元1410,以及将第一缓冲器102内的蓝光子像素数据组B31、B51、B33、B53、B35、B55、B37、B57重新储存至第二缓冲器104内的第六列存储单元1412。另外,数据分割器106也可利用上述方式将图2所示的第一缓冲器102内的红外光子像素数据组IR10、IR30、IR12、IR32、IR14、IR34、IR16、IR36重新储存至第二缓冲器104内的第七列存储单元1414,以及将第一缓冲器102内的红外光子像素数据组IR30、IR50、IR32、IR52、IR34、IR54、IR36、IR56重新储存至第二缓冲器104内的第八列存储单元1416。
如果图像获取装置100内的图像处理器112欲存取如图2所示的第一缓冲器102所储存的多个像素串行数据PSD以执行图像处理(例如图像扭曲恢复(Dewarping)处理),则因为第一缓冲器102是动态随机存取存储器,所以当图像处理器112欲存取第一缓冲器102内位于不同列的红光子像素数据组R00、R20、R02、R22、R04、R24、R06、R26会非常耗时(因为当图像处理器112根据一存取指令存取完第一缓冲器102内位于第一列存储单元1021的红光子像素数据R00、R02、R04、R06后,欲再存取第一缓冲器102内位于第二列存储单元1023的红光子像素数据R20、R22、R24、R26时,图像处理器112必须再产生另一存取指令至第一缓冲器102以存取第一缓冲器102内位于第二列存储单元1023的红光子像素数据R20、R22、R24、R26。如此,图像处理器112将多耗时间在所述另一存取指令上)。
然而,如果图像获取装置100内的图像处理器112欲存取如图3所示的第二缓冲器104所储存的红光子像素数据R00、R20、R02、R22、R04、R24、R06、R26,则因为红光子像素数据R00、R20、R02、R22、R04、R24、R06、R26位于第二缓冲器104内的第一列存储单元1402,所以图像处理器112只需产生一次存取指令,即可一次存取位于第二缓冲器104内的第一列存储单元1402的红光子像素数据R00、R20、R02、R22、R04、R24、R06、R26。因此,本发明可通过数据分割器106重新储存第一缓冲器102所储存的多个像素串行数据PSD至第二缓冲器104以减少图像获取装置100内读取数据的耗时。值得一提的是,如图3所示,上述被重新储存的子像素数据组可连续排列于第二缓冲器104中(例如红光子像素数据R00、R20、R02、R22、R04、R24、R06、R26连续排列于第二缓冲器104内的第一列存储单元1402),因此,图像处理器112还可依据一突发模式(burst mode)对所述子像素数据组加速存取。
另外,以第二代双倍数据速率(Double Data Rate 2,DDR2)规格的动态随机存取存储器为例:
动态随机存取存储器的随机读取需要耗费7个时钟以及每一时钟可读取4字节(4byte)。另外,所述图像的图像大小为1024x960个像素。因此,当所述图像写入至所述动态随机存取存储器后,现有技术要从所述动态随机存取存储器读取有关所述图像的数据的耗时可参照下述说明:
现有技术:
从所述动态随机存取存储器读取有关所述图像的数据需要1024x960x2次随机读取以及每一随机读取可读取4字节(4byte)的数据,所以现有技术要从所述动态随机存取存储器读取有关所述图像的数据的耗时可由式(1)决定:
1024x960x2*(7+4/4)≌15.73M个时钟 (1)
如图3所示,因为数据分割器106可重新储存第一缓冲器102内有关数据分割器106的一处理窗口的一相同色彩的子像素数据组(位于第一缓冲器102内的两列存储单元)至第二缓冲器104内的同一列存储单元,所以本发明需要1024x960次随机读取以及每一随机读取可读取8字节(8byte)的数据。因此,本发明要从所述动态随机存取存储器读取有关所述图像的数据的耗时可由式(2)决定:
1024x960*(7+8/4)≌8.85M个时钟 (2)
因此,本发明要从所述动态随机存取存储器读取有关所述图像的数据的耗时较现有技术要从所述动态随机存取存储器读取有关所述图像的数据的耗时节省了43.7%((15.73M-8.85M/15.73M))的时间。
综上所述,因为本发明所公开的图像获取装置是利用所述数据分割器将原本储存在所述第一缓冲器内不同列存储单元的一像素数据组重新储存至所述第二缓冲器的同一列存储单元,所以相较于现有技术,本发明可减少所述图像处理器产生所述存取指令的次数,也就是说本发明所公开的图像获取装置可减少所述图像获取装置内读取数据的耗时。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种图像获取装置,包含:
一第一缓冲器,用于储存有关一图像的多个像素数据;
一第二缓冲器;及
其特征在于还包含:
一数据分割器,用于重新储存所述多个像素数据的部分像素数据中有关一相同色彩的子像素数据至所述第二缓冲器内的同一列存储单元。
2.如权利要求1所述的图像获取装置,其特征在于,另包含:
一输入接口,用于接收有关所述图像的多个原始平行像素数据,且将所述多个原始平行像素数据转换成有关所述图像的多个像素串行数据,并储存于所述第一缓冲器。
3.如权利要求2所述的图像获取装置,其特征在于:所述图像的多个原始像素数据是由耦接该图像获取装置的一图像传感器所产生。
4.如权利要求1所述的图像获取装置,其特征在于:所述第一缓冲器是利用一贝尔样式单元储存所述图像的多个像素数据的每一像素数据中的子像素数据。
5.如权利要求1所述的图像获取装置,其特征在于:所述第一缓冲器和所述第二缓冲器是动态随机存取存储器。
6.如权利要求1所述的图像获取装置,其特征在于:所述数据分割器重新储存所述每一像素数据内有关所述数据分割器的多个处理窗口的一相同色彩的子像素数据至所述第二缓冲器内的同一列存储单元。
7.一种图像获取装置,包含:
一第一缓冲器,用于储存有关一图像的多个像素数据,其中所述多个像素数据包含一像素数据组储存于所述第一缓冲器的不同列存储单元;
其特征在于还包含:
一第二缓冲器,用于储存被重新排列至所述第二缓冲器的同一列存储单元的所述像素数据组;及
一图像处理器,用于产生一存取指令以对储存于所述第二缓冲器中的所述像素数据组进行存取。
8.如权利要求7所述的图像获取装置,其特征在于,另包含:
一数据分割器,用于重新排列储存于所述第一缓冲器的所述像素数据组至所述第二缓冲器的同一列存储单元。
9.如权利要求7所述的图像获取装置,其特征在于:所述像素数据组对应于同一色彩。
10.如权利要求7所述的图像获取装置,其特征在于:所述像素数据组连续排列于所述第二缓冲器中,且所述图像处理器依据一突发模式对所述像素数据组进行存取。
11.一种图像获取装置,其特征在于,包含:
一图像传感器,用于感测有关一图像的多个像素数据;
一第一缓冲器,用于储存有关所述图像的多个像素数据,所述多个像素数据包含一像素数据组储存于所述第一缓冲器的不同列存储单元;
一第二缓冲器;
一数据分割器,用于重新储存所述像素数据组至所述第二缓冲器的同一列存储单元;及
一图像处理器,用于产生一存取指令以对储存于所述第二缓冲器中的所述像素数据组进行存取。
12.如权利要求11所述的图像获取装置,其特征在于:所述像素数据组对应于同一色彩。
13.如权利要求11所述的图像获取装置,其特征在于:所述像素数据组连续排列于所述第二缓冲器中,且所述图像处理器依据一突发模式对所述像素数据组进行存取。
CN201611065426.0A 2015-11-27 2016-11-28 图像获取装置 Expired - Fee Related CN107018297B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562260347P 2015-11-27 2015-11-27
US62/260,347 2015-11-27

Publications (2)

Publication Number Publication Date
CN107018297A true CN107018297A (zh) 2017-08-04
CN107018297B CN107018297B (zh) 2020-10-13

Family

ID=59439490

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611065426.0A Expired - Fee Related CN107018297B (zh) 2015-11-27 2016-11-28 图像获取装置

Country Status (1)

Country Link
CN (1) CN107018297B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1220806A (zh) * 1997-03-21 1999-06-23 三菱电机株式会社 图象处理装置、静止图象摄像装置及图象处理方法
US20030193573A1 (en) * 2002-03-27 2003-10-16 Takeshi Miyashita Digital still camera
CN1655227A (zh) * 2004-02-10 2005-08-17 恩益禧电子股份有限公司 能够实现高速访问的图像存储器结构
CN1823532A (zh) * 2003-07-15 2006-08-23 伊斯曼柯达公司 具有电荷装仓的图像传感器
CN1292599C (zh) * 2003-09-10 2006-12-27 佳能株式会社 用于将包含相同颜色分量的信号相加的成像设备
CN101064788A (zh) * 2005-04-26 2007-10-31 索尼株式会社 固态成像装置、驱动固态成像装置的方法和图像拾取设备
CN101309339A (zh) * 2007-05-18 2008-11-19 株式会社Pfu 图像传感器、图像传感器单元和图像读取器
CN100542301C (zh) * 2003-02-21 2009-09-16 索尼株式会社 固态图像拾取设备及其驱动方法
CN101661704A (zh) * 2009-10-05 2010-03-03 华映光电股份有限公司 色序时间控制电路及相关色序显示器系统与方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1220806A (zh) * 1997-03-21 1999-06-23 三菱电机株式会社 图象处理装置、静止图象摄像装置及图象处理方法
US20030193573A1 (en) * 2002-03-27 2003-10-16 Takeshi Miyashita Digital still camera
CN100542301C (zh) * 2003-02-21 2009-09-16 索尼株式会社 固态图像拾取设备及其驱动方法
CN1823532A (zh) * 2003-07-15 2006-08-23 伊斯曼柯达公司 具有电荷装仓的图像传感器
CN1292599C (zh) * 2003-09-10 2006-12-27 佳能株式会社 用于将包含相同颜色分量的信号相加的成像设备
CN1655227A (zh) * 2004-02-10 2005-08-17 恩益禧电子股份有限公司 能够实现高速访问的图像存储器结构
CN101064788A (zh) * 2005-04-26 2007-10-31 索尼株式会社 固态成像装置、驱动固态成像装置的方法和图像拾取设备
CN101309339A (zh) * 2007-05-18 2008-11-19 株式会社Pfu 图像传感器、图像传感器单元和图像读取器
CN101661704A (zh) * 2009-10-05 2010-03-03 华映光电股份有限公司 色序时间控制电路及相关色序显示器系统与方法

Also Published As

Publication number Publication date
CN107018297B (zh) 2020-10-13

Similar Documents

Publication Publication Date Title
US9779546B2 (en) Volume dimensioning systems and methods
US8330763B2 (en) Apparatus and method for volume rendering on multiple graphics processing units (GPUs)
US8464025B2 (en) Signal processing apparatus with signal control units and processor units operating based on different threads
CN105611256B (zh) 一种基于梯度的Bayer格式插值方法及基于FPGA的显示装置
US11862128B2 (en) Systems and methods for foveated rendering
CN107274338A (zh) 用于深度图的低等待时间变形的系统、方法和装置
US11893676B2 (en) Parallel texture sampling
CN107209353A (zh) 折反射系统和图像捕获装置
CN106797424A (zh) 具有多个输出端口的图像传感器
WO2016207686A1 (en) Facilitating chromatic adaptation of display contents at computing devices based on chromatic monitoring of environmental light
CN109644232A (zh) 分块式无透镜压缩图像获取
CN105847770B (zh) 图像处理芯片以及该芯片中图像数据的缓存方法
CN108401110A (zh) 图像的获取方法、装置、存储介质及电子设备
US11222396B2 (en) Texture memory storage
WO2014207438A2 (en) Data processing system and method
CN108537872A (zh) 一种图像渲染方法、移动设备和云端设备
CN103946823B (zh) 棋盘多gpu配置内的可缩放几何形状处理
CN107018297A (zh) 图像获取装置
CN107209926A (zh) 具有拜耳映射的图形处理单元
KR20150142562A (ko) 디스플레이의 불량 픽셀을 보상하기 위한 방법, 전자 장치 및 저장 매체
US11388391B2 (en) Head-mounted display having an image sensor array
CN110533577A (zh) 鱼眼图像校正方法及装置
CN108307114A (zh) 图像的处理方法、装置、存储介质及电子设备
US11636708B2 (en) Face detection in spherical images
KR102544622B1 (ko) 무프레임 랜덤 액세스 이미지 감지

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201013

Termination date: 20211128