CN107665481B - 图像处理方法、系统、处理设备及电子设备 - Google Patents
图像处理方法、系统、处理设备及电子设备 Download PDFInfo
- Publication number
- CN107665481B CN107665481B CN201710862782.3A CN201710862782A CN107665481B CN 107665481 B CN107665481 B CN 107665481B CN 201710862782 A CN201710862782 A CN 201710862782A CN 107665481 B CN107665481 B CN 107665481B
- Authority
- CN
- China
- Prior art keywords
- image
- lens group
- lens
- determining
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 35
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims description 30
- 230000008859 change Effects 0.000 claims description 15
- 238000013507 mapping Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 230000003190 augmentative effect Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000005452 bending Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 208000002173 dizziness Diseases 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Classifications
-
- G06T5/80—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Abstract
本公开提供了一种图像处理方法,包括,获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,以及通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜,以及根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像时。本公开还提供了一种图像的处理系统、一种图像的处理设备、以及一种电子设备。
Description
技术领域
本公开涉及一种图像处理方法、系统、处理设备及电子设备。
背景技术
随着科技文明的不断发展与进步,AR技术的使用越来越深入到人们的生活当中。AR即增强现实,也被称之为混合现实,它通过电脑技术,将虚拟的信息应用到真实世界,真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
在实现本发明构思的过程中,发明人发现现有技术中至少存在如下问题,AR眼镜的外罩的弧度过大而造成图像扭曲,使用户易产生晕眩而无法长时间佩戴。
发明内容
本公开的一个方面提供了一种图像处理方法,包括,获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,以及通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜,以及根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像。
可选地,所述根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数包括,根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化,以及根据所述位置变化,确定所述第一透镜组的补偿参数。
可选地,所述第二透镜组为单片透镜,所述单片透镜的厚度均匀度和弯角弧度满足预设条件。
本公开的另一个方面提供了一种图像的处理系统,包括获取模块,用于获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,和通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜,以及确定模块,用于根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像。
可选地,所述确定模块包括,第一确定子模块,用于根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化,以及第二确定子模块,用于根据所述位置变化,确定所述第一透镜组的补偿参数。
可选地,所述第二透镜组为单片透镜,所述单片透镜的厚度均匀度和弯角弧度满足预设条件。
本公开的另一个方面提供了一种图像的处理设备,包括,图像采集装置、处理器以及存储器,其上存储有计算机可读指令,所述指令被处理器执行时,使得处理器执行如上所述任意一项方法。
本公开的另一方面提供了一种非易失性存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种电子设备,包括,透镜组,包括至少一片透镜,图像采集装置,用于通过所述透镜组的第一部分采集图像,处理器,用于处理所述图像,其中,所述处理所述图像包括根据补偿参数校正所述图像,以及投影装置,用于将处理后的图像投影于所述透镜组的第二部分。
可选地,所述处理所述图像还包括,在校正后的图像上添加至少一个显示对象。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1A和图1B示意性示出了根据本公开实施例的图像处理方法、系统、处理设备的应用场景;
图2示意性示出了根据本公开实施例的图像处理方法的流程图;
图3示意性示出了根据本公开实施例的根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数的流程图;
图4A和图4B示意性示出了根据本公开实施例的第一图像和第二图像的示意图;
图5示意性示出了根据本公开实施例的图像的处理系统的框图;
图6示意性示出了根据本公开实施例的确定模块的框图;
图7示意性示出了根据本公开实施例的处理设备的框图;
图8A示意性示出了根据本公开实施例的电子设备的应用场景;
图8B示意性示出了根据本公开实施例的电子设备的俯视图;以及
图8C示意性示出了根据本公开实施例的电子设备的侧视图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。本领域技术人员还应理解,实质上任意表示两个或更多可选项目的转折连词和/或短语,无论是在说明书、权利要求书还是附图中,都应被理解为给出了包括这些项目之一、这些项目任一方、或两个项目的可能性。例如,短语“A或B”应当被理解为包括“A”或“B”、或“A和B”的可能性。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种用于图像处理的方法、系统、处理设备以及用于该方法的电子设备。该方法包括获取通过第一透镜组的第一图像和通过第二透镜组的第二图像,以及根据第一图像和第二图像确定确定所述第一透镜组的补偿参数,以校正通过所述第一透镜组采集的图像。该方法在不改变第一透镜组的结构的情况下,通过采用补偿参数使第一透镜组具有与所需要的第二透镜组相同的成像效果。。
图1A和图1B示意性示出了根据本公开实施例的图像处理方法、系统、处理设备的应用场景。
如图1A所示,用户可以通过透镜组110观察场景。透镜组110例如可以仅包括单片透镜。场景中例如可以包括如图1A所示的办公桌10。由于该单片透镜的厚度并不均匀,并且存在弯角弧度,因此场景通过透镜组110所成的像会发生变形。
如图1B所示,用户在使用透镜组120观察同一场景时,其中,透镜组120例如可以仅包括单片透镜,由于该单片透镜的厚度较为均匀,并且几乎没有弯角弧度,因此场景通过透镜组120所成的像几乎不会发生变形。
该场景仅为示意性,本领域技术人员在实现过程中,可以采用图像像采集装置通过透镜组采集场景下的图像,然后呈现给用户。
本公开实施例提供了一种图像处理方法,通过在同一场景下使用第一透镜组和第二透镜组分别采集图像,并基于所述图像获得第一透镜组相对于第二透镜组的补偿参数,使场景通过第一透镜组所成的像,通过该补偿参数的校正,可以获得与通过第二透镜组所成的像的效果一致。
例如,可以使用透镜组110作为第一透镜组,透镜组120作为第二透镜组,通过使用上述方法获得的补偿参数,用于补偿通过透镜组110所成的像,可以补偿处理后的图像几乎不会发生变形。
类似地,为了使用透镜组120获得类似“哈哈镜”的变形效果,可以将透镜组120作为第一透镜组,透镜组110作为第二透镜组,通过使用上述方法获得的补偿参数,用于补偿通过透镜组120所成的像,可以补偿处理后的图像发生变形,即使使用平面透镜组120,也能获得类似“哈哈镜”的变形效果。
图2示意性示出了根据本公开实施例的图像处理方法的流程图。
如图2所示,该方法包括操作S210和S220。
在操作S210,获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,以及通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜。
在操作S220,根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像。
该方法通过在相同场景下的不同透镜上采集的图像,确定补偿参数,使通过第一透镜组采集的图像可以通过补偿参数校正,使之与第二透镜组采集的效果相同。
根据本公开实施例,在操作S210,可以利用任何具备采集图像功能的装置或设备采集第一图像和第二图像,可以是摄像模组,还可以是例如数码相机、手机、摄像机等。
根据本公开实施例,第一图像和第二图像在相同的场景下获得的。例如图1的应用场景,通过摄像模组透过透镜组110采集的办公桌10的场景的图像为第一图像。第二图像可以为该摄像模组透过透镜组120直接采集到的办公桌10的场景的图像。
根据本公开实施例,第一图像可以为存在扭曲现象的图像,第二图像可以为正常的图像,真实地再现了现实场景。在操作S220中,以第二图像为标准图像,确定第一图像的补偿参数,以校正通过所述第一透镜组采集的图像。
根据本公开实施例,所述第二透镜组可以为单片透镜,所述单片透镜的厚度均匀性和弯角弧度满足预设条件。根据本公开实施例,该单片透镜的厚度可以尽可能地保持均匀,单片透镜的厚度均匀性可以通过方差或PV(最大差别值,Peak Value)等参数进行表征,当该参数满足预设条件时,第二透镜组采集到的第二图像作为标准图像,根据该标准图像确定的第一透镜组的补偿参数,用于校正的第一图像时使得校正后的图像更加真实。例如,可以设定单片透镜的PV小于20μm。同时,该单片透镜的弯角弧度也应该满足预设条件,以保证采集到图像的真实性。弯角弧度用于表征镜片的弯曲程度,例如可以定义为在透镜的一个表面上的任意两条切线的角度差的最大值。例如,可以设定弯角弧度小于0.5°。该方法使用厚度均匀度和弯角弧度满足预设条件的第二透镜组校正第一透镜组,其获得的补偿参数可以校正第一透镜组采集的图像,使其扭曲现象减小甚至消失,使其成像不会产生变形,提高用户体验。
根据本公开实施例,在操作S220,根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像。以下结合图3~图4B所示意的实施例进行说明。
图3示意性示出了根据本公开实施例的根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数的流程图。
如图3所示,该方法包括操作S221和S222。
在操作S221,根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化。
在操作S222,根据所述位置变化,确定所述第一透镜组的补偿参数。
该方法通过对比第一图像和第二图像中对应像素点的位置变化,确定所述第一透镜组的补偿参数,以改善第一透镜组由于曲率的变化导致的图像扭曲。
下面结合图4A和图4B所示意的实施例对图3所示意的方法进一步说明。
图4A和图4B示意性示出了根据本公开实施例的根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数的示意图。
如图4A所示,图4A示意性地示出了透过第一透镜组采集的第一图像的一个局部,该局部包括4×4个像素点,下面以该局部的中的4个特征点为例进行说明。该4个特征点包括:特征点1(1,4)、特征点2(4,3)、特征点3(1,2)以及特征点4(4,1)。图4B示意出了透过第二透镜组采集的第二图像的与图4A相对应的一个局部,所述第二图像与第一图像采集的场景相同。与上述4个特征点所对应的特征点分别位于:特征点1(2,4)、特征点2(3,3)、特征点3(2,2)以及特征点4(3,1)。由此可以确定补偿参数包括:在(1,4)和(1,2)位置的补偿参数为(1,0),在(4,3)和(4,1)位置的补偿参数为(-1,0)。
根据本公开一些实施例,可以依照上述方法确定全部像素点的补偿参数,而在另一些实施例中,还可以在确定部分特征点的补偿参数后,推测该些特征点附近的其他点的补偿参数。
根据本公开实施例,在确定所述补偿参数后,可以保存该补偿参数,在透过第一透镜组采集图像时,将图像中的像素点的坐标与所述补偿参数相加,用于修正图像,以改善第一透镜组由于曲率的变化导致的图像扭曲。
此场景图仅为示例以更好地说明该图像处理的方法,在实际中补偿参数还可以包括根据第一图像和第二图像对应的像素点的亮度、色彩等差异所确定的映射关系。
图5示意性示出了根据本公开实施例的图像的处理系统500的框图。
如图5所示,该图像的处理系统包括获取模块510和确定模块520。
获取模块510,例如执行参考上文图2所示意的操作S210,用于获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,和通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜。
确定模块520,例如执行参考上文图2所示意的操作S220,用于根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像。
根据本公开实施例,所述第二透镜组为单片透镜,所述单片透镜的厚度均匀度和弯角弧度满足预设条件。
图6示意性示出了根据本公开实施例的确定模块520的框图。
如图7所示,该确定模块520包括第一确定子模块521和第二确定子模块522。
第一确定子模块521,例如执行参考上文图3所示意的操作S221,用于根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化。
第二确定子模块522,例如执行参考上文图3所示意的操作S222,用于根据所述位置变化,确定所述第一透镜组的补偿参数。
可以理解的是,获取模块510、确定模块520、第一确定子模块521以及第二确定子模块522可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本发明的实施例,获取模块510、确定模块520、第一确定子模块521以及第二确定子模块522中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以以对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式的适当组合来实现。或者,获取模块510、确定模块520、第一确定子模块521以及第二确定子模块522中的至少一个可以至少被部分地实现为计算机程序模块,当该程序被计算机运行时,可以执行相应模块的功能。
图7示意性示出了根据本公开实施例的处理设备的框图。
如图7所示,处理设备700包括处理器710、存储器720、以及图像采集装置740。该图像的处理设备700可以执行上面参考图2或图3描述的方法,以实现对第一透镜组的校正。
具体地,处理器710例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器710还可以包括用于缓存用途的板载存储器。处理器710可以是用于执行参考图2或图3描述的根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
存储器720,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);半导体存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
存储器720可以包括计算机程序721,该计算机程序721可以包括代码/计算机可执行指令,其在由处理器710执行时使得处理器710执行例如上面结合图2或图3所描述的方法流程及其任何变形。
计算机程序721可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序721中的代码可以包括一个或多个程序模块,例如包括721A、模块721B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器710执行时,使得处理器710可以执行例如上面结合图2或图3所描述的方法流程及其任何变形。
根据本公开的实施例,处理设备还可以包括通信装置730。处理器710可以通过通信装置730与其他电子设备进行交互,用于将补偿参数发送至该其他电子设备。
根据本发明的实施例,获取模块510和确定模块520中的至少一个可以实现为参考图7描述的计算机程序模块,其在被处理器710执行时,可以实现上面描述的相应操作。
图8A示意性示出了根据本公开实施例的电子设备800的应用场景。
如图8A所示,用户在通过电子设备800观察场景时,电子设备800除了能够使用户看到该场景,还可以在该场景上显示至少一个对象,例如在办公桌10上添加一个旗子11,用户在看到该办公桌10的同时还可以看到旗子11。该电子设备可以是AR(增强现实)设备,例如AR眼镜或AR头盔。
图8B示意性示出了根据本公开实施例的电子设备800的俯视图。
如图8B所示,用于图像处理的电子设备800包括透镜组810,所述透镜组810包括至少一片透镜,图像采集装置821和822,用于通过所述透镜组的第一部分采集图像,处理器,用于处理所述图像,其中,所述处理所述图像包括根据补偿参数校正所述图像,投影装置830,用于将处理后的图像投影于所述透镜组的第二部分。
根据本公开实施例,透镜组810为光学元件的组合,用户佩戴该电子设备时,通过透镜组810可以观察到现实场景。透镜组810在Y方向中间部分的曲率几乎不变,透过该部分采集的图像几乎不存在变形现象,而用户视角可达到的最大范围处于该透镜组曲率几乎不变的中间部分,因此用户透过该部分观察到的像几乎与现实场景一致。透镜组810在Y方向两侧边缘部分曲率较大,透过透镜组810两侧边缘部分采集的图像存在变形现象。
根据本公开实施例,图像采集装置821和822位于透镜组810两侧,采集到的图像为透过透镜组810两侧边缘曲率较大部分的图像,因此图像采集装置821和822采集到的图像存在变形现象。
根据本公开实施例,处理器接收来自图像采集装置821和822的图像,并根据补偿参数校正来自图像采集装置821和822的图像,处理器还可以用于将虚拟图像与来自图像采集装置821和822的图像融合。处理器校正和融合后的图像经过投影装置830呈现在用户眼前,用户观察到增强现实图像。
图8C示意性示出了根据本公开实施例的电子设备800的侧视图。
根据本公开实施例,投影装置830位于透镜组810的上侧,用于将处理器处理完成的图像投影到透镜组810上,以使用户观察到增强现实图像。
根据本公开实施例,图像采集装置821和822可以位于投影装置830的下方,可选地,图像采集装置位于电子设备在Z方向的中部,以使图像采集装置的高度与用户眼睛的高度一致。
根据本公开实施例,电子设备800可以以如下方式实现本公开实施例的方法。首先图像采集装置通过电子设备800上第一透镜组的第一部分采集图像,如图8B所示,图像采集装置821和822通过透镜组810在Y方向两侧边缘曲率较大的部分采集图像,将该图像作为第一图像,其中,该部分即为所述第一透镜组的第一部分。然后通过第二透镜组采集第二图像,所述第二透镜组为厚度均匀且弯角弧度几乎为0的透镜,例如透镜组810的Y方向的中部或者单独的平面镜等。处理器获取第一图像和第二图像,并根据第一图像和第二图像确定补偿参数。此时确定的补偿参数可以设置为该电子设备800中的默认值,以自动校正第一图像。当用户佩戴该电子设备时,处理器根据默认的补偿参数补偿图像采集装置采集的第一图像。处理器还可以将校正后的第一图像与虚拟图像融合,获得增强现实图像。处理器将增强现实图像发送到投影装置830。投影装置830将增强现实图像投影到透镜组810上以使用户能够看到该图像。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (10)
1.一种图像处理方法,包括:
获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,以及通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜,所述第二图像为标准图像;以及
根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像,以改善所述第一透镜组采集的图像的扭曲,所述扭曲由所述第一透镜组的曲率的变化引起,
其中,所述补偿参数包括根据所述第一图像和所述第二图像对应的像素点的差异确定的映射关系。
2.根据权利要求1所述的方法,其中,所述根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数包括:
根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化;以及
根据所述位置变化,确定所述第一透镜组的补偿参数。
3.根据权利要求1所述的方法,其中,所述第二透镜组为单片透镜,所述单片透镜的厚度均匀度和弯角弧度满足预设条件。
4.一种图像的处理系统,包括:
获取模块,用于获取在相同场景下,通过第一透镜组的第一部分采集的第一图像,和通过第二透镜组采集的第二图像,其中,所述第一透镜组和所述第二透镜组分别包括至少一片透镜,所述第二图像为标准图像;以及
确定模块,用于根据所述第一图像和第二图像,确定所述第一透镜组的补偿参数,所述补偿参数用于校正通过所述第一透镜组采集的图像,以改善所述第一透镜组采集的图像的扭曲,所述扭曲由所述第一透镜组的曲率的变化引起,
其中,所述补偿参数包括根据所述第一图像和所述第二图像对应的像素点的差异确定的映射关系。
5.根据权利要求4所述的系统,其中,所述确定模块包括:
第一确定子模块,用于根据第一图像和第二图像,确定对应的像素点在第一图像和第二图像上的位置变化;以及
第二确定子模块,用于根据所述位置变化,确定所述第一透镜组的补偿参数。
6.根据权利要求4所述的系统,其中,所述第二透镜组为单片透镜,所述单片透镜的厚度均匀度和弯角弧度满足预设条件。
7.一种图像的处理设备,包括:
图像采集装置;
处理器;以及
存储器,其上存储有计算机可读指令,所述指令被处理器执行时,使得处理器执行权利要求1-3中任意一项方法。
8.一种计算机可读存储介质,其上存储有计算机可读指令,所述指令被处理器执行时,使得处理器执行权利要求1-3中任意一项方法。
9.一种电子设备,包括:
第一透镜组,包括至少一片透镜;
图像采集装置,用于在相同场景下,通过所述第一透镜组的第一部分采集第一图像,以及通过第二透镜组采集第二图像,所述第二透镜组包括至少一片透镜,所述第二图像为标准图像;
处理器,用于处理所述第一透镜组采集的图像,其中,所述处理所述第一透镜组采集的图像包括根据补偿参数校正所述第一透镜组采集的图像,以改善所述第一透镜组采集的图像的扭曲,所述扭曲由所述第一透镜组的曲率的变化引起;以及
投影装置,用于将处理后的图像投影于所述第一透镜组的第二部分,
其中,所述补偿参数包括根据所述第一图像和所述第二图像对应的像素点的差异确定的映射关系。
10.根据权利要求9所述的电子设备,其中,所述处理所述第一透镜组采集的图像还包括:
在校正后的图像上添加至少一个显示对象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710862782.3A CN107665481B (zh) | 2017-09-21 | 2017-09-21 | 图像处理方法、系统、处理设备及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710862782.3A CN107665481B (zh) | 2017-09-21 | 2017-09-21 | 图像处理方法、系统、处理设备及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107665481A CN107665481A (zh) | 2018-02-06 |
CN107665481B true CN107665481B (zh) | 2021-05-18 |
Family
ID=61097303
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710862782.3A Active CN107665481B (zh) | 2017-09-21 | 2017-09-21 | 图像处理方法、系统、处理设备及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107665481B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110533756B (zh) * | 2019-08-29 | 2021-10-29 | 腾讯科技(深圳)有限公司 | 贴附型装饰物的设置方法、装置、设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6728417B1 (en) * | 1999-02-23 | 2004-04-27 | Fanuc Ltd. | Measurement apparatus |
CN102760234A (zh) * | 2011-04-14 | 2012-10-31 | 财团法人工业技术研究院 | 深度图像采集装置、系统及其方法 |
CN103019001A (zh) * | 2011-09-22 | 2013-04-03 | 晨星软件研发(深圳)有限公司 | 自动对焦方法与装置 |
CN103293642A (zh) * | 2012-03-02 | 2013-09-11 | 扬明光学股份有限公司 | 投影镜头和投影装置 |
CN103636191A (zh) * | 2011-08-23 | 2014-03-12 | 松下电器产业株式会社 | 三维摄像装置、透镜控制装置以及程序 |
CN104570654A (zh) * | 2013-10-25 | 2015-04-29 | 日本冲信息株式会社 | 图像形成装置 |
CN105516578A (zh) * | 2014-09-25 | 2016-04-20 | 联想(北京)有限公司 | 图像处理方法、装置及电子设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7110172B2 (en) * | 2004-02-27 | 2006-09-19 | Hamamatsu Photonics K.K. | Microscope and sample observation method |
JP5368171B2 (ja) * | 2009-05-21 | 2013-12-18 | パナソニック株式会社 | 撮像レンズ及びそれを用いた撮像装置 |
TWI481901B (zh) * | 2012-12-03 | 2015-04-21 | Wistron Corp | 頭戴式顯示裝置 |
-
2017
- 2017-09-21 CN CN201710862782.3A patent/CN107665481B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6728417B1 (en) * | 1999-02-23 | 2004-04-27 | Fanuc Ltd. | Measurement apparatus |
CN102760234A (zh) * | 2011-04-14 | 2012-10-31 | 财团法人工业技术研究院 | 深度图像采集装置、系统及其方法 |
CN103636191A (zh) * | 2011-08-23 | 2014-03-12 | 松下电器产业株式会社 | 三维摄像装置、透镜控制装置以及程序 |
CN103019001A (zh) * | 2011-09-22 | 2013-04-03 | 晨星软件研发(深圳)有限公司 | 自动对焦方法与装置 |
CN103293642A (zh) * | 2012-03-02 | 2013-09-11 | 扬明光学股份有限公司 | 投影镜头和投影装置 |
CN104570654A (zh) * | 2013-10-25 | 2015-04-29 | 日本冲信息株式会社 | 图像形成装置 |
CN105516578A (zh) * | 2014-09-25 | 2016-04-20 | 联想(北京)有限公司 | 图像处理方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN107665481A (zh) | 2018-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
ES2784905T3 (es) | Método y dispositivo de procesamiento de imágenes, medio de almacenamiento legible por computadora y dispositivo electrónico | |
KR102385360B1 (ko) | 이미지 보정을 수행하는 전자 장치 및 그 동작 방법 | |
JP6411505B2 (ja) | 全焦点画像を生成するための方法および装置 | |
US9600741B1 (en) | Enhanced image generation based on multiple images | |
US9692959B2 (en) | Image processing apparatus and method | |
CN109074632B (zh) | 图像失真变换方法和设备 | |
US8660309B2 (en) | Image processing apparatus, image processing method, image processing program and recording medium | |
CN109743626B (zh) | 一种图像显示方法、图像处理方法和相关设备 | |
WO2014125659A1 (ja) | 画像処理装置、撮像装置、フィルタ生成装置、画像復元方法及びプログラム | |
KR20170098089A (ko) | 전자 장치 및 그의 동작 방법 | |
JP2012195668A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US20190266802A1 (en) | Display of Visual Data with a Virtual Reality Headset | |
US10559068B2 (en) | Image processing device, image processing method, and program processing image which is developed as a panorama | |
TW201931303A (zh) | 提供影像的方法及用於支持所述方法的電子裝置 | |
US8619151B2 (en) | Photographing method and apparatus providing correction of object shadows, and a recording medium storing a program for executing the method | |
CN107665481B (zh) | 图像处理方法、系统、处理设备及电子设备 | |
US8964058B2 (en) | On-board camera system for monitoring an area around a vehicle | |
CN109785225B (zh) | 一种用于图像矫正的方法和装置 | |
US11106042B2 (en) | Image processing apparatus, head-mounted display, and image displaying method | |
JP7429515B2 (ja) | 画像処理装置、ヘッドマウントディスプレイ、および画像表示方法 | |
US10902265B2 (en) | Imaging effect based on object depth information | |
US20170091905A1 (en) | Information Handling System Defocus Tracking Video | |
WO2016157607A1 (ja) | カメラ装置、画像処理装置及び画像処理方法 | |
KR102534449B1 (ko) | 이미지 처리 방법, 장치, 전자 장치 및 컴퓨터 판독 가능 저장 매체 | |
US11871133B2 (en) | Gaze-based non-regular subsampling of sensor pixels |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |