CN108600623B - 重聚焦显示方法以及终端设备 - Google Patents
重聚焦显示方法以及终端设备 Download PDFInfo
- Publication number
- CN108600623B CN108600623B CN201810357798.3A CN201810357798A CN108600623B CN 108600623 B CN108600623 B CN 108600623B CN 201810357798 A CN201810357798 A CN 201810357798A CN 108600623 B CN108600623 B CN 108600623B
- Authority
- CN
- China
- Prior art keywords
- image data
- original image
- refocusing
- refocused
- lens
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种重聚焦显示方法以及终端设备,该方法包括:感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,基于该光线生成原始图像数据,其中,原始图像数据包括光强度信息、光位置信息以及光方向信息;获取原始图像数据的重聚焦位置信息;基于原始图像数据以及重聚焦位置选取信息,生成重聚焦图像数据;以及根据所述重聚焦图像数据,显示目标图像。通过重聚焦显示方法中,所提供基于用户选择而生成重聚焦图像数据的功能,能够对拍摄成果重新调整聚焦并生成显示重聚焦后的目标图像,进而提升用户体验。
Description
技术领域
本发明涉及光场信息的显示领域/终端领域,尤其涉及一种重聚焦显示方法以及终端设备。
背景技术
摄像头已经是移动终端不可缺少的配备,现有摄像头用于摄像时普遍都是先对焦后拍照,并且选择的聚焦点在完成拍摄后均无法被调整。若是影像存在失焦或对焦错误,就只能进行重新拍摄,对于某些瞬间即逝的场景也因此缺乏对拍摄后的图像数据进行聚焦调整的便利性。若是在同一场景要获得不同对焦点的摄像图案,也只能逐一进行对焦后拍摄,无法通过一次拍摄获得多种不同对焦点或不同景深的摄像图像,对于该摄像图像选择在不同位置进行聚焦,无法及时呈现重聚焦的图象也对用户体验产生影响。
发明内容
本发明实施例提供一种重聚焦显示方法,应用于终端设备,以解决对拍照后显示的摄像成品无法调整聚焦的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,提供了一种重聚焦显示方法,该方法包括如下步骤:
感测被拍摄目标反射并且通过镜头以及微透镜阵列的光线,基于所述光线生成原始图像数据,其中,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
获取所述原始图像数据的重聚焦位置信息;
基于所述原始图像数据以及所述重聚焦位置信息,生成重聚焦图像数据;以及
显示所述重聚焦图像数据。
第二方面,提供了一种终端设备,该终端设备包括:
传感模块,用于感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,基于所述光线生成原始图像数据,其中,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
获取模块,用于获取所述原始图像数据的重聚焦位置信息;
运算模块,用于基于所述原始图像数据以及所述重聚焦位置信息,生成重聚焦图像数据;
显示模块,用于基于所述重聚焦图像数据,显示重聚焦后的目标图像。
第三方面,提供了一种终端设备,该终端设备包括:
摄像头、处理器以及显示器;所述摄像头与所述处理器电性连接,所述显示器与所述处理器电性连接;所述摄像头还包括镜头、微透镜阵列以及感光传感器;所述微透镜阵列朝向所述镜头的一侧镀有红外线过滤膜,远离所述镜头的一侧镀有抗反射膜;
所述摄像头的所述感光传感器感测被拍摄目标反射且通过所述镜头以及所述微透镜阵列的光线,基于所述光线生成原始图像数据,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
所述处理器获取所述原始图像数据的重聚焦位置信息,并基于所述原始图像数据以及所述重聚焦位置信息生成重聚焦图像数据;
所述显示器基于所述重聚焦图像数据显示重聚焦后的目标图像。
第四方面,提供了一种终端设备,该终端设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的方法的步骤。
第五方面,提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的方法的步骤。
在本发明实施例中,通过重聚焦显示方法,提供基于用户选择而生成重聚焦后的目标图像的功能,能够对拍摄成果重新调整聚焦并显示该重聚焦后的目标图像,进而提升用户体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例提供的重聚焦显示方法的第一种流程示意图;
图2是本发明实施例提供的重聚焦显示方法法的第二种流程示意图;
图3是实现本发明各个实施例的一种终端设备的模块示意图;
图4是实现本发明各个实施例的一种终端设备的摄像模块硬件结构示意图;
图5是实现本发明各个实施例的光场信息以四维光场函数呈现的示意图;
图6是实现本发明各个实施例的一种终端设备的摄影原理的模型的几何关系的示意图;
图7(a)是本发明实施例提供的原始图像数据显示的示意图;
图7(b)是本发明实施例提供的重聚焦图像数据显示的示意图;
图8是实现本发明各个实施例的一种终端设备的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的实施例应用于终端设备,终端设备包括摄像头、处理器以及显示器,摄像头还包括镜头、微透镜阵列以及感光传感器。
图1是本发明实施例提供的重聚焦显示方法的第一种流程示意图,如图所示,本发明的方法包括如下步骤:
步骤S101,感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,基于所述光线生成原始图像数据,其中,原始图像数据包括光强度信息、光位置信息以及光方向信息。
在步骤S101中,终端设备通过摄像头对目标物或目标场景采集图像时,摄像头的感光传感器感测被拍摄目标物或目标场景反射的光线,摄像头的感光传感器基于被拍摄目标反射的光线的感测结果生成原始图像数据,其中,原始图像数据是包括光强度信息、光位置信息以及光方向信息,原始图像数据能够通过四维光场函数以数学方式呈现。处理器获取被拍摄目标反射且通过镜头以及微透镜阵列的光线,基于所述光线生成的原始图像数据
步骤S103,获取原始图像数据的重聚焦位置信息。
在步骤S103中,用户基于原始图像数据选择需要重聚焦的位置,进一步生成重聚焦位置信息。选择的方式能够通过触摸点选或鼠标拖拽选择范围等方式。
在本步骤中,本步骤还可以进一步包括:获取用户在终端设备基于原始图像选取的重聚焦位置;以及基于重聚焦位置以及相应于原始图像数据的位置,生成重聚焦位置信息。获取模块能够通过触控模块获取用户在触控模块上点击的重聚焦位置,或通过其他输入装置获取用户在显示屏上选择的重聚焦位置,并将重聚焦位置换算相应于原始图像数据的位置,进而生成重聚焦位置信息。
步骤S104,基于原始图像数据以及重聚焦位置信息,生成重聚焦图像数据。
在步骤S104中,获得用户希望重新聚焦的重聚焦位置信息后,便通过算法将原始图像数据进行转换,并进一步生成重聚焦图像数据。
在本步骤中,本步骤还可以进一步包括:基于原始图像数据,在位置维度将对焦平面从采集原始图像的位置平移至重聚焦位置;以及对焦平面对在位置维度平移后的原始图像数据在方向维度进行积分后,生成所述重聚焦图像数据。
步骤S105,根据重聚焦图像数据,显示目标图像。
在步骤S105中,通过显示模块显示经过计算并生成的目标图像。目标图像也就是用户于原始图像上选择重新聚焦的位置后,所生成并显示的图像。
图2是本发明实施例提供的重聚焦显示方法的第二种流程示意图,图2所示的实施例提供更进一步的重聚焦显示方法。图2中的步骤S201、S203、S204、S205与图1的步骤S101、S103、S104、S105相同,于此不再重复叙述。图2相对于图1增加步骤S202,关于增加步骤相关的详细说明如下:
步骤S202,显示原始图像,其中原始图像作为用户选取重聚焦位置的参考。
在步骤S202中,终端设备通过显示模块显示原始图像,提供用户在选择重聚焦位置时可以直接参考原始图像,便利用户可以精确选择需要的重新聚焦位置。
在本发明实施例中,通过重聚焦显示方法,提供基于用户选择而生成重聚焦后的目标图像的功能,能够对拍摄成果重新调整聚焦并生成显示重聚焦后的目标图像,进而提升用户体验。
此外,通过重新调整聚焦显示的功能,可以简化摄像模块的防抖元件,无需在摄像模块中设置马达结构,并能实现先拍照后对焦的功能。
图3是实现本发明各个实施例的一种终端设备的模块示意图,如图所示,本发明实施例还提供一种终端设备,包括:传感模块31、获取模块32、运算模块33以及显示模块34。
传感模块31用于感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,传感模块31基于被拍摄目标反射的光线生成原始图像数据。微透镜阵列朝向镜头的一侧镀有红外线过滤膜,微透镜阵列远离镜头的一侧镀有抗反射膜。原始图像数据包括光强度信息、光位置信息以及光方向信息。获取模块32用于获取原始图像数据的重聚焦位置信息。运算模块33用于基于原始图像数据以及重聚焦位置信息生成重聚焦图像数据。显示模块34用于基于重聚焦图像数据显示重聚焦后的目标图像。
在本发明的实施例中,显示模块34显示原始图像用于作为用户选取重聚焦位置的参考。
在本发明的实施例中,获取模块32获取用户在终端设备基于原始图像选取的重聚焦位置。运算模块33基于重聚焦位置以及相应于原始图像数据的位置生成重聚焦位置信息。
在本发明的实施例中,运算模块33基于原始图像数据在位置维度将对焦平面从采集原始图像的位置平移至重聚焦位置,并将对焦平面在位置维度平移后的原始图像数据在方向维度进行积分后,生成重聚焦图像数据。
本发明实施例提供的终端设备能够实现图1至图2方法实施例中终端设备实现的各个过程,为避免重复,这里不再赘述。
在本发明实施例中,通过重聚焦显示方法可以为用户操作终端设备带来新的使用体验,并提供基于用户选择而生成重聚焦后的目标图像的功能,能够对拍摄成果重新调整聚焦并生成显示重聚焦后的目标图像,进而提升用户体验。
此外,通过重新调整聚焦显示的功能,可以简化摄像模块的防抖元件,无需在摄像模块中设置马达结构,并能实现先拍照后对焦的功能。
图4是实现本发明各个实施例的一种终端设备的摄像模块硬件结构示意图,如图所示,微透镜阵列312设置于镜头31与感光传感模块313之间。微透镜阵列312朝向镜头31的一侧镀有红外线过滤膜,或称为IR膜。微透镜阵列312远离镜头的一侧镀有抗反射膜,或称为AR膜。被拍摄目标反射的光线进入镜头311后,通过为透进阵列312再次成像在感光传感模块313上。感光传感模块313记录了光强度信息,也因相对于微透镜阵列312的某个微透镜的位置,而记录了光方向信息。
感光传感模块313虽然采集被拍摄目标反射的光线的光场信息,包含光强度信息、光位置信息和光方向信息。然而要进一步实现光场的重聚焦,需要首先对光场信息进行采样,即从采取的二维光场原始图像中提取四维的光场矩阵,也就是四维光场函数。其中,单个微透镜在微透镜阵列312中的位置决定了两个维度,单个微透镜覆盖下感光传感模块313的像元坐标决定了另外两个维度。进一步在频率域对原始图像数据进行处理,也就是对四维光场矩阵进行四维傅立叶变换,并将通过傅立叶变化后的频谱进行切片后,然后再反向变换到空间域,其中频谱切片的斜率位置进一步决定重聚焦的位置。
图5是实现本发明各个实施例的光场信息以四维光场函数呈现的示意图,如图所示,空间中携带光场信息的任意光线,例如强度和方向信息,都可以通过两个平行平面来进行参数化表示,光线与这两个平面相交于两点,也就是一条光线的坐标为该光线在两个平行平面u-v和x-y上的交点的坐标,进一步形成一个四维光场函数L(u,v,x,y)。
图6是实现本发明各个实施例的一种终端设备的摄影原理的模型的几何关系的示意图,如图所示,L(u,s)为感光传感模块采集到的光场,U表示摄像模块的镜头的孔径所在的平面,S表示微透镜阵列所在平面,两个平面之间的距离为l。选择新的对焦平面S’,与U平面的距离为l’,令l'=αl,S’平面上所成的像等于U-S’之间光场的积分,也就是I(s′)=∫L′(u,s′)du。
对于感光传感模块采集的同一条光线:L(u,s)=L'(u,s')
也就是说,计算模块对于原始图像数据进行重聚焦的计算,也就是对摄像模块的感光传感模块所感侧光线形成的光场在位置维度将对焦平面从采集原始图像的位置平移至需要重聚焦的位置,接着将对焦平面在位置维度平移后的原始图像数据在方向维度进行积分的过程。
图7(a)是本发明实施例提供的原始图像数据显示示意图,图7(b)是本发明实施例提供的重聚焦图像数据显示示意图,图7(a)与图7(b)中的每个斑点都是通过微透镜阵列中各个微透镜的成像。如图所示,图7(a)是对A、D、O三个字母通过摄像模块的感光传感模块所获得的由一系列斑点组成的原始图像数据,A、D、O三个字母处于空间中的不同位置,分别在X方向、Y方向以及Z方向均错开一定的距离。图7(b)则是分别通过在终端设备的触控模块上选择重聚焦的位置后,分别聚焦在A、D、O三个字母位置的重聚焦图像数据,实现分别在三个字母处的图像清晰输出。
图8为实现本发明各个实施例的一种终端设备的硬件结构示意图,终端设备800包括但不限于:射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示器806、用户输入单元807、接口单元808、存储器809、处理器810、电源811、壳体、印刷线路板以及线路接口等部件。用户输入单元807还包括但不限于:触摸屏8071、摄像头8072以及其他输入设备8073。其中,摄像头8072与处理器810电性连接,显示器806与处理器810电性连接。本领域技术人员可以理解,图8中示出的终端设备结构并不构成对终端设备的限定,终端设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,终端设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,用户输入单元807用于采集图像时,通过摄像头8072对目标物或目标场景进行采集。摄像头8072的感光传感器感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,生成包括光强度信息、光位置信息以及光方向信息的原始图像数据。微透镜阵列朝向镜头的一侧镀有红外线过滤膜,远离镜头的一侧镀有抗反射膜。处理器810获取原始图像数据的重聚焦位置信息,并且基于原始图像数据以及重聚焦位置信息生成重聚焦图像数据。显示器806基于重聚焦图像数据显示重聚焦后的目标图像。
在本发明实施例中,通过基于光场信息的重聚焦显示方法可以为用户操作终端设备带来新的使用体验,并提供基于用户选择而计算并生成重聚焦图像数据的功能,能够对拍摄成果重新调整聚焦并生成显示重聚焦后的目标图像,进而提升用户体验。
此外,通过重新调整聚焦显示的功能,可以简化摄像头模组的防抖元件,无需在摄像头中设置马达结构,并能实现先拍照后对焦的功能。
应理解的是,本发明实施例中,射频单元801可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器810处理;另外,将上行的数据发送给基站。通常,射频单元801包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元801还可以通过无线通信系统与网络和其他设备通信。
终端设备800通过网络模块802为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元803可以将射频单元801或网络模块802接收的或者在存储器809中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元803还可以提供与终端设备800执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元803包括扬声器、蜂鸣器以及受话器等。
输入单元804用于接收音频或视频信号。输入单元804可以包括图形处理器(Graphics Processing Unit,GPU)8041和麦克风8042,图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示器806上。经图形处理器8041处理后的图像帧可以存储在存储器809(或其它存储介质)中或者经由射频单元801或网络模块802进行发送。麦克风8042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元801发送到移动通信基站的格式输出。
终端设备800还包括至少一种传感器805,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板8061的亮度,接近传感器可在终端设备800移动到耳边时,关闭显示面板8061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别终端设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器805还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示器806用于显示由用户输入的信息或提供给用户的信息。显示器806可包括显示面板8061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板8061。
用户输入单元807可用于接收输入的数字或字符信息,以及产生与终端设备的用户设置以及功能控制有关的键信号输入。触摸屏8071,也称为触控面板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触摸屏8071上或在触摸屏8071附近的操作)。触摸屏8071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器810,接收处理器810发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触摸屏8071。摄像头8072可包括镜头、光学防抖马达、变焦马达、马达控制器和光学传感器等多个部分。其中,镜头容纳镜片组,光学防抖马达或变焦马达可以基于控制器对镜头进行调整,光学传感器采集通过镜头的光学影像信息,再送给处理器810加以执行;马达控制器基于处理器810带来的信号,将控制信号传送给光学防抖马达或变焦马达。除了触摸屏8071以及摄像头8072,用户输入单元807还可以包括其他输入设备8073。具体地,其他输入设备8073可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触摸屏8071可覆盖在显示面板8061上,当触摸屏8071检测到在其上或附近的触摸操作后,传送给处理器810以确定触摸事件的类型,随后处理器810根据触摸事件的类型在显示面板8061上提供相应的视觉输出。触摸屏8071与显示面板8061是作为两个独立的部件来实现终端设备的输入和输出功能,但是在某些实施例中,可以将触摸屏8071与显示面板8061集成而实现终端设备的输入和输出功能,具体此处不做限定。
接口单元808为外部装置与终端设备800连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元808可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到终端设备800内的一个或多个元件或者可以用于在终端设备800和外部装置之间传输数据。
存储器809可用于存储软件程序以及各种数据。存储器809可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器809可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器810是终端设备的控制中心,利用各种接口和线路连接整个终端设备的各个部分,通过运行或执行存储在存储器809内的软件程序和/或模块,以及调用存储在存储器809内的数据,执行终端设备的各种功能和处理数据,从而对终端设备进行整体监控。处理器810可包括一个或多个处理单元;优选的,处理器810可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器810中。
终端设备800还可以包括给各个部件供电的电源811(比如电池),优选的,电源811可以通过电源管理系统与处理器810逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,终端设备800包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种终端设备,包括处理器810,存储器809,存储在存储器809上并可在所述处理器810上运行的计算机程序,该计算机程序被处理器810执行时实现上述重聚焦显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述重聚焦显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (6)
1.一种重聚焦显示方法,应用于终端设备,其特征在于,包括如下步骤:
感测被拍摄目标反射且通过镜头以及微透镜阵列的光线,基于所述光线生成原始图像数据,其中,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
获取所述原始图像数据的重聚焦位置信息;
基于所述原始图像数据以及所述重聚焦位置信息,生成重聚焦图像数据;以及
基于所述重聚焦图像数据,显示重聚焦后的目标图像;
其中,所述基于所述原始图像数据以及所述重聚焦位置信息,生成重聚焦图像数据,包括:
基于所述原始图像数据,在位置维度将对焦平面从采集所述原始图像的位置平移至所述重聚焦位置;
对所述对焦平面在位置维度平移后的所述原始图像数据在方向维度进行积分后,生成所述重聚焦图像数据;
所述获取所述原始图像数据的重聚焦位置信息的步骤之前,所述步骤还包括:
显示所述原始图像,其中,所述原始图像作为用户选取重聚焦位置的参考;
所述获取所述原始图像数据的重聚焦位置信息的步骤,所述步骤还包括:
获取用户在所述终端设备基于所述原始图像选取的所述重聚焦位置;以及
基于所述重聚焦位置以及相应于所述原始图像数据的位置,生成所述重聚焦位置信息。
2.如权利要求1所述的方法,其特征在于,其中,微透镜阵列朝向镜头的一侧镀有红外线过滤膜,微透镜阵列远离镜头的一侧镀有抗反射膜。
3.一种终端设备,其特征在于,所述终端设备包括:
传感模块,用于感测被拍摄目标反射并且通过镜头以及微透镜阵列的光线并基于所述光线生成原始图像数据,其中,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
获取模块,用于获取所述原始图像数据的重聚焦位置信息;
运算模块,用于基于所述原始图像数据以及所述重聚焦位置信息生成重聚焦图像数据;以及
显示模块,用于基于所述重聚焦图像数据,显示重聚焦后的目标图像;
其中,所述运算模块具体用于:基于所述原始图像数据在位置维度将对焦平面从采集所述原始图像的位置平移至所述重聚焦位置,对所述对焦平面在位置维度平移后的所述原始图像数据在方向维度进行积分后,生成所述重聚焦图像数据;
其中,所述显示模块显示所述原始图像用于作为用户选取重聚焦位置的参考;
所述获取模块获取用户在所述终端设备基于所述原始图像选取的所述重聚焦位置;所述运算模块基于所述重聚焦位置以及相应于所述原始图像数据的位置生成所述重聚焦位置信息。
4.如权利要求3所述的终端设备,其特征在于,其中,微透镜阵列朝向镜头的一侧镀有红外线过滤膜,微透镜阵列远离镜头的一侧镀有抗反射膜。
5.一种终端设备,其特征在于,所述终端设备包括:摄像头、处理器以及显示器;所述摄像头与所述处理器电性连接,所述显示器与所述处理器电性连接;所述摄像头还包括镜头、微透镜阵列以及感光传感器;所述微透镜阵列朝向所述镜头的一侧镀有红外线过滤膜,远离所述镜头的一侧镀有抗反射膜;
所述摄像头的所述感光传感器感测被拍摄目标反射并且通过所述镜头以及所述微透镜阵列的光线,基于所述光线生成原始图像数据,所述原始图像数据包括光强度信息、光位置信息以及光方向信息;
所述处理器获取所述原始图像数据的重聚焦位置信息,并基于所述原始图像数据以及所述重聚焦位置信息生成重聚焦图像数据;
所述显示器基于所述重聚焦图像数据显示重聚焦后的目标图像;
其中,所述处理器基于所述原始图像数据以及所述重聚焦位置信息生成重聚焦图像数据,包括:
所述处理器基于所述原始图像数据,在位置维度将对焦平面从采集所述原始图像的位置平移至所述重聚焦位置;
所述处理器对所述对焦平面在位置维度平移后的所述原始图像数据在方向维度进行积分后,生成所述重聚焦图像数据;
其中,所述显示器显示所述原始图像用于作为用户选取重聚焦位置的参考;用户基于所述原始图像选取所述重聚焦位置;
所述处理器基于所述重聚焦位置以及相应于所述原始图像数据的位置生成所述重聚焦位置信息。
6.一种终端设备,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至2中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810357798.3A CN108600623B (zh) | 2018-04-20 | 2018-04-20 | 重聚焦显示方法以及终端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810357798.3A CN108600623B (zh) | 2018-04-20 | 2018-04-20 | 重聚焦显示方法以及终端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108600623A CN108600623A (zh) | 2018-09-28 |
CN108600623B true CN108600623B (zh) | 2020-07-28 |
Family
ID=63613456
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810357798.3A Active CN108600623B (zh) | 2018-04-20 | 2018-04-20 | 重聚焦显示方法以及终端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108600623B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111093031B (zh) * | 2019-12-31 | 2021-06-15 | 维沃移动通信有限公司 | 图像生成方法及电子设备 |
CN115118853A (zh) * | 2022-06-24 | 2022-09-27 | 维沃移动通信有限公司 | 摄像模组、摄像装置、拍摄方法和装置、电子设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102957863A (zh) * | 2011-08-19 | 2013-03-06 | 佳能株式会社 | 摄像设备、图像处理设备和图像处理方法 |
CN103516983A (zh) * | 2012-06-28 | 2014-01-15 | 卡西欧计算机株式会社 | 图像处理装置、摄像装置以及图像处理方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8559705B2 (en) * | 2006-12-01 | 2013-10-15 | Lytro, Inc. | Interactive refocusing of electronic images |
JP5618943B2 (ja) * | 2011-08-19 | 2014-11-05 | キヤノン株式会社 | 画像処理方法、撮像装置、画像処理装置、および、画像処理プログラム |
US9179126B2 (en) * | 2012-06-01 | 2015-11-03 | Ostendo Technologies, Inc. | Spatio-temporal light field cameras |
CN203101791U (zh) * | 2012-12-26 | 2013-07-31 | 山东省科学院海洋仪器仪表研究所 | 红外变焦光场相机 |
JP6214236B2 (ja) * | 2013-03-05 | 2017-10-18 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
CN104281397B (zh) * | 2013-07-10 | 2018-08-14 | 华为技术有限公司 | 多深度区间的重聚焦方法、装置及电子设备 |
JP6529267B2 (ja) * | 2015-01-23 | 2019-06-12 | キヤノン株式会社 | 情報処理装置及びその制御方法、プログラム、並びに記憶媒体 |
-
2018
- 2018-04-20 CN CN201810357798.3A patent/CN108600623B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102957863A (zh) * | 2011-08-19 | 2013-03-06 | 佳能株式会社 | 摄像设备、图像处理设备和图像处理方法 |
CN103516983A (zh) * | 2012-06-28 | 2014-01-15 | 卡西欧计算机株式会社 | 图像处理装置、摄像装置以及图像处理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN108600623A (zh) | 2018-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108513070B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN109639970B (zh) | 一种拍摄方法及终端设备 | |
CN110740259B (zh) | 视频处理方法及电子设备 | |
CN108989678B (zh) | 一种图像处理方法、移动终端 | |
CN108495029B (zh) | 一种拍照方法及移动终端 | |
CN109688322B (zh) | 一种生成高动态范围图像的方法、装置及移动终端 | |
CN108989672B (zh) | 一种拍摄方法及移动终端 | |
CN107730460B (zh) | 一种图像处理方法及移动终端 | |
CN107948505B (zh) | 一种全景拍摄方法及移动终端 | |
CN108271012A (zh) | 一种深度信息的获取方法、装置以及移动终端 | |
CN110266957B (zh) | 影像拍摄方法及移动终端 | |
CN107749046B (zh) | 一种图像处理方法及移动终端 | |
CN110881105B (zh) | 一种拍摄方法及电子设备 | |
CN111182211B (zh) | 拍摄方法、图像处理方法及电子设备 | |
CN110913139A (zh) | 拍照方法及电子设备 | |
CN111601032A (zh) | 一种拍摄方法、装置及电子设备 | |
CN111246102A (zh) | 拍摄方法、装置、电子设备及存储介质 | |
CN111405181B (zh) | 调焦的方法及电子设备 | |
CN108600623B (zh) | 重聚焦显示方法以及终端设备 | |
CN109104573B (zh) | 一种确定对焦点的方法及终端设备 | |
CN107798662B (zh) | 一种图像处理方法及移动终端 | |
CN108234978B (zh) | 一种图像处理方法及移动终端 | |
CN111182206B (zh) | 图像处理方法和装置 | |
CN110913133B (zh) | 拍摄方法及电子设备 | |
CN108550182B (zh) | 一种三维建模方法和终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |