CN112866576B - 图像预览方法、存储介质及显示设备 - Google Patents

Abstract

本申请实施例公开了一种图像预览方法、存储介质及显示设备，其中，本申请实施例在所述显示设备的显示界面预览第一摄像头获取的第一光学变焦图像；响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像；在所述第二光学变焦图像传输至所述显示界面之前，基于所述第一光学变焦图像生成数码变焦图像，并在所述显示界面预览所述数码变焦图像，通过本申请的方案，在光学变焦的图像帧之间插入数码变焦图像进行预览以进行画面过渡，可以避免出现画面卡顿，提高显示界面的变焦流畅度。

Description

图像预览方法、存储介质及显示设备

技术领域

本申请涉及显示设备技术领域，具体涉及一种图像预览方法、存储介质及 显示设备。

背景技术

随着智能终端技术的不断发展，显示设备(如智能手机、平板电脑等)的使 用越来越普及。绝大多数显示设备都内置有摄像头，并且随着移动终端处理能 力的增强以及摄像头技术的发展，用户对拍摄的图像质量的要求也越来越高。 例如，现在越来越多的显示设备都设置有多个摄像头，不同的摄像头具有不同 的视角，取景范围也不相同，用户可以根据需要进行变焦操作，显示设备根据 变焦操作的焦段范围控制同一摄像头或者多个摄像头进行变焦拍摄，在控制同 一摄像头进行变焦拍摄的过程中，驱动变焦马达调整焦距等处理过程会占用一 定的时间，导致显示界面的流畅度低。

发明内容

本申请实施例提供一种图像预览方法、存储介质及显示设备，能够提高变 焦操作中显示界面的预览流畅度。

第一方面，本申请实施例提供一种图像预览方法，包括：

在所述显示设备的显示界面预览第一摄像头获取的第一光学变焦图像；

响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像；

在所述第二光学变焦图像传输至所述显示界面之前，基于所述第一光学变 焦图像生成数码变焦图像，并在所述显示界面预览所述数码变焦图像。

第二方面，本申请实施例还提供一种计算机可读存储介质，其上存储有计 算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如本申 请任一实施例提供的图像预览方法。

第三方面，本申请实施例还提供一种显示设备，包括处理器和存储器，所 述存储器存储有计算机程序，所述处理器通过调用所述计算机程序，用于执行 如本申请任一实施例提供的图像预览方法。

本申请实施例提供的技术方案，在进行变焦拍摄时，在显示设备的显示界 面预览第一摄像头获取的第一光学变焦图像，响应于接收到的光学变焦指令， 通过该第一摄像头获取第二光学变焦图像，在该第二光学变焦图像传输到显示 界面之前，可以基于第一光学变焦图像生成数码变焦图像，在显示界面进行预 览，通过这种方式，在光学变焦的图像帧之间插入数码变焦图像进行预览以进 行画面过渡，可以避免出现画面卡顿，提高显示界面的预览流畅度。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所 需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请 的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还 可以根据这些附图获得其他的附图。

图1为本申请实施例提供的图像预览方法的第一种流程示意图。

图2为本申请实施例提供的显示设备的第一种结构示意图。

图3为本申请实施例提供的图像预览方法中不同焦段的示意图。

图4为本申请实施例提供的图像预览方法的应用场景示意图。

图5为本申请实施例提供的图像预览方法的变焦效果示意图。

图6为本申请实施例提供的图像预览方法中第一图像的流向示意图。

图7为本申请实施例提供的图像预览装置的结构示意图。

图8为本申请实施例提供的显示设备的第二种结构示意图。

图9为本申请实施例提供的显示设备的第三种结构示意图。

图10为本申请实施例提供的显示设备的第四种结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清 楚、完整地描述。显然，所描述的实施例仅仅是本申请一部分实施例，而不是 全部的实施例。基于本申请中的实施例，本领域技术人员在没有付出创造性劳 动前提下所获得的所有其他实施例，都属于本申请的保护范围。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性 可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并 不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施 例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其 它实施例相结合。

本申请实施例提供一种图像预览方法，该图像预览方法的执行主体可以是 本申请实施例提供的图像预览装置，或者集成了该图像预览装置的显示设备， 其中该图像预览装置可以采用硬件或者软件的方式实现。其中，显示设备可为 计算设备诸如膝上型计算机、包含嵌入式计算机的计算机监视器、平板电脑、 蜂窝电话、媒体播放器、或其他手持式或便携式电子装置、较小的设备(诸如 腕表设备、挂式设备、被嵌入在眼镜中的设备或者佩戴在用户的头部上的其他 设备，或其他可佩戴式或微型设备)、电视机、不包含嵌入式计算机的计算机 显示器、游戏设备、导航设备、嵌入式系统(诸如其中具有显示器的电子装置被安装在信息亭或汽车中的系统)等设置有摄像头和显示屏的设备。

请参阅图1，图1为本申请实施例提供的图像预览方法的第一种流程示意图。 本申请实施例提供的图像预览方法的具体流程可以如下：

101、在所述显示设备的显示界面预览第一摄像头获取的第一光学变焦图 像。

102、响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像。

本申请实施例的图像预览方法可以应用于显示设备，该显示设备包括第一 摄像头和应用处理芯片。请参阅图2，图2为本申请实施例提供的显示设备的第 一种结构示意图。第一摄像头模组响应于应用处理芯片的拍摄指令执行拍摄操 作，并将拍摄操作得到的图像输出到应用处理芯片，应用处理芯片可以将显示。

本申请实施例的方案可以应用于有一个或者多个摄像头的显示设备。可以 应用于拍照或者录像的场景。当显示设备只有一个摄像头时，该摄像头可以在 一定的焦段内进行变焦拍摄。当显示设备有多个摄像头时，这多个摄像头可以 分别用于多个不同的焦段内的拍摄。请参阅图3，图3为本申请实施例提供的图 像预览方法中不同焦段的示意图。假设显示设备包括三个像头，分别为广角摄 像头、主摄像头和长焦摄像头，其中，主摄像头为标准摄像头。三个摄像头的 焦段逐渐增大并且相邻焦段有部分重合。此外，摄像头的焦距越大，则摄像头 能够拍摄的画幅越小。

本申请实施例可以应用于对同一摄像头进行变焦时的控制。以标准摄像头 的图像预览为例，用户启动摄像头进入拍摄界面后，会在显示界面上实时显示 拍摄到的画面，用户对当前的拍摄界面可以触发变焦操作，比如通过拍摄界面 上的控件或者显示设备上的物理按键或者通过触控操作等触发变焦操作。示例 性地，请参阅图4，图4为本申请实施例提供的图像预览方法的应用场景示意图， 用户可以通过拍摄界面的控件进行滑动操作，触发光学变焦指令，图示中的 0.5X、1X、2X表示变焦倍数。

显示设备根据光学变焦指令确定出变焦参数，例如，变焦参数可以为变焦 距离，确定出变焦距离后，显示设备驱动变焦马达控制摄像头按照该变焦距离 进行变焦。摄像头变焦后输出的图像相对于变焦前输出的图像的画幅不同，如 果变焦操作为增大焦距，则变焦后输出的图像相对于变焦前输出的图像的画幅 减小，拍摄场景拉近，相当于放大了拍摄的物体。在用户触发变焦操作的过程 中，显示设备也需要将焦距变化拍摄得到的多帧图像实时地显示显示界面中， 以将焦距变化的结果呈现给用户。其中，显示设备需要按照一定的预览帧率来 显示预览画面，以使保证预览画面的流畅性。例如，在一些实施例中，预览帧率为30fps，又例如，在另一些实施例中，预览帧率为60fps。

但是，在实际拍摄时，执行变焦拍摄的过程中，变焦马达的运动需要占用 一定的时间，并且，一般情况下，摄像头直接输出的图像格式为RAW图像， 其中，RAW图像是图像感应器将捕捉到的光源信号转化为数字信号的原始数 据，是未经处理、也未经压缩的格式。RAW图像一般还需要进行一些预处理， 比如，优化图像的色彩、色调、对比度、噪点等，并将其转换为YUV格式的 图像，这也需要占用一定的时间。上述操作需要占用一定的时间，若下一帧光 学变焦图像未及时传输至显示界面进行显示，在显示界面就无法及时对用户的 变焦操作进行对应的呈现，导致变焦预览的流畅度低，在用户看来，就是显示 界面发生了卡顿。

例如，假设显示设备的一摄像头的帧率为30fps，预览帧率也为30fps，如 果该摄像头进行变焦拍摄，由于硬件条件的限制，实际输出的相邻两帧图像之 间的时间间隔并不稳定，实际出图的帧率很可能小于30fps，就会导致上文所 说的显示界面的卡顿。

为了解决上述问题，本申请实施例在光学变焦图像之间进行数码变焦，以 提升变焦预览的流畅度。接下来对具体的实现方式进行详细说明。其中，如果 变焦参数超出当前正在拍摄的摄像头支持的变焦范围，则可能会进行摄像头的 切换。下文中为了区分切换前后的两个不同的摄像头，将当前正在工作的摄像 头记为第一摄像头，将要切换的摄像头记为第二摄像头。这里的“第一”、“第 二”并不对本申请的方案造成限制。并且，可以理解的是，当完成摄像头的切 换之后，切换后的摄像头又成为新的“第一摄像头”。

用户通过变焦操作触发光学变焦指令，显示设备响应于该光学变焦指令， 通过第一摄像头获取光学变焦图像，并通过显示设备的现实界面进行预览该光 学变焦图像。请参阅图4，如果用户通过显示界面上的控件进行滑动操作，持 续进行变焦，则可以触发连续的光学变焦指令，对于摄像头来说，每接收到一 个光学变焦指令，则进行一次光学变焦，并输出一帧光学变焦图像。

本申请实施例的方案，将当前显示的光学变焦图像记为第一光学变焦图像， 当第一摄像头输出的第一光学变焦图像传输至显示设备的显示界面时，通过该 显示界面预览该第一光学变焦图像，如果此时变焦操作仍在持续，则显示设备 相应于光学变焦指令，继续通过第一摄像头获取新的光学变焦图像，为了区分 该帧新的光学变焦图像与新的一帧光学变焦图像，将该新的光学变焦图像记为 第二光学变焦图像。

103、在所述第二光学变焦图像传输至所述显示界面之前，基于所述第一 光学变焦图像生成数码变焦图像，并在所述显示界面预览所述数码变焦图像。·

在第一光学变焦图像传输至显示界面后，在显示界面预览第一光学变焦图 像，摄像头继续变焦拍摄，输出第二光学变焦图像。在第二光学变焦图像传输 至显示界面之前的这段时间内，为了提高预览画面的流畅度，进一步提高预览 帧率，可以对第一光学变焦图像进行数码变焦处理，生成数码变焦图像，并且 在该显示界面预览将数码变焦图像。

其中，在两帧光学变焦图像之间可以进行一次或者两次以上的数码变焦处 理，比如，在预览第一光学变焦图像之后，第二光学变焦图像还未传输至显示 界面，则对第一光学变焦图像进行数码变焦处理，得到一帧数码变焦图像，将 其在显示界面预览，如果该数码变焦图像预览之后，第二光学变焦图像仍未传 输至显示界面，则可以对上述第一光学变焦图像进一步进行数码变焦。

例如，如果光学变焦指令指示增大焦距，则取景范围缩小，可以通过对第 一光学变焦图像进行裁剪和放大处理，得到取景范围稍小于第一光学变焦图像 的数码变焦图像，可以理解的是，为了保证画面的流畅度，在第一光学变焦图 像与第二光学变焦图像之间的数码变焦图像，其等效焦距大于第一光学变焦图 像的焦距，但是小于第二光学变焦图像的焦距。如果该数码变焦图像预览之后， 第二光学变焦图像仍未传输至显示界面，则可以对上述第一光学变焦图像进一 步进行数码变焦，进一步缩小其取景范围。

又例如，如果光学变焦指令指示减小焦距，则取景范围增大，在对第一光 学变焦图像进行裁剪处理，得到取景范围稍大于第一光学变焦图像的数码变焦 图像。其中，显示设备在预览图像时，并不会把拍摄到的原始图像的全部画幅 都显示出来，一般会进行裁剪，因此，当数码变焦图像的等效焦距小于第一光 学变焦图像的焦距时，可以通过缩小裁剪的面积来增大取景范围，得到数码变 焦图像。

在一些实施例中，该方法还包括：当所述第二光学变焦图像传输至所述显 示设备的显示界面时，若当前预览图像未完成预览，则使用所述第二光学变焦 图像替换当前预览图像，并通过所述显示界面预览所述第二光学变焦图像。

该实施例中，当第二光学变焦图像传输至显示设备的显示界面时，如果当 前显示界面有正在预览的图像且该图像未完成预览，则可以使用接收到的第二 光学变焦图像替换正在显示的预览图像。

在一些实施例中，该方法还包括：当所述第二光学变焦图像传输至所述显 示设备的显示界面时，若当前预览图像完成预览，则通过所述显示界面预览所 述第二光学变焦图像。

该实施例中，当第二光学变焦图像传输至显示设备的显示界面时，如果恰 好完成上一帧图像的预览，则直接通过所述显示界面预览所述第二光学变焦图 像。

上述实施例提供的图像预览方法，在进行变焦拍摄时，在显示设备的显示 界面预览第一摄像头获取的第一光学变焦图像，响应于接收到的光学变焦指令， 通过该第一摄像头获取第二光学变焦图像，在该第二光学变焦图像传输到显示 界面之前，可以基于第一光学变焦图像生成数码变焦图像，在显示界面进行预 览，通过这种方式，在光学变焦的图像帧之间插入数码变焦图像进行预览以进 行画面过渡，可以避免出现画面卡顿，提高显示界面的变焦流畅度。

在一些实施例中，基于所述第一光学变焦图像生成数码变焦图像的步骤之 前，还包括：在所述第二光学变焦图像传输至所述显示设备的显示界面之前， 确定当前预览图像的显示时长；若所述显示时长大于预设时长，则执行基于所 述第一光学变焦图像生成数码变焦图像的步骤。

该实施例中，在动态变焦操作过程中，如果当前预览图像已完成预览，但 是应用处理芯片还没有接收到前端传输的新的图像，则继续显示当前预览图像， 如果持续显示时间过长，用户会明显感受到界面卡顿。但是如果第二光学变焦 图像能够及时传输到应用处理芯片在显示界面进行显示的情况下，可以不进行 数码变焦处理。

其中，可以通过当前预览图像的显示时长来判断第二光学变焦图像的传输是否发生延迟。

假设预览帧率为30fps，则意味着一帧图像的显示时长不能超过1/30秒。 因此，可以根据预览帧率来设置预设时长，比如，可以设置预设时长为稍小于 1/30秒的一个值，当检测到预览图像在显示界面上显示的时长大于该预设时长， 则判定第一摄像头发生图像输出延迟，也就是说，第二光学变焦图像未能及时 传输至显示界面进行显示，此时可以对第一光学变焦图像进行数码变焦处理， 一般数码变焦处理所占用的时长非常短，可以及时地得到数码变焦图像，将其 显示在显示界面上，保证变焦预览的流畅度。基于此，当变焦过程帧率无法达 到预览帧率的时候，可以采用数码变焦，有效保证了预览的流畅度，从而弥补 了光学变焦的延迟。

请参阅图5，图5为本申请实施例提供的图像预览方法的变焦效果示意图。 虚线上方的图像为光学变焦图像，虚线下方的图像为数码变焦图像，这些图像 共同构成了连续的预览图像，这些预览图像的数量可以满足预览帧率。

其中，假设第N-1帧光学变焦图像输出并显示后，第N帧图像的输出发生 了延迟，显示设备可以将对第N-1帧图像进行数码变焦处理，得到数码变焦图 像(N-1)1并显示显示界面，可以理解的是，当该数码变焦图像显示后，第一摄 像头仍然未及时输出新的光学变焦图像，可以在当前显示的数码变焦图像的基 础上，继续进行数码变焦处理，得到新的数码变焦图像(N-1)2，并对该图像进 行预览。如果在对第N-1帧经过两次数码变焦后。新的第N帧光学变焦图像传 输至显示界面，则显示新的光学变焦图像。假设在第N帧光学变焦图像输出并 显示后，第N+1帧光学变焦图像的输出发生了延迟，显示设备可以将对当前的 第N帧光学变焦图像进行数码变焦处理，得到数码变焦图像(N)2，并对该图像 进行预览。当然，如果第一摄像头能够及时输出光学变焦图像，如第N+1帧光 学变焦图像输出并显示后，第N+2帧图像的输出没有延迟，则可以直接显示第 N+2帧图像。

由于数码变焦是对图像进行裁剪和放大，其图像清晰度会比光学变焦图像 较差，如果第二光学变焦图像在当前预览图像的显示时长未达到预设时长时传 输至显示界面，则可以在显示界面上预览第二光学变焦图像，无需再进行数码 变焦，在保证图像流畅度的同时，还保证画面的清晰度。

此外，可以理解的是，当用户变焦操作的焦距超出当前摄像头的焦段后， 则会进行第一摄像头的切换，切换后的第一摄像头仍然按照本申请实施例的方 案进行图像预览。

在一些实施例中，通过所述显示界面预览所述第二光学变焦图像的步骤， 包括：通过第一图像信号处理器和第二图像信号处理器中负载较小的图像信号 处理器对所述第二光学变焦图像进行预处理，通过所述显示界面预览经过预处 理的第二光学变焦图像。

如前文所说的，第一摄像头直接输出的图像格式为RAW图像，RAW图像 还需要进行一些预处理，比如，优化图像的色彩、色调、对比度、噪点等，并 将其转换为YUV格式的图像，这个过程一般由图像信号处理器(ISP，Image Signal Processing)来执行，其中，ISP一般连接在第一摄像头与应用处理芯片 之间，ISP接收第一摄像头发送的RAW图像，对其进行预处理后得到YUV格式 的图像，并将其传输到应用处理芯片。

但是ISP进行图像处理时，若负载较大，可能会导致预处理时间过长，进 而图像不能及时地传输到应用处理芯片，影响到变焦预览的流畅度。

因此，为了进一步变焦预览的流畅度，该实施例在ISP之前或者之后再增 加一个图像信号处理器，采用两个将图像信号处理器并行的方式对第二光学变 焦图像进行预处理。

例如，在一实施例中，在ISP之前增加一个PreISP(PreImage Signal Processing，前图像信号处理器)等，将其记为第一图像信号处理器，PreISP 连接在第一摄像头与ISP之间，为了便于区分两个不同的图像信号处理器，可 以将ISP记为第二图像信号处理器。

请参阅图6，图6为本申请实施例提供的图像预览方法中第二光学变焦图像 的流向示意图。在硬件实现方面，第一摄像头进行拍摄并输出第二光学变焦图 像，先将第二光学变焦图像传输到PreISP中，PreISP获取当前负载，以判断是 否能够及时处理该第二光学变焦图像，如果PreIsp当前负载不小于预设阈值， 例如，当前有一帧图像正在处理，或者，当前有一帧图像正在处理并有一帧图 像正在等待处理，则判定负载较大。如果PreISP负载较大，则不对该第二光学 变焦图像进行任何处理，将其传输到ISP，由ISP对其进行预处理。如果PreIsp 当前负载小于预设阈值，则由PreIsp处理该第二光学变焦图像。通过这种方式， 可以将第一摄像头输出的图像序列帧均衡分配到PreISP和ISP进行处理，将原 本ISP的工作优化为由PreISP和ISP并行处理，提升了第二光学变焦图像预处理 的效率，使得第一摄像头输出的图像能够更快地到达应用处理芯片进行显示。

可选的，在一些实施例中，第一摄像头为第二光学变焦图像添加时间戳后 传输至PreISP，经过PreISP或ISP预处理后的第二光学变焦图像仍然携带有该时 间戳。如果两帧不同的第二光学变焦图像同时传输应用处理芯片，应用处理芯 片可以根据时间戳来判定PreISP和ISP的先后显示顺序，根据先后顺序控制图 像的显示或者视频的录制等。

此外，为了进一步缩短预处理占用的时间，在选择预处理算法时，可以选 择计算量最小的一些算法，以镜头阴影校正(Lens Shading Correction，LSC) 为例，LSC处理有多种实现方式，本方案可以采用如mesh shading correction(网 格阴影校正)的方式来实现阴影校正，或者在一些实施例中，可以去掉一些预 处理操作中的步骤，例如，去掉镜头阴影校正的步骤，只进行坏点校准、颜色 插值、噪声去除、白平衡矫正、色彩矫正等常规处理。

在另一些实施例中，通过所述显示界面预览所述数码变焦图像的步骤，包 括：对所述数码变焦图像进行超分辨率重建处理；通过所述显示界面预览经过 超分辨率重建处理后的数码变焦图像。

由于数码变焦得到的数码变焦图像的清晰度会小于第一光学变焦图像的 清晰度，为了避免这种画面的不一致，在得到数码变焦图像之后，对数码变焦 图像进行超分辨率重建处理，以提升其清晰度，常用的超分辨率算法包括基于 插值的超分辨率算法、基于重构的超分辨率算法和基于学习的超分辨率算法等， 在此不再一一介绍具体算法，本申请可以采用其中计算量最小的一种来进行超 分辨率重建。

在另一些实施例中，所述对所述数码变焦图像进行超分辨率重建处理的步 骤，包括：通过前置摄像头确定所述数码变焦图像上的用户注视区域；对所述 用户注视区域进行超分辨率重建处理。

人眼的视力一般是指中心视力，也就是说，只有眼球注视的那一小块地方 能看得清楚，越靠近图像边缘清晰度越差，该实施例的方案利用这一原理，在 使用后置的第一摄像头拍摄的同时，启动前置摄像头，利用眼球追踪技术确定 用户在显示屏上的注视区域，并基于在显示屏上的注视区域确定在数码变焦图 像上的用户注视区域，当预览过程中，只对该用户注视区域进行超分辨率重建 处理，只对该用户注视区域进行超分辨率重建处理和对数码变焦图像的全部区 域都进行超分辨率重建处理对用户来说区别不大，但是可以减小一部分计算量， 在保证预览画面清晰的同时，提高了变焦预览的流畅度。

在一些实施例中，响应于光学变焦指令，通过所述第一摄像头获取第二光 学变焦图像的步骤之前，还包括：接收光学变焦指令，并根据所述光学变焦指 令确定变焦参数；当所述变焦参数未超出所述第一摄像头支持的变焦范围时， 执行响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像；当所 述变焦参数超出所述第一摄像头支持的变焦范围时，通过所述第一摄像头获取 第二光学变焦图像，并启动所述变焦参数对应的第二摄像头，通过所述第二摄 像头获取第三光学变焦图像；在所述第二摄像头启动之后、所述第一摄像头关 闭之前，对所述第二光学变焦图像和所述第三光学变焦图像进行融合处理，生 成融合变焦图像，在所述显示界面预览所述融合变焦图像。

在摄像头切换的时候，由于带宽的限制，往往两个摄像头切换时候的显示 帧率低于单摄像头的帧率，同样也可能存在预览卡顿的问题。也就是说，在第 二摄像头开启后，第一摄像头关闭之前的这段时间内，可能会出现预览卡顿。 为了解决这一问题，在一实施例中，应用处理芯片接收光学变焦指令后，可以 根据光学变焦指令确定变焦参数，变焦参数未超出所述第一摄像头支持的变焦 范围时，执行102。反之，变焦参数超出所述第一摄像头支持的变焦范围时， 在通过第一摄像头获取第二光学变焦图像的同时，启动变焦参数对应的第二摄 像头，通过第二摄像头获取第三光学变焦图像，对第二光学变焦图像和第三光学变焦图像进行融合处理，生成融合变焦图像进行预览显示，来降低摄像头切 换时带来的画面突变感。

此外，该实施例中，在摄像头切换时，可以按照如下方式进行切换：由第 一摄像头切换至第二摄像头时，将整个切换的过程分为两步，第一摄像头的帧 率为A，第二摄像头启动后，初始帧率为B1，该帧率低于使用单摄像头拍摄时 的帧率，此时，第一摄像头还未关闭，第一摄像头和第二摄像头都会进行图像 输出，使用两个摄像头输出的图像的融合图像进行预览。接着，将第一摄像头 的帧率降低为B2，第二摄像头的帧率提升为A，仍然使用两个摄像头输出的图 像的融合图像进行预览，直至第一摄像头完全关闭，只有第二摄像头在工作。 其中A大于B1，且A大于B2。

其中，在另一些实施例中，还可以在生成融合变焦图像的基础上，对融合 变焦图像进行数码变焦处理，在相邻的融合变焦图像之间插入数码变焦图像， 以在降低摄像头切换时带来的画面突变感的同时，提高预览画面的流畅度。

在另一实施例中，可以在第二摄像头启动后，采用与上文中的101至103 同样的方式，在光学变焦图像中插入数码变焦图像，来解决卡顿问题。在第二 摄像头启动之后，第一摄像头关闭之前的这段时间，即使第一摄像头有图像输 出，也只使用第二摄像头输出的图像进行预览。

在一实施例中还提供一种图像预览装置。请参阅图7，图7为本申请实施例 提供的图像预览装置300的结构示意图。其中该图像预览装置300应用于显示设 备，该图像预览装置300包括图像预览模块301、光学变焦模块302以及数码变 焦模块303，其中：

图像预览模块301，用于在所述显示设备的显示界面预览第一摄像头获取 的第一光学变焦图像；

光学变焦模块302，用于响应于光学变焦指令，通过所述第一摄像头获取 第二光学变焦图像；

数码变焦模块303，用于在所述第二光学变焦图像传输至所述显示界面之 前，基于所述第一光学变焦图像生成数码变焦图像；

图像预览模块301，还用于在所述显示界面预览所述数码变焦图像。

由上可知，本申请实施例提出的图像预览装置，在进行变焦拍摄时，在显 示设备的显示界面预览第一摄像头获取的第一光学变焦图像，响应于接收到的 光学变焦指令，通过该第一摄像头获取第二光学变焦图像，在该第二光学变焦 图像传输到显示界面之前，可以基于第一光学变焦图像生成数码变焦图像，在 显示界面进行预览，通过这种方式，在光学变焦的图像帧之间插入数码变焦图 像进行预览以进行画面过渡，可以避免出现画面卡顿，提高显示界面的变焦流 畅度。

本申请实施例还提供一种显示设备。请参阅图8，图8为本申请实施例提 供的显示设备的第二种结构示意图。显示设备还包括第一图像信号处理器403 和第二图像信号处理器404，第一图像信号处理器403与第一摄像头402连接， 例如，通过MIPI(Mobile IndustryProcessor Interface，移动产业处理器接口)接 口电连接，第二图像信号处理器404与第一图像信号处理器403连接，第一图 像信号处理器403和第二图像信号处理器404均连接至应用处理芯片401。

请参阅图9，图9为本申请实施例提供的显示设备的第三种结构示意图。 应用处理芯片401包括处理器4011和存储器4012。其中，处理器4011与存 储器4012电性连接。

处理器4011是应用处理芯片401的控制中心，利用各种接口和线路连接 整个显示设备的各个部分，通过运行或调用存储在存储器4012内的计算机程 序，以及调用存储在存储器4012内的数据，执行显示设备的各种功能和处理 数据，从而对显示设备进行整体监控。

存储器4012可用于存储计算机程序和数据。存储器4012存储的计算机程 序中包含有可在处理器中执行的指令。计算机程序可以组成各种功能模块。处 理器4011通过调用存储在存储器4012的计算机程序，从而执行各种功能应用 以及数据处理。

在本实施例中，显示设备400中的处理器4011会按照如下的步骤，将一 个或一个以上的计算机程序的进程对应的指令加载到存储器4012中，并由处 理器4011来运行存储在存储器4012中的计算机程序，从而实现各种功能：

在一些实施例中，请参阅图10，图10为本申请实施例提供的显示设备的 第四种结构示意图。显示设备400还包括：射频电路405、显示屏406、控制 电路407、输入单元408、音频电路409、传感器410以及电源411。其中，处 理器401分别与射频电路405、显示屏406、控制电路407、输入单元408、音 频电路409、传感器410以及电源411电性连接。

射频电路405用于收发射频信号，以通过无线通信与网络设备或其他显示 设备进行通信。

显示屏406可用于显示由用户输入的信息或提供给用户的信息以及显示 设备的各种图形用户接口，这些图形用户接口可以由图像、文本、图标、视频 和其任意组合来构成。

控制电路407与显示屏406电性连接，用于控制显示屏406显示信息。

输入单元408可用于接收输入的数字、字符信息或用户特征信息(例如指 纹)，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或 者轨迹球信号输入。其中，输入单元408可以包括指纹识别模组。

音频电路409可通过扬声器、传声器提供用户与显示设备之间的音频接口。 其中，音频电路409包括麦克风。所述麦克风与所述处理器401电性连接。所 述麦克风用于接收用户输入的语音信息。

传感器410用于采集外部环境信息。传感器410可以包括环境亮度传感器、 加速度传感器、陀螺仪等传感器中的一种或多种。

电源411用于给显示设备400的各个部件供电。在一些实施例中，电源 411可以通过电源管理系统与处理器4011逻辑相连，从而通过电源管理系统 实现管理充电、放电、以及功耗管理等功能。

虽然图中未示出，显示设备400还可以包括摄像头、蓝牙模块等，在此不 再赘述。

在本实施例中，显示设备400中的处理器4011会按照如下的步骤，将一 个或一个以上的计算机程序的进程对应的指令加载到存储器4012中，并由处 理器4011来运行存储在存储器4012中的计算机程序，从而实现各种功能：

在所述显示设备的显示界面预览第一摄像头获取的第一光学变焦图像；

响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像；

在所述第二光学变焦图像传输至所述显示界面之前，基于所述第一光学变 焦图像生成数码变焦图像，并在所述显示界面预览所述数码变焦图像。

由上可知，本申请实施例提供了一种显示设备，所述显示设备在进行变焦 拍摄时，在显示设备的显示界面预览第一摄像头获取的第一光学变焦图像，响 应于接收到的光学变焦指令，通过该第一摄像头获取第二光学变焦图像，在该 第二光学变焦图像传输到显示界面之前，可以基于第一光学变焦图像生成数码 变焦图像，在显示界面进行预览，通过这种方式，在光学变焦的图像帧之间插 入数码变焦图像进行预览以进行画面过渡，可以避免出现画面卡顿，提高显示 界面的预览流畅度。

本申请还提供一种显示设备，该显示设备包括处理器和存储器，所述存储 器存储有计算机程序，所述处理器通过调用所述计算机程序，用于执行如本申 请任一实施例提供的图像预览方法。具体实施过程请参照上述实施例，在此不 再赘述。

本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质 中存储有计算机程序，当所述计算机程序在计算机上运行时，所述计算机执行 上述任一实施例所述的图像预览方法。

需要说明的是，本领域普通技术人员可以理解上述实施例的各种方法中的 全部或部分步骤是可以通过计算机程序来指令相关的硬件来完成，所述计算机 程序可以存储于计算机可读存储介质中，所述计算机可读存储介质可以包括但 不限于：只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM， Random Access Memory)、磁盘或光盘等。

此外，本申请中的术语“第一”、“第二”和“第三”等是用于区别不同对象， 而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意 图在于覆盖不排他的包含。例如包含了一系列步骤或模块的过程、方法、系统、 产品或设备没有限定于已列出的步骤或模块，而是某些实施例还包括没有列出 的步骤或模块，或某些实施例还包括对于这些过程、方法、产品或设备固有的 其它步骤或模块。

以上对本申请实施例所提供的图像预览方法、存储介质及显示设备进行了 详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以 上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本 领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改 变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (9)

1.一种图像预览方法，应用于显示设备，其特征在于，包括：

在所述显示设备的显示界面预览第一摄像头获取的第一光学变焦图像；

接收光学变焦指令，并根据所述光学变焦指令确定变焦参数；

当所述变焦参数未超出所述第一摄像头支持的变焦范围时，响应于光学变焦指令，通过所述第一摄像头获取第二光学变焦图像；

在所述第二光学变焦图像传输至所述显示界面之前，基于所述第一光学变焦图像生成数码变焦图像，并在所述显示界面预览所述数码变焦图像；

当所述变焦参数超出所述第一摄像头支持的变焦范围时，通过所述第一摄像头获取第二光学变焦图像，并启动所述变焦参数对应的第二摄像头，通过所述第二摄像头获取第三光学变焦图像；

在所述第二摄像头启动之后、所述第一摄像头关闭之前，对所述第二光学变焦图像和所述第三光学变焦图像进行融合处理，生成融合变焦图像，在所述显示界面预览所述融合变焦图像。

2.如权利要求1所述的图像预览方法，其特征在于，还包括：

当所述第二光学变焦图像传输至所述显示设备的显示界面时，若当前预览图像未完成预览，则使用所述第二光学变焦图像替换当前预览图像，并通过所述显示界面预览所述第二光学变焦图像。

3.如权利要求1所述的图像预览方法，其特征在于，还包括：

当所述第二光学变焦图像传输至所述显示设备的显示界面时，若当前预览图像完成预览，则通过所述显示界面预览所述第二光学变焦图像。

4.如权利要求1所述的图像预览方法，其特征在于，基于所述第一光学变焦图像生成数码变焦图像的步骤之前，还包括：

在所述第二光学变焦图像传输至所述显示设备的显示界面之前，确定当前预览图像的显示时长；

若所述显示时长大于预设时长，则执行基于所述第一光学变焦图像生成数码变焦图像的步骤。

5.如权利要求3所述的图像预览方法，其特征在于，通过所述显示界面预览所述第二光学变焦图像的步骤，包括：

通过第一图像信号处理器和第二图像信号处理器中负载较小的图像信号处理器对所述第二光学变焦图像进行预处理，通过所述显示界面预览经过预处理的第二光学变焦图像。

6.如权利要求1所述的图像预览方法，其特征在于，通过所述显示界面预览所述数码变焦图像的步骤，包括：

对所述数码变焦图像进行超分辨率重建处理；

通过所述显示界面预览经过超分辨率重建处理后的数码变焦图像。

7.如权利要求6所述的图像预览方法，其特征在于，所述对所述数码变焦图像进行超分辨率重建处理的步骤，包括：

通过前置摄像头确定所述数码变焦图像上的用户注视区域；

对所述用户注视区域进行超分辨率重建处理。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，当所述计算机程序在计算机上运行时，使得所述计算机执行如权利要求1至7任一项所述的图像预览方法。

9.一种显示设备，包括处理器和存储器，所述存储器存储有计算机程序，其特征在于，所述处理器通过调用所述计算机程序，用于执行如权利要求1至7任一项所述的图像预览方法。

Images