CN111954058A - 图像处理方法、装置、电子设备以及存储介质 - Google Patents

图像处理方法、装置、电子设备以及存储介质 Download PDF

Info

Publication number
CN111954058A
CN111954058A CN202010814852.XA CN202010814852A CN111954058A CN 111954058 A CN111954058 A CN 111954058A CN 202010814852 A CN202010814852 A CN 202010814852A CN 111954058 A CN111954058 A CN 111954058A
Authority
CN
China
Prior art keywords
image frame
processing
processing progress
video material
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010814852.XA
Other languages
English (en)
Other versions
CN111954058B (zh
Inventor
李钊
毛珊珊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202010814852.XA priority Critical patent/CN111954058B/zh
Publication of CN111954058A publication Critical patent/CN111954058A/zh
Priority to PCT/CN2021/106910 priority patent/WO2022033272A1/zh
Application granted granted Critical
Publication of CN111954058B publication Critical patent/CN111954058B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

本申请关于一种图像处理方法、装置、电子设备以及存储介质，属于多媒体技术领域。通过本申请提供的技术方案，终端能够在对视频素材进行处理的过程中，随着处理进度的变化，向用户展示与处理进度对应的图像帧，从而使得用户能够通过查看该图像帧，得知视频素材的处理进度。相较于通过进度条或者百分比的形式向用户展示视频素材的处理进度来说，本申请通过图像帧来向用户展示处理进度，不但展示的效果更佳生动直观，人机交互的效率更高，而且能够降低用户在等待过程中对时间成本的感知，提高用户在对视频素材进行处理时的体验。

Description

图像处理方法、装置、电子设备以及存储介质
技术领域
本申请涉及多媒体技术领域，尤其涉及一种图像处理方法、装置、电子设备以及存储介质。
背景技术
随着计算机技术的发展，越来越多的用户会通过观看视频来进行娱乐。对于视频的作者来说，在制作视频的过程中，需要通过视频处理应用程序对一段或者多段视频素材进行处理，比如在一段视频素材中加入绘制的图形或者将多段视频素材拼接为一个完整的视频。
相关技术中，视频作者通过视频处理应用程序对视频进行处理时，只能看到处理的进度，比如视频处理应用程序通过进度条或百分比的形式向视频作者展示处理的进度。
但是，通过进度条或百分比的形式向视频作者展示视频处理的进度时，展示的结果不够直观，人机交互的效率较低。
发明内容
本申请提供一种图像处理方法、装置、电子设备以及存储介质，能够提高人机交互的效率，本申请的技术方案如下：
一方面，提供了一种图像处理方法，包括：
响应于对视频素材的处理指令，从所述视频素材中获取多个图像帧；
在对所述视频素材进行处理的过程中，根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧；
在处理进度显示界面上，显示与所述处理进度对应的图像帧。
在一种可能的实施方式中，所述根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧包括：
响应于当前处理进度为开始对所述多个图像帧中的任一图像帧进行处理，将所述任一图像帧确定为所述处理进度对应的图像帧。
在一种可能的实施方式中，所述根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧包括：
响应于当前处理进度为对所述多个图像帧中的任一图像帧处理完毕，将处理完毕的所述任一图像帧确定为所述处理进度对应的图像帧。
在一种可能的实施方式中，所述从所述视频素材中获取多个图像帧包括：
从所述视频素材中获取多个参考图像帧；
确定所述多个参考图像帧的质量信息；
根据所述多个参考图像帧的质量信息，从所述多个参考图像帧中确定出质量信息符合目标条件的所述多个图像帧。
在一种可能的实施方式中，所述确定所述多个参考图像帧的质量信息包括：
获取所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项；
将所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到所述多个参考图像帧的质量信息。
在一种可能的实施方式中，所述在处理进度显示界面上，显示与所述处理进度对应的图像帧包括：
对所述与所述处理进度对应的图像帧进行裁剪，在所述处理进度显示界面的图像帧显示区域，显示裁剪后的所述与所述处理进度对应的图像帧。
在一种可能的实施方式中，所述对所述与所述处理进度对应的图像帧进行裁剪包括：
对所述处理进度对应的图像帧进行图像识别，得到所述处理进度对应的图像帧中的目标区域；
在所述处理进度对应的图像帧中，对所述目标区域以外的部分进行裁剪删除。
在一种可能的实施方式中，所述与所述处理进度对应的图像帧的显示时长均为目标时长。
在一种可能的实施方式中，所述在处理进度显示界面上，显示与所述处理进度对应的图像帧包括：
响应于所述处理进度发生变化，则控制变化前的处理进度对应的第一图像帧向所述处理进度显示界面的图像帧显示区域外移动；
响应于所述第一图像帧完全移出所述处理进度显示界面的图像帧显示区域，在所述处理进度显示界面的图像帧显示区域上显示变化后的处理进度对应的第二图像帧。
在一种可能的实施方式中，所述在处理进度显示界面上，显示与所述处理进度对应的图像帧包括：
响应于所述处理进度发生变化，控制变化前的处理进度对应的第一图像帧向所述处理进度显示界面的图像帧显示区域外移动；
在所述第一图像帧移动的同时，控制变化后的处理进度对应的第二图像帧进入所述处理进度显示界面的图像帧显示区域。
在一种可能的实施方式中，所述在处理进度显示界面上，显示与所述处理进度对应的图像帧包括：
响应于所述处理进度发生变化，取消变化前的处理进度对应的第一图像帧的显示；
在所述处理进度显示界面的图像帧显示区域上，显示变化后的处理进度对应的第二图像帧。
一方面，提供了一种图像处理装置，包括：
获取单元，被配置为执行响应于对视频素材的处理指令，从所述视频素材中获取多个图像帧；
确定单元，被配置为执行在对所述视频素材进行处理的过程中，根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧；
显示单元，被配置为执行在处理进度显示界面上，显示与所述处理进度对应的图像帧。
在一种可能的实施方式中，所述确定单元，被配置为执行响应于当前处理进度为开始对所述多个图像帧中的任一图像帧进行处理，将所述任一图像帧确定为所述处理进度对应的图像帧。
在一种可能的实施方式中，所述确定单元，被配置为执行响应于当前处理进度为对所述多个图像帧中的任一图像帧处理完毕，将处理完毕的所述任一图像帧确定为所述处理进度对应的图像帧。
在一种可能的实施方式中，所述获取单元，被配置为执行从所述视频素材中获取多个参考图像帧；确定所述多个参考图像帧的质量信息；根据所述多个参考图像帧的质量信息，从所述多个参考图像帧中确定出质量信息符合目标条件的所述多个图像帧。
在一种可能的实施方式中，所述获取单元，被配置为执行获取所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项；将所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到所述多个参考图像帧的质量信息。
在一种可能的实施方式中，所述显示单元，被配置为执行对所述与所述处理进度对应的图像帧进行裁剪，在所述处理进度显示界面的图像帧显示区域，显示裁剪后的所述与所述处理进度对应的图像帧。
在一种可能的实施方式中，所述显示单元，被配置为执行对所述处理进度对应的图像帧进行图像识别，得到所述处理进度对应的图像帧中的目标区域；在所述处理进度对应的图像帧中，对所述目标区域以外的部分进行裁剪删除。
在一种可能的实施方式中，所述与所述处理进度对应的图像帧的显示时长均为目标时长。
在一种可能的实施方式中，所述显示单元，被配置为执行响应于所述处理进度发生变化，则控制变化前的处理进度对应的第一图像帧向所述处理进度显示界面的图像帧显示区域外移动；响应于所述第一图像帧完全移出所述处理进度显示界面的图像帧显示区域，在所述处理进度显示界面的图像帧显示区域上显示变化后的处理进度对应的第二图像帧。
在一种可能的实施方式中，所述显示单元，被配置为执行响应于所述处理进度发生变化，控制变化前的处理进度对应的第一图像帧向所述处理进度显示界面的图像帧显示区域外移动；在所述第一图像帧移动的同时，控制变化后的处理进度对应的第二图像帧进入所述处理进度显示界面的图像帧显示区域。
在一种可能的实施方式中，所述显示单元，被配置为执行响应于所述处理进度发生变化，取消变化前的处理进度对应的第一图像帧的显示；在所述处理进度显示界面的图像帧显示区域上，显示变化后的处理进度对应的第二图像帧。
一方面，提供一种电子设备，该电子设备包括：
一个或多个处理器；
用于存储该处理器可执行程序代码的存储器；
其中，该处理器被配置为执行该程序代码，以实现上述图像处理方法。
一方面，提供一种存储介质，当该存储介质中的程序代码由电子设备的处理器执行时，使得电子设备能够执行上述图像处理方法。
一方面，提供一种计算机程序产品，该计算机程序产品存储有一条或多条程序代码，该一条或多条程序代码可以由电子设备的处理器执行，以完成上述图像处理方法。
本申请的实施例提供的技术方案至少带来以下有益效果：终端能够在对视频素材进行处理的过程中，随着处理进度的变化，向用户展示与处理进度对应的图像帧，从而使得用户能够通过查看该图像帧，得知视频素材的处理进度。相较于通过进度条或者百分比的形式向用户展示视频素材的处理进度来说，本申请通过图像帧来向用户展示处理进度，不但展示的效果更佳生动直观，人机交互的效率更高，而且能够降低用户在等待过程中对时间成本的感知，提高用户在对视频素材进行处理时的体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理，并不构成对本申请的不当限定。
图1是根据一示例性实施例示出的一种图像处理方法的实施环境示意图；
图2是根据一示例性实施例示出的一种视频素材选择界面的示意图；
图3是根据一示例性实施例示出的一种图像处理方法的流程图；
图4是根据一示例性实施例示出的一种图像处理方法的流程图；
图5是根据一示例性实施例示出的一种处理进度显示界面的示意图；
图6是根据一示例性实施例示出的一种处理进度显示界面的示意图；
图7是根据一示例性实施例示出的一种处理进度显示界面的示意图；
图8是根据一示例性实施例示出的一种处理进度显示界面的示意图；
图9是根据一示例性实施例示出的一种图像处理装置的结构示意图；
图10是根据一示例性实施例示出的一种终端的结构示意图；
图11是根据一示例性实施例示出的一种服务器的结构示意图。
具体实施方式
为了使本领域普通人员更好地理解本申请的技术方案，下面将结合附图，对本申请实施例中的技术方案进行清楚、完整地描述。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
本申请所涉及的用户信息可以为经用户授权或者经过各方充分授权的信息。
图1是根据一示例性实施例示出的一种图像处理方法的实施环境示意图，如图1所示，包括终端101和服务器102。
可选的，终端101为智能手机、智能手表、台式电脑、手提电脑和膝上型便携计算机等设备中的至少一种。终端101上可以安装并运行有支持视频处理的应用程序，用户可以通过终端101登录该应用程序来进行语音识别，例如用户在终端101上选取多段视频，通过该应用程序来将多段视频合成为一段视频。终端101可以通过无线网络或有线网络与服务器102相连。
可选的，终端101为多个终端中的一个，本实施例仅以终端101来举例说明。本领域技术人员可以知晓，上述终端的数量能够更多或更少。比如上述终端101能够仅为几个，或者上述终端101为几十个或几百个，或者更多数量，本申请实施例对终端101的数量和设备类型均不加以限定。
可选的，服务器102为一台服务器、多台服务器、云计算平台和虚拟化中心中的至少一种。服务器102能够用于确定图像帧的质量信息，还可以用于对终端101发送的视频进行处理。
上述服务器102的数量能够为更多或更少，本申请实施例对此不加以限定。当然，可选的，服务器102还包括其他功能服务器，以便提供更全面且多样化的服务。
本申请提供的图像处理方法可以应用于多种场景，为了便于理解，首先对本申请可能涉及到的应用场景进行说明：
本申请提供的图像处理方法能够应用在多个视频素材的合成过程中，举例来说，用户想要将视频素材A、视频素材B以及视频素材C三个视频素材合成为一个视频D，那么用户通过终端，启动支持视频处理的应用程序。用户向该应用程序中导入视频素材A、B以及C，通过该应用程序执行上述三个视频素材合成。终端通过该应用程序合成视频素材的过程中，能够在应用程序的处理进度显示界面上显示视频素材A、视频素材B以及视频素材C中的图像帧，用户能够通过图像帧得知当前视频素材合成的进度。参见图2，201为支持视频素材处理的应用程序提供的视频素材选择界面，202为内容选项，“全部”表示显示所有的视频素材和图片，“视频”表示显示所有的视频素材，“图片”表示显示所有的图片，用户通过点击不同的内容选项，选择不同的内容。203为待进行处理的视频素材的封面，视频素材的封面上显示有该视频素材的总时长，视频素材封面右上角的数字表示该视频素材被选中的顺序，用户通过选择不同的视频素材封面，来确定进行处理的视频素材。204为时间显示框，用于显示用户选择视频素材的总时长。205为用户选择的视频素材的封面，用户通过点击封面右上角的“×”，能够取消选择该视频素材。用户选择完毕之后，点击“一键出片”按键，响应于对“一键出片”按键的点击操作，终端通过支持视频处理的应用程序将用户选择的视频素材进行合成。或者，用户选择视频素材之后，点击“下一步”按键，为视频素材选择不同的滤镜以及合成方式，“下一步”之后的数字表示用户选择视频素材的数量。
本申请提供的图像处理方法能够应用在对单个视频素材进行处理的过程中，举例来说，用户通过支持视频素材处理的应用程序，在视频素材的不同图像帧上添加了不同的显示元素，或者对图像帧进行了不同的处理，比如在图像帧A上添加了一行字幕，在图像帧B上添加了一个图案，对图像帧C进行了锐化处理，对图像帧D进行了马赛克处理。终端通过支持视频处理的应用程序在对视频素材进行上述处理时，若上述图像帧A、图像帧B、图像帧C以及图像帧D为处理进度对应的图像帧，根据视频素材处理的进度，在该应用程序的界面上显示图像帧A、图像帧B、图像帧C以及图像帧D，用户能够通过处理进度对应的图像帧得到当前的视频素材处理进度。
可选的，终端除了在应用程序的处理进度显示界面上显示图像帧A、图像帧B、图像帧C以及图像帧D之外，还能够在应用程序的处理进度显示界面上显示处理过后的图像帧A、图像帧B、图像帧C以及图像帧D，这样用户无需等待视频素材中的图像帧全部处理完成，就能够在处理的过程中实时获知图像帧处理的效果，可以提高人机交互效率。
在本申请实施例中，图像处理方法的执行主体可以为终端，也可以为服务器。若执行主体为服务器，那么在方法的执行过程中，用户通过终端向服务器发送视频素材，由服务器对视频素材进行处理，得到处理进度对应的图像帧，通过终端显示处理进度对应的图像帧。为了便于理解，下述说明过程以执行主体为终端为例进行。
图3是根据一示例性实施例示出的一种图像处理方法的流程图，如图3所示，包括以下步骤。
在步骤S301中，响应于对视频素材的处理指令，终端从视频素材中获取多个图像帧。
在步骤S302中，在对视频素材进行处理的过程中，终端根据视频素材的处理进度，从多个图像帧中确定与处理进度对应的图像帧。
在步骤S303中，终端在处理进度显示界面上，显示与处理进度对应的图像帧。
通过本申请提供的技术方案，终端能够在对视频素材进行处理的过程中，随着处理进度的变化，向用户展示与处理进度对应的图像帧，从而使得用户能够通过查看该图像帧，得知视频素材的处理进度。相较于通过进度条或者百分比的形式向用户展示视频素材的处理进度来说，本申请通过图像帧来向用户展示处理进度，不但展示的效果更佳生动直观，人机交互的效率更高，而且能够降低用户在等待过程中对时间成本的感知，提高用户在对视频素材进行处理时的体验。
在一种可能的实施方式中，根据视频素材的处理进度，从多个图像帧中确定与处理进度对应的图像帧包括：
响应于当前处理进度为开始对多个图像帧中的任一图像帧进行处理，将任一图像帧确定为处理进度对应的图像帧。
在一种可能的实施方式中，根据视频素材的处理进度，从多个图像帧中确定与处理进度对应的图像帧包括：
响应于当前处理进度为对多个图像帧中的任一图像帧处理完毕，将处理完毕的任一图像帧确定为处理进度对应的图像帧。
在一种可能的实施方式中，从视频素材中获取多个图像帧包括：
从视频素材中获取多个参考图像帧。
确定多个参考图像帧的质量信息。
根据多个参考图像帧的质量信息，从多个参考图像帧中确定出质量信息符合目标条件的多个图像帧。
在一种可能的实施方式中，确定多个参考图像帧的质量信息包括：
获取多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项。
将多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到多个参考图像帧的质量信息。
在一种可能的实施方式中，在处理进度显示界面上，显示与处理进度对应的图像帧包括：
对与处理进度对应的图像帧进行裁剪，在处理进度显示界面的图像帧显示区域，显示裁剪后的与处理进度对应的图像帧。
在一种可能的实施方式中，对与处理进度对应的图像帧进行裁剪包括：
对处理进度对应的图像帧进行图像识别，得到处理进度对应的图像帧中的目标区域。
在处理进度对应的图像帧中，对目标区域以外的部分进行裁剪删除。
在一种可能的实施方式中，与处理进度对应的图像帧的显示时长均为目标时长。
在一种可能的实施方式中，在处理进度显示界面上，显示与处理进度对应的图像帧包括：
响应于处理进度发生变化，则控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。
响应于第一图像帧完全移出处理进度显示界面的图像帧显示区域，在处理进度显示界面的图像帧显示区域上显示变化后的处理进度对应的第二图像帧。
在一种可能的实施方式中，在处理进度显示界面上，显示与处理进度对应的图像帧包括：
响应于处理进度发生变化，控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。
在第一图像帧移动的同时，控制变化后的处理进度对应的第二图像帧进入处理进度显示界面的图像帧显示区域。
在一种可能的实施方式中，在处理进度显示界面上，显示与处理进度对应的图像帧包括：
响应于处理进度发生变化，取消变化前的处理进度对应的第一图像帧的显示。
在处理进度显示界面的图像帧显示区域上，显示变化后的处理进度对应的第二图像帧。
图4是根据一示例性实施例示出的一种图像处理方法的流程图，如图4所示，包括以下步骤。
在步骤S401中，响应于对视频素材的处理指令，终端从视频素材中获取多个参考图像帧。
可选的，视频素材为终端上存储的视频素材，或者为终端从互联网上获取的视频素材，或者为终端实时拍摄的视频素材。视频素材的数量可以为一个，也可以为多个，本申请实施例对于视频素材的来源和数量不做限定。
在一种可能的实施方式中，响应于对视频素材的处理指令，终端从视频素材中，每隔目标时间间隔获取参考图像帧，得到多个参考图像帧，其中，参考图像帧的数量与视频素材的总时长相关。
在这种实现方式下，终端能够从视频素材中，每隔目标时间间隔获取参考图像帧，这样可以保证终端获取的参考图像帧均匀分布在视频素材中。采用这样的参考图像帧中确定的图像帧来展示处理的进度，可以使得用户更加清楚的确定视频素材的处理进度。
举例来说，若终端对一个视频素材进行处理，响应于对该视频素材的处理指令，终端对该视频素材进行解码，得到该视频素材中的参考图像帧。终端每隔M秒，从该视频素材中获取一个参考图像帧，得到多个参考图像帧，M为正整数。比如，视频素材A的总时长为30秒，目标时间间隔为2秒，那么终端每隔2秒，从视频素材A中获取图像帧，总共获取到15个图像帧。
举例来说，若终端对三个视频素材进行处理，响应于对三个视频素材的处理指令，终端对三个视频素材进行解码，得到三个视频素材中的参考图像帧。终端根据三个视频素材的总时长以及目标时间间隔M，确定获取参考图像帧的数量N。终端根据三个视频素材的处理顺序，先从第一个视频素材中获取参考图像帧。当从第一个视频素材中获取的参考图像帧的数量达到第一数量时，终端从第二个视频素材中获取参考图像帧。当从第二个视频素材中获取的参考图像帧的数量达到第二数量时，终端从第三个视频素材中获取参考图像帧，总共从第三个视频素材中获取第三数量的参考图像帧。其中，第一数量为第一个视频素材的总时长与目标时间间隔M的比值，第二数量为第二个视频素材的总时长与目标时间间隔M的比值，第三数量为第三个视频素材的总时长与目标时间间隔M的比值。比如，终端对视频素材A、视频素材B以及视频素材C进行视频素材合成处理，视频素材A的总时长为30秒、视频素材B的总时长为20秒、视频素材C的总时长为10秒，视频素材A、视频素材B以及视频素材C的合成顺序为A+视频素材B+视频素材C。若目标时间间隔为2秒，终端确定视频素材A对应的第一数量为15、视频素材B对应的第二数量为10、视频素材C对应的第三数量为5。终端每隔2秒，从视频素材A中获取到15个参考图像帧。终端每隔2秒，从视频素材B中获取到10个参考图像帧。终端每隔2秒，从视频素材C中获取到5个参考图像帧，这样终端总共从视频素材A、视频素材B以及视频素材C中获取了30个参考图像帧。
在一种可能的实施方式中，响应于对至少一个视频素材的处理指令，终端分别从至少一个视频素材中随机获取参考图像帧，得到多个参考图像帧，其中，从每个视频素材中随机获取参考图像帧的数量与该视频素材的总时长相关。
在这种实现方式下，终端从至少一个视频素材中获取参考图像帧的方式为随机获取，这样得到的参考图像帧更能从整体上反映每一个视频素材的特点。采用这样的参考图像帧中确定的目标参考图像帧来展示处理的进度，可以使得用户更加容易区分当前正在处理的视频素材。
举例来说，若终端对三个视频素材进行处理，响应于对三个视频素材的处理指令，终端对三个视频素材进行解码，得到三个视频素材中的参考图像帧。终端分别根据三个视频素材的总时长，确定从三个视频素材中获取参考图像帧的数量。终端分别从三个视频素材中随机获取参考图像帧，得到多个参考图像帧。比如，存在视频素材D、视频素材E以及视频素材F三个视频素材，视频素材D的总时长为10秒、视频素材E的总时长为5秒、视频素材F的总时长为15秒，获取参考图像帧的数量为6，那么终端根据视频素材D、视频素材E以及视频素材F的总时长，确定从视频素材D中获取参考图像帧的数量为2、从视频素材E中获取参考图像帧的数量为1，从视频素材F中获取参考图像帧的数量为3。终端随机从视频素材D中获取2个参考图像帧、从视频素材E中获取1个参考图像帧，从视频素材F中获取3个参考图像帧。
在步骤S402中，终端获取多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项。
为了便于理解，下面以一个参考图像帧为例进行说明。
对于清晰度信息来说，在一种可能的实施方式中，终端将参考图像帧转化为灰度参考图像帧，执行目标函数对灰度参考图像帧的像素点的灰度值进行处理，得到该参考图像帧的清晰度。当然，若参考图像帧原本就为灰度图像帧，那么终端能够直接执行目标函数，对参考图像帧的像素点的灰度值进行处理，得到该参考图像帧的清晰度信息。
首先对终端将参考图像帧转化为灰度参考图像帧为例进行说明。
可选的，终端采用公式(1)、公式(2)、公式(3)或者公式(4)中的任一个将彩色参考图像帧的像素点的颜色通道之转化为灰度参考图像帧的像素点的像素值。
Gray＝R*0.299+G*0.587+B*0.114 (1)
Gray＝(R*299+G*587+B*114+500)/1000 (2)
Gray＝(R^2.2*0.2973+G^2.2*0.6274+B^2.2*0.0753)^(1/2.2) (3)
Gray＝(R+B+G)/3 (4)
其中，Gray为灰度参考图像帧的像素点的灰度值，R为彩色参考图像帧的像素点的红色通道值，G为彩色参考图像帧的像素点的绿色通道值，B为彩色参考图像帧的像素点的蓝色通道值。
下面对终端执行目标函数对灰度参考图像帧进行处理，得到参考图像帧的清晰度信息的方法进行说明：
以目标函数为布伦纳(Brenner)梯度函数为例，参见公式(5)，终端将灰度参考图像帧的像素点的灰度值代入Brenner梯度函数，得到参考图像帧的清晰度信息。
D(f)＝∑x∑y|f(x+2，y)-f(x，y)|2 (5)
其中，D(f)为参考图像帧的清晰度信息，(x，y)为灰度参考图像帧的像素点坐标，f(x，y)为灰度参考图像帧的像素点的灰度值。
以目标函数为Tenengrad梯度函数为例，参见公式(6)，终端将灰度参考图像帧的像素点的灰度值代入Tenengrad梯度函数，得到参考图像帧的清晰度信息。
Figure BDA0002632309900000121
其中，D(f)为参考图像帧的清晰度信息，(x，y)为灰度参考图像帧的像素点坐标，Gx(x，y)为x像素点的灰度值在x方向的梯度值，Gy(x，y)为x像素点的灰度值在y方向的梯度值，T为边缘检测阈值。
需要说明的是，目标函数除了能够为上述Brenner梯度函数或者Tenengrad梯度函数之外，还能够为拉普拉斯(Laplacian)梯度函数、灰度方差(SMD)函数、灰度方差乘积(SMD2)函数以及熵函数等函数，本申请实施例对于目标函数的类型不做限定。
对于色彩丰富度信息来说，在一种可能的实施方式中，终端确定参考图像帧的像素点的红色通道值、绿色通道值以及蓝色通道值，根据参考图像帧的像素点的红色通道值和绿色通道值的差值得到第一参数，根据参考图像帧的像素点的红色通道值、绿色通道值以及蓝色通道值得到第二参数。终端确定参考图像帧的不同像素点的第一参数的平均值和标准差，确定参考图像帧的不同像素点的第二参数的平均值和标准差。终端根据第一参数的平均值和标准差以及第二参数的平均值和标准差，得到参考图像帧的色彩丰富度信息。
举例来说，以rg表示第一参数，以yb表示第二参数，那么第一参数rg＝|R-H|，第二参数yb＝|0.5(R+G)-B|。终端将参考图像帧的不同像素点的第一参数rg相加后与参考图像帧中像素点的总数相除，得到参考图像帧的不同像素点的第一参数rg的平均值rgmean以及标准差rgsta。终端将参考图像帧的不同像素点的第二参数yb相加后与参考图像帧中像素点的总数相除，得到参考图像帧的不同像素点的第一参数yb的平均值ybmean以及标准差ybsta。终端将rgmean的平方与ybmean的平方相加后开根号，得到第三参数a，将rgsta的平方与ybsta的平方相加后开根号，得到第四参数b。终端通过第三参数a和第四参数b，得到参考图像帧的色彩丰富度信息，色彩丰富度信息C＝b+0.3a。
对于内容信息来说，在一种可能的实施方式中，终端对参考图像帧进行图像识别，得到参考图像帧包括的目标对象，其中，目标对象包括人脸、宠物以及建筑物等。可选的，终端根据识别出的对象，为参考图像帧设置不同的权重，比如为包含人脸的参考图像帧设置权重1，为包含宠物的参考图像帧设置权重0.8，为包含建筑物的参考图像帧设置权重0.6等，终端采用权重来表示参考图像帧的内容信息。
另外，终端还能够识别参考图像帧的完整度信息以及重复度信息等，其中参考图像帧的完整度信息用于表示参考图像帧是否存在缺失的部分，参考图像帧的重合度信息用于表示参考图像帧中相同内容的数量。终端将上述参考图像帧包括的对象对应的权重与参考图像帧的完整度信息以及重合度信息进行融合，得到参考图像帧的内容信息。终端能够根据参考图像帧的内容信息，优先从多个参考图像帧中确定出包含目标对象、参考图像帧内容完整以及参考图像帧内容重复较少的目标参考图像帧。
在步骤S403中，终端将多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到多个参考图像帧的质量信息。
在一种可能的实施方式中，终端将参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行加权求和，得到参考图像帧的质量信息，其中，参考图像帧的清晰度信息、色彩丰富度信息以及内容信息对应的权重可以根据实际情况进行设置，本申请实施例对此不做限定。
在步骤S404中，终端根据多个参考图像帧的质量信息，从多个参考图像帧中确定出质量信息符合目标条件的多个图像帧。
其中，质量信息符合目标条件是指，质量信息大于质量信息阈值或者质量信息为多个参考图像帧中质量信息最高的K个，其中K为正整数。
在这种实现方式下，终端能够根据参考图像帧的质量信息，从多个参考图像帧中确定出多个质量信息符合目标条件的图像帧，后续基于该图像帧进行显示时，能够达到更好的显示效果。
在步骤S405中，在对视频素材进行处理的过程中，终端根据视频素材的处理进度，从多个图像帧中，确定与处理进度对应的图像帧。
在一种可能的实施方式中，响应于当前处理进度为终端开始对多个图像帧中的任一图像帧进行处理，将该图像帧确定为处理进度对应的图像帧。
在这种实现方式下，终端能够在对至少一个视频素材进行处理时，将正在被处理的图像帧确定为与处理进度对应的图像帧。后续的显示过程中，用户能够通过查看当前显示的图像帧，确定处理的进度，处理进度的显示更加直观，人机交互的效率更高。
以处理为终端向视频素材中的图像帧添加图形为例，用户通过视频处理应用程序设置好待向视频素材中添加的图形以及选择好待添加图形的图像帧之后，通过视频处理应用程序向视频素材中的图像帧添加图形。当视频处理应用程序开始向任一图像帧添加图形时，终端将该图像帧确定为与处理进度对应的图像帧，用户看到该图像帧可以得知处理应用程序正在向该图像帧中添加图形，处理进度的显示更加直观。
以处理为终端合成多个视频素材为例，用户通过视频处理应用程序设置好待合成的视频素材之后，通过视频处理应用程序进行视频素材的合成。当视频处理应用程序开始进行视频素材合成时，终端确定当前正在合成的图像帧，将该图像帧确定为与处理进度对应的图像帧，用户看到该图像帧可以得知处理应用程序正在向该图像帧中添加图形，处理进度的显示更加直观。
在一种可能的实施方式中，响应于当前处理进度为对多个图像帧中的任一图像帧处理完毕，终端将处理完毕的图像帧确定为处理进度对应的图像帧。
在这种实现方式下，终端实时将处理完毕的图像帧展示给用户，用户通过查看处理完毕的图像帧，可以快速得知图像帧的处理效果，无需在处理完毕后再进行查看。当图像帧的处理效果不佳时，能够人工对处理过程进行调整，比如终止对该视频素材的处理过程，对处理参数进行调整后再次进行处理，可以提高处理的效果。
以处理为终端向视频素材中的图像帧添加图形为例，用户通过视频处理应用程序设置好待向视频素材中添加的图形以及选择好待添加图形的图像帧之后，可以通过视频处理应用程序向视频素材中的图像帧添加图形。当处理应用程序向任一图像帧中添加图形完毕之后，终端确定添加图形完毕的图像帧为与处理进度对应的图像帧，用户可以通过查看添加图形完毕的图像帧，得知处理的效果。
在一种可能的实施方式中，在对至少一个视频素材的处理过程中，终端根据视频素材的处理进度，确定多个图像帧在处理过程中的显示时间。终端确定处理进度对应显示时间，将该显示时间对应的图像帧确定为与处理进度对应的图像帧。
在这种实现方式下，终端能够在处理过程中，实时确定与处理进度对应的图像帧，这样使得用户能够根据终端显示的图像帧，确定处理的进度，处理的进度显示更加直观，人机交互的效率更高。
举例来说，终端根据图像帧的数量、与处理进度对应的图像帧在多个图像帧中的顺序以及处理的进度，确定与处理进度对应的图像帧的显示时间，比如存在100个图像帧，与处理进度对应的图像帧在100个图像帧中的顺序为28，那么终端在对视频素材进行处理的进度到达28％时，确定顺序为28的图像帧为与处理进度对应的图像帧，其中，与处理进度对应的图像帧在多个图像帧中的顺序根据终端获取与处理进度对应的图像帧的时间确定。
需要说明的是，上述步骤S401-S405是以执行主体为终端为例进行说明的，在其他可能的实施方式中，也能够由服务器作为执行主体来执行。若上述步骤S401-S405以服务器作为执行主体来执行，那么服务器执行完步骤S405之后，能够将与处理进度对应的图像帧发送个终端，通过终端进行显示。
在步骤S406中，终端在处理进度显示界面上，显示与处理进度对应的图像帧。
其中，与处理进度对应的图像帧的显示时长均为目标时长，其中，目标时长由终端根据处理的进度确定，终端能够将目标时长设置为与处理百分比变化间隔相同，比如存在100个图像帧，若当前显示图像帧对应的处理进度为1％，那么当处理进度变化为2％时，终端显示与处理进度为2％对应的图像帧，目标时长也即是处理进度由1％变化为2％的时长。另外，目标时长也能够由终端根据图像帧的处理时间确定。比如，响应于处理进度为1％对应的图像帧开始处理，终端显示处理进度为1％对应的图像帧，响应于处理进度为2％对应的图像帧开始处理，终端显示处理进度为2％对应的，处理进度为1％对应的图像帧和处理进度为2％对应的图像帧开始处理的时间间隔也即是目标时长，当然，终端也能够通过其他方式确定目标时长，比如将处理进度为1％对应的图像帧和处理进度为2％对应的图像帧处理完毕的时间间隔确定为目标时长，本申请实施例对此不做限定。还有，终端能够为目标时长设置时长阈值，当目标时长大于或等于显示阈值时，终端按照目标时长对图像帧进行显示；当目标时长小于显示阈值时，终端按照显示阈值对图像帧进行显示，这样可以避免图像帧切换过快，给用户带来跳跃的不适感。
在一种可能的实施方式中，终端对与处理进度对应的图像帧进行裁剪，在处理进度显示界面的图像帧显示区域，显示裁剪后的与处理进度对应的图像帧。
在这种实现方式下，终端在显示图像帧之前，能够对图像帧进行裁剪，使得图像帧的显示可以与处理进度显示界面上的图像帧的显示区域相匹配，图像帧的显示效果更好。
举例来说，终端对处理进度对应的图像帧进行图像识别，得到处理进度对应的图像帧中的目标区域，其中，目标区域为包含人脸的区域，或包含宠物的区域，或包含建筑物的区域，本申请实施例对于目标区域的内容不做限定。终端在处理进度对应的图像帧中，对目标区域以外的部分进行裁剪删除。这样可以使得处理进度对应的图像帧的显示尺寸更加合适，保留处理进度对应的图像帧中有意义的部分，处理进度对应的图像帧的显示效果更好。
另外，在终端对视频素材进行处理的过程中，也能够在处理应用程序的处理进度显示界面上显示处理的进度信息以及手动编辑按键，用户点击手动编辑按键能够实现对处理过程的介入，比如向处理进度对应的图像帧中添加显示元素、停止处理过程、向正在处理的视频素材中添加其他视频素材等操作，本申请实施例对此不作限定。参见图5，501为处理应用程序的处理进度显示界面，502为处理进度对应的图像帧，503为处理的进度信息，504为手动编辑按键。
在一种可能的实施方式中，响应于处理进度发生变化，终端则控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。响应于第一图像帧完全移出处理进度显示界面的图像帧显示区域，在处理进度显示界面的图像帧显示区域上显示变化后的处理进度对应的第二图像帧。
在这种实现方式下，终端能够在图像帧的显示时长达到目标时长之后，将第一图像帧移出图像帧显示区域，在该图像帧显示区域上显示第二图像帧。用户看到图像帧显示区域上的第一图像帧切换为第二图像帧进行显示时，能够确定处理的进度发生了变化。同时根据图像帧显示区域上显示的第二图像帧，能够大致确定处理到了哪个图像帧，处理进度的显示更加直观，人机交互的效率更高。
举例来说，参见图6，601为视频处理应用程序的处理进度显示界面，602为第一图像帧，603为图像帧显示区域，604为第二图像帧。响应于处理进度发生变化，比如从1％变化为2％，终端将第一图像帧602移出图像帧显示区域603，在图像帧显示区域603显示第二图像帧604。
在一种可能的实施方式中，响应于处理进度发生变化，终端控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。在第一图像帧移动的同时，终端控制变化后的处理进度对应的第二图像帧进入处理进度显示界面的图像帧显示区域。
在这种实现方式下，终端在将第一图像帧切换为第二图像帧进行显示时，能够显示第一图像帧的消失过程，并随着第一图像帧的消失，逐渐将第二图像帧进行完整的显示。终端通过这种方式对第二图像帧进行显示，可以使得用户看到第二图像帧的过程更加顺畅，处理进度的显示效果更好，人机交互的效率更高。
举例来说，参见图7，701为视频处理应用程序的处理进度显示界面，702为第一图像帧，703为图像帧显示区域，704为第二图像帧。响应于处理进度发生变化，比如从1％变化为2％，终端将第一图像帧702移出图像帧显示区域703，在移出第一图像帧702的过程中，控制第二图像帧704紧跟着第一图像帧702进入图像帧显示区域703，直至第二图像帧704完全进入图像帧显示区域703。
在一种可能的实施方式中，响应于处理进度发生变化，终端取消变化前的处理进度对应的第一图像帧的显示。在处理进度显示界面的图像帧显示区域上，终端显示变化后的处理进度对应的第二图像帧。
在这种实现方式下，终端在将图像帧切换为第二图像帧进行显示时，能够将第一图像帧直接变换为第二图像帧进行显示，第二图像帧的显示过程更加直观。
举例来说，参见图8，801为视频处理应用程序的处理进度显示界面，802为第一图像帧，803为图像帧显示区域，804为第二图像帧。响应于处理进度发生变化，比如从1％变化为2％，终端将第一图像帧802取消显示，在处理进度显示界面上显示第二图像帧804。比如，终端可以将至少一个图像帧进行组合，生成图形交换格式(Graphics InterchangeFormat，GIF)图像，在应用程序的处理进度显示界面上显示该GIF图像，用户可以通过观看该GIF图像来感知处理的进度。
通过本申请提供的技术方案，终端能够在对视频素材进行处理的过程中，随着处理进度的变化，向用户展示与处理进度对应的图像帧，从而使得用户能够通过查看该图像帧，得知视频素材的处理进度。相较于通过进度条或者百分比的形式向用户展示视频素材的处理进度来说，本申请通过图像帧来向用户展示处理进度，不但展示的效果更佳生动直观，人机交互的效率更高，而且能够降低用户在等待过程中对时间成本的感知，提高用户在对视频素材进行处理时的体验。
图9是根据一示例性实施例示出的一种图像处理装置的结构示意图。参照图9，该装置包括获取单元901、确定单元902和显示单元903。
获取单元901，被配置为执行响应于对视频素材的处理指令，从视频素材中获取多个图像帧。
确定单元902，被配置为执行在对视频素材进行处理的过程中，根据视频素材的处理进度，从多个图像帧中确定与处理进度对应的图像帧。
显示单元903，被配置为执行在处理进度显示界面上，显示与处理进度对应的图像帧。
在一种可能的实施方式中，确定单元，被配置为执行响应于当前处理进度为开始对多个图像帧中的任一图像帧进行处理，将任一图像帧确定为处理进度对应的图像帧。
在一种可能的实施方式中，确定单元，被配置为执行响应于当前处理进度为对多个图像帧中的任一图像帧处理完毕，将处理完毕的任一图像帧确定为处理进度对应的图像帧。
在一种可能的实施方式中，获取单元，被配置为执行从视频素材中获取多个参考图像帧。确定多个参考图像帧的质量信息。根据多个参考图像帧的质量信息，从多个参考图像帧中确定出质量信息符合目标条件的多个图像帧。
在一种可能的实施方式中，获取单元，被配置为执行获取多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项。将多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到多个参考图像帧的质量信息。
在一种可能的实施方式中，显示单元，被配置为执行对与处理进度对应的图像帧进行裁剪，在处理进度显示界面的图像帧显示区域，显示裁剪后的与处理进度对应的图像帧。
在一种可能的实施方式中，显示单元，被配置为执行对处理进度对应的图像帧进行图像识别，得到处理进度对应的图像帧中的目标区域。在处理进度对应的图像帧中，对目标区域以外的部分进行裁剪删除。
在一种可能的实施方式中，与处理进度对应的图像帧的显示时长均为目标时长。
在一种可能的实施方式中，显示单元，被配置为执行响应于处理进度发生变化，则控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。响应于第一图像帧完全移出处理进度显示界面的图像帧显示区域，在处理进度显示界面的图像帧显示区域上显示变化后的处理进度对应的第二图像帧。
在一种可能的实施方式中，显示单元，被配置为执行响应于处理进度发生变化，控制变化前的处理进度对应的第一图像帧向处理进度显示界面的图像帧显示区域外移动。在第一图像帧移动的同时，控制变化后的处理进度对应的第二图像帧进入处理进度显示界面的图像帧显示区域。
在一种可能的实施方式中，显示单元，被配置为执行响应于处理进度发生变化，取消变化前的处理进度对应的第一图像帧的显示；在所述处理进度显示界面的图像帧显示区域上，显示变化后的处理进度对应的第二图像帧。
通过本申请提供的技术方案，终端能够在对视频素材进行处理的过程中，随着处理进度的变化，向用户展示与处理进度对应的图像帧，从而使得用户能够通过查看该图像帧，得知视频素材的处理进度。相较于通过进度条或者百分比的形式向用户展示视频素材的处理进度来说，本申请通过图像帧来向用户展示处理进度，不但展示的效果更佳生动直观，人机交互的效率更高，而且能够降低用户在等待过程中对时间成本的感知，提高用户在对视频素材进行处理时的体验。
在本申请实施例中，电子设备可以实现为终端，首先对终端的结构进行说明：
图10是根据一示例性实施例示出的一种终端的结构示意图。该终端1000可以为用户所使用的终端。该终端1000可以是：智能手机、平板电脑、笔记本电脑或台式电脑。终端1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常，终端1000包括有：处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器1001可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器1001还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。该存储器1002中存储有至少一条程序代码，该至少一条程序代码由该处理器1001加载并执行以实现上述各个方法实施例提供的图像处理方法。存储器1002还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。
在一些实施例中，终端1000还可选包括有：外围设备接口1003和至少一个外围设备。处理器1001、存储器1002和外围设备接口1003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1003相连。具体地，外围设备包括：射频电路1004、显示屏1005、摄像头组件1006、音频电路1007、定位组件1008和电源1009中的至少一种。
外围设备接口1003可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器1001和存储器1002。在一些实施例中，处理器1001、存储器1002和外围设备接口1003被集成在同一芯片或电路板上；在一些其他实施例中，处理器1001、存储器1002和外围设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
射频电路1004用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路1004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1004将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路1004包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路1004还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。
显示屏1005用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时，显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时，显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏1005可以为一个，设置终端1000的前面板；在另一些实施例中，显示屏1005可以为至少两个，分别设置在终端1000的不同表面或呈折叠设计；在一些实施例中，显示屏1005可以是柔性显示屏，设置在终端1000的弯曲表面上或折叠面上。甚至，显示屏1005还可以设置成非矩形的不规则图形，也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地，摄像头组件1006包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器1001进行处理，或者输入至射频电路1004以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或射频电路1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路1007还可以包括耳机插孔。
定位组件1008用于定位终端1000的当前地理位置，以实现导航或LBS(LocationBased Service，基于位置的服务)。定位组件1008可以是基于美国的GPS(GlobalPositioning System，全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源1009用于为终端1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时，该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中，终端1000还包括有一个或多个传感器1010。该一个或多个传感器1010包括但不限于：加速度传感器1011、陀螺仪传感器1012、压力传感器1013、指纹传感器1014、光学传感器1015以及接近传感器1016。
加速度传感器1011可以检测以终端1000建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器1011可以用于检测重力加速度在三个坐标轴上的分量。处理器1001可以根据加速度传感器1011采集的重力加速度信号，控制显示屏1005以横向视图或纵向视图进行用户界面的显示。加速度传感器1011还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1012可以检测终端1000的机体方向及转动角度，陀螺仪传感器1012可以与加速度传感器1011协同采集用户对终端1000的3D动作。处理器1001根据陀螺仪传感器1012采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1013可以设置在终端1000的侧边框和/或显示屏1005的下层。当压力传感器1013设置在终端1000的侧边框时，可以检测用户对终端1000的握持信号，由处理器1001根据压力传感器1013采集的握持信号进行左右手识别或快捷操作。当压力传感器1013设置在显示屏1005的下层时，由处理器1001根据用户对显示屏1005的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1014用于采集用户的指纹，由处理器1001根据指纹传感器1014采集到的指纹识别用户的身份，或者，由指纹传感器1014根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器1001授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1014可以被设置终端1000的正面、背面或侧面。当终端1000上设置有物理按键或厂商Logo时，指纹传感器1014可以与物理按键或厂商Logo集成在一起。
光学传感器1015用于采集环境光强度。在一个实施例中，处理器1001可以根据光学传感器1015采集的环境光强度，控制显示屏1005的显示亮度。具体地，当环境光强度较高时，调高显示屏1005的显示亮度；当环境光强度较低时，调低显示屏1005的显示亮度。在另一个实施例中，处理器1001还可以根据光学传感器1015采集的环境光强度，动态调整摄像头组件1006的拍摄参数。
接近传感器1016，也称距离传感器，通常设置在终端1000的前面板。接近传感器1016用于采集用户与终端1000的正面之间的距离。在一个实施例中，当接近传感器1016检测到用户与终端1000的正面之间的距离逐渐变小时，由处理器1001控制显示屏1005从亮屏状态切换为息屏状态；当接近传感器1016检测到用户与终端1000的正面之间的距离逐渐变大时，由处理器1001控制显示屏1005从息屏状态切换为亮屏状态。
本领域技术人员可以理解，图10中示出的结构并不构成对终端1000的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
在本申请实施例中，电子设备可以实现为服务器，下面对服务器的结构进行说明：
图11是根据一示例性实施例示出的一种服务器1100的结构示意图，该服务器1100可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(CentralProcessing Units，CPU)1101和一个或一个以上的存储器1102，存储器1102包含的存储介质可以是只读存储器(Read-Only Memory，ROM)1103和随机存取存储器(RAM)1104。其中，该存储器1102中存储有至少一条程序代码，该至少一条程序代码由该处理器1101加载并执行以实现上述各个方法实施例提供的图像处理方法。当然，该服务器还可以具有有线或无线网络接口1105、输入输出接口1106等部件，以便进行输入输出，该服务器1100还可以包括大容量存储设备1107，该服务器1100还可以包括其他用于实现设备功能的部件，在此不做赘述。
在示例性实施例中，还提供了一种包括程序代码的存储介质，例如包括程序代码的存储器1002，上述程序代码可由服务器1100的处理器1101执行以完成上述图像处理方法。可选的，存储介质可以是非临时性计算机可读存储介质，例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在示例性实施例中，还提供了一种计算机程序产品，包括一条或多条指令，该一条或多条指令可以由电子设备的处理器执行，以完成上述各个实施例提供的图像处理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求指出。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。

Claims (10)

1.一种图像处理方法，其特征在于，包括：
响应于对视频素材的处理指令，从所述视频素材中获取多个图像帧；
在对所述视频素材进行处理的过程中，根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧；
在处理进度显示界面上，显示与所述处理进度对应的图像帧。
2.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧包括：
响应于当前处理进度为开始对所述多个图像帧中的任一图像帧进行处理，将所述任一图像帧确定为所述处理进度对应的图像帧。
3.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧包括：
响应于当前处理进度为对所述多个图像帧中的任一图像帧处理完毕，将处理完毕的所述任一图像帧确定为所述处理进度对应的图像帧。
4.根据权利要求1所述的图像处理方法，其特征在于，所述从所述视频素材中获取多个图像帧包括：
从所述视频素材中获取多个参考图像帧；
确定所述多个参考图像帧的质量信息；
根据所述多个参考图像帧的质量信息，从所述多个参考图像帧中确定出质量信息符合目标条件的所述多个图像帧。
5.根据权利要求4所述的图像处理方法，其特征在于，所述确定所述多个参考图像帧的质量信息包括：
获取所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少一项；
将所述多个参考图像帧的清晰度信息、色彩丰富度信息以及内容信息中的至少两项进行融合，得到所述多个参考图像帧的质量信息。
6.根据权利要求1所述的图像处理方法，其特征在于，所述在处理进度显示界面上，显示与所述处理进度对应的图像帧包括：
对所述与所述处理进度对应的图像帧进行裁剪，在所述处理进度显示界面的图像帧显示区域，显示裁剪后的所述与所述处理进度对应的图像帧。
7.一种图像处理装置，其特征在于，包括：
获取单元，被配置为执行响应于对视频素材的处理指令，从所述视频素材中获取多个图像帧；
确定单元，被配置为执行在对所述视频素材进行处理的过程中，根据所述视频素材的处理进度，从所述多个图像帧中确定与所述处理进度对应的图像帧；
显示单元，被配置为执行在处理进度显示界面上，显示与所述处理进度对应的图像帧。
8.一种电子设备，其特征在于，包括：
处理器；
用于存储所述处理器可执行程序代码的存储器；
其中，所述处理器被配置为执行所述程序代码，以实现如权利要求1至6中任一项所述的图像处理方法。
9.一种存储介质，当所述存储介质中的程序代码由电子设备的处理器执行时，使得电子设备能够执行如权利要求1至6中任一项所述的图像处理方法。
10.一种计算机程序产品，所述计算机程序产品存储有一条或多条程序代码，所述一条或多条程序代码可以由电子设备的处理器执行，以完成如权利要求1至6中任一项所述的图像处理方法。
CN202010814852.XA 2020-08-13 2020-08-13 图像处理方法、装置、电子设备以及存储介质 Active CN111954058B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010814852.XA CN111954058B (zh) 2020-08-13 2020-08-13 图像处理方法、装置、电子设备以及存储介质
PCT/CN2021/106910 WO2022033272A1 (zh) 2020-08-13 2021-07-16 图像处理方法以及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010814852.XA CN111954058B (zh) 2020-08-13 2020-08-13 图像处理方法、装置、电子设备以及存储介质

Publications (2)

Publication Number Publication Date
CN111954058A true CN111954058A (zh) 2020-11-17
CN111954058B CN111954058B (zh) 2023-11-21

Family

ID=73343052

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010814852.XA Active CN111954058B (zh) 2020-08-13 2020-08-13 图像处理方法、装置、电子设备以及存储介质

Country Status (2)

Country Link
CN (1) CN111954058B (zh)
WO (1) WO2022033272A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112954450A (zh) * 2021-02-02 2021-06-11 北京字跳网络技术有限公司 视频处理方法、装置、电子设备和存储介质
WO2022033272A1 (zh) * 2020-08-13 2022-02-17 北京达佳互联信息技术有限公司 图像处理方法以及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090249423A1 (en) * 2008-03-19 2009-10-01 Huawei Technologies Co., Ltd. Method, device and system for implementing seeking play of stream media
CN103577304A (zh) * 2012-08-10 2014-02-12 百度在线网络技术（北京）有限公司 一种代码动态分析的方法及装置
CN103702214A (zh) * 2013-12-10 2014-04-02 乐视网信息技术（北京）股份有限公司 一种视频播放方法和电子设备
CN104581381A (zh) * 2015-01-04 2015-04-29 浪潮软件股份有限公司 一种终端视频浏览辅助定位方法和装置
CN105592363A (zh) * 2014-10-24 2016-05-18 腾讯科技（北京）有限公司 多媒体文件的播放方法及装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4620150B2 (ja) * 2008-10-23 2011-01-26 株式会社東芝 電子機器および映像処理方法
US8849956B2 (en) * 2011-01-14 2014-09-30 Google Inc. Video processing feedback
CN103905835B (zh) * 2012-12-27 2017-11-10 腾讯科技（北京）有限公司 一种视频播放器的进度预览方法、装置和系统
CN103986938B (zh) * 2014-06-03 2016-08-24 合一网络技术(北京)有限公司 基于视频播放的预览的方法和系统
CN106201838A (zh) * 2016-07-22 2016-12-07 传线网络科技（上海）有限公司 视频下载进度显示方法及装置
JP6855268B2 (ja) * 2017-02-10 2021-04-07 キヤノン株式会社 情報処理装置、情報処理装置の制御方法及びプログラム
CN107908516B (zh) * 2017-12-04 2020-12-18 联想(北京)有限公司 一种数据显示方法及装置
CN110971956A (zh) * 2018-09-30 2020-04-07 广州优视网络科技有限公司 视频帧预览方法和装置
CN111954058B (zh) * 2020-08-13 2023-11-21 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备以及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090249423A1 (en) * 2008-03-19 2009-10-01 Huawei Technologies Co., Ltd. Method, device and system for implementing seeking play of stream media
CN103577304A (zh) * 2012-08-10 2014-02-12 百度在线网络技术（北京）有限公司 一种代码动态分析的方法及装置
CN103702214A (zh) * 2013-12-10 2014-04-02 乐视网信息技术（北京）股份有限公司 一种视频播放方法和电子设备
CN105592363A (zh) * 2014-10-24 2016-05-18 腾讯科技（北京）有限公司 多媒体文件的播放方法及装置
CN104581381A (zh) * 2015-01-04 2015-04-29 浪潮软件股份有限公司 一种终端视频浏览辅助定位方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022033272A1 (zh) * 2020-08-13 2022-02-17 北京达佳互联信息技术有限公司 图像处理方法以及电子设备
CN112954450A (zh) * 2021-02-02 2021-06-11 北京字跳网络技术有限公司 视频处理方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
WO2022033272A1 (zh) 2022-02-17
CN111954058B (zh) 2023-11-21

Similar Documents

Publication Publication Date Title
CN110336960B (zh) 视频合成的方法、装置、终端及存储介质
CN110233976B (zh) 视频合成的方法及装置
WO2021008456A1 (zh) 图像处理方法、装置、电子设备及存储介质
CN111065001B (zh) 视频制作的方法、装置、设备及存储介质
CN109859102B (zh) 特效显示方法、装置、终端及存储介质
CN111918090B (zh) 直播画面显示方法、装置、终端及存储介质
CN110225390B (zh) 视频预览的方法、装置、终端及计算机可读存储介质
CN110740340B (zh) 视频直播方法及装置、存储介质
CN110533585B (zh) 一种图像换脸的方法、装置、系统、设备和存储介质
CN112363660B (zh) 封面图像的确定方法、装置、电子设备及存储介质
CN111083526B (zh) 视频转场方法、装置、计算机设备及存储介质
CN111880888B (zh) 预览封面生成方法、装置、电子设备及存储介质
CN110196673B (zh) 图片交互方法、装置、终端及存储介质
CN112104648A (zh) 数据处理方法、装置、终端、服务器及存储介质
CN112667835A (zh) 作品处理方法、装置、电子设备及存储介质
CN110839174A (zh) 图像处理的方法、装置、计算机设备以及存储介质
CN111142838A (zh) 音频播放方法、装置、计算机设备及存储介质
CN111954058B (zh) 图像处理方法、装置、电子设备以及存储介质
CN108965769B (zh) 视频显示方法及装置
CN111031394B (zh) 视频制作的方法、装置、设备及存储介质
CN110992268B (zh) 背景设置方法、装置、终端及存储介质
CN111294551B (zh) 进行音视频传输的方法、装置、设备及存储介质
CN111064657B (zh) 关注账户分组的方法、装置、系统
CN112616082A (zh) 视频预览方法、装置、终端及存储介质
CN113032590A (zh) 特效展示方法、装置、计算机设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant