CN116320140A - 图像处理方法和处理装置 - Google Patents

图像处理方法和处理装置 Download PDF

Info

Publication number
CN116320140A
CN116320140A CN202211499938.3A CN202211499938A CN116320140A CN 116320140 A CN116320140 A CN 116320140A CN 202211499938 A CN202211499938 A CN 202211499938A CN 116320140 A CN116320140 A CN 116320140A
Authority
CN
China
Prior art keywords
interface
target video
folding
video frames
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211499938.3A
Other languages
English (en)
Inventor
曾星星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202211499938.3A priority Critical patent/CN116320140A/zh
Publication of CN116320140A publication Critical patent/CN116320140A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0208—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts
    • H04M1/0214—Foldable telephones, i.e. with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
    • H04M1/0268—Details of the structure or mounting of specific components for a display module assembly including a flexible display panel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278—Subtitling

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种图像处理方法和处理装置，属于电子设备技术领域。图像处理方法，由电子设备执行，电子设备包括折叠屏，图像处理方法包括：在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；其中，叠图图像是根据目标视频的目标视频帧生成的。

Description

图像处理方法和处理装置
技术领域
本申请属于电子设备技术领域，具体涉及一种图像处理方法和处理装置。
背景技术
在相关技术中，叠图图像是指将多帧图像堆叠起来，比如带有字幕的视频，将该视频的多张视频帧按照露出每张视频帧的字幕的部分的方式依次堆叠，最终堆叠行程的叠图图像包括最上面一张视频帧的全部内容，和其他每一张视频帧的底部字幕部分，因此叠图图像能够清晰、直观的展示视频内容。
而想要生成这样的叠图图像，需要用户手动逐帧暂停播放中的视频后逐帧截图，然后再通过图像编辑软件对截图得到的视频帧进行逐一处理，最终生成叠图图像，导致图像处理的操作繁琐，处理效率低。
发明内容
本申请实施例的目的是提供一种图像处理方法和处理装置，能够简化叠图图像处理的步骤，提高处理效率。
第一方面，本申请实施例提供了一种图像处理方法，由电子设备执行，电子设备包括折叠屏，图像处理方法包括：
在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；
响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；其中，叠图图像是根据目标视频的目标视频帧生成的。
第二方面，本申请实施例提供了一种图像处理装置，应用于电子设备，电子设备包括折叠屏，图像处理装置包括：
接收模块，用于在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；
显示模块，用于响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；其中，叠图图像是根据目标视频的目标视频帧生成的。
第三方面，本申请实施例提供了一种电子设备，包括处理器和存储器，存储器存储可在处理器上运行的程序或指令，程序或指令被处理器执行时实现如第一方面的方法的步骤。
第四方面，本申请实施例提供了一种可读存储介质，该可读存储介质上存储程序或指令，该程序或指令被处理器执行时实现如第一方面的方法的步骤。
第五方面，本申请实施例提供了一种芯片，该芯片包括处理器和通信接口，该通信接口和该处理器耦合，该处理器用于运行程序或指令，实现如第一方面的方法的步骤。
第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面的方法。
在本申请实施例中，利用折叠屏电子设备的特点，在折叠屏电子设备播放目标视频的过程中，如果检测到用户对折叠屏的折叠操作，则对当前电子设备的显示内容进行分屏，具体为分屏显示第一界面和第二界面，并根据接收到分屏操作的时间点，开始获取当前播放的视频的目标视频帧。
电子设备在分屏后的第一界面中继续播放视频，并在分屏后的第二界面中，显示根据获取到的目标视频帧自动生成的叠图图像，因此无需用户手动对视频帧进行截屏处理，也不需要用户通过图像编辑软件来处理视频帧，优化了生成叠图图像的操作步骤，提高了图像处理效率。
附图说明
图1示出了根据本申请实施例的图像处理方法的流程图；
图2示出了根据本申请实施例的图像处理方法中叠图图像的示意图；
图3示出了根据本申请实施例的电子设备的结构示意图；
图4示出了根据本申请实施例的电子设备的界面示意图之一；
图5示出了根据本申请实施例的电子设备的界面示意图之二；
图6示出了根据本申请实施例的图像处理装置的结构框图；
图7示出了根据本申请实施例的电子设备的结构框图；
图8为实现本申请实施例的一种电子设备的硬件结构示意图。
附图标记：
300电子设备，302第一折叠本体，304第二折叠本体。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法和处理装置进行详细地说明。
在本申请的一些实施例中，提供了一种图像处理方法，该方法由电子设备执行，电子设备包括折叠屏，图1示出了根据本申请实施例的图像处理方法的流程图，如图1所示，图像处理方法包括：
步骤102，在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；
步骤104，响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；
其中，叠图图像是根据目标视频的目标视频帧生成的。
在本申请实施例中，叠图图像是指将多帧图像堆叠起来形成的图像，对于带有字幕的视频，将带有字幕的视频的多张视频帧，按照其在视频的时间轴内的先后顺序进行堆叠，最早出现的视频帧被堆叠在最下方，最晚出现的视频帧被堆叠在最上方。
具体地，图2示出了根据本申请实施例的图像处理方法中叠图图像的示意图，如图2所示，将3张视频帧进行堆叠，堆叠后的叠图图像的图像内容包括第3张视频帧的帧图像内容和这3张视频帧的字幕内容。具体地，叠图图像中显示的帧图像内容可以是三张视频帧中任一个视频帧的帧图像内容。
电子设备具体为具有折叠屏的电子设备，如折叠屏手机，图3示出了根据本申请实施例的电子设备的结构示意图，如图3所示，电子设备300包括第一折叠本体302和第二折叠本体304。当电子设备300处于展开状态时，第一折叠本体302和第二折叠本体304之间的角度为180°，即第一折叠本体与第二折叠本体的屏幕能够组成一块屏幕进行显示内容，当电子设备300被折叠时，第一折叠本体和第二折叠本体之间的角度小于180°。
图4示出了根据本申请实施例的电子设备的界面示意图之一，如图4所示，电子设备400显示视频的播放界面402，在视频播放界面402中播放有目标视频的视频播放内容。
在播放视频的过程中，当接收到用户对电子设备400的折叠输入时，电子设备400分屏第一界面404和第二界面406。其中，第一界面404用于继续播放目标视频，第二界面406则显示根据目标视频帧生成的叠图图像。
能够理解的，此时对电子设备的折叠输入并不是完全折叠的输入，即，电子设备的两个屏幕的还是朝向使用者并均可以显示内容的。
具体地，在接收到用户的折叠操作时，电子设备开始分屏显示，并同时开始获取当前播放中的目标视频的视频帧，在一些实施方式中，电子设备在接收到折叠操作后，采集播放中的目标视频的全部视频帧，并对其中内容相同的视频帧进行合并处理，因此采集得到的视频帧中的显示内容不同。
在另一些实施方式中，电子设备在接收到用户的折叠操作后，电子设备从当前时刻开始采集的视频帧，并实时识别视频帧中的字幕部分，每当字幕变更时，采集一个视频帧，从而采集得到对应不同字幕的视频帧。
在采集得到视频帧后，电子设备对这些视频帧进行叠图处理，具体可以为：按照视频帧的采集顺序，将这些视频帧堆叠起来，并露出每个视频帧的字幕部分，最终得到的叠图图像如图2所示，将叠图图像在第三界面中进行显示，使用户能够实时预览生成的叠图图像。
本申请实施例能够根据用户对折叠屏的折叠操作，自动获取播放中的视频的视频帧，并根据获取到的视频帧自动生成的叠图图像，因此无需用户手动对视频帧进行截屏处理，也不需要用户通过图像编辑软件来处理视频帧，简化了生成叠图图像的操作步骤，提高了图像处理效率。
在本申请的一些实施例中，响应于折叠操作，分屏显示第一界面和第二界面，具体包括：
响应于折叠操作，分屏显示第一界面、第二界面和第三界面，第三界面用于显示目标视频的N个视频帧，N个视频帧包括目标视频帧，N为正整数。
在本申请实施例中，图5示出了根据本申请实施例的电子设备的界面示意图之二，如图5所示，在用户对折叠屏进行了折叠操作后，电子设备500分屏显示第一界面502，第二界面504和第三界面506。
其中，第一界面502继续播放目标视频，第二界面504显示根据获取到的N个目标视频帧生成的叠图图像，第三界面506显示获取到的N个目标视频帧。
在一些实施方式中，第三界面506中显示获取到的全部N个目标视频帧。在另一些实施方式中，第三界面506中显示最新获取到的一帧目标视频帧，用户可以通过滑动输入来切换第三界面506中显示的目标视频帧。
第二界面504中显示的叠图图像可以是动态生成的，即每当电子设备新获取到一帧目标视频帧，则立刻将该帧目标视频帧与当前显示叠图图像进行堆叠，从而形成为新的叠图图像，用户可以通过第二界面504实时预览叠图图像的当前状态。
在一些实施方式中，用户可以通过第二界面504和第三界面506来实时对叠图图像进行编辑，如删除第二界面504中的某个目标视频帧A，从而在叠图图像中去掉该目标视频帧A对应的内容，用户还可以调整第二界面504中视频帧的顺序，来调整叠图图像中视频帧的堆叠顺序。
本申请实施例通过分别显示获取到的视频帧和叠图图像，使用户能够随时掌握叠图图像的生成情况，并实时对视频帧和生成的叠图图像进行编辑和调整，提高了图像处理的自由度。
在本申请的一些实施例中，折叠操作的操作时刻与目标视频的第一播放时间点相对应；
在接收对折叠屏的折叠操作之后，图像处理方法还包括：
在接收到对折叠屏的第一展开操作的情况下，根据第一展开操作的操作时刻确定目标视频的第二播放时间点；
在未接收到第一展开操作的情况下，根据当前时刻确定第二播放时间点；
其中，N个视频帧为目标视频在第一播放时间点至第二播放时间点之间的全部视频帧。
在本申请实施例中，当用户对折叠屏进行折叠操作时，将接收到折叠操作的时刻下，目标视频的播放进度记为第一播放时间点，电子设备以第一播放时间点为起始点，开始获取目标视频播放过程中的每一个视频帧，并作为目标视频帧。
其中，上述的折叠操作是将折叠屏的折叠角度折叠至小于或等于第一角度阈值，并大于或等于第二角度阈值的操作。例如，折叠操作是将折叠屏的折叠角度折叠至小于或等于145°，并大于或等于90°的操作。因此，可以理解的，折叠后的折叠屏不处于完全折叠状态，两个屏幕上均能显示内容，并被使用者看到。
如果在接收到用户对折叠屏的折叠操作之后，接收到用户对折叠屏的第一展开操作，则将接收到第一展开操作的时刻下，目标视频的播放进度记为第二播放时间点，电子设备以目标视频的第二播放时间点为获取目标视频帧的终点，也就是说，电子设备获取目标视频在接收到折叠操作的时间点到接收到第一展开操作的时间点之间的全部视频帧，并作为目标视频帧。
如果在接收到用户对折叠屏的折叠操作之后，尚未接收到用户的第一展开操作，则将当前目标视频的当前播放进度作为第二播放时间点，也就是说，如果目标视频处于播放中的状态，则跟随目标视频的播放进度，实时获取目标视频从第一播放时间点到当前的第二播放时间点之间的全部视频帧，并作为目标视频帧。
能够理解的是，如果用户对目标视频进行了暂停操作，则第二播放时间点为接收到暂停操作的时间点，即目标视频帧是接收到折叠操作的第一播放时间点到接收到暂停操作的第二播放时间点之间的全部视频帧。
其中，上述的第一展开操作，是将折叠屏的折叠角度展开至大于第一角度阈值的操作。如上述示例，该第一操作为将折叠屏展开至150°的操作。进一步可以理解的，该第一展开操作不会让折叠屏处于完全展开状态，即折叠屏的折叠角度不为180°。
本申请实施例通过根据用户对折叠屏的折叠操作和第一展开操作，来控制电子设备获取视频帧的数量，因此无需用户手动对视频进行逐帧截图，提高了图像处理的效率。
在本申请的一些实施例中，在响应于折叠操作，分屏显示第一界面和第二界面之前，图像处理方法还包括：
在N个视频帧的内容中包括字幕的情况下，在N个视频帧中，确定M个视频帧组，其中，M个视频帧组中的每个视频帧组中的视频帧的字幕相同；
在M个视频帧组中的每一个视频帧组中分别确定一个目标视频帧，以得到M个目标视频帧；
根据M个目标视频帧生成叠图图像，其中，叠图图像的显示内容包括与M个目标视频帧对应的M条字幕。
在本申请实施例中，目标视频包括字幕，则获取到的N个视频帧的内容中也会包括字幕。字幕可以位于目标视频的视频画面的底部，也可以位于目标视频的视频画面的顶部。以字幕位于目标视频的视频画面的底部为例，进行详细举例说明如下：
在接收到用户的折叠操作后，电子设备开始获取播放中的目标视频的视频帧。能够理解的，视频是通过按照一定的帧率连续切换视频帧，来模拟出画面“动起来”的效果。以帧率为24帧的视频为例，就是在1秒内快速切换显示24个连续的视频帧，其中每个视频帧的显示时长为1/24秒。
在获取视频帧时，电子设备会将这些视频帧全部获取，比如用户的折叠操作对应的第一播放时间点，和第一展开操作对应的第二播放时间点之间的时间为3秒，则电子设备共采集到3×24＝72个视频帧，即N＝72。
由于这72个视频帧中，存在部分视频帧的内容是相同或相近的。对此，本申请实施例基于每个目标视频帧中的字幕内容，对这些目标视频帧进行筛选，并从中确定出字幕不同的M个视频帧组，M个视频帧组分别对应于M条不同的字幕，即每个视频帧组中的视频帧对应的字幕是相同的，不同的视频帧组对应的字幕是不同的。进一步的，可以从这M个视频帧组中分别确定出一个视频帧作为目标视频帧，并根据这M个目标视频帧来生成叠图图像。
举例来说，72个视频帧中，第1帧至第24帧的字幕内容均为第一字幕，第25帧至第48帧的字幕内容均为第二字幕，第49帧至第72帧的字幕内容均为第三字幕，在上述实施方式中，则将这72个视频帧根据字幕内容分为三组，即M＝3，具体地，第1帧至第24帧为第一组视频帧，第25帧至第48帧为第二组视频帧，第49帧至第72帧为第三组视频帧。
进一步的，在一些实施例中，可以将第1帧、第25帧和第49帧分别确定为各组视频帧中的目标视频帧，并基于这3张视频帧生成叠图图像。
在另一些实施方式中，可以通过图像识别技术，在第1帧至第24帧中，选出画面最清晰的一张视频帧，作为第一个用于生成叠图图像的目标视频帧，同理，在第25帧至第48帧中，和第49帧至第72帧中同样选出最清晰的一帧作为用于生成叠图图像的目标视频帧。
本申请实施例通过对获取到的N个视频帧进行筛选，从中筛选出字幕内容不同的M个目标视频帧，通过这些字幕内容不同的目标视频帧来生成叠图图像，能够有效减少生成的叠图图像中的重复内容。
在本申请的一些实施例中，图像处理方法还包括：
接收对折叠屏的第二展开操作；
响应于第二展开操作，取消分屏显示第一界面和第二界面，并全屏显示第四界面，其中，第四界面的显示内容包括以下至少一项：
叠图图像，目标视频。
在本申请实施例中，对折叠屏的第二展开操作，具体为将折叠屏完整展开的操作。能够理解的，第二展开操作具体可以为将折叠屏展开至折叠角度为180°的操作。
具体地，具有折叠屏的电子设备一般设置有锁扣，当电子设备的折叠屏完全展开时，锁扣会锁止折叠屏的折叠角度，此时电子设备具有变成为一个类似平板电脑的大屏设备。而第二展开操作，就可以是将电子设备的折叠屏展开至锁止状态的操作。
在电子设备中分屏显示有第一界面和第二界面时，如果接收到了用户的展开操作，则说明用户确定当前第二界面中显示的叠图图像就是自己想要的叠图图像，此时通过对电子设备的折叠进行完全展开，以使得电子设备取消分屏，即取消分屏显示第一界面和第二界面，并全屏显示第四界面。
在显示的第四界面中，可以是显示最终生成的叠图图像，也可以是继续播放目标视频，并可以进一步将叠图图像直接保存，用户可以自由设置第四界面的显示内容，也可以通过用户输入，来切换第四界面当前显示的内容，如在第四界面显示叠图图像的情况下，接收到用户的切换输入，则在第四界面中继续播放目标视频。
能够理解的是，在通过第四界面显示叠图图像时，目标视频可以是处于暂停状态的，也可以在后台继续播放，本申请实施例对此不做限制。
本申请实施例通过用户对折叠屏的第二展开操作，来快速结束对目标视频进行叠图的处理，并可以大屏显示最终生成的叠图图像或对叠图图像进行保存，从而能够在得到用户满意的叠图图像时，对该叠图图像进行保存。
在本申请的一些实施例中，实例性地，用户在通过电子设备播放目标视频时，遇到精彩片段时，用户可以通过弯曲折叠手机屏幕，来进行折叠输入，从而触发电子设备生成叠图图像。
此时电子屏幕自动进行左右分屏成左右，左边为视频播放区域，右边区域为叠图预览区域。此时会实时检测视频的每一帧视频帧的字幕变化，自动截取字幕发生变化的视频帧，并保存成帧图片。在右边分屏的上半部分，实时将采集的每一帧视频帧进行展示，用户可手动拖拽对部分视频帧进行删除、替换或者改变顺序。而在右边分屏的下半部分显示由上半部分区域中的视频帧自动生成的叠图图像，每一帧图像按照用户预先定义的方式，如按照时间轴顺序进行叠图。
具体地，对于叠图图像显示叠加的间距，可以由用户手动设置，如果用户没有设置，则自动以默认的间距设置。
当生成的叠图图像不清晰，或者不满足用户需求时，用户可以从右边分屏的上半部分中，删除部分不清楚的视频帧。具体地，在用户手指停留在某张视频帧时，会自动对该视频帧放大显示，以方便用户查看挑选。
用户需要在预览的叠图图像中新增或者插入新的图像时，可以长按视频播放区，将此时播放的视频帧进行选中，并直接添加至预览的叠图图像中。此时，系统会自动根据每一帧视频帧的时间排序，重新对预览的叠图图像进行更新。
在用户完成叠图图像的编辑之后，即用户已经获得了满意的叠图图像之后，可以将折叠屏恢复至展开状态，此时退出当前页面，并可以全屏展示叠图图像。从而用户可以直接对叠图图像进行转发分享或继续编辑等处理。此时用户长按图片并上滑即可退出当前图片查看页面，恢复全屏视频播放。
本申请实施例提供的图像处理方法，执行主体可以为图像处理装置。本申请实施例中以图像处理装置执行图像处理的方法为例，说明本申请实施例提供的图像处理的装置。
在本申请的一些实施例中，提供了一种图像处理装置，应用于电子设备，电子设备包括折叠屏，图6示出了根据本申请实施例的图像处理装置的结构框图，如图6所示，图像处理装置600包括：
接收模块602，用于在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；
显示模块604，用于响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；其中，叠图图像是根据目标视频的目标视频帧生成的。
本申请实施例能够根据用户对折叠屏的折叠操作，自动获取播放中的视频的视频帧，并根据获取到的视频帧自动生成的叠图图像，因此无需用户手动对视频帧进行截屏处理，也不需要用户通过图像编辑软件来处理视频帧，优化了生成叠图图像的操作步骤，提高了图像处理效率。
在本申请的一些实施例中，显示模块，具体用于响应于折叠操作，分屏显示第一界面、第二界面和第三界面，第三界面用于显示目标视频的N个视频帧，N个视频帧包括目标视频帧，N为正整数。
本申请实施例通过分别显示获取到的视频帧和叠图图像，使用户能够随时掌握叠图图像的生成情况，并实时对视频帧和生成的叠图图像进行编辑和调整，提高了图像处理的自由度。
在本申请的一些实施例中，折叠操作的操作时刻与目标视频的第一播放时间点相对应；
图像处理装置还包括确定模块，用于：
在接收到对折叠屏的第一展开操作的情况下，根据第一展开操作的操作时刻确定目标视频的第二播放时间点；
在未接收到第一展开操作的情况下，根据当前时刻确定第二播放时间点；
其中，N个视频帧为目标视频在第一播放时间点至第二播放时间点之间的全部视频帧。
本申请实施例通过根据用户对折叠屏的折叠操作和展开操作，来控制电子设备获取视频帧，因此无需用户手动对视频进行逐帧截图，简化了叠图图像的图像处理的步骤，提高了图像处理的效率。
在本申请的一些实施例中，确定模块，还用于在N个视频帧的内容中包括字幕的情况下，在N个视频帧中，确定M个视频帧组，其中，M个视频帧组中的每个视频帧组中的视频帧的字幕相同；在M个视频帧组中的每一个视频帧组中分别确定一个目标视频帧，以得到M个目标视频帧；
图像处理装置还包括：
生成模块，用于根据M个目标视频帧生成叠图图像，其中，叠图图像的显示内容包括与M个视频帧对应的M条字幕。
本申请实施例通过对获取到的目标视频帧进行筛选，从中筛选出字幕内容不同的M个目标视频帧，通过这些字幕内容不同的目标视频帧来生成叠图图像，能够有效减少获取的视频帧和生成的叠图图像中的重复内容，便于用户操作，提高图像处理效率。
在本申请的一些实施例中，接收模块，还用于接收对折叠屏的第二展开操作；
显示模块，还用于响应于第二展开操作，取消分屏显示第一界面和第二界面，并全屏显示第四界面，其中，第四界面的显示内容包括以下至少一项：
叠图图像，目标视频。
本申请实施例通过用户将折叠屏展开的操作，来结束叠图图像的处理，并大屏显示最终生成的叠图图像，同时在用户退出处理界面后，自动恢复原始视频的播放，从而能够减少用户操作步骤。
本申请实施例中的图像处理装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtualreality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
本申请实施例中的图像处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为iOS操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。
本申请实施例提供的图像处理装置能够实现上述方法实施例实现的各个过程，为避免重复，这里不再赘述。
可选地，本申请实施例还提供一种电子设备，图7示出了根据本申请实施例的电子设备的结构框图，如图7所示，电子设备700包括处理器702，存储器704，存储在存储器704上并可在处理器702上运行的程序或指令，该程序或指令被处理器702执行时实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要说明的是，本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。
图8为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备800包括但不限于：射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示单元806、用户输入单元807、接口单元808、存储器809以及处理器810等部件。
本领域技术人员可以理解，电子设备800还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器810逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。
其中，处理器810，用于在电子设备正在播放目标视频的情况下，接收对折叠屏的折叠操作；
显示单元806，用于响应于折叠操作，分屏显示第一界面和第二界面，其中，第一界面包括目标视频，第二界面包括叠图图像；其中，叠图图像是根据目标视频的目标视频帧生成的。
本申请实施例能够根据用户对折叠屏的折叠操作，自动获取播放中的视频的视频帧，并根据获取到的视频帧自动生成的叠图图像，因此无需用户手动对视频帧进行截屏处理，也不需要用户通过图像编辑软件来处理视频帧，优化了生成叠图图像的操作步骤，提高了图像处理效率。
可选地，显示单元806，具体用于响应于折叠操作，分屏显示第一界面、第二界面和第三界面，第三界面用于显示目标视频的N个视频帧，N个视频帧包括目标视频帧，N为正整数。
本申请实施例通过分别显示获取到的视频帧和叠图图像，使用户能够随时掌握叠图图像的生成情况，并实时对视频帧和生成的叠图图像进行编辑和调整，提高了图像处理的自由度。
可选地，折叠操作的操作时刻与目标视频的第一播放时间点相对应；
处理器810，还用于在接收到对折叠屏的第一展开操作的情况下，根据第一展开操作的操作时刻确定目标视频的第二播放时间点；
在未接收到第一展开操作的情况下，根据当前时刻确定第二播放时间点；
其中，N个视频帧为目标视频在第一播放时间点至第二播放时间点之间的全部视频帧。
本申请实施例通过根据用户对折叠屏的折叠操作和展开操作，来控制电子设备获取视频帧，因此无需用户手动对视频进行逐帧截图，简化了叠图图像的图像处理的步骤，提高了图像处理的效率。
可选地，处理器810，还用于在N个视频帧的内容中包括字幕的情况下，在N个视频帧中，确定M个视频帧组，其中，M个视频帧组中的每个视频帧组中的视频帧的字幕相同；在M个视频帧组中的每一个视频帧组中分别确定一个目标视频帧，以得到M个目标视频帧；生成模块，用于根据M个目标视频帧生成叠图图像，其中，叠图图像的显示内容包括与M个视频帧对应的M条字幕。
本申请实施例通过对获取到的目标视频帧进行筛选，从中筛选出字幕内容不同的M个目标视频帧，通过这些字幕内容不同的目标视频帧来生成叠图图像，能够有效减少获取的视频帧和生成的叠图图像中的重复内容，便于用户操作，提高图像处理效率。
可选地，处理器810，还用于接收对折叠屏的第二展开操作；
显示单元806，还用于响应于第二展开操作，取消分屏显示第一界面和第二界面，并全屏显示第四界面，其中，第四界面的显示内容包括以下至少一项：
叠图图像，目标视频。
本申请实施例通过用户将折叠屏展开的操作，来结束叠图图像的处理，并大屏显示最终生成的叠图图像，同时在用户退出处理界面后，自动恢复原始视频的播放，从而能够减少用户操作步骤。
应理解的是，本申请实施例中，输入单元804可以包括图形处理器(GraphicsProcessing Unit，GPU)8041和麦克风8042，图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元806可包括显示面板8061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板8061。用户输入单元807包括触控面板8071以及其他输入设备8072中的至少一种。触控面板8071，也称为触摸屏。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
存储器809可用于存储软件程序以及各种数据。存储器809可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器809可以包括易失性存储器或非易失性存储器，或者，存储器809可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器809包括但不限于这些和任意其它适合类型的存储器。
处理器810可包括一个或多个处理单元；可选的，处理器810集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器810中。
本申请实施例还提供一种可读存储介质，可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
其中，处理器为上述实施例中的电子设备中的处理器。可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(RandomAccess Memory，RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片，芯片包括处理器和通信接口，通信接口和处理器耦合，处理器用于运行程序或指令，实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例的方法。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种图像处理方法，由电子设备执行，其特征在于，所述电子设备包括折叠屏，所述图像处理方法包括：
在所述电子设备正在播放目标视频的情况下，接收对所述折叠屏的折叠操作；
响应于所述折叠操作，分屏显示第一界面和第二界面，其中，所述第一界面包括所述目标视频，所述第二界面包括叠图图像；其中，所述叠图图像是根据所述目标视频的目标视频帧生成的。
2.根据权利要求1所述的图像处理方法，其特征在于，响应于所述折叠操作，分屏显示第一界面和第二界面，具体包括：
响应于所述折叠操作，分屏显示所述第一界面、所述第二界面和第三界面，所述第三界面用于显示所述目标视频的N个视频帧，所述N个视频帧包括所述目标视频帧，N为正整数。
3.根据权利要求1所述的图像处理方法，其特征在于，所述折叠操作的操作时刻与所述目标视频的第一播放时间点相对应；
在所述接收对所述折叠屏的折叠操作之后，所述图像处理方法还包括：
在接收到对所述折叠屏的第一展开操作的情况下，根据所述第一展开操作的操作时刻确定所述目标视频的第二播放时间点；
在未接收到所述第一展开操作的情况下，根据所述当前时刻确定所述第二播放时间点；
其中，所述N个视频帧为所述目标视频在所述第一播放时间点至所述第二播放时间点之间的全部视频帧。
4.根据权利要求3所述的图像处理方法，其特征在于，在所述响应于所述折叠操作，分屏显示第一界面和第二界面之前，所述图像处理方法还包括：
在所述N个视频帧的内容中包括字幕的情况下，在所述N个视频帧中，确定M个视频帧组，其中，所述M个视频帧组中的每个视频帧组中的视频帧的字幕相同；
在所述M个视频帧组中的每一个视频帧组中分别确定一个所述目标视频帧，以得到M个目标视频帧；
根据所述M个目标视频帧生成所述叠图图像，其中，所述叠图图像的显示内容包括与所述M个目标视频帧对应的M条字幕。
5.根据权利要求1至4中任一项所述的图像处理方法，其特征在于，还包括：
接收对所述折叠屏的第二展开操作；
响应于所述第二展开操作，取消分屏显示所述第一界面和所述第二界面，并全屏显示第四界面，其中，所述第四界面的显示内容包括以下至少一项：
所述叠图图像，所述目标视频。
6.一种图像处理装置，应用于电子设备，其特征在于，所述电子设备包括折叠屏，所述图像处理装置包括：
接收模块，用于在所述电子设备正在播放目标视频的情况下，接收对所述折叠屏的折叠操作；
显示模块，用于响应于所述折叠操作，分屏显示第一界面和第二界面，其中，所述第一界面包括所述目标视频，所述第二界面包括叠图图像；其中，所述叠图图像是根据所述目标视频的目标视频帧生成的。
7.根据权利要求6所述的图像处理装置，其特征在于，
所述显示模块，具体用于响应于所述折叠操作，分屏显示所述第一界面、所述第二界面和第三界面，所述第三界面用于显示所述目标视频的N个视频帧，所述N个视频帧包括所述目标视频帧，N为正整数。
8.根据权利要求6所述的图像处理装置，其特征在于，所述折叠操作的操作时刻与所述目标视频的第一播放时间点相对应；
所述图像处理装置还包括确定模块，用于：
在接收到对所述折叠屏的第一展开操作的情况下，根据所述第一展开操作的操作时刻确定所述目标视频的第二播放时间点；
在未接收到所述第一展开操作的情况下，根据所述当前时刻确定所述第二播放时间点；
其中，所述N个视频帧为所述目标视频在所述第一播放时间点至所述第二播放时间点之间的全部视频帧。
9.根据权利要求8所述的图像处理装置，其特征在于，所述确定模块，还用于在所述N个视频帧的内容中包括字幕的情况下，在所述N个视频帧中，确定M个视频帧组，其中，所述M个视频帧组中的每个视频帧组中的视频帧的字幕相同；以及
在所述M个视频帧组中的每一个视频帧组中分别确定一个所述目标视频帧，以得到M个目标视频帧；
所述图像处理装置还包括：
生成模块，用于根据所述M个目标视频帧生成所述叠图图像，其中，所述叠图图像的显示内容包括与所述M个视频帧对应的M条字幕。
10.根据权利要求6至9中任一项所述的图像处理装置，其特征在于，
所述接收模块，还用于接收对所述折叠屏的第二展开操作；
所述显示模块，还用于响应于所述第二展开操作，取消分屏显示所述第一界面和所述第二界面，并全屏显示第四界面，其中，所述第四界面的显示内容包括以下至少一项：
所述叠图图像，所述目标视频。
CN202211499938.3A 2022-11-28 2022-11-28 图像处理方法和处理装置 Pending CN116320140A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211499938.3A CN116320140A (zh) 2022-11-28 2022-11-28 图像处理方法和处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211499938.3A CN116320140A (zh) 2022-11-28 2022-11-28 图像处理方法和处理装置

Publications (1)

Publication Number Publication Date
CN116320140A true CN116320140A (zh) 2023-06-23

Family

ID=86796520

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211499938.3A Pending CN116320140A (zh) 2022-11-28 2022-11-28 图像处理方法和处理装置

Country Status (1)

Country Link
CN (1) CN116320140A (zh)

Similar Documents

Publication Publication Date Title
CN108900902B (zh) 确定视频背景音乐的方法、装置、终端设备及存储介质
CN112714253B (zh) 视频录制方法、装置、电子设备和可读存储介质
CN114422692B (zh) 视频录制方法、装置及电子设备
CN113207038B (zh) 视频处理方法、视频处理装置和电子设备
CN114125297B (zh) 视频拍摄方法、装置、电子设备及存储介质
CN114025237B (zh) 视频生成方法、装置和电子设备
CN115756275A (zh) 截屏方法、截屏装置、电子设备及可读存储介质
CN115499589A (zh) 拍摄方法、装置、电子设备及介质
CN116320140A (zh) 图像处理方法和处理装置
CN114786062A (zh) 信息推荐方法、装置和电子设备
CN114245017A (zh) 一种拍摄方法、装置及电子设备
CN113596329A (zh) 拍摄方法和拍摄装置
CN114390205B (zh) 拍摄方法、装置和电子设备
CN112261483A (zh) 视频输出方法及装置
CN114222069B (zh) 拍摄方法、拍摄装置及电子设备
CN114286010B (zh) 拍摄方法、装置、电子设备及介质
CN114500852B (zh) 拍摄方法、拍摄装置、电子设备和可读存储介质
CN115334242B (zh) 视频录制方法、装置、电子设备及介质
CN117676228A (zh) 信息显示方法、装置、电子设备及可读存储介质
CN115589459A (zh) 视频录制方法及其装置
CN117395460A (zh) 视频处理方法、视频处理装置、电子设备和存储介质
CN115174812A (zh) 视频生成方法、视频生成装置及电子设备
CN116027950A (zh) 截屏方法和截屏装置
CN117676256A (zh) 视频播放方法、装置、电子设备及可读存储介质
CN117041725A (zh) 拍摄方法、装置和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination