CN113259740A - 一种多媒体处理方法、装置、设备及介质 - Google Patents

一种多媒体处理方法、装置、设备及介质 Download PDF

Info

Publication number
CN113259740A
CN113259740A CN202110547916.9A CN202110547916A CN113259740A CN 113259740 A CN113259740 A CN 113259740A CN 202110547916 A CN202110547916 A CN 202110547916A CN 113259740 A CN113259740 A CN 113259740A
Authority
CN
China
Prior art keywords
content
multimedia interface
playing
multimedia
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110547916.9A
Other languages
English (en)
Inventor
陈可蓉
周伊诺
龚彪
杨晶生
赵田
刘敬晖
吕大千
杨耀
成涛
潘灶烽
史田辉
唐荣意
贡国栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zitiao Network Technology Co Ltd
Original Assignee
Beijing Zitiao Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zitiao Network Technology Co Ltd filed Critical Beijing Zitiao Network Technology Co Ltd
Priority to CN202110547916.9A priority Critical patent/CN113259740A/zh
Publication of CN113259740A publication Critical patent/CN113259740A/zh
Priority to US18/262,301 priority patent/US20240121479A1/en
Priority to PCT/CN2022/085468 priority patent/WO2022242351A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开实施例涉及一种多媒体处理方法、装置、设备及介质，其中该方法包括：展示第一多媒体界面，第一多媒体界面中包括第一内容；接收用户在第一多媒体界面中的界面切换请求；将当前展示的第一多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容；其中，第一内容包括第二内容以及与第二内容关联的其他内容，第二内容包括目标音频以及目标音频对应的目标字幕。采用上述技术方案，可以实现包括两种不同内容的界面的切换，其中一个界面可以仅包括音频和字幕，有助于用户在复杂场景下专注于多媒体内容，并且提升了多媒体内容播放的灵活性，可以满足多种场景的需求，进而提升了用户的体验效果。

Description

一种多媒体处理方法、装置、设备及介质
技术领域
本公开涉及多媒体技术领域，尤其涉及一种多媒体处理方法、装置、设备及介质。
背景技术
随着智能设备和多媒体技术的不断发展，通过智能设备进行信息记录越来越多地被应用在日常生活和办公生活中。
在一些相关产品中，可以对信息记录的多媒体文件进行回放以供再次回顾。目前回放多媒体文件的方式较为固定，并且方式单一，灵活性不高。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种多媒体处理方法、装置、设备及介质。
本公开实施例提供了一种多媒体处理方法，所述方法包括：
展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
接收用户在第一多媒体界面中的界面切换请求；
将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
本公开实施例还提供了一种多媒体处理装置，所述装置包括：
第一界面模块，用于展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
请求模块，用于接收用户在第一多媒体界面中的界面切换请求；
第二界面模块，用于将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
本公开实施例还提供了一种电子设备，所述电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现如本公开实施例提供的多媒体处理方法。
本公开实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行如本公开实施例提供的多媒体处理方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点：本公开实施例提供的多媒体处理方案，展示第一多媒体界面，第一多媒体界面中包括第一内容；接收用户在第一多媒体界面中的界面切换请求；将当前展示的第一多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容；其中，第一内容包括第二内容以及与第二内容关联的其他内容，第二内容包括目标音频以及目标音频对应的目标字幕。采用上述技术方案，可以实现包括两种不同内容的界面的切换，其中一个界面可以仅包括音频和字幕，有助于用户在复杂场景下专注于多媒体内容，并且提升了多媒体内容播放的灵活性，可以满足多种场景的需求，进而提升了用户的体验效果。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
图1为本公开实施例提供的一种多媒体处理方法的流程示意图；
图2为本公开实施例提供的另一种多媒体处理方法的流程示意图；
图3为本公开实施例提供的一种多媒体界面的示意图；
图4为本公开实施例提供的另一种多媒体界面的示意图；
图5为本公开实施例提供的一种浮窗组件的示意图；
图6为本公开实施例提供的一种多媒体处理装置的结构示意图；
图7为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
图1为本公开实施例提供的一种多媒体处理方法的流程示意图，该方法可以由多媒体处理装置执行，其中该装置可以采用软件和/或硬件实现，一般可集成在电子设备中。如图1所示，该方法包括：
步骤101、展示第一多媒体界面，第一多媒体界面中包括第一内容。
其中，多媒体界面是指用于对多种类型的多媒体信息进行展示的界面，多媒体信息可以包括音频、视频和文本等，具体不限。第一多媒体界面是指多媒体界面中的一个，第一内容是指在第一多媒体界面中展示的内容，可以包括多种多媒体信息，例如在会议录制的场景下，第一内容可以包括录制绘制的音频和/或视频、对应的字幕内容以及会议纪要等与会议相关的内容。
本公开实施例中，客户端根据用户的请求，可以获取第一内容，并展示第一多媒体界面以及在第一多媒体界面中展示第一内容。由于第一内容中可以包括多种类型的信息，第一多媒体界面中可以针对各类型的信息设置不同的展示区域进行展示，例如第一多媒体界面中可以设置音视频区域、字幕区域以及纪要展示区域等区域，分别用于展示音频、视频、字幕内容以及纪要等。
步骤102、接收用户在第一多媒体界面中的界面切换请求。
其中，界面切换请求是指用于进行不同界面之间切换的请求。
本公开实施例中，展示第一多媒体界面之后，可以检测用户在第一媒体界面上的触发操作，当检测到用户对界面切换按键的触发操作之后，可以确定接收到界面切换请求。其中，界面切换按键可以为预先设置在第一多媒体界面中的虚拟按键，具体位置和表现形式不限。
步骤103、将当前展示的第一多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容。
其中，第二多媒体界面是与上述第一多媒体界面展示内容不同的一个多媒体界面。上述第一多媒体界面中展示的第一内容可以包括第二内容以及与第二内容关联的其他内容，也即第二内容可以为上述第一多媒体界面的第一内容的一部分。第二内容可以包括目标音频以及目标音频对应的目标字幕，目标音频可以为任意一个记录信息的音频数据，例如目标音频可以为记录会议过程中的音频数据，目标字幕是指对目标音频采用语音识别(Automatic Speech Recognition，ASR)技术识别和处理之后得到的文本内容，本公开实施例中对具体的语音识别技术不作限定，例如可以采用随机模型法或人工神经网络的方法等。
本公开实施例中，接收到界面切换请求之后，可以将当前展示的第一多媒体界面关闭并打开第二多媒体界面，在第二多媒体界面中展示第二内容，实现界面的切换。由于第二多媒体界面中仅包括音频和字幕，有助于用户在复杂场景下专注于多媒体内容。
可以理解的是，在第二多媒体界面中展示第二内容之后，还可以基于用户对第二多媒体界面中退出按键的触发操作，返回第一多媒体界面中，实现两种不同模式的多媒体界面的灵活切换，用户可以根据实际需求进行切换。
本公开实施例提供的多媒体处理方案，展示第一多媒体界面，第一多媒体界面中包括第一内容；接收用户在第一多媒体界面中的界面切换请求；将当前展示的第一多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容；其中，第一内容包括第二内容以及与第二内容关联的其他内容，第二内容包括目标音频以及目标音频对应的目标字幕。采用上述技术方案，可以实现包括两种不同内容的界面的切换，其中一个界面可以仅包括音频和字幕，有助于用户在复杂场景下专注于多媒体内容。此外，以多种形式(例如，在第一多媒体界面播放和在第二多媒体界面播放)来播放多媒体内容，提升了多媒体内容播放的灵活性，可以满足多种场景的需求，进而提升了用户的体验效果。
在一些实施例中，多媒体处理方法还可以包括：接收对目标音频的播放触发操作；播放目标音频，并在目标音频的播放过程中，基于目标字幕中包括的字幕语句的时间戳，对与目标音频的播放进度对应的字幕语句进行突出展示。
其中，播放触发操作是指用于播放多媒体的触发操作，播放触发操作的具体形式可以为多种，具体不限。目标字幕属于结构化文本，包括段、句和词三层结构，字幕语句是目标字幕中的句，一个字幕语句可以包括至少一个字或词。由于目标字幕是通过对目标音频进行语音识别得到的，每个字幕语句均具有对应的语音语句，每个语音语句对应于目标音频中的一个时间戳。在对目标音频进行语音识别之后可以得到目标字幕，对目标字幕中的每个字幕语句可以确定其在目标音频中对应的语音语句，由于每个语音语句对应于目标音频的一个播放时间，可以根据语音语句和目标音频的播放时间之间的对应关系，确定目标字幕中每个字幕语句的时间戳。突出展示的具体方式本公开实施例不作限定，例如突出展示可以为采用高亮、加粗、增大显示字号、更改显示字体和添加下划线等方式中的一种或多种进行展示。
具体的，当接收到用户对目标音频的播放触发操作之后，可以播放目标音频，并在播放目标音频的过程中，根据目标字幕中包括的各字幕语句的时间戳，依次对与播放进度对应的字幕语句进行突出展示，也即随着目标音频的播放，目标字幕中的字幕语句随着播放的进行，依次进行突出展示。
上述方案中，当音频播放的过程中对应的字幕语句也可以关联突出展示，可以实现多媒体和字幕之间的关联互动，以使用户更好地了解多媒体内容，提高了用户的体验效果。
在一些实施例中，多媒体处理方法还可以包括：响应于目标音频播放结束，获取与目标音频关联的下一音频，切换播放下一音频。在这里，目标音频的播放结束可以基于用户的操作确定，或者，目标音频的播放结束也可以基于其播放进度达到播放完成时刻而确定。
其中，下一音频是指预先设置的与目标音频的属性信息关联的一个音频，属性信息不限，例如属性信息可以为时间、用户或其他关键信息等。例如当目标音频为一个会议的记录音频，则下一音频可以为与该会议的结束时刻相邻的后一个会议音频。具体的，在目标视频的播放结束之后，可以确定与目标音频关联的下一音频，获取该下一音频并播放该下一音频。或者，下一音频还可以是基于一项或多项属性信息的属性值确定出的播放列表中的下一个音频。例如，若属性信息包括会议日期，那么，用户可以基于会议日期来确定一播放列表。从而，在该播放列表中的目标音频播放结束之后，继续播放下一音频。这样设置的好处在于，当前音频播放结束之后可以无缝播放下一个音频，使用户了解更多地相关内容，并且避免停止造成的突兀感，提升多媒体信息回放体验。
在一些实施例中，多媒体处理方法还可以包括：确定目标音频中的非静音片段；播放目标音频，包括：在播放目标音频时仅播放非静音片段。在一些实施例中，多媒体处理方法还可以包括：确定目标音频中的静音片段和非静音片段；播放目标音频，包括：以第一播放速度播放静音片段，以第二播放速度播放非静音片段，其中，第一播放速度大于第二播放速度。
其中，静音片段是指目标音频中音量为零的音频片段，非静音片段是指目标音频中音量不为零的音频片段。具体的，通过对目标音频的音量识别，可以确定其中的非静音片段，并在播放目标音频时仅播放非静音片段。可选的，还可以通过音量识别确定目标音频的静音片段和非静音片段，并采用第一播放速度播放静音片段，采用第二播放速度播放非静音片段。第一播放速度和第二播放速度可以根据实际情况确定，只要满足第一播放速度大于第二播放速度即可，例如第一播放速度可以设置为第二播放速度的两倍。
上述方案中，播放音频时可以跳过静音片段，只播放重点内容，；也可以通过两种不同的速度播放静音片段和非静音片段，上述两种方式均可以提升用户了解音频内容的速度，提升音频播放的灵活性。
在一些实施例中，多媒体处理方法还可以包括：接收用户在第二多媒体界面上的交互触发操作；基于交互触发操作，确定交互内容。可选的，基于交互触发操作，确定交互内容，包括：响应于交互触发操作，在第二多媒体界面展示交互组件；基于交互组件获取交互内容，并在第二多媒体界面展示交互内容；其中，交互组件包括表情部件和/或评论部件，交互内容包括交互表情和/或评论。可选的，多媒体处理方法还可以包括：在第一多媒体界面上展示交互内容。
其中，交互输入触发操作是指用户想要对当前的多媒体内容进行交互输入的触发操作，本公开实施例中交互输入触发操作可以包括在第二多媒体界面上目标音频的播放时间轴上或在交互按钮上的触发操作，交互按钮可以为预先设置在第二多媒体界面上的按钮，按钮的具体位置和样式不作限定。交互组件是指用于进行交互内容输入、编辑和发布等操作的功能组件。交互组件可以包括表情部件和/或评论部件，表情部件为用于进行表情输入的功能部件，可以包括设定数量的表情，设定数量可以根据实际情况进行设定，例如设定数量可以为5。表情可以包括点赞、爱心和多种情绪表情等，具体不限。
具体的，当接收到用户在第二多媒体界面上的交互触发操作之后，可以展示交互组件给用户，交互组件中展示有表情部件和/或评论部件，可以获取表情部件中用户选择的交互表情，也可以获取评论部件中用户输入的评论，将交互表情和/或评论展示在第二多媒体界面上，具体展示位置不限。可选的，还可以将交互表情和/或评论展示在第一多媒体界面上，具体展示位置不限。
上述方案中，在多媒体界面上展示多媒体内容的同时，还支持用户的交互，并可以在第一多媒体界面和/或第二多媒体界面中展示交互内容，提升了用户的参与体验效果。
在一些实施例中，多媒体处理方法还可以包括：确定交互输入触发操作对应的交互时间点；在第二多媒体界面和/或第一多媒体界面上目标音频的播放时间轴上，交互时间点所在位置展示交互提示标识。其中，交互时间点是指用户进行交互输入触发操作时在目标音频中对应的时间点。交互提示标识是指用于提醒用户存在交互内容的提示标识，不同交互内容对应的交互提示标识可以不同，例如表情对应的交互提示标识可以为表情本身，评论对应的交互提示标识可以为设定的对话框标识。
接收到用户的交互输入触发操作之后，可以确定交互输入触发操作的实时时刻，将目标音频在实时时刻的播放时间点确定为交互时间点，之后可以在第二多媒体界面和/或第一多媒体界面上目标音频的播放时间轴上展示交互内容对应的交互提示标识，以提示用户此处具有交互内容。当播放时间轴上一个时间点包括多个交互内容时，可以将对应的交互提示标识叠加展示。
上述方案中，在用户输入交互内容之后，可以在两个多媒体界面的播放时间轴上均展示交互内容的提示标识，使得两个多媒体界面展示的内容同步，提示其他用户此处具有交互内容，使得用户对交互不仅局限于自身，交互方式更加多样化，进一步提高了用户的交互体验。
在一些实施例中，多媒体处理方法还可以包括：接收对第一多媒体界面中展示的目标字幕的修改操作；对第二多媒体界面中展示的目标字幕进行同步修改。当用户在第一多媒体界面中对展示的目标字幕中的字、词或句中的至少一个进行修改之后，可以在第一多媒体界面中展示修改后的目标字幕；并且同时对第二多媒体界面中展示的目标字幕进行同步修改，展示修改后的目标字幕。上述方案中，针对两个多媒体界面中展示的内容，当一个多媒体界面中的内容修改之后，另一个多媒体界面的内容也可以同步修改，避免用户在不同多媒体界面查看相同内容时存在错误。
在一些实施例中，第一多媒体界面和第二多媒体界面均为第一应用程序的界面，多媒体处理方法还可以包括：接收程序切换请求；将第一应用程序切换至后台运行并启动第二应用程序，展示第二应用程序的展示界面；在第二应用程序的展示界面中展示第二多媒体界面的浮窗组件。
其中，第二应用程序可以为任意一个与第一应用程序不同的程序。浮窗组件可以为用于快速返回第一应用程序中第二多媒体界面的入口组件，也即通过浮窗组件可以将第一应用程序快速从后台运行切换至前台运行。并且浮窗组件的具体表现形式不限，例如浮窗组件可以为圆形或方形的展示小窗。
具体的，基于用户的触发操作可以接收程序切换请求，之后可以将第一应用程序切换到后台运行并启动第二应用程序，展示第二应用程序的展示界面，并且第二应用程序的展示界面可以除了展示第二应用程序的相关内容还可以展示第二多媒体界面的浮窗组件。该浮窗组件可以悬浮于第二应用程序的展示界面的最上层，以供用户在对当前显示界面操作时可以对该浮窗组件进行触发操作。浮窗组件在第二应用程序的展示界面中的具体位置可以根据实际情况设置，例如浮窗组件可以展示在任何布遮挡当前显示内容的位置。
可选的，浮窗组件包括目标音频的封面图片和/或播放信息。可选的，播放信息包括播放进度；封面图片和播放进度关联展示。可选的，封面图片的数量为多个，封面图片随着播放进度的变化而变化。可选的，播放进度环绕封面图片显示。可选的，封面图片基于第一内容确定。
浮窗组件中可以包括目标音频的相关信息，例如浮窗组件可以包括封面图片和/或播放信息，播放信息可以包括播放进度、播放时间点等。封面图片可以根据第一多媒体界面中包括的第一内容确定，例如当第一内容中包括目标音频对应的视频时，可以通过在视频中截取图像作为封面图片。封面图片还可以与播放进度关联展示，具体展示时当封面图片为多个时，可以将封面图片随着播放进度的变换而变换，也即随着播放进度的变换，实时展示当前播放进度对应的封面图片。此外，播放进度还可以环绕封面图片进行展示，仅为示例。
上述方案中，通过在浮窗组件中展示目标音频的图片或播放信息等相关信息，可以使用户在对其他应用程序操作时还可以了解音频的播放情况，进一步提升了音频播放效果。
可选的，多媒体处理方法还可以包括：接收对浮窗组件的触发操作，将第一应用程序从后台运行切换至前台运行，并返回展示第二多媒体界面。当接收到用户对浮窗组件的点击操作之后，可以将当前的第二应用程序切换到后台运行，并将第一应用程序从后台运行且至前台运行，展示第二多媒体界面。
可选的，在接收程序切换请求之前若目标音频正在播放过程中，多媒体处理方法还可以包括：基于浮窗组件继续播放目标音频。如果目标音频正在播放过程中，接收到程序切换请求并在第二应用程序的展示界面中展示浮窗组件之后，可以基于浮窗组件继续播放目标音频，以实现音频的无缝播放。
上述方案中，在展示多媒体界面的基础上，当切换到其他应用程序之后还可以展示多媒体界面的浮窗组件，通过该浮窗组件可以快速返回多媒体界面，并且继续播放音频数据和展示播放情况，提升了返回多媒体界面的效率，更能满足用户的需求，提升了用户的体验效果。
在一些实施例中，多媒体处理方法还可以包括：响应于用户在当前展示的第三多媒体界面中的界面切换请求，将当前展示的第三多媒体界面切换为第二多媒体界面；其中，第三多媒体界面中包括第三内容，第三内容包括第二内容的属性信息。可选的，第二内容的属性信息包括第二内容的标题信息、时间信息和来源信息中的至少一个。
其中，第三多媒体界面是与上述第一多媒体界面、第二多媒体界面展示内容不同的一个多媒体界面。第三多媒体界面中包括的第三内容与第二内容具有关联关系，可以包括第二内容的属性信息，第二内容的属性信息可以根据实际情况确定，例如可以包括第二内容的标题信息、时间信息和来源信息等信息中的至少一个。示例性的，第三多媒体界面可以为包括一个信息列表的界面，信息列表中包括多个音频的属性信息，其中一个为目标音频的属性信息。终端展示第三多媒体界面，当接收到用户在第三多媒体界面中的界面切换请求之后，可以将当前展示的第三多媒体界面关闭并打开第二多媒体界面，在第二多媒体界面中展示第二内容，实现界面的切换。
上述方案中，可以通过两种展示内容不同的多媒体界面的切换操作，均可以切换至仅包括音频和字幕的多媒体界面，进一步提升了不同模式的多媒体界面的切换灵活性，并且提升了用户的界面切换效率。
图2为本公开实施例提供的另一种多媒体处理方法的流程示意图，本实施例在上述实施例的基础上，进一步优化了上述多媒体处理方法。如图2所示，该方法包括：
步骤201、展示第一多媒体界面或第三多媒体界面。
其中，第一多媒体界面中包括第一内容，第三多媒体界面中包括第三内容。
步骤202、接收用户在第一多媒体界面或第三多媒体界面中的界面切换请求。
步骤203、将当前展示的第一多媒体界面或第三多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容。
其中，第一内容包括第二内容以及与第二内容关联的其他内容，第二内容包括目标音频以及目标音频对应的目标字幕。第三内容包括第二内容的属性信息，第二内容的属性信息包括第二内容的标题信息、时间信息和来源信息中的至少一个。
示例性的，图3为本公开实施例提供的一种多媒体界面的示意图，如图3所示，展示了第二多媒体界面的一个示意图，第二多媒体界面中展示了一个音频和对应的字幕，音频的时间轴和作用于音频的多个控制按键的位置在图3中仅为示例，图中还展示了音频的封面图片和名称“团队回顾会议”。
步骤203之后，可以执行步骤204-步骤206、步骤207-步骤211和/或步骤212-步骤216，具体执行顺序不限，图2中仅为示例。
步骤204、接收对目标音频的播放触发操作。
步骤205、播放目标音频，并在目标音频的播放过程中，基于目标字幕中包括的字幕语句的时间戳，对与目标音频的播放进度对应的字幕语句进行突出展示。
可选的，多媒体处理方法还包括：确定目标音频中的非静音片段；播放目标音频，包括：在播放目标音频时仅播放非静音片段。
可选的，多媒体处理方法还包括：确定目标音频中的静音片段和非静音片段；播放目标音频，包括：以第一播放速度播放静音片段，以第二播放速度播放非静音片段，其中，第一播放速度大于第二播放速度。
步骤206、响应于目标音频播放结束，获取与目标音频关联的下一音频，切换播放下一音频。
步骤207、接收用户在第二多媒体界面上的交互触发操作。
步骤208、响应于交互触发操作，在第二多媒体界面展示交互组件，基于交互组件获取交互内容。
其中，交互组件包括表情部件和/或评论部件，交互内容包括交互表情和/或评论。
示例性的，图4为本公开实施例提供的另一种多媒体界面的示意图，如图4所示，图中展示了第二多媒体界面的另一个示意图，与图3相比，图4中部分内容和按键的位置不同。图4中目标字幕中具有下划线的字幕语句表征目标音频的播放进度对应的字幕语句，随着目标视频的播放，其他字幕语句也会通过下划线的方式进行突出展示。并且图中示例性的展示了交互组件中的表情部件11，用户点击该表情部件11时，可以发送默认的交互表情并在第二多媒体界面中进行展示，如界面中间的“点赞”。可选的，用户点击该表情部件11时，还可以展示表情面板，表情面板中可以包括多个表情以供用户选择(图中未展示)。并且，图4中第二多媒体界面的下方展示了退出按键，当用户触发该退出按键时，可以从第二多媒体界面退出至第一多媒体界面。图3和图4中展示的第二多媒体界面均为示例，不应作为限定。
步骤209、在第二多媒体界面和/或第一多媒体界面上展示交互内容。
步骤210、确定交互输入触发操作对应的交互时间点。
步骤211、在第二多媒体界面和/或第一多媒体界面上目标音频的播放时间轴上，交互时间点所在位置展示交互提示标识。
步骤212、接收程序切换请求。
步骤213、将第一应用程序切换至后台运行并启动第二应用程序，展示第二应用程序的展示界面。
其中，第一多媒体界面和第二多媒体界面均为第一应用程序的界面。
步骤214、在第二应用程序的展示界面中展示第二多媒体界面的浮窗组件。
可选的，浮窗组件中包括目标音频的封面图片和/或播放信息。可选的，播放信息包括播放进度；封面图片和播放进度关联展示。可选的，封面图片的数量为多个，封面图片随着播放进度的变化而变化。可选的，播放进度环绕封面图片显示。可选的，封面图片基于第一内容确定。
示例性的，图5为本公开实施例提供的一种浮窗组件的示意图，如图5所示，图中展示了其他应用程序下的浮窗组件12，其他应用程序即为第二应用程序，浮窗组件12可以设置在其他应用程序的展示界面的靠近边界的区域。并且浮窗组件12中还展示了第二多媒体界面的封面图片以及播放进度，图中浮窗组件边缘的黑色填充区域表征了播放进度，图中播放进度为接近三分之二。图5展示的浮窗组件仅为示例，其他形状或样式的浮窗组件也可适用。
步骤214之后，可以执行步骤215和/或步骤216。
步骤215、接收对浮窗组件的触发操作，将第一应用程序从后台运行切换至前台运行，并返回展示第二多媒体界面。
步骤216、基于浮窗组件继续播放目标音频。
在执行步骤210之前，若目标音频正则播放过程中，则可以基于浮窗组件继续播放目标音频。
在一些实施例中，多媒体处理方法还可以包括：接收对第一多媒体界面中展示的目标字幕的修改操作；对第二多媒体界面中展示的目标字幕进行同步修改。
本公开实施例提供的多媒体处理方案，展示第一多媒体界面，第一多媒体界面中包括第一内容；接收用户在第一多媒体界面中的界面切换请求；将当前展示的第一多媒体界面切换为第二多媒体界面，并在第二多媒体界面中展示第二内容；其中，第一内容包括第二内容以及与第二内容关联的其他内容，第二内容包括目标音频以及目标音频对应的目标字幕。采用上述技术方案，可以实现包括两种不同内容的界面的切换，其中一个界面可以仅包括音频和字幕，有助于用户在复杂场景下专注于多媒体内容，并且提升了多媒体内容播放的灵活性，可以满足多种场景的需求，进而提升了用户的体验效果。
图6为本公开实施例提供的一种多媒体处理装置的结构示意图，该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图6所示，该装置包括：
第一界面模块301，用于展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
请求模块302，用于接收用户在第一多媒体界面中的界面切换请求；
第二界面模块303，用于将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
可选的，所述装置还包括播放模块，用于：
接收对所述目标音频的播放触发操作；
播放所述目标音频，并在所述目标音频的播放过程中，基于所述目标字幕中包括的字幕语句的时间戳，对与所述目标音频的播放进度对应的字幕语句进行突出展示。
可选的，所述播放模块具体用于：
响应于所述目标音频播放结束，获取与所述目标音频关联的下一音频，切换播放所述下一音频。
可选的，所述装置还包括第一音频识别模块，用于：
确定所述目标音频中的非静音片段；
所述播放模块具体用于：
在播放所述目标音频时仅播放所述非静音片段。
可选的，所述装置还包括第二音频识别模块，用于：
确定所述目标音频中的静音片段和非静音片段；
所述播放模块具体用于：
以第一播放速度播放所述静音片段，以第二播放速度播放所述非静音片段，其中，所述第一播放速度大于所述第二播放速度。
可选的，所述装置还包括交互模块，用于：
接收用户在所述第二多媒体界面上的交互触发操作；
基于所述交互触发操作，确定交互内容。
可选的，所述交互模块用于：
响应于所述交互触发操作，在所述第二多媒体界面展示交互组件；
基于所述交互组件获取交互内容，并在所述第二多媒体界面展示所述交互内容；
其中，所述交互组件包括表情部件和/或评论部件，所述交互内容包括交互表情和/或评论。
可选的，所述交互模块用于：
在所述第一多媒体界面上展示所述交互内容。
可选的，所述交互模块用于：
确定所述交互输入触发操作对应的交互时间点；
在所述第二多媒体界面和/或所述第一多媒体界面上所述目标音频的播放时间轴上，所述交互时间点所在位置展示交互提示标识。
可选的，所述装置还包括修改模块，用于：
接收对所述第一多媒体界面中展示的所述目标字幕的修改操作；
对所述第二多媒体界面中展示的所述目标字幕进行同步修改。
可选的，所述第一多媒体界面和所述第二多媒体界面均为第一应用程序的界面，所述装置还包括浮窗模块，用于：
接收程序切换请求；
将所述第一应用程序切换至后台运行并启动第二应用程序，展示所述第二应用程序的展示界面；
在所述第二应用程序的展示界面中展示所述第二多媒体界面的浮窗组件。
可选的，所述浮窗组件包括所述目标音频的封面图片和/或播放信息。
可选的，所述播放信息包括播放进度；所述封面图片和所述播放进度关联展示。
可选的，所述封面图片的数量为多个，所述封面图片随着播放进度的变化而变化。
可选的，所述播放进度环绕所述封面图片显示。
可选的，所述封面图片基于所述第一内容确定。
可选的，所述装置还包括返回模块，用于：
接收对所述浮窗组件的触发操作，将所述第一应用程序从后台运行切换至前台运行，并返回展示所述第二多媒体界面。
可选的，在所述接收程序切换请求之前若所述目标音频正在播放过程中，所述浮窗模块还用于：
基于所述浮窗组件继续播放所述目标音频。
可选的，所述装置还包括第三界面模块，用于：
响应于用户在当前展示的第三多媒体界面中的界面切换请求，将当前展示的所述第三多媒体界面切换为所述第二多媒体界面；
其中，所述第三多媒体界面中包括第三内容，所述第三内容包括所述第二内容的属性信息。
可选的，所述第二内容的属性信息包括所述第二内容的标题信息、时间信息和来源信息中的至少一个。
本公开实施例所提供的多媒体处理装置可执行本公开任意实施例所提供的多媒体处理方法，具备执行方法相应的功能模块和有益效果。
本公开实施例还提供了一种计算机程序产品，包括计算机程序/指令，该计算机程序/指令被处理器执行时实现本公开任意实施例所提供的多媒体处理方法。
图7为本公开实施例提供的一种电子设备的结构示意图。下面具体参考图7，其示出了适于用来实现本公开实施例中的电子设备400的结构示意图。本公开实施例中的电子设备400可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图7示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示，电子设备400可以包括处理装置(例如中央处理器、图形处理器等)401，其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中，还存储有电子设备400操作所需的各种程序和数据。处理装置401、ROM 402以及RAM403通过总线404彼此相连。输入/输出(I/O)接口405也连接至总线404。
通常，以下装置可以连接至I/O接口405：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置406；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置407；包括例如磁带、硬盘等的存储装置408；以及通信装置409。通信装置409可以允许电子设备400与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备400，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置409从网络上被下载和安装，或者从存储装置408被安装，或者从ROM 402被安装。在该计算机程序被处理装置401执行时，执行本公开实施例的多媒体处理方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：展示第一多媒体界面，所述第一多媒体界面中包括第一内容；接收用户在第一多媒体界面中的界面切换请求；将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例，本公开提供了一种多媒体处理方法，包括：
展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
接收用户在第一多媒体界面中的界面切换请求；
将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
接收对所述目标音频的播放触发操作；
播放所述目标音频，并在所述目标音频的播放过程中，基于所述目标字幕中包括的字幕语句的时间戳，对与所述目标音频的播放进度对应的字幕语句进行突出展示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
响应于所述目标音频播放结束，获取与所述目标音频关联的下一音频，切换播放所述下一音频。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
确定所述目标音频中的非静音片段；
所述播放所述目标音频，包括：
在播放所述目标音频时仅播放所述非静音片段。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：确定所述目标音频中的静音片段和非静音片段；
所述播放所述目标音频，包括：
以第一播放速度播放所述静音片段，以第二播放速度播放所述非静音片段，其中，所述第一播放速度大于所述第二播放速度。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
接收用户在所述第二多媒体界面上的交互触发操作；
基于所述交互触发操作，确定交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述基于所述交互触发操作，确定交互内容，包括：
响应于所述交互触发操作，在所述第二多媒体界面展示交互组件；
基于所述交互组件获取交互内容，并在所述第二多媒体界面展示所述交互内容；
其中，所述交互组件包括表情部件和/或评论部件，所述交互内容包括交互表情和/或评论。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
在所述第一多媒体界面上展示所述交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
确定所述交互输入触发操作对应的交互时间点；
在所述第二多媒体界面和/或所述第一多媒体界面上所述目标音频的播放时间轴上，所述交互时间点所在位置展示交互提示标识。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
接收对所述第一多媒体界面中展示的所述目标字幕的修改操作；
对所述第二多媒体界面中展示的所述目标字幕进行同步修改。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述第一多媒体界面和所述第二多媒体界面均为第一应用程序的界面，所述方法还包括：
接收程序切换请求；
将所述第一应用程序切换至后台运行并启动第二应用程序，展示所述第二应用程序的展示界面；
在所述第二应用程序的展示界面中展示所述第二多媒体界面的浮窗组件。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述浮窗组件包括所述目标音频的封面图片和/或播放信息。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述播放信息包括播放进度；所述封面图片和所述播放进度关联展示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述封面图片的数量为多个，所述封面图片随着播放进度的变化而变化。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述播放进度环绕所述封面图片显示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述封面图片基于所述第一内容确定。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
接收对所述浮窗组件的触发操作，将所述第一应用程序从后台运行切换至前台运行，并返回展示所述第二多媒体界面。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，在所述接收程序切换请求之前若所述目标音频正在播放过程中，所述方法还包括：
基于所述浮窗组件继续播放所述目标音频。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述方法还包括：
响应于用户在当前展示的第三多媒体界面中的界面切换请求，将当前展示的所述第三多媒体界面切换为所述第二多媒体界面；
其中，所述第三多媒体界面中包括第三内容，所述第三内容包括所述第二内容的属性信息。
根据本公开的一个或多个实施例，本公开提供的多媒体处理方法中，所述第二内容的属性信息包括所述第二内容的标题信息、时间信息和来源信息中的至少一个。
根据本公开的一个或多个实施例，本公开提供了一种多媒体处理装置，包括：
第一界面模块，用于展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
请求模块，用于接收用户在第一多媒体界面中的界面切换请求；
第二界面模块，用于将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括播放模块，用于：
接收对所述目标音频的播放触发操作；
播放所述目标音频，并在所述目标音频的播放过程中，基于所述目标字幕中包括的字幕语句的时间戳，对与所述目标音频的播放进度对应的字幕语句进行突出展示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述播放模块具体用于：
响应于所述目标音频播放结束，获取与所述目标音频关联的下一音频，切换播放所述下一音频。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括第一音频识别模块，用于：
确定所述目标音频中的非静音片段；
所述播放模块具体用于：
在播放所述目标音频时仅播放所述非静音片段。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括第二音频识别模块，用于：
确定所述目标音频中的静音片段和非静音片段；
所述播放模块具体用于：
以第一播放速度播放所述静音片段，以第二播放速度播放所述非静音片段，其中，所述第一播放速度大于所述第二播放速度。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括交互模块，用于：
接收用户在所述第二多媒体界面上的交互触发操作；
基于所述交互触发操作，确定交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述交互模块用于：
响应于所述交互触发操作，在所述第二多媒体界面展示交互组件；
基于所述交互组件获取交互内容，并在所述第二多媒体界面展示所述交互内容；
其中，所述交互组件包括表情部件和/或评论部件，所述交互内容包括交互表情和/或评论。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述交互模块用于：
在所述第一多媒体界面上展示所述交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述交互模块用于：
确定所述交互输入触发操作对应的交互时间点；
在所述第二多媒体界面和/或所述第一多媒体界面上所述目标音频的播放时间轴上，所述交互时间点所在位置展示交互提示标识。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括修改模块，用于：
接收对所述第一多媒体界面中展示的所述目标字幕的修改操作；
对所述第二多媒体界面中展示的所述目标字幕进行同步修改。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述第一多媒体界面和所述第二多媒体界面均为第一应用程序的界面，所述装置还包括浮窗模块，用于：
接收程序切换请求；
将所述第一应用程序切换至后台运行并启动第二应用程序，展示所述第二应用程序的展示界面；
在所述第二应用程序的展示界面中展示所述第二多媒体界面的浮窗组件。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述浮窗组件包括所述目标音频的封面图片和/或播放信息。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述播放信息包括播放进度；
所述封面图片和所述播放进度关联展示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述封面图片的数量为多个，所述封面图片随着播放进度的变化而变化。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述播放进度环绕所述封面图片显示。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述封面图片基于所述第一内容确定。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括返回模块，用于：
接收对所述浮窗组件的触发操作，将所述第一应用程序从后台运行切换至前台运行，并返回展示所述第二多媒体界面。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，在所述接收程序切换请求之前若所述目标音频正在播放过程中，所述浮窗模块还用于：
基于所述浮窗组件继续播放所述目标音频。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述装置还包括第三界面模块，用于：
响应于用户在当前展示的第三多媒体界面中的界面切换请求，将当前展示的所述第三多媒体界面切换为所述第二多媒体界面；
其中，所述第三多媒体界面中包括第三内容，所述第三内容包括所述第二内容的属性信息。
根据本公开的一个或多个实施例，本公开提供的多媒体处理装置中，所述第二内容的属性信息包括所述第二内容的标题信息、时间信息和来源信息中的至少一个。
根据本公开的一个或多个实施例，本公开提供了一种电子设备，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现如本公开提供的任一所述的多媒体处理方法。
根据本公开的一个或多个实施例，本公开提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行如本公开提供的任一所述的多媒体处理方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外，虽然采用特定次序描绘了各操作，但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地，在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (23)

1.一种多媒体处理方法，其特征在于，包括：
展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
接收用户在第一多媒体界面中的界面切换请求；
将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收对所述目标音频的播放触发操作；
播放所述目标音频，并在所述目标音频的播放过程中，基于所述目标字幕中包括的字幕语句的时间戳，对与所述目标音频的播放进度对应的字幕语句进行突出展示。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
响应于所述目标音频播放结束，获取与所述目标音频关联的下一音频，切换播放所述下一音频。
4.根据权利要求2所述的方法，其特征在于，所述方法还包括：
确定所述目标音频中的非静音片段；
所述播放所述目标音频，包括：
在播放所述目标音频时仅播放所述非静音片段。
5.根据权利要求2所述的方法，其特征在于，所述方法还包括：确定所述目标音频中的静音片段和非静音片段；
所述播放所述目标音频，包括：
以第一播放速度播放所述静音片段，以第二播放速度播放所述非静音片段，其中，所述第一播放速度大于所述第二播放速度。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收用户在所述第二多媒体界面上的交互触发操作；
基于所述交互触发操作，确定交互内容。
7.根据权利要求6所述的方法，其特征在于，所述基于所述交互触发操作，确定交互内容，包括：
响应于所述交互触发操作，在所述第二多媒体界面展示交互组件；
基于所述交互组件获取交互内容，并在所述第二多媒体界面展示所述交互内容；
其中，所述交互组件包括表情部件和/或评论部件，所述交互内容包括交互表情和/或评论。
8.根据权利要求6所述的方法，其特征在于，所述方法还包括：
在所述第一多媒体界面上展示所述交互内容。
9.根据权利要求6所述的方法，其特征在于，所述方法还包括：
确定所述交互输入触发操作对应的交互时间点；
在所述第二多媒体界面和/或所述第一多媒体界面上所述目标音频的播放时间轴上，所述交互时间点所在位置展示交互提示标识。
10.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收对所述第一多媒体界面中展示的所述目标字幕的修改操作；
对所述第二多媒体界面中展示的所述目标字幕进行同步修改。
11.根据权利要求1所述的方法，其特征在于，所述第一多媒体界面和所述第二多媒体界面均为第一应用程序的界面，所述方法还包括：
接收程序切换请求；
将所述第一应用程序切换至后台运行并启动第二应用程序，展示所述第二应用程序的展示界面；
在所述第二应用程序的展示界面中展示所述第二多媒体界面的浮窗组件。
12.根据权利要求11所述的方法，其特征在于，所述浮窗组件包括所述目标音频的封面图片和/或播放信息。
13.根据权利要求12所述的方法，其特征在于，所述播放信息包括播放进度；所述封面图片和所述播放进度关联展示。
14.根据权利要求13所述的方法，其特征在于，所述封面图片的数量为多个，所述封面图片随着播放进度的变化而变化。
15.根据权利要求13所述的方法，其特征在于，所述播放进度环绕所述封面图片显示。
16.根据权利要求12所述的方法，其特征在于，所述封面图片基于所述第一内容确定。
17.根据权利要求11所述的方法，其特征在于，所述方法还包括：
接收对所述浮窗组件的触发操作，将所述第一应用程序从后台运行切换至前台运行，并返回展示所述第二多媒体界面。
18.根据权利要求11所述的方法，其特征在于，在所述接收程序切换请求之前若所述目标音频正在播放过程中，所述方法还包括：
基于所述浮窗组件继续播放所述目标音频。
19.根据权利要求1所述的方法，其特征在于，所述方法还包括：
响应于用户在当前展示的第三多媒体界面中的界面切换请求，将当前展示的所述第三多媒体界面切换为所述第二多媒体界面；
其中，所述第三多媒体界面中包括第三内容，所述第三内容包括所述第二内容的属性信息。
20.根据权利要求19所述的方法，其特征在于，所述第二内容的属性信息包括所述第二内容的标题信息、时间信息和来源信息中的至少一个。
21.一种多媒体处理装置，其特征在于，包括：
第一界面模块，用于展示第一多媒体界面，所述第一多媒体界面中包括第一内容；
请求模块，用于接收用户在第一多媒体界面中的界面切换请求；
第二界面模块，用于将当前展示的所述第一多媒体界面切换为第二多媒体界面，并在所述第二多媒体界面中展示第二内容；
其中，所述第一内容包括所述第二内容以及与所述第二内容关联的其他内容，所述第二内容包括目标音频以及所述目标音频对应的目标字幕。
22.一种电子设备，其特征在于，所述电子设备包括：
处理器；
用于存储所述处理器可执行指令的存储器；
所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现上述权利要求1-20中任一所述的多媒体处理方法。
23.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序用于执行上述权利要求1-20中任一所述的多媒体处理方法。
CN202110547916.9A 2021-05-19 2021-05-19 一种多媒体处理方法、装置、设备及介质 Pending CN113259740A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110547916.9A CN113259740A (zh) 2021-05-19 2021-05-19 一种多媒体处理方法、装置、设备及介质
US18/262,301 US20240121479A1 (en) 2021-05-19 2022-04-07 Multimedia processing method, apparatus, device, and medium
PCT/CN2022/085468 WO2022242351A1 (zh) 2021-05-19 2022-04-07 一种多媒体处理方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110547916.9A CN113259740A (zh) 2021-05-19 2021-05-19 一种多媒体处理方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN113259740A true CN113259740A (zh) 2021-08-13

Family

ID=77183345

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110547916.9A Pending CN113259740A (zh) 2021-05-19 2021-05-19 一种多媒体处理方法、装置、设备及介质

Country Status (3)

Country Link
US (1) US20240121479A1 (zh)
CN (1) CN113259740A (zh)
WO (1) WO2022242351A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113721810A (zh) * 2021-09-08 2021-11-30 北京字跳网络技术有限公司 显示方法、装置、设备及存储介质
CN113849258A (zh) * 2021-10-13 2021-12-28 北京字跳网络技术有限公司 内容展示方法、装置、设备及存储介质
CN113885830A (zh) * 2021-10-25 2022-01-04 北京字跳网络技术有限公司 一种音效展示方法及终端设备
CN113891168A (zh) * 2021-10-19 2022-01-04 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质
CN114979798A (zh) * 2022-04-21 2022-08-30 维沃移动通信有限公司 播放速度控制方法和电子设备
CN115047999A (zh) * 2022-07-27 2022-09-13 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品
CN115062168A (zh) * 2022-06-28 2022-09-16 北京字跳网络技术有限公司 媒体内容展示方法、装置、设备及存储介质
WO2022242351A1 (zh) * 2021-05-19 2022-11-24 北京字跳网络技术有限公司 一种多媒体处理方法、装置、设备及介质
CN114327178B (zh) * 2021-11-18 2023-05-02 荣耀终端有限公司 界面显示方法、装置及存储介质
WO2024055921A1 (zh) * 2022-09-15 2024-03-21 北京字跳网络技术有限公司 一种视频处理方法、装置、设备及存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116107682A (zh) * 2023-02-14 2023-05-12 北京字跳网络技术有限公司 媒体内容显示方法、装置、设备、可读存储介质及产品

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999017235A1 (en) * 1997-10-01 1999-04-08 At & T Corp. Method and apparatus for storing and retrieving labeled interval data for multimedia recordings
CN108337543A (zh) * 2017-12-27 2018-07-27 努比亚技术有限公司 一种视频播放方法、终端及计算机可读存储介质
CN306040285S (zh) * 2020-02-17 2020-09-08
CN112380365A (zh) * 2020-11-18 2021-02-19 北京字跳网络技术有限公司 一种多媒体的字幕交互方法、装置、设备及介质
CN112416963A (zh) * 2020-11-11 2021-02-26 北京字跳网络技术有限公司 搜索内容的匹配方法、装置、电子设备及存储介质
US20210074298A1 (en) * 2019-09-11 2021-03-11 Soundhound, Inc. Video conference captioning

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112397104B (zh) * 2020-11-26 2022-03-29 北京字节跳动网络技术有限公司 音频与文本的同步方法、装置、可读介质和电子设备
CN113259740A (zh) * 2021-05-19 2021-08-13 北京字跳网络技术有限公司 一种多媒体处理方法、装置、设备及介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999017235A1 (en) * 1997-10-01 1999-04-08 At & T Corp. Method and apparatus for storing and retrieving labeled interval data for multimedia recordings
CN108337543A (zh) * 2017-12-27 2018-07-27 努比亚技术有限公司 一种视频播放方法、终端及计算机可读存储介质
US20210074298A1 (en) * 2019-09-11 2021-03-11 Soundhound, Inc. Video conference captioning
CN306040285S (zh) * 2020-02-17 2020-09-08
CN112416963A (zh) * 2020-11-11 2021-02-26 北京字跳网络技术有限公司 搜索内容的匹配方法、装置、电子设备及存储介质
CN112380365A (zh) * 2020-11-18 2021-02-19 北京字跳网络技术有限公司 一种多媒体的字幕交互方法、装置、设备及介质

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022242351A1 (zh) * 2021-05-19 2022-11-24 北京字跳网络技术有限公司 一种多媒体处理方法、装置、设备及介质
CN113721810A (zh) * 2021-09-08 2021-11-30 北京字跳网络技术有限公司 显示方法、装置、设备及存储介质
WO2023036170A1 (zh) * 2021-09-08 2023-03-16 北京字跳网络技术有限公司 显示方法、装置、设备及存储介质
CN113849258A (zh) * 2021-10-13 2021-12-28 北京字跳网络技术有限公司 内容展示方法、装置、设备及存储介质
CN113891168A (zh) * 2021-10-19 2022-01-04 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质
CN113891168B (zh) * 2021-10-19 2023-12-19 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质
CN113885830A (zh) * 2021-10-25 2022-01-04 北京字跳网络技术有限公司 一种音效展示方法及终端设备
CN114327178B (zh) * 2021-11-18 2023-05-02 荣耀终端有限公司 界面显示方法、装置及存储介质
CN114979798A (zh) * 2022-04-21 2022-08-30 维沃移动通信有限公司 播放速度控制方法和电子设备
CN114979798B (zh) * 2022-04-21 2024-03-22 维沃移动通信有限公司 播放速度控制方法和电子设备
CN115062168A (zh) * 2022-06-28 2022-09-16 北京字跳网络技术有限公司 媒体内容展示方法、装置、设备及存储介质
CN115047999A (zh) * 2022-07-27 2022-09-13 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品
WO2024021867A1 (zh) * 2022-07-27 2024-02-01 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品
CN115047999B (zh) * 2022-07-27 2024-07-02 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品
WO2024055921A1 (zh) * 2022-09-15 2024-03-21 北京字跳网络技术有限公司 一种视频处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
WO2022242351A1 (zh) 2022-11-24
US20240121479A1 (en) 2024-04-11

Similar Documents

Publication Publication Date Title
CN113259740A (zh) 一种多媒体处理方法、装置、设备及介质
CN111970577B (zh) 字幕编辑方法、装置和电子设备
US11917344B2 (en) Interactive information processing method, device and medium
EP4131935A1 (en) Video processing method and apparatus, and electronic device, and non-transitory computer readable storage medium
CN113010704B (zh) 一种会议纪要的交互方法、装置、设备及介质
CN111447489A (zh) 视频处理方法、装置、可读介质及电子设备
CN113365134B (zh) 音频分享方法、装置、设备及介质
CN111970571B (zh) 视频制作方法、装置、设备及存储介质
CN113010698B (zh) 多媒体的交互方法、信息交互方法、装置、设备及介质
WO2022105760A1 (zh) 一种多媒体浏览方法、装置、设备及介质
CN112380365A (zh) 一种多媒体的字幕交互方法、装置、设备及介质
CN113778419B (zh) 多媒体数据的生成方法、装置、可读介质及电子设备
CN113343675A (zh) 一种字幕生成方法、装置和用于生成字幕的装置
CN113552984A (zh) 文本提取方法、装置、设备及介质
CN115639934A (zh) 内容分享方法、装置、设备、计算机可读存储介质及产品
CN111367447A (zh) 信息显示方法、装置、电子设备及计算机可读存储介质
CN110650376A (zh) 视频播放时的转场动画的实现方法、装置、移动终端、存储介质
CN112954453A (zh) 视频配音方法和装置、存储介质和电子设备
CN115981769A (zh) 页面显示方法、装置、设备、计算机可读存储介质及产品
US20240314400A1 (en) Content display method, apparatus, device and medium
CN113132789B (zh) 一种多媒体的交互方法、装置、设备及介质
CN115269920A (zh) 交互方法、装置、电子设备和存储介质
CN111221455B (zh) 素材展示方法、装置、终端及存储介质
CN113885741A (zh) 一种多媒体处理方法、装置、设备及介质
JP7572108B2 (ja) 議事録のインタラクション方法、装置、機器及び媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210813