CN113010698A - 多媒体的交互方法、信息交互方法、装置、设备及介质 - Google Patents

多媒体的交互方法、信息交互方法、装置、设备及介质 Download PDF

Info

Publication number
CN113010698A
CN113010698A CN202011296626.3A CN202011296626A CN113010698A CN 113010698 A CN113010698 A CN 113010698A CN 202011296626 A CN202011296626 A CN 202011296626A CN 113010698 A CN113010698 A CN 113010698A
Authority
CN
China
Prior art keywords
subtitle
interactive
multimedia
content
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011296626.3A
Other languages
English (en)
Other versions
CN113010698B (zh
Inventor
胡诗佳
陈可蓉
熊梦园
钱程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zitiao Network Technology Co Ltd
Original Assignee
Beijing Zitiao Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zitiao Network Technology Co Ltd filed Critical Beijing Zitiao Network Technology Co Ltd
Priority to CN202011296626.3A priority Critical patent/CN113010698B/zh
Publication of CN113010698A publication Critical patent/CN113010698A/zh
Priority to JP2023529981A priority patent/JP2023549903A/ja
Priority to PCT/CN2021/130619 priority patent/WO2022105709A1/zh
Priority to US17/818,959 priority patent/US12032816B2/en
Application granted granted Critical
Publication of CN113010698B publication Critical patent/CN113010698B/zh
Priority to US18/732,488 priority patent/US20240319862A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/438—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/483—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/131—Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本公开实施例涉及一种多媒体的交互方法、装置、设备及介质，其中该方法包括：接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，多媒体展示界面上展示有多媒体、多媒体的字幕内容以及字幕交互聚合标识，展示字幕交互聚合标识对应的至少一个字幕交互内容，其中，字幕交互内容为针对字幕内容的交互内容。采用上述技术方案，由于字幕交互聚合标识是对多个字幕交互内容的聚合表征，基于字幕交互聚合标识的触发可以快捷展示针对多媒体的字幕内容的多个字幕交互内容，提高了字幕交互内容的展示效率，字幕交互聚合标识不被触发时仅仅展示一个标识，相较于通常的展示方式，可以根据用户的选择进行展示，更加灵活，展示效果更佳。

Description

多媒体的交互方法、信息交互方法、装置、设备及介质
技术领域
本公开涉及多媒体技术领域，尤其涉及一种多媒体的交互方法、信息交互方法、装置、设备及介质。
背景技术
随着智能设备和视频技术的不断发展，在智能设备中播放音频以及视频越来越成为人们生活中不可或缺的一部分。
用户在播放音频或视频的过程中，可以同步浏览对应的字幕文字，以准确了解音频或视频的相关内容。目前，音频或视频的字幕所支持的与用户之间的交互功能有限，不能满足多种场景下的交互需求，导致用户交互体验不佳。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种多媒体的交互方法、信息交互方法、装置、设备及介质。
本公开实施例提供了一种多媒体的交互方法，所述方法包括：
接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
本公开实施例还提供了一种多媒体的交互方法，所述方法包括：
接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
获取基于所述交互触发操作触发的交互输入数据；
在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
本公开实施例还提供了一种信息交互方法，所述方法包括：
获取用户对文本内容中选定文字的交互内容；
关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
本公开实施例还提供了一种多媒体的交互装置，所述装置包括：
触发模块，用于接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
交互内容展示模块，用于展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
本公开实施例还提供了一种多媒体的交互装置，所述装置包括：
交互输入触发模块，用于接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
交互数据获取模块，用于获取基于所述交互触发操作触发的交互输入数据；
交互数据呈现模块，用于在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
本公开实施例还提供了一种信息交互装置，所述装置包括：
交互获取模块，用于获取用户对文本内容中选定文字的交互内容；
标识展示模块，用于关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
本公开实施例还提供了一种电子设备，所述电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现如本公开实施例提供的多媒体的交互方法或信息交互方法。
本公开实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行如本公开实施例提供的多媒体的交互方法或信息交互方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点：本公开实施例提供的多媒体的交互方案，接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，多媒体展示界面上展示有多媒体、多媒体的字幕内容以及字幕交互聚合标识，展示字幕交互聚合标识对应的至少一个字幕交互内容，其中，字幕交互内容为针对字幕内容的交互内容。采用上述技术方案，由于字幕交互聚合标识是对多个字幕交互内容的聚合表征，基于字幕交互聚合标识的触发可以快捷展示针对多媒体的字幕内容的多个字幕交互内容，提高了字幕交互内容的展示效率，字幕交互聚合标识不被触发时仅仅展示一个标识，相较于通常的展示方式，可以根据用户的选择进行展示，更加灵活，展示效果更佳。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
图1为本公开实施例提供的一种多媒体的交互方法的流程示意图；
图2为本公开实施例提供的一种多媒体展示界面的示意图；
图3为本公开实施例提供的另一种多媒体展示界面的示意图；
图4为本公开实施例提供的又一种多媒体展示界面的示意图；
图5为本公开实施例提供的另一种多媒体的交互方法的流程示意图；
图6为本公开实施例提供的一种信息交互方法的流程示意图；
图7为本公开实施例提供的一种多媒体的交互装置的结构示意图；
图8为本公开实施例提供的另一种多媒体的交互装置的结构示意图；
图9为本公开实施例提供的一种信息交互装置的结构示意图；
图10为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
图1为本公开实施例提供的一种多媒体的交互方法的流程示意图，该方法可以由多媒体的交互装置执行，其中该装置可以采用软件和/或硬件实现，一般可集成在电子设备中。如图1所示，该方法包括：
步骤101、接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，多媒体展示界面上展示有多媒体、多媒体的字幕内容以及字幕交互聚合标识。
其中，多媒体展示界面是指用于对多种类型的多媒体信息进行展示的界面，多媒体以及字幕内容分别展示在多媒体展示界面上的不同区域，也即多媒体展示界面中可以设置多媒体区域、字幕区域等区域，分别用于展示多媒体、多媒体的字幕内容以及字幕交互聚合标识等，多媒体可以包括音频和/或视频，具体不限，字幕交互聚合标识用于表征用户针对字幕具有交互内容的一个提示标识，该提示标识是一种聚合标识，可以与一个交互内容或多个交互内容相对应。
具体的，用户在浏览多媒体展示界面时，可以接收用户对多媒体展示界面上已有的字幕交互聚合标识的触发操作，具体触发操作可以为多种，例如当用户对字幕交互聚合标识进行点击操作或悬停操作时，可以确定接收到触发操作。
本公开实施例中，接收用户对多媒体界面上字幕交互聚合标识的触发操作之前，多媒体的交互方法还可以包括：响应于获取到用户对字幕内容中目标字幕的字幕交互内容，在多媒体展示界面上展示字幕交互聚合标识。接收到用户在多媒体展示界面上对字幕内容中目标字幕的交互输入触发操作，可以展示包括交互组件的交互输入界面给用户，基于交互组件获取用户输入的字幕交互内容，交互组件的数量可以为多个，可以包括评论组件和/或表情组件，相对应的字幕交互内容可以包括字幕评论和/或字幕表情。获取字幕交互内容之后，可以在多媒体展示界面上设置字幕交互聚合标识并展示给用户，并且将目标字幕采用设定方式突出展示。设定方式可以是任何可行的、能够与字幕内容的其它部分区分开的展示方式，例如设定方式可以包括但不限于添加背景色、加粗展示和添加下划线中的至少一个。
示例性的，图2为本公开实施例提供的一种多媒体展示界面的示意图，如图2所示，多媒体展示界面10的上方可以展示音频的播放时间轴30，多媒体展示界面10中可以包括第一区域11和第二区域12，第二区域12中展示字幕内容，其中添加有背景色和下划线的“1234”为用户当前选择的目标字幕，图中展示了用户3和用户4输入的对目标字幕的评论，分别为“这个结论应该是没有确定的”以及“这个我赞同”。
第一区域11中可以展示当前音频的相关信息，图中第一区域11的顶部区域展示有当前音频的相关图片或当前视频，图片或视频下方展示有参与者信息，图2中展示了参与者的头像，第一区域11的底部区域展示了三个相关链接，每个相关链接中包括标题以及链接来源，例如第一个相关链接为用户1分享的文档标题为1的文档，当前用户还可以根据实际情况点击右侧的链接添加按钮进行更多相关链接的添加。图2中在多媒体展示界面10的顶部区域还展示了多媒体的标题“团队回顾会议”以及其他相关内容，图中“2019.12.20上午10:00”表示多媒体的开始时间，“1h30m30s”表示多媒体的时长为1小时30分20秒，“16”表示参与者的数量。
字幕内容例如可以是通过对多媒体进行识别得到，具体可以对多媒体采用语音识别(Automatic Speech Recognition，ASR)技术，识别得到语音信息，并将语音信息转换为文本内容，即可得到字幕内容。本公开实施例中对具体的语音识别技术不作限定，例如可以采用随机模型法或人工神经网络的方法等。字幕内容可以包括至少两个字幕片段，字幕片段通过对字幕内容语义拆分得到。具体通过对字幕内容进行语义拆分，可以得到一个字幕片段或多个字幕片段，每个字幕片段中可以包括一部分字幕内容，字幕片段的具体数量不作限定。
本公开实施例中，在多媒体展示界面上展示字幕交互聚合标识，包括：在多媒体展示界面上关联目标字幕所在字幕片段，展示字幕交互聚合标识，其中，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。其中，字幕交互聚合标识中包括针对关联的字幕片段的字幕交互内容的数量，字幕交互内容包括评论和/或表情。可选的，还可以包括：如果同一个目标字幕存在于至少两个连续的字幕片段中，至少两个连续的字幕片段分别展示对应的字幕交互聚合标识。
由于字幕内容可以包括至少一个字幕片段，在展示字幕交互聚合标识时，可以在多媒体展示界面上关联目标字幕所在的字幕片段展示字幕交互聚合标识。目标字幕的数量可以为一个或多个，当目标字幕的数量为一个时，目标字幕可以存在于一个字幕片段，也可以存在于至少两个连续的字幕片段，至少两个连续的字幕片段分别展示对应的字幕交互聚合标识；当目标字幕的数量为两个或两个以上时，目标字幕可以存在于一个字幕片段，也可以分别存在于不连续的多个不同的字幕片段，在每个目标字幕所在的字幕片段均展示对应的字幕交互聚合标识。字幕交互聚合标识具体所在位置不限，可以根据实际情况进行设定。例如，目标字幕所在字幕片段分别为第一字幕片段和第三字幕片段时，则可以关联第一字幕片段和第三字幕片段分别展示两个字幕交互聚合标识，其他字幕片段不展示字幕交互聚合标识。可选的，由于字幕交互内容的数量为一个或多个，字幕交互聚合标识中还可以展示有关联的字幕片段中包括的字幕交互内容的具体数量。
示例性的，参见图2，图中第二区域12中的字幕内容包括三个字幕片段，用户3和用户4对目标字幕“1234”进行了评论，目标字幕“1234”所在字幕片段为第二个字幕片段，也即用户2下方的字幕片段，因此字幕交互聚合标识14关联展示在第二个字幕片段中第一行文本的右侧，并且字幕交互聚合标识14中的2表示了有两个字幕交互内容，也即两个评论。图2中字幕交互聚合标识14的展示位置仅为示例，其他可以与字幕片段关联展示的位置也可以适用，例如字幕交互聚合标识14也可以展示在第二个字幕片段中第一行文本的左侧。
步骤102、展示字幕交互聚合标识对应的至少一个字幕交互内容，其中，字幕交互内容为针对字幕内容的交互内容。
字幕交互内容如上描述，是指针对字幕内容中的部分字幕预先输入的交互内容，具体可以包括评论和/或表情，本公开实施例中对字幕交互内容的数量和发布者等不作限定。
当接收到用户对字幕交互聚合标识的触发操作之后，可以展示该字幕交互聚合标识对应的一个字幕交互内容或多个字幕交互内容。可选的，展示字幕交互聚合标识对应的至少一个字幕交互内容，可以包括：在多媒体展示界面上的字幕交互窗口中展示字幕交互聚合标识关联的字幕片段的至少一个字幕交互内容。
其中，字幕交互窗口是指用于展示字幕交互内容的窗口，可以将字幕交互聚合标识对应的字幕交互内容从隐藏状态变为展开进行展示的状态。字幕交互窗口可以关联字幕交互聚合标识进行展示，也即字幕交互窗口可以在字幕交互聚合标识的位置附近进行展示。当接收到用户对字幕交互聚合标识的触发操作之后，可以关联字幕交互聚合标识展示字幕交互窗口，并在字幕交互窗口中展示对应的字幕交互内容。
示例性的，参见图2，图中字幕内容中的箭头可以表示用户对字幕交互聚合标识14的触发操作，该字幕交互聚合标识14关联的字幕片段为图中的第二个字幕片段，对应的用户3和用户4的评论展示在字幕交互窗口13中，并且这两个评论的发布时间也进行了展示，用户3发布评论的时间为9月16日14：38，而用户4发布评论的时间为9月10日11：16。
可选的，本公开实施例中的多媒体的交互方法还可以包括：在字幕交互窗口中展示至少一个多媒体交互内容，其中，多媒体交互内容对应于字幕交互聚合标识关联的字幕片段所对应时间段，多媒体交互内容为基于多媒体的播放时间轴获取的针对多媒体的交互内容。
上述多媒体交互内容与字幕交互内容不同，是指用户对多媒体的交互内容，可以基于多媒体的播放时间轴输入交互内容，该多媒体交互内容也可以包括评论和/或表情等，具体不限，例如当视频播放时，用户可以在视频的播放时间轴上通过触发展示的交互组件输入针对当前视频画面帧的评论或表情。本公开实施例中，字幕交互聚合标识也可以与关联的字幕片段在多媒体的时间段中包括的多媒体交互内容相对应，当接收到用户对字幕交互聚合标识的触发操作之后，也可以在字幕交互窗口中展示对应的多媒体交互内容。
可选的，字幕交互窗口中可以同时展示字幕交互内容和多媒体交互内容，具体可以采用多种方式加以区分，本公开实施例不作限定。例如通过设置两个区域分别展示字幕交互内容和多媒体交互内容，或者，通过分别添加不同的标识，用来表征字幕交互内容和多媒体交互内容。可选的，字幕交互聚合标识中除了包括针对关联的字幕片段的字幕交互内容的数量，还可以包括针对关联的字幕片段所对应时间段的多媒体交互内容的数量。字幕交互聚合标识中可以表征对应的字幕交互内容的数量以及多媒体交互内容的数量之和，或者，分别表征字幕交互内容的数量或多媒体交互内容的数量。
可选的，多媒体的交互方法还可以包括：接收用户对字幕内容中选定字幕的触发操作，在多媒体展示界面上的字幕交互窗口中展示选定字幕的字幕交互内容，或者，展示选定字幕所在字幕片段的字幕交互内容。其中，选定字幕是指具有字幕交互内容的字幕，也即上述包括字幕交互内容的多个目标字幕中的其中一个。选定字幕已经突出展示给用户，当用户对包括有字幕交互内容的选定字幕进行触发时，可以在字幕交互窗口中展示该选定字幕对应的字幕交互内容，或者，在字幕交互窗口中展示选定字幕所在字幕片段的全部字幕交互内容，选定字幕的字幕交互内容位于其中，将字幕交互窗口跳转到选定字幕对应字幕交互内容处进行展示。上述通过触发具有字幕交互内容的字幕也可以将隐藏的字幕交互内容进行展示，提供了更多的字幕交互内容的展示方式。
示例性的，参见图2，用户3和用户4对目标字幕“1234”进行评论之后，“1234”即为选定字幕，当用户触发该选定字幕之后，可以在字幕交互窗口13中展示用户3和用户4的字幕交互内容。可以理解的是，字幕交互窗口13可以仅展示当前选定字幕的字幕交互内容，也可以展示整个字幕片段的字幕交互内容，如果字幕交互窗口13中展示的字幕交互内容过多时，可以将字幕交互窗口13中的字幕交互内容跳转到选定字幕对应的字幕交互内容的位置，并进行突出展示。
本公开实施例提供的多媒体的交互方案，接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，多媒体展示界面上展示有多媒体、多媒体的字幕内容以及字幕交互聚合标识，展示字幕交互聚合标识对应的至少一个字幕交互内容，其中，字幕交互内容为针对字幕内容的交互内容。采用上述技术方案，由于字幕交互聚合标识是对多个字幕交互内容的聚合表征，基于字幕交互聚合标识的触发可以快捷展示针对多媒体的字幕内容的多个字幕交互内容，提高了字幕交互内容的展示效率，字幕交互聚合标识不被触发时仅仅展示一个标识，相较于通常的展示方式，可以根据用户的选择进行展示，更加灵活，展示效果更佳。
具体地，在实际使用场景中，多媒体数据有关联的字幕数据，用户可能会在字幕数据显示界面进行交互，比如进行评论等反馈，也可能会在多媒体数据的播放区域(例如视频播放区域或音频播放区域)，针对播放的多媒体数据进行交互，这些交互，实际上是针对同一份或关联的信息源的，通过在多媒体数据与所述字幕数据中关联呈现所获取的交互输入，可以便于交互输入信息的输入和流通展现，使得用户在字幕数据中输入的交互输入，可以在与字幕数据关联的多媒体文件播放时呈现，以便于查看，或者使得用户在多媒体数据播放界面输入的交互输入，可以在与多媒体数据关联的字幕数据的显示界面上被查看，从而使得用户交互更加便捷、在不同场景下都能够便捷的输入交互内容、且在其他场景下查看时不会丢失交互内容，信息互通效果更好。例如，在阅读模式(例如，以阅读字幕内容为主的模式)下针对字幕内容输入的交互，可以在播放场景下被查看到，或者在播放模式下输入的交互内容，可以在阅读模式下呈现在字幕数据显示界面上。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对多媒体展示界面的多媒体的播放时间轴上的字幕交互提示标识的触发操作；在字幕交互窗口中展示字幕交互提示标识对应的字幕交互内容。可选的，一个字幕交互提示标识对应关联字幕的至少一个字幕交互内容，其中，关联字幕为与字幕交互提示标识关联的关联时间点或关联时间段的字幕。
其中，字幕交互提示标识是指用户针对字幕内容输入交互内容之后设置的用于提示此位置具有字幕交互内容的一个标识，字幕交互提示标识与字幕交互聚合标识的表现形式可以相同，也可以不同，具体可以根据实际情况进行设置。由于字幕交互提示标识设置在多媒体的播放时间轴上，字幕交互提示标识可以与播放时间轴上一个关联时间点相关联，也可以与播放时间轴上一个关联时间段相关联。当字幕交互提示标识关联一个关联时间点时，该字幕交互提示标识对应的关联字幕为该关联时间点对应的字幕；当字幕交互提示标识关联一个关联时间段时，该字幕交互提示标识对应的关联字幕为该关联时间段对应的字幕。由此，一个字幕交互提示标对应于上述针对关联字幕的字幕交互内容，字幕交互内容的数量可以为至少一个。
具体的，当接收到用户对多媒体展示界面的多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，可以在上述字幕交互窗口中展示字幕交互提示标识对应的字幕交互内容，该字幕交互窗口也可以关联上述字幕交互聚合标识进行展示。
此外，本公开实施例中，用户基于多媒体的播放时间轴可以输入针对多媒体的多媒体交互内容，播放时间轴上也可以展示该多媒体交互内容对应的多媒体交互提示标识，用于提示用户此处具有多媒体交互内容。可以理解的是，多媒体交互提示标识与上述字幕交互提示标识的具体表现形式不同，用于区分提示不同的交互内容，当用户触发字幕交互提示标识时可以在字幕交互窗口中展示字幕交互内容，当用户触发多媒体交互提示标识时，可以在关联播放时间轴的互动卡片中展示多媒体交互内容。
示例性的，参见图2，图中多媒体展示界面10中音频的播放时间轴30上展示了四个字幕交互提示标识，包括三个评论标识和一个表情标识，仅为标识示例展示。从左第一个字幕交互提示标识上的箭头可以表示用户对该字幕交互提示标识的触发操作，触发操作的具体形式可以为多种，例如可以是用户对该字幕交互提示标识进行点击。第一个字幕交互提示标识关联的关联时间段对应字幕内容中的第二个字幕片段，由此触发操作之后，即可在字幕交互窗口13中展示第二个字幕片段的所有的字幕交互内容。
上述方案中，基于对多媒体的播放时间轴上的字幕交互提示标识的触发操作，该字幕交互提示标识对应的针对多媒体的多媒体交互内容也可以由隐藏状态展开展示在字幕交互窗口中。对字幕交互聚合标识和字幕交互提示标识的触发，均可以展示对应的字幕交互内容，进一步提高了字幕交互内容的展示效果，展示更加灵活。
可选的，接收用户对多媒体展示界面的多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还可以包括：基于字幕交互提示标识对应的关联字幕的时间戳播放多媒体。可选的，接收用户对多媒体展示界面的多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还包括：将多媒体的字幕内容跳转到字幕交互提示标识对应的关联字幕所在位置，并突出展示关联字幕以及关联字幕的字幕交互内容。
本公开实施例中的字幕内容是通过对多媒体的语音识别得到的，字幕内容中的每个文本均具备对应的语音信息，进而可以对应到多媒体中的一个时间戳。本公开实施例中，当接收到用户对多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，可以确定字幕交互提示标识对应的关联字幕的时间戳，并基于该时间戳播放多媒体。并且，可以将在多媒体展示界面中单独展示的字幕内容进行跳转，跳转到关联字幕所在位置，并将关联字幕以及关联字幕的字幕交互内容突出展示。可选的，在多媒体的后续播放过程中，可以依次对关联字幕之后的与多媒体的播放进度对应的字幕语句进行突出展示。关联字幕的字幕交互内容在字幕交互窗口中进行突出展示。本公开实施例中对突出展示的方式不作限定，例如可以采用高亮、加粗和添加下划线中的至少一个进行突出展示。
上述方案中，基于对多媒体的播放时间轴上的字幕交互提示标识的触发操作，字幕交互提示标识在多媒体和字幕内容中对应的部分均可以关联互动，使用户更好地了解字幕交互提示标识关联的内容，更能满足用户的交互需求，提高用户的交互体验效果。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对多媒体的播放时间轴上目标时间点对应位置的交互展示触发操作；展示互动卡片，其中，互动卡片中包括目标时间点对应字幕的字幕交互数据，字幕交互数据包括字幕交互内容和/或字幕交互内容的统计数据。可选的，互动卡片中还包括目标时间点的针对多媒体的多媒体交互数据，多媒体交互数据包括多媒体交互内容和/或多媒体交互内容的统计数据。
其中，目标时间点可以是交互展示触发操作在播放时间轴上对应的时刻，或者，目标时间点也可以是距离交互展示触发操作在播放时间轴上的时刻最近的关键时间点，关键时间点可以在播放时间轴上按照预设规则设置。由于用户基于多媒体的播放时间轴可以输入针对多媒体的多媒体交互内容，目标时间点在播放时间轴上的位置展示有多媒体交互提示标识用于提示用户此处具有多媒体交互内容。媒体交互提示标识与上述字幕交互提示标识的具体表现形式不同，用于区分提示不同的交互内容。
交互展示触发操作是指用户想要对当前的多媒体进行交互内容展示的触发操作，本公开实施例中交互展示触发操作可以包括在视频的播放时间轴上或在设定按钮上的设定操作，设定操作包括悬停操作或点击操作。也即交互展示触发操作可以包括在播放时间轴上的悬停操作或点击操作，或者，在设定按钮上的悬停操作或点击操作，设定按钮可以为预先设置的按钮，按钮的具体位置和样式不作限定，可以根据实际情况进行设定。
互动卡片可以为能够展示多媒体的相关互动内容的卡片，本公开实施例中对互动卡片的具体样式不做限定。字幕交互数据是指针对目标时间点对应字幕的所有用户发布的互动内容，字幕交互数据可以包括字幕交互内容和/或字幕交互内容的统计数据，字幕交互内容的统计数据可以包括字幕交互内容的数量、用户信息和发布时间等中的至少一个。多媒体交互数据是指针对目标时间点对应多媒体用户发布的互动内容，多媒体交互数据可以包括多媒体交互内容和/或多媒体交互内容的统计数据，多媒体交互内容的统计数据可以包括多媒体交互内容的数量、用户信息和发布时间等中的至少一个。
本公开实施例中，当接收到用户对多媒体的播放时间轴的一个位置的交互展示触发操作时，确定该位置的目标时间点，可以展示互动卡片，该互动卡片中可以包括目标时间点对应字幕的字幕交互数据和/或目标时间点的针对多媒体的多媒体交互数据。可选的，当接收到用户对播放时间轴上多媒体交互提示标识的交互展示触发操作时，在互动卡片中仅包括目标时间点的针对多媒体的多媒体交互数据。
上述方案中通过一个互动卡片可以在用户对时间轴进行触发时，展示相关的字幕交互数据和/或多媒体交互数据，使用户在时间轴上更直观地了解当前时间点对应的多种类型的交互数据，展示的交互数据更加全面，并且更加具有针对性，使交互数据的展示效果更优。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对字幕内容中的第一字幕片段的删除操作；删除第一字幕片段之后，将第一字幕片段对应的字幕交互聚合标识呈现在与第一字幕片段的历史位置关联的区域中。
其中，第一字幕片段为任意一个字幕片段。本公开实施例中，由于字幕内容可以包括至少两个字幕片段，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。当接收用户对第一字幕片段的删除操作时，可以执行对第一字幕片段的删除，之后如果第一字幕片段存在关联的字幕交互聚合标识，则将已经删除的第一字幕片段关联的字幕交互聚合标识呈现在与第一字幕片段的历史位置关联的区域中，该关联的区域所在位置具体不限。
示例性的，图3为本公开实施例提供的另一种多媒体展示界面的示意图，如图2和图3所示，删除了用户2的字幕片段，该字幕片段关联的字幕交互聚合标识14呈现在用户1的字幕片段和用户3的字幕片段之间，也在用户1的字幕片段关联的字幕交互聚合标识15以及用户3的字幕片段关联的字幕交互聚合标识16之间，与用户2的字幕片段的历史位置关联。图3中删除字幕片段后字幕交互聚合标识的呈现位置仅为示例，不作为限定。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对字幕内容中的第二字幕片段的拆分操作，其中拆分操作用于将第二字幕片段拆分为至少两个子字幕片段；基于拆分后的子字幕片段拆分第二字幕片段的字幕交互内容。可选的，多媒体的交互方法还可以包括：删除第二字幕片段的历史字幕交互聚合标识，关联具有字幕交互内容的子字幕片段展示新的字幕交互聚合标识。
其中，第二字幕片段也为任意一个字幕片段。接收到用户对第二字幕片段的拆分操作之后，可以对第二字幕片段执行拆分操作，将第二字幕片段拆分为至少两个子字幕片段；之后根据子字幕片段，可以对第二字幕片段的字幕交互内容进行拆分。并且，对第二字幕片段拆分之后，由于第二字幕片段已经不存在，可以删除其对应的历史字幕交互聚合标识，对于包括字幕交互内容的子字幕片段可以关联展示新的字幕交互聚合标识，但是对于不包括字幕交互内容的子字幕片段可以不展示字幕交互聚合标识。
上述方案中，随着字幕片段的删除，针对字幕片段的字幕交互内容可以进行保留，并保留字幕交互聚合标识，以备后续字幕交互内容的展示；而随着字幕片段的拆分，针对字幕片段的字幕交互内容也随之拆分，并且基于拆分后的实际字幕交互内容对于的字幕片段展示新的字幕交互聚合标识。字幕交互内容的展示随着用户的实际操作，也发生变化，灵活性更高。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对字幕交互内容的回复操作；展示回复编辑界面，并获取回复编辑界面中用户输入的字幕交互回复内容。可选的，多媒体的交互方法还可以包括：将字幕交互回复内容关联字幕交互内容展示。
其中，回复操作是指用于对已有的字幕交互内容进行进一步回复的操作，具体的操作形式可以为多种，例如对字幕交互内容进行悬浮操作以及对展示的回复按钮的点击操作。回复编辑界面是提供给用户使用户进行回复内容的编辑和发布的界面。在字幕窗口中展示字幕交互内容之后，可以接收用户对字幕交互内容的回复操作，之后可以将回复编辑界面展示给用户，并获取用户在回复编辑界面中输入的字幕交互回复内容，该字幕交互回复内容可以为回复评论和/或回复表情。可选的，字幕交互回复内容可以关联字幕交互内容进行展示，也即字幕交互回复内容也可以展示在字幕交互窗口中。
示例性的，参见图2，字幕展示窗口13中的箭头可以表示当前用户5对用户4的评论“这个我赞同”的选中，之后可以在目标字幕“1234”右侧展示回复按钮给用户，当接收到当前用户5对回复按钮的触发之后，可以确定接收到对目标字幕“1234”的回复操作，之后可以展示回复编辑界面给用户5(图中未示出)，获取用户5输入的字幕交互回复内容，图中的“你也看一下”即为用户5输入的字幕交互回复内容，并且该字幕交互回复内容可以展示在针对的评论“这个我赞同”的下方，通过不同灰度的背景色提示用户。
上述方案中，字幕交互内容展示之后，用户可以根据实际需求对字幕交互内容进行进一步的回复交互，并且回复交互的内容关联之前的字幕交互内容，进一步满足用户对字幕交互内容的交互需求，提高了用户的交互体验。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对搜索关键字的搜索触发操作；将字幕内容和字幕交互内容中基于搜索关键字搜索命中的目标关键字突出展示。其中，目标关键字所在字幕交互内容展示于字幕交互窗口中。
其中，搜索关键字可以为用户当前输入的待执行搜索操作的关键字。搜索触发操作是指用于进行搜索的触发操作，具体的形式不限，例如可以对预先设置的搜索按钮进行触发。目标关键字与搜索关键字相同或相近的关键字。接收到用户对搜索关键字的搜索触发操作之后，可以对字幕内容和字幕交互内容进行搜索操作，将匹配度大于匹配度阈值的字确定为搜索命中的目标关键字，并将目标关键字突出展示。本公开实施例中对目标关键字突出展示的方式不作限定，例如可以为采用高亮、加粗和添加下划线等方式，并且字幕内容中的目标关键字与字幕交互内容中的目标关键字突出展示的方式可以相同也可以不同。字幕交互内容展示在字幕交互窗口中，该字幕交互窗口可以跳转到目标关键字所在位置。
可选的，多媒体的交互方法还可以包括：在多媒体的播放时间轴上目标关键字时间戳的对应位置展示搜索命中提示标识。搜索命中提示标识是用于提示用户当前位置的对应的字幕和/或字幕交互内容搜索命中，搜索命中提示标识的具体表现形式不作限定，例如可以采用圆点表示搜索命中提示标识。确定目标关键字之后，还可以确定目标关键字在多媒体的时间点，并在多媒体的播放时间轴上目标关键字所在时间戳的对应位置展示搜索命中提示标识，
示例性的，图4为本公开实施例中提供的再一种多媒体展示界面的示意图，参见图4，多媒体展示界面10中展示有搜索区域17，用户可以在搜索区域17中输入搜索关键字，并触发搜索按钮，执行对搜索关键字的搜索操作，搜索完成之后，字幕内容和字幕交互内容中命中的目标关键字进行突出展示，如图中搜索关键字为“创新”，字幕内容和字幕交互窗口13中字幕交互内容中的“创新”均添加背景色展示，多媒体展示界面上方音频的播放时间轴30下的圆点表示搜索命中提示标识，如图中四个“创新”的搜索命中提示标识均进行展示，图中一个字幕内容以及对应的字幕交互内容中均包括“创新”，在播放时间轴上仅展示一个搜索命中提示标识。
本公开实施例中，字幕内容和字幕交互内容能够支持搜索功能，并且搜索之后的关键字可以与字幕内容、字幕交互内容、多媒体进行关联互动，使用户直观地且快速地了解搜索结果在不同内容之间的对应关系，提高了用户的搜索体验效果。
可选的，多媒体的交互方法还可以包括：在搜索展示区域展示命中的目标关键字的总数量；对目标关键字中当前选中的关键字以及对应的搜索命中提示标识突出展示，并展示当前选中的关键字在目标关键字中的排序结果，其中，当前选中的关键字以及搜索命中提示标识突出展示的方式与目标关键字突出展示的方式不同。可选的，多媒体的交互方法还可以包括：接收用户对当前选中的关键字的跳转操作，跳转操作包括向上跳转和/或向下跳转；展示跳转之后的当前选中的关键字。
本公开实施例中，在对于搜索关键字执行搜索操作之后，可以在搜索展示区域展示命中的目标关键字的总数量；将当前选中的关键字以及当前选中的关键字对于的搜索命中提示标识突出展示，并展示当前选中的关键字在目标关键字中的排序结果，也即当前选中的关键字是多个目标关键字中的第几个。其中，当前选中的关键字以及搜索命中提示标识突出展示的方式与目标关键字突出展示的方式不同，用以区别其他目标关键字。可选的，还可以接收用户对当前选中的关键字的跳转操作，跳转操作用于跳转其他目标关键字，具体可以包括向上跳转和/或向下跳转，跳转之后采用第二方式突出展示跳转后的当前选中的关键字以及对应的搜索命中提示标识。
示例性的，参见图4，图4中搜索区域17中的“1/4”表示搜索命中的“创新”的总数量为4，当前选中的“创新”为第一个，并且字幕内容中第一个“创新”通过加粗方式突出展示，对应的搜索提示标识可以采用方点进行展示。搜索区域17中“1/4”之后展示了两个跳转按钮，分别为向上跳转按钮和向下跳转按钮，当用户点击向下跳转按钮时，可以对当前选中的关键字执行向下跳转的操作，如图中可以跳转到字幕内容中的第二个“创新”，图中“1/4”变为“2/4”，第二个“创新”通过加粗方式突出展示，对应的搜索提示标识可以采用方点进行展示，第一个“创新”以及对应的搜索提示标识回复采用第一方式突出展示。
上述方案中，用户对字幕内容和字幕交互内容执行搜索之后，对搜索结果还可以进一步展示，并且用户还可以对搜索结果进行进一步选中，以基于选中后的不同的突出展示了解不同搜索结果在不同内容之间的对应关系，进一步提高了用户的搜索体验效果。
在一些实施例中，多媒体的交互方法还可以包括：接收用户对多媒体的字幕内容和字幕交互内容的翻译触发操作；将多媒体的字幕内容和字幕交互内容由初始语言翻译为目标语言。
其中翻译触发操作是用于对字幕内容和字幕交互内容进行不同语言之间的翻译的触发操作。当接收到用户对字幕内容和字幕交互内容的翻译触发操作之后，可以将字幕内容和字幕交互内容由当前初始语言翻译为目标语言，目标语言可以为用户指定的翻译语言，目标语言可以包括多种，具体不限。
示例性的，参见图4，多媒体展示界面10中展示有翻译按钮18，当用户触发翻译按钮18时，可以执行对多媒体展示界面10中所有文本的翻译，也可以有针对性的执行对字幕内容或字幕交互内容的翻译，具体可以从初始语言翻译为目标语言，例如可以将字幕内容和字幕交互内容从中文翻译为英文。
本公开实施例中，字幕内容和字幕交互内容能够支持翻译功能，可以满足用户对不同语言的翻译需求，更有利于用户了解字幕内容和字幕交互内容。
此外，参见图4，多媒体展示界面10中还可以设置关键字展示区域19和分享按钮20等等，用户触发其中一个按钮时，可以执行对应的操作。该关键字展示区域19中示例性的展示有5个关键字，分别为“创新”、“尺寸”、“框架”、“部件”和“重命名”，关键字可以为通过对字幕内容和字幕交互内容进行关键字提取得到，当用户对其中一个关键字进行触发时，字幕内容和字幕交互内容中的该关键字可以突出展示，例如对“创新”进行触发时，字幕内容和字幕交互内容中的“创新”均突出展示，突出展示的方式具体不限。当用户触发分享按钮20时，可以将多媒体展示界面10整体分享给其他用户。并且，音频的播放时间轴30可以展示在多媒体展示界面10中的底部或顶部，具体不限，可以根据实际情况进行设定。
可以理解的是，本公开实施例中图2、图3和图4中的多媒体展示界面仅为示例，不是对多媒体展示界面的限定，多媒体展示界面可以根据实际情况和用户需求进行多种情况的设置。
本公开实施例提供的多媒体的交互方法，基于字幕交互聚合标识的触发可以快捷展示针对多媒体的字幕内容的多个字幕交互内容，提高了字幕交互内容的展示效率，字幕交互聚合标识不被触发时仅仅展示一个标识，相较于通常的展示方式，可以根据用户的选择进行展示，更加灵活，展示效果更佳；并且，基于字幕交互聚合标识的触发还可以快捷展示针对多媒体的多个多媒体交互内容，两种类型的交互内容均可以基于字幕交互聚合标识的触发进行展示，进一步提高了交互内容的展示效率和展示效果；基于对多媒体的播放时间轴上的字幕交互提示标识的触发操作，多媒体交互内容也可以由隐藏状态展开展示在字幕交互窗口中，进一步提高了字幕交互内容的展示效果，展示更加灵活；通过一个互动卡片可以在用户对时间轴进行触发时，展示相关的字幕交互数据和/或多媒体交互数据，展示的交互数据更加全面，并且更加具有针对性，使交互数据的展示效果更优；字幕内容中的字幕片段支持拆分和删除功能，并且字幕交互内容的展示随着用户的实际操作，也发生变化，灵活性更高；字幕交互内容展示之后，用户可以根据实际需求对字幕交互内容进行进一步的回复交互；字幕交互内容支持搜索和翻译等操作，交互功能更加多样，更有利于满足用户的多样化需求。
图5为本公开实施例提供的另一种多媒体的交互方法的流程示意图，该方法可以由多媒体的交互装置执行，其中该装置可以采用软件和/或硬件实现，一般可集成在电子设备中。如图5所示，在上述实施例的基础上，该方法包括：
步骤201、接收交互输入触发操作，其中，交互输入触发操作用于触发对多媒体的交互输入和/或对与多媒体的字幕内容的交互输入。
其中，交互输入触发操作是指用户想要对当前正在浏览的多媒体和/或多媒体的字幕内容进行交互输入的触发操作，本公开实施例中对交互输入触发操作不限，例如交互输入触发操作可以为悬停操作或点击操作等。
当用户浏览多媒体和/或多媒体的字幕内容时，可以接收用户对多媒体和/或多媒体字幕交互的交互输入触发操作。
步骤202、获取基于交互触发操作触发的交互输入数据。
其中，交互输入数据可以包括上述实施例中的多媒体交互内容和/或字幕交互内容，多媒体交互内容是指针对多媒体输入的交互内容，字幕交互内容是指针对字幕内容输入的交互内容。
具体的，接收到交互输入触发操作之后，可以展示包括交互组件的交互输入界面给用户，基于交互组件获取用户输入的多媒体交互内容和/或字幕交互内容，交互组件的数量可以为多个，可以包括评论组件和/或表情组件。
步骤203、在多媒体与字幕内容中关联呈现交互输入数据。
本公开实施例中，交互输入数据的多媒体交互内容可以关联多媒体与字幕内容呈现，并且，交互输入数据的字幕交互内容也可以关联多媒体与字幕内容呈现。
在一些应用场景中，可以基于字幕内容与多媒体的时间戳，来关联呈现交互输入数据。具体地，字幕内容的组成单元(例如，字幕内容中的词、句和/或段)可以具有一时间戳，该时间戳可以表征该组成单元所对应的语音在多媒体中出现的时间信息。这样一来，针对多媒体触发的交互输入数据可以呈现在与触发时刻(触发操作所指示的多媒体的播放进度)对应的字幕内容之处(也即，与该字幕内容关联地呈现)；另一方面，针对字幕内容触发的交互输入数据，也可以在与所触发的字幕内容的时间戳所对应的多媒体片段关联呈现。
针对交互输入数据中的多媒体交互内容，获取多媒体交互内容之后，可以采用弹窗方式或在多媒体的时间轴上关联呈现该多媒体交互内容，并且在字幕内容所在区域的字幕交互窗口中关联呈现该多媒体交互内容。针对交互输入数据中的字幕交互内容，获取字幕交互内容之后，可以采用弹窗方式或在多媒体的时间轴上关联呈现该字幕交互内容，并且在字幕内容所在区域的字幕交互窗口中关联呈现该字幕交互内容。交互输入数据中的不同类型的交互内容在呈现时可以呈现在同一个窗口或界面中，也可以呈现在不同的窗口或界面中，具体不限。并且，交互输入数据中的不同类型的交互内容在关联呈现时可以采用不同的方式进行区分，例如采用不同的标识进行区分。
可以理解的是，获取交互输入数据之后，在多媒体与字幕内容中关联呈现的方式可以包括多种，上述仅为示例，在此不进行一一赘述。此外，在不矛盾的前提下，本公开实施例中的各个步骤、特征可以与本公开的其它实施例(包括但不限于如图1所示的实施例、图6所示的实施例以及这些实施例的具体实现手段等)相互组合。
本公开实施例提供的多媒体的交互方法，接收交互输入触发操作，其中，交互输入触发操作用于触发对多媒体的交互输入和/或对与多媒体的字幕内容的交互输入，获取基于交互触发操作触发的交互输入数据，在多媒体与字幕内容中关联呈现交互输入数据。采用上述技术方案，无论是针对多媒体的交互内容还是针对多媒体的字幕内容的交互内容，获取之后均可以关联多媒体以及字幕内容呈现，实现了多媒体以及字幕内容的交互数据之间的交叉关联展示，提高了关联展示效果，进一步提高了用户对多媒体、字幕以及交互数据三者之间相互对应关系的了解，交互功能的关联性更强以及更加多样化，提高了用户体验效果。
图6为本公开实施例提供的一种信息交互方法的流程示意图，该方法可以由信息交互装置执行，其中该装置可以采用软件和/或硬件实现，一般可集成在电子设备中。如图6所示，在上述实施例的基础上，该方法包括：
步骤301、获取用户对文本内容中选定文字的交互内容。
其中，文本内容可以理解为任意一个由文字组成的内容，具体来源不限，上述实施例中，通过对多媒体语音识别得到的字幕内容是其中一个示例。选定文字是指用户触发操作在上述文本内容中对应的文字。交互内容是指用户针对选定文字输入的互动内容，具体可以包括评论和/或表情等，本公开实施例对交互内容的数量和发布者不作限定。当文本内容为字幕内容时，交互内容是指针对字幕内容的字幕交互内容。
当用户浏览文本内容时，可以接收用户对文本内容中选定文字的交互输入触发操作，之后可以展示包括交互组件的交互输入界面给用户，基于交互组件获取用户输入的交互内容。由于交互内容可以包括多种类型，交互组件的数量也可以为多个，例如可以包括评论组件和/或表情组件。
步骤302、关联选定文字所在文本片段展示交互聚合标识，其中，文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
其中，文本片段通过对上述文本内容进行拆分得到，具体可以基于语义进行拆分，文本内容可以包括一个文本片段或多个文本片段，每个文本片段中可以包括一部分文本内容，文本片段的数量不作限定。交互聚合标识用于表征用户针对文本内容具有交互内容的一个提示标识，该提示标识时一种聚合标识，可以与一个交互内容或多个交互内容相对应。
获取用户针对选定文字的交互内容之后，可以关联选定文字所在的文本片段展示交互聚合标识。选定文字的数量可以为一个或多个，当选定文字的数量为一个时，选定文字可以存在于一个文本片段，也可以存在于至少两个连续的文本片段，至少两个连续的文本片段分别展示对应的交互聚合标识；当选定文字的数量为两个或两个以上时，选定文字可以存在于一个文本片段，也可以分别存在于不连续的多个不同的文本片段，在每个选定文字所在的文本片段均展示对应的交互聚合标识。交互聚合标识具体所在位置不限，可以根据实际情况进行设定。
可选的，由于交互内容的数量为一个或多个，交互聚合标识中还可以展示有关联的文本片段中包括的交互内容的具体数量。
可选的，展示交互聚合标识之后，当接收到用户对交互聚合标识的触发操作，可以展示该交互聚合标识关联的文本片段包括的至少一个交互内容。
此外，在不矛盾的前提下，本公开实施例中的各个步骤、特征可以与本公开的其它实施例(包括但不限于如图1所示的实施例、图5所示的实施例以及这些实施例的具体实现手段等)相互组合。
本公开实施例提供的信息交互方法，获取用户对文本内容中选定文字的交互内容，关联选定文字所在文本片段展示交互聚合标识，其中，文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。采用上述技术方案，获取用户对文本内容中选定文字的交互内容之后，可以关联选定文字所在文本片段展示交互聚合标识，由于交互聚合标识是对一个或多个交互内容的聚合表征，通过对交互聚合标识的触发可以快捷展示关联的多个交互内容，提高了交互内容的展示效率，更加灵活，展示效果更佳。
图7为本公开实施例提供的一种多媒体的交互装置的结构示意图，该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图7所示，该装置包括：
触发模块401，用于接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
交互内容展示模块402，用于展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
可选的，所述装置还包括标识展示模块，用于：所述接收用户对多媒体界面上字幕交互聚合标识的触发操作之前，
响应于获取到用户对所述字幕内容中目标字幕的字幕交互内容，在所述多媒体展示界面上展示所述字幕交互聚合标识。
可选的，所述标识展示模块具体用于：
在所述多媒体展示界面上关联所述目标字幕所在字幕片段，展示所述字幕交互聚合标识，其中，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。
可选的，所述标识展示模块具体用于：
如果同一个目标字幕存在于至少两个连续的字幕片段中，所述至少两个连续的字幕片段分别展示对应的字幕交互聚合标识。
可选的，所述字幕交互聚合标识中包括针对关联的字幕片段的字幕交互内容的数量，所述字幕交互内容包括评论和/或表情。
可选的，所述交互内容展示模块402具体用于：
在所述多媒体展示界面上的字幕交互窗口中展示所述字幕交互聚合标识关联的字幕片段的至少一个字幕交互内容。
可选的，所述装置还包括多媒体交互内容模块，具体用于：
在字幕交互窗口中展示至少一个多媒体交互内容，其中，所述多媒体交互内容对应于所述字幕交互聚合标识关联的字幕片段所对应时间段，所述多媒体交互内容为基于所述多媒体的播放时间轴获取的针对所述多媒体的交互内容。
可选的，所述字幕内容包括至少两个字幕片段，所述字幕片段通过对所述字幕内容语义拆分得到。
可选的，所述装置还包括提示触发模块，具体用于：
接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作；
在字幕交互窗口中展示所述字幕交互提示标识对应的字幕交互内容。
可选的，一个所述字幕交互提示标识对应关联字幕的至少一个字幕交互内容，其中，所述关联字幕为与所述字幕交互提示标识关联的关联时间点或关联时间段的字幕。
可选的，所述字幕交互窗口关联所述字幕交互聚合标识进行展示。
可选的，所述装置还包括播放模块，具体用于：接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，
基于所述字幕交互提示标识对应的关联字幕的时间戳播放所述多媒体。
可选的，所述装置还包括突出展示模块，具体用于：接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，
将所述多媒体的字幕内容跳转到所述字幕交互提示标识对应的关联字幕所在位置，并突出展示所述关联字幕以及所述关联字幕的字幕交互内容。
可选的，所述装置还包括字幕交互数据展示模块，具体用于：
接收用户对所述多媒体的播放时间轴上目标时间点对应位置的交互展示触发操作；
展示互动卡片，其中，所述互动卡片中包括所述目标时间点对应字幕的字幕交互数据，所述字幕交互数据包括字幕交互内容和/或所述字幕交互内容的统计数据。
可选的，所述互动卡片中还包括所述目标时间点的针对所述多媒体的多媒体交互数据，所述多媒体交互数据包括多媒体交互内容和/或所述多媒体交互内容的统计数据。
可选的，所述装置还包括字幕删除模块，具体用于：
接收用户对所述字幕内容中的第一字幕片段的删除操作；
删除所述第一字幕片段之后，将所述第一字幕片段对应的字幕交互聚合标识呈现在与所述第一字幕片段的历史位置关联的区域中。
可选的，所述装置还包括字幕拆分模块，具体用于：
接收用户对所述字幕内容中的第二字幕片段的拆分操作，其中所述拆分操作用于将所述第二字幕片段拆分为至少两个子字幕片段；
基于拆分后的所述子字幕片段拆分所述第二字幕片段的字幕交互内容。
可选的，所述字幕拆分模块具体用于：
删除所述第二字幕片段的历史字幕交互聚合标识，关联具有字幕交互内容的所述子字幕片段展示新的字幕交互聚合标识。
可选的，所述装对还包括交互展示模块，具体用于：
接收用户对所述字幕内容中选定字幕的触发操作，在所述多媒体展示界面上的字幕交互窗口中展示所述选定字幕的字幕交互内容，或者，展示所述选定字幕所在字幕片段的字幕交互内容。
可选的，所述装置还包括字幕交互回复模块，具体用于：
接收用户对所述字幕交互内容的回复操作；
展示回复编辑界面，并获取所述回复编辑界面中用户输入的字幕交互回复内容。
可选的，所述字幕交互回复模块具体用于：
将所述字幕交互回复内容关联所述字幕交互内容展示。
可选的，所述装置还包括搜索模块，具体用于：
接收用户对搜索关键字的搜索触发操作；
将所述字幕内容和所述字幕交互内容中基于所述搜索关键字搜索命中的目标关键字突出展示。
可选的，所述目标关键字所在字幕交互内容展示于字幕交互窗口中。
可选的，所述搜索模块具体用于：
在所述多媒体的播放时间轴上所述目标关键字时间戳的对应位置展示搜索命中提示标识。
可选的，所述装置还包括搜索结果展示模块，具体用于：
在搜索展示区域展示命中的所述目标关键字的总数量；
对所述目标关键字中当前选中的关键字以及对应的搜索命中提示标识突出展示，并展示所述当前选中的关键字在所述目标关键字中的排序结果，其中，所述当前选中的关键字以及所述搜索命中提示标识突出展示的方式与所述目标关键字突出展示的方式不同。
可选的，所述搜索结果展示模块具体用于：
接收用户对所述当前选中的关键字的跳转操作，所述跳转操作包括向上跳转和/或向下跳转；
展示跳转之后的当前选中的关键字。
可选的，所述装置还包括翻译模块，具体用于：
接收用户对所述多媒体的字幕内容和所述字幕交互内容的翻译触发操作；
将所述多媒体的字幕内容和所述字幕交互内容由初始语言翻译为目标语言。
可选的，所述多媒体以及所述字幕内容分别展示在所述多媒体展示界面上的不同区域。
本公开实施例所提供的多媒体的交互装置可执行本公开任意实施例所提供的多媒体的交互方法，具备执行方法相应的功能模块和有益效果。
图8为本公开实施例提供的另一种多媒体的交互装置的结构示意图，该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图8所示，该装置包括：
交互输入触发模块501，用于接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
交互数据获取模块502，用于获取基于所述交互触发操作触发的交互输入数据；
交互数据呈现模块503，用于在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
本公开实施例所提供的多媒体的交互装置可执行本公开任意实施例所提供的多媒体的交互方法，具备执行方法相应的功能模块和有益效果。
图9为本公开实施例提供的一种信息交互装置的结构示意图，该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图9所示，该装置包括：
交互获取模块601，用于获取用户对文本内容中选定文字的交互内容；
标识展示模块602，用于关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
本公开实施例所提供的信息交互装置可执行本公开任意实施例所提供的信息交互方法，具备执行方法相应的功能模块和有益效果。
图10为本公开实施例提供的一种电子设备的结构示意图。下面具体参考图10，其示出了适于用来实现本公开实施例中的电子设备700的结构示意图。本公开实施例中的电子设备700可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图10示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图10所示，电子设备700可以包括处理装置(例如中央处理器、图形处理器等)701，其可以根据存储在只读存储器(ROM)702中的程序或者从存储装置708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中，还存储有电子设备700操作所需的各种程序和数据。处理装置701、ROM 702以及RAM703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
通常，以下装置可以连接至I/O接口705：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置706；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置707；包括例如磁带、硬盘等的存储装置708；以及通信装置709。通信装置709可以允许电子设备700与其他设备进行无线或有线通信以交换数据。虽然图10示出了具有各种装置的电子设备700，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置709从网络上被下载和安装，或者从存储装置708被安装，或者从ROM 702被安装。在该计算机程序被处理装置701执行时，执行本公开实施例的多媒体的交互方法和/或信息交互方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
或者，上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；获取基于所述交互触发操作触发的交互输入数据；在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
或者，上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：获取用户对文本内容中选定文字的交互内容；关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例，本公开提供了一种多媒体的交互方法，包括：
接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述接收用户对多媒体界面上字幕交互聚合标识的触发操作之前，还包括：
响应于获取到用户对所述字幕内容中目标字幕的字幕交互内容，在所述多媒体展示界面上展示所述字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，在所述多媒体展示界面上展示所述字幕交互聚合标识，包括：
在所述多媒体展示界面上关联所述目标字幕所在字幕片段，展示所述字幕交互聚合标识，其中，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
如果同一个目标字幕存在于至少两个连续的字幕片段中，所述至少两个连续的字幕片段分别展示对应的字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述字幕交互聚合标识中包括针对关联的字幕片段的字幕交互内容的数量，所述字幕交互内容包括评论和/或表情。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，展示所述字幕交互聚合标识对应的至少一个字幕交互内容，包括：
在所述多媒体展示界面上的字幕交互窗口中展示所述字幕交互聚合标识关联的字幕片段的至少一个字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
在字幕交互窗口中展示至少一个多媒体交互内容，其中，所述多媒体交互内容对应于所述字幕交互聚合标识关联的字幕片段所对应时间段，所述多媒体交互内容为基于所述多媒体的播放时间轴获取的针对所述多媒体的交互内容。。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述字幕内容包括至少两个字幕片段，所述字幕片段通过对所述字幕内容语义拆分得到。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作；
在字幕交互窗口中展示所述字幕交互提示标识对应的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，一个所述字幕交互提示标识对应关联字幕的至少一个字幕交互内容，其中，所述关联字幕为与所述字幕交互提示标识关联的关联时间点或关联时间段的字幕。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述字幕交互窗口关联所述字幕交互聚合标识进行展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还包括：
基于所述字幕交互提示标识对应的关联字幕的时间戳播放所述多媒体。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还包括：
将所述多媒体的字幕内容跳转到所述字幕交互提示标识对应的关联字幕所在位置，并突出展示所述关联字幕以及所述关联字幕的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述多媒体的播放时间轴上目标时间点对应位置的交互展示触发操作；
展示互动卡片，其中，所述互动卡片中包括所述目标时间点对应字幕的字幕交互数据，所述字幕交互数据包括字幕交互内容和/或所述字幕交互内容的统计数据。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述互动卡片中还包括所述目标时间点的针对所述多媒体的多媒体交互数据，所述多媒体交互数据包括多媒体交互内容和/或所述多媒体交互内容的统计数据。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述字幕内容中的第一字幕片段的删除操作；
删除所述第一字幕片段之后，将所述第一字幕片段对应的字幕交互聚合标识呈现在与所述第一字幕片段的历史位置关联的区域中。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述字幕内容中的第二字幕片段的拆分操作，其中所述拆分操作用于将所述第二字幕片段拆分为至少两个子字幕片段；
基于拆分后的所述子字幕片段拆分所述第二字幕片段的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
删除所述第二字幕片段的历史字幕交互聚合标识，关联具有字幕交互内容的所述子字幕片段展示新的字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述字幕内容中选定字幕的触发操作，在所述多媒体展示界面上的字幕交互窗口中展示所述选定字幕的字幕交互内容，或者，展示所述选定字幕所在字幕片段的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述字幕交互内容的回复操作；
展示回复编辑界面，并获取所述回复编辑界面中用户输入的字幕交互回复内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
将所述字幕交互回复内容关联所述字幕交互内容展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对搜索关键字的搜索触发操作；
将所述字幕内容和所述字幕交互内容中基于所述搜索关键字搜索命中的目标关键字突出展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述目标关键字所在字幕交互内容展示于字幕交互窗口中。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
在所述多媒体的播放时间轴上所述目标关键字时间戳的对应位置展示搜索命中提示标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
在搜索展示区域展示命中的所述目标关键字的总数量；
对所述目标关键字中当前选中的关键字以及对应的搜索命中提示标识突出展示，并展示所述当前选中的关键字在所述目标关键字中的排序结果，其中当前选中的关键字以及所述搜索命中提示标识突出展示的方式与所述目标关键字突出展示的方式不同。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述当前选中的关键字的跳转操作，所述跳转操作包括向上跳转和/或向下跳转；
展示跳转之后的当前选中的关键字。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，还包括：
接收用户对所述多媒体的字幕内容和所述字幕交互内容的翻译触发操作；
将所述多媒体的字幕内容和所述字幕交互内容由初始语言翻译为目标语言。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互方法中，所述多媒体以及所述字幕内容分别展示在所述多媒体展示界面上的不同区域。
根据本公开的一个或多个实施例，本公开提供了一种多媒体的交互方法，包括：
接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
获取基于所述交互触发操作触发的交互输入数据；
在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
根据本公开的一个或多个实施例，本公开提供了一种信息交互方法，包括：
获取用户对文本内容中选定文字的交互内容；
关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
根据本公开的一个或多个实施例，本公开提供了一种多媒体的交互装置，包括：
触发模块，用于接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
交互内容展示模块，用于展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括标识展示模块，用于：所述接收用户对多媒体界面上字幕交互聚合标识的触发操作之前，
响应于获取到用户对所述字幕内容中目标字幕的字幕交互内容，在所述多媒体展示界面上展示所述字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述标识展示模块具体用于：
在所述多媒体展示界面上关联所述目标字幕所在字幕片段，展示所述字幕交互聚合标识，其中，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述标识展示模块具体用于：
如果同一个目标字幕存在于至少两个连续的字幕片段中，所述至少两个连续的字幕片段分别展示对应的字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述字幕交互聚合标识中包括针对关联的字幕片段的字幕交互内容的数量，所述字幕交互内容包括评论和/或表情。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述交互内容展示模块具体用于：
在所述多媒体展示界面上的字幕交互窗口中展示所述字幕交互聚合标识关联的字幕片段的至少一个字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括多媒体交互内容模块，具体用于：
在字幕交互窗口中展示至少一个多媒体交互内容，其中，所述多媒体交互内容对应于所述字幕交互聚合标识关联的字幕片段所对应时间段，所述多媒体交互内容为基于所述多媒体的播放时间轴获取的针对所述多媒体的交互内容。。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述字幕内容包括至少两个字幕片段，所述字幕片段通过对所述字幕内容语义拆分得到。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括提示触发模块，具体用于：
接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作；
在字幕交互窗口中展示所述字幕交互提示标识对应的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，一个所述字幕交互提示标识对应关联字幕的至少一个字幕交互内容，其中，所述关联字幕为与所述字幕交互提示标识关联的关联时间点或关联时间段的字幕。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述字幕交互窗口关联所述字幕交互聚合标识进行展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括播放模块，具体用于：接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，
基于所述字幕交互提示标识对应的关联字幕的时间戳播放所述多媒体。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括突出展示模块，具体用于：接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，
将所述多媒体的字幕内容跳转到所述字幕交互提示标识对应的关联字幕所在位置，并突出展示所述关联字幕以及所述关联字幕的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括字幕交互数据展示模块，具体用于：
接收用户对所述多媒体的播放时间轴上目标时间点对应位置的交互展示触发操作；
展示互动卡片，其中，所述互动卡片中包括所述目标时间点对应字幕的字幕交互数据，所述字幕交互数据包括字幕交互内容和/或所述字幕交互内容的统计数据。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述互动卡片中还包括所述目标时间点的针对所述多媒体的多媒体交互数据，所述多媒体交互数据包括多媒体交互内容和/或所述多媒体交互内容的统计数据。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括字幕删除模块，具体用于：
接收用户对所述字幕内容中的第一字幕片段的删除操作；
删除所述第一字幕片段之后，将所述第一字幕片段对应的字幕交互聚合标识呈现在与所述第一字幕片段的历史位置关联的区域中。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括字幕拆分模块，具体用于：
接收用户对所述字幕内容中的第二字幕片段的拆分操作，其中所述拆分操作用于将所述第二字幕片段拆分为至少两个子字幕片段；
基于拆分后的所述子字幕片段拆分所述第二字幕片段的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述字幕拆分模块具体用于：
删除所述第二字幕片段的历史字幕交互聚合标识，关联具有字幕交互内容的所述子字幕片段展示新的字幕交互聚合标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装对还包括交互展示模块，具体用于：
接收用户对所述字幕内容中选定字幕的触发操作，在所述多媒体展示界面上的字幕交互窗口中展示所述选定字幕的字幕交互内容，或者，展示所述选定字幕所在字幕片段的字幕交互内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括字幕交互回复模块，具体用于：
接收用户对所述字幕交互内容的回复操作；
展示回复编辑界面，并获取所述回复编辑界面中用户输入的字幕交互回复内容。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述字幕交互回复模块具体用于：
将所述字幕交互回复内容关联所述字幕交互内容展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括搜索模块，具体用于：
接收用户对搜索关键字的搜索触发操作；
将所述字幕内容和所述字幕交互内容中基于所述搜索关键字搜索命中的目标关键字突出展示。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述目标关键字所在字幕交互内容展示于字幕交互窗口中。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述搜索模块具体用于：
在所述多媒体的播放时间轴上所述目标关键字时间戳的对应位置展示搜索命中提示标识。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括搜索结果展示模块，具体用于：
在搜索展示区域展示命中的所述目标关键字的总数量；
对所述目标关键字中当前选中的关键字以及对应的搜索命中提示标识突出展示，并展示所述当前选中的关键字在所述目标关键字中的排序结果，其中，所述当前选中的关键字以及所述搜索命中提示标识突出展示的方式与所述目标关键字突出展示的方式不同。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述搜索结果展示模块具体用于：
接收用户对所述当前选中的关键字的跳转操作，所述跳转操作包括向上跳转和/或向下跳转；
展示跳转之后的当前选中的关键字。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述装置还包括翻译模块，具体用于：
接收用户对所述多媒体的字幕内容和所述字幕交互内容的翻译触发操作；
将所述多媒体的字幕内容和所述字幕交互内容由初始语言翻译为目标语言。
根据本公开的一个或多个实施例，本公开提供的多媒体的交互装置中，所述多媒体以及所述字幕内容分别展示在所述多媒体展示界面上的不同区域。
根据本公开的一个或多个实施例，本公开提供了一种多媒体的交互装置，包括：
交互输入触发模块，用于接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
交互数据获取模块，用于获取基于所述交互触发操作触发的交互输入数据；
交互数据呈现模块，用于在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
根据本公开的一个或多个实施例，本公开提供了一种信息交互装置，包括：
交互获取模块，用于获取用户对文本内容中选定文字的交互内容；
标识展示模块，用于关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
根据本公开的一个或多个实施例，本公开提供了一种电子设备，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现如本公开提供的任一所述的多媒体的交互方法和/或信息交互方法。
根据本公开的一个或多个实施例，本公开提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行如本公开提供的任一所述的多媒体的交互方法和/或信息交互方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外，虽然采用特定次序描绘了各操作，但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地，在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (35)

1.一种多媒体的交互方法，其特征在于，包括：
接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
2.根据权利要求1所述的方法，其特征在于，所述接收用户对多媒体界面上字幕交互聚合标识的触发操作之前，还包括：
响应于获取到用户对所述字幕内容中目标字幕的字幕交互内容，在所述多媒体展示界面上展示所述字幕交互聚合标识。
3.根据权利要求2所述的方法，其特征在于，在所述多媒体展示界面上展示所述字幕交互聚合标识，包括：
在所述多媒体展示界面上关联所述目标字幕所在字幕片段，展示所述字幕交互聚合标识，其中，每个包括字幕交互内容的字幕片段对应一个字幕交互聚合标识。
4.根据权利要求3所述的方法，其特征在于，还包括：
如果同一个目标字幕存在于至少两个连续的字幕片段中，所述至少两个连续的字幕片段分别展示对应的字幕交互聚合标识。
5.根据权利要求3所述的方法，其特征在于，所述字幕交互聚合标识中包括针对关联的字幕片段的字幕交互内容的数量，所述字幕交互内容包括评论和/或表情。
6.根据权利要求3所述的方法，其特征在于，展示所述字幕交互聚合标识对应的至少一个字幕交互内容，包括：
在所述多媒体展示界面上的字幕交互窗口中展示所述字幕交互聚合标识关联的字幕片段的至少一个字幕交互内容。
7.根据权利要求3所述的方法，其特征在于，还包括：
在字幕交互窗口中展示至少一个多媒体交互内容，其中，所述多媒体交互内容对应于所述字幕交互聚合标识关联的字幕片段所对应时间段，所述多媒体交互内容为基于所述多媒体的播放时间轴获取的针对所述多媒体的交互内容。
8.根据权利要求3所述的方法，其特征在于，所述字幕内容包括至少两个字幕片段，所述字幕片段通过对所述字幕内容语义拆分得到。
9.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作；
在字幕交互窗口中展示所述字幕交互提示标识对应的字幕交互内容。
10.根据权利要求9所述的方法，其特征在于，一个所述字幕交互提示标识对应关联字幕的至少一个字幕交互内容，其中，所述关联字幕为与所述字幕交互提示标识对应的关联时间点或关联时间段的字幕。
11.根据权利要求6、7或9所述的方法，其特征在于，所述字幕交互窗口关联所述字幕交互聚合标识进行展示。
12.根据权利要求10所述的方法，其特征在于，接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还包括：
基于所述字幕交互提示标识对应的关联字幕的时间戳播放所述多媒体。
13.根据权利要求10所述的方法，其特征在于，接收用户对所述多媒体展示界面的所述多媒体的播放时间轴上的字幕交互提示标识的触发操作之后，还包括：
将所述多媒体的字幕内容跳转到所述字幕交互提示标识对应的关联字幕所在位置，并突出展示所述关联字幕以及所述关联字幕的字幕交互内容。
14.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述多媒体的播放时间轴上目标时间点对应位置的交互展示触发操作；
展示互动卡片，其中，所述互动卡片中包括所述目标时间点对应字幕的字幕交互数据，所述字幕交互数据包括字幕交互内容和/或所述字幕交互内容的统计数据。
15.根据权利要求14所述的方法，其特征在于，所述互动卡片中还包括所述目标时间点的针对所述多媒体的多媒体交互数据，所述多媒体交互数据包括多媒体交互内容和/或所述多媒体交互内容的统计数据。
16.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述字幕内容中的第一字幕片段的删除操作；
删除所述第一字幕片段之后，将所述第一字幕片段对应的字幕交互聚合标识呈现在与所述第一字幕片段的历史位置关联的区域中。
17.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述字幕内容中的第二字幕片段的拆分操作，其中所述拆分操作用于将所述第二字幕片段拆分为至少两个子字幕片段；
基于拆分后的所述子字幕片段拆分所述第二字幕片段的字幕交互内容。
18.根据权利要求17所述的方法，其特征在于，还包括：
删除所述第二字幕片段的历史字幕交互聚合标识，关联具有字幕交互内容的所述子字幕片段展示新的字幕交互聚合标识。
19.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述字幕内容中选定字幕的触发操作，在所述多媒体展示界面上的字幕交互窗口中展示所述选定字幕的字幕交互内容，或者，展示所述选定字幕所在字幕片段的字幕交互内容。
20.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述字幕交互内容的回复操作；
展示回复编辑界面，并获取所述回复编辑界面中用户输入的字幕交互回复内容。
21.根据权利要求20所述的方法，其特征在于，还包括：
将所述字幕交互回复内容关联所述字幕交互内容展示。
22.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对搜索关键字的搜索触发操作；
将所述字幕内容和所述字幕交互内容中基于所述搜索关键字搜索命中的目标关键字突出展示。
23.根据权利要求22所述的方法，其特征在于，所述目标关键字所在字幕交互内容展示于字幕交互窗口中。
24.根据权利要求22所述的方法，其特征在于，还包括：
在所述多媒体的播放时间轴上所述目标关键字时间戳的对应位置展示搜索命中提示标识。
25.根据权利要求22所述的方法，其特征在于，还包括：
在搜索展示区域展示命中的所述目标关键字的总数量；
对所述目标关键字中当前选中的关键字以及对应的搜索命中提示标识突出展示，并展示所述当前选中的关键字在所述目标关键字中的排序结果，其中，所述当前选中的关键字以及所述搜索命中提示标识突出展示的方式与所述目标关键字突出展示的方式不同。
26.根据权利要求25所述的方法，其特征在于，还包括：
接收用户对所述当前选中的关键字的跳转操作，所述跳转操作包括向上跳转和/或向下跳转；
展示跳转之后的当前选中的关键字。
27.根据权利要求1所述的方法，其特征在于，还包括：
接收用户对所述多媒体的字幕内容和所述字幕交互内容的翻译触发操作；
将所述多媒体的字幕内容和所述字幕交互内容由初始语言翻译为目标语言。
28.根据权利要求1所述的方法，其特征在于，所述多媒体以及所述字幕内容分别展示在所述多媒体展示界面上的不同区域。
29.一种多媒体的交互方法，其特征在于，包括：
接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
获取基于所述交互触发操作触发的交互输入数据；
在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
30.一种信息交互方法，其特征在于，包括：
获取用户对文本内容中选定文字的交互内容；
关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
31.一种多媒体的交互装置，其特征在于，包括：
触发模块，用于接收用户对多媒体展示界面上字幕交互聚合标识的触发操作，其中，所述多媒体展示界面上展示有多媒体、所述多媒体的字幕内容以及所述字幕交互聚合标识；
交互内容展示模块，用于展示所述字幕交互聚合标识对应的至少一个字幕交互内容，其中，所述字幕交互内容为针对所述字幕内容的交互内容。
32.一种多媒体的交互装置，其特征在于，包括：
交互输入触发模块，用于接收交互输入触发操作，其中，所述交互输入触发操作用于触发对多媒体的交互输入和/或对与所述多媒体的字幕内容的交互输入；
交互数据获取模块，用于获取基于所述交互触发操作触发的交互输入数据；
交互数据呈现模块，用于在所述多媒体与所述字幕内容中关联呈现所述交互输入数据。
33.一种信息交互装置，其特征在于，包括：
交互获取模块，用于获取用户对文本内容中选定文字的交互内容；
标识展示模块，用于关联所述选定文字所在文本片段展示交互聚合标识，其中，所述文本内容包括至少一个文本片段，每个包括交互内容的文本片段对应一个交互聚合标识。
34.一种电子设备，其特征在于，所述电子设备包括：
处理器；
用于存储所述处理器可执行指令的存储器；
所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现上述权利要求1-29中任一所述的多媒体的交互方法或权利要求30所述的信息交互方法。
35.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序用于执行上述权利要求1-29中任一所述的多媒体的交互方法或权利要求30所述的信息交互方法。
CN202011296626.3A 2020-11-18 2020-11-18 多媒体的交互方法、信息交互方法、装置、设备及介质 Active CN113010698B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN202011296626.3A CN113010698B (zh) 2020-11-18 2020-11-18 多媒体的交互方法、信息交互方法、装置、设备及介质
JP2023529981A JP2023549903A (ja) 2020-11-18 2021-11-15 マルチメディアのインタラクション方法、情報インタラクション方法、装置、機器及び媒体
PCT/CN2021/130619 WO2022105709A1 (zh) 2020-11-18 2021-11-15 多媒体的交互方法、信息交互方法、装置、设备及介质
US17/818,959 US12032816B2 (en) 2020-11-18 2022-08-10 Display of subtitle annotations and user interactions
US18/732,488 US20240319862A1 (en) 2020-11-18 2024-06-03 Multimedia interaction method, information interaction method, apparatus, device, and medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011296626.3A CN113010698B (zh) 2020-11-18 2020-11-18 多媒体的交互方法、信息交互方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN113010698A true CN113010698A (zh) 2021-06-22
CN113010698B CN113010698B (zh) 2023-03-10

Family

ID=76383578

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011296626.3A Active CN113010698B (zh) 2020-11-18 2020-11-18 多媒体的交互方法、信息交互方法、装置、设备及介质

Country Status (4)

Country Link
US (2) US12032816B2 (zh)
JP (1) JP2023549903A (zh)
CN (1) CN113010698B (zh)
WO (1) WO2022105709A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114116101A (zh) * 2021-11-26 2022-03-01 北京字跳网络技术有限公司 消息显示方法、装置、设备及存储介质
WO2022105709A1 (zh) * 2020-11-18 2022-05-27 北京字跳网络技术有限公司 多媒体的交互方法、信息交互方法、装置、设备及介质
CN115047999A (zh) * 2022-07-27 2022-09-13 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品
WO2023207580A1 (zh) * 2022-04-29 2023-11-02 北京字跳网络技术有限公司 展示方法、装置和电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005071660A1 (en) * 2004-01-19 2005-08-04 Koninklijke Philips Electronics N.V. Decoder for information stream comprising object data and composition information
CN104539980A (zh) * 2014-12-29 2015-04-22 康佳集团股份有限公司 电视机上的在线视频弹幕点评方法及其装置
CN104967910A (zh) * 2014-10-29 2015-10-07 腾讯科技（深圳）有限公司 多媒体播放进度控制方法及装置
CN106303723A (zh) * 2016-08-11 2017-01-04 网易（杭州）网络有限公司 视频处理方法和装置
WO2019236727A1 (en) * 2018-06-06 2019-12-12 Home Box Office, Inc. Editing timed-text elements
CN110719518A (zh) * 2018-07-12 2020-01-21 阿里巴巴集团控股有限公司 多媒体数据处理方法、装置和设备
CN111818279A (zh) * 2019-04-12 2020-10-23 阿里巴巴集团控股有限公司 字幕的生成方法、展示方法及交互方法
CN111836112A (zh) * 2020-06-28 2020-10-27 腾讯科技（深圳）有限公司 多媒体文件的输出方法、装置、介质及电子设备

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6594688B2 (en) * 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
US7124164B1 (en) * 2001-04-17 2006-10-17 Chemtob Helen J Method and apparatus for providing group interaction via communications networks
US7213051B2 (en) * 2002-03-28 2007-05-01 Webex Communications, Inc. On-line conference recording system
US7257774B2 (en) * 2002-07-30 2007-08-14 Fuji Xerox Co., Ltd. Systems and methods for filtering and/or viewing collaborative indexes of recorded media
US7739584B2 (en) * 2002-08-08 2010-06-15 Zane Vella Electronic messaging synchronized to media presentation
US8307273B2 (en) * 2002-12-30 2012-11-06 The Board Of Trustees Of The Leland Stanford Junior University Methods and apparatus for interactive network sharing of digital video content
US7735101B2 (en) * 2006-03-28 2010-06-08 Cisco Technology, Inc. System allowing users to embed comments at specific points in time into media presentation
US7716376B1 (en) * 2006-03-28 2010-05-11 Amazon Technologies, Inc. Synchronized video session with integrated participant generated commentary
US7954049B2 (en) * 2006-05-15 2011-05-31 Microsoft Corporation Annotating multimedia files along a timeline
US20070271331A1 (en) * 2006-05-17 2007-11-22 Steve Muth System of archiving and repurposing a complex group conversation referencing networked media
US7908556B2 (en) * 2007-06-14 2011-03-15 Yahoo! Inc. Method and system for media landmark identification
US8230458B2 (en) * 2007-06-29 2012-07-24 At&T Intellectual Property I, L.P. System and method of providing video content commentary
US8806320B1 (en) * 2008-07-28 2014-08-12 Cut2It, Inc. System and method for dynamic and automatic synchronization and manipulation of real-time and on-line streaming media
US9535988B2 (en) * 2007-12-21 2017-01-03 Yahoo! Inc. Blog-based video summarization
GB0801429D0 (en) * 2008-01-25 2008-03-05 Decisive Media Ltd Media Annotation system, method and media player
US10091460B2 (en) * 2008-03-31 2018-10-02 Disney Enterprises, Inc. Asynchronous online viewing party
US9881280B2 (en) * 2010-04-07 2018-01-30 Apple Inc. Method and apparatus for searching for text messages
US20120170914A1 (en) * 2011-01-04 2012-07-05 Sony Dadc Us Inc. Logging events in media files
US20140143218A1 (en) * 2012-11-20 2014-05-22 Apple Inc. Method for Crowd Sourced Multimedia Captioning for Video Content
WO2014113071A1 (en) * 2013-01-15 2014-07-24 Viki, Inc. System and method for captioning media
US10033676B2 (en) * 2013-10-31 2018-07-24 International Business Machines Corporation System and method for annotating a transcript of an ongoing group chat session
US9672829B2 (en) * 2015-03-23 2017-06-06 International Business Machines Corporation Extracting and displaying key points of a video conference
US10490209B2 (en) * 2016-05-02 2019-11-26 Google Llc Automatic determination of timing windows for speech captions in an audio stream
US10657834B2 (en) * 2017-01-20 2020-05-19 Coursera, Inc. Smart bookmarks
CN108174023B (zh) * 2017-12-19 2019-11-01 珠海市魅族科技有限公司 信息展示方法及装置、计算机装置和计算机可读存储介质
US11049525B2 (en) * 2019-02-21 2021-06-29 Adobe Inc. Transcript-based insertion of secondary video content into primary video content
CN110134479B (zh) * 2019-05-10 2023-03-14 杭州网易云音乐科技有限公司 内容页面交互方法、生成方法、介质、装置和计算设备
US20210056251A1 (en) * 2019-08-22 2021-02-25 Educational Vision Technologies, Inc. Automatic Data Extraction and Conversion of Video/Images/Sound Information from a Board-Presented Lecture into an Editable Notetaking Resource
US10798341B1 (en) * 2019-08-22 2020-10-06 Blue Jeans Network, Inc. Systems and methods for compiling and presenting highlights of a video conference
US11432049B2 (en) * 2019-08-29 2022-08-30 Snap Inc. Subtitle splitter
CN110650378A (zh) * 2019-09-27 2020-01-03 北京奇艺世纪科技有限公司 一种信息获取方法、装置、终端及存储介质
US11818406B2 (en) * 2020-07-23 2023-11-14 Western Digital Technologies, Inc. Data storage server with on-demand media subtitles
CN113010698B (zh) * 2020-11-18 2023-03-10 北京字跳网络技术有限公司 多媒体的交互方法、信息交互方法、装置、设备及介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005071660A1 (en) * 2004-01-19 2005-08-04 Koninklijke Philips Electronics N.V. Decoder for information stream comprising object data and composition information
CN104967910A (zh) * 2014-10-29 2015-10-07 腾讯科技（深圳）有限公司 多媒体播放进度控制方法及装置
CN104539980A (zh) * 2014-12-29 2015-04-22 康佳集团股份有限公司 电视机上的在线视频弹幕点评方法及其装置
CN106303723A (zh) * 2016-08-11 2017-01-04 网易（杭州）网络有限公司 视频处理方法和装置
WO2019236727A1 (en) * 2018-06-06 2019-12-12 Home Box Office, Inc. Editing timed-text elements
CN110719518A (zh) * 2018-07-12 2020-01-21 阿里巴巴集团控股有限公司 多媒体数据处理方法、装置和设备
CN111818279A (zh) * 2019-04-12 2020-10-23 阿里巴巴集团控股有限公司 字幕的生成方法、展示方法及交互方法
CN111836112A (zh) * 2020-06-28 2020-10-27 腾讯科技（深圳）有限公司 多媒体文件的输出方法、装置、介质及电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王万良;潘蒙;: "基于多特征的视频关联文本关键词提取方法" *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022105709A1 (zh) * 2020-11-18 2022-05-27 北京字跳网络技术有限公司 多媒体的交互方法、信息交互方法、装置、设备及介质
US12032816B2 (en) 2020-11-18 2024-07-09 Beijing Zitiao Network Technology Co., Ltd. Display of subtitle annotations and user interactions
CN114116101A (zh) * 2021-11-26 2022-03-01 北京字跳网络技术有限公司 消息显示方法、装置、设备及存储介质
CN114116101B (zh) * 2021-11-26 2024-03-26 北京字跳网络技术有限公司 消息显示方法、装置、设备及存储介质
WO2023207580A1 (zh) * 2022-04-29 2023-11-02 北京字跳网络技术有限公司 展示方法、装置和电子设备
CN115047999A (zh) * 2022-07-27 2022-09-13 北京字跳网络技术有限公司 界面切换方法、装置、电子设备、存储介质及程序产品

Also Published As

Publication number Publication date
JP2023549903A (ja) 2023-11-29
US20220382445A1 (en) 2022-12-01
US12032816B2 (en) 2024-07-09
US20240319862A1 (en) 2024-09-26
CN113010698B (zh) 2023-03-10
WO2022105709A1 (zh) 2022-05-27

Similar Documents

Publication Publication Date Title
CN111970577B (zh) 字幕编辑方法、装置和电子设备
CN113010698B (zh) 多媒体的交互方法、信息交互方法、装置、设备及介质
US11917344B2 (en) Interactive information processing method, device and medium
CN113010704B (zh) 一种会议纪要的交互方法、装置、设备及介质
US20240121479A1 (en) Multimedia processing method, apparatus, device, and medium
EP4387246A1 (en) Video publishing method and apparatus, electronic device, and storage medium
CN111898388A (zh) 视频字幕翻译编辑方法、装置、电子设备及存储介质
CN113886612A (zh) 一种多媒体浏览方法、装置、设备及介质
CN112380365A (zh) 一种多媒体的字幕交互方法、装置、设备及介质
CN115379136B (zh) 特效道具处理方法、装置、电子设备及存储介质
CN113011169B (zh) 一种会议纪要的处理方法、装置、设备及介质
CN113552984A (zh) 文本提取方法、装置、设备及介质
CN113778419A (zh) 多媒体数据的生成方法、装置、可读介质及电子设备
US20240314400A1 (en) Content display method, apparatus, device and medium
CN113132789B (zh) 一种多媒体的交互方法、装置、设备及介质
CN115981769A (zh) 页面显示方法、装置、设备、计算机可读存储介质及产品
CN115640790A (zh) 信息处理方法、装置和电子设备
CN115268890A (zh) 信息处理方法、装置及电子设备
CN114924670A (zh) 聊天频道显示方法、装置、设备、可读存储介质及产品
JP7572108B2 (ja) 議事録のインタラクション方法、装置、機器及び媒体
CN111625740A (zh) 图像显示方法、图像显示装置和电子设备
WO2024022432A1 (zh) 信息处理方法、装置及电子设备
CN118657126A (zh) 表格字段内容生成方法、装置及电子设备
CN114979050A (zh) 语音生成方法、语音生成装置和电子设备
CN118741259A (zh) 视频生成方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant