CN113987221A - 信息搜索处理方法、装置、设备、存储介质及程序产品 - Google Patents

信息搜索处理方法、装置、设备、存储介质及程序产品 Download PDF

Info

Publication number
CN113987221A
CN113987221A CN202111265622.3A CN202111265622A CN113987221A CN 113987221 A CN113987221 A CN 113987221A CN 202111265622 A CN202111265622 A CN 202111265622A CN 113987221 A CN113987221 A CN 113987221A
Authority
CN
China
Prior art keywords
search
multimedia content
keyword
search entry
entry
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111265622.3A
Other languages
English (en)
Inventor
朱明媛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202111265622.3A priority Critical patent/CN113987221A/zh
Publication of CN113987221A publication Critical patent/CN113987221A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/483Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Library & Information Science (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种信息搜索处理方法、装置、设备及计算机可读存储介质;方法包括:接收音频格式或视频格式的多媒体数据,根据多媒体数据在人机交互界面中播放多媒体内容;在多媒体内容中显示搜索入口;其中,搜索入口能够被填充关键词;响应于针对搜索入口的触发操作,获取与关键词对应的搜索结果,在人机交互界面中显示搜索结果。通过本申请,能够提高在播放多媒体内容时的搜索效率。

Description

信息搜索处理方法、装置、设备、存储介质及程序产品
技术领域
本申请涉及互联网技术,尤其涉及一种信息搜索处理方法、装置、设备及计算机可读存储介质。
背景技术
随着互联网的不断发展,搜索这个板块越来越受到各大巨头的亲睐,可以在很多平台上都可以见到搜索,它是让用户直接到达目的地的通道,起到了一个引导用户走向的重要作用,并且也是用户获取信息最直接的途径之一。
目前,观众在观看视频或音频时,经常会对某些内容感兴趣,想要进行相关搜索,由于搜索过程受限于观看位置,需要观众跳出当前观看的视频或音频,到特定的搜索界面进行内容搜索。由于搜索方式固化且受限于搜索位置,导致搜索效果较差,影响了用户体验。
发明内容
本申请实施例提供一种信息搜索处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品,能够提高在播放多媒体内容时的搜索效率。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种信息搜索处理方法,包括:
接收音频格式或视频格式的多媒体数据,根据所述多媒体数据在人机交互界面中播放多媒体内容;
在所述多媒体内容中显示搜索入口;其中,所述搜索入口能够被填充关键词;
响应于针对所述搜索入口的触发操作,获取与所述关键词对应的搜索结果,在所述人机交互界面中显示所述搜索结果。
本申请实施例提供一种信息搜索处理方法,包括:
显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据所述多媒体数据在人机交互界面中播放多媒体内容;
响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口;其中,所述搜索入口能够被填充关键词;
向播放所述多媒体内容的终端设备发送所述搜索入口,其中,所述搜索入口是用于供所述终端设备在所述多媒体内容中显示所述搜索入口。
上述技术方案中,所述搜索入口被设置为在所述终端设备的人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
本申请实施例提供一种信息搜索处理装置,包括:
第一播放模块,用于接收音频格式或视频格式的多媒体数据,根据所述多媒体数据在人机交互界面中播放多媒体内容;
第一显示模块,用于在所述多媒体内容中显示搜索入口;其中,所述搜索入口能够被填充关键词;
第二显示模块,用于响应于针对所述搜索入口的触发操作,获取与所述关键词对应的搜索结果,在所述人机交互界面中显示所述搜索结果。
上述技术方案中,所述第一显示模块还用于在所述多媒体内容的特定位置显示搜索框形式的所述搜索入口;
在所述多媒体内容中显示搜索入口之后,所述方法还包括:
响应于针对所述搜索入口的移动操作,在所述移动操作对应的位置更新显示所述搜索入口;
响应于所述搜索入口在设定持续时长内未被触发或针对所述搜索入口的关闭操作,停止显示所述搜索入口。
上述技术方案中,所述第一显示模块还用于在所述人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
上述技术方案中,所述搜索结果包括待推荐信息,所述待推荐信息的排序位于所述搜索结果中的其他信息的前面,所述其他信息是按照特定信息顺序排列的,所述特定信息顺序包括:发表时间的降序顺序、相关度的降序顺序。
上述技术方案中,所述搜索入口中自动填充有至少一个关键词,所述至少一个关键词与所述多媒体内容相关。
上述技术方案中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块还用于对所述多媒体内容进行内容识别处理,得到所述自动填充的至少一个关键词;
其中,所述关键词的类型包括以下至少之一:所述多媒体内容涉及的对象、所述多媒体内容对应的情节、所述多媒体内容对应的文本。
上述技术方案中,所述第一显示模块还用于基于分段特征对所述多媒体内容进行分段处理,得到所述多媒体内容对应的多个内容片段;其中,所述分段特征包括以下至少之一:所述多媒体内容的时长、所述多媒体内容的不同情节、所述多媒体内容的不同场景、所述多媒体内容的不同对象;
对每个所述内容片段进行内容识别处理,得到每个所述内容片段对应的自动填充的至少一个关键词;其中,每个所述内容片段对应的至少一个关键词,用于在播放所述内容片段时自动填充到所述搜索入口。
上述技术方案中,在所述对多媒体内容进行内容识别处理之后,所述第一显示模块还用于基于待推荐信息对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到与所述待推荐信息相关的关键词;
将与所述待推荐信息相关的关键词作为所述自动填充的至少一个关键词。
上述技术方案中,所述第一显示模块还用于基于所述人机交互界面的账号对应的搜索偏好,对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到符合所述搜索偏好的至少一个关键词;
将符合所述搜索偏好的至少一个关键词作为所述自动填充的至少一个关键词。
上述技术方案中,在所述对从所述内容识别处理得到的至少一个关键词进行筛选处理之前,所述第一显示模块还用于获取所述账号对应的历史搜索数据,并调用偏好预测模型执行以下处理:
对所述账号对应的历史搜索数据进行特征提取处理,得到所述账号对应的搜索特征;
对所述搜索特征进行搜索偏好预测处理,得到所述账号对应的搜索偏好。
上述技术方案中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块还用于对所述多媒体内容的历史搜索数据进行基于所述关键词的统计处理,得到每个所述关键词的搜索频率;
当所述关键词的搜索频率大于搜索频率阈值时,将所述关键词作为所述自动填充的至少一个关键词。
上述技术方案中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块还用于获取当前播放时间点所处的时间段关联的至少一个关键词;其中,不同所述时间段预先关联有至少一个关键词;
将所述当前播放时间点所处的时间段关联的至少一个关键词,作为所述自动填充的至少一个关键词。
上述技术方案中,所述第一显示模块还用于在遮挡部分所述多媒体内容的搜索结果展示区域中显示所述搜索结果;
响应于针对所述搜索结果展示区域的扩大操作,将所述搜索结果展示区域扩大至遮挡全部所述多媒体内容,并显示与所述关键词对应的详细搜索结果;其中,所述详细搜索结果的信息量大于所述搜索结果的信息量。
上述技术方案中,所述第一显示模块还用于响应于针对所述搜索入口的触发操作,暂停播放所述多媒体内容;
响应于针对所述搜索结果展示区域的关闭操作或所述搜索结果展示区域在设定持续时长内未被触发,停止显示所述搜索结果,并继续播放所述多媒体内容。
上述技术方案中,在所述多媒体内容中显示搜索入口时,所述第一显示模块还用于响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词。
上述技术方案中,在所述多媒体内容中显示搜索入口时,所述第一显示模块还用于响应于针对当前播放的所述多媒体内容的选择操作,确定所述多媒体内容中被选中的部分内容;
从所述部分内容中识别出至少一个关键词,将所识别出的至少一个关键词作为所述搜索入口中自动填充的至少一个关键词。
本申请实施例提供一种信息搜索处理装置,包括:
第二播放模块,用于显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据所述多媒体数据在人机交互界面中播放多媒体内容;
第三显示模块,用于响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口;其中,所述搜索入口能够被填充关键词;
发送模块,用于向播放所述多媒体内容的终端设备发送所述搜索入口,其中,所述搜索入口是用于供所述终端设备在所述多媒体内容中显示所述搜索入口。
上述技术方案中,所述编辑操作包括添加操作;所述第三显示模块还用于在所述多媒体内容中显示添加完成的搜索入口;其中,所述搜索入口被设置为供所述终端设备显示所述搜索入口时自动填充有所述关键词,所述关键词与所述多媒体内容相关。
上述技术方案中,所述编辑操作包括添加操作以及输入操作;所述第三显示模块还用于响应于所述搜索入口的添加操作,在所述多媒体内容中显示添加完成的搜索入口;
响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词;
其中,所述搜索入口被设置为供所述终端设备显示所述多媒体内容时填充有所述关键词。
上述技术方案中,所述编辑操作包括设定操作;所述第三显示模块还用于响应于所述搜索入口的显示位置的设定操作,确定所述多媒体内容中被设定的特定位置,所述特定位置是用于供所述终端设备显示搜索框形式的所述搜索入口的位置;
在所述特定位置上显示所述搜索入口。
上述技术方案中,所述搜索入口被设置为在所述终端设备的人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
本申请实施例提供一种用于信息搜索处理的电子设备,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的信息搜索处理方法。
本申请实施例提供一种计算机可读存储介质,存储有可执行指令,用于引起处理器执行时,实现本申请实施例提供的信息搜索处理方法。
本申请实施例提供一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时实现本申请实施例提供的信息搜索处理方法。
本申请实施例具有以下有益效果:
在播放的多媒体内容中显示搜索入口,从而能够在用户不离开多媒体内容的情况下对感兴趣的关键词进行搜索,从而支持用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果,相较于用户在多媒体内容之外进行搜索的方案,节约了相关的通信资源和计算资源。
附图说明
图1A-图1B是相关技术提供的一种搜索入口的示意图;
图2A-图2B是相关技术提供的一种搜索入口的示意图;
图3是本申请实施例提供的信息搜索系统的架构示意图;
图4是本申请实施例提供的用于信息搜索处理的电子设备的结构示意图;
图5是本申请实施例提供的信息搜索处理方法的流程示意图;
图6是本申请实施例提供的信息搜索处理方法的流程示意图;
图7A是本申请实施例提供的视频播放的示意图;
图7B是本申请实施例提供的搜索页面的示意图;
图7C是本申请实施例提供的移动前的搜索框的示意图;
图7D是本申请实施例提供的移动后的搜索框的示意图;
图7E是本申请实施例提供的扩大后的搜索页面的示意图;
图7F是本申请实施例提供的空白的搜索入口的示意图;
图8是本申请实施例提供的视频编辑的示意图;
图9是本申请实施例提供的视频层的示意图;
图10-图11是本申请实施例提供的信息搜索处理方法的流程示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,所涉及的术语“第一\第二”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
1)响应于:用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
2)弹幕:指直接显现在多媒体数据(例如视频、音频、文本)上的评论,可以以滚动、停留甚至更多动作特效方式出现在多媒体数据上,是观看多媒体数据的用户发送的简短评论,例如在网络上观看视频或音频时弹出的评论性字幕。
相关技术的搜索入口的展现形式各式各样,例如在首页底部呈现搜索标签(tab),如图1A所示的在首页顶部的位置呈现搜索框101,如图1B所示的在首页右上角呈现小图标(icon)102。
为了让用户快速到达搜索的目的地,还有一些新型的搜索入口,以提高用户获取信息的效率。如图2A所示,在即时通信应用中,使用“#”作为输入的快捷方式,“#”号后的文字201(即需要搜索的内容)会变成可点击的样式,在点击后可到达搜索结果页,以呈现搜索内容,借此可以不断打通与自身内容生态连接;如图2B所示,在评分应用中输入书名号,即可帮助用户快速到达书影音搜索结果页202,帮助用户快速了解词条相关内容,完成例如电影安利等内容的流量转化。
然后,相关技术中无法在视频中进行搜索,视频内容流量没有出口,流量断链。
为了解决上述问题,本申请实施例提供一种信息搜索处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品,能够提高在播放多媒体内容时的搜索效率。
本申请实施例所提供的信息搜索处理方法,可以由终端独自实现;也可以由终端和服务器协同实现,例如终端独自承担下文所述的信息搜索处理方法,或者,终端向服务器发送针对多媒体数据(例如音频、视频)的编辑请求,服务器根据接收的针对视频的编辑请求执行信息搜索处理方法,对多媒体数据进行编辑,以在多媒体内容中显示编辑完成的搜索入口,并在播放多媒体内容阶段,在多媒体内容中显示搜索入口,以基于搜索入口进行搜索操作,以便用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
下面说明本申请实施例提供的电子设备的示例性应用,本申请实施例提供的电子设备可以实施为笔记本电脑,平板电脑,台式计算机,机顶盒,移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备,车载设备)等各种类型的用户终端。下面,将说明电子设备实施为终端时示例性应用。
参见图3,图3是本申请实施例提供的信息搜索系统100的架构示意图,终端(示例性示出终端200-1以及终端200-2)通过网络300连接服务器100,其中,网络300可以是广域网或者局域网,又或者是二者的组合。
在一些实施例中,以电子设备是终端为例,本申请实施例提供的信息搜索处理方法可以单独由终端实现。例如,终端200-1运行客户端(如游戏直播客户端、视频播放客户端、短视频客户端、视频剪辑客户端、音频播放客户端等),用户针对多媒体数据进行编辑操作,调用信息搜索处理插件,以实现多媒体数据的编辑功能,以在多媒体内容中添加搜索入口,并在多媒体内容中显示编辑完成的搜索入口,并在播放阶段,在多媒体内容中显示搜索入口,以基于搜索入口进行搜索操作,以便用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
在一些实施例中,本申请实施例提供的信息搜索处理方法也可以由服务器和终端协同实现。例如,终端200-1运行客户端(如游戏直播客户端、视频播放客户端、短视频客户端、视频剪辑客户端、音频播放客户端等),用户针对多媒体数据进行编辑操作,终端200-1自动生成针对多媒体数据的编辑请求,并将针对多媒体数据的编辑请求发送至服务器100,服务器100接收到针对多媒体数据的编辑请求后,对多媒体数据进行编辑,以在多媒体内容中添加搜索入口,并在多媒体内容中显示编辑完成的搜索入口,当服务器100接收到终端200-2发送的针对多媒体数据的播放请求后,将带有搜索入口的多媒体数据发送至终端200-2,在多媒体数据播放阶段,在多媒体内容中显示搜索入口,以基于搜索入口进行搜索操作,以便用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
作为一种应用示例,终端200-1运行有游戏直播客户端,多媒体数据为游戏直播视频,多媒体内容为游戏直播画面,在播放阶段,在游戏直播画面中显示搜索入口,以基于搜索入口进行搜索操作,以便用户观看游戏直播时基于显示的搜索入口进行搜索。在播放游戏直播画面时,对游戏直播画面进行内容识别,得到自动填充的至少一个关键词(例如游戏名称、游戏角色、游戏装备等),并在关键词对应的位置上显示填充有关键词的搜索入口,例如在识别出的游戏角色的头上显示搜索入口,且搜索入口中填充有游戏角色的关键词,点击搜索入口,则可以实现搜索该游戏角色;在游戏直播画面中识别出游戏装备,则在游戏直播的出装栏(显示游戏装备的位置)部分显示搜索入口,且搜索入口中填充有游戏装备的关键词。因此,用户在观看游戏直播时,能够基于显示的搜索入口进行及时搜索,提升搜索效率和直播效果。
在一些实施例中,终端或服务器可以通过运行计算机程序来实现本申请实施例提供的信息搜索处理方法。举例来说,计算机程序可以是操作系统中的原生程序或软件模块;可以是本地(Native)应用程序(APP,Application),即需要在操作系统中安装才能运行的程序,如视频类的应用程序;也可以是小程序,即只需要下载到浏览器环境中就可以运行的程序;还可以是能够嵌入至任意APP中的小程序。总而言之,上述计算机程序可以是任意形式的应用程序、模块或插件。
在一些实施例中,服务器100可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content DeliveryNetwork,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器,其中,云服务可以是信息搜索处理服务,供终端进行调用。
在一些实施例中,多个服务器可组成为一区块链,而服务器100为区块链上的节点,区块链中的每个节点之间可以存在信息连接,节点之间可以通过上述信息连接进行信息传输。其中,本申请实施例提供的信息搜索处理方法所相关的数据(例如信息搜索处理的逻辑、搜索入口)可保存于区块链上。
下面说明本申请实施例提供的用于信息搜索处理的电子设备的结构,参见图4,图4是本申请实施例提供的用于信息搜索处理的电子设备500的结构示意图。以电子设备500是终端为例说明,图4所示的用于直播处理的电子设备500包括:至少一个处理器510、存储器550、至少一个网络接口520和用户接口530。电子设备500中的各个组件通过总线系统540耦合在一起。可理解,总线系统540用于实现这些组件之间的连接通信。总线系统540除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图4中将各种总线都标为总线系统540。
处理器510可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
存储器550包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器550旨在包括任意适合类型的存储器。存储器550可选地包括在物理位置上远离处理器510的一个或多个存储设备。
在一些实施例中,存储器550能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统551,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块552,用于经由一个或多个(有线或无线)网络接口520到达其他计算设备,示例性的网络接口520包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
在一些实施例中,本申请实施例提供的信息搜索处理装置可以采用软件方式实现,本申请实施例提供的信息搜索处理装置可以提供为各种软件实施例,包括应用程序、软件、软件模块、脚本或代码在内的各种形式。
图4示出了存储在存储器550中的信息搜索处理装置555,其可以是程序和插件等形式的软件,并包括一系列的模块,包括第一播放模块5551、第一显示模块5552、第二显示模块5553,或第二播放模块5554、第三显示模块5555、发送模块5556,其中,第一播放模块5551、第一显示模块5552、第二显示模块5553实现多媒体内容播放的相关功能,第二播放模块5554、第三显示模块5555、发送模块5556实现多媒体内容编辑的相关功能,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分,将在下文中说明各个模块的功能。
如前所述,本申请实施例提供的信息搜索处理方法可以由各种类型的电子设备实施。参见图5,图5是本申请实施例提供的信息搜索处理方法的流程示意图,结合图5示出的步骤进行说明。
在步骤101中,接收音频格式或视频格式的多媒体数据,根据多媒体数据在人机交互界面中播放多媒体内容。
例如,多媒体数据可以是音频格式的数据流,从而根据音频格式的数据流,在人机交互界面(即播放区域)中播放音频内容,例如音频参数(波形、采样率等)、歌词等;多媒体数据可以是视频格式的数据流,从而根据视频格式的数据流,在人机交互界面(即播放区域)中播放视频画面。
在步骤102中,在多媒体内容中显示搜索入口;其中,搜索入口能够被填充关键词。
例如,在人机交互界面中播放多媒体内容时,在多媒体内容中显示至少一个搜索入口,其中,搜索入口能够被填充至少一个关键词。如图7A所示,以视频为例,在视频画面中显示搜索入口701,搜索入口中被填充有关键词“鬼灭之刃-终章”。
在一些实施例中,在多媒体内容中显示搜索入口,包括:在多媒体内容的特定位置显示搜索框形式的搜索入口;在多媒体内容中显示搜索入口之后,响应于针对搜索入口的移动操作,在移动操作对应的位置更新显示搜索入口;响应于搜索入口在设定持续时长内未被触发或针对搜索入口的关闭操作,停止显示搜索入口。
例如,搜索入口的形态为以搜索框的形式固定显示在多媒体内容的特定位置,其中,特定位置支持调整,当搜索入口在设定持续时长内未被触发或针对搜索入口的关闭操作,则在多媒体内容中停止显示搜索入口。
需要说明的是,对于视频,特定位置可以是视频画面中与关键词相关的部位,例如关键词是某个人物,则特定位置为视频画面中对应的人物的位置,在视频画面中对应的人物的位置显示搜索框;对于音频,特定位置可以是音频内容中与关键词相关的部位,例如关键词是某个歌词,则特定位置为音频内容中对应的歌词的位置,在对应的歌词的位置显示搜索框。
以视频为例,如图7C所示,在视频画面中显示搜索框的形式的搜索入口703;如图7D所示,当移动搜索框的形式的搜索入口703,则在移动操作对应的位置更新显示搜索入口搜索框的形式的搜索入口703。当点击图7C中的关闭按钮,则在多媒体内容中停止显示搜索入口。
在一些实施例中,在多媒体内容中显示搜索入口,包括:在人机交互界面的一侧开始显示弹幕形式的搜索入口,直至搜索入口移动至人机交互界面的另一侧并消失。
例如,搜索入口的形态为以弹幕的形式动态显示在多媒体内容,例如弹幕形式的搜索入口从人机交互界面的一侧出现,移动到人机交互的另一侧消失。
在一些实施例中,搜索入口中自动填充有至少一个关键词,至少一个关键词与多媒体内容相关。
例如,在多媒体内容中显示搜索入口时,在搜索入口中自动填充有至少一个关键词。如图7A所示,以视频为例,在视频画面中显示搜索入口701,搜索入口中被填充有关键词“鬼灭之刃-终章”,且“鬼灭之刃-终章”与视频内容相关,从而关键词搜索可以高效引导用户到达目的地。
在一些实施例中,在多媒体内容中显示搜索入口之前,对多媒体内容进行内容识别处理,得到自动填充的至少一个关键词,其中,关键词的类型包括以下至少之一:多媒体内容涉及的对象、多媒体内容对应的情节、多媒体内容对应的文本。
例如,通过以下方式获取自动填充的至少一个关键词:对多媒体内容进行识别处理,得到以下关键词至少之一:多媒体内容涉及的对象(例如通过人脸识别出的人物)、多媒体内容对应的情节(例如通过对图像和语音识别结果进行理解得到的剧情)、多媒体内容对应的文本(例如通过语音识别得到的台词,歌词,诗歌等)。
需要说明的是,在对多媒体内容进行内容识别处理,得到自动填充的至少一个关键词后,可以在多媒体内容中对应关键词的位置显示搜索入口,例如识别出多媒体内容的某人物,则在显示的该人物的头上显示搜索入口。
在一些实施例中,对多媒体内容进行内容识别处理,得到自动填充的至少一个关键词,包括:基于分段特征对多媒体内容进行分段处理,得到多媒体内容对应的多个内容片段;其中,分段特征包括以下至少之一:多媒体内容的时长、多媒体内容的不同情节、多媒体内容的不同场景、多媒体内容的不同对象;对每个内容片段进行内容识别处理,得到每个内容片段对应的自动填充的至少一个关键词;其中,每个内容片段对应的至少一个关键词,用于在播放内容片段时自动填充到搜索入口。
例如,按照多媒体内容的时长、多媒体内容的不同情节、多媒体内容的不同场景、多媒体内容的不同对象中的至少之一,对多媒体内容进行分段处理,得到多媒体内容对应的多个内容片段,对每个内容片段进行内容识别处理,得到每个内容片段对应的自动填充的至少一个关键词,从而在播放到对应的内容片段时,在搜索入口中自动填充对应的关键词。
在一些实施例中,在对多媒体内容进行内容识别处理之后,基于待推荐信息对从内容识别处理得到的至少一个关键词进行筛选处理,得到与待推荐信息相关的关键词;将与待推荐信息相关的关键词作为自动填充的至少一个关键词。
例如,在对多媒体内容进行内容识别处理之后,得到识别出的至少一个关键词,从识别出的至少一个关键词中,筛选出与待推荐信息(例如广告商品)相关的关键词,作为自动填充的关键词,从而搜索入口的出现不与多媒体内容的播放时间关联,而是与待推荐信息相关。
在一些实施例中,基于人机交互界面的账号对应的搜索偏好,对从内容识别处理得到的至少一个关键词进行筛选处理,得到符合搜索偏好的至少一个关键词;将符合搜索偏好的至少一个关键词作为自动填充的至少一个关键词。
例如,获取预先设置的人机交互界面的账号对应的搜索偏好,基于预先设置的搜索偏好对从内容识别处理得到的至少一个关键词进行筛选处理,得到符合搜索偏好的至少一个关键词,并将符合搜索偏好的至少一个关键词作为自动填充的至少一个关键词,从而实现自动填充的关键词符合用户偏好,以提高搜索效率。
在一些实施例中,在对从内容识别处理得到的至少一个关键词进行筛选处理之前,获取账号对应的历史搜索数据,并调用偏好预测模型执行以下处理:对账号对应的历史搜索数据进行特征提取处理,得到账号对应的搜索特征;对搜索特征进行搜索偏好预测处理,得到账号对应的搜索偏好。
例如,通过偏好预测模型对账号对应的历史搜索数据进行特征提取处理,得到账号对应的搜索特征,对搜索特征进行搜索偏好预测处理,得到账号对应的搜索偏好,从而根据用户对搜索入口的使用情况,学习用户的搜索偏好,以基于学习到的搜索偏好调整后续搜索入口中自动填充的关键词,以使自动填充的关键词符合用户偏好。其中,偏好预测模型可以为经过训练的神经网络模型,神经网络模型可以是搜索数据样本、以及搜索偏好样本训练得到的。
在一些实施例中,在多媒体内容中显示搜索入口之前,对多媒体内容的历史搜索数据进行基于关键词的统计处理,得到每个关键词的搜索频率;当关键词的搜索频率大于搜索频率阈值时,将关键词作为自动填充的至少一个关键词。
例如,通过以下方式获取自动填充的至少一个关键词:对多媒体内容的历史搜索数据进行统计处理,将搜索频率高于搜索频率阈值的热点关键词作为自动填充的至少一个关键词,从而自动填充的关键词符合当前搜索热点,提高搜索效率。
在一些实施例中,在多媒体内容中显示搜索入口之前,获取当前播放时间点所处的时间段关联的至少一个关键词;其中,不同时间段预先关联有至少一个关键词;将当前播放时间点所处的时间段关联的至少一个关键词,作为自动填充的至少一个关键词。
例如,通过以下方式获取自动填充的至少一个关键词:获取当前播放时间点所处的时间段关联的至少一个关键词;其中,不同时间段预先关联有至少一个关键词,即关键词预先与播放时间绑定。
在一些实施例中,在人机交互界面中显示搜索结果,包括:在遮挡部分多媒体内容的搜索结果展示区域中显示搜索结果;响应于针对搜索结果展示区域的扩大操作,将搜索结果展示区域扩大至遮挡全部多媒体内容,并显示与关键词对应的详细搜索结果;其中,详细搜索结果的信息量大于搜索结果的信息量。
如图7A所示,以多媒体内容为视频画面为例,在视频画面中显示搜索入口701,搜索入口中被填充有关键词“鬼灭之刃-终章”,点击搜索入口701,如图7B所示,在遮挡部分视频画面的搜索结果展示区域702(例如半屏区域)中显示搜索结果,如图7E所示,响应于针对搜索结果展示区域的扩大操作(例如拉出操作),将搜索结果展示区域702扩大至遮挡全部多媒体内容,并显示与关键词对应的详细搜索结果。
如图7A所示,以多媒体内容为视频画面为例,在视频画面中显示搜索入口701,搜索入口中被填充有关键词“鬼灭之刃-终章”,点击搜索入口701,多媒体内容和搜索结果分屏显示,响应于搜索入口701在设定持续时长内未被触发或针对搜索入口701的关闭操作,停止显示搜索入口,多媒体内容恢复全屏显示。
需要说明的是,非全屏和全屏的搜索结果可以是在搜索入口被触发后一起发送到客户端的,以节约后续加载时间;非全屏和全屏的搜索结果可以是先要显示时发送到客户端的,以实现即取即用,节约存储空间。
在一些实施例中,响应于针对搜索入口的触发操作,暂停播放多媒体内容;响应于针对搜索结果展示区域的关闭操作或搜索结果展示区域在设定持续时长内未被触发,停止显示搜索结果,并继续播放多媒体内容。
例如,以多媒体内容为视频画面为例,如图7A所示,在播放视频时,在视频页面出现引导搜索,即搜索入口701;点击该搜索入口701后,如图7B所示,在视频画面弹出半屏的搜索结果展示区域702,并暂停播放视频画面,3秒后半屏的搜索结果展示区域自动消失,或者点击搜索结果展示区域的外部,半屏的搜索结果展示区域自动消失,并继续播放视频画面。
在一些实施例中,在多媒体内容中显示搜索入口时,响应于针对搜索入口的输入操作,将输入操作的输入内容作为关键词。
例如,以多媒体内容为视频画面为例,如图7F所示,在播放视频时,在视频页面出现引导搜索,即空白的搜索入口701(即未填充关键词的搜索入口),支持手动输入关键词,将手动输入的内容作为关键词。
在一些实施例中,在多媒体内容中显示搜索入口时,响应于针对当前播放的多媒体内容的选择操作,确定多媒体内容中被选中的部分内容;从部分内容中识别出至少一个关键词,将所识别出的至少一个关键词作为搜索入口中自动填充的至少一个关键词。
例如,根据用户选择的部分内容而自动填充关键词,例如在当前播放的视频画面中选中部分内容(部分内容可以是某个时间段的视频,还可以是某个视频画面中的部分画面),对选中的部分内容进行识别,从部分内容中识别出至少一个关键词(例如人名),将所识别出的至少一个关键词作为搜索入口中自动填充的至少一个关键词;在当前播放的音频内容中选中部分内容(部分内容可以是某个时间段的音频,还可以是某个音频内容中的部分内容),对选中的部分内容进行识别,从部分内容中识别出至少一个关键词(例如歌词),将所识别出的至少一个关键词作为搜索入口中自动填充的至少一个关键词,其中,所识别出的至少一个关键词支持用户选择,将选中的关键词作为自动填充的关键词。
在步骤103中,响应于针对搜索入口的触发操作,获取与关键词对应的搜索结果,在人机交互界面中显示搜索结果。
例如,本申请实施例对触发操作不做限定,触发操作可以是触摸式操作(如点击或长按操作等),也可以是非触摸式操作(例如通过语音输入的方式等)。基于多媒体内容中显示的搜索入口进行搜索操作,从而支持用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
在一些实施例中,搜索结果包括待推荐信息,待推荐信息的排序位于搜索结果中的其他信息的前面,其他信息是按照特定信息顺序排列的,特定信息顺序包括:发表时间的降序顺序、相关度的降序顺序。
例如,搜索结果包括具有推荐属性的待推荐信息,例如广告,待推荐信息的排序位于搜索结果中的其他信息(即不具有推荐属性的信息)的前面,从而优先显示待推荐信息,通过待推荐信息可以高效引导用户到达目的地,例如,通过发表时间的降序顺序对其他信息进行排序,最近发表的信息排列在之前发表的信息前面;通过与至少一个关键词的相关度的降序顺序对其他信息进行排序,与至少一个关键词相关的信息排列在与至少一个关键词不相关的信息前面。
综上,本申请实施例提供的信息搜索方法具有以下有益效果:在播放的多媒体内容中显示搜索入口,从而能够在用户不离开多媒体内容的情况下对感兴趣的关键词进行搜索,从而支持用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果,相较于用户在多媒体内容之外进行搜索的方案,节约了相关的通信资源和计算资源。
如前所述,本申请实施例提供的信息搜索处理方法可以由各种类型的电子设备实施。参见图6,图6是本申请实施例提供的信息搜索处理方法的流程示意图,结合图6示出的步骤进行说明。
需要说明的是,上述图5所示的信息搜索处理方法所提供的所有功能都可以通过下述图6所示信息搜索处理方法设置得到,例如在多媒体内容中显示搜索入口,在搜索入口中自动填充关键词等。
在步骤201中,显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据多媒体数据在人机交互界面中播放多媒体内容。
例如,在编辑音频格式的多媒体数据时,根据音频格式的数据流,在人机交互界面(即编辑区域)中播放音频内容,例如音频参数(波形、采样率等)、歌词等;在编辑视频格式的多媒体数据时,根据视频格式的数据流,在人机交互界面(即编辑区域)中播放视频画面。
在步骤202中,响应于搜索入口的编辑操作,在多媒体内容中显示编辑完成的搜索入口;其中,搜索入口能够被填充关键词。
如图8所示,以多媒体内容为视频画面为例,在视频编辑中,点击“添加搜索”按钮801,以在视频画面中显示添加的搜索入口802,从而支持用户在观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
在一些实施例中,编辑操作包括添加操作;在多媒体内容中显示编辑完成的搜索入口,包括:在多媒体内容中显示添加完成的搜索入口;其中,搜索入口被设置为供终端设备显示搜索入口时自动填充有关键词,关键词与多媒体内容相关。
如图8所示,以多媒体内容为视频画面为例,在视频编辑中,点击“添加搜索”按钮801,以在视频画面中显示添加的搜索入口802,并设置播放多媒体内容的终端设备在显示搜索入口,在搜索入口中自动填充关键词,且关键词与多媒体内容相关,从而支持用户在观看多媒体内容时基于显示的搜索入口进行关键词的搜索,提升搜索效率和播放效果,不断打通与自身内容生态的连接。
需要说明的是,自动填充的关键词可以通过以下方式之一获得:对多媒体内容进行内容识别处理;对多媒体内容的历史搜索数据进行基于关键词的统计处理;当前播放时间点所处的时间段关联的至少一个关键词。
在一些实施例中,在多媒体内容中显示编辑完成的搜索入口,包括:在多媒体内容中显示未填充关键词的搜索入口;其中,搜索入口被设置为供终端设备显示搜索入口时输入关键词。
例如,在视频画面中显示添加的搜索入口后,并设置播放多媒体内容的终端设备在显示搜索入口时未填充关键词,支持手动输入关键词,从而支持用户在观看多媒体内容时基于显示的搜索入口进行手动搜索,提升搜索效率和播放效果,不断打通视频与搜索之间的连接。
在一些实施例中,编辑操作包括添加操作以及输入操作;响应于搜索入口的编辑操作,在多媒体内容中显示编辑完成的搜索入口,包括:响应于搜索入口的添加操作,在多媒体内容中显示添加完成的搜索入口;响应于针对搜索入口的输入操作,将输入操作的输入内容作为关键词;其中,搜索入口被设置为供终端设备显示多媒体内容时填充有关键词。
如图8所示,以多媒体内容为视频画面为例,在视频编辑中,点击“添加搜索”按钮801(即添加操作),以在视频中添加搜索入口802,点击“编辑”按钮803,加入推荐搜索的内容(即输入操作),推荐搜索的内容即为关键词,并设置播放多媒体内容的终端设备在显示搜索入口时填充有关键词,从而支持用户在观看多媒体内容时基于显示的搜索入口进行关键词的搜索,提升搜索效率和播放效果,不断打通与自身内容生态的连接。
在一些实施例中,编辑操作包括设定操作;在多媒体内容中显示编辑完成的搜索入口,包括:响应于搜索入口的显示位置的设定操作,确定多媒体内容中被设定的特定位置,特定位置是用于供终端设备显示搜索框形式的搜索入口的位置;在特定位置上显示搜索入口。
例如,通过设定多媒体内容显示的特定位置,以使播放多媒体内容的终端设备在多媒体内容的特定位置显示搜索框形式的搜索入口,响应于针对搜索入口的移动操作,在移动操作对应的位置更新显示搜索入口;响应于搜索入口在设定持续时长内未被触发或针对搜索入口的关闭操作,停止显示搜索入口。
在一些实施例中,搜索入口被设置为在终端设备的人机交互界面的一侧开始显示弹幕形式的搜索入口,直至搜索入口移动至人机交互界面的另一侧并消失。
例如,通过设定搜索入口的形态为以弹幕形式,以使播放多媒体内容的终端设备在人机交互界面的一侧开始显示弹幕形式的搜索入口,直至搜索入口移动至人机交互界面的另一侧并消失。
在步骤203中,向播放多媒体内容的终端设备发送搜索入口,其中,搜索入口是用于供终端设备在多媒体内容中显示搜索入口。
例如,在编辑完搜索入口后,向播放多媒体内容的终端设备发送搜索入口,以使播放多媒体内容的终端设备在播放多媒体内容时显示搜索入口,从而支持用户在观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果。
综上,本申请实施例提供的信息搜索方法具有以下有益效果:在播放的多媒体内容中显示搜索入口,从而能够在用户不离开多媒体内容的情况下对感兴趣的关键词进行搜索,从而支持用户观看多媒体内容时基于显示的搜索入口进行搜索,提升搜索效率和播放效果,相较于用户在多媒体内容之外进行搜索的方案,节约了相关的通信资源和计算资源。
下面,将说明本申请实施例在一个实际的应用场景中的示例性应用。
本申请实施例可应用于音频(例如电台音频素材、有声读书)、视频(例如视频回放)等场景,例如在播放视频时,在视频中显示弹幕形式的搜索入口,从而打通视频与搜索的链接;在播放音频时,在音频画面(包括歌词、音频波形等)中显示搜索入口,从而打通音频与搜索的链接;在观看帖子时,在帖中显示弹幕形式的搜索入口,从而打通帖子与搜索的链接。
下面以视频场景为例进行说明:
随着互联网的不断发展,搜索这个板块越来越受到各大巨头的亲睐;搜索是让用户直接到达目的地的通道,起到了一个引导用户走向的重要作用,并且也是用户获取信息最直接的途径之一。
相关技术中无法在视频中进行搜索,视频内容流量没有出口,流量断链。
为了解决上述问题,本申请实施例提供一种信息搜索处理方法,将降低内容(例如视频、音频)搜索的门槛,在内容中置入搜索入口,即搜索弹幕,在播放视频时能够进行搜索,从而打通视频与搜索的链接,例如需要推荐某个信息,在某个时间节点会介绍该推荐信息,这时候需要引导用户搜索该推荐信息,则在视频屏幕中间弹出一个小气泡(小气泡内呈现推荐信息),引导用户点击搜索,帮助用户引导至搜索页面。
下面基于观众侧以及编辑侧具体说明本申请实施例提供的信息搜索处理方法:
观众侧(即播放视频的用户侧):如图7A所示,在播放视频时,在视频页面出现引导搜索,即搜索弹幕701;点击该搜索弹幕701后,如图7B所示,在视频页面弹出半屏的搜索结果页702,并暂停播放视频,3秒后半屏的搜索页自动消失;当拉出半屏的搜索页时,搜索页将充满整屏。
编辑侧(即编辑视频的用户侧):如图8所示,在视频编辑中,点击“添加搜索”按钮801,以在视频中添加搜索入口802,点击“编辑”按钮803,加入推荐搜索的内容,编辑文案是“#”后加入推荐搜索的内容,则自动生成可点击的搜索弹幕,其中,“#”是一种文案编辑的输入格式。
需要说明的是,如图9所示,在视频编辑中,视频层901上会覆盖一层弹幕层902,编辑侧在发布视频中插入搜索弹幕903后,搜索弹幕在弹幕层的坐标数据、尺寸大小、时间锚点会被客户端记录下来并上传服务器,服务器会锁定这个位置的弹幕空间,这样观众发送的弹幕就不会覆盖搜索弹幕,被锁定的弹幕空间同搜索页面做点击映射。
如图10所示,下面结合客户端以及服务器具体说明信息搜索处理方法的流程:
步骤11、编辑侧的客户端在视频中插入搜索弹幕,并上传搜索弹幕各项参数至服务器。
步骤12、观众侧的客户端需要播放视频时,观众侧的客户端调用视频。
步骤13、服务器向观众侧的客户端返回视频内容。
步骤14、点击搜索弹幕,观众侧的客户端调用搜索页面,并暂停播放视频,开始计时。
步骤15、服务器返回搜索页面的内容。
步骤16、当需要退出搜索页面时,观众侧的客户端发送退出搜索指令至服务器。
下面结合图11具体说明信息搜索处理方法的流程:
步骤21、在视频编辑中,编辑侧在发布视频中插入搜索弹幕,并上传服务器。
步骤22、观众侧的客户端发送视频播放请求至服务器,服务器回传数据,以在观众侧播放视频。
步骤23、观众侧的客户端在播放视频时,点击视频中出现的搜索弹幕。
步骤24、观众侧的客户端发送链接请求至服务器,服务器根据链接请求返回搜索页面内容,以在观众侧呈现半屏的搜索页面,并暂停播放视频。
步骤25、观众侧的客户端的计时器开始计时,当3秒内检测到用户无操作时,则关闭搜索页面,并恢复视频播放。
步骤26、当3秒内检测到拉开半屏的搜索页面时,则关闭半屏的搜索页面并打开全屏的搜索页面。
步骤27、当检测到点击到半屏的搜索页面的外部时,则关闭搜索页面,并恢复视频播放。
增加用户获取信息的快捷途径,提升流量分配效率。
综上,本申请实施例提供的信息搜索方法具有以下有益效果:
1)增加用户获取信息的快捷途径,提升流量分配效率,社交、搜索、分发,作为流量分配的三个手段,而搜索这一手段需要用户的主动输入,通过视频直接搜索可以高效引导用户到达目的地,提升流量分配效率。
2)打破内容介质,不断打通与自身内容生态的连接,繁荣内容生态,视频不仅可以作为搜索的终点,也可以作为搜索的起点,在视频中搜索,可以帮助用户打破内容介质,在视频中完成流量的转化。
至此已经结合本申请实施例提供的终端的示例性应用和实施,说明本申请实施例提供的视频处理方法,下面继续说明本申请实施例提供的信息搜索处理装置555中各个模块(第一播放模块5551、第一显示模块5552、第二显示模块5553)配合实现信息搜索处理的方案。
第一播放模块5551,用于接收音频格式或视频格式的多媒体数据,根据所述多媒体数据在人机交互界面中播放多媒体内容;第一显示模块5552,用于在所述多媒体内容中显示搜索入口;其中,所述搜索入口能够被填充关键词;第二显示模块5553,用于响应于针对所述搜索入口的触发操作,获取与所述关键词对应的搜索结果,在所述人机交互界面中显示所述搜索结果。
在一些实施例中,所述第一显示模块5552还用于在所述多媒体内容的特定位置显示搜索框形式的所述搜索入口;响应于针对所述搜索入口的移动操作,在所述移动操作对应的位置更新显示所述搜索入口;响应于所述搜索入口在设定持续时长内未被触发或针对所述搜索入口的关闭操作,停止显示所述搜索入口。
在一些实施例中,所述第一显示模块5552还用于在所述人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
在一些实施例中,所述搜索结果包括待推荐信息,所述待推荐信息的排序位于所述搜索结果中的其他信息的前面,所述其他信息是按照特定信息顺序排列的,所述特定信息顺序包括:发表时间的降序顺序、相关度的降序顺序。
在一些实施例中,所述搜索入口中自动填充有至少一个关键词,所述至少一个关键词与所述多媒体内容相关。
在一些实施例中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块5552还用于对所述多媒体内容进行内容识别处理,得到所述自动填充的至少一个关键词;其中,所述关键词的类型包括以下至少之一:所述多媒体内容涉及的对象、所述多媒体内容对应的情节、所述多媒体内容对应的文本。
在一些实施例中,所述第一显示模块5552还用于基于分段特征对所述多媒体内容进行分段处理,得到所述多媒体内容对应的多个内容片段;其中,所述分段特征包括以下至少之一:所述多媒体内容的时长、所述多媒体内容的不同情节、所述多媒体内容的不同场景、所述多媒体内容的不同对象;对每个所述内容片段进行内容识别处理,得到每个所述内容片段对应的自动填充的至少一个关键词;其中,每个所述内容片段对应的至少一个关键词,用于在播放所述内容片段时自动填充到所述搜索入口。
在一些实施例中,在所述对多媒体内容进行内容识别处理之后,所述第一显示模块5552还用于基于待推荐信息对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到与所述待推荐信息相关的关键词;将与所述待推荐信息相关的关键词作为所述自动填充的至少一个关键词。
在一些实施例中,所述第一显示模块5552还用于基于所述人机交互界面的账号对应的搜索偏好,对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到符合所述搜索偏好的至少一个关键词;将符合所述搜索偏好的至少一个关键词作为所述自动填充的至少一个关键词。
在一些实施例中,在所述对从所述内容识别处理得到的至少一个关键词进行筛选处理之前,所述第一显示模块5552还用于获取所述账号对应的历史搜索数据,并调用偏好预测模型执行以下处理:对所述账号对应的历史搜索数据进行特征提取处理,得到所述账号对应的搜索特征;对所述搜索特征进行搜索偏好预测处理,得到所述账号对应的搜索偏好。
在一些实施例中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块5552还用于对所述多媒体内容的历史搜索数据进行基于所述关键词的统计处理,得到每个所述关键词的搜索频率;当所述关键词的搜索频率大于搜索频率阈值时,将所述关键词作为所述自动填充的至少一个关键词。
在一些实施例中,在所述多媒体内容中显示搜索入口之前,所述第一显示模块5552还用于获取当前播放时间点所处的时间段关联的至少一个关键词;其中,不同所述时间段预先关联有至少一个关键词;将所述当前播放时间点所处的时间段关联的至少一个关键词,作为所述自动填充的至少一个关键词。
在一些实施例中,所述第一显示模块5552还用于在遮挡部分所述多媒体内容的搜索结果展示区域中显示所述搜索结果;响应于针对所述搜索结果展示区域的扩大操作,将所述搜索结果展示区域扩大至遮挡全部所述多媒体内容,并显示与所述关键词对应的详细搜索结果;其中,所述详细搜索结果的信息量大于所述搜索结果的信息量。
在一些实施例中,所述第一显示模块5552还用于响应于针对所述搜索入口的触发操作,暂停播放所述多媒体内容;响应于针对所述搜索结果展示区域的关闭操作或所述搜索结果展示区域在设定持续时长内未被触发,停止显示所述搜索结果,并继续播放所述多媒体内容。
在一些实施例中,在所述多媒体内容中显示搜索入口时,所述第一显示模块5552还用于响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词。
在一些实施例中,在所述多媒体内容中显示搜索入口时,所述第一显示模块5552还用于响应于针对当前播放的所述多媒体内容的选择操作,确定所述多媒体内容中被选中的部分内容;从所述部分内容中识别出至少一个关键词,将所识别出的至少一个关键词作为所述搜索入口中自动填充的至少一个关键词。
下面继续说明本申请实施例提供的视频处理装置555中各个模块(第三显示模块5555、发送模块5556)配合实现视频处理的方案。
第二播放模块5554,用于显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据所述多媒体数据在人机交互界面中播放多媒体内容;第三显示模块5555,用于响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口;其中,所述搜索入口能够被填充关键词;发送模块5556,用于向播放所述多媒体内容的终端设备发送所述搜索入口,其中,所述搜索入口是用于供所述终端设备在所述多媒体内容中显示所述搜索入口。
在一些实施例中,所述编辑操作包括添加操作;所述第三显示模块5555还用于在所述多媒体内容中显示添加完成的搜索入口;其中,所述搜索入口被设置为供所述终端设备显示所述搜索入口时自动填充有所述关键词,所述关键词与所述多媒体内容相关。
在一些实施例中,所述编辑操作包括添加操作以及输入操作;所述第三显示模块5555还用于响应于所述搜索入口的添加操作,在所述多媒体内容中显示添加完成的搜索入口;响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词;其中,所述搜索入口被设置为供所述终端设备显示所述多媒体内容时填充有所述关键词。
在一些实施例中,所述编辑操作包括设定操作;所述第三显示模块5555还用于响应于所述搜索入口的显示位置的设定操作,确定所述多媒体内容中被设定的特定位置,所述特定位置是用于供所述终端设备显示搜索框形式的所述搜索入口的位置;在所述特定位置上显示所述搜索入口。
在一些实施例中,所述搜索入口被设置为在所述终端设备的人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行本申请实施例上述的信息搜索处理方法。
本申请实施例提供一种存储有可执行指令的计算机可读存储介质,其中存储有可执行指令,当可执行指令被处理器执行时,将引起处理器执行本申请实施例提供的信息搜索处理方法,例如,如图5-6示出的信息搜索处理方法。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(HTML,Hyper TextMarkup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
以上所述,仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本申请的保护范围之内。

Claims (25)

1.一种信息搜索处理方法,其特征在于,所述方法包括:
接收音频格式或视频格式的多媒体数据,根据所述多媒体数据在人机交互界面中播放多媒体内容;
在所述多媒体内容中显示搜索入口;其中,所述搜索入口能够被填充关键词;
响应于针对所述搜索入口的触发操作,获取与所述关键词对应的搜索结果,在所述人机交互界面中显示所述搜索结果。
2.根据权利要求1所述的方法,其特征在于,
所述在所述多媒体内容中显示搜索入口,包括:
在所述多媒体内容的特定位置显示搜索框形式的所述搜索入口;
在所述多媒体内容中显示搜索入口之后,所述方法还包括:
响应于针对所述搜索入口的移动操作,在所述移动操作对应的位置更新显示所述搜索入口;
响应于所述搜索入口在设定持续时长内未被触发或针对所述搜索入口的关闭操作,停止显示所述搜索入口。
3.根据权利要求1所述的方法,其特征在于,所述在所述多媒体内容中显示搜索入口,包括:
在所述人机交互界面的一侧开始显示弹幕形式的所述搜索入口,直至所述搜索入口移动至所述人机交互界面的另一侧并消失。
4.根据权利要求1所述的方法,其特征在于,
所述搜索结果包括待推荐信息,所述待推荐信息的排序位于所述搜索结果中的其他信息的前面,所述其他信息是按照特定信息顺序排列的,所述特定信息顺序包括:发表时间的降序顺序、相关度的降序顺序。
5.根据权利要求1所述的方法,其特征在于,
所述搜索入口中自动填充有至少一个关键词,所述至少一个关键词与所述多媒体内容相关。
6.根据权利要求5所述的方法,其特征在于,在所述多媒体内容中显示搜索入口之前,所述方法还包括:
对所述多媒体内容进行内容识别处理,得到所述自动填充的至少一个关键词;
其中,所述关键词的类型包括以下至少之一:所述多媒体内容涉及的对象、所述多媒体内容对应的情节、所述多媒体内容对应的文本。
7.根据权利要求6所述的方法,其特征在于,所述对所述多媒体内容进行内容识别处理,得到所述自动填充的至少一个关键词,包括:
基于分段特征对所述多媒体内容进行分段处理,得到所述多媒体内容对应的多个内容片段;其中,所述分段特征包括以下至少之一:所述多媒体内容的时长、所述多媒体内容的不同情节、所述多媒体内容的不同场景、所述多媒体内容的不同对象;
对每个所述内容片段进行内容识别处理,得到每个所述内容片段对应的自动填充的至少一个关键词;其中,每个所述内容片段对应的至少一个关键词,用于在播放所述内容片段时自动填充到所述搜索入口。
8.根据权利要求6所述的方法,其特征在于,在所述对多媒体内容进行内容识别处理之后,所述方法还包括:
基于待推荐信息对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到与所述待推荐信息相关的关键词;
将与所述待推荐信息相关的关键词作为所述自动填充的至少一个关键词。
9.根据权利要求6所述的方法,其特征在于,所述方法还包括:
基于所述人机交互界面的账号对应的搜索偏好,对从所述内容识别处理得到的至少一个关键词进行筛选处理,得到符合所述搜索偏好的至少一个关键词;
将符合所述搜索偏好的至少一个关键词作为所述自动填充的至少一个关键词。
10.根据权利要求9所述的方法,其特征在于,在所述对从所述内容识别处理得到的至少一个关键词进行筛选处理之前,所述方法还包括:
获取所述账号对应的历史搜索数据,并调用偏好预测模型执行以下处理:
对所述账号对应的历史搜索数据进行特征提取处理,得到所述账号对应的搜索特征;
对所述搜索特征进行搜索偏好预测处理,得到所述账号对应的搜索偏好。
11.根据权利要求5所述的方法,其特征在于,在所述多媒体内容中显示搜索入口之前,所述方法还包括:
对所述多媒体内容的历史搜索数据进行基于所述关键词的统计处理,得到每个所述关键词的搜索频率;
当所述关键词的搜索频率大于搜索频率阈值时,将所述关键词作为所述自动填充的至少一个关键词。
12.根据权利要求5所述的方法,其特征在于,在所述多媒体内容中显示搜索入口之前,所述方法还包括:
获取当前播放时间点所处的时间段关联的至少一个关键词;其中,不同所述时间段预先关联有至少一个关键词;
将所述当前播放时间点所处的时间段关联的至少一个关键词,作为所述自动填充的至少一个关键词。
13.根据权利要求1所述的方法,其特征在于,
所述在所述人机交互界面中显示所述搜索结果,包括:
在遮挡部分所述多媒体内容的搜索结果展示区域中显示所述搜索结果;
响应于针对所述搜索结果展示区域的扩大操作,将所述搜索结果展示区域扩大至遮挡全部所述多媒体内容,并显示与所述关键词对应的详细搜索结果;其中,所述详细搜索结果的信息量大于所述搜索结果的信息量。
14.根据权利要求13所述的方法,其特征在于,所述方法还包括:
响应于针对所述搜索入口的触发操作,暂停播放所述多媒体内容;
响应于针对所述搜索结果展示区域的关闭操作或所述搜索结果展示区域在设定持续时长内未被触发,停止显示所述搜索结果,并继续播放所述多媒体内容。
15.根据权利要求1所述的方法,其特征在于,在所述多媒体内容中显示搜索入口时,所述方法还包括:
响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词。
16.根据权利要求1所述的方法,其特征在于,在所述多媒体内容中显示搜索入口时,所述方法还包括:
响应于针对当前播放的所述多媒体内容的选择操作,确定所述多媒体内容中被选中的部分内容;
从所述部分内容中识别出至少一个关键词,将所识别出的至少一个关键词作为所述搜索入口中自动填充的至少一个关键词。
17.一种信息搜索处理方法,其特征在于,所述方法包括:
显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据所述多媒体数据在人机交互界面中播放多媒体内容;
响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口;其中,所述搜索入口能够被填充关键词;
向播放所述多媒体内容的终端设备发送所述搜索入口,其中,所述搜索入口是用于供所述终端设备在所述多媒体内容中显示所述搜索入口。
18.根据权利要求17所述的方法,其特征在于,
所述编辑操作包括添加操作;
所述在所述多媒体内容中显示编辑完成的搜索入口,包括:
在所述多媒体内容中显示添加完成的搜索入口;其中,所述搜索入口被设置为供所述终端设备显示所述搜索入口时自动填充有所述关键词,所述关键词与所述多媒体内容相关。
19.根据权利要求17所述的方法,其特征在于,
所述编辑操作包括添加操作以及输入操作;
所述响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口,包括:
响应于所述搜索入口的添加操作,在所述多媒体内容中显示添加完成的搜索入口;
响应于针对所述搜索入口的输入操作,将所述输入操作的输入内容作为所述关键词;
其中,所述搜索入口被设置为供所述终端设备显示所述多媒体内容时填充有所述关键词。
20.根据权利要求17所述的方法,其特征在于,
所述编辑操作包括设定操作;
所述在所述多媒体内容中显示编辑完成的搜索入口,包括:
响应于所述搜索入口的显示位置的设定操作,确定所述多媒体内容中被设定的特定位置,所述特定位置是用于供所述终端设备显示搜索框形式的所述搜索入口的位置;
在所述特定位置上显示所述搜索入口。
21.一种信息搜索处理装置,其特征在于,所述装置包括:
第一播放模块,用于接收音频格式或视频格式的多媒体数据,根据所述多媒体数据在人机交互界面中播放多媒体内容;
第一显示模块,用于在所述多媒体内容中显示搜索入口;其中,所述搜索入口能够被填充关键词;
第二显示模块,用于响应于针对所述搜索入口的触发操作,获取与所述关键词对应的搜索结果,在所述人机交互界面中显示所述搜索结果。
22.一种信息搜索处理装置,其特征在于,所述装置包括:
第二播放模块,用于显示用于编辑视频格式或音频格式的多媒体数据的人机交互界面,根据所述多媒体数据在人机交互界面中播放多媒体内容;
第三显示模块,用于响应于搜索入口的编辑操作,在所述多媒体内容中显示编辑完成的搜索入口;其中,所述搜索入口能够被填充关键词;
发送模块,用于向播放所述多媒体内容的终端设备发送所述搜索入口,其中,所述搜索入口是用于供所述终端设备在所述多媒体内容中显示所述搜索入口。
23.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现权利要求1至20任一项所述的信息搜索处理方法。
24.一种计算机可读存储介质,存储有可执行指令,其特征在于,所述可执行指令被处理器执行时实现权利要求1至20任一项所述的信息搜索处理方法。
25.一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时实现权利要求1至20任一项所述的信息搜索处理方法。
CN202111265622.3A 2021-10-28 2021-10-28 信息搜索处理方法、装置、设备、存储介质及程序产品 Pending CN113987221A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111265622.3A CN113987221A (zh) 2021-10-28 2021-10-28 信息搜索处理方法、装置、设备、存储介质及程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111265622.3A CN113987221A (zh) 2021-10-28 2021-10-28 信息搜索处理方法、装置、设备、存储介质及程序产品

Publications (1)

Publication Number Publication Date
CN113987221A true CN113987221A (zh) 2022-01-28

Family

ID=79743757

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111265622.3A Pending CN113987221A (zh) 2021-10-28 2021-10-28 信息搜索处理方法、装置、设备、存储介质及程序产品

Country Status (1)

Country Link
CN (1) CN113987221A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101606021B1 (ko) * 2014-10-24 2016-03-24 주식회사 모비데이즈 어플리케이션 내부검색방법 및 시스템
CN105872786A (zh) * 2016-05-31 2016-08-17 无锡天脉聚源传媒科技有限公司 一种在节目中通过弹幕投放广告的方法及装置
CN107220377A (zh) * 2017-06-26 2017-09-29 联想(北京)有限公司 搜索方法、电子设备及计算机存储介质
CN110337041A (zh) * 2019-07-12 2019-10-15 腾讯科技(深圳)有限公司 视频播放方法、装置、计算机设备及存储介质
CN111444356A (zh) * 2020-03-11 2020-07-24 北京字节跳动网络技术有限公司 基于搜索的推荐方法及装置
CN111984823A (zh) * 2020-09-01 2020-11-24 咪咕文化科技有限公司 视频搜索方法、电子设备及存储介质
CN112581162A (zh) * 2020-12-07 2021-03-30 Oppo广东移动通信有限公司 资讯内容展示方法、装置、存储介质以及终端
CN113111286A (zh) * 2021-05-12 2021-07-13 北京字节跳动网络技术有限公司 一种信息展示的方法、装置以及计算机存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101606021B1 (ko) * 2014-10-24 2016-03-24 주식회사 모비데이즈 어플리케이션 내부검색방법 및 시스템
CN105872786A (zh) * 2016-05-31 2016-08-17 无锡天脉聚源传媒科技有限公司 一种在节目中通过弹幕投放广告的方法及装置
CN107220377A (zh) * 2017-06-26 2017-09-29 联想(北京)有限公司 搜索方法、电子设备及计算机存储介质
CN110337041A (zh) * 2019-07-12 2019-10-15 腾讯科技(深圳)有限公司 视频播放方法、装置、计算机设备及存储介质
CN111444356A (zh) * 2020-03-11 2020-07-24 北京字节跳动网络技术有限公司 基于搜索的推荐方法及装置
CN111984823A (zh) * 2020-09-01 2020-11-24 咪咕文化科技有限公司 视频搜索方法、电子设备及存储介质
CN112581162A (zh) * 2020-12-07 2021-03-30 Oppo广东移动通信有限公司 资讯内容展示方法、装置、存储介质以及终端
CN113111286A (zh) * 2021-05-12 2021-07-13 北京字节跳动网络技术有限公司 一种信息展示的方法、装置以及计算机存储介质

Similar Documents

Publication Publication Date Title
US9462309B2 (en) Playing and editing linked and annotated audiovisual works
US9936184B2 (en) Code execution in complex audiovisual experiences
CN108650555B (zh) 视频界面的展示、交互信息的生成方法、播放器及服务器
CN111970577B (zh) 字幕编辑方法、装置和电子设备
CN110324696B (zh) 直播业务的导流方法、装置、计算机设备和存储介质
CN110475140B (zh) 弹幕数据处理方法、装置、计算机可读存储介质和计算机设备
US20120163770A1 (en) Switched annotations in playing audiovisual works
CN114339285B (zh) 知识点的处理方法、视频处理方法、装置及电子设备
CN111800668B (zh) 弹幕的处理方法、装置、设备及存储介质
CN110958470A (zh) 一种多媒体内容处理方法、装置、介质和电子设备
CN111651617A (zh) 多媒体信息的分享方法、装置、设备及存储介质
WO2015103636A9 (en) Injection of instructions in complex audiovisual experiences
EP4202727A1 (en) Meeting minutes interaction method and apparatus, device, and medium
JP2010098730A (ja) リンク情報の提供装置、表示装置、システム、方法、プログラム、記録媒体及びリンク情報の送受信システム
CN112230838A (zh) 一种文章处理方法、装置、设备及计算机可读存储介质
CN113010698B (zh) 多媒体的交互方法、信息交互方法、装置、设备及介质
CN116261857A (zh) 一种显示设备及应用程序界面显示方法
CN113852767B (zh) 视频编辑方法、装置、设备及介质
CN111246024A (zh) 一种通话过程中的互动点播交互方法、系统及装置
EP2754112A1 (en) System and method for producing complex multimedia contents by an author and for using such complex multimedia contents by a user
CN102567435A (zh) 多媒体信息源的整合方法及其超链接装置与电子装置
CN103747280A (zh) 一种创建节目单的方法及电子设备
CN113987221A (zh) 信息搜索处理方法、装置、设备、存储介质及程序产品
CN115988251B (zh) 移动终端及短视频展示的方法
CN111698563A (zh) 基于ai虚拟主播的内容发送方法、装置和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20220128