CN111800651B - 一种信息处理方法和信息处理装置 - Google Patents

一种信息处理方法和信息处理装置 Download PDF

Info

Publication number
CN111800651B
CN111800651B CN202010607462.5A CN202010607462A CN111800651B CN 111800651 B CN111800651 B CN 111800651B CN 202010607462 A CN202010607462 A CN 202010607462A CN 111800651 B CN111800651 B CN 111800651B
Authority
CN
China
Prior art keywords
subset
images
image
target object
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010607462.5A
Other languages
English (en)
Other versions
CN111800651A (zh
Inventor
王军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN202010607462.5A priority Critical patent/CN111800651B/zh
Publication of CN111800651A publication Critical patent/CN111800651A/zh
Application granted granted Critical
Publication of CN111800651B publication Critical patent/CN111800651B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种信息处理方法,该方法包括:有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;确定目标对象对应的标注信息;在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。本申请的实施例同时还公开了一种信息处理装置。

Description

一种信息处理方法和信息处理装置
技术领域
本申请涉及但不限于计算机技术领域,尤其涉及一种信息处理方法和信息处理装置。
背景技术
视频作为多媒体信息载体,已成为人们获取信息的重要手段。相关技术中采用人工手动标注的方式,为视频中出现的对象添加标注信息;然而,这种手动添加标注信息的方式操作效率较低。
发明内容
本申请的技术方案是这样实现的:
一种信息处理方法,所述方法包括:
有序的输出图像集合,其中,所述图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;
处理所述第一图像子集和所述第二图像子集的至少部分,确定所述第二图像子集中的目标对象,所述目标对象是所述第二图像子集中和参考对象之间满足差异条件的显示对象;
确定所述目标对象对应的标注信息;
在所述第二图像子集和/或所述第三图像子集中的目标对象中添加所述标注信息。
在上述方案中,所述目标对象是所述第一图像子集和所述第二图像子集中的相同对象,所述第一图像子集中的所述目标对象为所述参考对象,所述目标对象是在所述第一图像子集和所述第二图像子集中改变满足第一差异条件的显示对象。
在上述方案中,所述目标对象是所述第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,所述参考对象包括所述其他候选对象。
在上述方案中,所述第二差异条件包括所述目标对象从所述第一图像子集到所述第二图像子集的行为变化,与所述参考对象从所述第一图像子集到所述第二图像子集的行为变化不同。
在上述方案中,所述差异条件包括行为特征有差异的条件。
在上述方案中,所述行为特征有差异的条件包括:
所述目标对象对所述第二图像子集中的目标物品执行目标操作的条件。
在上述方案中,所述在第二图像子集和/或第三图像子集中的目标对象中添加所述标注信息之后,所述方法还包括:
在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件;所述触发事件用于显示所述标注信息;
基于所述触发事件,显示所述标注信息。
在上述方案中,所述在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件包括:
在输出所述第二图像子集和/或所述第三图像子集的界面中显示所述目标对象对应的标识信息;
响应于针对所述标识信息的信息展开操作,生成所述触发事件;
相应的,所述基于所述触发事件,显示所述标注信息包括:
基于所述触发事件,在所述界面中显示所述标注信息,其中,所述标识信息用于标识所述目标对象存在标注信息,或者,所述标识信息的信息内容少于所述标注信息的信息内容。
在上述方案中,在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件包括:
在输出所述第二图像子集和/或所述第三图像子集的过程中,确定输出的图像子集中所述目标对象的出现频次、出现时长和/或出现位置符合条件,生成所述触发事件;和/或
相应的,所述基于所述触发事件,显示所述标注信息,包括:
基于所述触发事件,暂停输出所述第二图像子集和/或所述第三图像子集,并基于所述目标对象在当前界面中所处的位置显示所述标注信息。
一种信息处理装置,包括:
输出单元,用于有序的输出图像集合,其中,所述图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;
处理单元,用于处理所述图像集合的至少部分,确定第二图像子集中的目标对象,所述目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;
所述处理单元,还用于确定所述目标对象对应的标注信息;
所述处理单元,还用于在第二图像子集和/或第三图像子集中的目标对象中添加所述标注信息。
本申请实施例提供的信息处理方法和信息处理装置,有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;确定目标对象对应的标注信息;在第二图像子集和/或第三图像子集中的目标对象中添加标注信息;也就是说在添加标注信息时,是基于第一图像子集和第二图像子集的至少部分,识别出第二图像子集中和参考对象之间满足差异条件的目标对象,并为目标对象自动添加标注信息,即本申请能在输出内容里面找到差异化对象并自动为其添加标注信息,解决了相关技术中手动添加标注信息的方式操作效率较低的问题,取得了自动识别差异化对象并快速添加标注信息的效果。
附图说明
图1为本申请的实施例提供的一种信息处理方法的流程示意图;
图2为本申请的实施例提供的一种输出图像的示意图;
图3为本申请的实施例提供的另一种信息处理方法的流程示意图;
图4为本申请的实施例提供的又一种信息处理方法的流程示意图;
图5为本申请的实施例提供的一种信息处理装置的结构示意图;
图6为本申请的实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
本申请的实施例提供一种信息处理方法,应用于电子设备,参照图1所示,该方法包括以下步骤:
步骤101、有序的输出图像集合。
其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像。
本申请实施例中,电子设备包括可以包括诸如手机、平板电脑、笔记本电脑、个人数字助理(Personal Digital Assistant,PDA)、相机等移动终端设备,以及诸如台式计算机等固定终端设备。
本申请实施例的应用场景可以包括图像后期制作场景,例如对图像集合做后期的处理,使其形成完整的视频,包括为图像集合添加一些信息和/或特效。
本申请实施例的应用场景也可以包括图像播放场景,例如在进行直播或者转播的过程中,至少基于当前播放的内容和/或已播放的内容对当前播放的内容和/或后续将要播放的内容添加一些信息和/或特效。
一些实施例中,图像集合中的有序的第一图像子集,第二图像子集和第三图像子集可以看作图像集合中由前往后的三段图像子集。例如,图像集合为一个完整的视频文件时,第一图像子集,第二图像子集和第三图像子集就是视频中由前往后的具有时间连续性的三段小视频。
这里,在输出图像集合的过程中,电子设备可以通过自身的显示模组有序的输出图像集合。电子设备还可以通过自身的投射模组有序的投射图像集合至投影面上。电子设备还可以通过通信模组与其他共享设备进行通信,进而同时有序的输出的图像集合。
步骤102、处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象。
其中,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象。
本申请实施例中,电子设备有序的输出图像集合的过程中,电子设备可以仅处理第二图像子集的至少部分,确定第二图像子集中与参考对象之间满足差异条件的目标对象。当然,电子设备还可以处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中与参考对象之间满足差异条件的目标对象。也就是说,电子设备至少可以基于第二图像子集的至少部分确定出第二图像子集中的目标对象。
一些实施例中,目标对象是第二图像子集包括的图像内容中的局部内容,可以是人,当然也可以是物体。
步骤103、确定目标对象对应的标注信息。
本申请实施例中,标注信息是用于对目标对象进行说明和/或突出显示的信息。可以理解为,目标对象是电子设备基于第一图像子集和第二图像子集的至少部分识别出的图像内容中需要特别关注的对象。
步骤104、在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。
本申请实施例中,电子设备在识别出目标对象,并确定该目标对象对应的标注信息的情况下,在第二图像子集和/或第三图像子集中的目标对象中添加标注信息,如此,实现自动添加标注信息,以便在输出第二图像子集和/或第三图像子集的过程中对这一特别关注对象进行提示,提升用户观看体验。
一些实施例中,电子设备在第二图像子集和/或第三图像子集中的目标对象中添加标注信息时,可以基于目标对象在第二图像子集和/或第三图像子集的图像内容中所处的位置添加标注信息。
其他实施例中,电子设备在第二图像子集和/或第三图像子集中的目标对象中添加标注信息时,可以在第二图像子集和/或第三图像子集的图像内容的目标区域中添加标注信息,以使标注信息不遮挡图像内容中的关键内容。
在利用本申请实施例提供的信息处理方法进行信息处理时,有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;确定目标对象对应的标注信息;在第二图像子集和/或第三图像子集中的目标对象中添加标注信息;也就是说在添加标注信息时,是基于第一图像子集和第二图像子集的至少部分,识别出第二图像子集中和参考对象之间满足差异条件的目标对象,并为目标对象自动添加标注信息,即本申请能在输出内容里面找到差异化对象并自动为其添加标注信息,解决了相关技术中手动添加标注信息的方式操作效率较低的问题,取得了自动识别差异化对象并快速添加标注信息的效果。
在一些实施例中,目标对象是第一图像子集和第二图像子集中的相同对象,第一图像子集中的目标对象为参考对象,目标对象是在第一图像子集和第二图像子集中改变满足第一差异条件的显示对象。
也就是说,该场景下电子设备是将目标对象自身作为参考对象,比较其在第一图像子集和第二图像子集中所呈现的内容,确定与自身相比发生了变化且满足第一差异化条件的对象为目标对象。
其中,第一差异条件包括目标对象从第一图像子集到第二图像子集所呈现的内容和/或行为不同的条件,目标对象所呈现的内容包括目标对象的外形、饰品、局部部位中的至少一种。
这里,电子设备确定目标对象的过程中,处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中与第一图像子集中的同一对象发生改变且这一改变满足第一差异条件的显示对象为目标对象。
示例性的,电子设备确定目标对象的过程中,处理第一图像子集(假设第一图像子集看作已输出的历史图像)和第二图像子集(假设第二图像子集中的至少部分看作正输出的图像)的至少部分,确定第二图像子集中与第一图像子集的同一对象由原来的衣衫褴褛变为黄袍加身、在原有外形上长出了翅膀、或者局部部位如眼睛由黑白相间变为红色,则确定该对象为目标对象。
在一些实施例中,目标对象是第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,参考对象包括其他候选对象。
也就是说,该场景下电子设备是在第二图像子集中的候选对象之间进行比较,比较候选对象各自所呈现的内容,确定候选对象中和其他候选对象满足第二差异条件的显示对象为目标对象。
这里,电子设备可以至少基于第二图像子集的至少部分如至少一帧进行比较,确定和其他候选对象满足第二差异条件的显示对象为目标对象。当然,电子设备还可以基于第一图像子集和第二图像子集的至少部分即多帧图像进行比较,确定和其他候选对象满足第二差异条件的显示对象为目标对象。
一些实施例中,第二差异条件包括目标对象从第一图像子集到第二图像子集的行为变化,与参考对象从第一图像子集到第二图像子集的行为变化不同。
这里,电子设备还可以基于第一图像子集和第二图像子集的至少部分即多帧图像进行比较,基于时间延续性比较各个候选对象从第一图像子集到第二图像子集的行为变化,并确定候选对象中与其他候选对象从第一图像子集到第二图像子集的行为变化不同的对象为满足第二差异条件的显示对象。
其他实施例中,差异条件包括行为特征有差异的条件。其中,行为特征包括识别图像子集中对象的行为得到的特征。
电子设备可以将有序输出的图像子集输入至经过训练得到的网络模型,得到上述图像子集中对象的行为特征。
这里,电子设备确定第二图像子集中的满足差异条件的目标对象,可以包括:电子设备分析第二图像子集的至少部分,例如分析第二图像子集中的一帧图像,确定第二图像子集中的候选对象中与其他候选对象的行为特征有差异的对象为目标对象;该场景中,电子设备是基于不同的对象进行比较确定的目标对象。
示例性的,电子设备有序的输出会议图像集合的过程中,分析第二图像子集中的一帧图像,确定第二图像子集中的职员A站立,而其他职员均坐着,电子设备识别职员A为需要特别关注的对象。
这里,电子设备确定第二图像子集中的满足差异条件的目标对象,也可以包括:电子设备分析第一图像子集和第二图像子集的至少部分,即分析多帧具有时间延续性的图像,确定第二图像子集中的候选对象中与其他候选对象的行为特征有差异的对象为目标对象,该场景中,电子设备可以是基于不同的对象进行比较确定的目标对象;当然,也可以是基于同一对象进行比较确定的目标对象。
示例性的,电子设备有序的输出赛马活动图像集合的过程中,分析第一图像子集和第二图像子集的至少部分,即分析多帧具有时间延续性的图像,确定第二图像子集中的5号马匹一开始与其他马匹一样均沿着跑道奔跑,随着比赛的进行,5号马匹脱离跑道冲出一旁的观众席,电子设备识别出5号马匹为需要特别关注的对象。
这里,行为特征有差异的条件包括:目标对象对第二图像子集中的目标物品执行目标操作的条件。
示例性的,电子设备分析第二图像子集的至少部分确定有一个对象与其他对象的行为特征不同,且这个对象对第二图像子集中的目标物品执行目标操作的条件;例如,参照图2所示,电子设备确定第二图中子集中的一帧图像中多个队员都在足球场上奔跑,并且10号队员持球,则确定10号队员为第二图像子集中和其他队员之间满足差异条件的显示对象。
本申请的实施例提供一种信息处理方法,应用于电子设备,参照图3所示,该方法包括以下步骤:
步骤301、有序的输出图像集合。
其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像。
步骤302、处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象。
其中,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象。
步骤303、确定目标对象对应的标注信息。
步骤304、在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。
步骤305、在输出第二图像子集和/或第三图像子集的过程中,获得触发事件。
其中,触发事件用于显示标注信息。
步骤306、基于触发事件,显示标注信息。
本申请实施例中,电子设备基于第一图像子集和第二图像子集的至少部分确定出目标对象,并且生成该目标对象对应的标注信息的情况下,在输出第二图像子集和/或第三图像子集的过程中,获得用于显示标注信息的触发事件,则基于触发事件,显示在第二图像子集和/或第三图像子集中的目标对象的标注信息。也就是说,电子设备不仅能自动针对需要特别关注的对象添加标注,而且能在后续播放的过程中呈现需要特别关注的对象时,基于获得的触发事件显示标注信息,以便于观看者及时了解到需要特别关注的对象和/或该对象的相关信息。
本申请其他实施例中,步骤305在输出第二图像子集和/或第三图像子集的过程中,获得触发事件包括:在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件。
这里,电子设备识别出目标对象并为其添加标注后,可以在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件,进而响应触发事件,显示标注信息。也就是说,电子设备可以在输出第二图像子集和/或第三图像子集的过程中,基于当前的输出内容对目标对象的标注信息的显示进行灵活控制。
例如,电子设备有序的输出一部影视剧的图像集合的过程中,处理第一图像子集和第二图像子集的至少部分确定6个目标对象,并且在第二图像子集和/或第三图像子集中为这6个目标对象添加了标注信息。进一步地,在输出第二图像子集的至少部分的过程中确定输出的图像子集中6个目标对象中的第一对象、第三对象、第四对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件,进而响应触发事件在输出第二图像子集的其他部分时显示这3个目标对象的标注信息。接着,在输出至第三图像子集的至少部分的过程中确定输出的图像子集中6个目标对象中的第五目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件,进而响应触发事件在输出第三图像子集的其他部分时显示这1个目标对象的标注信息。如此,在需要特别关注的对象中根据实际需求灵活的显示不同子集中最需要关注的对象,实现智能化提示。
本申请其他实施例中,步骤306基于触发事件,显示标注信息包括:基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。
这里,电子设备在输出第二图像子集和/或第三图像子集的过程中,可以灵活控制标注信息的显示方式。
例如,电子设备在输出第二图像子集和/或第三图像子集的过程中,获得用于显示标注信息的触发事件;示例性的,触发事件可以是操作对象对电子设备输出图像集合的显示屏幕的触控事件;进而,电子设备基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。如此,电子设备可以基于操作对象的操作暂停输出当前的图像子集,并且在当前的暂停界面上显示目标对象的标注信息,以便于操作对象详细了解该目标对象的标注信息。
本申请其他实施例中,电子设备还可以结合当前的输出内容灵活控制目标对象的标注信息的显示效果。这里,电子设备在执行上述305在输出第二图像子集和/或第三图像子集的过程中,获得触发事件时,执行如下步骤:在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件。并且电子设备在执行上述306基于触发事件,显示标注信息时,执行如下步骤:基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。
示例性的,电子设备有序的输出一部影视剧的图像集合的过程中,处理第一图像子集和第二图像子集的至少部分确定6个目标对象,并且在第二图像子集和/或第三图像子集中为这6个目标对象添加了标注信息。假设电子设备在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中6个目标对象中第一对象、第三对象、第四对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件,基于触发事件,在输出至包括第一对象、第三对象和/或第四对象的图像时,暂停输出第二图像子集和/或第三图像子集,并基于第一对象、第三对象、第四对象在各自当前界面中所处的位置显示标注信息。需要说明的是,对于6个目标对象中的第二对象、第五对象和第六对象,可以在输出第二图像子集和/或第三图像子集的过程中,在包括第一对象、第三对象和/或第四对象的图像中显示标注信息。如此,实现对不同目标对象的不同提示效果。
本申请的实施例提供一种信息处理方法,应用于电子设备,参照图4所示,该方法包括以下步骤:
步骤401、有序的输出图像集合。
其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像。
步骤402、处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象。
其中,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象。
步骤403、确定目标对象对应的标注信息。
步骤404、在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息。
步骤405、响应于针对标识信息的信息展开操作,生成触发事件。
步骤406、基于触发事件,在界面中显示标注信息。
其中,标识信息用于标识目标对象存在标注信息,或者,标识信息的信息内容少于标注信息的信息内容。
一种场景中,电子设备在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息,标识信息用于标识目标对象存在标注信息。例如,输出图像子集的界面中在目标对象的位置处显示有特定形状的小标记,如一个三角形,当操作对象点击该三角形,电子设备响应于针对三角形的信息展开操作,生成触发事件,并基于触发事件,在当前界面中显示标注信息。示例性的,点击某一人物对应的三角形后,电子设备在当前界面中显示该人物的简要信息或详细信息;其中,简要信息包括人物名称,详细信息包括人物的参演作品介绍和/或该人物在本剧中的特殊经历介绍。
另一种场景中,电子设备在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息,标识信息的信息内容少于标注信息的信息内容。例如,输出图像子集的界面中在目标对象的位置处显示有标识信息如该人物的人名,当操作对象点击该人名,电子设备响应于针对人名的信息展开操作,生成触发事件,并基于触发事件,在当前界面中显示标注信息。示例性的,点击该人物对应的人名后,电子设备在当前界面中显示该人物的标注信息即详细信息;其中,详细信息包括人物的参演作品介绍和/或该人物在本剧中的特殊经历介绍。或者,详细信息包括该人物的网页链接,示例性的,该网页链接指向包括该人物的生平简介以及参演作品的详细介绍。
又一场景中,电子设备还可以在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息,标识信息用于标识目标对象存在标注信息。进而,电子设备在输出第二图像子集和/或第三图像子集的过程中,基于输出的图像子集中目标对象的出现频次、出现时长和/或出现位置,响应于针对标识信息的信息展开操作,生成触发事件,并基于触发事件,在界面中显示标注信息。需要说明的是,电子设备确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,则后续基于触发事件,在界面中显示标注信息时,显示的标注信息为上文中的详细信息。电子设备确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置不符合条件,则后续基于触发事件,在界面中显示标注信息时,显示的标注信息为上文中的简要信息如人名。如此,针对不同目标对象匹配特定的标准信息显示效果。
本申请的实施例提供一种信息处理装置,该信息处理装置可以应用于图1、3、4对应的实施例提供的一种信息处理方法中,参照图5所示,该信息处理装置5包括:
输出单元51,用于有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;
处理单元52,用于处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;
处理单元52,还用于确定目标对象对应的标注信息;
处理单元52,还用于在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。
在本申请的其他实施例中,目标对象是第一图像子集和第二图像子集中的相同对象,第一图像子集中的目标对象为参考对象,目标对象是在第一图像子集和第二图像子集中改变满足第一差异条件的显示对象。
在本申请的其他实施例中,目标对象是第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,参考对象包括其他候选对象。
在本申请的其他实施例中,第二差异条件包括目标对象从第一图像子集到第二图像子集的行为变化,与参考对象从第一图像子集到第二图像子集的行为变化不同。
在本申请的其他实施例中,差异条件包括行为特征有差异的条件。
在本申请的其他实施例中,行为特征有差异的条件包括:
目标对象对第二图像子集中的目标物品执行目标操作的条件。
在本申请的其他实施例中,输出单元51,还用于在输出第二图像子集和/或第三图像子集的过程中,获得触发事件;触发事件用于显示标注信息;
基于触发事件,显示标注信息。
在本申请的其他实施例中,输出单元51,还用于在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息;
处理单元52,还用于响应于针对标识信息的信息展开操作,生成触发事件;
输出单元51,还用于基于触发事件,在界面中显示标注信息,其中,标识信息用于标识目标对象存在标注信息,或者,标识信息的信息内容少于标注信息的信息内容。
在本申请的其他实施例中,处理单元52,还用于在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件;
输出单元51,还用于基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。
需要说明的是,本实施例中各单元所执行的步骤的具体实现过程,可以参照图1、3、4对应的实施例提供的信息处理方法中的实现过程,此处不再赘述。
本申请的实施例提供一种电子设备,该电子设备可以应用于图1、3、4对应的实施例提供的一种信息处理方法中,参照图6所示,该电子设备6(图6中的电子设备6与图5中的信息处理装置5对应)包括:处理器61、存储器62和通信总线63,其中:
通信总线63用于实现处理器61和存储器62之间的通信连接。
处理器61用于执行存储器62中存储的信息处理程序,以实现以下步骤:
有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;
处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;
确定目标对象对应的标注信息;
在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。
在本申请的其他实施例中,目标对象是第一图像子集和第二图像子集中的相同对象,第一图像子集中的目标对象为参考对象,目标对象是在第一图像子集和第二图像子集中改变满足第一差异条件的显示对象。
在本申请的其他实施例中,目标对象是第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,参考对象包括其他候选对象。
在本申请的其他实施例中,第二差异条件包括目标对象从第一图像子集到第二图像子集的行为变化,与参考对象从第一图像子集到第二图像子集的行为变化不同。
在本申请的其他实施例中,差异条件包括行为特征有差异的条件。
在本申请的其他实施例中,行为特征有差异的条件包括:
目标对象对第二图像子集中的目标物品执行目标操作的条件。
在本申请的其他实施例中,处理器61用于执行存储器62中存储的信息处理程序,以实现以下步骤:
在输出第二图像子集和/或第三图像子集的过程中,获得触发事件;触发事件用于显示标注信息;
基于触发事件,显示标注信息。
在本申请的其他实施例中,处理器61用于执行存储器62中存储的信息处理程序,以实现以下步骤:
在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息;
响应于针对标识信息的信息展开操作,生成触发事件;
相应的,基于触发事件,显示标注信息包括:
基于触发事件,在界面中显示标注信息,其中,标识信息用于标识目标对象存在标注信息,或者,标识信息的信息内容少于标注信息的信息内容。
在本申请的其他实施例中,处理器61用于执行存储器62中存储的信息处理程序,以实现以下步骤:
在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件;和/或
相应的,基于触发事件,显示标注信息,包括:
基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。
作为示例,处理器可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
需要说明的是,本实施例中处理器所执行的步骤的具体实现过程,可以参照图1、3、4对应的实施例提供的信息处理方法中的实现过程,此处不再赘述。
本申请的实施例提供一种计算机可读存储介质,该计算机可读存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现以下步骤:
有序的输出图像集合,其中,图像集合至少包括有序的第一图像子集,第二图像子集和第三图像子集,其中,图像子集至少包括一帧图像;
处理第一图像子集和第二图像子集的至少部分,确定第二图像子集中的目标对象,目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;
确定目标对象对应的标注信息;
在第二图像子集和/或第三图像子集中的目标对象中添加标注信息。
在本申请的其他实施例中,目标对象是第一图像子集和第二图像子集中的相同对象,第一图像子集中的目标对象为参考对象,目标对象是在第一图像子集和第二图像子集中改变满足第一差异条件的显示对象。
在本申请的其他实施例中,目标对象是第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,参考对象包括其他候选对象。
在本申请的其他实施例中,第二差异条件包括目标对象从第一图像子集到第二图像子集的行为变化,与参考对象从第一图像子集到第二图像子集的行为变化不同。
在本申请的其他实施例中,差异条件包括行为特征有差异的条件。
在本申请的其他实施例中,行为特征有差异的条件包括:
目标对象对第二图像子集中的目标物品执行目标操作的条件。
在本申请的其他实施例中,该一个或者多个程序可被一个或者多个处理器执行,还可以实现以下步骤:
在输出第二图像子集和/或第三图像子集的过程中,获得触发事件;触发事件用于显示标注信息;
基于触发事件,显示标注信息。
在本申请的其他实施例中,该一个或者多个程序可被一个或者多个处理器执行,还可以实现以下步骤:
在输出第二图像子集和/或第三图像子集的界面中显示目标对象对应的标识信息;
响应于针对标识信息的信息展开操作,生成触发事件;
相应的,基于触发事件,显示标注信息包括:
基于触发事件,在界面中显示标注信息,其中,标识信息用于标识目标对象存在标注信息,或者,标识信息的信息内容少于标注信息的信息内容。
在本申请的其他实施例中,该一个或者多个程序可被一个或者多个处理器执行,还可以实现以下步骤:
在输出第二图像子集和/或第三图像子集的过程中,确定输出的图像子集中目标对象的出现频次、出现时长和/或出现位置符合条件,生成触发事件;和/或
相应的,基于触发事件,显示标注信息,包括:
基于触发事件,暂停输出第二图像子集和/或第三图像子集,并基于目标对象在当前界面中所处的位置显示标注信息。
需要说明的是,本实施例中各单元所执行的步骤的具体实现过程,可以参照图1、3、4对应的实施例提供的信息处理方法中的实现过程,此处不再赘述。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。

Claims (10)

1.一种信息处理方法,所述方法包括:
有序的输出图像集合,其中,所述图像集合至少包括有序的已输出的第一图像子集,当前输出的第二图像子集和后续将要输出的第三图像子集,其中,图像子集至少包括一帧图像;
处理所述第一图像子集和所述第二图像子集的至少部分,确定所述第二图像子集中的目标对象,所述目标对象是所述第二图像子集中和参考对象之间满足差异条件的显示对象;所述参考对象是所述第一图像子集或所述第二图像子集中的显示对象;
确定所述目标对象对应的标注信息;
在所述第二图像子集和/或所述第三图像子集中的所述目标对象中添加所述标注信息。
2.根据权利要求1所述的方法,所述目标对象是所述第一图像子集和所述第二图像子集中的相同对象,所述第一图像子集中的所述目标对象为所述参考对象,所述目标对象是在所述第一图像子集和所述第二图像子集中改变满足第一差异条件的显示对象。
3.根据权利要求1所述的方法,所述目标对象是所述第二图像子集中的候选对象中,和其他候选对象满足第二差异条件的显示对象,所述参考对象包括所述其他候选对象。
4.根据权利要求3所述的方法,所述第二差异条件包括所述目标对象从所述第一图像子集到所述第二图像子集的行为变化,与所述参考对象从所述第一图像子集到所述第二图像子集的行为变化不同。
5.根据权利要求1所述的方法,所述差异条件包括行为特征有差异的条件。
6.根据权利要求5所述的方法,所述行为特征有差异的条件包括:
所述目标对象对所述第二图像子集中的目标物品执行目标操作的条件。
7.根据权利要求1所述的方法,所述在第二图像子集和/或第三图像子集中的目标对象中添加所述标注信息之后,所述方法还包括:
在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件;所述触发事件用于显示所述标注信息;
基于所述触发事件,显示所述标注信息。
8.根据权利要求7所述的方法,所述在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件包括:
在输出所述第二图像子集和/或所述第三图像子集的界面中显示所述目标对象对应的标识信息;
响应于针对所述标识信息的信息展开操作,生成所述触发事件;
相应的,所述基于所述触发事件,显示所述标注信息包括:
基于所述触发事件,在所述界面中显示所述标注信息,其中,所述标识信息用于标识所述目标对象存在标注信息,或者,所述标识信息的信息内容少于所述标注信息的信息内容。
9.根据权利要求7所述的方法,在输出所述第二图像子集和/或所述第三图像子集的过程中,获得触发事件包括:
在输出所述第二图像子集和/或所述第三图像子集的过程中,确定输出的图像子集中所述目标对象的出现频次、出现时长和/或出现位置符合条件,生成所述触发事件;和/或
相应的,所述基于所述触发事件,显示所述标注信息,包括:
基于所述触发事件,暂停输出所述第二图像子集和/或所述第三图像子集,并基于所述目标对象在当前界面中所处的位置显示所述标注信息。
10.一种信息处理装置,包括:
输出单元,用于有序的输出图像集合,其中,所述图像集合至少包括有序的已输出的第一图像子集,当前输出的第二图像子集和后续将要输出的第三图像子集,其中,图像子集至少包括一帧图像;
处理单元,用于处理所述第一图像子集和所述第二图像子集的至少部分,确定所述第二图像子集中的目标对象,所述目标对象是第二图像子集中和参考对象之间满足差异条件的显示对象;所述参考对象是所述第一图像子集或所述第二图像子集中的显示对象;
所述处理单元,还用于确定所述目标对象对应的标注信息;
所述处理单元,还用于在第二图像子集和/或第三图像子集中的目标对象中添加所述标注信息。
CN202010607462.5A 2020-06-29 2020-06-29 一种信息处理方法和信息处理装置 Active CN111800651B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010607462.5A CN111800651B (zh) 2020-06-29 2020-06-29 一种信息处理方法和信息处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010607462.5A CN111800651B (zh) 2020-06-29 2020-06-29 一种信息处理方法和信息处理装置

Publications (2)

Publication Number Publication Date
CN111800651A CN111800651A (zh) 2020-10-20
CN111800651B true CN111800651B (zh) 2023-03-24

Family

ID=72804028

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010607462.5A Active CN111800651B (zh) 2020-06-29 2020-06-29 一种信息处理方法和信息处理装置

Country Status (1)

Country Link
CN (1) CN111800651B (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109274999A (zh) * 2018-10-08 2019-01-25 腾讯科技(深圳)有限公司 一种视频播放控制方法、装置、设备及介质
US11475667B2 (en) * 2018-10-12 2022-10-18 Monitoreal Limited System, device and method for object detection in video feeds
CN110210328B (zh) * 2019-05-13 2020-08-07 北京三快在线科技有限公司 在图像序列中标注物体的方法、装置及电子设备
CN110458796A (zh) * 2019-06-10 2019-11-15 腾讯科技(深圳)有限公司 一种图像标注方法、装置和存储介质
CN110991260B (zh) * 2019-11-12 2024-01-19 苏州智加科技有限公司 场景标注方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN111800651A (zh) 2020-10-20

Similar Documents

Publication Publication Date Title
CN108090497B (zh) 视频分类方法、装置、存储介质及电子设备
TW201826805A (zh) 播放處理方法、裝置和設備
US9247199B2 (en) Method of providing information-of-users' interest when video call is made, and electronic apparatus thereof
CN110119700B (zh) 虚拟形象控制方法、虚拟形象控制装置和电子设备
US11330313B2 (en) Crowd rating media content based on micro-expressions of viewers
CN112104915B (zh) 一种视频数据处理方法、装置及存储介质
CN112199016B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
US20140082209A1 (en) Personalized streaming internet video
CN109286836B (zh) 多媒体数据处理方法、装置及智能终端、存储介质
CN111757175A (zh) 视频处理方法及装置
CN111694983B (zh) 信息显示方法、装置、电子设备以及存储介质
TW201421994A (zh) 視頻內容搜索系統及方法
CN113596555B (zh) 视频播放方法、装置及电子设备
US20170013309A1 (en) System and method for product placement
CN114040248A (zh) 一种视频处理方法、装置和电子设备
CN112565909B (zh) 视频播放方法、装置、电子设备及可读存储介质
CN103530301A (zh) 虚拟社群建立系统及方法
CN111800651B (zh) 一种信息处理方法和信息处理装置
CN108876866B (zh) 一种媒体数据处理方法、装置及存储介质
CN113271494B (zh) 视频帧处理方法、装置和电子设备
CN111918112B (zh) 一种视频优化的方法、装置、存储介质及终端
CN114666643A (zh) 一种信息显示方法、装置、电子设备及存储介质
CN110730382B (zh) 一种视频交互方法、装置、终端及存储介质
CN114025188A (zh) 直播广告展示方法、系统、装置、终端及可读存储介质
CN112860941A (zh) 一种封面推荐方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant