CN115878838A - 基于视频的信息展示方法、装置、电子设备及存储介质 - Google Patents

基于视频的信息展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115878838A
CN115878838A CN202111137817.XA CN202111137817A CN115878838A CN 115878838 A CN115878838 A CN 115878838A CN 202111137817 A CN202111137817 A CN 202111137817A CN 115878838 A CN115878838 A CN 115878838A
Authority
CN
China
Prior art keywords
resource information
image frame
page
video
displaying
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111137817.XA
Other languages
English (en)
Inventor
黄樱
张梦琳
徐亮城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Youzhuju Network Technology Co Ltd
Original Assignee
Beijing Youzhuju Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Youzhuju Network Technology Co Ltd filed Critical Beijing Youzhuju Network Technology Co Ltd
Priority to CN202111137817.XA priority Critical patent/CN115878838A/zh
Priority to PCT/CN2022/119629 priority patent/WO2023045867A1/zh
Publication of CN115878838A publication Critical patent/CN115878838A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/732—Query formulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/735—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/146—Aligning or centring of the image pick-up or image-field
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/19—Recognition using electronic means

Abstract

一种基于视频的信息展示方法、装置、电子设备和存储介质，该基于视频的信息展示方法包括：在目标视频播放过程中，在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息，目标视频包括M个图像帧，第一资源信息预先基于N个图像帧中的目标对象匹配得到；响应于在目标视频播放过程中触发第一事件，基于触发第一事件过程中播放页面所播放的至少一个当前图像帧，获取与当前图像帧中的目标对象对应的第二资源信息；以及展示第二资源信息，N为大于0的整数，M为大于或等于N的整数。该基于视频的信息展示方法可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。

Description

基于视频的信息展示方法、装置、电子设备及存储介质
技术领域
本公开的实施例涉及一种基于视频的信息展示方法、装置、电子设备及存储介质。
背景技术
为了方便用户查找图片中的内容，一些应用提供了识图搜索功能，用户可以将图片上传至应用，应用可以对图片进行识别并根据识别结果搜索得到相关内容，并将相关内容提供给用户。若用户在观看视频的过程中想要搜索视频中的内容，需要截取视频的图像，并将截取的图像上传至识图程序进行识别和搜索。或者，应用在展示视频或图片的过程中，可以根据视频或图片中出现的例如物品等内容，检索、推荐类似的内容。
发明内容
针对视频等动态媒体资源的识图搜索功能较为单一并且操作较为繁琐。针对上述问题，本公开至少一个实施例提供一种基于视频的信息展示方法、装置、电子设备及存储介质，可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。
本公开至少一个实施例提供一种基于视频的信息展示方法，包括：在目标视频播放过程中，在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，所述目标视频包括M个图像帧，所述第一资源信息预先基于N个所述图像帧中的目标对象匹配得到；响应于在所述目标视频播放过程中触发第一事件，基于触发所述第一事件过程中所述播放页面所播放的至少一个当前图像帧，获取与所述当前图像帧中的目标对象对应的第二资源信息；以及展示所述第二资源信息，N为大于0的整数，M为大于或等于N的整数。
本公开至少一个实施例还提供一种基于视频的信息展示装置，包括：第一展示单元和第二展示单元，第一展示单元配置为在目标视频播放过程中，在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，所述目标视频包括M个图像帧，所述第一资源信息预先基于N个所述图像帧中的目标对象匹配得到；第二展示单元配置为响应于在所述目标视频播放过程中触发第一事件，基于触发所述第一事件过程中所述播放页面所播放的至少一个当前图像帧，获取与所述当前图像帧中的目标对象对应的第二资源信息，并展示所述第二资源信息，N为大于0的整数，M为大于或等于N的整数。
本公开至少一个实施例还提供一种电子设备，包括：处理器；存储器，包括一个或多个计算机程序模块；其中，所述一个或多个计算机程序模块被存储在所述存储器中并被配置为由所述处理器执行，所述一个或多个计算机程序模块包括用于实现本公开任一实施例所述的基于视频的信息展示方法的指令。
本公开至少一个实施例还提供一种计算机可读存储介质，用于存储非暂时性计算机可读指令，当所述非暂时性计算机可读指令由计算机执行时可以实现本公开任一实施例所述的基于视频的信息展示方法。
本公开至少一个实施例还提供一种计算机程序产品，包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包括用于执行本公开任一实施例所述的基于视频的信息展示方法的程序代码。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同的附图标记表示相同的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
图1为本公开一些实施例提供的一种基于视频的信息展示方法的流程示意图；
图2为本公开一些实施例提供的一种目标视频的播放页面的示意图；
图3为本公开一些实施例提供的另一种目标视频的播放页面的示意图；
图4A为本公开一些实施例提供的另一种目标视频的播放页面的示意图；
图4B为本公开一些实施例提供的另一种目标视频的播放页面的示意图；
图5为本公开一些实施例提供的另一种目标视频的播放页面的示意图；
图6为本公开一些实施例提供的对播放页面进行截图操作后的页面示意图；
图7为本公开一些实施例提供的触发第一事件后的页面示意图；
图8为本公开一些实施例提供的资源页面的示意图；
图9A为本公开一些实施例提供的框选页面的示意图；
图9B为本公开一些实施例提供的另一种资源页面的示意图；
图10A为本公开一些实施例提供的一种进度页面的示意图；
图10B为本公开一些实施例提供的另一种进度页面的示意图
图11为一种可用于实施本公开实施例提供的基于视频的信息展示方法的系统；
图12为本公开一些实施例提供的一种基于视频的信息展示装置的示意框图；
图13为本公开一些实施例提供的一种电子设备的示意框图；
图14为本公开一些实施例提供的另一种电子设备的示意框图；以及
图15为本公开一些实施例提供的一种存储介质的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。“多个”应理解为两个或以上。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
针对视频的内容识别和搜索，一种方式是可以截取视频中的图像，并将截取的图像上传至识图平台(例如应用)进行识别和搜索，但是操作较为繁琐，并且针对视频的识图搜索功能较为单一，用户体验较差。
本公开至少一个实施例提供一种基于视频的信息展示方法、装置、电子设备及存储介质，可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。
下面，将参考附图详细地说明本公开的实施例。
本公开至少一个实施例提供一种基于视频的信息展示方法。该基于视频的信息展示方法包括：在目标视频播放过程中，在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息，目标视频包括M个图像帧，第一资源信息预先基于N个图像帧中的目标对象匹配得到；响应于在目标视频播放过程中触发第一事件，基于触发第一事件过程中播放页面所播放的至少一个当前图像帧，获取与当前图像帧中的目标对象对应的第二资源信息；以及展示第二资源信息，N为大于0的整数，M为大于或等于N的整数。
图1为本公开一些实施例提供的一种基于视频的信息展示方法的流程示意图。如图1所示，在至少一个实施例中，该方法包括如下步骤S110～步骤S130的操作。
步骤S110：在目标视频播放过程中，在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息。
步骤S120：响应于在目标视频播放过程中触发第一事件，基于触发第一事件过程中播放页面所播放的至少一个当前图像帧，获取与当前图像帧中的目标对象对应的第二资源信息。
步骤S130：展示第二资源信息。
例如，本公开实施例的基于视频的信息展示方法可以由终端设备执行，终端设备包括但不限于手机、平板电脑、笔记本电脑等。终端设备可以包括显示装置、处理器、数据收发装置等，终端设备可以通过通信网络与服务器和/或数据库传输数据。
例如，目标视频可以是短视频、长视频、直播视频等视频类媒体资源。目标视频可以由终端设备上传至相应平台(例如应用)，目标视频可以存储于平台的服务器和/或存储器中。上传目标视频的终端设备(例如客户端、用户)与播放目标视频的设备(例如客户端、用户)可以相同或不同，例如，第一用户通过第一终端设备将目标视频上传至平台(例如服务端)后，平台可以相应请求将目标视频推送至第二终端设备进行播放，以供第二终端设备的第二用户观看。
例如，目标对象可以包括物品、人物、动物等出现在视频中的对象，资源信息(例如第一资源信息和第二资源信息)可以是关于目标对象的推荐信息或者说明信息等。在一些示例中，在目标对象为物品(例如商品、展品等)的情况下，资源信息可以是与物品对应的物品推荐信息或者是关于物品的解释说明信息等。在另一些示例中，在目标对象为人物的情况下，资源信息可以是关于物品的解释说明信息。在以下的一些实施例中，以目标对象为物品、资源信息为物品推荐信息为例进行说明，但本公开实施例不以此为限，在应用过程中，可以根据实际需求设定目标对象和资源信息的类型。
例如，在步骤S110中，目标视频包括M个图像帧，第一资源信息预先基于N个图像帧中的目标对象匹配得到，N为大于0的整数，M为大于或等于N的整数。
例如，目标视频被上传至平台的服务器之后，服务器可以针对目标视频中的至少部分图像帧(即N个图像帧)进行识别和搜索操作，识别和搜索操作可以在获得用户授权的情况下执行。例如，部分图像帧可以是目标视频中的某一视频片段，或者可以是目标视频中的若干个关键图像帧，关键图像帧可以是与其前一个图像帧的画面差异超过一定阈值的图像帧，不同图像帧之间的画面差异可以通过不同图像帧中多个对应位置处的像素值的差值来确定。
例如，对图像帧的识别操作可以利用预先训练完成的对象识别模型来执行，对象识别模型可以是神经网络模型、分类树模型或者其他类型的模型。在训练对象识别模型的过程中，可以将对象识别模型训练为能够识别图像帧中的目标对象的类别和特征。例如，图像帧中存在“裙子”这一目标对象，利用对象识别模型可以识别得到目标物品的类型为裙子，而且可以识别得到裙子的颜色、长短、材质、纹理等特征。例如，针对每个图像帧可以识别一个或多个目标对象，若针对每个图像帧需要确定一个目标对象，而该图像帧中又包含多个目标对象的情况下，可以根据每个目标对象的占用面积或者坐标位置等条件确定一个主要的目标对象。
例如，在获得针对N个图像帧的目标对象的识别结果之后，可以基于每个目标对象的识别结果在预定的网络平台中进行搜索操作，得到每个目标对象各自匹配的资源信息，作为第一资源信息。例如，针对某一图像帧的目标对象的识别结果为黄色长裙，则可以根据“黄色”、“长裙”等关键词在预定的购物平台中进行搜索，得到与该目标对象匹配的一个或多个商品信息。在一些示例中，若搜索得到的商品信息超过了第一预定数量(第一预定数量例如为一)，则可以进行筛选操作，从搜索结果中筛选出第一预定数量的商品信息。例如，目标视频包括10个关键图像帧，若针对每个关键图像帧识别得到一个目标对象，则可以得到10个目标对象，若针对每个目标对象搜索一个匹配的资源信息，则可以得到10个资源信息，可以将该10个资源信息作为第一资源信息。为了区分，以下将该第一资源信息中的每个资源信息称为第一子资源信息。
例如，基于步骤S110，可以在播放目标视频之前，预先利用服务器离线获得关于目标视频的第一资源信息。之后，在终端设备播放目标视频的过程中，可以将第一资源信息展示于目标视频的播放页面中，以使用户无需进行额外的搜索操作即可获知目标视频的相关资源信息。
图2为本公开一些实施例提供的一种目标视频的播放页面的示意图。如图2所示，例如，第一资源信息包括与图示的图像帧201对应的商品信息301，在目标视频的播放过程中可以展示该商品信息301，商品信息301可以实现为界面控件。例如，若触发针对该商品信息301的预定操作(例如点击)，可以跳转至与该商品信息301对应的商品详情页面中。
例如，在步骤S120中，若在视频播放过程中触发了第一事件，则可以针对触发第一事件时正在播放的一个当前图像帧进行在线识别搜索操作。例如，终端设备可以获取当前图像帧，并将当前图像帧发送至服务器，由服务器执行针对当前图像帧的识别和搜索操作，针对当前图像帧的识别操作和搜索操作可以参见上述针对N个图像帧的识别操作和搜索操作。针对当前图像帧中的目标对象，可以获取第二预定数量的资源信息(第二预定数量例如为10～500之间的数值)，将该第二预定数量的资源信息作为第二资源信息。为了区分，以下将该第二资源信息中的每个资源信息称为第二子资源信息。服务器获取与当前图像帧中的目标对象匹配的第二资源信息后，可以将第二资源信息发送至相应终端设备。
例如，在步骤S130中，终端设备接收到第二资源信息之后，可以展示该第二资源信息。例如，可以将第二资源信息直接展示于播放页面中，或者可以由播放页面跳转至资源页面中，并在该资源页面中展示第二资源信息。
例如，基于步骤S120和S130，可以在目标视频播放过程中，响应于用户操作对某一或某些图像帧进行在线的识别和搜索操作，基于这一方式，在用户看到感兴趣的目标对象时，可以快速且方便地获取到对应的资源信息。
本公开实施例的基于视频的信息展示方法，可以将离线识别与在线识别相结合，在用户没有触发识别和搜索操作的情况下，为用户展示离线识别和搜索的资源信息，在用户触发针对感兴趣的图像帧的搜索操作之后，可以在线获取与用户感兴趣的图像帧匹配的资源信息。可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。
例如，如图2所示，播放页面包括第一展示区域(例如图2中的标号301所指向的方框区域)，第一资源信息可以展示于第一展示区域。第一资源信息包括与N个图像帧中的目标对象分别对应的N个第一子资源信息。例如，针对每个关键图像帧中的目标对象均可以匹配得到一个子资源信息。
例如，步骤S110中的在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息包括：在播放页面分别展示N个图像帧时，在第一展示区域分别展示N个第一子资源信息。
图3为本公开一些实施例提供的另一种目标视频的播放页面的示意图。如图2和图3所示，第一资源信息可以包括与图2所示的图像帧201对应的商品信息301以及与图3所示的图像帧202对应的商品信息302。当播放页面播放至图像帧201时可以在第一展示区域中展示商品信息301，当播放页面播放至图像帧202时可以在第一展示区域中展示商品信息302。也就是说，在播放页面播放到N个图像帧中的每个图像帧时，在播放页面展示与该图像帧匹配的第一子资源信息，随着播放的进度发生变化，展示的第一子资源信息也会随之发生变化，基于这一方式，可以将资源信息与播放页面中的图像帧相对应，可以使界面更为简洁并且可以便于用户查看感兴趣的第一子资源信息。
例如，N个图像帧包括第i个图像帧和第j个图像帧，第一资源信息包括与第i个图像帧对应的第i个第一子资源信息和与第j个图像帧对应的第j个第一子资源信息，i为大于0的整数，j为大于i且小于M的整数。例如，步骤S110中的在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息包括：在播放页面展示第i个图像帧以及第i个图像帧与第j个图像帧之间的图像帧的过程中，在第一展示区域展示第i个第一子资源信息。
例如，第i个图像帧为图2所示的图像帧201，第j个图像帧为图3所示的图像帧202，第一资源信息包括与图2所示的图像帧201对应的商品信息301以及与图3所示的图像帧202对应的商品信息302。在播放页面播放至图像帧201时，在第一展示区域中展示商品信息301，并且在播放至图像帧202之前的一段时间内，第一展示区域中可以持续展示商品信息301，直至播放页面播放至图像帧202时，可以将第一展示区域中的商品信息由商品信息301替换为商品信息302。也就是说，在播放两个相邻的关键图像帧之间的图像帧的过程中，可以持续展示该两个相邻关键图像帧中的前一个关键图像帧对应的第一子资源信息，直至播放至后一个关键图像帧。由于两个相邻关键图像帧之间的中间图像帧与前一个关键图像帧的画面差异较小，有较大概率与前一个关键图像帧对应的是相同的第一子资源信息，因此可以在播放中间图像帧期间持续展示前一个第一子资源信息，基本保证在整个目标视频的播放过程中，使播放画面与第一子资源信息相匹配。
例如，在另一些示例中，可以在整个目标视频播放期间，将第一资源信息包含的全部第一子资源信息均展示于播放页面中，用户可以从中选择感兴趣的第一子资源信息进行查看。
例如，M个图像帧还包括位于第i个图像帧和第j个图像帧之间的第p个图像帧，p为大于i且小于或等于j的整数。信息展示方法还可以包括：在播放页面展示第i个图像帧以及第i个图像帧与第p个图像帧之间的图像帧的过程中，在第一展示区域显示随着播放页面展示的图像帧发生变化而对应变化的第一扫描图形。
图4A为本公开一些实施例提供的另一种目标视频的播放页面的示意图，图4B为本公开一些实施例提供的另一种目标视频的播放页面的示意图。
如图2、3、4A和4B所示，沿用上述示例，例如，第i个图像帧为图2和图4A所示的图像帧201，第j个图像帧为图3所示的图像帧202，第p个图像帧为图4B所示的图像帧203，图像帧203位于图像帧201和图像帧202之间。在播放页面播放至第图像帧201时，可以在第一展示区域中出现第一扫描图形401，以及在由图像帧201播放至图像帧203的过程中，在第一展示区域中持续展示第一扫描图形401，并且在此期间随着播放画面的不断变化，第一扫描图形401也随之发生变化，也可以理解为，第一扫描图形401随着时间的推进而发生变化。例如，随着播放页面展示的图像帧发生变化，第一扫描图形至少部分在第一展示区域中沿着预定方向移动，预定方向可以是播放页面的纵向方向(例如图4A和图4B中的上下方向)，以呈现扫描的效果。
例如，在由图像帧203播放至图像帧202的过程中可以不显示第一扫描图形401，然后，当播放至下一个关键图像帧(即图像帧202)时播放页面会出现新的第一子资源信息，此时可以再次出现第一扫描图像401，并使第一扫描图像401移动扫描一段时间后消失，直至播放至再下一个关键图像帧时再次出现第一扫描图像401，依此循环，直至目标视频播放完毕。也就是说，可以在播放页面中每出现一个新的第一子资源信息时同时出现第一扫描图形并使第一扫描图形移动扫描一段时间，基于这一方式，可以利用第一扫描图形示意正在出现新的第一子资源信息，以吸引用户注意力，提示用户查看新出现的第一子资源信息。
例如，第一扫描图形401可以呈直线形、曲线形、框形、点线状等，可以根据实际需求具体设定，本公开实施例对此不做限制。第一扫描图形401可以沿上下方向移动，或者可以沿左右方向移动，或者可以沿斜向方向移动。第一扫描图形401除了可以采用移动的变化方式外，在另一些示例中，第一扫描图形401的变化方式还可以是转动、闪烁、变形等方式。
图5为本公开一些实施例提供的另一种目标视频的播放页面的示意图。如图5所示，例如，本公开实施例的基于视频的信息展示方法还可以包括：在目标视频播放过程中，在目标视频的播放页面展示第一控件501。在一些示例中，步骤S120中的在目标视频播放过程中触发第一事件包括：在目标视频播放过程中，触发针对第一控件501的第一预定操作。
例如，第一预定操作可以是点击操作。在目标视频播放过程中，在播放页面中展示第一控件501，若用户对某一个图像帧中的目标对象感兴趣，则可以点击第一控件501，即可触发针对该图像帧的在线识别和搜索操作。在另一些示例中，第一预定操作也可以是双击、滑动等操作，本公开实施例对第一预定操作的具体形式不做限制。
例如，在另一些示例中，步骤S120中的在目标视频播放过程中触发第一事件可以包括：响应于第一事件，触发针对目标视频的播放暂停操作。
例如，第一事件可以是能够触发播放暂停的事件，例如可以通过点击暂停键触发播放暂停或者通过点击播放页面的某一区域可以触发播放暂停。在目标视频播放过程中，若用户对某一个图像帧中的目标对象感兴趣，则可以使目标视频暂停播放，即可触发针对该图像帧的在线识别和搜索操作。
例如，在另一些示例中，步骤S120中的在目标视频播放过程中触发第一事件可以包括：响应于第一事件，触发针对目标视频的播放页面的截图操作。
例如，第一事件可以是能够触发截图的事件，例如可以通过按下特定按键触发截图。在目标视频播放过程中，若用户对某一个图像帧中的目标对象感兴趣，可以执行截图操作，即可触发针对该图像帧的在线识别和搜索操作。
例如，上述三种触发在线识别和搜索操作的方式(第一控件、暂停和截图)均操作简便且易于实施，并且可以使触发在线识别和搜索操作的方式更为多样化，以适应不同用户的不同操作习惯，提升用户体验。
图6为本公开一些实施例提供的对播放页面进行截图操作后的页面示意图。如图6所示，例如，本公开实施例的基于视频的信息展示方法还可以包括：响应于针对目标视频的播放页面的截图操作，展示第二控件601和第三控件602，第二控件601配置为触发展示第二资源信息的操作，第三控件602配置为触发将目标视频分享至与第三控件602对应的平台或用户的操作。
例如，在播放页面播放至图像帧201时触发了截图操作，之后可以跳转至分享页面600，分享页面600可以展示有第二控件601和第三控件602。第二控件601可以是关于与图像帧201匹配的第二资源信息的控件，例如，与图像帧201匹配的第二资源信息包括若干个第二子资源信息(例如包括商品信息“裙子”、“包”和“鞋子”)，可以针对每个第二子资源信息显示一个第二控件601，若用户点击任一个第二控件601，则可以跳转至相应第二子资源信息的详情页面。第三控件602可以是平台分享控件，若用户点击任一个平台分享控件，则可以跳转至相应平台执行分享操作。第三控件602还可以是用户分享控件，若用户点击任一个用户分享控件，则可以跳转至与相应用户的分享界面。执行截图操作的目的可能是想要将截图分享，也可能是想要触发针对当前图像帧的识别和搜索操作，在不能确定用户意图的情况下，展示两种控件以供用户选择，可以避免误操作。
图7为本公开一些实施例提供的触发第一事件后的页面示意图。如图7所示，例如，本公开实施例的基于视频的信息展示方法还可以包括：在获得第二资源信息的过程中，在播放页面展示当前图像帧，并在当前图像帧上叠加展示动态的第二扫描图形。动态的第二扫描图形可以包括沿预定方向移动的第一子扫描图形701和/或在当前图像帧中的目标对象所在位置移动或闪动的第二子扫描图形702。
例如，在播放至图2所示的图像帧201时触发了第一事件，页面可以停留在图像帧201，并且，在等待服务器执行识别和搜索操作的过程中，可以在页面中显示第一子扫描图形701，第一子扫描图像例如可以沿预定方向(例如图示的上下方向)移动，以呈现扫描的效果。服务器在确定与图像帧201的各个目标对象匹配的第二子资源信息之后，可以将各个第二子资源信息以及各个目标对象的位置信息发送至终端设备，终端设备可以在各个目标对象所在的位置处显示第二子扫描图形702，并且第二子扫描图形702可以以移动或闪动等动态的方式呈现，以示意在这些位置处发现了目标对象并搜索得到了相关的第二子资源信息，随后，可以呈现出各个第二子资源信息。
例如，步骤S130展示第二资源信息可以包括：展示资源页面，并在资源页面中展示第二资源信息。当前图像帧包括E个目标对象，第二资源信息包括分别与E个目标对象对应的多个第二子资源信息。资源页面可以包括第二展示区域和与E个目标对象分别对应的E个第四控件，每个第四控件配置为触发在第二展示区域展示与第四控件对应的第二子资源信息的操作，E为大于0的整数。
图8为本公开一些实施例提供的资源页面的示意图。如图8所示，例如，在播放至图2所示的图像帧201时触发了第一事件，在获得图像帧201的各个目标对象匹配的第二子资源信息后，可以展示资源页面800，资源页面800可以叠加于图像帧201上显示或者可以是由播放页面跳转至一个单独的资源页面800。例如，针对图像帧201识别到两个目标对象：裙子和包，针对每个目标对象可以搜索到多个第二子资源信息。资源页面800可以包括第二展示区域802和与两个目标对象分别对应的两个第四控件801，点击每个控件801可以在第二展示区域802中展示对应的多个第二子资源信息。例如，若点击与目标对象“裙子”对应的第四控件801，则可以在第二展示区域802中展示于目标对象“裙子”匹配的多个第二子资源信息；若点击与目标对象“包”对应的第四控件801，则可以在第二展示区域802中展示于目标对象“包”匹配的多个第二子资源信息。基于这一方式，可以将不同种类的目标对象对应的第二子资源信息分开展示，方便用户查找感兴趣的信息。
例如，本公开实施例的基于视频的信息展示方法还可以包括：响应于针对资源页面的第二预定操作，展示框选页面，框选页面展示有当前图像帧；响应于接收到对框选页面中的当前图像帧的框选操作，基于框选操作所限定的图像区域，获得与图像区域中的目标对象对应的第三资源信息；展示第三资源信息。
图9A为本公开一些实施例提供的框选页面的示意图，图9B为本公开一些实施例提供的另一种资源页面的示意图。
沿用上述示例，若用户在图8所示的第二资源信息中没有发现其感兴趣的物品，可以对资源页面800执行第二预定操作(例如下滑操作)跳转至图9A所示的框选页面900，框选页面中可以展示有第一事件对应的图像帧201。若用户对图像帧201中的某个区域执行了框选的操作，则可以显示选框901并且将选框901对应的图像区域发送至服务器以通知服务器执行针对该图像区域的识别和搜索操作。在终端设备接收到该图像区域对应的目标对象和第三资源信息后，可以展示如图9B所示的资源页面900，资源页面中可以增加新的第四控件903，新增加的第四控件903与选框901中的目标对象相对应，并且在第二展示区域902中可以展示第三资源信息中的多个第三子资源信息。基于这一方式，在没有自动识别出用户感兴趣的目标对象的情况下，可以由用户手动框选感兴趣的区域。
例如，本公开实施例的基于视频的信息展示方法还可以包括：响应于获得与当前图像帧中的目标对象对应的第二资源信息的操作执行失败或者从触发第一事件开始的预定时长内没有获得与当前图像帧中的目标对象对应的第二资源信息，展示框选页面，框选页面展示有当前图像帧；响应于接收到对框选页面中的当前图像帧的框选操作，基于框选操作所限定的图像区域，获得与图像区域中的目标对象对应的第三资源信息；展示第三资源信息。
例如，若在触发针对当前图像帧的第一事件后，收到服务器反馈第二资源信息结果为空(即没有识别出当前图像帧中的目标对象或者没有搜索到与目标对象匹配的第二资源信息)或者较长时间内没有收到服务器针对第二资源信息的反馈信息，则可以展示图9A所示的框选页面900，由用户手动框选感兴趣的区域。基于这一方式，通过手动框选图像区域，可以使识别范围缩小到更精确的范围，一定程度上能够加快识别速度，提高识别准确度。
例如，本公开实施例的基于视频的信息展示方法还可以包括：响应于针对资源页面的第三预定操作，展示进度页面，进度页面包括进度条控件和图像展示区域，图像展示区域展示有当前图像帧；响应于针对进度条控件的第四预定操作，将图像展示区域由展示当前图像帧切换为展示与第四预定操作对应的目标图像帧；获得与目标图像帧中的目标对象对应的第四资源信息；以及展示第四资源信息。
图10A为本公开一些实施例提供的一种进度页面的示意图，图10B为本公开一些实施例提供的另一种进度页面的示意图。
例如，沿用上述示例，若用户在浏览图8所示的与图像帧201对应的第二资源信息之后，想要查看其它图像帧对应的资源信息，可以对资源页面800执行第三预定操作(例如下滑操作)跳转至图10A所示的进度页面1000，进度页面1000包括进度条控件1001和图像展示区域1002。例如通过对进度条执行滑动等操作，可以改变进度条的进度值，并且可以使图像展示区域1002切换至与进度值对应的图像帧，例如通过调节进度后使图像展示区域1002切换为了图像帧202，则可以触发针对图像帧202的识别和搜索操作，获得与图像帧202对应的目标对象和第四资源信息，然后可以展示如图8所示的资源页面800，并在资源页面800中展示第四资源信息。基于这一方式，用户浏览完一个图像帧的资源信息后，无需退回到目标视频的播放页面，仅需拉动进度条即可触发针对另一图像帧的识别和搜索操作，简化了操作程序。
需要说明的是，本公开的实施例中，基于视频的信息展示方法的各个步骤的执行顺序不受限制，虽然上文以特定顺序描述了各个步骤的执行过程，但这并不构成对本公开实施例的限制。该基于视频的信息展示方法中的各个步骤可以串行执行或并行执行，这可以根据实际需求而定。该基于视频的信息展示方法还可以包括更多或更少的步骤，例如，为了达到更好的展示效果而增加一些预处理步骤，或者将一些中间过程的数据存储并用于后续处理和计算，以省略一些相似的步骤。
图11为一种可用于实施本公开实施例提供的基于视频的信息展示方法的系统。如图11所示，该系统1100可以包括一个或多个用户终端(即终端设备)1111、网络1112、服务器1113以及数据库1114。例如，该系统1110可以用于实施本公开任一实施例提供的基于视频的信息展示方法。
用户终端1111例如为电脑1111-1。可以理解的是，用户终端1111可以是能够执行数据处理的任何其他类型的电子设备，其可以包括但不限于台式电脑、笔记本电脑、平板电脑、工作站等。用户终端1111也可以是设置有电子设备的任何装备。本公开的实施例对于用户终端的硬件配置或软件配置(例如操作系统的类型(例如Windows、MacOS、安卓、鸿蒙等)或版本)等不作限制。
用户可以对安装在用户终端1111上的应用程序或在用户终端1111上登录的网站进行操作，应用程序或网站通过网络1112将图像帧和请求等数据传输给服务器1113，用户终端1111还可以通过网络1112接收服务器1113传输的数据。
例如，用户终端1111安装有具有视频播放功能的软件，用户在用户终端1111上利用软件的视频播放功能播放目标视频。用户终端1111通过运行代码的方式执行本公开实施例提供的基于视频的信息展示方法。
网络1112可以是单个网络，或至少两个不同网络的组合，这些网络可以是无线通信网络、有线通信网络等。例如，网络1112可以包括但不限于局域网、广域网、公用网络、专用网络等中的一种或几种的组合。
服务器1113可以是一个单独的服务器，或一个服务器群组，或云服务器，服务器群组内的各个服务器通过有线的或无线的网络进行连接。一个服务器群组可以是集中式的，例如数据中心，也可以是分布式的。服务器1113可以是本地的或远程的。
数据库1114可以泛指具有存储功能的设备。数据库1114主要用于存储用户终端1111和服务器1113在工作中所利用、产生和输出的各种数据，可以是各种类型的数据库，例如关系型数据库或非关系型数据库等。数据库1114可以是本地的或远程的。数据库1114可以包括相应的操作软件以及各种存储器，例如随机存取存储器(Random Access Memory，RAM)、只读存储器(Read Only Memory，ROM)等。以上提及的存储设备只是列举了一些例子，该系统1110可以使用的存储设备并不局限于此。
数据库1114可以经由网络1112与服务器1113或其一部分相互连接或通信，或直接与服务器1113相互连接或通信，或是上述两种方式的结合。
在一些示例中，数据库1114可以是独立的设备。在另一些示例中，数据库1114也可以集成在用户终端1111和服务器1113中的至少一个中。例如，数据库1114可以设置在用户终端1111上，也可以设置在服务器1113上。又例如，数据库1114也可以是分布式的，其一部分设置在用户终端1111上，另一部分设置在服务器1113上。
例如，目标视频和第一资源信息等可以部署在数据库1114上。当终端设备需要播放目标视频时，用户终端1111通过网络1112访问数据库1114，并通过网络1112获取数据库1114中存储的目标视频和第一资源信息。本公开的实施例对于数据库的类型不做限制，例如可以为关系型数据库或非关系型数据库等。
本公开至少一个实施例还提供一种基于视频的信息展示装置，该装置可以将离线识别与在线识别相结合，在用户没有触发识别操作的情况下，为用户展示离线识别和搜索资源信息，在用户触发针对感兴趣的图像帧的搜索操作之后，可以在线获取与用户感兴趣的图像帧匹配的资源信息。可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。
图12为本公开一些实施例提供的一种基于视频的信息展示装置的示意框图。如图12所示，该基于视频的信息展示装置1200包括第一展示单元1210和第二展示单元1220。例如，该基于视频的信息展示装置1200可以应用于用户终端中，也可以应用于任意的需要实现视频播放和识别搜索功能的设备或系统中，本公开的实施例对此不作限制。
第一展示单元1210配置为在目标视频播放过程中，在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息，目标视频包括M个图像帧，第一资源信息预先基于N个图像帧中的目标对象匹配得到。例如，第一展示单元1210可以执行如图1所示的基于视频的信息展示方法的步骤S110。
第二展示单元1220配置为响应于在目标视频播放过程中触发第一事件，基于触发第一事件过程中播放页面所播放的至少一个当前图像帧，获取与当前图像帧中的目标对象对应的第二资源信息，并展示第二资源信息，N为大于0的整数，M为大于或等于N的整数。例如，第二展示单元1220可以执行如图1所示的基于视频的信息展示方法的步骤S120和S130。
例如，第一展示单元1210和第二展示单元1220可以为硬件、软件、固件以及它们的任意可行的组合。例如，第一展示单元1210和第二展示单元1220可以为专用或通用的电路、芯片或装置等，也可以为处理器和存储器的结合。关于第一展示单元1210和第二展示单元1220的具体实现形式，本公开的实施例对此不作限制。
需要说明的是，本公开的实施例中，基于视频的信息展示装置1200的各个单元与前述的基于视频的信息展示方法的各个步骤对应，关于该基于视频的信息展示装置1200的具体功能可以参考上文中基于视频的信息展示方法的相关描述，此处不再赘述。图12所示的基于视频的信息展示装置1200的组件和结构只是示例性的，而非限制性的，根据需要，该基于视频的信息展示装置1200还可以包括其他组件和结构。
例如，在一些示例中，播放页面包括第一展示区域，第一资源信息展示于第一展示区域；第一资源信息包括与N个图像帧中的目标对象分别对应的N个第一子资源信息。第一展示单元1210可以进一步配置为：在播放页面分别展示N个图像帧时，在第一展示区域分别展示N个第一子资源信息。
例如，在一些示例中，N个图像帧包括第i个图像帧和第j个图像帧，第一资源信息包括与第i个图像帧对应的第i个第一子资源信息和与第j个图像帧对应的第j个第一子资源信息。第一展示单元1210可以进一步配置为：在播放页面展示第i个图像帧以及第i个图像帧与第j个图像帧之间的图像帧的过程中，在第一展示区域展示第i个第一子资源信息，i为大于0的整数，j为大于i的整数。
例如，在一些示例中，M个图像帧还包括位于第i个图像帧和第j个图像帧之间的第p个图像帧。基于视频的信息展示装置还可以包括第一图像单元，该第一图形单元配置为：在播放页面展示第i个图像帧以及第i个图像帧与第p个图像帧之间的图像帧的过程中，在第一展示区域显示随着播放页面展示的图像帧发生变化而对应变化的第一扫描图形，p为大于i且小于或等于j的整数。
例如，在一些示例中，第一图形单元进一步配置为：随着播放页面展示的图像帧发生变化，第一扫描图形至少部分在第一展示区域中沿着预定方向移动。
例如，在一些示例中，基于视频的信息展示装置还可以包括第一控件单元，该第一控件单元配置为：在目标视频播放过程中，在目标视频的播放页面展示第一控件。第二展示单元1220进一步配置为：在目标视频播放过程中，触发针对第一控件的第一预定操作。
例如，在一些示例中，第二展示单元1220进一步配置为：响应于第一事件，触发针对目标视频的播放暂停操作；或者响应于第一事件，触发针对目标视频的播放页面的截图操作。
例如，在一些示例中，基于视频的信息展示装置还可以包括截图单元，该截图单元配置为：响应于针对目标视频的播放页面的截图操作，展示第二控件和第三控件，第二控件配置为触发展示第二资源信息的操作，第三控件配置为触发将目标视频分享至与第三控件对应的平台或用户的操作。
例如，在一些示例中，基于视频的信息展示装置还可以包括第二图形单元，该第二图形单元配置为：在获得第二资源信息的过程中，在播放页面展示当前图像帧，并在当前图像帧上叠加展示动态的第二扫描图形。动态的第二扫描图形包括沿预定方向移动的第一子扫描图形和/或在当前图像帧中的目标对象所在位置移动或闪动的第二子扫描图形。
例如，在一些示例中，第二展示单元1220进一步配置为：展示资源页面，并在资源页面中展示第二资源信息；当前图像帧包括E个目标对象，第二资源信息包括分别与E个目标对象对应的多个第二子资源信息，资源页面包括第二展示区域和与E个目标对象分别对应的E个第四控件，每个第四控件配置为触发在第二展示区域展示与第四控件对应的第二子资源信息的操作，E为大于0的整数。
例如，在一些示例中，基于视频的信息展示装置还可以包括第一框选单元，该第一框选单元配置为：响应于针对资源页面的第二预定操作，展示框选页面，框选页面展示有当前图像帧；响应于接收到对框选页面中的当前图像帧的框选操作，基于框选操作所限定的图像区域，获得与图像区域中的目标对象对应的第三资源信息；展示第三资源信息。
例如，在一些示例中，基于视频的信息展示装置还可以包括第二框选单元，该第二框选单元配置为：响应于获得与当前图像帧中的目标对象对应的第二资源信息的操作执行失败或者从触发第一事件开始的预定时长内没有获得与当前图像帧中的目标对象对应的第二资源信息，展示框选页面，框选页面展示有当前图像帧；响应于接收到对框选页面中的当前图像帧的框选操作，基于框选操作所限定的图像区域，获得与图像区域中的目标对象对应的第三资源信息；展示第三资源信息。
例如，在一些示例中，基于视频的信息展示装置还可以包括进度单元，该进度单元配置为：响应于针对资源页面的第三预定操作，展示进度页面，进度页面包括进度条控件和图像展示区域，图像展示区域展示有当前图像帧；响应于针对进度条控件的第四预定操作，将图像展示区域由展示当前图像帧切换为展示与第四预定操作对应的目标图像帧；获得与目标图像帧中的目标对象对应的第四资源信息；以及展示第四资源信息。
图13为本公开一些实施例提供的一种电子设备的示意框图。如图13所示，电子设备1300包括处理器1310和存储器1320。存储器1320用于存储非暂时性计算机可读指令(例如一个或多个计算机程序模块)。处理器1310用于运行非暂时性计算机可读指令，非暂时性计算机可读指令被处理器1310运行时可以执行上文所述的基于视频的信息展示方法中的一个或多个步骤。存储器1320和处理器1310可以通过总线系统和/或其它形式的连接机构(未示出)互连。
例如，处理器1310可以是中央处理单元(CPU)、数字信号处理器(DSP)或者具有数据处理能力和/或程序执行能力的其它形式的处理单元，例如现场可编程门阵列(FPGA)等；例如，中央处理单元(CPU)可以为X86或ARM架构等。处理器1310可以为通用处理器或专用处理器，可以控制电子设备1300中的其它组件以执行期望的功能。
例如，存储器1320可以包括一个或多个计算机程序产品的任意组合，计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。非易失性存储器例如可以包括只读存储器(ROM)、硬盘、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器、闪存等。在计算机可读存储介质上可以存储一个或多个计算机程序模块，处理器1310可以运行一个或多个计算机程序模块，以实现电子设备1300的各种功能。在计算机可读存储介质中还可以存储各种应用程序和各种数据以及应用程序使用和/或产生的各种数据等。
需要说明的是，本公开的实施例中，电子设备1300的具体功能和技术效果可以参考上文中关于基于视频的信息展示方法的描述，此处不再赘述。
图14为本公开一些实施例提供的另一种电子设备的示意框图。该电子设备300例如适于用来实施本公开实施例提供的基于视频的信息展示方法。电子设备1400可以是用户终端等。需要注意的是，图14示出的电子设备1400仅仅是一个示例，其不会对本公开实施例的功能和使用范围带来任何限制。
如图14所示，电子设备1400可以包括处理装置(例如中央处理器、图形处理器等)1410，其可以根据存储在只读存储器(ROM)1420中的程序或者从存储装置1480加载到随机访问存储器(RAM)1430中的程序而执行各种适当的动作和处理。在RAM 1430中，还存储有电子设备1400操作所需的各种程序和数据。处理装置1410、ROM 1420以及RAM 1430通过总线1440彼此相连。输入/输出(I/O)接口1450也连接至总线1440。
通常，以下装置可以连接至I/O接口1450：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置1460；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置1470；包括例如磁带、硬盘等的存储装置1480；以及通信装置1490。通信装置1490可以允许电子设备1400与其他电子设备进行无线或有线通信以交换数据。虽然图14示出了具有各种装置的电子设备1400，但应理解的是，并不要求实施或具备所有示出的装置，电子设备1400可以替代地实施或具备更多或更少的装置。
例如，根据本公开的实施例，基于视频的信息展示方法可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包括用于执行上述基于视频的信息展示方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置1490从网络上被下载和安装，或者从存储装置1480安装，或者从ROM 1420安装。在该计算机程序被处理装置1410执行时，可以执行本公开实施例提供的基于视频的信息展示方法中限定的功能。
本公开至少一个实施例还提供一种存储介质，用于存储非暂时性计算机可读指令，当该非暂时性计算机可读指令由计算机执行时可以实现本公开任一实施例所述的基于视频的信息展示方法。
图15为本公开一些实施例提供的一种存储介质的示意图。如图15所示，存储介质1500用于存储非暂时性计算机可读指令410。例如，当非暂时性计算机可读指令410由计算机执行时可以执行根据上文所述的基于视频的信息展示方法中的一个或多个步骤。
例如，该存储介质1500可以应用于上述电子设备1300中。例如，存储介质1500可以为图13所示的电子设备1300中的存储器1320。例如，关于存储介质1500的相关说明可以参考图13所示的电子设备1300中的存储器1320的相应描述，此处不再赘述。
在上文中，结合图1至图15描述了本公开实施例提供的基于视频的信息展示方法、基于视频的信息展示装置、电子设备、存储介质和程序产品。本公开实施例提供的基于视频的信息展示方法可以将离线识别与在线识别相结合，在用户没有触发识别操作的情况下，为用户展示离线识别和搜索资源信息，在用户触发针对感兴趣的图像帧的搜索操作之后，可以在线获取与用户感兴趣的图像帧匹配的资源信息。可以丰富针对视频的识图搜索功能，简化操作流程，提升用户体验。
需要说明的是，本公开上述的存储介质(计算机可读介质)可以是计算机可读信号介质或者非暂时性计算机可读存储介质或者是上述两者的任意组合。非暂时性计算机可读存储介质例如可以是，但不限于，电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。非暂时性计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，非暂时性计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是非暂时性计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如超文本传输协议(Hyper TextTransfer Protocol，HTTP)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(LAN)，广域网(WAN)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：在目标视频播放过程中，在目标视频的播放页面展示与目标视频中的目标对象对应的第一资源信息，目标视频包括M个图像帧，第一资源信息预先基于N个图像帧中的目标对象匹配得到；响应于在目标视频播放过程中触发第一事件，基于触发第一事件过程中播放页面所播放的至少一个当前图像帧，获取与当前图像帧中的目标对象对应的第二资源信息；以及展示第二资源信息。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言，诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络，例如局域网(LAN)或广域网(WAN)，连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这根据所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等。
在本公开中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
以上描述仅为本公开的部分实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外，虽然采用特定次序描绘了各操作，但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序来执行。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地，在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (17)

1.一种基于视频的信息展示方法，包括：
在目标视频播放过程中，在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，其中，所述目标视频包括M个图像帧，所述第一资源信息预先基于N个所述图像帧中的目标对象匹配得到；
响应于在所述目标视频播放过程中触发第一事件，基于触发所述第一事件过程中所述播放页面所播放的至少一个当前图像帧，获取与所述当前图像帧中的目标对象对应的第二资源信息；以及
展示所述第二资源信息，
其中，N为大于0的整数，M为大于或等于N的整数。
2.根据权利要求1所述的方法，其中，
所述播放页面包括第一展示区域，第一资源信息展示于所述第一展示区域；所述第一资源信息包括与所述N个图像帧中的目标对象分别对应的N个第一子资源信息；
在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，包括：
在所述播放页面分别展示所述N个图像帧时，在所述第一展示区域分别展示所述N个第一子资源信息。
3.根据权利要求2所述的方法，其中，所述N个图像帧包括第i个图像帧和第j个图像帧，所述第一资源信息包括与所述第i个图像帧对应的第i个第一子资源信息和与所述第j个图像帧对应的第j个第一子资源信息；
在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，包括：
在所述播放页面展示所述第i个图像帧以及所述第i个图像帧与所述第j个图像帧之间的图像帧的过程中，在所述第一展示区域展示所述第i个第一子资源信息，
其中，i为大于0的整数，j为大于i的整数。
4.根据权利要求3所述的方法，其中，所述M个图像帧还包括位于所述第i个图像帧和所述第j个图像帧之间的第p个图像帧，
所述信息展示方法还包括：
在所述播放页面展示所述第i个图像帧以及所述第i个图像帧与所述第p个图像帧之间的图像帧的过程中，在所述第一展示区域显示随着所述播放页面展示的图像帧发生变化而对应变化的第一扫描图形，其中，p为大于i且小于或等于j的整数。
5.根据权利要求4所述的方法，其中，在所述第一展示区域显示随着所述播放页面展示的图像帧发生变化而变化的第一扫描图形，包括：
随着所述播放页面展示的图像帧发生变化，所述第一扫描图形至少部分在所述第一展示区域中沿着预定方向移动。
6.根据权利要求1所述的方法，还包括：
在所述目标视频播放过程中，在所述目标视频的播放页面展示第一控件；
其中，在所述目标视频播放过程中触发第一事件包括：在所述目标视频播放过程中，触发针对所述第一控件的第一预定操作。
7.根据权利要求1所述的方法，其中，在所述目标视频播放过程中触发第一事件，包括：
响应于所述第一事件，触发针对所述目标视频的播放暂停操作；或者
响应于所述第一事件，触发针对所述目标视频的播放页面的截图操作。
8.根据权利要求7所述的方法，还包括：
响应于针对所述目标视频的播放页面的截图操作，展示第二控件和第三控件，
其中，所述第二控件配置为触发展示所述第二资源信息的操作，所述第三控件配置为触发将所述目标视频分享至与所述第三控件对应的平台或用户的操作。
9.根据权利要求1所述的方法，还包括：
在获得所述第二资源信息的过程中，在所述播放页面展示所述当前图像帧，并在所述当前图像帧上叠加展示动态的第二扫描图形，
其中，所述动态的第二扫描图形包括沿预定方向移动的第一子扫描图形和/或在所述当前图像帧中的目标对象所在位置移动或闪动的第二子扫描图形。
10.根据权利要求1所述的方法，其中，展示所述第二资源信息，包括：
展示资源页面，并在所述资源页面中展示所述第二资源信息；
其中，所述当前图像帧包括E个目标对象，所述第二资源信息包括分别与所述E个目标对象对应的多个第二子资源信息，
所述资源页面包括第二展示区域和与所述E个目标对象分别对应的E个第四控件，每个所述第四控件配置为触发在所述第二展示区域展示与所述第四控件对应的第二子资源信息的操作，
其中，E为大于0的整数。
11.根据权利要求10所述的方法，还包括：
响应于针对所述资源页面的第二预定操作，展示框选页面，其中，所述框选页面展示有所述当前图像帧；
响应于接收到对所述框选页面中的当前图像帧的框选操作，基于所述框选操作所限定的图像区域，获得与所述图像区域中的目标对象对应的第三资源信息；
展示所述第三资源信息。
12.根据权利要求1所述的方法，还包括：
响应于获得与所述当前图像帧中的目标对象对应的第二资源信息的操作执行失败或者从触发所述第一事件开始的预定时长内没有获得与所述当前图像帧中的目标对象对应的第二资源信息，展示框选页面，其中，所述框选页面展示有所述当前图像帧；
响应于接收到对所述框选页面中的当前图像帧的框选操作，基于所述框选操作所限定的图像区域，获得与所述图像区域中的目标对象对应的第三资源信息；
展示所述第三资源信息。
13.根据权利要求10所述的方法，还包括：
响应于针对所述资源页面的第三预定操作，展示进度页面，其中，所述进度页面包括进度条控件和图像展示区域，所述图像展示区域展示有所述当前图像帧；
响应于针对所述进度条控件的第四预定操作，将所述图像展示区域由展示所述当前图像帧切换为展示与所述第四预定操作对应的目标图像帧；
获得与所述目标图像帧中的目标对象对应的第四资源信息；以及
展示所述第四资源信息。
14.一种基于视频的信息展示装置，包括：
第一展示单元，配置为在目标视频播放过程中，在所述目标视频的播放页面展示与所述目标视频中的目标对象对应的第一资源信息，其中，所述目标视频包括M个图像帧，所述第一资源信息预先基于N个所述图像帧中的目标对象匹配得到；
第二展示单元，配置为响应于在所述目标视频播放过程中触发第一事件，基于触发所述第一事件过程中所述播放页面所播放的至少一个当前图像帧，获取与所述当前图像帧中的目标对象对应的第二资源信息，并展示所述第二资源信息，
其中，N为大于0的整数，M为大于或等于N的整数。
15.一种电子设备，包括：
处理器；
存储器，包括一个或多个计算机程序模块；
其中，所述一个或多个计算机程序模块被存储在所述存储器中并被配置为由所述处理器执行，所述一个或多个计算机程序模块包括用于实现权利要求1-13任一项所述的基于视频的信息展示方法的指令。
16.一种计算机可读存储介质，用于存储非暂时性计算机可读指令，当所述非暂时性计算机可读指令由计算机执行时可以实现权利要求1-13任一项所述的基于视频的信息展示方法。
17.一种计算机程序产品，包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包括用于执行权利要求1-13任一项所述的基于视频的信息展示方法的程序代码。
CN202111137817.XA 2021-09-27 2021-09-27 基于视频的信息展示方法、装置、电子设备及存储介质 Pending CN115878838A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111137817.XA CN115878838A (zh) 2021-09-27 2021-09-27 基于视频的信息展示方法、装置、电子设备及存储介质
PCT/CN2022/119629 WO2023045867A1 (zh) 2021-09-27 2022-09-19 基于视频的信息展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111137817.XA CN115878838A (zh) 2021-09-27 2021-09-27 基于视频的信息展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115878838A true CN115878838A (zh) 2023-03-31

Family

ID=85720044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111137817.XA Pending CN115878838A (zh) 2021-09-27 2021-09-27 基于视频的信息展示方法、装置、电子设备及存储介质

Country Status (2)

Country Link
CN (1) CN115878838A (zh)
WO (1) WO2023045867A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116738082B (zh) * 2023-08-15 2023-11-14 中国气象服务协会 基于人工智能的气象服务信息展示优化方法及服务器

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040021684A1 (en) * 2002-07-23 2004-02-05 Dominick B. Millner Method and system for an interactive video system
CN105100944A (zh) * 2014-04-30 2015-11-25 广州市动景计算机科技有限公司 一种物品信息的输出方法及装置
CN105828103A (zh) * 2016-03-31 2016-08-03 乐视控股（北京）有限公司 一种视频处理方法和一种播放器
CN110149530B (zh) * 2018-06-15 2021-08-24 腾讯科技（深圳）有限公司 一种视频处理方法和装置
CN109034115B (zh) * 2018-08-22 2021-10-22 Oppo广东移动通信有限公司 视频识图方法、装置、终端及存储介质
CN109309861A (zh) * 2018-10-30 2019-02-05 广州虎牙科技有限公司 一种媒体处理方法、装置、终端设备和存储介质
CN110035314A (zh) * 2019-03-08 2019-07-19 腾讯科技（深圳）有限公司 信息的展示方法和装置、存储介质、电子装置
CN110062281B (zh) * 2019-05-29 2021-08-24 维沃移动通信有限公司 一种播放进度调节方法及其终端设备
CN110704684B (zh) * 2019-10-17 2022-08-09 北京字节跳动网络技术有限公司 视频搜索的方法及装置、终端和存储介质
CN113129045A (zh) * 2019-12-31 2021-07-16 阿里巴巴集团控股有限公司 视频数据的处理、显示方法、装置、电子设备及存储介质
CN113473164A (zh) * 2021-05-25 2021-10-01 北京达佳互联信息技术有限公司 直播数据处理方法、装置、计算机设备及介质

Also Published As

Publication number Publication date
WO2023045867A1 (zh) 2023-03-30

Similar Documents

Publication Publication Date Title
CN110519621B (zh) 视频推荐方法、装置、电子设备及计算机可读介质
US9697538B2 (en) Product recommendations based on analysis of social experiences
US20190138815A1 (en) Method, Apparatus, User Terminal, Electronic Equipment, and Server for Video Recognition
CN110704684B (zh) 视频搜索的方法及装置、终端和存储介质
US11310559B2 (en) Method and apparatus for recommending video
US9607010B1 (en) Techniques for shape-based search of content
EP2961172A1 (en) Method and device for information acquisition
JP6950912B2 (ja) 映像検索情報提供方法、装置およびコンピュータプログラム
US20190012717A1 (en) Appratus and method of providing online sales information of offline product in augmented reality
US9830534B1 (en) Object recognition
US10824869B2 (en) Clickless identification and online posting
CN112989076A (zh) 多媒体内容搜索方法、装置、设备及介质
CN110858134A (zh) 数据、显示处理方法、装置、电子设备和存储介质
WO2016201800A1 (zh) 信息获取方法、服务器、终端及数据库构建方法、装置
WO2016173180A1 (zh) 一种基于图像的信息获取方法和装置
US9990665B1 (en) Interfaces for item search
CN114564666B (zh) 百科信息展示方法、装置、设备和介质
CN113255713A (zh) 用于跨对象变化的数字图像选择的机器学习
KR102473915B1 (ko) 콘텐츠 기반의 상품 판매 중개 서비스 제공 방법, 장치 및 컴퓨터프로그램
CN114051172B (zh) 一种直播交互方法、装置、电子设备及计算机程序产品
WO2023045867A1 (zh) 基于视频的信息展示方法、装置、电子设备及存储介质
US10606884B1 (en) Techniques for generating representative images
WO2023045825A1 (zh) 基于视频的信息展示方法及装置、电子设备和存储介质
KR102522989B1 (ko) 멀티미디어 콘텐츠 내 상품 정보 제공 장치 및 방법
US9471939B1 (en) Product recommendations based on analysis of social experiences

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination