WO2021082668A1 - 一种弹幕编辑方法、智能终端及存储介质 - Google Patents

一种弹幕编辑方法、智能终端及存储介质 Download PDF

Info

Publication number
WO2021082668A1
WO2021082668A1 PCT/CN2020/110995 CN2020110995W WO2021082668A1 WO 2021082668 A1 WO2021082668 A1 WO 2021082668A1 CN 2020110995 W CN2020110995 W CN 2020110995W WO 2021082668 A1 WO2021082668 A1 WO 2021082668A1
Authority
WO
WIPO (PCT)
Prior art keywords
barrage
video
preset
film
bullet screen
Prior art date
Application number
PCT/CN2020/110995
Other languages
English (en)
French (fr)
Inventor
陈俊嘉
Original Assignee
深圳Tcl数字技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 深圳Tcl数字技术有限公司 filed Critical 深圳Tcl数字技术有限公司
Publication of WO2021082668A1 publication Critical patent/WO2021082668A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Definitions

  • the film and television knowledge graph is a database with a film and television media asset ID as an identification tag, and each film and television media asset has a unique identification code that is used to match the corresponding film and television category , Genre, actor information and plot information.
  • FIG. 1 is a flowchart of a preferred embodiment of the barrage editing method of the present disclosure
  • the video attribute information includes: video playback status, video playback progress, video duration, current number of bullet screens, and video name information (that is, one or more types).
  • the film and television knowledge graph is a media asset ID (Identity document, unique code) is a database of identification tags.
  • Each film and television media asset has a unique identification code, which can be used to match its corresponding film and television category (movie, TV series, variety show, etc.), type (comedy, plot, science fiction, etc.) , Actor information, plot information (place names, names, objects included in the play) and all other information related to the movie.
  • the film and television file information stored in the film and television knowledge graph includes: author, film review, rating, box office, winning record, upload time and other information (that is, one or more types).
  • Step S20 Grab and recognize the image in the video, and generate a text label corresponding to the image according to the image recognition result.
  • FIG. 2 is a flowchart of step S20 in the barrage editing method provided by the present disclosure.
  • the step S20 includes:
  • FIG. 3 is a flowchart of step S30 in the barrage editing method provided by the present disclosure.
  • the step S30 includes:
  • the barrage is marked with a timestamp (it can be accurate to what item or character appears in which second, and when the screen recognizes multiple objects or characters, it is consistent with the generated barrage
  • a timestamp it can be accurate to what item or character appears in which second, and when the screen recognizes multiple objects or characters, it is consistent with the generated barrage
  • different bullet screens correspond to different time points of the video, during the video playback process, synchronize at the corresponding time point according to the time stamp of the bullet screen Displayed on the screen.
  • the present disclosure also provides an intelligent terminal correspondingly.
  • the intelligent terminal includes a processor 10, a memory 20 and a display 30.
  • FIG. 4 only shows part of the components of the smart terminal, but it should be understood that it is not required to implement all the shown components, and more or fewer components may be implemented instead.
  • the memory 20 may be an internal storage unit of the smart terminal, such as a hard disk or a memory of the smart terminal.
  • the memory 20 may also be an external storage device of the smart terminal, for example, a plug-in hard disk equipped on the smart terminal, a smart memory card (Smart Media Card, SMC), and a secure digital (Secure Digital). Digital, SD) card, flash card (Flash Card), etc.
  • the memory 20 may also include both an internal storage unit of the smart terminal and an external storage device.
  • the memory 20 is used to store application software and various types of data installed on the smart terminal, such as program code for the installed smart terminal.
  • the memory 20 can also be used to temporarily store data that has been output or will be output.
  • a bullet screen editing program 40 is stored in the memory 20, and the bullet screen editing program 40 can be executed by the processor 10, so as to implement the bullet screen editing method in the present application.
  • the processor 10 may be a central processing unit (CPU), a microprocessor or other data processing chip, which is used to run the program code or process data stored in the memory 20, for example Execute the barrage editing method and so on.
  • CPU central processing unit
  • microprocessor or other data processing chip, which is used to run the program code or process data stored in the memory 20, for example Execute the barrage editing method and so on.
  • the display 30 may be an LED display, a liquid crystal display, a touch liquid crystal display, an OLED (Organic Light-Emitting Diode, organic light-emitting diode) touch device, etc.
  • the display 30 is used for displaying information on the smart terminal and for displaying a visualized user interface.
  • the components 10-30 of the smart terminal communicate with each other through a system bus.
  • the barrage and the video are displayed synchronously.
  • the step of obtaining the video attribute information of the played video specifically includes:
  • the video attribute information includes one or more of video playback progress, video duration, number of bullet screens, and video name.
  • the film and television file information stored in the film and television knowledge graph includes one or more of author, film review, rating, box office, winning record, and upload time.
  • the film and television knowledge graph is a database with a film and television media asset ID as an identification tag, and each film and television media asset has a unique identification code, which is used to match the corresponding film and television category, type, actor information, and plot information.
  • the searching for the movie and TV file information of the video from the movie and TV knowledge graph according to the video attribute information further includes:
  • the upload time of the film and television file information determine the type of the currently played video, including the newly uploaded film and the classic film.
  • the step of capturing and recognizing the image in the video, and generating a text label corresponding to the image according to the image recognition result specifically includes:
  • the step of matching the corresponding barrage in a preset barrage library according to the video file information and the text label, and displaying the barrage and the video synchronously specifically includes:
  • the barrage changes in real time as the screen changes.
  • the step of synchronously displaying the barrage and the video further includes:
  • step of establishing a preset barrage library it further includes:
  • a newly uploaded barrage is acquired every preset period, and the newly uploaded barrage is classified and saved in the preset barrage library according to a preset type of barrage.
  • step of establishing a preset barrage library it further includes:
  • the present disclosure also provides a storage medium, wherein the storage medium stores a barrage editing program, and when the barrage editing program is executed by a processor, the steps of the barrage editing method as described above are realized.
  • the present disclosure provides a bullet screen editing method, a smart terminal, and a storage medium.
  • the method includes: acquiring video attribute information of a played video, and searching for the video from the film and television knowledge graph according to the video attribute information The video file information; capture and recognize the image in the video, and generate a text label corresponding to the image according to the image recognition result; according to the video file information and the text label in the preset bullet screen library to match the corresponding Barrage, displaying the barrage and the video synchronously.
  • the present disclosure edits a bullet screen matching the current video according to the video information, that is, generates a bullet screen that matches the current playback content according to the video information, provides users with a comfortable bullet screen watching atmosphere, and improves users The interest in watching the video enhances the interaction between users and the video.
  • the processes in the methods of the above-mentioned embodiments can be implemented by instructing relevant hardware (such as a processor, a controller, etc.) through a computer program, and the program can be stored in a computer program.
  • the program may include the processes of the foregoing method embodiments when executed.
  • the storage medium mentioned may be a memory, a magnetic disk, an optical disk, and the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

公开了一种弹幕编辑方法、智能终端及存储介质，所述方法包括：获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签；根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。本公开针对弹幕数量少的视频，根据视频信息编辑出匹配当前视频的弹幕，即根据所述视频信息生成符合当前播放内容的弹幕，为用户提供舒适的弹幕观影氛围，提升用户观看视频的兴趣，增强用户与视频的互动效果。

Description

一种弹幕编辑方法、智能终端及存储介质
优先权
本公开要求申请日为2019年10月30日提交中国专利局、申请号为“201911042881.2”、申请名称为“一种弹幕编辑方法、智能终端及存储介质”的中国专利申请的优先权，其全部内容通过引用结合在本公开中。
技术领域
本公开涉及信息处理技术领域，尤其涉及一种弹幕编辑方法、智能终端及存储介质。
背景技术
弹幕(barrage)指的是在网络上观看视频时弹出的评论性字幕，弹幕可以给观众一种“实时互动”的错觉，虽然不同弹幕的发送时间有所区别，但是其只会在视频中特定的一个时间点出现，因此在相同时刻发送的弹幕基本上也具有相同的主题，在参与评论时就会有与其他观众同时评论的错觉。
目前，在视频网站发弹幕已经是很普遍的现象，但目前的弹幕经常出现在热门影片中，也就是比较热门的视频才会有有大量弹幕，用户参与互动的感觉很好，但小众的影片、新出的影片以及经典老片则经常出现有没有弹幕的或者弹幕稀少的情况(例如小众影片观看人数太少，导致弹幕总量少，新影片上线前期弹幕量少，经典老片由于观看人群年龄层或弹幕行为习惯的原因，导致弹幕量少)，对习惯于有大量弹幕的用户来说，会显著降低观影体验，甚至无法提高用户观看的兴趣。
因此，现有技术还有待于改进和发展。
公开内容
本公开的主要目的在于提供一种弹幕编辑方法、智能终端及存储介质，旨在解决现有技术中小众的影片、新出的影片以及经典老片则经常出现有没有弹幕的或者弹幕稀少的情况。
为实现上述目的，本公开提供一种弹幕编辑方法，包括如下步骤：
获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；
抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签；
根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。
可选地，所述的弹幕编辑方法，其中，所述获取所播放视频的视频属性信息的步骤具体包括：
每隔预设时间获取所播放视频的弹幕数量，若所述弹幕数量低于预设阈值，则获取所播放视频的视频属性信息。
可选地，所述的弹幕编辑方法，其中，所述视频属性信息包括：视频播放状态、视频播放进度、视频时长、当前弹幕数量以及视频名称中的一种或多种。
可选地，所述的弹幕编辑方法，其中，所述影视知识图谱存储的影视文件信息包括：作者、影评、评分、票房、获奖记录以及上传时间中的一种或多种。
可选地，所述的弹幕编辑方法，其中，所述影视知识图谱为一个以影视媒资ID为识别标签的数据库，每一个影视媒资均有唯一识别码，用于匹配对应的影视类别、类型、演员信息和剧情信息。
可选地，所述的弹幕编辑方法，其中，所述根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息，之后还包括：
根据所述影视文件信息的上传时间，判断当前播放视频的类型，包括新上传影片和经典影片。
可选地，所述的弹幕编辑方法，其中，所述抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标的步骤，具体包括：
抓取并识别所述视频中的图像，根据图像识别结果对所述视频中的图像进行标记；
保存标记后的图像，并根据所述图像识别结果生成对应的文本标签。
可选地，所述的弹幕编辑方法，其中，根据所述图像识别结果将所述人物、物件和场景分别生成对应的文本标签。
可选地，所述的弹幕编辑方法，其中，所述根据所述影视文件信息和所述文 本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤，具体包括：
获取所述影视文件信息和所述文本标签；
根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的至少一个弹幕，对所述弹幕标记时间戳，根据所述时间戳在所述视频播放的对应时间点同步显示所述弹幕。
可选地，所述的弹幕编辑方法，其中，所述弹幕随着画面的变化而实时变化。
可选地，所述的弹幕编辑方法，其中，所述根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤之前还包括：
获取视频平台中的弹幕，并根据弹幕的显示频率对获取到的弹幕进行排序并保存，建立预设弹幕库。
可选地，所述的弹幕编辑方法，其中，所述建立预设弹幕库的步骤之后还包括：
每隔预设周期获取新上传的弹幕，根据预先设定的弹幕类型将所述新上传的弹幕分类保存到所述预设弹幕库中。
可选地，所述的弹幕编辑方法，其中，所述建立预设弹幕库的步骤之后还包括：
定期根据用户发送的弹幕，更新所述预设弹幕库，并将所述预设弹幕库中的弹幕进行归类，定期根据用户发送的弹幕更新预设弹幕库。
此外，为实现上述目的，本公开还提供一种智能终端，其中，所述智能终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的弹幕编辑程序，所述弹幕编辑程序被所述处理器执行时实现如上所述的弹幕编辑方法的步骤。
此外，为实现上述目的，本公开还提供一种存储介质，其中，所述存储介质存储有弹幕编辑程序，所述弹幕编辑程序被处理器执行时实现如上所述的弹幕编辑方法的步骤。
本公开通过获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；抓取并识别所述视频中的图像，根据 图像识别结果生成所述图像对应的文本标签；根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。本公开针对弹幕数量少的视频，根据视频信息编辑出匹配当前视频的弹幕，即根据所述视频信息生成符合当前播放内容的弹幕，为用户提供舒适的弹幕观影氛围，提升用户观看视频的兴趣，增强用户与视频的互动效果。
附图说明
图1是本公开弹幕编辑方法的较佳实施例的流程图；
图2是本公开弹幕编辑方法的较佳实施例中步骤S20的流程图；
图3是本公开弹幕编辑方法的较佳实施例中步骤S30的流程图；
图4为本公开智能终端的较佳实施例的运行环境示意图。
具体实施方式
为使本公开的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本公开进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本公开，并不用于限定本公开。
实施例一
本公开较佳实施例所述的弹幕编辑方法，如图1所示，所述弹幕编辑方法包括以下步骤：
步骤S10、获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息。
在所述步骤S10之前还包括：每隔预设时间(例如所述预设时间可以为10分钟，可根据需要调整所述预设时间)判断当前正在播放视频的弹幕数量是否低于预设阈值(例如所述预设阈值可以是10条，可根据用户对弹幕数量的需求来设置)，当是时则获取当前正在播放视频的视频属性信息，即每隔预设时间获取所播放视频的弹幕数量，若所述弹幕数量低于预设阈值，则获取所播放视频的视频属性信息；当否时不作操作(即本来当前播放的视频已经存在很多弹幕了就没必要再实时生成弹幕)。
其中，所述视频属性信息包括：视频播放状态、视频播放进度、视频时长、当前弹幕数量以及视频名称等信息(即一种或多种)。
具体地，在获取当前正在播放视频的视频属性信息后，再根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息，其中，所述影视知识图谱是一个以影视媒资ID(Identity document，唯一编码)为识别标签的数据库，每一个影视媒资都有唯一识别码，可用于匹配其对应的影视类别(电影、电视剧、综艺等)、类型(喜剧、剧情、科幻等)、演员信息、剧情信息(剧中包含的地名、人名、物品)等一切与影片相关的信息。
进一步地，所述影视知识图谱存储的影视文件信息包括：作者、影评、评分、票房、获奖记录以及上传时间等信息(即一种或多种)。
根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息，进一步可以判断当前播放视频的类型，例如可以通过判断视频上传的时间，如果是一小时内(可根据需要调整时间周期)，则判定为新上传影片，需要生成“新上传影片”的弹幕文本；通过判断视频上传的年份，如果距离现实大于等于五年(可根据需要调整时间周期)，则判定为经典影片，需要生成“经典影片”的弹幕文本。
步骤S20、抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签。
具体的过程请参阅图2，其为本公开提供的弹幕编辑方法中步骤S20的流程图。
如图2所示，所述步骤S20包括：
S21、抓取并识别所述视频中的图像，根据图像识别结果对所述视频中的图像进行标记；
S22、保存标记后的图像，并根据所述图像识别结果生成对应的文本标签。
具体地，通过图像识别标记视频内的人物、物件、场景等信息，以数据文件形式保存，通过图像识别算法(现有技术中已有的成熟通用算法)进行识别(即根据所述视频中的图像进行识别后得到所述图像识别结果)，根据图像识别结果对所述视频中的图像进行标记，保存标记后的图像，并根据所述图像识别结果生成对应的文本标签，例如根据图像识别结果将所述人物、物件和场景分别生成对应的文本标签。
例如，电视画面的图像上有甲(例如某一个电视明星)的人脸，经过识别之后，就会生成甲的文本标签，便于后续根据所述文本标签来生成合适的弹幕。
步骤S30、根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。
具体的过程请参阅图3，其为本公开提供的弹幕编辑方法中步骤S30的流程图。
如图3所示，所述步骤S30包括：
S31、获取所述影视文件信息和所述文本标签；
S32、根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的至少一个弹幕，对所述弹幕标记时间戳，根据所述时间戳在所述视频播放的对应时间点同步显示所述弹幕(弹幕随着画面的变化而实时变化)。
具体地，本公开可以根据所述影视文件信息和所述文本标签从弹幕库中调取所需要的弹幕，例如根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的至少一个弹幕。
为了使得生成的弹幕和视频播放的内容同步，因此所述弹幕标记有时间戳(可以精确到哪一秒出现了什么物品或者人物，当画面识别到多个物体或者人物都符合生成弹幕的标准的情况，则同步进行，生成多条弹幕)，不同的弹幕对应所述视频不同的时间点，在所述视频播放的过程中，根据弹幕的时间戳在对应的时间点同步显示在屏幕上。
进一步地，获取视频平台中的弹幕，并根据出现频率进行排序后生成弹幕集，根据所述图像识别结果在所述弹幕集中进行弹幕的匹配，将匹配成功的弹幕存储至预设弹幕库，当所述视频播放时调取所述预设弹幕库中匹配当前画面的弹幕进行显示；存储现有弹幕及所能收集到的所有弹幕，并对弹幕进行标注，将收集到的弹幕标记上各种标签，如视频的名称、时间点、对应的图像识别结果等；例如，当弹幕“甲好美啊”的画面识别结果为“甲”，这时可进行标注，在这条弹幕“甲好美啊”的弹幕下标注“甲”，下次在调取数据时，就很方便可以根据甲、片名、时间点这种关键词找到符合用户习惯的弹幕文本。
另外，每隔预设周期获取新上传的弹幕，根据预先设定的弹幕类型将所述新上传的弹幕分类保存到所述预设弹幕库中，例如定期根据用户发送的弹幕，更新所述预设弹幕库，并将所述预设弹幕库中的弹幕进行归类；定期根据用户发送的弹幕更新预设弹幕库，其中包括爬取(抓取)现有所有视频平台中的弹幕内容(例 如抓取经典老片的网络公开影评，如影片评论区、豆瓣影片、网络评论等，并存入弹幕库)，以出现的频率排序，整理成热门弹幕集；根据图像识别出来的结果(例如关键词)，进行热门弹幕的匹配，如结果只有1条，则引用该弹幕，如结果有多条，则取最热门的一句弹幕进行引用。
将所述预设弹幕库中的弹幕进行归类，例如，夸奖型弹幕：对小众类型电影的赞美话语、根据物体识别能力编辑与物体相关的弹幕，如识别到大熊猫，则编辑大熊猫太可爱了的弹幕并发送；疑问型弹幕：询问同类型影片的话语；相似弹幕编辑：根据现有的弹幕进行同义词、近义词的替换；在将不同类型的弹幕进行分类时，例如可以通过文字识别和图片识别来将弹幕进行归类，文字识别或者图片识别属于现有技术中的常用方式，在此不再进行赘述。
本公开针对没有弹幕或者弹幕较少的视频，根据画面信息自动生成符合当前画面场景的弹幕信息，并自动根据时间点显示在视频播放的界面上，提高用户观看视频的兴趣，很好地带动观众的情绪，增加用户之间的互动。
实施例二
进一步地，如图4所示，基于上述弹幕编辑方法，本公开还相应提供了一种智能终端，所述智能终端包括处理器10、存储器20及显示器30。图4仅示出了智能终端的部分组件，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。
所述存储器20在一些实施例中可以是所述智能终端的内部存储单元，例如智能终端的硬盘或内存。所述存储器20在另一些实施例中也可以是所述智能终端的外部存储设备，例如所述智能终端上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器20还可以既包括所述智能终端的内部存储单元也包括外部存储设备。所述存储器20用于存储安装于所述智能终端的应用软件及各类数据，例如所述安装智能终端的程序代码等。所述存储器20还可以用于暂时地存储已经输出或者将要输出的数据。在一实施例中，存储器20上存储有弹幕编辑程序40，该弹幕编辑程序40可被处理器10所执行，从而实现本申请中弹幕编辑方法。
所述处理器10在一些实施例中可以是一中央处理器(Central Processing Unit, CPU)，微处理器或其他数据处理芯片，用于运行所述存储器20中存储的程序代码或处理数据，例如执行所述弹幕编辑方法等。
所述显示器30在一些实施例中可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode，有机发光二极管)触摸器等。所述显示器30用于显示在所述智能终端的信息以及用于显示可视化的用户界面。所述智能终端的部件10-30通过系统总线相互通信。
在一实施例中，当处理器10执行所述存储器20中弹幕编辑程序40时实现以下步骤：
获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；
抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签；
根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。
所述获取所播放视频的视频属性信息的步骤具体包括：
每隔预设时间获取所播放视频的弹幕数量，若所述弹幕数量低于预设阈值，则获取所播放视频的视频属性信息。
其中，所述视频属性信息包括：视频播放进度、视频时长、弹幕数量以及视频名称中的一种或多种。
其中，所述影视知识图谱存储的影视文件信息包括：作者、影评、评分、票房、获奖记录以及上传时间中的一种或多种。
所述影视知识图谱为一个以影视媒资ID为识别标签的数据库，每一个影视媒资均有唯一识别码，用于匹配对应的影视类别、类型、演员信息和剧情信息。
所述根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息，之后还包括：
根据所述影视文件信息的上传时间，判断当前播放视频的类型，包括新上传影片和经典影片。
所述抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签的步骤，具体包括：
抓取并识别所述视频中的图像，根据图像识别结果对所述视频中的图像进行标记；
保存标记后的图像，并根据所述图像识别结果生成对应的文本标签。
所述根据所述图像识别结果生成对应的文本标签，包括：
根据所述图像识别结果将所述人物、物件和场景分别生成对应的文本标签。
所述根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤，具体包括：
获取所述影视文件信息和所述文本标签；
根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的至少一个弹幕，对所述弹幕标记时间戳，根据所述时间戳在所述视频播放的对应时间点同步显示所述弹幕。
所述弹幕随着画面的变化而实时变化。
所述根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤之前还包括：
获取视频平台中的弹幕，并根据弹幕的显示频率对获取到的弹幕进行排序并保存，建立预设弹幕库。
所述建立预设弹幕库的步骤之后还包括：
每隔预设周期获取新上传的弹幕，根据预先设定的弹幕类型将所述新上传的弹幕分类保存到所述预设弹幕库中。
所述建立预设弹幕库的步骤之后还包括：
定期根据用户发送的弹幕，更新所述预设弹幕库，并将所述预设弹幕库中的弹幕进行归类，定期根据用户发送的弹幕更新预设弹幕库。
实施例三
本公开还提供一种存储介质，其中，所述存储介质存储有弹幕编辑程序，所述弹幕编辑程序被处理器执行时实现如上所述的弹幕编辑方法的步骤。
综上所述，本公开提供一种弹幕编辑方法、智能终端及存储介质，所述方法包括：获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签；根据所述影视文件信息和所述文本标签在预 设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。本公开针对弹幕数量少的视频，根据视频信息编辑出匹配当前视频的弹幕，即根据所述视频信息生成符合当前播放内容的弹幕，为用户提供舒适的弹幕观影氛围，提升用户观看视频的兴趣，增强用户与视频的互动效果。
当然，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关硬件(如处理器，控制器等)来完成，所述的程序可存储于一计算机可读取的存储介质中，所述程序在执行时可包括如上述各方法实施例的流程。其中所述的存储介质可为存储器、磁碟、光盘等。
应当理解的是，本公开的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本公开所附权利要求的保护范围。

Claims (15)

  1. 一种弹幕编辑方法，其中，包括如下步骤：
    获取所播放视频的视频属性信息，根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息；
    抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签；
    根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示。
  2. 根据权利要求1所述的弹幕编辑方法，其中，所述获取所播放视频的视频属性信息的步骤具体包括：
    每隔预设时间获取所播放视频的弹幕数量，若所述弹幕数量低于预设阈值，则获取所播放视频的视频属性信息。
  3. 根据权利要求1所述的弹幕编辑方法，其中，所述视频属性信息包括：视频播放进度、视频时长、弹幕数量以及视频名称中的一种或多种。
  4. 根据权利要求1所述的弹幕编辑方法，其中，所述影视知识图谱存储的影视文件信息包括：作者、影评、评分、票房、获奖记录以及上传时间中的一种或多种。
  5. 根据权利要求4所述的弹幕编辑方法，其中，所述影视知识图谱为一个以影视媒资ID为识别标签的数据库，每一个影视媒资均有唯一识别码，用于匹配对应的影视类别、类型、演员信息和剧情信息。
  6. 根据权利要求1所述的弹幕编辑方法，其中，所述根据所述视频属性信息从影视知识图谱中搜索所述视频的影视文件信息，之后还包括：
    根据所述影视文件信息的上传时间，判断当前播放视频的类型，包括新上传影片和经典影片。
  7. 根据权利要求1所述的弹幕编辑方法，其中，所述抓取并识别所述视频中的图像，根据图像识别结果生成所述图像对应的文本标签的步骤，具体包括：
    抓取并识别所述视频中的图像，根据图像识别结果对所述视频中的图像进行标记；
    保存标记后的图像，并根据所述图像识别结果生成对应的文本标签。
  8. 根据权利要求7所述的弹幕编辑方法，其中，所述根据所述图像识别结果 生成对应的文本标签，包括：
    根据所述图像识别结果将所述人物、物件和场景分别生成对应的文本标签。
  9. 根据权利要求7所述的弹幕编辑方法，其中，所述根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤，具体包括：
    获取所述影视文件信息和所述文本标签；
    根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的至少一个弹幕，对所述弹幕标记时间戳，根据所述时间戳在所述视频播放的对应时间点同步显示所述弹幕。
  10. 根据权利要求9所述的弹幕编辑方法，其中，所述弹幕随着画面的变化而实时变化。
  11. 根据权利要求7所述的弹幕编辑方法，其中，所述根据所述影视文件信息和所述文本标签在预设弹幕库中匹配对应的弹幕，将所述弹幕与所述视频进行同步显示的步骤之前还包括：
    获取视频平台中的弹幕，并根据弹幕的显示频率对获取到的弹幕进行排序并保存，建立预设弹幕库。
  12. 根据权利要求11所述的弹幕编辑方法，其中，所述建立预设弹幕库的步骤之后还包括：
    每隔预设周期获取新上传的弹幕，根据预先设定的弹幕类型将所述新上传的弹幕分类保存到所述预设弹幕库中。
  13. 根据权利要求11所述的弹幕编辑方法，其中，所述建立预设弹幕库的步骤之后还包括：
    定期根据用户发送的弹幕，更新所述预设弹幕库，并将所述预设弹幕库中的弹幕进行归类，定期根据用户发送的弹幕更新预设弹幕库。
  14. 一种智能终端，其中，所述智能终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的弹幕编辑程序，所述弹幕编辑程序被所述处理器执行时实现如权利要求1-13任一项所述的弹幕编辑方法的步骤。
  15. 一种存储介质，其中，所述存储介质存储有弹幕编辑程序，所述弹幕编辑程序被处理器执行时实现如权利要求1-13任一项所述的弹幕编辑方法的步骤。
PCT/CN2020/110995 2019-10-30 2020-08-25 一种弹幕编辑方法、智能终端及存储介质 WO2021082668A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201911042881.2A CN110740387B (zh) 2019-10-30 2019-10-30 一种弹幕编辑方法、智能终端及存储介质
CN201911042881.2 2019-10-30

Publications (1)

Publication Number Publication Date
WO2021082668A1 true WO2021082668A1 (zh) 2021-05-06

Family

ID=69270378

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2020/110995 WO2021082668A1 (zh) 2019-10-30 2020-08-25 一种弹幕编辑方法、智能终端及存储介质

Country Status (2)

Country Link
CN (1) CN110740387B (zh)
WO (1) WO2021082668A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113747241A (zh) * 2021-09-13 2021-12-03 深圳市易平方网络科技有限公司 基于弹幕统计的视频片段智能剪辑方法、装置、终端
CN113836350A (zh) * 2021-09-23 2021-12-24 深圳绿米联创科技有限公司 录像视频检索方法、系统、装置、存储介质及电子设备
CN113992994A (zh) * 2021-10-20 2022-01-28 游艺星际(北京)科技有限公司 弹幕的显示方法、装置、电子设备和存储介质
CN114491152A (zh) * 2021-12-02 2022-05-13 南京硅基智能科技有限公司 一种摘要视频的生成方法、存储介质、电子装置
CN115243111A (zh) * 2022-07-05 2022-10-25 腾讯科技（北京）有限公司 视频弹幕生成方法、装置、存储介质及电子设备
CN118474426A (zh) * 2024-05-29 2024-08-09 菏泽艾拉网络科技有限公司 一种直播视频数据智能处理系统及方法

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110740387B (zh) * 2019-10-30 2021-11-23 深圳Tcl数字技术有限公司 一种弹幕编辑方法、智能终端及存储介质
CN111163359B (zh) 2019-12-31 2021-01-05 腾讯科技（深圳）有限公司 弹幕生成方法、装置和计算机可读存储介质
CN111405344B (zh) * 2020-03-18 2022-01-07 腾讯科技（深圳）有限公司 弹幕的处理方法及装置
WO2021237744A1 (zh) * 2020-05-29 2021-12-02 北京小米移动软件有限公司南京分公司 拍摄方法及装置
CN111914546B (zh) * 2020-06-13 2024-08-02 杭州千航科技有限公司 人工智能大数据分析处理系统及方法
CN112016573B (zh) * 2020-10-16 2021-04-30 北京世纪好未来教育科技有限公司 弹幕生成方法、装置、电子设备及计算机存储介质
CN113014988B (zh) * 2021-02-23 2024-04-05 北京百度网讯科技有限公司 视频处理方法、装置、设备以及存储介质
CN112926546A (zh) * 2021-04-13 2021-06-08 厦门理工学院 一种弹幕的发送方法、装置、设备及可读存储介质
CN115484465B (zh) * 2021-05-31 2024-03-15 上海幻电信息科技有限公司 弹幕生成方法及装置、电子设备和存储介质
CN115484503B (zh) * 2021-05-31 2024-03-08 上海幻电信息科技有限公司 弹幕生成方法及装置、电子设备和存储介质
CN114245222A (zh) * 2021-12-16 2022-03-25 网易（杭州）网络有限公司 一种弹幕展示方法、装置、电子设备和介质
CN114786057B (zh) * 2022-03-29 2024-08-06 广州埋堆堆科技有限公司 一种基于深度学习及表情包数据集的视频弹幕生成系统
CN115065874B (zh) * 2022-06-20 2024-08-20 维沃移动通信有限公司 视频播放方法、装置、电子设备和可读存储介质
CN115942055A (zh) * 2022-12-26 2023-04-07 广州市奥威亚电子科技有限公司 视频评论展示、收集的方法、装置及设备
CN116193195A (zh) * 2023-02-23 2023-05-30 北京奇艺世纪科技有限公司 视频的处理方法、装置、处理设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170310724A1 (en) * 2016-04-26 2017-10-26 Hon Hai Precision Industry Co., Ltd. System and method of processing media data
CN108924658A (zh) * 2018-06-05 2018-11-30 上海哔哩哔哩科技有限公司 弹幕联想输入方法、装置及计算机可读存储介质
CN109241341A (zh) * 2018-05-09 2019-01-18 上海大学 一种基于知识图谱的影视择优推荐系统和方法
CN110121083A (zh) * 2018-02-06 2019-08-13 上海全土豆文化传播有限公司 弹幕的生成方法及装置
CN110198477A (zh) * 2018-02-27 2019-09-03 优酷网络技术（北京）有限公司 一种线下弹幕的交互方法、弹幕服务端及交互系统
CN110740387A (zh) * 2019-10-30 2020-01-31 深圳Tcl数字技术有限公司 一种弹幕编辑方法、智能终端及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI232769B (en) * 2001-10-19 2005-05-21 Zeroplus Technology Co Ltd Visual feedback system for light gun
CN106878771A (zh) * 2015-12-10 2017-06-20 中兴通讯股份有限公司 广播电视终端弹幕实现方法及广播电视系统服务器
CN109309878A (zh) * 2017-07-28 2019-02-05 Tcl集团股份有限公司 弹幕的生成方法及装置
CN109819342B (zh) * 2017-11-22 2022-01-11 腾讯科技（深圳）有限公司 弹幕内容控制方法、装置、计算机设备和存储介质
CN108495184B (zh) * 2018-02-06 2021-08-20 北京奇虎科技有限公司 一种为视频添加弹幕的方法和装置
CN108989875B (zh) * 2018-07-04 2020-12-25 北京奇艺世纪科技有限公司 一种生成弹幕文件的方法及装置
CN110166811B (zh) * 2019-05-15 2021-08-10 口碑(上海)信息技术有限公司 弹幕信息的处理方法、装置及设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170310724A1 (en) * 2016-04-26 2017-10-26 Hon Hai Precision Industry Co., Ltd. System and method of processing media data
CN110121083A (zh) * 2018-02-06 2019-08-13 上海全土豆文化传播有限公司 弹幕的生成方法及装置
CN110198477A (zh) * 2018-02-27 2019-09-03 优酷网络技术（北京）有限公司 一种线下弹幕的交互方法、弹幕服务端及交互系统
CN109241341A (zh) * 2018-05-09 2019-01-18 上海大学 一种基于知识图谱的影视择优推荐系统和方法
CN108924658A (zh) * 2018-06-05 2018-11-30 上海哔哩哔哩科技有限公司 弹幕联想输入方法、装置及计算机可读存储介质
CN110740387A (zh) * 2019-10-30 2020-01-31 深圳Tcl数字技术有限公司 一种弹幕编辑方法、智能终端及存储介质

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113747241A (zh) * 2021-09-13 2021-12-03 深圳市易平方网络科技有限公司 基于弹幕统计的视频片段智能剪辑方法、装置、终端
CN113836350A (zh) * 2021-09-23 2021-12-24 深圳绿米联创科技有限公司 录像视频检索方法、系统、装置、存储介质及电子设备
CN113836350B (zh) * 2021-09-23 2024-02-27 深圳绿米联创科技有限公司 录像视频检索方法、系统、装置、存储介质及电子设备
CN113992994A (zh) * 2021-10-20 2022-01-28 游艺星际(北京)科技有限公司 弹幕的显示方法、装置、电子设备和存储介质
CN114491152A (zh) * 2021-12-02 2022-05-13 南京硅基智能科技有限公司 一种摘要视频的生成方法、存储介质、电子装置
CN114491152B (zh) * 2021-12-02 2023-10-31 南京硅基智能科技有限公司 一种摘要视频的生成方法、存储介质、电子装置
CN115243111A (zh) * 2022-07-05 2022-10-25 腾讯科技（北京）有限公司 视频弹幕生成方法、装置、存储介质及电子设备
CN115243111B (zh) * 2022-07-05 2024-06-11 腾讯科技（北京）有限公司 视频弹幕生成方法、装置、存储介质及电子设备
CN118474426A (zh) * 2024-05-29 2024-08-09 菏泽艾拉网络科技有限公司 一种直播视频数据智能处理系统及方法

Also Published As

Publication number Publication date
CN110740387A (zh) 2020-01-31
CN110740387B (zh) 2021-11-23

Similar Documents

Publication Publication Date Title
WO2021082668A1 (zh) 一种弹幕编辑方法、智能终端及存储介质
US10102284B2 (en) System and method for generating media bookmarks
US10714145B2 (en) Systems and methods to associate multimedia tags with user comments and generate user modifiable snippets around a tag time for efficient storage and sharing of tagged items
US9253511B2 (en) Systems and methods for performing multi-modal video datastream segmentation
US9888279B2 (en) Content based video content segmentation
WO2019157977A1 (zh) 演出片段的标注方法、视频播放方法、装置及系统
US9100701B2 (en) Enhanced video systems and methods
CN112740713B (zh) 用于提供多媒体内容中的关键时刻的方法及其电子设备
US9510044B1 (en) TV content segmentation, categorization and identification and time-aligned applications
US20160014482A1 (en) Systems and Methods for Generating Video Summary Sequences From One or More Video Segments
CN111683209A (zh) 混剪视频的生成方法、装置、电子设备及计算机可读存储介质
US9788084B2 (en) Content-object synchronization and authoring of dynamic metadata
CN109408672B (zh) 一种文章生成方法、装置、服务器及存储介质
Li et al. Bridging the semantic gap in sports video retrieval and summarization
US10897658B1 (en) Techniques for annotating media content
CN105981103A (zh) 经由分段列表浏览视频
WO2014103374A1 (ja) 情報管理装置、サーバ及び制御方法
Daneshi et al. Eigennews: Generating and delivering personalized news video
US20140189769A1 (en) Information management device, server, and control method
CN116781971B (zh) 视频播放方法及装置
Sawada Recast: an interactive platform for personal media curation and distribution
Liu et al. Web-based real time content processing and monitoring service for digital TV broadcast
JP2004157786A (ja) 映像インデックス生成方法及びプログラム及び映像インデックス生成プログラムを格納した記憶媒体
EP3044728A1 (en) Content based video content segmentation

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20881018

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20881018

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 20881018

Country of ref document: EP

Kind code of ref document: A1

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 21-09-22)