CN116506676A - 数据处理方法及相关产品 - Google Patents
数据处理方法及相关产品 Download PDFInfo
- Publication number
- CN116506676A CN116506676A CN202210083589.0A CN202210083589A CN116506676A CN 116506676 A CN116506676 A CN 116506676A CN 202210083589 A CN202210083589 A CN 202210083589A CN 116506676 A CN116506676 A CN 116506676A
- Authority
- CN
- China
- Prior art keywords
- video
- management
- node
- displaying
- target video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000012545 processing Methods 0.000 claims description 90
- 230000001960 triggered effect Effects 0.000 claims description 30
- 238000004590 computer program Methods 0.000 claims description 27
- 238000002372 labelling Methods 0.000 claims description 27
- 230000006870 function Effects 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 14
- 238000013519 translation Methods 0.000 claims description 12
- 230000011218 segmentation Effects 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 9
- 238000007726 management method Methods 0.000 description 330
- 238000010586 diagram Methods 0.000 description 44
- 238000013523 data management Methods 0.000 description 14
- 239000000463 material Substances 0.000 description 13
- 238000013473 artificial intelligence Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 11
- 238000003058 natural language processing Methods 0.000 description 10
- 230000009286 beneficial effect Effects 0.000 description 8
- 238000007667 floating Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 239000003550 marker Substances 0.000 description 5
- 238000012015 optical character recognition Methods 0.000 description 5
- 239000007787 solid Substances 0.000 description 5
- 230000006872 improvement Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000012916 structural analysis Methods 0.000 description 2
- 239000000969 carrier Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000013467 fragmentation Methods 0.000 description 1
- 238000006062 fragmentation reaction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 238000007794 visualization technique Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/4508—Management of client data or end-user data
- H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4856—End-user interface for client configuration for language selection, e.g. for the menu or subtitles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Digital Computer Display Output (AREA)
Abstract
本申请实施例公开了一种数据处理方法及相关产品,其中方法包括:显示目标视频的知识图谱详情界面;在知识图谱详情界面显示目标视频的视频知识图谱,视频知识图谱中按照层级结构展示目标视频和目标视频的关联信息。采用本申请实施例,丰富了视频相关信息的展示方式,有助于提高信息的获取效率。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种数据处理方法及相关产品。
背景技术
目前的主流信息媒介已从文本信息转为视频信息,对象在不同平台进行信息浏览时,可能获取到很多与对象已收藏或者已关注的目标视频相关的碎片化信息,比如与目标视频中某个主题相关的视频、图片以及文本;或者与目标视频全局相关的其他视频,这些碎片化信息可以看成是目标注视频的关联信息。
通常情况下,为了便于记录和整理目标视频和其关联信息,现有的常用做法是将这些内容添加到一个文件夹中,对象可以从文件夹中逐个打开不同信息来进行查看。这种方式无法直观地获取到目标视频和各个关联信息之间的关联关系,从而导致信息理解的效率较低。因此,在视频处理领域,如何整理目标视频和目标视频的关联信息以提高信息获取效率,成为研究的热点问题之一。
发明内容
本申请实施例提供了一种数据处理方法及相关产品,将目标视频及其关联信息整理成视频知识图谱形式进行展示,可以直观地展示信息之间的关联关系,有助于提升信息获取效率。
一方面,本申请实施例提供了一种数据处理方法,包括:
显示目标视频的知识图谱详情界面;
在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
一方面,本申请实施例还提供了一种数据处理装置,包括:
显示单元,用于显示目标视频的知识图谱详情界面;
显示单元,还用于在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
一方面,本申请实施例提供了一种数据处理设备,包括:处理器,适用于实现一条或多条计算机程序;计算机存储介质,所述计算机存储介质存储有一条或多条计算机程序,所述一条或多条计算机程序适于由处理器加载并执行:
显示目标视频的知识图谱详情界面;在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
一方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序被数据处理设备的处理器执行时,用于执行:显示目标视频的知识图谱详情界面;在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
一方面,本申请实施例提供了一种计算机程序产品或计算机程序,所述计算机程序产品包括计算机程序,该计算机程序可以指计算机程序,计算机程序存储在计算机存储介质中;数据处理设备的处理器从计算机存储介质中读取计算机程序,该处理器执行计算机程序,使得数据处理设备执行:
显示目标视频的知识图谱详情界面;在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种数据管理系统的结构示意图;
图2是本申请实施例提供的一种数据处理方法的流程示意图;
图3a是本申请实施例提供的一种视频管理界面的示意图;
图3b是本申请实施例提供的另一种视频管理界面的示意图;
图3c是本申请实施例提供的又一种视频管理界面的示意图;
图3d是本申请实施例提供的一种知识图谱详情界面;
图4是本申请实施例提供的一种视频知识图谱的示意图;
图5是本申请实施例提供的另一种数据处理方法的流程示意图;
图6a是本申请实施例提供的一种显示管理界面的示意图;
图6b是本申请实施例提供的另一种显示管理界面的示意图;
图7a是本申请实施例提供的一种显示目标视频对应的字幕的示意图;
图7b是本申请实施例提供的一种显示主题结构信息的示意图;
图7c是本申请实施例提供的一种显示关联区域的示意图;
图7d是本申请实施例提供的一种标注节点管理区的示意图;
图7e是本申请实施例提供的一种显示备注区的示意图;
图7f是本申请实施例提供的一种更新后视频知识图谱的示意图;
图8是本申请实施例提供的又一种数据处理方法的流程示意图;
图9a是本申请实施例提供的一种层级结构模板的选择界面的示意图;
图9b是本申请实施例提供的一种视频知识图谱编辑界面的示意图;
图9c本申请实施例提供的另一种视频知识图谱编辑界面的示意图;
图10a是本申请实施例提供的一种对知识图谱进行显示设置的示意图;
图10b是本申请实施例提供的另一种视频知识图谱的示意图;
图10c是本申请实施例提供的一种播放方式设置的示意图;
图11a是本申请实施例提供的一种对任一节点进行编辑的示意图;
图11b是本申请实施例提供的一种将节点相关的信息折叠的示意图;
图11c是本申请实施例提供的一种对节点相关的信息调整尺寸的示意图;
图12是本申请实施例中提供的一种分享视频知识图谱的示意图;
图13是本申请实施例提供的另一种数据处理系统的结构示意图;
图14是本申请实施例提供的一种数据处理装置的结构示意图;
图15是本申请实施例提供的一种数据处理设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
本申请在对目标视频以及目标视频的关联信息进行整理研究中发现,可以将知识图谱(Knowledge Graph)的概念应用到目标视频和关联信息的整理中,以一种可视化的方式显示目标视频和目标视频的关联信息之间的相互关联关系。知识图谱,在图书情报界称为知识域可视化或知识领域映射地图,是显示知识发展进程与结构关系的一系列各种不同的图形。换言之,知识图谱是利用可视化技术描述知识资源及其载体,挖掘、分析、构建、绘制和显示知识以及他们之间的相互联系。
本申请基于知识图谱提出了一种数据处理方案,将目标视频和目标视频的关联信息按照层级结构展示在视频知识图谱中。换言之,本申请中以目标视频为核心,以一定的层级结构将目标视频的关联信息比如视频、图片以及文字整理成相互关联的一个结构形态,将上述内容和结构形态称为目标视频的视频知识图谱。也就是说,从视频知识图谱中可以直观地获取到目标视频和关联信息之间的相互关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,从而有助于提高获取信息的效率。
在一个实施例中,上述数据处理方案可以应用在多种应用场景下,比如将上述数据处理方案集成到在线网站、视频应用、笔记应用、文件管理应用以及网页插件中,以使得相应的应用具有以视频知识图谱呈现视频的以及视频的关联信息的功能,从而可以提高各个应用的访问流量以及用户粘度。例如,上述数据处理方案可以用于网页的收藏夹中,当对象在某个网站中进行浏览时,可以将自己感兴趣的视频作为目标视频,在收藏夹中以该目标视频为核心,将该网站中浏览到与目标视频相关的关联信息比如视频、图片以及文字进行整合得到一个视频知识图谱,并将视频知识图谱展示给对象。
可选的,如果集成了上述数据处理方案的应用支持协同编辑,那么目标视频的视频知识图谱可以分享给多个协作对象,各个协作对象均可以对视频知识图谱进行编辑和管理,甚至对象之间可以通过协作的方式来创建视频知识图谱,实现了视频知识图谱的共享、共建,有助于为对象提供更为丰富的信息知识。本申请提供的这种视频相关信息编辑和整理的新形式,有助于提高信息整合效率,以及提高信息获取效率。
基于上述的数据处理方案,本申请实施例提供了一种数据管理系统,参见图1,为本申请实施例提供的一种数据处理系统的结构示意图,在图1所述的数据管理系统中可以包括数据处理设备101和数据管理服务器102,数据处理设备101和数据管理服务器102之间通过有线或者无线的方式进行连接。
数据处理设备101可以是终端设备,比如智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表、车载终端、智能家电、智能语音交互设备等;或者,数据处理设备101也可以是服务器,比如可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云计算服务的云服务器。同理的,数据管理服务器102可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云计算服务的云服务器。
在一个实施例中,数据处理设备101的使用对象可以在数据处理设备中创建目标视频的视频知识图谱,并在知识图谱详情界面中展示该目标视频的视频知识图谱,以使得使用对象可以通过视频知识图谱直观地了解到目标视频和目标视频的关联信息之间的相互关联关系。在创建目标视频的视频知识图谱时,使用对象上传的目标视频以及目标视频的关联信息均可以上传到数据管理服务器102中进行存储。数据管理服务器102还可以存储目标视频与关联信息之间的关联关系,以在数据处理设备101中更新了视频知识图谱中的层级结构时,可以根据数据管理服务器102中存储的关联关系更新显示视频知识图谱。
在一个实施例中,数据处理设备101还可以响应于在视频知识图谱中的管理操作,根据管理操作对目标视频进行管理,比如为目标视频的某个内容添加备注、为目标视频添加字幕等等;然后数据处理设备101根据管理界面中对目标视频的管理对视频知识图谱进行更新并显示更新后的视频知识图谱。
在图1所述的数据管理系统中,数据处理设备101可以将目标视频和目标视频的关联信息按照层级结构展示在视频知识图谱中。以目标视频为核心,以一定的层级结构将目标视频的关联信息比如视频、图片以及文字整理成相互关联的一个结构形态。由此可见,从视频知识图谱中可以直观地获取到目标视频和关联信息之间的相互关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,从而有助于提高获取信息的效率。
基于上述的数据处理方案和数据处理系统,本申请实施例提供了一种数据处理方法,参见图2,为本申请实施例提供的一种数据处理方法的流程示意图。图2所述的数据处理方法可由数据处理设备执行,具体可由数据处理设备的处理器执行。图2所述的数据处理方法可包括如下步骤:
步骤S201、显示目标视频的知识图谱详情界面。
其中,目标视频可以是任意一个视频,该目标视频可以是来自于网页,也可以是来自于数据处理设备的摄像应用,或者还可以是来自于任意一个视频应用程序。目标视频可以具有一个全局主题,全局主题能够对目标视频中的所有内容起到概括作用的主题,比如目标视频中内容包括了对自然语言处理技术的基础知识介绍和对计算机视觉技术的基础知识介绍,这两部分内容都是属于人工智能的,那么可以确定目标视频的全局主题是与人工智能相关的,可以将“人工智能的基础知识介绍”或者“人工智能简介”等类似的信息作为目标视频的全局主题。
目标视频还可以包括一个或多个局部主题(也可以称为视频主题),局部主题是指对目标视频中的局部内容起到概括作用的主题,在上个举例中,目标视频中对自然语言处理技术的基础知识介绍的内容对应的局部主题可以是自然语言处理技术,以及目标视频中对计算机视觉技术的基础知识介绍的内容对一个的局部主题可以是计算机视觉技术。
在一个实施例中,知识图谱详情界面是对视频管理界面中目标视频的相关信息输入了管理操作后触发显示的。
作为一种可选的实施方式,目标视频的相关信息可以包括目标视频的视频标识。参见图3a,为本申请实施例提供的一种视频管理界面的示意图,在图3a所示的视频管理界面中可以显示有目标视频的视频标识如图3a中311所示。基于目标视频的相关信息输入的管理操作可以是指目标视频的视频标识被触发。
作为另一种可选的实施方式,目标视频的相关信息还可以包括目标视频的视频知识图谱对应的知识图谱缩略图。参见图3b,为本申请实施例提供的另一种视频管理界面的示意图,312表示目标视频的视频知识图谱对应的知识图谱缩略图。
作为又一种可选的实施方式,目标视频的相关信息还可以包括视频知识图谱对应的文本提纲信息,文本提纲信息是指对视频知识图谱中包括的文本信息按照层级结构进行展示的一种纯文本信息。也就是说,文本提纲信息可以是只显示视频知识图谱的每个层级中的文本信息,或者,将每个层级中的内容转换成文本进行显示。参见图3c,为本申请实施例提供的又一种视频管理界面的示意图,313表示视频知识图对应的文本提纲信息。
当目标视频的相关信息包括知识图谱缩略图或者文本提纲信息时,视频管理界面还可以包括一个管理触发选项,比如图3b中314所示以及图3c中315所示。当管理选项被触发时,确定存在基于目标视频的相关信息输入的管理操作。
在一个实施例中,视频管理界面中显示的目标视频的相关信息是与视频管理界面中设置的对视频知识图谱的查看方式相对应的。查看方式包括视频缩略图方式、图谱预览方式以及文字列表方式。如果查看方式包括和视频缩略图方式,视频管理界面中显示的目标视频的相关信息可以是目标视频的视频标识;如果查看方式包括图谱预览方式,则视频管理界面中显示的目标视频的相关信息可以是视频知识图谱对应的知识图谱缩略图;如果查看方式是文本列表方式,那么视频管理界面中显示的目标视频的相关信息可以是视频知识图谱对应的文本提纲信息。
换言之,视频管理界面中可以包括视频缩略图方式、图谱预览方式以及文字列表方式,根据被选中的查看方式不同,视频管理界面中显示的目标视频的相关信息是不同的。举例来说,在图3a中,目标视频的相关信息是目标视频的频标识,此时视频管理界面中被选中的查看方式是视频缩略图方式如图3a中301所示;在图3b中,目标视频的相关信息是视频知识图谱的知识图谱缩略图,此时视频管理界面中被选中的查看方式是图谱预览方式如图3b中302所示;在图3c中,目标视频的相关信息是视频知识图谱对应的文本提纲信息,此时视频管理界面中被选中的查看方式是文字列表方式如图3c中303所示。
在一个实施例中,如果目标视频的相关知识图谱对应的相关信息是目标视频的视频知识图谱对应的知识图谱缩略图以及所述视频知识图谱对应的文本提纲信息,则视频管理界面中显示的目标视频的相关信息是在目标视频对应的知识图概要信息被触发时显示的。目标视频对应的知识图谱概要信息可以如下信息中任意一种或多种:目标视频的视频标识、目标视频的视频知识图谱中包括的视频类信息的数量、视频类信息的总时长、视频知识图谱中包括的文本类信息的数量、视频知识图谱中包括的图片类信息的数量等等。例如,在图3b中31表示指示目标视频的知识图谱概要信息,以及在图3c中32表示目标视频的知识图谱概要信息。从知识图谱概要信息中可以看出目标视频的视频知识图谱中可以包括27个视频类信息,视频类信息的总时长为30小时。
响应于在视频管理界面对目标视频的相关信息输入的管理操作,显示所述目标视频的知识图谱详情界面。参见图3d,为本申请实施例提供的一种知识图谱详情界面,031表示知识图谱详情界面,知识图谱详情界面可以包括工具栏如图3d中032所示,通过触发工具栏032可以设置知识图谱详情界面中显示的文本的字体形式、行间距等信息;知识图谱详情界面还可以包括退出选项如033所示,当触发选项033被选中时,退出显示知识详情界面,并可以切换为显示视频管理界面。知识图谱详情界面还可以包括视图大小的调整选项如034所示,触发该视图大小的调整选项034可以调整知识图谱详情界面中显示的内容的显示尺寸的大小。
步骤S202、在知识图谱详情界面显示目标视频的视频知识图谱,视频知识图谱中按照层级结构展示目标视频和目标视频的关联信息。
在一个实施例中,目标视频的关联信息可以包括如下任意一种或多种:与目标视频存在全局关联关系的其他视频,以及与目标视频存在局部关联关系的信息。与目标视频存在全局关联关系的其他视频具有与目标视频相同或者相似的全局主题,比如目标视频的全局主题是人工智能的基础知识介绍,那么其他视频的全局主题可以是人工智能的基础知识介绍,也可以是人工智能的应用举例。
与目标视频存在局部关联关系的信息可以指与目标视频中任意内容相关的信息,与任意内容相关的信息与任意内容之间具备从属、并列、解释、关联以及承接等关系。比如若目标视频中某个内容相关的信息可以是为该内容添加的备注或者标记,此时该内容与这些备注或者标记之间是属于解释关系的;再如目标视频中某个局部主题的内容相关的信息可以是与该局部主题的内容具有并列关系的视频、图片或者文本。
在一个实施例中,在无特殊说明的情况下,本申请下述提到的关联信息均是指与目标视频存在局部关联关系的信息。目标视频的视频知识图谱中可以包括按照层级结构展示的目标视频和目标视频的关联信息。层级结构可以包括如下结构中任意一种:树形结构、分割进度条结构、括号图结构、气泡结构以及双气泡结构。这些层级结构的具体表现形式在后面具体陈述。
视频知识图谱可以包括N个节点,这N个节点可以显示在层级结构的同一个层级中,参见图4,为本申请实施例提供的目标视频的视频知识图谱的示意图,在图4所示的视频知识图谱中包括的层级结构可以是分割进度条结构,A、B、C、D和E是指视频知识图谱中包括的5个节点,这5个节点是属于同一个层级的。可选的,数据处理设备的使用对象可以通过拖动层级结构中父子级的切换和顺序调整。比如通过拖动调换父层级和子层级,调换后父层级被为子层级,子层级变换为相应的父层级。
在一个实施例中,视频知识图谱中的一个节点与目标视频的播放进度指示轴上的一个播放时间点对应的,播放进度指示轴可以是指目标视频的时间轴,时间轴上包括多个时间点,每个时间点对应目标视频中的一段内容,比如图像和音频,那么一个播放时间点就是指一个时间点。例如,在图4所示的视频知识图谱中,可以显示目标视频的播放进度指示轴如图4中401所示,节点A对应的播放时间点是00:00:00,节点B对应的播放时间点可以是00:08:00;在具有其他层级结构的视频知识图谱中可以不显示播放进度指示轴,但是可以在每个节点处显示一个播放时间点。
每个节点对应一个节点内容,该节点内容可以是基于所述目标视频中与每个节点对应的播放时间点对应的内容确定的。每个播放时间点在目标视频中对应的内容可以包括图像、音频以及文本中任意一个或多个;节点内容包括节点文本和节点图像中任意一个。数据处理设备可以将目标视频中与每个节点对应的播放时间点所对应的内容中一帧图像作为节点图像,将目标视频中与包括播放时间点的预设播放时间段所对应内容中的音频和文本进行整合,作为每个节点的节点文本。比如对于一个节点来说,假设该节点对应的是播放时间点1,可以该播放时间点1前或后10秒内的音频转换成文本,并和这段时间内视频包括的文本进行整合,整合的结果作为该节点内容中包括的节点文本。或者,节点图像也可以是根据该节点对应的播放时间点前后一段时间内的多帧图像整合处理后得到的,采用这种方式得到的节点图像可以是GIF格式,当输入焦点停留在节点图像上时,可以播放GIF格式的节点图像。
在一个实施例中,与目标视频存在局部关联关系的信息具体是指与每个节点相关的信息,与所述每个节点相关的信息按照与相应节点的节点内容之间的关联度显示在节点所在层级的从属层级中。例如,各个节点的相关信息均显示在节点所在层级的从属层级中。比如节点A对应的节点相关的信息如图4中402所示,这些信息显示在节点A所在层级的从属层级中与节点A对应的位置处。
例如,目标视频的关联信息402中可以包括节点A相关的视频A、视频B以及一些链接,视频A与节点A的节点内容之间的关联度高于视频B与节点A的节点内容的关联度,视频B与节点A的节点内容之间的关联度高于链接与节点的节点内容之间的关联度,所以在图4所示的视频知识图谱中依次将视频A、视频B以及链接显示在节点A所在层级的从属层级中与节点A对应的位置处。
在一个实施例中,视频知识图谱的层级结构显示目标视频的层级是各个节点所在层级的父层级。如果目标视频的关联信息还包括与目标视频存在全局关联关系的其他视频,那么其他视频会和目标视频均显示在用于显示目标视频的层级中。
需要说明的是,上述描述中只是以视频知识图谱包括三个层级为例进行介绍,在实际应用中,如果目标视频的关联信息中还包括与任一节点相关的信息存在关联的信息,那么与任一节点相关的信息存在关联的信息需要显示在用于显示任一节点相关的信息的层级的从属层级中。也就是说,在视频知识图谱中,除了目标视频之外,存在关联关系的内容分别显示在存在父子关系的层级中,同一个层级中用于显示存在并列关系的信息。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
基于上述的数据处理方法,本申请实施例还提供了另一种数据处理方法,参见图5,为本申请实施例提供的一种数据处理方法的流程示意图。图5所述的数据处理方法可由数据处理设备执行,具体可由数据处理设备的处理器执行。图5所示的数据处理方法可包括如下步骤:
步骤S501、显示目标视频的知识图谱详情界面。
步骤S502、在知识图谱详情界面显示目标视频的视频知识图谱,视频知识图谱中按照层级结构展示目标视频和目标视频的关联信息。
在一个实施例中,步骤S501和步骤S502中包括的一些可行的实施方式可参见图2实施例中的详细描述,在此不再赘述。
步骤S503、响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱。
在视频知识图谱中的管理操作可以是指对目标视频进行播放的播放操作。具体地,在视频知识图谱中目标视频可以是处于暂停状态的,在视频知识图谱上显示一个播放控制按钮;当播放控制按钮被触发时,确定存在对目标视频的播放操作。举例来说,在图4中403表示目标视频,404表示播放控制按钮,若存在对播放控制按钮404的触发操作,则确定存在对目标视频进行播放的播放操作。应当理解的,播放控制按钮可以显示在目标视频上;或者,播放控制按钮还可以现在视频知识图谱的任意位置处,根据产品形态不同,播放控制按钮可能存在不同的显示形式和显示位置,本申请上述实施例只是列举了一种可能的情况,对于具体的显示形式和显示位置不做限定。
可选的,在视频知识图谱中的管理操作还可以是指视频知识图谱中包括一个对目标视频进行管理的触发选项;当该触发选项被选中时,可以确定视频知识图谱中存在管理操作。
在具体实现中,响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱。可以包括:响应于在所述视频知识图谱中的管理操作,显示对所述目标视频进行管理的管理界面;在所述管理界面执行对所述目标视频进行管理的管理操作,并显示所述管理操作对应的管理结果;基于所述管理结果更新显示所述视频知识图谱。
在一个实施例中,响应于视频知识图谱中的管理操作,显示对目标视频进行管理的管理界面可以是指:在视频知识图谱上浮层显示管理界面。所谓在视频知识图谱上浮层显示管理界面是指在视频知识图谱上添加一个浮层,在该浮层上显示管理界面。参见图6a,为本申请实施例提供的一种显示管理界面的示意图,601表示管理界面。
在一个实施例中,管理界面可以包括功能面板如图6a中602所示和播放区域如图6a中603所示,播放区域用于播放目标视频,功能面板包括对目标视频进行管理的管理选项,如602区域内所示的均为管理选项,管理选项可以包括字幕识别选项、结构分析选项、标注节点选项以及添加备注选项中任意一个或多个。
在其他实施例中,管理界面还可以包括知识图谱面板,知识图谱面板被折叠显示在管理界面中,如图6a中604表示折叠显示的知识图谱面板。知识图谱面板是用于显示目标视频的视频知识图谱的,当知识图谱面板被折叠时:目标视频的视频知识图谱只展示一部分。当知识图谱面板被折叠显示时,知识图谱中显示视频知识图谱的一部分内容是与目标视频当前的播放内容相关的内容。比如播放区域当前正在播放目标视频的第五视频主题下的内容,视频知识图谱第二视频主题的起始播放时间点处对应一个节点,即章节5,此时可以在知识图谱面板中显示与该章节5相关的信息。
或者,当知识图谱面板被折叠显示时,根据在知识图谱面板中输入的划动操作,在知识图谱面板中显示目标视频的视频知识图谱中与划动操作对应的内容。也就是说,可以通过在被折叠的知识图谱中通过划动来查看视频知识图谱的任意内容。
如果存在针对知识图谱面板的展开操作,则将知识图谱面板展开显示,并在知识图谱中显示目标视频的视频知识图谱。可选的,当知识图谱面板被折叠显示时,管理界面中可以存在一个与知识图谱面板对应的展开选项,如图6a中605所示,触发该展开选项605,确定存在针对所述知识图谱面板的展开操作。展开显示的知识图谱面板可如图6b中606所示。
可选的,当知识图谱面板被展开显示时,管理界面还可以包括一个与知识图谱面板对应的折叠选项如图6b中607所示,当该折叠行选项被触发时,知识图谱面板被折叠显示。
在一个实施例中,如果管理选项包括字幕识别选项,则显示与管理选项对应的管理结果可以是指:在功能面板中显示字幕管理区,并在字幕管理区显示目标视频对应的字幕。例如,参见图7a,为本申请实施例提供的一种显示目标视频对应的字幕的示意图,在图7a中,假设功能面板中的字幕识别选项被选中,则触发在功能面板中显示一个字幕管理区如图7a中701所示,在该字幕管理区内显示目标视频对应的字幕。
如果目标视频原本就包括了字幕内容,那么作为一种可选的实施方式,可以将目标视频包括的字幕内容作为字幕显示在字幕管理区。
作为另一种可选的实施方式,可以采用人工智能技术比如语音识别技术将目标视频中包括的音频内容识别为文本,将识别得到的文本与目标视频原有的字幕内容进行融合处理,得到目标视频对应的字幕。人工智能(Artificial Intelligence,AI)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。
作为又一种可选的实施方式,如果目标视频中内容包括文本内容,则可以采用文字识别技术对文本内容进行识别,然后将对文本内容的识别结果、音频转换得到的文本以及目标视频的原有字幕进行融合处理,得到目标视频对应的字幕。数据处理设备可以采用光学字符识别技术(Optical Character Recognition,OCR)技术对目标视频中文本内容进行识别,OCR是一种通过检测暗、亮的模式确定图像中字符形状,然后用字符识别方式将形状翻译成计算机文字的过程。对目标视频中包括的文本内容进行识别具体可以是:通过对目标视频的每一帧画面进行智能分析,提取包含不同文本内容的画面帧;优先进行本地OCR图片文字识别。对于较多的文字识别任务可以采取本地和上传网络结合的方式进行更快更精准的文本识别。识别完成的文字按照时间顺序在本地保存。
如果目标视频本身没有包括字幕,则语音识别技术对目标视频中音频内容进行转换处理,可以将转化得到的文本作为目标视频的字幕。如果目标视频还包括由文字内容,也可以将对文字内容的识别结果和对音频内容转化得到的文本进行融合处理,得到目标视频对应的字幕。
在一个实施例中,目标视频对应的字幕可以是与目标视频的播放进度对应的,比如目标视频的播放进度为播放到00:00:00-00:01:15这段视频内容时,显示的字幕是对这个时间段内的音频内容转换得到的文字。具体来说,在字幕管理区显示的字幕是分段显示的,每段字幕对应一个播放进度区间。每个播放进度区间对应的每段字幕是对该播放进度区间内的视频内容进行音频内容转化为文字。每个播放进度区间对应的播放进度区间具体是多少,可以是根据对目标视频中音频内容转换处理时决定的,对音频内容进行转换处理时,可以对音频内容进行分帧,每帧的时长就是一个播放进度区间的长度。
在一个实施例中,字幕管理区可以接收字幕管理操作,当字幕管理区接收到字幕管理操作时,可以显示与字幕管理操作对应的字幕管理结果。具实现中,字幕管理操作可以包括字幕翻译操作、字幕编辑操作以及字幕应用中任意一种或多种。可选的,字幕管理区可以包括翻译选项如图7a中702所示,当翻译选项被触发时确定存在字幕翻译操作;字幕管理区还可以包括字幕编辑选项如图7a中703所示,当字幕编辑选项703被选中时,确定存在字幕编辑操作;字幕管理区还包括字幕应用选项如图7a中704所示,当字幕应用选项被选中时确定存在字幕应用操作。
如果字幕管理操作包括字幕翻译操作,则显示与字幕管理操作对应的字幕管理结果是指在字幕管理区按照字幕管理操作所指示的语言显示目标视频对应的字幕。也就是说,字幕翻译操作是用于设置目标视频对应的字幕的语言的,比如按照用英语显示字幕、用汉语显示字幕以及或法语等其他语言显示字幕。具体实现中,当存在字幕翻译操作时,可以显示语言选择窗口,在该语言选择窗口中显示多种语言;在语言选择窗口中被选中的语言就是指字幕管理操作所指示的语言。
如果字幕管理操作包括字幕编辑操作,则显示与字幕管理操作对应的字幕管理结果是指:根据字幕编辑操作更新显示目标视频对应的字幕。对字幕编辑操作可以包括删除字幕中某个文本、在字幕中增加新的文本以及修改字幕中某个文本。具体实现中,在执行字幕编辑操作之前,字幕管理区中显示的字幕可以是处于允许查阅状态的;当存在字幕编辑操作时,将字幕由处于允许查阅状态更新为允许编辑状态,此时可以在字幕管理区对字幕进行编辑。
如果字幕管理操作包括字幕应用操作,则显示与字幕管理操作对应的字幕管理结果是指:在目标视频上显示目标视频对应的字幕。由前述可知,目标视频对应的字幕可以是分段显示的,每段字幕对应一个播放进度区间,那么在目标视频上显示目标视频对应的字幕具体可以是在目标视频上显示包括当前播放时间点的播放进度区间对应的字幕。
在一个实施例中,如果管理界面显示的管理选项包括结构分析选项,则显示与管理选项对应的管理结果,包括:在功能面板上显示结构管理区,并在结构管理区显示目标视频对应的主题结构信息。参见图7b,为本申请实施例提供的一种显示主题结构信息的示意图,在图7b中,711表示结构管理选项被选中时,触发显示的结构管理区。在该结构管理区中显示的内容就是目标视频的主题结构信息。主题结构信息用于表征目标视频中内容可以划分为几个章节,同一个章节内的内容具有相同的视频主题。假设目标视频中包括M个视频主题,主题结构信息可以包括目标视频中属于每个视频主题下的内容对应的文本。举例来说,目标视频包括视频主题A和视频主题B,目标视频中在00:00:00-00:30:00这个播放时间段内包括的内容是与视频主题A对应的,目标视频中在00:31:00-00:50:00这个播放时间段内包括的内容是与视频主题B对应的,那么00:00:00-00:30:00这个播放时间段内包括的内容对应的文本就是视频主题A对应的文本,同理的,00:31:00-00:50:00这个播放时间段内的内容对应的文本就是视频主题A对应的文本。
可选的,目标视频对应的主题结构信息可以是通过以下方式确定的:对目标视频中内容进行语音识别处理,将目标视频中内容转换为文本信息;然后采用自然语言处理技术对得到的文本信息进行整合分析,对文本信息进行视频主题的划分,最后得到目标视频对应的主题结构信息。其中,自然语言处理(NLP,Natural Language Processing)是研究人与计算机交互的语言问题的一门学科。NLP作为人工智能的核心课题之一,主要用于进行语言信息处理,本申请实施例中,主要利用NLP技术对目标视频中内容对应的文本信息进行整合分析,得到一个有组织关系的主题结构信息。
如果目标视频包括了M个视频主题,那么主题结构信息中包括M个视频主题对应的文本,比如在图7b中712所示的区域内显示了一个视频主题对应的文本,713所示的区域内显示了又一个视频主题对应的文本。为了方便在目标视频中快速定位到某个视频主题,本申请还可以在每个视频主题对应的文本处显示该视频主题在播放进度指示轴上的起始播放时间点。例如,在图7b中,712所示的区域内显示一个播放时间点00:00:00,说明712区域内所示的视频主题是从00:00:00这个播放时间点开始的;在713所示的区域内显示一个播放时间点00:03:00,说明713所示区域内的视频主题是从00:03:00这个播放时间点开始的。
每个视频主题对应的文本是按照相应文本所属文本类型对应的显示方式进行显示的。文本类型可以包括章节型文本、关键型文本、高频型文本以及主题型文本,每个文本类型对应的一个唯一的显示方式,比如章节型文本对应的显示方式可以是:采用黑色、楷体、无高亮来显示文本;再如,关键型文本对应的显示方式可以是:采用黑色、楷体、灰色高亮来显示文本。
在一个实施例中,为了方便了解在编辑管理区内,不同显示方式显示的文本分别都是属于哪种文本类型的,在结构管理界面还可以显示每种文本类型对应的文本类型标记,每种文本类型对应的文本类型标记和每种文本类型对应的显示方式相互关联的,比如章节型文本对应的显示方式为采用黑色、楷体、无高亮来显示文本,章节型文本对应的文本类型显示标记可以采用黑色的空心圆形表示,如图7b中714所示;再如,关键型文本对应的显示方式可以是:采用黑色、楷体、灰色高亮来显示文本,关键型文本对应的文本类型显示标记可以采用黑色灰色填充的圆形来表示,如图7b中715所示。对于其他文本类型本申请实施例不一一列举。上述也只是本申请实施例提供的一种可行的显示标记的表现形式,在实际应用中,根据产品的不同需求,可以采用任意合理的表现形式来标识每一种文本类型的显示标记以及显示方式。
在一个实施例中,结构管理区还可以用于接收结构管理操作,响应于结构管理区输入的结构管理操作,可以显示与结构管理操作对应的结构管理结果。其中,结构管理操作可以包括结构应用操作和结构编辑操作中任意一种或多种,结构管理区中可以显示有结构应用选项比如图7b中716所示,当结构应用选项716被触发时确定存在结构应用操作;结构管理区还可以显示有一个结构编辑选项如图7b中717所示,当结构编辑选项717被触发时确定存在结构编辑操作。
若管理结构操作包括结构应用操作,则显示与结构管理操作对应的管理结构结果是指:在播放区域中显示播放进度指示轴的关联区域,并在关联区域中显示主题结构信息的标记信息。其中,播放进度指示轴的关联区域可以是显示在播放进度指示轴的下方的,如图7c中071表示播放进度指示轴,072表示关联区域。或者该关联区域也可以显示在管理界面的任意位置。主题结构信息的标记信息包括主题标记(tag)和目标文本类型对应的文本类型标记,目标文本类型可以是指上述所提到的文本类型中任意一种或多种;关联区域可以包括主题标记行和目标文本类型对应的文本类型标记行,例如,在图7c中关联区域072内包括主题标记行如图7c中073所示以及显示有一个目标文本类型的文本标记行如图7c中074所示。
然后按照M个视频主题中每个视频主题在目标视频中出现的起始播放时间点的先后顺序在关联区域的主题标记行出显示M个主题标记。如果每个主题标记是使用黑色实心圆形表示的,在主题标记行072所示的区域内显示多个这种黑色实心圆形,每个黑色实心圆形对应了播放进度指示轴上一个播放时间点,也就是每个视频主题在目标视频中的起始播放时间点。以及在目标文本类型的标记行按照M个视频主题中属于该文本类型的文本在目标视频中的起始播放时间点,显示多个目标文本类型对应的文本类型标记,假设目标文本类型对应的文本类型标记采用灰色实心圆形表示,在图7c中073区域内显示的多个灰色实心圆形表示了每个属于目标文本类型的文本在目标视频中的起始播放时间点。
在一个实施例中,M个视频主题中每个视频主题对应的主题标记还可以显示在播放进度指示轴上。例如,在图7c中071上可以显示M个主题标记。
应当理解的,目标文本类型可以是上述的多个类型文本中任意一个或多个,在图7c中只是以目标文本类型是一个为例,实际中,目标文本类型还可以是所有的文本类型,此时,关联区域会目标文本类型对应的文本类型标记行会有多个,一个文本类型标记行用于显示一种文本类型标记,具体如何在一个文本类型标记行显示相应的文本类型标记,可参见上述举例,在此不再赘述。如果目标文本类型包括关键型文本、高频型文本以及主题标题型文本,那么在关联区域内还可以包括高频型文本对应的文本类型标记行以及主题标题型文本对应的文本类型标记行,在高频型文本对应的文本类型标记行以及主题标题型文本类型对应的文本类型标记行内依次按照属于相应文本类型的文本在目标视频中的播放进度时间点显示多个相应的文本类型标记。
可选的,如果目标文本类型的数量为多个,则在关联区域具体显示哪几个目标文本类型的文本类型标记可以是自定义设置的。具体地,在管理界面中显示每个目标文本类型对应的文本类型标记,每个文本类型标记可以对应一个选择标记,例如,在图7c中075所示内显示了多个目标文本类型的多个文本类型标记,每个文本类型标记对应的选择状态包括已选中状态和未选中状态;当一个文本类型标记对应的选择状态为已选中状态时,会在该文本类型标记的相邻位置处显示表征该文本类型已被选中的文字,比如“已作用”;当一个文本类型标记对应的选择状态为未选中状态时,该文本类型标记的相邻位置处可以不显示任何信息。最后,数据处理设备可以将选择状态为已选中状态的文本类型标记行显示关联区域,以及在该文本类型标记行中按照属于该种文本类型的文本在目标视频中的起始播放时间点显示多个该种文本类型标记。
若结构管理操作包括结构编辑操作,则显示与结构管理操作对应的结构管理结果是指根据结构编辑操作更新显示主题结构信息。结构编辑操作可以修改主题结构信息中包括的文本内容、或者修改主题结构。采用自然语言处理技术将目标视频进行了结构分析后,数据处理设备可以存储分析得到的每个视频主题的主题标记,这些主题标记可以把播放进度指示轴进行切分,将每两个相邻的主题标记对应的播放时间段的内容按照结构关系重组,也就是说按照视频主题的先后顺序显示主题结构信息。具体地,结构编辑操作可以是指对结构管理区内的结构编辑选项进行触发,结构编辑选项可以包括修改选项和新建选项;当选中修改选项时,编辑操作可以是修改主题结构信息中的文本内容以及现有的主题结构;如果选中新建选项,则可以新建一个主题结构。
在一个实施例中,管理选项还包括标注节点选项,显示与管理选项对应的管理结果,还可以包括:在功能面板上显示标注节点管理区,并在标注节点管理区中显示目标视频对应的主题结构信息,以及在主题结构信息中采用第一标记方式标示出每个节点对应的节点文本。参见图7d,为本申请实施例提供的一种标注节点管理区的示意图,在图7d中71表示标注节点管理区,71区域内显示有主题结构信息,第一标记方式可以包括特定颜色的下划线、双下划线等方式,71所示的区域内采用灰色下划线标示出了一个节点对应的节点文本。
标注节点管理区可以用于接收节点管理操作,响应于标注节点管理区的节点管理操作,显示与节点管理操作对应的节点管理结果。节点管理操作可以包括节点编辑操作和节点应用操作中任意一种或多种。可选的,标注节点管理区可以包括节点编辑选项如图7d中72所示,当节点编辑选项被触发时,确定存在节点编辑操作;标注节点管理区还可以包括节点应用选项如图7d中73,当节点应用选项被触发时,可以确定存在节点应用操作。可选的,数据处理设备可以预先为节点编辑操作和节点应用操作分别设置对应的手势或者语音指令,当在标注节点管理区输入了与节点编辑操作对应的手势或者语音指令,则确定存在节点编辑操作;以及,当在标注节点管理区内输入了与节点应用操作对应的手势或者语音指令,则确定存在节点应用操作。
如果节点管理操作包括节点应用操作,则显示与节点管理操作对应的节点管理结果是指:在播放进度指示轴上与每个节点对应的播放时间点处添加一个节点标记。在图7d中,071表示播放进度指示轴,在播放进度指示轴上与73区域内节点文本的起始播放时间点处显示一个节点标记74。
如果节点管理操作包括节点编辑操作,则显示与节点管理操作对应的管理结果是指根据节点编辑操作更新显示在主题结构信息中采用第一标记方式标示出的每个节点对应的节点文本。节点编辑操作可以具体是指修改每个节点对应的节点文本,比如删除每个节点对应的节点文本、新增文本或者对原本的文本进行修改等等。执行了节点编辑操作后,可以在标注节点管理区显示每个节点的最新的节点文本。如果执行了节点编辑操作后,某个节点的节点文本对应的起始播放时间点发生改变,比如原本某个节点的节点文本是指该节点的对应的播放时间点的前10秒内文本,那么在播放进度指示轴上,会在该节点的前的10秒处显示一个节点标记;在执行了节点编辑操作之后,如果该节点的节点文本对应的文本是指在该节点对应的播放时间点的前15秒内的文本,那么此时就需要修改播放进度指示轴上与该节点对应的节点标记所在位置。
在一个实施例中,如果管理选项包括添加备注选项,那么显示与管理选项对应的管理结果,可以包括:在功能面板中显示备注区;响应于为目标视频添加备注的备注操作,在备注区显示与备注操作对应的备注信息。参见图7e,为本申请实施例提供的一种显示备注区的示意图,当功能面板中的添加备注选项被选中时,在功能面板中显示一个备注区如图7e中7A所示。
其中,备注区可以包括第一备注类型如图7e中7B所示,可以表示为“独立”和第二备注类型如图7e中7C所示,可以表示为“插播”,独立是指不在目标视频的播放中添加备注,插播是指在目标视频的某个播放内容处添加备注。通过第一备注类型添加的备注可以是独立存储的,通过第二备注类型添加的备注是随着播放进度指示轴一同存储的,并且从播放进度指示轴上能够看到该备注具体是添加到目标视频的哪个播放进度处的。
当第一备注类型被选中时,备注操作可以是指在备注区输入信息;当第二备注类型被选中时,备注操作可以是指在播放进度指示轴上添加备注标记以及在备注区输入信息。备注操作对应的备注信息就是指备注区输入的信息。可选的,在播放进度指示轴上添加备注标记可以是:将输入焦点停留在播放进度指示轴上的某个播放时间点处,此时可以通过双击、单击或者长按等操作在该播放时间点处添加一个备注标记。需要说明的是,在备注区输入信息是指在备注区输入信息并在备注区执行了保存操作。比如在图7e中。备注区包括一个保存选项如7D所示,当保存选项被触发时,确定执行了保存操作。
与备注操作对应的备注信息可以是在备注区输入的信息,比如在图7e中,备注区输入的信息为“考点,注意复习”,这些信息就作为与备注操作对应的备注信息显示在备注区。
在一个实施例中,若在备注区中第二备注类型被选中,则在功能面板上可以显示一个备注关联区,并在备注关联区中显示目标视频的主题结构信息。参见图7e中,71表示备注关联区,在该备注关联区内显示有目标视频的主题结构信息,由前述可知,主题结构信息与播放进度指示轴具有对应关系。在主题结构的目标位置处显示备注标记,该目标位置是指主题结构信息中与播放进度指示轴上添加备注标记的播放时间点对应的位置。比如播放进度指示轴上添加备注标记的播放时间点为00:01:00,那么在主题结构信息中找到与该播放时间点对应的位置并且在该位置处显示一个备注标记。
在对目标视频进行上述各种管理时,播放区域的目标视频可以是处于播放状态或者暂停状态的。对目标视频进行了上述的管理后,可能有些管理可以反映到视频知识图谱中,因此可以根据对目标视频的管理结果。由前述描述可知,对目标视频的管理中,有些管理可能会影响到视频知识图谱,有些可能不会对视频知识图谱有影响。比如,如果视频知识图谱中的层级结构是分割进度条结构,在分割进度条结构中包括目标视频的播放进度指示轴,那么如果对目标视频的管理导致播放进度指示轴中增加了新的标记,比如增加了主题标记以及备注标记,那么就在视频知识图谱的播放进度指示轴上显示这些新的标记。参见图7f,为本申请实施例提供的一种更新后视频知识图谱的示意图,与图4所示的视频知识图谱相比,图7f的视频知识图谱中的播放进度指示轴上多了一些标记,这些标记具体可以是主题标记、备注标记等。如果对目标视频的管理未使得播放进度指示轴上增加新的节点,则可以保持视频知识图谱不变。
本申请实施例中,将目标视频和目标视频的关联信息按照层级结构展示在视频知识图谱中。换言之,本申请中以目标视频为核心,以一定的层级结构将目标视频的关联信息比如视频、图片以及文字整理成相互关联的一个结构形态,将上述内容和结构形态称为目标视频的视频知识图谱。也就是说,从视频知识图谱中可以直观地获取到目标视频和关联信息之间的相互关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,从而有助于提高获取信息的效率。另外,当视频知识图谱中存在管理操作时,可以响应于该管理操作显示管理界面,在管理界面对目标视频进行管理,最后可以根据管理界面的管理来更新视频知识图谱。对目标视频进行管理可以包括在目标视频中添加备注、笔记以及其他内容,根据对目标视频的管理更新视频知识图谱可以实现实时更新视频知识图谱中显示的关联信息,可保证信息获取的及时性。
基于上述的数据处理方法实施例,本申请实施例提供了另一种数据处理方法。参见图8,为本申请实施例提供的另一种数据处理方法的流程示意图,图8所述的数据处理方法可由数据处理设备执行,具体可由数据处理设备的处理器执行。图8所述的数据处理方法可包括如下步骤:
步骤S801、显示视频管理界面,该视频管理界面包括新建视频知识图谱的新建选项。
步骤S802、触发所述新建选项,显示视频知识图谱编辑界面;
步骤S803、将所述目标视频和所述目标视频的关联信息输入至所述视频知识图谱编辑界面中,得到所述目标视频的视频知识图谱。
如果视频管理界面中包括了目标视频的相关信息,则表明已经创建了目标视频的视频知识图谱,也就是说,只有创建了目标视频的视频知识图谱后,目标视频的相关信息才可以显示在视频管理界面中。下面具体介绍如何创建目标视频的视频知识图谱。
在未创建目标视频的视频知识图谱之前,视频管理界面可以包括一个新建知识图谱的新建选项;选中该新建选项以触发显示视频知识图谱编辑页面,将目标视频和目标视频的关联信息输入到视频知识图谱编辑界面中,以得到目标和视频的视频知识图谱。其中,选中新建选项以触发显示视频知识图谱编辑界面具体可以是:选中新建选项,触发显示一个层级结构模板的选择界面,该选择界面中可以包括多个层级结构模板;若任一层级结构模板被选中,则显示与任一层级结构模板对应的视频知识图谱编辑界面。
举例来说,在图3a中,901表示新建选项;当新建选项901被触发时,显示层级结构模板的选择界面如图9a所示,选择界面中可以包括树形结构模板、分割进度条结构模板、气泡模板、双气泡模板、括号图模板以及自定义模板等等。其中,自定义模板可以提供给数据处理设备的使用对象自行添加或者定义一些栅格,以形成一个自定义结构。或者,自定义模板还可以是使用对象将树形结构模板、分割进度条结构模板、气泡模板、双气泡模板、括号模板中任意两个或多个进行组合得到的。如果任一层级结构模板被选中,说明数据处理设备的使用对象想要以被选中的层级结构作为整理目标视频和关联信息的底板,则显示与任一层级结构模板对应的视频知识图编辑界面,以供数据处理设备的使用对象在视频知识图谱编辑界面中开始构建目标视频的视频知识图谱。
举例来说,如果被选中的任一层级结构模板是指分割进度条结构模板,则与分割进度条结构模板对应的视频知识图谱编辑界面可如图9b所示。视频知识图谱编辑界面可以包括用于显示目标视频的位置比如9b中990所示。下面以基于分割进度条结构模板创建目标视频的视频知识图谱为例介绍具体如何创建视频知识图谱。对于以其他结构模板创建目标的目标视频知识图谱的方式与基于分割进度条结构模板创建视频知识图谱的方式相似,可采用相同或相近方式进行创建。
作为一种可行的实施方式,将目标视频输入至视频知识图编辑界面中,可以包括如下方式:在9b所示的视频知识图谱编辑界面中,可以包括添加目标视频的添加选项,比如91和92所示,当91选项被触发时,可以从本地选择并上传目标视频;如果92选项被选中,则可以输入一个视频链接,数据处理设备将该视频链接传输给数据管理服务器,数据管理服务器找到该视频链接对应的视频并下载,然后将下载到的目标视频返回处理处理设备,以供数据处理设备将目标添加视频知识图谱编辑界面中。目标视频可以是数据管理服务器通过爬虫爬下的视频资源。在视频知识图谱界面中显示目标视频可以是指显示目标视频的视频标识,视频标识包括目标视频的标题以及封面中任意一个或多个,目标视频的封面以及标题可以是数据管理服务器在爬虫目标视频时获取到的。
作为另一种可行的实施方式,数据处理设备的使用对象可以直接在存储目标视频的文件夹中将目标视频拖拽至视频知识图谱中用于显示目标视频的位置990处。
在一个实施例中,将目标视频的关联信息输入至视频知识图谱编辑界面中,可以包括如下流程:在目标视频输入到视频知识图谱编辑界面后,视频知识图谱编辑界面会显示目标视频的播放进度指示轴如图9c中902所示,分割进度条模板中会默认在播放进度指示轴上显示一个节点比如903所示,以及该节点所在层级的从属层级下,与该节点对应的模板内容如图9c中904所示,这些模板内容可以根据需求进行修改,比如删除、修改内容类型例如将视频类内容修改为文本内容或者链接类内容。该节点也可以根据需求进行删除或者保留。如果该节点被保留,数据处理设备的使用对象可以将目标视频的关联信息中与该节点相关的信息通过拖拽或者其他添加方式以及按照一定的添加顺序依次添加到904所示的区域内。添加顺序可以是指按照节点相关的信息与节点内容的之间关联度由大到小的顺序,或者由小到大的顺序;添加顺序还可以是随机的顺序。
数据处理设备的对象可以在播放进度指示轴上的任意播放时间点执行添加节点的操作,然后将目标视频的关联信息中与新增的节点相关的信息按照上述方式添加到该节点的从属层级中。也就是说,播放进度指示轴上的节点可以增加以实现容纳目标视频的更新关联信息,并且每个节点的从属层级中也可以根据与增加节点相关的信息。
通过在视频知识图谱添加目标视频、添加节点、为节点添加相关的信息后,就可以得到一个属于目标视频的视频知识图谱。如果目标视频是一段长课程视频,该课程视频中包括了几个章节(视频主题)的内容,目标视频的关联信息是每个章节的内容有关的拓展和补充的短视频,通过上述方式创建的目标视频知识图谱具体可如图4所示。需要说明的是,本申请只是以视频知识图谱包括分割进度条结构为例,介绍了如何为目标视频创建视频知识图谱,当视频知识图谱包括其他层级结构时,可以采用上述相同或者相似的方式为目标视频创建视频知识图谱。
在视频知识图谱中,目标视频以及目标视频的关联信息是按照层级结构显示的,也就是说视频知识图谱可以包括多个层级,每个层级中可以显示不同的信息,这部分在前述具体介绍,在此不再赘述。数据处理设备的使用对象可以在视频知识图谱中设置哪些关联信息可以显示,哪些管理信息可以不显示。作为一种具体的实施方式,知识图谱详情界面中可以包括一个筛选选项;当该筛选选项被触发时,确定存在对视频知识图谱的显示设置操作。如果存在对视频知识图谱的显示设置操作则显示设置窗口,设置窗口中包括视频知识图谱包括的每个层级的层级标识,每个层级标识对应一个层级选择标记,层级选择标记包括已选中状态和未选中状态;将多个层级中目标层级中的信息进行显示,以及将其他层级中的信息进行折叠,目标层级对应的层级标识所对应的层级选择标记处于已选中状态,其他层级的层级标识对应的层级选择标记处于未选择状态。也就是说,在设置窗口中,可以选择视频知识图谱中哪些层级的信息被显示处理,哪些层级的信息被折叠起来。
举例来说,参见图10a,为本申请实施例提供的一种对知识图谱进行显示设置的示意图,1000表示知识图谱详情界面,1001表示筛选选项,当筛选选项1001被触发时,显示设置窗口如图10a中1002所示,1002中包括各个层级对应的层级标识,层级标识可以是指层级的名称或者根据层级在视频知识图谱的层级结构中所属层级顺序确定的,比如第一层级的层级标识为一级,第二层级的层级标识为二级等等。每个层级标识对应一个层级选择标记如图10a中一级对应的层级选择标记为1003所示,二级对应的层级选择标记为1004所示,1003所述的层级选择标记是处于已选中状态的,1004所示的层级选择标记是处于未选中状态的。假设目标视频是显示在层级结构的第一层级的,层级结构中的各个节点是处于第二层级的,如果按照10a设置窗口中的设置来显示视频知识图谱,那么在知识图谱详情界面中的视频知识图谱如图10b所示,只显示了目标视频和目标视频的播放进度指示轴,其他内容都进行了折叠。
在一个实施例中,目标视频的管理信息可以包括文本类信息、图片类信息。视频类信息、链接类信息中任意一种或多种,设置窗口中还可以包括每类信息对应的信息选择状态,每类信息对应的信息选择标记可以包括已选中状态和未选中状态,数据处理设备可以将目标层级中的目标类信息进行显示,目标类信息对应的信息选择标记为已选中状态。例如,在图10a中,1005表示文本类信息对应的信息选择标记,1006表示视频类信息对应的信息选择标记,1005所指示的信息选择标记可以是处于已选择状态,1006所指示的信息选择标记可以是处于未选中状态。
步骤S804、在视频管理界面中显示目标视频的相关信息,并基于目标视频的相关信息输入的管理操作,显示目标视频的知识图谱详情界面。
步骤S805、在知识图谱详情界面显示目标视频的视频知识图谱,视频知识图谱包括按照层级结构显示的目标视频和目标视频的关联信息。
在一个实施例中,步骤S802和步骤S803中包括的一些可行实施方式可参见图2实施例中以及图5实施例中相关步骤的描述,在此不再赘述。
可选的,视频知识图谱中包括的各个视频类信息是可以被播放的,这些视频类信息如何播放是依据预先设置的播放方式确定的。数据处理设备的使用对象可以通过播放设置窗口来设置播放方式。具体地,当知识图谱详情界面存在对视频知识图谱的播放设置操作时,显示播放窗口,该播放窗口中可以包括多种播放方式;若多种播放方式中任一播放方式被选中,则当存在对视频知识图谱的播放操作时,按照任一播放方式播放视频知识图谱包括的各个视频类信息。其中,知识图谱详情界面可以包括播放设置选项,当播放设置选项被触发时,确定存储对视频知识图谱的播放设置操作。
举例来说,参见图10c,为本申请实施例提供的一种播放方式设置的示意图,在图10c中110表示播放设置选项,当播放设置选项被触发时,显示播放设置窗口如图10c中111所示,播放设置窗口可以包括多种播放方式,比如层级顺序、节点展开顺序以及自定义顺序;可以在播放设置窗口选中任意一种播放方式。其中,层级顺序可以是先按序播放父层级的视频类信息,然后再依次播放每个父层级下的视频类信息。从图4所示的视频知识图谱可以看出来,播放指示进度轴上的N个节点中,每两个相邻节点组成一个视频片段,目标视频所在层级属于这些节点所在层级的父层级,这些节点所在层级属于每个节点相关的信息所在层级的父层级,所以如果按照层级顺序播放视频知识图谱,那么播放顺序可以是:先播放目标视频;然后依次播放每两个节点组成的视频片段;最后播放依次播放每个节点相关的信息中第一个视频、第二个视频、第三个视频。节点展开播放可以是指:先播放第一个节点和的第二个节点组成的视频片段,然后播放第一个节点相关的信息中视频类信息;再播放第二个节点和第三个节点组成的视频片段,播放第二个节点相关的信息中视频类信息,以此规律类推。
自定义播放可以指按照对象自定义的播放顺序播放视频知识图谱中的视频类信息。当自定义播放被选中时,可以显示播放顺序设置窗口如图10c中112所示,在112中显示有每个视频类信息对应的位置名称,比如视频知识图谱如图4所示,将播放进度指示轴上的各个节点按序称为主视频节点1,主视频节点2…主视频节点5,然后将主视频节点1下相关信息按序排列,主视频节点1-2可以是指主视频节点1下排列在第二位的视频类型信息,主视频节点2-3是指主视频节点2下排列在第三位的视频类信息。可以通过拖动这些位置名称来改变视频知识图谱中各个视频类信息的播放顺序。当输入焦点悬停在一个位置名称处时,该位置名称处可以显示一个跳过播放选项如图10c中113所示,如果跳过播放选项被触发,则表明该输入焦点所在位置名称对应的视频类信息不会被播放。
在播放顺序窗口设置了视频知识图谱中各个视频类信息的播放顺序后,可以点击播放顺序窗口中的应用选项以存储当前设置的播放顺序,当存在对视频知识图谱的播放操作时,按照存储的播放顺序来播放各个视频类信息。需要说明的是,在播放视频知识图谱中各个视频类信息时,如果某个节点被折叠了,那么该节点相关的信息中的各个视频类信息不会被播放。
在一个实施例中,如果视频知识图谱中存在对任一节点的编辑操作,则可以根据编辑操作来更新显示视频知识图谱。可选的,对任一节点执行双击、点击、长按等操作触发显示一个编辑窗口,编辑窗口中可以显示多个编辑选项,比如参见图11a,为本申请实施例提供的一种对任一节点进行编辑的示意图,1101表示对节点执行了双击、单击或者长按等操作触发显示的编辑窗口,该编辑窗口可以包括多个编辑选项,比如收起/展开选项、局部视图放大选项以及播放节点内容选项。对任一节点执行的编辑操作可以是通过触发这多个编辑选项中的任意一个或多个实现的。
如果收起/展开选项被触发,且任一节点相关的信息当前是被展开显示的,那么就将该任一节点相关的信息折叠显示如图11b所示;如果局部视图放大选项被选中,则会触发显示一个尺寸调整框比如图11c中1102所示,该尺寸调整框中包括增大尺寸的选项1103以及减小尺寸的选项1104,通过触发不同的选项来调整任一节点相关信息的显示尺寸。
如果播放节点内容选项被选中,则可以显示一个弹窗,在弹窗中播放任一节点下的视频类信息;或者,还可以在知识图谱详情界面添加一个浮层,在浮层上播放该任一节点下的视频类信息。或者,可以跳转到前述的管理界面,在管理界面的播放区域内播放任一节点下的视频类信息。再或者,知识图谱详情界面中还可以包括一个分屏显示的触发选项如图11a中0101所示,如果该选项被选中,且播放节点内容选项被选中,则可以将知识图谱详情界面进行分屏,分屏后的知识图谱详情界面一部分用来播放任一节点下的视频类信息,另外一部可以用于继续显示视频知识图谱。
在一个实施例中,视频知识图谱中每个节点下的内容可以根据对象的需求不断增加的,比如在图10c所示的视频知识图谱中,章节3这一节点下,可以包括添加内容的选项如图10c中0110所示,触发该选项可以显示一些可添加内容的内容类型的内容类型选项窗口如图10c中0111所示,可添加的内容类型文本、图片、视频以及链接等等。
在一个实施例中,知识图谱详情界面还可以包括视频知识图谱的显示尺寸调整选项,比如参见图11c中1105所示,通过触发该尺寸调整选项可以调整知识图谱详情界面中视频知识图谱的整体显示尺寸。比如通过显示尺寸调整选项将视频指知识图谱的整体显示尺寸调大。在调整后的知识图谱详情界面中,视频知识图谱的一部分内容未显示出来,此时可以通过在视频知识图谱中输入移动操作来查看未被显示的内容。
在一个实施例中,目标视频的视频知识图谱可以在不同对象之间传输,不同对象可以协作编辑和管理视频知识图谱。具体地,当存在对视频知识图谱的分享操作时,可以按照选中的分享方式将视频知识图谱分享至分享对象,以便于分享对象可以对视频知识图谱进行协作编辑或者共建视频知识图谱。
具体实现中,当存在对视频知识图谱的分享操作时,可以显示一个分享窗口如图12中1201所示,该分享窗口1201中可以包括分享方式选项,比如通过第一社交应用分享如1202所示、通过第二社交应用分享如1203所示以及通过复制链接或者生成图片的方式分享;当任一分享方式被选中时,还可以显示与该分享方式相关的多个对象标识,比如选中了第一社交应用分享方式,则显示如图12中1204内所示的多个对象标识,若多个对象标识中一个或多个对象标识被选中,且存在确认分享操作,则可以将被选中的对象标识所标识的对象确定为分享对象,并将视频知识图谱分享给分享对象。视频知识图谱的分享方式
在进行分享时,可以生成一个视频知识图谱对应的分享封面,通过该分享封面可以让协作对象直观地了解到该视频知识图谱,该分享封面可以是对象自定义的,也可以是通过人工智能的方式生成的,分享封面中可以包括视频知识图谱的一些关键词、视频结构、或者该可以是纯文本封面。
另外,视频知识图谱可以除了能被分享,还可以其他的传播方式比如导出,导出的形式可以包括但不限于:按照预设的播放顺序打包整合的视频或者视频组、视频结构图、视频知识图谱以及纯文字知识图谱等。导出的格式可以是多种多样的,可以类比视频处理软件photoshop既能导出.psd这样一种独有的具备各种再次编辑能力的格式,也能导出jpg或者png这样的能够直接浏览的格式。如果导出的是视频组,视频组是可交互视频,在视频组存在一些按钮或者链接供浏览者在视频组中切换各个视频。
本申请实施例中,将目标视频和目标视频的关联信息按照层级结构展示在视频知识图谱中。换言之,本申请中以目标视频为核心,以一定的层级结构将目标视频的关联信息比如视频、图片以及文字整理成相互关联的一个结构形态,将上述内容和结构形态称为目标视频的视频知识图谱。也就是说,从视频知识图谱中可以直观地获取到目标视频和关联信息之间的相互关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,从而有助于提高获取信息的效率。
基于上述的各个数据处理方法实施例,本申请实施例提供的另一种数据处理系统,参见图13,为本申请实施例提供的另一种数据处理系统的结构示意图,图13所示的数据处理系统可以包括素材储存模块1301、素材处理模块1302、数据保存模块1303以及再读取模块1304。素材储存模块1301是一个素材资源库,本质是多种格式的数据库,存储着对象添加的各种格式的数据,包括但不限于:各种格式的视频或者视频链接、字幕文件、音频文件、图片、文字、本地保存的和从网络上下载的各个视频的视频知识图谱。对象可以=这些素材这些增删改查等操作。素材在数据库中会进行预处理格式转换,比如从视频中提取出音频内容、将音频内容转换为文字内容、将视频中的文字自动检测、语义识别分析视频的主题结构、根据播放进度指示轴上的节点对视频分段等等;
素材处理模块1302与素材储存模块1301相连接,素材处理模块1302是对素材资源库中的素材进行分段提取,图片文字信息进行多种主题结构的关系重连接和重组织。也就是说,根据对象输入的对视频的主题结构的编辑操作可以存储不同的主题结构并呈现给对象。
数据保存模块1303和再读取模块1304分别可以与素材处理模块1302相连接,数据保存模块1303和再读取模块1304是对素材处理模块的结果进行保存和保存后的再次浏览分享等功能。
通过上述各个实施例的描述可见,本申请实施例提出的数据处理方法,对于对象来说,采用视频知识图谱来直观地反映目标视频及其关联信息之间从属、解释、关联、承接等关系,使得对象对视频信息进行整理以及吸收的方式得到较大提升,实现了将目前主体信息媒介,即视频,所提供的多维、碎片化信息整理为易吸收、易理解的知识体系,从而有助于更好地掌握信息。并且,在需要对目标视频以及关联信息进行浏览查阅时,视频知识图谱中所有内容均可以直观浏览,不必像现有技术中需要逐个打开文件,才能浏览到文件中内容,在一定程度上提高了信息获取效率。
本申请的上述数据处理方法可以应用在多种平台中,比如在线网站、视频软件、笔记软件、文件管理软件、网页Plugin(一种插件)等。比如应用在网页的收藏夹,对象在浏览内容时直接添加将感兴趣或者相关的内容添加到收藏夹的视频知识图谱中。应用在支持共享、在线浏览以协同编辑的平台中,将会大大提升平台流量,甚至可以产生以视频知识图谱为核心内容的新的网页形态。
基于上述的各个数据处理方法实施例,本申请实施例提供了一种数据处理装置。参见图14,为本申请实施例提供的一种数据处理装置的结构示意图。图14所示的数据处理装置可运行如下单元:
显示单元1401,用于显示目标视频的知识图谱详情界面;
显示单元1401,还用于在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
在一个实施例中,所述视频知识图谱包括层级结构,所述层级结构包括N个节点,所述N个节点位于同一层级,一个节点与所述目标视频的播放进度指示轴上的一个播放时间点对应;所述每个节点对应一个节点内容,所述每个节点的节点内容是基于所述目标视频中与所述每个节点对应的播放时间点对应的内容确定的;
所述目标视频的关联信息包括与所述每个节点相关的信息,与所述每个节点相关的信息按照与相应节点的节点内容之间的关联度显示在节点所在层级的从属层级中;所述目标视频显示在节点所在层级的父层级中。
在一个实施例中,所述层级结构包括如下结构中任意一种:树形结构、分割进度条结构、括号图结构、气泡结构以及双气泡结构。
在一个实施例中,显示单元1401,还用于响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱。
在一个实施例中,显示单元1401在响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱时,执行如下步骤:
响应于在所述视频知识图谱中的管理操作,显示对所述目标视频进行管理的管理界面;在所述管理界面执行对所述目标视频进行管理的管理操作,并显示所述管理操作对应的管理结果;基于所述管理结果更新显示所述视频知识图谱。
在一个实施例中,所述管理界面包括功能面板;所述功能面板包括对所述目标视频进行管理的管理选项;所述管理操作是指对所述管理选项进行触发;所述管理选项包括字幕识别选项、结构分析选项、标注节点选项以及添加备注选项中任意一个或多个。
在一个实施例中,若所述管理选项包括字幕识别选项,所述管理操作包括所述字幕识别选项被触发,则显示单元1401在显示所述管理操作对应的管理结果时,执行如下步骤:
在所述功能面板中显示字幕管理区,并在所述字幕管理区显示所述目标视频对应的字幕。
在一个实施例中,显示单元1401,还用于根据所述字幕管理区中输入的字幕管理操作,显示与所述字幕管理操作对应的字幕管理结果。
在一个实施例中,字幕管理操作包括字幕翻译操作、字幕编辑操作以及字幕应用操作中任意一种或多种;
若所述字幕管理操作包括所述字幕翻译操作,则显示单元1401在显示与所述字幕管理操作对应的字幕管理结果时:在所述字幕管理区按照所述字幕管理操作所指示的语言显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕编辑操作,则显示单元1401在显示与所述字幕管理操作对应的字幕管理结果时:根据所述字幕编辑操作更新显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕应用操作,则显示单元1401在显示与所述字幕管理操作对应的字幕管理结果时:在所述目标视频上显示所述目标视频对应的字幕。
在一个实施例中,若所述管理选项包括结构分析选项,则显示单元1401在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板上显示结构管理区,并在所述结构管理区中显示所述目标视频对应的主题结构信息。
在一个实施例中,显示单元1401,还用于当所述结构管理区中存在结构管理操作时,显示与所述结构管理操作对应的结构管理结果。
在一个实施例中,所述管理界面还包括播放区域,所述播放区域用于播放所述目标视频;所述结构管理操作包括结构应用操作和结构编辑操作中任意一种或多种;
若所述结构管理操作包括结构应用操作,则显示与所述结构管理操作对应的结构管理结果是指:在所述播放区域中显示所述播放进度指示轴的关联区域,并在所述关联区域显示所述主题结构信息的标记信息;
若所述结构管理操作包括结构编辑操作,则显示与所述结构管理操作对应的结构管理结果是指:根据所述结构编辑操作更新显示所述主题结构信息。
在一个实施例中,所述目标视频包括M个视频主题,M为正整数;所述主题结构信息包括每个视频主题对应的文本,每个视频主题对应的文本是指所述目标视频中属于每个视频主题下的内容对应的文本;每个视频主题对应的文本是按照所述文本所属文本类型对应的显示方式显示的;
所述主题结构信息的标记信息包括主题标记和目标文本类型对应的文本类型标记,所述关联区域包括主题标记行和目标文本类型对应的文本类型标记行,所述主题标记行和所述文本类型标记行,均与所述播放进度指示轴上的播放时间点一一对应;所述显示单元1401在所述关联区域显示所述主题结构信息的标记信息时,执行如下步骤:
按照所述每个视频主题的起始播放时间点依次在所述主题标记行显示M个主题标记,以及按照属于所述目标文本类型下的文本在所述目标视频中的起始播放时间点,在所述目标文本类型标记行显示多个所述目标类型文本的文本类型标记。
在一个实施例中,所述显示单元1401还用于:
在所述播放进度指示轴上,与所述每个视频主题对应的起始播放时间点处显示一个主题标记;以及在所述播放进度指示轴上,与所述每个视频主题的内容中主题标题对应的起始播放时间点处显示一个主题标题标记。
在一个实施例中,若所述每个节点的节点内容包括节点文本,若所述管理选项包括标注节点选项,则显示单元1401在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板上显示标注节点管理区,并在所述标注节点管理区中显示所述目标视频对应的主题结构信息,以及在所述主题结构信息中采用第一标记方式标示出每个节点对应的节点文本。
在一个实施例中,显示单元1401还用于当所述标注节点管理区存在节点管理操作时,显示与所述节点管理操作对应的节点管理结果。
在一个实施例中,所述节点管理操作包括节点编辑操作和节点应用操作中任意一种或多种;
若所述节点管理操作包括所述节点应用操作,则显示与所述节点管理操作对应的节点管理结果是指:在所述播放进度指示轴上与所述每个节点对应的播放时间点处添加一个节点标记;
若所述节点管理操作包括所述节点编辑操作,则显示与所述节点管理操作对应的管理结果是指:根据所述节点编辑操作更新显示在所述主题结构信息中采用第一标记方式标示出的每个节点对应的节点文本。
在一个实施例中,若所述管理选项包括添加备注选项,则显示单元1401在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板中显示备注区;响应于为所述目标视频添加备注的备注操作,在所述备注区显示与所述备注操作对应的备注信息。
在一个实施例中,所述备注区包括第一备注类型和第二备注类型;当所述第一备注类型被选中时,所述备注操作是指在所述备注区输入信息;当所述第二备注类型被选中时,所述备注操作是指在所述播放进度指示轴上添加备注标记以及在所述备注区输入信息;所述备注操作对应的备注信息是指所述备注区输入的信息。
在一个实施例中,若所述第二备注类型被选中,则显示单元1401还用于:
在所述功能面板中显示备注关联区,并在所述备注关联区中显示所述目标视频的主题结构信息,所述主题结构信息与所述播放进度指示轴具有对应关系;
在所述主题结构信息中目标位置处显示备注标记,所述目标位置是指所述主题结构信息中与所述播放进度指示轴上添加备注标记的播放时间点对应的位置。
在一个实施例中,若所述目标视频的视频知识图谱的层级结构包括分割进度条结构,所述分割进度条结构中包括所述目标视频的播放进度指示轴,所述显示单元1401在基于所述管理结果更新显示所述视频知识图谱时,执行如下步骤:
若所述管理结果指示在所述管理界面中所述播放进度指示轴上增加了新的标记,则将新的标记显示在所述视频知识图谱中的播放进度指示轴上;所述新的标记包括如下任意一种或多种:主题标记、主题标题标记以及备注标记;
若所述管理结果指示在所述管理界面中播放进度指示轴上未增加新的标记,则保持所述视频知识图谱不变。
在一个实施例中,显示单元1401还用于:当所述知识图谱详情界面中存在对所述视频知识图谱的播放设置操作时,显示播放设置窗口,所述播放设置窗口包括多种播放方式;
若所述多种播放方式中任一播放方式被选中,则当存在对所述视频知识图谱的播放操作时,按照所述任一播放方式播放所述视频知识图谱包括的各个视频类信息;所述任一播放方式包括按层级顺序播放、按节点展开顺序播放以及自定义播放。
在一个实施例中,数据处理装置还包括分享单元1402,分享单元1402用于当存在对所述视频知识图谱的分享操作时,按照选中的分享方式将所述视频知识图谱分享至分享对象,以当所述分享对象打开所述视频知识图谱时,对所述视频知识图谱进行协作编辑。
根据本申请的一个实施例,图2、图5以及图8所示的数据处理方法所涉及各个步骤可以是由图14所示的数据处理装置中的各个单元来执行的。例如,图2所述的步骤S201和步骤S202均可由图14所示的数据处理装置中的显示单元1401来执行;再如,图5所述的各个步骤以及图8实施例中的各个步骤均可由图14所示的数据处理装置中显示单元1401来执行。
根据本申请的另一个实施例,图14所示的数据处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,基于数据处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2、图5以及图8所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图14中所示的数据处理装置,以及来实现本申请实施例数据处理方法。所述计算机程序可以记载于例如计算机可读存储介质上,并通过计算机可读存储介质装载于数据处理设备中,并在其中运行。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
参见图15,为本申请实施例提供的一种数据处理设备的结构示意图。图15所述的数据处理设备可包括处理器1501、输入接口1502、输出接口1503以及计算机存储介质1504。其中,处理器1501、输入接口1502、输出接口1503以及计算机存储介质1504可通过总线或其他方式连接。
计算机存储介质1504可以存储在消息处理设备的存储器中,所述计算机存储介质1504用于存储计算机程序,所述处理器1501用于执行所述计算机存储介质1504存储的计算机程序。处理器1501(或称CPU(Central Processing Unit,中央处理器))是数据处理设备的计算核心以及控制核心,其适于实现一条或多条计算机程序,具体适于加载并执行:
显示目标视频的知识图谱详情界面;
在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
本申请实施例还提供了一种计算机存储介质(Memory),所述计算机存储介质是数据处理设备的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机存储介质既可以包括数据处理设备的内置存储介质,当然也可以包括数据处理设备所支持的扩展存储介质。计算机存储介质提供存储空间,该存储空间存储了数据处理设备的操作系统。并且,在该存储空间中还存放了适于被处理器1501加载并执行的一条或多条的计算机程序。需要说明的是,此处的计算机存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器;可选的还可以是至少一个位于远离前述处理器的计算机存储介质。
在一个实施例中,所述计算机存储介质中存储的一条或多条计算机程序可有处理器1501加载并执行:
显示目标视频的知识图谱详情界面;
在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
在一个实施例中,所述视频知识图谱包括层级结构,所述层级结构包括N个节点,所述N个节点位于同一层级,一个节点与所述目标视频的播放进度指示轴上的一个播放时间点对应;所述每个节点对应一个节点内容,所述每个节点的节点内容是基于所述目标视频中与所述每个节点对应的播放时间点对应的内容确定的;
所述目标视频的关联信息包括与所述每个节点相关的信息,与所述每个节点相关的信息按照与相应节点的节点内容之间的关联度显示在节点所在层级的从属层级中;所述目标视频显示在节点所在层级的父层级中。
在一个实施例中,所述层级结构包括如下结构中任意一种:树形结构、分割进度条结构、括号图结构、气泡结构以及双气泡结构。
在一个实施例中,所述处理器1501还用于执行:
响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱。
在一个实施例中,所述处理器1501在所述响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新所述视频知识图谱时,执行如下步骤:
响应于在所述视频知识图谱中的管理操作,显示对所述目标视频进行管理的管理界面;在所述管理界面执行对所述目标视频进行管理的管理操作,并显示所述管理操作对应的管理结果;
基于所述管理结果更新显示所述视频知识图谱。
在一个实施例中,所述管理界面包括功能面板;所述功能面板包括对所述目标视频进行管理的管理选项;所述管理操作是指对所述管理选项进行触发;所述管理选项包括字幕识别选项、结构分析选项、标注节点选项以及添加备注选项中任意一个或多个。
在一个实施例中,若所述管理选项包括字幕识别选项,所述管理操作包括所述字幕识别选项被触发,则处理器1501在显示所述管理操作对应的管理结果,时,执行如下步骤:
在所述功能面板中显示字幕管理区,并在所述字幕管理区显示所述目标视频对应的字幕。
在一个实施例中,处理器1501还用于根据所述字幕管理区中输入的字幕管理操作,显示与所述字幕管理操作对应的字幕管理结果。
在一个实施例中,字幕管理操作包括字幕翻译操作、字幕编辑操作以及字幕应用操作中任意一种或多种;
若所述字幕管理操作包括所述字幕翻译操作,则处理器1501在显示与所述字幕管理操作对应的字幕管理结果时:在所述字幕管理区按照所述字幕管理操作所指示的语言显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕编辑操作,则处理器1501在显示与所述字幕管理操作对应的字幕管理结果时:根据所述字幕编辑操作更新显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕应用操作,则处理器1501在显示与所述字幕管理操作对应的字幕管理结果时:在所述目标视频上显示所述目标视频对应的字幕。
在一个实施例中,若所述管理选项包括结构分析选项,则处理器1501在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板上显示结构管理区,并在所述结构管理区中显示所述目标视频对应的主题结构信息。
在一个实施例中,处理器1501,还用于当所述结构管理区中存在结构管理操作时,显示与所述结构管理操作对应的结构管理结果。
在一个实施例中,所述管理界面还包括播放区域,所述播放区域用于播放所述目标视频;所述结构管理操作包括结构应用操作和结构编辑操作中任意一种或多种;
若所述结构管理操作包括结构应用操作,则显示与所述结构管理操作对应的结构管理结果是指:在所述播放区域中显示所述播放进度指示轴的关联区域,并在所述关联区域显示所述主题结构信息的标记信息;
若所述结构管理操作包括结构编辑操作,则显示与所述结构管理操作对应的结构管理结果是指:根据所述结构编辑操作更新显示所述主题结构信息。
在一个实施例中,所述目标视频包括M个视频主题,M为正整数;所述主题结构信息包括每个视频主题对应的文本,每个视频主题对应的文本是指所述目标视频中属于每个视频主题下的内容对应的文本;每个视频主题对应的文本是按照所述文本所属文本类型对应的显示方式显示的;
所述主题结构信息的标记信息包括主题标记和目标文本类型对应的文本类型标记,所述关联区域包括主题标记行和目标文本类型对应的文本类型标记行,所述主题标记行和所述文本类型标记行均与所述播放进度指示轴上的播放时间点一一对应;所述处理器1501在所述关联区域显示所述主题结构信息的标记信息时,执行如下步骤:
按照所述每个视频主题的起始播放时间点依次在所述主题标记行显示M个主题标记,以及按照属于所述目标文本类型下的文本在所述目标视频中的起始播放时间点,在所述目标文本类型标记行显示多个所述目标类型文本的文本类型标记。
在一个实施例中,所述处理器1501还用于:
在所述播放进度指示轴上,与所述每个视频主题对应的起始播放时间点处显示一个主题标记;以及在所述播放进度指示轴上,与所述每个视频主题的内容中主题标题对应的起始播放时间点处显示一个主题标题标记。
在一个实施例中,若所述每个节点的节点内容包括节点文本,若所述管理选项包括标注节点选项,则显示单元1401在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板上显示标注节点管理区,并在所述标注节点管理区中显示所述目标视频对应的主题结构信息,以及在所述主题结构信息中采用第一标记方式标示出每个节点对应的节点文本。
在一个实施例中,处理器1501还用于当所述标注节点管理区存在节点管理操作时,显示与所述节点管理操作对应的节点管理结果。
在一个实施例中,所述节点管理操作包括节点编辑操作和节点应用操作中任意一种或多种;
若所述节点管理操作包括所述节点应用操作,则显示与所述节点管理操作对应的节点管理结果是指:在所述播放进度指示轴上与所述每个节点对应的播放时间点处添加一个节点标记;
若所述节点管理操作包括所述节点编辑操作,则显示与所述节点管理操作对应的管理结果是指:根据所述节点编辑操作更新显示在所述主题结构信息中采用第一标记方式标示出的每个节点对应的节点文本。
在一个实施例中,若所述管理选项包括添加备注选项,则处理器1501在显示与所述管理选项对应的管理结果时,执行如下步骤:
在所述功能面板中显示备注区;响应于为所述目标视频添加备注的备注操作,在所述备注区显示与所述备注操作对应的备注信息。
在一个实施例中,所述备注区包括第一备注类型和第二备注类型;当所述第一备注类型被选中时,所述备注操作是指在所述备注区输入信息;当所述第二备注类型被选中时,所述备注操作是指在所述播放进度指示轴上添加备注标记以及在所述备注区输入信息;所述备注操作对应的备注信息是指所述备注区输入的信息。
在一个实施例中,若所述第二备注类型被选中,则处理器1501还用于:
在所述功能面板中显示备注关联区,并在所述备注关联区中显示所述目标视频的主题结构信息,所述主题结构信息与所述播放进度指示轴具有对应关系;
在所述主题结构信息中目标位置处显示备注标记,所述目标位置是指所述主题结构信息中与所述播放进度指示轴上添加备注标记的播放时间点对应的位置。
在一个实施例中,若所述目标视频的视频知识图谱的层级结构包括分割进度条结构,所述分割进度条结构中包括所述目标视频的播放进度指示轴,所述处理器1501在基于所述管理结果更新显示所述视频知识图谱时,执行如下步骤:
若所述管理结果指示在所述管理界面中所述播放进度指示轴上增加了新的标记,则将新的标记显示在所述视频知识图谱中的播放进度指示轴上;所述新的标记包括如下任意一种或多种:主题标记、主题标题标记以及备注标记;
若所述管理结果指示在所述管理界面中播放进度指示轴上未增加新的标记,则保持所述视频知识图谱不变。
在一个实施例中,处理器1501还用于:当所述知识图谱详情界面中存在对所述视频知识图谱的播放设置操作时,显示播放设置窗口,所述播放设置窗口包括多种播放方式;
若所述多种播放方式中任一播放方式被选中,则当存在对所述视频知识图谱的播放操作时,按照所述任一播放方式播放所述视频知识图谱包括的各个视频类信息;所述任一播放方式包括按层级顺序播放、按节点展开顺序播放以及自定义播放。
在一个实施例中,处理器1501还用于当存在对所述视频知识图谱的分享操作时,按照选中的分享方式将所述视频知识图谱分享至分享对象,以当所述分享对象打开所述视频知识图谱时,对所述视频知识图谱进行协作编辑。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
本申请实施例还提供了一种计算机程序产品或计算机程序,所述计算机程序产品中包括计算机程序,所述计算机程序存储在计算机存储介质中;所述计算机程序被处理器1501加载并执行:
显示目标视频的知识图谱详情界面;在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
本申请实施例中,将目标视频和目标视频的关联信息以视频知识图谱的形式进行显示在知识图谱详情界面中,有助于对象在易吸收、易理解的关联信息中形成知识体系,从而更好、直观地获取到关联信息与目标视频之间的关联关系,并且可以从视频知识图谱中可以直接查阅和浏览关键信息,提高获取信息的效率。
Claims (25)
1.一种数据处理方法,其特征在于,包括:
显示目标视频的知识图谱详情界面;
在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
2.如权利要求1所述的方法,其特征在于,所述视频知识图谱包括层级结构,所述层级结构包括N个节点,所述N个节点位于同一层级,一个节点与所述目标视频的播放进度指示轴上的一个播放时间点对应;所述每个节点对应一个节点内容,所述每个节点的节点内容是基于所述目标视频中与所述每个节点对应的播放时间点对应的内容确定的;
所述目标视频的关联信息包括与所述每个节点相关的信息,与所述每个节点相关的信息按照与相应节点的节点内容之间的关联度显示在节点所在层级的从属层级中;所述目标视频显示在节点所在层级的父层级中。
3.如权利要求2所述的方法,其特征在于,所述层级结构包括如下结构中任意一种:树形结构、分割进度条结构、括号图结构、气泡结构、双气泡结构以及自定义结构。
4.如权利要求1所述的方法,其特征在于,所述方法还包括:
响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新显示所述视频知识图谱。
5.如权利要求4所述的方法,其特征在于,所述响应于在所述视频知识图谱中的管理操作,基于所述管理操作更新所述视频知识图谱,包括:
响应于在所述视频知识图谱中的管理操作,显示对所述目标视频进行管理的管理界面;
在所述管理界面执行对所述目标视频进行管理的管理操作,并显示所述管理操作对应的管理结果;
基于所述管理结果更新显示所述视频知识图谱。
6.如权利要求5所述的方法,其特征在于,所述管理界面包括功能面板;所述功能面板包括对所述目标视频进行管理的管理选项;所述管理操作是指对所述管理选项进行触发;所述管理选项包括字幕识别选项、结构分析选项、标注节点选项以及添加备注选项中任意一个或多个。
7.如权利要求6所述的方法,其特征在于,若所述管理选项包括字幕识别选项,所述管理操作包括所述字幕识别选项被触发,则显示所述管理操作对应的管理结果,包括:
在所述功能面板中显示字幕管理区,并在所述字幕管理区显示所述目标视频对应的字幕。
8.如权利要求7所述的方法,其特征在于,所述方法还包括:
根据所述字幕管理区中输入的字幕管理操作,显示与所述字幕管理操作对应的字幕管理结果。
9.如权利要求8所述的方法,其特征在于,所述字幕管理操作包括字幕翻译操作、字幕编辑操作以及字幕应用操作中任意一种或多种;
若所述字幕管理操作包括所述字幕翻译操作,则显示与所述字幕管理操作对应的字幕管理结果是指:在所述字幕管理区按照所述字幕管理操作所指示的语言显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕编辑操作,则显示与所述字幕管理操作对应的字幕管理结果是指:根据所述字幕编辑操作更新显示所述目标视频对应的字幕;
若所述字幕管理操作包括字幕应用操作,则显示与所述字幕管理操作对应的字幕管理结果是指:在所述目标视频上显示所述目标视频对应的字幕。
10.如权利要求6所述的方法,其特征在于,若所述管理选项包括结构分析选项,则所述显示与所述管理选项对应的管理结果,包括:
在所述功能面板上显示结构管理区,并在所述结构管理区中显示所述目标视频对应的主题结构信息。
11.如权利要求10所述的方法,其特征在于,所述方法还包括:
当所述结构管理区中存在结构管理操作时,显示与所述结构管理操作对应的结构管理结果。
12.如权利要求11所述的方法,其特征在于,所述管理界面还包括播放区域,所述播放区域用于播放所述目标视频;所述结构管理操作包括结构应用操作和结构编辑操作中任意一种或多种;
若所述结构管理操作包括结构应用操作,则显示与所述结构管理操作对应的结构管理结果是指:在所述播放区域中显示所述播放进度指示轴的关联区域,并在所述关联区域显示所述主题结构信息的标记信息;
若所述结构管理操作包括结构编辑操作,则显示与所述结构管理操作对应的结构管理结果是指:根据所述结构编辑操作更新显示所述主题结构信息。
13.如权利要求12所述的方法,其特征在于,所述目标视频包括M个视频主题,M为正整数;所述主题结构信息包括每个视频主题对应的文本,每个视频主题对应的文本是指所述目标视频中属于每个视频主题下的内容对应的文本;每个视频主题下的内容对应的文本按照所述文本所属文本类型对应的显示方式进行显示;
所述主题结构信息的标记信息包括主题标记和目标文本类型对应的文本类型标记,所述关联区域包括主题标记行和目标文本类型对应的文本类型标记行,所述主题标记行和所述文本类型标记行,均与所述播放进度指示轴对应;所述在所述关联区域显示所述主题结构信息的标记信息,包括:
按照所述每个视频主题的起始播放时间点依次在所述主题标记行上显示M个主题标记,以及按照属于所述目标文本类型下的文本在所述目标视频中的起始播放时间点,在所述目标文本类型标记行上显示多个所述目标类型文本的文本类型标记。
14.如权利要求13所述的方法,其特征在于,所述每个视频主题对应一个主题标题,所述方法还包括:
在所述播放进度指示轴上,与所述每个视频主题对应的起始播放时间点处显示一个主题标记;以及在所述播放进度指示轴上,与所述每个视频主题的内容中主题标题对应的起始播放时间点处显示一个主题标题标记。
15.如权利要求6所述的方法,其特征在于,若所述每个节点的节点内容包括节点文本,若所述管理选项包括标注节点选项,则所述显示与所述管理选项对应的管理结果,包括:
在所述功能面板上显示标注节点管理区,并在所述标注节点管理区中显示所述目标视频对应的主题结构信息,以及在所述主题结构信息中采用第一标记方式标示出每个节点对应的节点文本。
16.如权利要求15所述的方法,其特征在于,所述方法还包括:
当所述标注节点管理区存在节点管理操作时,显示与所述节点管理操作对应的节点管理结果。
17.如权利要求16所述的方法,其特征在于,所述节点管理操作包括节点编辑操作和节点应用操作中的任意一种或多种;
若所述节点管理操作包括所述节点应用操作,则显示与所述节点管理操作对应的节点管理结果是指:在所述播放进度指示轴上与所述每个节点对应的播放时间点处添加一个节点标记;
若所述节点管理操作包括所述节点编辑操作,则显示与所述节点管理操作对应的管理结果是指:根据所述节点编辑操作更新显示在所述主题结构信息中采用第一标记方式标示出的每个节点对应的节点文本。
18.如权利要求6所述的方法,其特征在于,若所述管理选项包括添加备注选项,则显示与所述管理选项对应的管理结果,包括:
在所述功能面板中显示备注区;
响应于为所述目标视频添加备注的备注操作,在所述备注区显示与所述备注操作对应的备注信息。
19.如权利要求18所述的方法,其特征在于,所述备注区包括第一备注类型和第二备注类型;当所述第一备注类型被选中时,所述备注操作是指在所述备注区输入信息;当所述第二备注类型被选中时,所述备注操作是指在所述播放进度指示轴上添加备注标记以及在所述备注区输入信息;所述备注操作对应的备注信息是指在所述备注区输入的信息。
20.如权利要求19所述的方法,其特征在于,若所述第二备注类型被选中,则所述方法还包括:
在所述功能面板中显示备注关联区,并在所述备注关联区中显示所述目标视频的主题结构信息,所述主题结构信息与所述播放进度指示轴具有对应关系;
在所述主题结构信息中目标位置处显示备注标记,所述目标位置是指所述主题结构信息中与所述播放进度指示轴上添加备注标记的播放时间点对应的位置。
21.如权利要求6-20任一项所述的方法,其特征在于,若所述目标视频的视频知识图谱的层级结构包括分割进度条结构,所述分割进度条结构中包括所述目标视频的播放进度指示轴,所述基于所述管理结果更新显示所述视频知识图谱,包括:
若所述管理结果指示在所述管理界面中所述播放进度指示轴上增加了新的标记,则将新的标记显示在所述视频知识图谱中的播放进度指示轴上;所述新的标记包括如下任意一种或多种:主题标记、主题标题标记以及备注标记;
若所述管理结果指示在所述管理界面中播放进度指示轴上未增加新的标记,则保持所述视频知识图谱不变。
22.如权利要求2所述的方法,其特征在于,所述方法还包括:
当所述知识图谱详情界面中存在对所述视频知识图谱的播放设置操作时,显示播放设置窗口,所述播放设置窗口包括多种播放方式;
若所述多种播放方式中任一播放方式被选中,则当存在对所述视频知识图谱的播放操作时,按照所述任一播放方式播放所述视频知识图谱包括的各个视频类信息;所述任一播放方式包括按层级顺序播放、按节点展开顺序播放以及自定义播放。
23.如权利要求1所述的方法,其特征在于,所述方法还包括:
当存在对所述视频知识图谱的分享操作时,按照选中的分享方式将所述视频知识图谱分享至分享对象,以当所述分享对象打开所述视频知识图谱时,对所述视频知识图谱进行协作编辑。
24.一种数据处理装置,其特征在于,包括:
显示单元,用于显示目标视频的知识图谱详情界面;
所述显示单元,用于在所述知识图谱详情界面显示目标视频的视频知识图谱,所述视频知识图谱中按照层级结构展示所述目标视频和所述目标视频的关联信息。
25.一种数据处理设备,其特征在于,包括:
处理器,适于实现一条或多条指令;以及,
计算机存储介质,所述计算机存储介质存储有一条或多条计算机程序,所述一条或多条计算机程序适于由所述处理器加载并执行如权利要求1-23任一项所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210083589.0A CN116506676A (zh) | 2022-01-21 | 2022-01-21 | 数据处理方法及相关产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210083589.0A CN116506676A (zh) | 2022-01-21 | 2022-01-21 | 数据处理方法及相关产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116506676A true CN116506676A (zh) | 2023-07-28 |
Family
ID=87321852
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210083589.0A Pending CN116506676A (zh) | 2022-01-21 | 2022-01-21 | 数据处理方法及相关产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116506676A (zh) |
-
2022
- 2022-01-21 CN CN202210083589.0A patent/CN116506676A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200026751A1 (en) | Narrative-based media organizing system for transforming and merging graphical representations of digital media within a work area | |
CN105723358B (zh) | 用于交互式站点与应用的自动转换的系统和方法 | |
US20110161792A1 (en) | Producing interactive documents | |
JP2002055748A (ja) | 情報処理方法及び装置 | |
US9529438B2 (en) | Printing structured documents | |
CN113535176A (zh) | 一种页面生成方法及装置 | |
US20110197162A1 (en) | Method and system for organizing information with sharable user interface | |
JP2007011513A (ja) | 文書表示装置、文書表示方法並びにプログラムおよび記録媒体 | |
US11314757B2 (en) | Search results modulator | |
US9977772B1 (en) | Method and system for cellular text processor and display | |
US9652456B2 (en) | Automated relationship management for darwin information typing architecture | |
Fischer et al. | Brassau: automatic generation of graphical user interfaces for virtual assistants | |
CN110020279B (zh) | 页面数据处理方法、装置及存储介质 | |
CN116974431A (zh) | 一种文档的显示控制方法、装置、电子设备和存储介质 | |
CN116506676A (zh) | 数据处理方法及相关产品 | |
CN104036028A (zh) | 一种电子文档信息片段的处理系统与电子文档信息片段的生成、处理、差异化显示的方法 | |
CN114595191A (zh) | 网页处理方法、装置、电子设备及存储介质 | |
WO2013156066A1 (en) | A computer implemented method for changing a first site s into a second site s' | |
JP2011186573A (ja) | 画像生成システム及び画面定義装置及び画像生成装置及び画面定義プログラム及び画像生成プログラム | |
US11762898B1 (en) | Generating and utilizing digital media clips based on contextual metadata from digital environments | |
CN115964989B (zh) | 电子表格的信息显示方法、装置及存储介质 | |
US20230315971A1 (en) | Generating and utilizing digital media clips based on contextual metadata from digital environments | |
CN118467761B (zh) | 将应用作为元素植入思维导图的ai装置及方法 | |
US20230315972A1 (en) | Generating and utilizing digital media clips based on contextual metadata from digital environments | |
CN117472251A (zh) | 一种文档查看方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40089541 Country of ref document: HK |