CN118075568A - 信息展示方法、装置、电子设备和计算机可读存储介质 - Google Patents
信息展示方法、装置、电子设备和计算机可读存储介质 Download PDFInfo
- Publication number
- CN118075568A CN118075568A CN202211485542.3A CN202211485542A CN118075568A CN 118075568 A CN118075568 A CN 118075568A CN 202211485542 A CN202211485542 A CN 202211485542A CN 118075568 A CN118075568 A CN 118075568A
- Authority
- CN
- China
- Prior art keywords
- text
- video
- key
- content
- playing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 79
- 238000003860 storage Methods 0.000 title claims abstract description 18
- 239000012634 fragment Substances 0.000 claims abstract description 147
- 230000009466 transformation Effects 0.000 claims abstract description 64
- 238000005457 optimization Methods 0.000 claims description 46
- 239000013598 vector Substances 0.000 claims description 46
- 238000012549 training Methods 0.000 claims description 22
- 238000011156 evaluation Methods 0.000 claims description 21
- 238000012545 processing Methods 0.000 claims description 19
- 238000013507 mapping Methods 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 11
- 238000012216 screening Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 4
- 238000012163 sequencing technique Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract description 22
- 230000001976 improved effect Effects 0.000 abstract description 18
- 230000000007 visual effect Effects 0.000 abstract 1
- 230000000694 effects Effects 0.000 description 19
- 238000005516 engineering process Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 239000000284 extract Substances 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000013473 artificial intelligence Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 238000007654 immersion Methods 0.000 description 3
- 230000009191 jumping Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 206010013911 Dysgeusia Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007664 blowing Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000012966 insertion method Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请实施例公开了一种信息展示方法、装置、电子设备和计算机可读存储介质。该方法包括:在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。本申请实施例通过图形片段与文本内容的无缝衔接,使得用户可以在视频界面中结合图形片段来阅读文本内容,从而能够多样、直观地展示文本内容,提高用户阅读文本内容的兴趣、体验感和用户转化率。
Description
技术领域
本申请涉及计算机技术领域,具体涉及一种信息展示方法、装置、计算机设备和可读存储介质。
背景技术
随着计算机和互联网技术的飞速发展,越来越多的畅销出版物、网络小说等文学作品会通过短视频广告进行展示、推广。
然而,文学作品的短视频广告通常是播放一些剪辑的图片或动画后,弹出阅读该文学作品的提示或链接。该方式对文学作品的展示和介绍的效果较差,很难激发用户的阅读兴趣,进而用户大概率不会选择阅读该文学作品,导致推广效果差、用户转化率较低。
发明内容
本申请实施例提供一种信息展示方法、装置、电子设备和计算机可读存储介质,能够提高用户阅读文本内容的兴趣、体验感和用户转化率。本申请实施例第一方面提供一种信息展示方法,所述方法包括:
在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
相应地,本申请实施例第二方面提供另一种信息展示方法,所述方法包括:
在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
相应地,本申请实施例第二方面提供一种信息展示装置,所述装置包括:
视频播放单元,用于在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
文本帧播放单元,用于当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
进度确定单元,用于响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
可选地,所述信息展示装置还包括:
目标进度确定单元,用于确定目标进度,所述目标进度为所述图形片段播放完毕时对应的视频播放进度;
图文切换单元,用于响应于所述用户对所述视频界面中进度条的控制操作,根据所述目标进度,在所述视频界面中对所述图形片段与所述文本帧进行切换。
可选地,所述信息展示装置还包括:
文本界面跳转控件显示单元,用于当所述视频播放结束,在所述视频界面中显示所述文本内容对应的文本界面跳转控件;
文本界面切换单元,用于响应于所述用户点击所述文本界面跳转控件,将所述视频界面切换至所述文本内容的文本界面。
可选地,所述进度确定单元具体用于:
获取所述图形片段播放完毕至所述视频播放结束的时长,所述时长包括多个播放时刻;
获取每个所述播放时刻对应的播放内容;
将所述播放内容与所述播放时刻进行映射,得到所述跳转文本帧与所述视频播放进度之间的映射关系;
根据所述映射关系,以及所述变换操作对应的视频播放进度,确定显示的所述跳转文本帧。
可选地,所述信息展示装置还包括:
关键文本获取单元,用于获取关键文本,所述关键文本提取自所述文本内容,以及所述文本内容的评价信息;
生成单元,根据所述关键文本,以及所述用户的兴趣偏好,生成所述图形片段和所述文本帧序列。
可选地,所述关键文本获取单元包括:
初始关键文本获取子单元,用于获取多个初始关键文本,所述初始关键文本包括所述文本内容,以及所述文本内容的评价信息;
第一关键文本筛选子单元,用于通过评分模型对所述多个初始关键文本进行评分,筛选出第一关键文本;
第一关键样本优化子单元,用于对所述第一关键样本进行优化处理,得到所述关键文本。
可选地,所述第一关键样本优化子单元包括:
第二关键文本输出子单元,用于将所述第一关键文本输入至第一文本优化模型,对所述第一关键文本中的字向量进行编码排序后,输出第二关键文本;
关键文本获取子单元,用于将所述第二关键文本输入至第二文本优化模型,得到所述关键文本。
可选地,所述信息展示装置还包括:
关键意见角色文本获取单元,用于获取关键意见角色文本、第一关键文本和第二关键文本,所述关键意见角色文本为关键意见角色对所述文本内容作出的评价;
中间关键文本获取单元,用于以所述关键意见角色文本为正样本、所述第一关键文本和所述第二关键文本为负样本,训练初始第二文本优化模型,得到中间关键文本;
第二文本优化模型获取单元,用于以所述关键意见角色文本为正样本、所述中间关键文本为负样本,迭代训练所述初始第二文本优化模型,直至满足训练完成条件,得到训练好的所述第二文本优化模型。
可选地,所述生成单元还具体用于:
获取所述关键文本的关键文本向量;
根据所述用户的兴趣偏好信息和所述关键文本向量,生成兴趣偏好向量;
计算所述关键文本向量与所述兴趣偏好向量的相似度,获取所述相似度大于阈值的关键文本向量所对应的关键文本;
根据所述关键文本,从视频素材库提取所述图形片段,以及从所述文本内容提取所述文本帧序列,构成所述视频界面的显示内容。
可选地,所述视频界面包括用于显示所述图形片段和所述文本帧的第一区域,以及用于显示其他信息的第二区域,所述信息展示装置还包括:
第一提示信息显示单元,用于当所述视频界面首次显示所述文本帧时,在所述第一区域显示执行所述变换操作的提示信息,在所述第二区域显示执行视频切换操作的提示信息;
显示内容确定单元,响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容。
可选地,所述显示内容确定单元具体用于:
在所述图形片段播放完毕之前,响应于所述用户在所述第一区域或所述第二区域的所述视频切换操作,将所述视频切换为其他视频;
在所述图形片段播放完毕之后,响应于所述用户在所述第一区域的所述变换操作,显示所述跳转文本帧;
在所述图形片段播放完毕之后,响应于所述用户在所述第二区域的所述视频切换操作,将所述视频切换为所述其他视频。
可选地,所述信息展示装置还包括:
第二提示信息显示单元,用于当所述文本帧播放至预设进度,在所述第一区域显示执行文本界面跳转操作的提示信息;
文本界面切换子单元,用于响应于所述用户执行所述文本界面跳转操作,从所述视频界面切换至所述文本界面。
本申请实施例第三方面提供的一种电子设备,包括处理器和存储器,所述存储器存储有多条指令,所述处理器加载所述指令,以执行本申请实施例提供的信息展示方法中的步骤。
本申请实施例第四方面还提供一种计算机可读存储介质,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本申请实施例所提供的任一种信息展示方法中的步骤。
本申请实施例第五方面还提供一种计算机程序产品,包括计算机程序或指令,所述计算机程序或指令被处理器执行时实现本申请实施例所提供的任一种信息展示方法。
由此可知,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、直观、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本申请实施例提供的信息展示方法的场景示意图;
图1b是本申请实施例提供的信息展示方法的流程示意图;
图1c是本申请实施例提供的信息展示方法的另一流程示意图;
图2a是本申请实施例提供的视频界面播放图形片段的示意图;
图2b是本申请实施例提供的视频界面播放文本帧的示意图;
图2c是本申请实施例提供的显示文本界面跳转操作提示信息的示意图;
图2d是本申请实施例提供的显示变换操作提示信息的示意图;
图2e是本申请实施例提供的显示视频切换操作提示信息的示意图;
图2f是本申请实施例提供的显示文本界面跳转控件的示意图;
图3是本申请实施例提供的信息展示装置的结构示意图;
图4是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种信息展示方法、装置、电子设备和存储介质。
其中,该信息展示装置具体可以集成在电子设备中,该电子设备可以为终端、服务器等设备。其中,终端可以为手机、平板电脑、智能蓝牙设备、笔记本电脑、台式电脑、智能电视、车载设备等设备;服务器也即服务器,服务器可以是单一服务器,也可以是由多个服务器组成的服务器集群或云服务器。
在一些实施例中,该信息展示装置还可以集成在多个电子设备中,比如,信息展示装置可以集成在多个客户端或服务器中,由多个服务器来实现本申请的信息展示方法。
例如,参考图1a,该电子设备可以为应用本申请实施例的服务器,也可以为其他能够执行本申请实施例的各种终端。
如图1a所示,以终端和服务器共同执行信息展示方法为例。本申请实施例提供的信息展示系统包括终端10和服务器11等;终端10与服务器11之间通过网络连接,比如,通过有线或无线网络连接等,其中,信息装置可以集成在终端中。
其中,终端10,可以用于:在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。其中,终端10可以包括手机、智能电视、平板电脑、笔记本电脑、或个人计算机(PC,PersonalComputer)等。终端10上还可以设置客户端,该客户端可以是应用程序客户端或者浏览器客户端等等。
上述终端10执行信息展示方法的步骤,也可以由服务器11执行。
本申请实施例提供的信息展示方法涉及人工智能领域中的计算机视觉技术。本申请实施例可以提升用户阅读文本内容的兴趣、体验感,以及后续继续阅读的用户转化率。
其中,人工智能(AI,Artificial Intelligence)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。其中,人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等方向。
其中,计算机视觉技术(CV,Computer Vision)是一门研究如何使机器“看”的科学,更进一步的说,就是指用摄影机和电脑代替人眼对目标进行识别、检测和测量等机器视觉,并进一步做图形处理,使电脑处理成为更适合人眼观察或传送给仪器检测的图像。作为一个科学学科,计算机视觉研究相关的理论和技术,试图建立能够从图像或者多维数据中获取信息的人工智能系统。计算机视觉技术通常包括图像处理、图像识别、图像语义理解、图像检索、OCR、视频处理、视频语义理解、视频内容/行为识别、三维物体重建、3D技术、虚拟现实、增强现实、同步定位与地图构建等技术,还包括常见的人脸识别、指纹识别等生物特征识别技术。
以下分别进行详细说明。需说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
另外,本申请实施例中的“多个”指两个或两个以上。本申请实施例中的“第一”和“第二”等用于区分描述,而不能理解为暗示相对重要性。
以下分别进行详细说明。需要说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
该信息展示方法可以由终端或服务器单独执行,也可以由终端和服务器共同执行,在本申请各实施例中,以该方法由终端执行为例进行说明。
请参阅图1b,在本实施例中,提供了一种信息展示方法,如图1b所示,该信息展示方法具体流程可以如下:
步骤101、在视频界面播放视频。
其中,本申请的视频可以包括图形片段和文本帧序列,图形片段可以与文本内容所相关,文本内容可以包括文本帧的内容。
其中,文本内容可以是畅销书、出版物、网络文学等任意类型的文学作品的内容。可以理解,在本申请的短视频推广场景中,为了方便用户阅读,文本内容可以以电子版书籍、电子文档的形式在视频界面中展示。
其中,图形片段可以为与文本内容相关的多个连续展示的静态图片、动态图片,也可以为与文本内容相关的一段视频。在一些实施例中,还可以在图形片段中加入字幕、背景音乐、阅读旁白、朗读音效、文本内容中男女主角的对话、氛围音效等视听增益效果。
在一些实施例中,以上视听增益效果的具体内容可以与图形片段所展示的内容相对应,例如,当图形片段展示文本内容中男女主角追赶他人的画面时,可以在图形片段中加入男女主角的对话、快节奏的背景音乐,或者语气紧张的朗读音效等视听增益效果,以加强图形片段与文学内容的关联程度,提升用户的视听体验感,从而激发用户对文学作品的阅读兴趣。
请参阅图2a至图2f,如图2a所示,视频界面中的视频正在播放与文本内容相关的图形片段,在视频界面中显示出该文本内容的标题为《九部曲之歌》,该文本内容中包含描写“星光森林”的部分,则视频中的当前播放内容可以为与森林相关的图形片段,并配上与“星光森林”相关的文字,还可以进一步地为该图形片段配上与“星光森森林”相关的朗读旁白、微风吹动树叶的音效等,以契合“星光森林”部分的文本内容,能够帮助用户通过图形片段所展示的内容了解文本内容的主题、类型、风格和故事梗概等信息。
其中,文本帧序列可以由多个文本帧组成,文本内容可以包括文本帧的内容。可以理解,由于本申请的视频可以播放文本帧序列,因此可以将文本内容插入视频的视频帧中以形成文本帧序列,每一个或多个视频帧对应一个文本帧,使得每个文本帧相当于文本内容的一部分内容,例如文本帧对应的内容可以为文本内容的一页、一段文字等。
在一些实施例中,文本帧可以通过图片的形式插入视频,例如文本帧可以是文本内容的一页截图、长截图等。具体地,可以将文本帧的图片按照文本内容的阅读顺序进行排列,并与视频播放进度相对应,以组成文本帧序列。
在一些实施例中,文本帧序列可以通过文字的形式插入视频,以便于用户可以直接对视频中的文本帧进行文本处理操作,例如对文本帧进行复制、粘贴、翻译和标记等。
具体地,视频应用开发人员可以通过开发者工具配置文字形式插入文本帧的方法、组件,并添加到视频的服务器中。在视频作者添加文本帧时,视频的服务器可以通过以上方法或组件,将文本帧的文字添加到对应的字段中即可。
在一些实施例中,还可以通过以上方法或组件,从图片形式的文本帧中提取出对应的文字,再对提取的文字进行复制、粘贴、翻译和标记等文本处理操作。
在一些场景中,如图2b所示,当视频播放至文本帧的部分时,以文字形式插入视频的文本帧为例,用户可以执行文本帧交互操作,例如用户可以通过长按、点选等操作选中文本帧中的文字,再进一步地对选中的文字进行复制、粘贴、翻译和标记等文本处理操作。以图片形式插图视频的文本帧为例,用户仍然可以执行文本帧交互操作,例如用户可以通过长按操作触发提取文本帧中文字的操作,再通过点选、划定范围等操作选中文本帧中的文字,再对选中的文字进行文本处理操作。
由此,本申请先在视频中播放与文本内容相关的图形片段,在图形片段之后播放文本帧来引发用户阅读文本内容的兴趣,用户在视频中阅读文本帧的同时,还能够对文本帧的文字内容进行编辑、处理,实现用户在视频中执行文本阅读应用程序中的文本处理操作,以提升用户阅读文本内容的体验感和沉浸感。
如图2b所示,视频界面中可以显示视频播放进度,例如视频播放到1秒、5秒等。当视频播放至文本帧对应的进度时,可以在视频界面中显示文本帧,使得用户可以在同一个视频中观看图形片段和文本帧,通过阅读文本帧来了解图形片段在文本内容中的真实描写。
可选地,在步骤101之前,本申请的方法还可以包括以下步骤:
获取关键文本,所述关键文本提取自所述文本内容,以及所述文本内容的评价信息;
根据所述关键文本,以及所述用户的兴趣偏好,生成所述图形片段和所述文本帧序列。
其中,关键文本可以为关键词、关键语句和关键段落等。其中,文本内容的评价信息可以为作者总结出的卖点、推荐点,或者其他书友给出的评价、划线分享内容、分享理由等。在一些实施例中,可以在文本内容和评价信息中提取文本后,再对提取文本进行优化处理,得到更优质、更准确的关键文本,再与用户的兴趣偏好相结合,生成具有个性化、针对性推荐属性的图形片段和文本帧序列。例如,用户的兴趣偏好为阅读武侠类文学作品,则可以选择当下热门的武侠类的文本内容,结合该文本内容的关键文本,生成武侠元素浓重的图形片段和文本帧。
可选地,服务器可以基于大数据(Big data)生成关键文本。其中,大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。因此,本申请的关键文本具有一套完备的生成逻辑。
具体地,大数据的服务器可以通过不同节点间的协作处理生成关键文本。首先,服务器的服务架构节点SOA可以先获取当前客户端对应用户的标签信息和文本阅读数据。其中,标签信息可以携带有用户在客户端中阅读app的注册信息和对象特征信息等,文本阅读数据可以包括用户在客户端中阅读文本的历史数据,例如阅读时长、阅读的文本标题、文本类型等。然后,服务器可以通过索引节点将以上信息发送至文本推荐节点,文本推荐节点可以根据以上信息,对网络资源或数据库中的多个文本内容进行召回和热度排序,确定至少一个文本内容并将其发送至关键文本节点。
进一步地,关键文本节点可以根据所确定的文本内容,执行关键文本获取、视频生成、个性化推荐分发等操作。具体地,关键文本节点可以先通过OCR文字识别技术获取文本内容和文本内容的评价信息,再将以上获取的信息输入至特定模型来生成多个关键文本,并基于多个关键文本生成不同图形片段与文本帧序列所搭配生成的个性化推荐视频。最终,基于不同用户的兴趣偏好,为不同用户有针对性地推送对应的个性化推荐视频。
可选地,步骤“获取关键文本”可以包括:
获取多个初始关键文本,所述初始关键文本包括所述文本内容,以及所述文本内容的评价信息;
通过评分模型对所述多个初始关键文本进行评分,筛选出第一关键文本;
对所述第一关键样本进行优化处理,得到所述关键文本。
具体地,初始关键文本可以为上述提到的文本内容和文本内容的评价信息,由于初始关键文本和关键文本均可以为一个词语、一句文本或一段文本,因此初始关键文本不仅可以包括文本内容的正文,还可以包括文本内容的标题、摘要、简介等。
在一些实施例中,可以将多个初始关键文本输入至评分模型,得到每个初始关键文本对应的评分。其中,评分模型可以为机器学习模型,例如评分模型可以为自对抗BERT模型(self-adversarial BidirectionalEncoder Representations fromTransformer)。
在一些实施例中,评分模型可以将输入的初始关键文本转化为特征向量,特征向量携带有初始关键文本的语义表征、分割信息表征和位置表征。评分模型可以结合以上表征信息,在模型的激活函数层输出该初始关键文本作为高质量文本的概率,例如概率为80%、90%等,再根据输出的概率值对多个初始关键文本进行排序、评分。可以理解,一个初始关键文本被确定为高质量文本的概率越高,则表示其直接用作或处理后用作关键文本的概率越大,因此该输出的概率值可以与评分成正比,例如概率为80%和90%的初始关键文本可以分别对应80分、90分的评分。
进一步地,在获取多个评分后的初始关键文本后,可以从中筛选出评分最高的前n个初始关键文本作为第一关键文本,其中n为大于1的整数。需要说明的是,对多个评分后的初始关键文本可以采用评分升序或评分降序的方式进行排序,本实施例对此不做限制。
可以理解,由于第一关键文本是从文本内容和评价信息中筛选得到,即使其对应的评分符合筛选要求,仍会存在语言描述不准确、不简练、口语化等缺陷,使得本申请的方法还可以继续优化第一关键文本来得到关键文本。由此,在获取关键文本的过程中,可以基于大数据和机器学习模型的处理,先筛选出与文本内容相关且较优质的第一关键文本,再进一步地优化处理第一关键文本的缺陷,以形成具备质量高、词藻华丽、阅读顺畅、概括准确和用词书面化等亮点的关键文本。
可选地,步骤“对所述第一关键样本进行优化处理,得到所述关键文本”,可以包括:
将所述第一关键文本输入至第一文本优化模型,对所述第一关键文本中的字向量进行编码排序后,输出第二关键文本;
将所述第二关键文本输入至第二文本优化模型,得到所述关键文本。
其中,第一文本优化模型可以为Transformer与指针神经网络(Pointer Generator Network)相结合的机器学习模型。在一些实施例中,第一文本优化模型可以对第一关键文本进行位置编码,得到携带有位置表征的多个字向量。再基于自注意力机制(multi-head self-attention)根据第一关键文本中包含的每个字向量构建全连接图,并计算每个字向量所对应的注意力值,以获取第一关键文本中的每个字对所计算字的影响程度,以删除或替换影响程度较低的字向量。最后,通过指针神经网络解码输出质量更高的第二关键文本。
仅作为示例,第一关键文本可以为网友的评价信息“我觉得该部作品的情节跌宕起伏、环环相扣,并且故事设定也不是很烧脑”,在经过第一文本优化模型的优化处理后,可以将第一关键文本中对其他字的表达影响程度较小的字和词语进行删除,得到更精炼、准确的第二关键文本“情节跌宕起伏、环环相扣,故事设定不烧脑”。进一步地,在获取第二关键文本后,可以将第二关键文本输入至第二文本优化模型,对第二关键文本进行优化处理,得到质量更高的关键文本。
可选地,步骤“将所述第二关键文本输入至第二文本优化模型之前,本申请的方法还可以包括:
获取关键意见角色文本、第一关键文本和第二关键文本,所述关键意见角色文本为关键意见角色对所述文本内容作出的评价;
以所述关键意见角色文本为正样本、所述第一关键文本和所述第二关键文本为负样本,训练初始第二文本优化模型,得到中间关键文本;
以所述关键意见角色文本为正样本、所述中间关键文本为负样本,迭代训练所述初始第二文本优化模型,直至满足训练完成条件,得到训练好的所述第二文本优化模型。
其中,关键意见角色(Key Opinion Leader,KOL)是指对某个领域作品传播活动的传播起到关键作用以及付出了较大贡献的用户。以文本内容的短视频推广场景为例,关键意见角色可以为作者本人、著名书评者、网络人气书友、资深媒体撰稿人等。可以理解,相较于随机提取的文本内容或普通用户的评价信息等素材,关键意见角色文本对广大用户而言具有更深层的影响力,因此在训练第二文本优化模型时,可以将关键意见角色文本作为正样本,将第一关键文本和第二关键文本为负样本,对初始第二文本优化模型进行正负样本对抗训练,来获取性能较好的第二文本优化模型。
其中,第二文本优化模型可以为一种递归锐化的BERT模型,通过训练初始第二文本优化模型得到。具体地,在首轮训练中,可以将正样本和负样本共同输入到初始第二文本优化模型中,得到初始第二文本优化模型现阶段输出的中间关键文本。
可以理解,训练阶段中的模型所输出的预测结果准确性较差,与标签对应的实际结果存在差距,因此在训练过程中,可以继续将关键意见角色文本作为正样本,将初始第二文本优化模型在每一轮产生的中间关键文本,与第一关键文本和第二关键文本共同作为下一轮训练的负样本,迭代训练初始第二文本优化模型,直至满足训练完成条件,得到训练好的第二文本优化模型,从而后续能够基于性能较好的第二文本优化模型对第二关键文本进行优化,得到具备质量高、词藻华丽、阅读顺畅、概括准确和用词书面化等亮点的关键文本。
在一些实施例中,还可以通过以上训练方式训练初始评分模型,得到训练好的评分模型。具体地,可以将关键意见角色文本作为正样本、将初始关键文本作为负样本,输入至初始评分模型,得到初始评分模型的预测的中间关键文本。相应地,在后续多轮迭代训练的过程中,可以继续将关键意见角色文本作为正样本,将初始评分模型在每一轮产生的中间关键文本、以及初始关键文本共同作为下一轮训练的负样本,直至满足训练完成条件,得到训练好的评分模型。
可选地,步骤“根据所述关键文本,以及所述用户的兴趣偏好,生成所述图形片段和所述文本帧序列”,可以包括:
获取所述关键文本的关键文本向量;
根据所述用户的兴趣偏好信息和所述关键文本向量,生成兴趣偏好向量;
计算所述关键文本向量与所述兴趣偏好向量的相似度,获取所述相似度大于阈值的关键文本向量所对应的关键文本;
根据所述关键文本,从视频素材库提取所述图形片段,以及从所述文本内容提取所述文本帧序列,构成所述视频界面的显示内容。
具体地,可以通过编码器或编码模型对关键文本进行编码,得到关键文本向量。例如可以通过word2vector的方式对关键文本中的每个字进行词嵌入(w ord embedding),得到关键文本中每个字对应的字向量,再将每个字向量进行求和计算得到关键文本向量。在一些实施例中,还可以通过word2vector的方式对关键文本中的每个词语进行词嵌入,得到关键文本中每个词语的词向量,并基于用户的兴趣偏好信息对不同关键文本的多个词向量进行权重标记,对带有权重的多个词向量进行加权平均计算,生成兴趣偏好向量。
可以理解,兴趣偏好向量携带有用户阅读的兴趣偏好表征,因此可以通过计算兴趣偏好向量与不同关键文本向量的相似度,选取相似度较高且符合要求的关键文本向量所对应的关键文本,来从视频素材库中选取生成视频的图形片段,从文本内容中选取多个文本帧组成文本帧序列。其中,向量相似度的计算方式可以包括但不限于计算余弦相似度、皮尔森系数、欧式距离,以及基于K ernel系统的相似度计算等,本实施例对此不做限制。
由此可知,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。并且,通过关键文本从视频素材库和文本内容中自动匹配图形片段和文本帧来生成最终视频,也能够有效地减少工作人员筛选视频素材、混剪制作视频的时间和成本。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
步骤102、当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧。
为了兼顾文本内容的推广效果和效率,在尽可能较短的时间内激发用户阅读文本内容的兴趣。在一些实施例中,可以将视频的总时长设置为较短时长,例如1分钟、2分钟等。并且可以通过合理地分配图形片段与文本帧序列在视频中所占时长,来保证图形片段与文本帧序列的配合效果,例如图形片段和文本序列帧各占视频总时长的50%。
可以理解,在本申请的短视频广告推广场景中,由于图形片段通过关键文本生成,所展示的内容为与文本内容相关的图片或动画等,起到帮助用户预先了解文本内容的类型、风格、故事梗概的作用。因此,为保证文本内容的推广效果,视频可以先播放图形片段,再自动按顺序地播放文本帧序列,例如按顺序播放文本帧序列中的每一个文本帧,以便于用户先观看图形片段了解文本内容的故事梗概,用户引发阅读兴趣后再去阅读文本帧,来直观地感受真实的文本内容,并通过阅读文本帧来配合理解、回味图形片段所展示的内容,从而能够加强文本内容的展示效果和推广效果。
在一些实施例中,可以将评分最高的关键文本所生成的图形片段放在播放图形片段的最后时刻。如图1a所示,在一些实施例中,视频界面中还可以共同显示关键文本与图形片段,以加深图形片段的展示效果。可以理解,关键文本提取并优化自文本内容和相关评价信息,使得最高评分的关键文本不仅能够最准确地概括文本内容的主题、情节等,也更能凸显文本内容存在的亮点,将文本内容的介绍和展示推向高潮。
在一些实施例中,当图形片段播放完毕,继续播放的文本帧序列的内容可以与图形片段所展示的内容存在关联。其中,存在关联是指文本帧序列中文本帧的文字内容可以承接、解释或前后呼应图形片段的内容。例如,图形片段中最后阶段展示的内容可以为主角来到目的地寻找破案线索,则文本帧序列的文字内容可以为与该破案线索相关的具体描述、提示信息,或主角的下一步寻找方向等,以吸引用户通过阅读文本帧的文字内容来解读图形片段中留下伏笔的内容,从而能够提升用户的阅读兴趣和转化率。
在一些实施例中,当图形片段播放完毕,服务器可以将文本帧播放组件插入到视频流。具体地,可以在视频播界面的上方打开一个新的文本帧播放视图层,该文本帧播放视图层用于展示文本内容,并且在视频暂停播放时仍然在文本内容播放器视图层后方,方便后续切换视频。在一些实施例中,可以通过A ddView、pushViewController、add Iframe等方法在视频界面中添加文本帧播放视图层,并且可以在该文本帧播放视图层中添加待展示的文本内容、手势交互逻辑等。
在一些实施例中,服务器会记录所有文本内容的id,并给不同的文本内容分片。在各个分片中提取热度较高的文本帧,生成文本帧序列和分片id。进一步地,通过模型评分机制,得到该文本内容的多个关键文本用于生成视频的图形片段和其他文本帧,同时生成该视频与分片id关联的视频id。
在一些实施例中,当用户观看完视频的图形片段时,在视频界面的视频播放视图层上,会覆盖文本帧播放视图层,该视图层可以实现用户与文本帧的阅读交互。当用户切换其他视频时,客户端会收起文本帧播放视图层,展示下一视频的视频播放视图层。
在一些实施例中,当视频播放暂停时,会向文本播放组件视图层传递视频内容参数,通过这些参数向服务器请求小说文本数据,请求参数中包括视频i d,服务通过视频id,搜索出与该视频id关联的分片id,并将分片id对应的文本帧序列返回给客户端,并在文本帧播放视图层中展示对应的文本帧,实现视频播放进度与文本帧的内容的对齐。
在一些实施例中,可以在文本帧播放视图层添加常规阅读、语音听书、切换视频等功能。其中,常规阅读功能包含上下翻页、长按翻页、点击显示目录、自动滚动功能等,例如用户可以定时滚动文本帧的内容,还可以设置内容滚动的速度。其中,听书功能是通过RTT技术来识别文本帧的内容,自动播放语音,用户还可以选择个性语音进行播放、后台听书等功能。在一些实施例中,文本帧播放视图层还可以记录用户的阅读历史记录、保存内容记录等个人设置信息,使得用户可以在个人设置信息的页面中浏览并找到以上记录。
由此可知,本申请可以先在视频中播放与文本内容相关的图形片段,帮助用户预先了解文本内容的类型和故事梗概,通过生动的画面引起用户对文本内容的兴趣,再通过播放文本帧序列让用户直接在视频中阅读文本帧,从而能够提升用户的阅读沉浸感和体验感。
将评分最高关键文本对应的图形片段放在与文本帧的衔接时刻,能够通过提升用户的阅读兴趣,进而提升文本阅读的推荐效果和用户转化率。
步骤103、响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧。
其中,跳转文本帧为文本帧序列中视频播放进度对应的文本帧。如图2b所示,当视频自动播放时,对于图形片段之外某一时刻的视频播放进度,例如视频播放至第5秒、第10秒等,会有一个与之对应的跳转文本帧。
在一些实施例中,文本帧的变换操作可以包括能够变换文本帧内容的任何操作。例如,变换操作可以为视频自动按顺序播放文本帧序列中文本帧的操作,还可以为用户针对视频界面主动执行的屏幕上下滑动、左右翻动、点击屏幕角落、长按屏幕等操作,本实施例不做限制。
在一些实施例中,为了保障视频播放的流畅性,以及图形片段与文本帧切换过渡的自然性,当图形片段播放完毕,视频可以默认自动播放文本帧,以根据自动播放的视频播放进度显示对应的跳转文本帧。相应地,响应于变换操作用户主动执行对文本帧的变换操作,视频会取消自动播放文本帧,视频播放进度会随着用户的变换操作进行跳转。例如用户将文本帧序列的第一页翻动至第二页,视频播放进度从第5秒跳转至第6秒,则第6秒的视频播放进度对应第二页的文本帧,第二页的文本帧即为跳转文本帧。
在一些实施例中,可以在视频界面中添加手势交互触发改变文本帧内容的翻页逻辑来实现变换操作。具体地,在引入该翻页逻辑后,当用户执行上下滑动、左右翻动等变换操作阅读文本帧时,客户端可以检测出用户在屏幕上的变换操作,并计算出该变换操作对应的持续时间,通过获取视频界面的页面元素,提取用户执行该变换操作的区域宽度,引入一个touch.js文件来绑定滑动、按压、点选等操作事件,若检测用户的变换操作符合以上事件,且用户执行变换操作的区域宽度和持续时间均符合预设要求时,则触发该翻页逻辑,在视频中展示文本帧的翻页效果。
在一些实施例中,执行翻页逻辑的组件可以先获取一个识别区域,例如识别区域为高800px、宽500px的区域,该识别区域可以根据客户端屏幕的大小自适应调整,然后计算用户执行变换操作的区域位置坐标,当该区域位置坐标处于该识别区域内,并且变换操作的有效长度大于翻页逻辑触发的长度阈值时,例如长度阈值为50px,则视频界面会触发对应变换操作,供用户翻看文本帧。
可选地,本申请的方法还可以包括以下步骤:
确定目标进度,所述目标进度为所述图形片段播放完毕时对应的视频播放进度;
响应于所述用户对所述视频界面中进度条的控制操作,根据所述目标进度,在所述视频界面中对所述图形片段与所述文本帧进行切换。
可以理解,目标进度相当于图形片段与文本内容播放衔接时刻的视频播放进度,确定目标进度相当于确定该播放衔接时刻。例如目标进度为视频播放至第5秒时的视频播放进度。
进一步地,在确定目标进度之后,用户可以根据需求自由地切换视频的播放内容。例如用户可以按压、拖动或点击视频界面中的进度条,来控制视频播放进度处于目标进度之前或之后,以使当前的视频播放进度在目标进度之前时播放图形片段,当前的视频播放进度在目标进度之后时播放文本帧。
由此,本申请实施例不仅能够自动播放文本帧供用户阅读,用户还可以通过控制视频播放进度选择想要展示的跳转文本帧,还可以在视频中灵活地实现图形片段与文本帧之间的切换,以控制视频界面展示用户所需的内容。例如,当用户观看一段图形片段后,引发对文本内容阅读的兴趣,便可无需等待图形片段播放完毕,通过控制视频播放进度,将视频切换至跳转文本帧进行阅读;又例如,当用户阅读文本帧时,想要回味图形片段所展示的动画、旁白等,便可以将视频切换回播放图形片段。从而通过以上操作,能够显著地提升用户阅读的灵活性、体验感和趣味性。
可选地,本申请的方法还包括以下步骤:
当所述视频播放结束,在所述视频界面中显示所述文本内容对应的文本界面跳转控件;
响应于所述用户点击所述文本界面跳转控件,将所述视频界面切换至所述文本内容的文本界面。
在一些实施例中,当视频播放结束,视频界面中可以显示一个新的文本内容推荐页面,在该页面中显示文本界面跳转空间。如图2f所示,用户可以点击“去阅读”跳转至文本界面来阅读完整的文本内容。
如图2f所示,在文本界面跳转控件所在的页面中还可以显示文本内容的封面、标题和阅读信息等。相应地,还可以在文本界面跳转控件的附近区域,设置一个拒绝执行跳转至文本界面的控件,例如图2f中的“不感兴趣”选项。在一些实施例中,还可以在该页面显示“作品推荐”区域,以便于用户选择其他同类型的热门文本。在一些实施例中,还可以在该页面显示视频切换操作的提示信息,以提示用户在某个区域执行视频切换操作。例如图2f中的“上滑切换其他视频”的提示。
可以理解,在视频播放完毕后,用户已经观看完图形片段和文本帧,表示该用户大概率已对文本内容产生了较大的阅读兴趣,使得此时弹出文本界面跳转控件能够及时、准确地引导用户跳转至文本界面,供用户在文本界面进行注册、阅读、评论、充值等相关操作,以增加该文本内容的阅读量、热门程度和收益等数据,从而能够提升该文本内容的用户转化率和用户粘性。
可选地,步骤103还可以包括以下步骤:
获取所述图形片段播放完毕至所述视频播放结束的时长,所述时长包括多个播放时刻;
获取每个所述播放时刻对应的播放内容;
将所述播放内容与所述播放时刻进行映射,得到所述跳转文本帧与所述视频播放进度之间的映射关系;
根据所述映射关系,以及所述变换操作对应的视频播放进度,确定显示的所述跳转文本帧。
可以理解,由于本申请的文本内容在视频中是以文本帧的形式展示的,文本帧可以对应一个或多个视频帧,使得视频中不同的视频播放进度可以对应不同的文本帧。因此,服务器可以获取文本帧与不同视频播放进度所对应时刻之间的映射关系。
具体地,在用户执行变换操作时,服务器可以获取变换操作结束时视频播放进度对应的当前播放时刻,再根据映射关系和当前播放时刻,确定应显示的跳转文本帧并传递给客户端,从而客户端能够在视频界面中展示对应的跳转文本帧。
可选地,视频界面包括用于显示所述图形片段和所述文本帧的第一区域,以及用于显示其他信息的第二区域,所述方法还包括:
当所述视频界面首次显示所述文本帧时,在所述第一区域显示执行所述变换操作的提示信息,在所述第二区域显示执行视频切换操作的提示信息;
响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容。
如图2d和图2e所示,在一些实施例中,第一区域可以设置在视频界面的中心或靠近中心的区域,用于显示图形片段和文本帧。第二区域可以设置在视频界面中远离中心的区域,用于显示视频标题、文本内容标题、视频播放进度、其他视频控件等信息。
可以理解,由于文本帧是在图形片段播放完毕后显示的,因此首次显示文本帧时用户可能存在操作疑问,可以通过本申请的提示信息来引导用户进行正确的操作。在一些实施例中,当视频界面显示文本帧时,可以在第一区域显示执行变换操作的提示信息,在第二区域显示执行视频切换操作的提示信息。仅作为示例,当视频切换操作和变换操作为滑动操作时,提示信息可以如图2d和图2e所示,显示出包含手势图标和滑动轨迹的图片或动画,在附近区域搭配“在此区域滑动可以阅读或切换视频”的文字,以通过动静结合的演示效果更好地引导用户查看此提示信息、执行此提示信息的操作。
可选地,步骤“响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容”,包括:
在所述图形片段播放完毕之前,响应于所述用户在所述第一区域或所述第二区域的所述视频切换操作,将所述视频切换为其他视频;
在所述图形片段播放完毕之后,响应于所述用户在所述第一区域的所述变换操作,显示所述跳转文本帧;
在所述图形片段播放完毕之后,响应于所述用户在所述第二区域的所述视频切换操作,将所述视频切换为所述其他视频。
可以理解,本申请的视频可以分为播放图形片段和播放文本帧的两个播放阶段,在不同的播放阶段用户可以执行不同的操作来调整视频所展示的内容。例如在播放图形片段的阶段,用户可以执行暂停、快进至文本帧、切换下一视频等操作;在播放文本帧的阶段,用户可以执行暂停、快进、回退至图形片段、翻看文本帧、跳转文本界面等操作。
在一些实施例中,在图形片段播放完毕之前,响应于用户在第一区域或所述第二区域的视频切换操作,将视频切换为其他视频。如图2a所示,第一区域显示图形片段,第二区域显示文本内容的标题、视频播放进度等信息,由于图形片段播放阶段不显示文本帧,使得用户无论在哪个区域执行视频切换操作均不影响文本帧的显示,因此用户可以在第一区域和第二区域执行视频切换操作来切换当前视频。
在一些实施例中,在图形片段播放完毕之后,响应于用户在第一区域的变换操作,显示跳转文本帧;响应于用户在第二区域的视频切换操作,将视频切换为其他视频。
如图2d和图2e所示,当视频界面显示文本帧时,视频界面的第一区域显示文本帧的内容,视频界面的第二区域显示文本内容的标题、视频播放进度等信息。因此,为了用户阅读文本帧与执行其他操作互不影响,可以将与阅读文本帧的变换操作的执行区域设置在第一区域,而视频切换操作、视频播放进度调整操作等对应的执行区域设置在第二区域。例如当用户想要切换下一个视频时,只需避开第一区域的范围,在第二区域执行视频切换操作即可。
可选地,本申请的方法还可以包括以下步骤:
当所述文本帧播放至预设进度,在所述第一区域显示执行文本界面跳转操作的提示信息;
响应于所述用户执行所述文本界面跳转操作,从所述视频界面切换至所述文本界面。
其中,预设进度是指预先设置的视频播放进度。如图2c所示,预设进度可以为总视频播放进度中的最后阶段,例如视频的最后1秒、2秒等。在文本帧播放至预设进度时,视频界面中可以显示出“上滑跳转至文本界面继续阅读”的文本界面跳转操作的提示信息。
可以理解,在播放文本帧时,用户可以通过变换操作在视频界面的第一区域来翻看文本帧,使得在预设进度下显示、弹出例如“文本界面跳转操作”的其他操作和其他提示信息,避免其他操作影响用户专心阅读文本帧,从而能够提升用户阅读文本帧的沉浸感和体验感,并降低用户误操作的概率。
由上可知,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
其中,上述信息展示方法的另一具体流程如下,参考图1c:
步骤1001、提取文本内容的关键文本;
步骤1002、基于关键文本生成图形片段和文本帧序列;
步骤1003、当图形片段播放完毕按序播放文本帧;
步骤1004、展现并自动播放文本帧;
步骤1005、首次阅读文本帧时显示变换操作的提示信息;
步骤1006、检测用户的变换操作;
步骤1007、确定变换操作对应的视频播放进度;
步骤1008、视频界面中显示跳转文本帧;
步骤1009、显示文本界面跳转控件引导用户跳转至文本界面。
根据上述实施例所描述的方法,以下将作进一步详细说明。
如图3所示,为本申请实施例提供的信息展示装置的结构示意图,该装置可以包括视频播放单元301、文本帧播放单元302和进度确定单元303,具体如下:
视频播放单元301,用于在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
文本帧播放单元302,用于当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
进度确定单元303,用于响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
可选地,所述信息展示装置还包括:
目标进度确定单元303,用于确定目标进度,所述目标进度为所述图形片段播放完毕时对应的视频播放进度;
图文切换单元,用于响应于所述用户对所述视频界面中进度条的控制操作,根据所述目标进度,在所述视频界面中对所述图形片段与所述文本帧进行切换。
可选地,所述信息展示装置还包括:
文本界面跳转控件显示单元,用于当所述视频播放结束,在所述视频界面中显示所述文本内容对应的文本界面跳转控件;
文本界面切换单元,用于响应于所述用户点击所述文本界面跳转控件,将所述视频界面切换至所述文本内容的文本界面。
可选地,所述进度确定单元303具体用于:
获取所述图形片段播放完毕至所述视频播放结束的时长,所述时长包括多个播放时刻;
获取每个所述播放时刻对应的播放内容;
将所述播放内容与所述播放时刻进行映射,得到所述跳转文本帧与所述视频播放进度之间的映射关系;
根据所述映射关系,以及所述变换操作对应的视频播放进度,确定显示的所述跳转文本帧。
可选地,所述信息展示装置还包括:
关键文本获取单元,用于获取关键文本,所述关键文本提取自所述文本内容,以及所述文本内容的评价信息;
生成单元,根据所述关键文本,以及所述用户的兴趣偏好,生成所述图形片段和所述文本帧序列。
可选地,所述关键文本获取单元包括:
初始关键文本获取子单元,用于获取多个初始关键文本,所述初始关键文本包括所述文本内容,以及所述文本内容的评价信息;
第一关键文本筛选子单元,用于通过评分模型对所述多个初始关键文本进行评分,筛选出第一关键文本;
第一关键样本优化子单元,用于对所述第一关键样本进行优化处理,得到所述关键文本。
可选地,所述第一关键样本优化子单元包括:
第二关键文本输出子单元,用于将所述第一关键文本输入至第一文本优化模型,对所述第一关键文本中的字向量进行编码排序后,输出第二关键文本;
关键文本获取子单元,用于将所述第二关键文本输入至第二文本优化模型,得到所述关键文本。
可选地,所述信息展示装置还包括:
关键意见角色文本获取单元,用于获取关键意见角色文本、第一关键文本和第二关键文本,所述关键意见角色文本为关键意见角色对所述文本内容作出的评价;
中间关键文本获取单元,用于以所述关键意见角色文本为正样本、所述第一关键文本和所述第二关键文本为负样本,训练初始第二文本优化模型,得到中间关键文本;
第二文本优化模型获取单元,用于以所述关键意见角色文本为正样本、所述中间关键文本为负样本,迭代训练所述初始第二文本优化模型,直至满足训练完成条件,得到训练好的所述第二文本优化模型。
可选地,所述生成单元还具体用于:
获取所述关键文本的关键文本向量;
根据所述用户的兴趣偏好信息和所述关键文本向量,生成兴趣偏好向量;
计算所述关键文本向量与所述兴趣偏好向量的相似度,获取所述相似度大于阈值的关键文本向量所对应的关键文本;
根据所述关键文本,从视频素材库提取所述图形片段,以及从所述文本内容提取所述文本帧序列,构成所述视频界面的显示内容。
可选地,所述视频界面包括用于显示所述图形片段和所述文本帧的第一区域,以及用于显示其他信息的第二区域,所述信息展示装置还包括:
第一提示信息显示单元,用于当所述视频界面首次显示所述文本帧时,在所述第一区域显示执行所述变换操作的提示信息,在所述第二区域显示执行视频切换操作的提示信息;
显示内容确定单元,响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容。
可选地,所述显示内容确定单元具体用于:
在所述图形片段播放完毕之前,响应于所述用户在所述第一区域或所述第二区域的所述视频切换操作,将所述视频切换为其他视频;
在所述图形片段播放完毕之后,响应于所述用户在所述第一区域的所述变换操作,显示所述跳转文本帧;
在所述图形片段播放完毕之后,响应于所述用户在所述第二区域的所述视频切换操作,将所述视频切换为所述其他视频。
可选地,所述信息展示装置还包括:
第二提示信息显示单元,用于当所述文本帧播放至预设进度,在所述第一区域显示执行文本界面跳转操作的提示信息;
文本界面切换子单元,用于响应于所述用户执行所述文本界面跳转操作,从所述视频界面切换至所述文本界面。
由此,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。并且,通过关键文本从视频素材库和文本内容中自动匹配图形片段和文本帧来生成最终视频,也能够有效地减少工作人员筛选视频素材、混剪制作视频的时间和成本。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
本申请实施例还提供一种电子设备,该电子设备可以为终端、服务器等设备。如图4所示,其示出了本申请实施例所涉及的电子设备的结构示意图,具体来讲:
该电子设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403、输入单元404以及通信单元405等部件。本领域技术人员可以理解,图4中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的软件程序和/或单元,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据。在一些实施例中,处理器401可包括一个或多个处理核心;在一些实施例中,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及单元,处理器401通过运行存储在存储器402的软件程序以及单元,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
电子设备还包括给各个部件供电的电源403,在一些实施例中,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
该电子设备还可包括通信单元405,在一些实施例中通信单元405可以包括无线单元,电子设备可以通过该通信单元405的无线单元进行短距离无线传输,从而为用户提供了无线的宽带互联网访问。比如,该通信单元405可以用于帮助用户收发电子邮件、浏览网页和访问流式媒体等。
尽管未示出,电子设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,电子设备中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能,如下:
在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
由上可知,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请实施例所提供的任一种信息展示方法中的步骤。例如,该指令可以执行如下步骤:
在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由此可知,本申请实施例可以在视频界面中播放与文本内容相关的图形片段和文本帧序列,在图形片段播放完毕后播放文本帧,通过两者的无缝衔接实现图形与文字的有效配合推广,使得用户可以通过预先浏览生动的图形片段来了解文本内容的类型和故事梗概,引发用户的阅读兴趣,并结合图形片段所呈现的视频内容直接在视频界面中灵活、沉浸式地阅读文本帧,以提升用户阅读文本帧的兴趣和体验感,以及后续继续阅读完整文本内容的用户转化率。
并且,本申请实施例还可以提取并优化文本内容中的精彩部分、人气热评等内容来形成关键文本,并通过关键文本制作图形片段和文本帧来提升视频质量、吸引用户阅读,从而能够进一步地提升用户的阅读兴趣、体验感和用户转化率。
由于该存储介质中所存储的指令,可以执行本申请实施例所提供的任一种信息展示方法中的步骤,因此,可以实现本申请实施例所提供的任一种信息展示方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种信息展示方法、装置、电子设备和计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (16)
1.一种信息展示方法,其特征在于,所述方法包括:
在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
2.根据权利要求1所述的信息展示方法,其特征在于,所述方法还包括:
确定目标进度,所述目标进度为所述图形片段播放完毕时对应的视频播放进度;
响应于用户对所述视频界面中进度条的控制操作,根据所述目标进度,在所述视频界面中对所述图形片段与所述文本帧进行切换。
3.根据权利要求1所述的信息展示方法,其特征在于,所述方法还包括:
当所述视频播放结束,在所述视频界面中显示所述文本内容对应的文本界面跳转控件;
响应于用户点击所述文本界面跳转控件,将所述视频界面切换至所述文本内容的文本界面。
4.根据权利要求1所述的信息展示方法,其特征在于,所述响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,包括:
获取所述图形片段播放完毕至所述视频播放结束的时长,所述时长包括多个播放时刻;
获取每个所述播放时刻对应的播放内容;
将所述播放内容与所述播放时刻进行映射,得到所述跳转文本帧与所述视频播放进度之间的映射关系;
根据所述映射关系,以及所述变换操作对应的视频播放进度,确定显示的所述跳转文本帧。
5.根据权利要求1所述的信息展示方法,其特征在于,所述在视频界面播放视频之前,所述方法还包括:
获取关键文本,所述关键文本提取自所述文本内容,以及所述文本内容的评价信息;
根据所述关键文本,以及用户的兴趣偏好,生成所述图形片段和所述文本帧序列。
6.根据权利要求5所述的信息展示方法,其特征在于,所述获取关键文本包括:
获取多个初始关键文本,所述初始关键文本包括所述文本内容,以及所述文本内容的评价信息;
通过评分模型对所述多个初始关键文本进行评分,筛选出第一关键文本;
对第一关键样本进行优化处理,得到关键文本。
7.根据权利要求6所述的信息展示方法,其特征在于,所述对所述第一关键样本进行优化处理,得到关键文本,包括:
采用第一文本优化模型,对所述第一关键文本中的字向量进行编码排序后,输出第二关键文本;
将所述第二关键文本输入至第二文本优化模型,得到关键文本。
8.根据权利要求7所述的信息展示方法,其特征在于,所述将所述第二关键文本输入至第二文本优化模型之前,所述方法还包括:
获取关键意见角色文本、第一关键文本和第二关键文本,所述关键意见角色文本为关键意见角色对所述文本内容作出的评价;
以所述关键意见角色文本为正样本、所述第一关键文本和所述第二关键文本为负样本,训练初始第二文本优化模型,得到中间关键文本;
以所述关键意见角色文本为正样本、所述中间关键文本为负样本,迭代训练所述初始第二文本优化模型,直至满足训练完成条件,得到训练好的所述第二文本优化模型。
9.根据权利要求4所述的信息展示方法,其特征在于,根据所述关键文本,以及所述用户的兴趣偏好,生成所述图形片段和所述文本帧序列,包括:
获取所述关键文本的关键文本向量;
根据所述用户的兴趣偏好信息和所述关键文本向量,生成兴趣偏好向量;
计算所述关键文本向量与所述兴趣偏好向量的相似度,获取所述相似度大于阈值的关键文本向量所对应的关键文本;
根据所述关键文本,从视频素材库提取所述图形片段,以及从所述文本内容提取所述文本帧序列,构成所述视频界面的显示内容。
10.根据权利要求1所述的信息展示方法,其特征在于,所述视频界面包括用于显示所述图形片段和所述文本帧的第一区域,以及用于显示其他信息的第二区域,所述方法还包括:
当所述视频界面首次显示所述文本帧时,在所述第一区域显示执行所述变换操作的提示信息,在所述第二区域显示执行视频切换操作的提示信息;
响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容。
11.根据权利要求10所述的信息展示方法,其特征在于,所述响应于所述用户执行所述变换操作或所述视频切换操作,确定所述视频界面的显示内容,包括:
在所述图形片段播放完毕之前,响应于所述用户在所述第一区域或所述第二区域的所述视频切换操作,将所述视频切换为其他视频;
在所述图形片段播放完毕之后,响应于所述用户在所述第一区域的所述变换操作,显示所述跳转文本帧;
在所述图形片段播放完毕之后,响应于所述用户在所述第二区域的所述视频切换操作,将所述视频切换为所述其他视频。
12.根据权利要求10所述的信息展示方法,其特征在于,所述方法还包括:当所述文本帧播放至预设进度,在所述第一区域显示执行文本界面跳转操作的提示信息;
响应于所述用户执行所述文本界面跳转操作,从所述视频界面切换至所述文本界面。
13.一种信息展示装置,其特征在于,所述装置包括:
视频播放单元,用于在视频界面播放视频,所述视频包括图形片段和文本帧序列,所述图形片段与文本内容所相关,所述文本内容包括所述文本帧的内容;
文本帧播放单元,用于当所述图形片段播放完毕,在所述视频界面按序播放所述文本帧;
进度确定单元,用于响应于所述文本帧的变换操作,确定所述变换操作对应的视频播放进度,并在所述视频界面中显示跳转文本帧,所述跳转文本帧为所述文本帧序列中所述视频播放进度对应的文本帧。
14.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现权利要求1至12任一项所述的信息展示方法。
15.一种计算机可读存储介质,存储有可执行指令,其特征在于,所述可执行指令被处理器执行时实现权利要求1至12任一项所述的信息展示方法。
16.一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时实现权利要求1至12任一项所述的信息展示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211485542.3A CN118075568A (zh) | 2022-11-24 | 2022-11-24 | 信息展示方法、装置、电子设备和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211485542.3A CN118075568A (zh) | 2022-11-24 | 2022-11-24 | 信息展示方法、装置、电子设备和计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118075568A true CN118075568A (zh) | 2024-05-24 |
Family
ID=91101139
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211485542.3A Pending CN118075568A (zh) | 2022-11-24 | 2022-11-24 | 信息展示方法、装置、电子设备和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118075568A (zh) |
-
2022
- 2022-11-24 CN CN202211485542.3A patent/CN118075568A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111143610B (zh) | 一种内容推荐方法、装置、电子设备和存储介质 | |
US10325397B2 (en) | Systems and methods for assembling and/or displaying multimedia objects, modules or presentations | |
Morris et al. | Rich representations of visual content for screen reader users | |
US10402637B2 (en) | Autogenerating video from text | |
CN110020411B (zh) | 图文内容生成方法及设备 | |
US9613268B2 (en) | Processing of images during assessment of suitability of books for conversion to audio format | |
US20140164507A1 (en) | Media content portions recommended | |
US20140163980A1 (en) | Multimedia message having portions of media content with audio overlay | |
US20140164506A1 (en) | Multimedia message having portions of networked media content | |
CN115082602B (zh) | 生成数字人的方法、模型的训练方法、装置、设备和介质 | |
US20140164371A1 (en) | Extraction of media portions in association with correlated input | |
CN110263272A (zh) | 用于呈现与主题相关的内容项目的系统和方法 | |
KR20150046313A (ko) | 증강 현실 표본 생성 | |
WO2017218038A1 (en) | Server-based conversion of autoplay content to click-to-play content | |
US9589296B1 (en) | Managing information for items referenced in media content | |
CN112084305A (zh) | 应用于聊天应用的搜索处理方法、装置、终端及存储介质 | |
WO2023082841A1 (zh) | 图像处理方法、装置、设备、存储介质及计算机程序产品 | |
US20140161423A1 (en) | Message composition of media portions in association with image content | |
CN110827058A (zh) | 多媒体推广资源插入方法、设备以及计算机可读介质 | |
US12001442B2 (en) | Systems and methods for pushing content | |
US20140163956A1 (en) | Message composition of media portions in association with correlated text | |
CN118075568A (zh) | 信息展示方法、装置、电子设备和计算机可读存储介质 | |
US10943380B1 (en) | Systems and methods for pushing content | |
US20240185306A1 (en) | Text-driven ai-assisted short-form video creation in an ecommerce environment | |
KR101390346B1 (ko) | 자막 삽입 시스템 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |