CN114286155A - 基于弹幕的画面元素修改方法、装置、设备和存储介质 - Google Patents
基于弹幕的画面元素修改方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN114286155A CN114286155A CN202111489143.XA CN202111489143A CN114286155A CN 114286155 A CN114286155 A CN 114286155A CN 202111489143 A CN202111489143 A CN 202111489143A CN 114286155 A CN114286155 A CN 114286155A
- Authority
- CN
- China
- Prior art keywords
- modification
- bullet screen
- pointing object
- picture
- elements
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000002715 modification method Methods 0.000 title claims abstract description 52
- 230000002996 emotional effect Effects 0.000 claims abstract description 120
- 238000000034 method Methods 0.000 claims abstract description 34
- 230000004048 modification Effects 0.000 claims description 128
- 238000012986 modification Methods 0.000 claims description 109
- 230000008451 emotion Effects 0.000 claims description 22
- 238000004458 analytical method Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 abstract description 9
- 230000008569 process Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000007935 neutral effect Effects 0.000 description 5
- 230000009467 reduction Effects 0.000 description 5
- 239000013598 vector Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000000386 athletic effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 125000005504 styryl group Chemical group 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种基于弹幕的画面元素修改方法、装置、设备以及存储介质，通过获取当前显示画面中的弹幕；对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。如此，本发明提供的基于弹幕的画面元素修改方法，能够根据弹幕对视频的画面元素进行修改和展示，以使视频画面形成更为强烈的视觉效果，从而提升用户观看视频的体验。
Description
技术领域
本发明涉及互联网视频技术领域，尤其涉及基于弹幕的画面元素修改方法、装置、设备和计算机存储介质。
背景技术
如今，弹幕已经成为主流的视频互动方式，不同的用户在观看同一视频内容时能够产生大量的互动弹幕，而这种基于视频原内容二次创作的弹幕形成了新的传播能力，甚至存在用户播放视频是为了观看视频的弹幕而不是视频本身的情况发生。
现实场景里，用户发送弹幕往往是因为受到明确的视频内容信息刺激，比如中国田径运动员苏炳添创造亚洲男子世界纪录时，网友发送了大量的“苏神YYDS”弹幕，弹幕的指向性非常明确，就是苏炳添-跑步-破纪录-给中国争光；而现有方案仅仅是在视频的时间轴上添加用户弹幕，难以脱离富文本的基础属性，展示形式单一，因此并未能够在视频画面上形成进一步的视觉效果。
发明内容
本发明的主要目的在于提供一种基于弹幕的画面元素修改方法、装置、设备和计算机存储介质，旨在根据弹幕对视频画面中的元素进行修改和展示，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
为实现上述目的，本发明提供一种基于弹幕的画面元素修改方法，所述基于弹幕的画面元素修改方法包括以下步骤：
获取当前显示画面中的弹幕；
对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
进一步地，对所述弹幕进行分析的步骤包括：
基于所述弹幕获取预设信息标签，根据所述预设信息标签确定所述指向对象；
基于所述弹幕的文本确定所述情感倾向。
进一步地，在基于所述弹幕的文本确定所述情感倾向的步骤之后，还包括：
基于所述弹幕的文本确定所述情感倾向对应的情感分数，其中，所述情感分数用于反映所述情感倾向的强烈程度。
进一步地，所述根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改的步骤，包括：
根据所述情感倾向和所述情感分数确定修改参数；
根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改。
进一步地，所述修改参数包括：缩放参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述缩放参数，针对所述指向对象对应的显示画面中的元素基于第一预设百分比进行放大或者缩小。
进一步地，所述修改参数包括：色度参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第二预设百分比进行画面明度调节；和/或者，
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第三预设百分比进行饱和度调节。
进一步地，所述修改参数包括：填色参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述填色参数，针对所述指向对象对应的显示画面中的元素基于第四预设百分比进行颜色填充。
此外，为实现上述目的，本发明还提供一种基于弹幕的画面元素修改装置，所述基于弹幕的画面元素修改装置包括：
获取模块，用于获取当前显示画面中的弹幕；
分析模块，用于对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
修改模块，用于根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
本发明基于弹幕的画面元素修改装置的各功能模块在运行时实现如上述中的基于弹幕的画面元素修改方法的步骤。
此外，为实现上述目的，本发明还提供一种终端设备，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于弹幕的画面元素修改程序，所述基于弹幕的画面元素修改程序被所述处理器执行时实现如上述中的基于弹幕的画面元素修改方法的步骤。
此外，为实现上述目的，本发明还提供一种计算机存储介质，所述计算机存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述的基于弹幕的画面元素修改方法的步骤。
此外，本发明实施例还提出一种计算机程序产品，该计算机程序产品上包括基于弹幕的画面元素修改程序，所述基于弹幕的画面元素修改程序被处理器执行时实现如上所述的基于弹幕的画面元素修改方法的步骤。
其中，在所述处理器上运行的基于弹幕的画面元素修改程序被执行时所实现的步骤可参照本发明基于弹幕的画面元素修改方法的各个实施例，此处不再赘述。
本发明通过获取视频显示画面中的弹幕，然后对弹幕进行分析，确定弹幕的指向对象和情感倾向，其中，弹幕的指向对象用于确定根据该弹幕进行修改的画面元素，情感倾向用于确定修改方式，最后根据该指向对象和情感倾向对当前显示画面中的元素进行对应修改。
如此，本发明提供的基于弹幕的画面元素修改方法，能够根据弹幕对视频的画面元素进行修改和展示，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
附图说明
图1是本发明实施例方案涉及的终端设备的硬件运行环境的结构示意图；
图2是本发明一种基于弹幕的画面元素修改方法一实施例的流程示意图；
图3是本发明一实施例涉及的视频画面原图；
图4是本发明一实施例涉及的经过画面元素修改后的视频画面效果图；
图5是本发明一种基于弹幕的画面元素修改装置的模块结构示意图。
本发明目的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，图1是本发明实施例方案涉及终端设备的硬件运行环境的结构示意图。
需要说明的是，图1即可为终端设备的硬件运行环境的结构示意图。本发明实施例终端设备可以是用于实现基于弹幕的画面元素修改方法的终端设备，例如基于弹幕的画面元素修改装置，PC，便携计算机等设备。
如图1所示，该终端设备可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI 接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的终端设备结构并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及分布式任务的处理程序。其中，操作系统是管理和控制样本终端设备硬件和软件资源的程序，支持分布式任务的处理程序以及其它软件或程序的运行。
在图1所示的终端设备中，用户接口1003主要用于与各个终端进行数据通信；网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；而处理器1001可以用于调用存储器1005中存储的基于弹幕的画面元素修改程序，并执行以下操作：
获取当前显示画面中的弹幕；
对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
进一步地，处理器1001可以调用存储器1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
基于所述弹幕获取预设信息标签，根据所述预设信息标签确定所述指向对象；
基于所述弹幕的文本确定所述情感倾向。
进一步地，在基于所述弹幕的文本确定所述情感倾向的步骤之后，处理器1001可以调用存储器1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
基于所述弹幕的文本确定所述情感倾向对应的情感分数，其中，所述情感分数用于反映所述情感倾向的强烈程度。
进一步地，处理器1001可以调用存储器1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
根据所述情感倾向和所述情感分数确定修改参数；
根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改。
进一步地，所述修改参数包括：缩放参数，处理器1001可以调用存储器 1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
根据所述缩放参数，针对所述指向对象对应的显示画面中的元素基于第一预设百分比进行放大或者缩小。
进一步地，所述修改参数包括：色度参数，处理器1001可以调用存储器 1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第二预设百分比进行画面明度调节；和/或者，
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第三预设百分比进行饱和度调节。
进一步地，所述修改参数包括：填色参数，处理器1001可以调用存储器 1005中存储的基于弹幕的画面元素修改程序，还执行以下操作：
根据所述填色参数，针对所述指向对象对应的显示画面中的元素基于第四预设百分比进行颜色填充。
基于上述的结构，提出本发明基于弹幕的画面元素修改方法的各个实施例。
需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
第一实施例：请参照图2，图2为本发明基于弹幕的画面元素修改方法第一实施例的流程示意图。本发明提供的基于弹幕的画面元素修改方法，包括：
步骤S100，获取当前显示画面中的弹幕。
终端获取视频当前显示画面中单位时间内的用户发送的弹幕内容。
步骤S200，对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向。
终端针对弹幕内容进行分析，确定弹幕的指向对象即弹幕内容指向的画面元素，以及确定弹幕内容针对该指向对象所包含的情感倾向。
步骤S300，根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
终端在确定弹幕的指向对象以及情感倾向后，根据该情感倾向对应的修改方式针对该指向对象对应的当前显示画面中的元素进行修改。
在本实施例中，通过终端获取视频当前显示画面中单位时间内的用户发送的弹幕内容；终端针对弹幕内容进行分析，确定弹幕的指向对象即弹幕内容指向的画面元素，以及确定弹幕内容针对该指向对象所包含的情感倾向；端在确定弹幕的指向对象以及情感倾向后，根据该情感倾向对应的修改方式针对该指向对象对应的当前显示画面中的元素进行修改。
如此，本实施例提供的基于弹幕的画面元素修改方法，能够根据弹幕对视频画面的元素进行修改和展示，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第二实施例。
在本发明基于弹幕的画面元素修改方法的第二实施例中，在上述步骤 S200中，对所述弹幕进行分析的步骤包括：
步骤S201，基于所述弹幕获取预设信息标签，根据所述预设信息标签确定所述指向对象。
终端根据弹幕内容合成弹幕的文本信息，并从该文本信息中抽取重要信息，重要信息包括时间、地点、人物、事件、原因、结果、数字、日期、货币或者专有名词等，即确定该文本信息中包含了谁在什么时候、基于什么原因、对谁、做什么事以及有什么结果，从而针对该文本信息进行实体识别、时间抽取以及因果关系抽取，并最终确定该弹幕的指向对象，即用户发送该弹幕对应的具体评论对象。
然后，终端针对确定指向对象后的弹幕进行聚类分析，对弹幕的文本信息进行分词处理，将该文本信息内的词汇转换成一个词条列表，针对每个文本信息构建与词条列表维度相同的向量，其中向量值根据词袋模型确定，该词袋模型即为词条列表中每个词条在对应的文本信息中出现的次数；接下来进行权值转换，通过TF-IDF统计方法将文本信息对应的向量转换为TF-IDF 权值向量；接下来计算多个文本信息的权值向量以及余弦相似度，最后通过 K-均值算法输出弹幕的聚类特征，实现针对弹幕进行分类。
具体地，例如，结合视频为男子田径比赛，针对弹幕“苏神YYDS”进行信息抽取的结果为：苏炳添-田径项目-打破男子亚洲记录，并最终确定该弹幕的指向对象为苏炳添。其中，针对确定指向对象后的弹幕进行分类后输出的表格为：
步骤S202，基于所述弹幕的文本确定所述情感倾向。
终端针对目标弹幕进行情感参数确定的方式可以包括：基于微博新闻论坛等数据来源构建的BosonNLP情感词典、情感词典、知网情感分析用词集或者清华大学褒贬义词典等情感词典以及程度副词词表等词典，将弹幕的文本信息遍历分词后的词语导入上述词典进行匹配，输出匹配结果，该匹配结果即可反映该弹幕的情感倾向。
在本实施例中，终端根据弹幕内容的文本信息确定了弹幕的指向对象，并根据指向对象对弹幕进行分类，然后进一步根据该文本信息确定弹幕内容包含的情感倾向。
如此，本实施例提供了确定弹幕的指向对象和情感倾向的具体步骤，提高了本发明的实用性。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第三实施例。
在本发明基于弹幕的画面元素修改方法的第三实施例中，在上述步骤 S202之后，还包括：
基于所述弹幕的文本确定所述情感倾向对应的情感分数，其中，所述情感分数用于反映所述情感倾向的强烈程度。
由于弹幕带有用户非常主观的个人情感或评价，直接反映了用户对于内容的情绪和感受，并且对于用户之间的理解和情绪传达具有关键性作用，因此针对弹幕的情感倾向和情感分数进行了具体分析。
其中，情感倾向包括：积极(肯定)、消极(否定)以及中性三类，对应的情感强烈程度包括：低、中以及高三种；并且，情感倾向中积极和消极的分数分别设为正值和负值，情感强烈程度低、中以及高分别对应的情感分数为1分、2分以及3分，中性情感倾向不计分。
具体地，例如，本实施例在目标弹幕的情感参数确定过程涉及的输出表，包括：
| 编号 | 弹幕内容 | 情感倾向 | 情绪强度 | 情绪强度指数 |
| 20210240 | 苏炳添YYDS | 积极 | 高 | +3 |
| 20120213 | 苏炳添不错啊 | 积极 | 中 | +2 |
| 20124518 | 给中国人争光！！ | 积极 | 高 | +3 |
| 20120250 | 判罚不合理！！ | 消极 | 高 | -3 |
| 20120256 | 东京天气OK | 中性 | —— | 0 |
| … | … | … | … | … |
在本实施例中，通过终端确定弹幕内容的情感倾向和用于反映情感倾向的强烈程度的情感分数，能够在最大程度上将用户发送弹幕时的情绪作为根据，针对显示画面的元素进行对应修改，以使修改结果能够更好地体现用户情绪，形成更为强烈的视觉效果，提升用户观看视频的体验。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第四实施例。
在本发明基于弹幕的画面元素修改方法的第四实施例中，上述步骤S300，可以包括：
步骤S301，根据所述情感倾向和所述情感分数确定修改参数；
步骤S302，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改。
终端在确定弹幕的情感倾向和情感分数后，将相同指向对象的多条目标弹幕的情感倾向和情感分数分别进行汇总计算，得到该指向对象的对应弹幕的积极分数总值和消极分数总值，并将积极分数总值和消极分数总值进行比对，从而得到该指向对象对应的弹幕的整体情感倾向和整体情感分数，然后根据整体情感倾向和整体情感分数确定对应的修改参数，其中，修改参数包含了用于针对该指向对象对应的画面元素进行修改的修改方式和修改程度，并根据该修改方式和该修改程度针对指向对象对应的画面元素进行修改。
具体地，例如，本实施例在将相同指向对象的多条弹幕的情感倾向和情感分数分别进行汇总计算的过程中，涉及的汇总结果表包括：
如此，基于上述汇总结果表，将各指向对象对应的积极分数总值与消极分数总值进行汇总，确定指向对象“苏炳添”的整体情感倾向为积极，整体情感分数为9980，指向对象“日本裁判”的整体情感倾向为消极，整体情感分数为-790，并分别确定指向对象“苏炳添”对应的修改参数和指向对象“日本裁判”对应的修改参数，并根据该修改参数对画面元素“苏炳添”和画面元素“日本裁判”分别进行对应修改。
在本实施例中，通过终端根据弹幕的情感倾向和情感分数确定该弹幕的指向对象对应的修改参数，其中，修改参数包括修改方式和修改程度，并根据该修改方式和修改程度对该指向对象对应的画面元素进行修改。
如此，本实施例能够根据弹幕的情感倾向和情感分数具体限定对应的修改方式和修改程度，以使针对画面元素进行修改的结果能最大程度契合与该画面元素对应的弹幕所包含的用户情绪，提高了用户发送弹幕以及观看视频的体验，从而提高了本发明的实用性。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第五实施例。
在本发明基于弹幕的画面元素修改方法的第五实施例中，所述修改参数包括：缩放参数，上述步骤S302，可以包括：
步骤S3021，根据所述缩放参数，针对所述指向对象对应的显示画面中的元素基于第一预设百分比进行放大或者缩小。
需要说明的是，在本实施例中，缩放参数是用于确定针对视频的画面元素进行放大或者缩小的修改方式，并且包括用于确定放大倍数或者缩小倍数的修改程度的第一预设百分比。
终端在确定弹幕对应的指向对象的整体情感倾向和整体情感分数后，根据该整体情感倾向和整体情感分数确定针对该指向对象进行放大或者缩小的修改方式、以及放大倍数或者缩小倍数的修改程度，并针对该指向对象对应的画面元素进行对应修改。
具体地，例如，系统获取元素A的坐标数据，确定视频画面中A元素的高度l；系统获取当前画面区域总高度L，计算A元素画面可膨胀的空间为 [(L-l)/l]，防止A元素尺寸超出播放画面，当元素A的整体情感倾向为积极情感倾向时，计算元素A的画面等比膨胀百分比x＝[(元素A的积极分数-元素 A的消极分数)/(元素A的积极分数+元素A的消极分数)]*[(L-l)/l]。
同理，当元素A的整体情感倾向为消极情感倾向时，计算元素A的画面等比缩小百分比＝[(元素A的消极分数-元素A的积极分数)/(元素A的积极分数+元素A的消极分数)]，此外，为避免A元素过小影响观看，设置一个画面元素A的缩小百分比阈值，当画面等比缩小百分比小于该阈值时，根据该阈值针对元素A进行缩小。
如此，本实施例实现了根据弹幕针对视频的画面元素采取缩小或者放大的修改方式进行修改，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第六实施例。
在本发明基于弹幕的画面元素修改方法的第六实施例中，所述修改参数包括：色度参数，上述步骤S302，可以包括：
步骤S3022，根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第二预设百分比进行画面明度调节；
步骤S3023，根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第三预设百分比进行饱和度调节。
需要说明的是，在本实施例中，色度参数是用于确定针对视频的画面元素进行画面明度或饱和度调整的修改方式，并且包括用于确定画面明度的调整幅度的修改程度的第二预设百分比，以及用于确定饱和度的调整幅度的第三预设百分比。
终端在确定弹幕对应的指向对象的整体情感倾向和整体情感分数后，根据该整体情感倾向和整体情感分数确定针对该指向对象进行画面明度和/或饱和度调节的修改方式、以及具体的调节幅度，并针对该指向对象对应的画面元素进行对应修改。
具体地，例如，当元素A的整体情感倾向为积极情感倾向时，元素A的色度调整基本参数x＝[(元素A的积极分数-元素A的消极分数)/(元素A 的积极分数+元素A的消极分数)]*[(L-l)/l]，此时画面明度B调整参数为Δ B＝30％*x，上限为30％；饱和度S调整参数为ΔS＝60％*x，上限为60％。
同理，当元素A的整体情感倾向为消极情感倾向时，此时画面明度B调整参数为ΔB＝20％*x，上限为20％；饱和度S调整参数为ΔS＝40％*x，上限为40％。
此外，当元素A的整体情感倾向为中性情感倾向时，记单位时间内弹幕总数为m,指向元素A的弹幕数量为n，则画面明度B调整参数为Δ B＝20％*(m-n)/m，饱和度S调整参数为ΔS＝40％*(m-n)/m。
如图3和图4所示，终端根据色度参数对应的调节画面明度或饱和度的修改方式、以及画面明度或饱和度的调节幅度，针对弹幕的指向对象对应的画面元素的画面明度或饱和度进行修改。
如此，本实施例实现了根据弹幕针对视频的画面元素采取调节画面明度或饱和度的修改方式进行修改，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第七实施例。
在本发明基于弹幕的画面元素修改方法的第七实施例中，所述修改参数包括：填色参数，上述步骤S302，可以包括：
步骤S3024，根据所述填色参数，针对所述指向对象对应的显示画面中的元素基于第四预设百分比进行颜色填充。
需要说明的是，在本实施例中，填色参数是用于确定针对视频的画面元素进行填充颜色遮罩的修改方式，并且包括用于确定填充颜色遮罩的透明度以及填充区域比例的第四预设百分比。
终端在确定弹幕对应的指向对象的整体情感倾向和整体情感分数后，根据该整体情感倾向和整体情感分数确定针对该指向对象进行填充颜色遮罩的修改方式、以及填充颜色遮罩的透明度和填充区域比例，并针对该指向对象对应的画面元素进行对应修改。
具体地，例如，当元素A的整体情感倾向为积极情感倾向时，针对元素 A进行填充颜色遮罩，其中，遮罩透明度d＝[1-(元素A的积极分数-元素A 的消极分数)/(元素A的积极分数+元素A的消极分数)]*100％；画面上部分占比：元素A的积极分数/(元素A的积极分数+元素A的消极分数)的区域填充标准红色，下部分占比：元素A的积极分数/(元素A的积极分数+元素A的消极分数)的区域填充标准绿色。
同理，当元素A的整体情感倾向为消极情感倾向时，针对元素A进行填充颜色遮罩，其中，遮罩透明度d＝[1-(元素A的积极分数-元素A的消极分数)/(元素A的积极分数+元素A的消极分数)]*100％；画面上部分占比：元素A的积极分数/(元素A的积极分数+元素A的消极分数)的区域填充标准绿，下部分占比：元素A的消极分数/(元素A的积极分数+元素A的消极分数)的区域填充标准红色。
此外，当元素A的整体情感倾向为中性情感倾向时，针对元素A进行填充颜色遮罩，其中，遮罩透明度80％；画面上半部分填充标准绿，下部分填充标准红色。
如图3和图4所示，终端根据填色参数对应的填充颜色遮罩的修改方式、以及填充颜色遮罩的透明度和填充区域比例，针对弹幕的指向对象对应的画面元素进行颜色填充。
如此，本实施例实现了根据弹幕针对视频的画面元素采取颜色填充的修改方式进行修改，以使视频画面能够形成更为强烈的视觉效果，提升用户观看视频的体验。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第八实施例。
如图3和图4所示，在本发明基于弹幕的画面元素修改方法的第八实施例中，可以基于上述第五实施例、第六实施例以及第七实施例，针对视频的画面元素同时采用缩放修改、画面明度修改、饱和度修改以及颜色填充中的所有修改方式进行修改，也可从上述修改方式中选择其中一种或几种修改方式针对画面元素进行修改，在此不作具体限制。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第九实施例。
在本发明基于弹幕的画面元素修改方法的第九实施例中，在上述步骤 S300之前，还包括：
步骤A1，针对视频的画面元素进行拆解，得到多个类别的目标画面元素；
步骤A2，根据所述指向对象将所述弹幕与所述目标画面元素进行匹配。
终端获取视频内容，并逐帧进行画面元素和场景的识别，其中画面元素指的是该帧图像的画面主体部分、包含通用物品/物品部位、人/动植物/类别、品牌logo、地标商品等等，然后将弹幕的指向对象与画面元素分别进行匹配，以供根据弹幕针对画面元素进行修改。
具体地，例如，终端将视频画面逐帧输出，导入多主体检测AI能力平台，通过该多主体检测AI能力平台检测图像中的多个主体的坐标位置，并给出主体的分类标签和其他详细属性，然后根据该坐标位置，标记画面中的多个元素，将弹幕的指向对象与画面元素的类别进行匹配，将弹幕的指向对象的三维度输出表类别与画面元素识别输出的数据建立映射关系。其中，在将弹幕的指向对象与画面元素的类别匹配时，可在字符比对的基础上使用相似度算法，将两个类别输出计算文本相似度，从而得到匹配结果。
其中，弹幕的指向对象的三维度输出表为：
画面元素识别输出的数据表为：
其中，子元素是指的是该元素分类下的，针对视频画面识别到的更小的图像单元，如苏炳添是一个类，组成苏炳添的躯干、服装和设备作为子元素；在实际的应用场景中，除了上述针对画面元素进行识别的种类，还可以人工预设额外的类别，以达到更人性化、精细化的类别识别。
在本实施例中，通过终端获取视频画面内容，并逐帧进行画面元素和场景的识别，其中画面元素指的是该帧图像的画面主体部分、包含通用物品/物品部位、人/动植物/类别、品牌logo、地标商品等等，然后将弹幕的指向对象与画面元素分别进行匹配，以供根据弹幕针对画面元素进行修改。
如此，本实施例限定了将弹幕的指向对象与视频的画面元素进行匹配的具体步骤，为根据弹幕针对画面元素进行修改提供了技术基础，提高了本发明基于弹幕的画面元素修改方法的实用性。
进一步地，基于上述基于弹幕的画面元素修改方法第一实施例，提出本发明基于弹幕的画面元素修改方法的第十实施例。
在本发明基于弹幕的画面元素修改方法的第十实施例中，在上述步骤 S300之前，还包括：
步骤B1，获取预设修改周期；
上述步骤S300，可以包括：
步骤B2，根据所述指向对象、所述情感倾向以及所述预设修改周期，对所述当前显示画面中的元素进行修改。
需要说明的是，在本实施例中，预设修改周期为用户预先设置的、针对视频的画面元素进行修改的周期，由于针对画面元素进行修改有可能影响视频本身的表达效果，为了防止因为针对画面元素进行修改而影响用户观看视频内容的体验，本实施例设置预设修改周期以对画面元素的修改过程进行优化。
终端获取预先设置的、针对视频的画面元素进行修改的修改周期，然后根据弹幕的指向对象、情感倾向以及修改周期针对画面元素进行对应修改。
具体地，例如，假定预设修改周期为10秒，则终端每隔10秒针对视频的画面元素进行对应修改。
如此，本实施例设置预设修改周期以对画面元素的修改过程进行优化，防止因为针对画面元素进行修改而影响用户观看视频内容的体验，提高了本发明基于弹幕的画面元素修改方法的实用性。
此外，请参照图5，本发明实施例还提出一种基于弹幕的画面元素修改装置，本发明基于弹幕的画面元素修改装置包括：
获取模块，用于获取当前显示画面中的弹幕；
分析模块，用于对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
修改模块，用于根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
优选地，分析模块，包括：
第一确定单元，用于基于所述弹幕获取预设信息标签，根据所述预设信息标签确定所述指向对象；基于所述弹幕的文本确定所述情感倾向。
优选地，分析模块，还包括：
第二确定单元，用于基于所述弹幕的文本确定所述情感倾向对应的情感分数，其中，所述情感分数用于反映所述情感倾向的强烈程度。
优选地，修改模块，包括：
修改单元，用于根据所述情感倾向和所述情感分数确定修改参数；根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改。
优选地，修改单元，包括：
缩放修改单元，用于根据所述缩放参数，针对所述指向对象对应的显示画面中的元素基于第一预设百分比进行放大或者缩小。
优选地，修改单元，还包括：
画面明度修改单元，用于根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第二预设百分比进行画面明度调节；
饱和度修改单元，用于根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第三预设百分比进行饱和度调节。
优选地，修改单元，还包括：
颜色填充单元，用于根据所述填色参数，针对所述指向对象对应的显示画面中的元素基于第四预设百分比进行颜色填充。
此外，本发明实施例还提出一种终端设备，该终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于弹幕的画面元素修改程序，该基于弹幕的画面元素修改程序被所述处理器执行时实现如上述中的基于弹幕的画面元素修改方法的步骤。
其中，在所述处理器上运行的基于弹幕的画面元素修改程序被执行时所实现的步骤可参照本发明基于弹幕的画面元素修改方法的各个实施例，此处不再赘述。
此外，本发明实施例还提出一种存储介质，应用于计算机，该存储介质可以为非易失性计算机可读存储介质，该存储介质上存储有基于弹幕的画面元素修改程序，所述基于弹幕的画面元素修改程序被处理器执行时实现如上所述的基于弹幕的画面元素修改方法的步骤。
其中，在所述处理器上运行的基于弹幕的画面元素修改程序被执行时所实现的步骤可参照本发明基于弹幕的画面元素修改方法的各个实施例，此处不再赘述。
此外，本发明实施例还提出一种计算机程序产品，该计算机程序产品上包括基于弹幕的画面元素修改程序，所述基于弹幕的画面元素修改程序被处理器执行时实现如上所述的基于弹幕的画面元素修改方法的步骤。
其中，在所述处理器上运行的基于弹幕的画面元素修改程序被执行时所实现的步骤可参照本发明基于弹幕的画面元素修改方法的各个实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘) 中，包括若干指令用以使得基于弹幕的画面元素修改装置执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种基于弹幕的画面元素修改方法，其特征在于，所述方法包括：
获取当前显示画面中的弹幕；
对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
2.如权利要求1所述的方法，其特征在于，对所述弹幕进行分析的步骤包括：
基于所述弹幕获取预设信息标签，根据所述预设信息标签确定所述指向对象；
基于所述弹幕的文本确定所述情感倾向。
3.如权利要求2所述的方法，其特征在于，在基于所述弹幕的文本确定所述情感倾向的步骤之后，还包括：
基于所述弹幕的文本确定所述情感倾向对应的情感分数，其中，所述情感分数用于反映所述情感倾向的强烈程度。
4.如权利要求3所述的方法，其特征在于，所述根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改的步骤，包括：
根据所述情感倾向和所述情感分数确定修改参数；
根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改。
5.如权利要求4所述的方法，其特征在于，所述修改参数包括：缩放参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述缩放参数，针对所述指向对象对应的显示画面中的元素基于第一预设百分比进行放大或者缩小。
6.如权利要求4所述的方法，其特征在于，所述修改参数包括：色度参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第二预设百分比进行画面明度调节；和/或者，
根据所述色度参数，针对所述指向对象对应的显示画面中的元素基于第三预设百分比进行饱和度调节。
7.如权利要求4所述的方法，其特征在于，所述修改参数包括：填色参数，根据所述修改参数对应的修改方式和修改程度，针对所述指向对象对应的显示画面中的元素进行修改的步骤，包括：
根据所述填色参数，针对所述指向对象对应的显示画面中的元素基于第四预设百分比进行颜色填充。
8.一种基于弹幕的画面元素修改装置，其特征在于，所述装置包括：
获取模块，用于获取当前显示画面中的弹幕；
分析模块，用于对所述弹幕进行分析，确定所述弹幕的指向对象以及情感倾向；
修改模块，用于根据所述指向对象以及所述情感倾向，对所述当前显示画面中的元素进行修改。
9.一种终端设备，其特征在于，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于弹幕的画面元素修改程序，所述基于弹幕的画面元素修改程序被所述处理器执行时实现如权利要求1至7中任一项所述的基于弹幕的画面元素修改方法的步骤。
10.一种计算机存储介质，其特征在于，所述计算机存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的基于弹幕的画面元素修改方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111489143.XA CN114286155A (zh) | 2021-12-07 | 2021-12-07 | 基于弹幕的画面元素修改方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111489143.XA CN114286155A (zh) | 2021-12-07 | 2021-12-07 | 基于弹幕的画面元素修改方法、装置、设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114286155A true CN114286155A (zh) | 2022-04-05 |
Family
ID=80871224
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111489143.XA Pending CN114286155A (zh) | 2021-12-07 | 2021-12-07 | 基于弹幕的画面元素修改方法、装置、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114286155A (zh) |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102821121A (zh) * | 2011-06-09 | 2012-12-12 | 广达电脑股份有限公司 | 多形式附加富媒体评论系统及方法 |
| KR20130093186A (ko) * | 2012-02-14 | 2013-08-22 | 주식회사 와이즈게코 | 인터랙티브 캐릭터를 활용한 동영상 제작 장치 |
| CN103646088A (zh) * | 2013-12-13 | 2014-03-19 | 合肥工业大学 | 基于CRFs和SVM的产品评论细粒度情感要素提取 |
| CN104881237A (zh) * | 2015-06-15 | 2015-09-02 | 广州华多网络科技有限公司 | 一种网络互动方法及客户端 |
| CN106294831A (zh) * | 2016-08-18 | 2017-01-04 | 北京奇虎科技有限公司 | 一种信息推荐方法及电子设备 |
| CN107613315A (zh) * | 2017-10-30 | 2018-01-19 | 广东欧珀移动通信有限公司 | 视频画质调整方法、装置、终端设备及存储介质 |
| KR20180079235A (ko) * | 2018-01-09 | 2018-07-10 | 스튜디오씨드코리아 주식회사 | 인터랙티브 컨텐츠에 대한 코멘트 방법 및 코멘트 시나리오 재연 방법 |
| US20190166394A1 (en) * | 2017-11-30 | 2019-05-30 | Shanghai Bilibili Technology Co., Ltd. | Generating and presenting directional bullet screen |
| CN111050193A (zh) * | 2019-11-12 | 2020-04-21 | 汉口北进出口服务有限公司 | 用户画像构建方法、装置、计算机设备和存储介质 |
| CN111212328A (zh) * | 2019-12-31 | 2020-05-29 | 咪咕互动娱乐有限公司 | 弹幕显示方法、弹幕服务器和计算机可读存储介质 |
| CN112135160A (zh) * | 2020-09-24 | 2020-12-25 | 广州博冠信息科技有限公司 | 直播中虚拟对象控制方法及装置、存储介质和电子设备 |
| CN112135154A (zh) * | 2020-09-08 | 2020-12-25 | 网易（杭州）网络有限公司 | 直播间互动方法、电子设备及存储介质 |
| US10970843B1 (en) * | 2015-06-24 | 2021-04-06 | Amazon Technologies, Inc. | Generating interactive content using a media universe database |
| CN113490006A (zh) * | 2021-07-01 | 2021-10-08 | 北京云生万物科技有限公司 | 基于弹幕的直播互动方法及设备 |
| CN113688202A (zh) * | 2021-07-30 | 2021-11-23 | 杭州网易云音乐科技有限公司 | 情感极性分析方法、装置、电子设备以及计算机存储介质 |
-
2021
- 2021-12-07 CN CN202111489143.XA patent/CN114286155A/zh active Pending
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102821121A (zh) * | 2011-06-09 | 2012-12-12 | 广达电脑股份有限公司 | 多形式附加富媒体评论系统及方法 |
| KR20130093186A (ko) * | 2012-02-14 | 2013-08-22 | 주식회사 와이즈게코 | 인터랙티브 캐릭터를 활용한 동영상 제작 장치 |
| CN103646088A (zh) * | 2013-12-13 | 2014-03-19 | 合肥工业大学 | 基于CRFs和SVM的产品评论细粒度情感要素提取 |
| CN104881237A (zh) * | 2015-06-15 | 2015-09-02 | 广州华多网络科技有限公司 | 一种网络互动方法及客户端 |
| US10970843B1 (en) * | 2015-06-24 | 2021-04-06 | Amazon Technologies, Inc. | Generating interactive content using a media universe database |
| CN106294831A (zh) * | 2016-08-18 | 2017-01-04 | 北京奇虎科技有限公司 | 一种信息推荐方法及电子设备 |
| CN107613315A (zh) * | 2017-10-30 | 2018-01-19 | 广东欧珀移动通信有限公司 | 视频画质调整方法、装置、终端设备及存储介质 |
| US20190166394A1 (en) * | 2017-11-30 | 2019-05-30 | Shanghai Bilibili Technology Co., Ltd. | Generating and presenting directional bullet screen |
| KR20180079235A (ko) * | 2018-01-09 | 2018-07-10 | 스튜디오씨드코리아 주식회사 | 인터랙티브 컨텐츠에 대한 코멘트 방법 및 코멘트 시나리오 재연 방법 |
| CN111050193A (zh) * | 2019-11-12 | 2020-04-21 | 汉口北进出口服务有限公司 | 用户画像构建方法、装置、计算机设备和存储介质 |
| CN111212328A (zh) * | 2019-12-31 | 2020-05-29 | 咪咕互动娱乐有限公司 | 弹幕显示方法、弹幕服务器和计算机可读存储介质 |
| CN112135154A (zh) * | 2020-09-08 | 2020-12-25 | 网易（杭州）网络有限公司 | 直播间互动方法、电子设备及存储介质 |
| CN112135160A (zh) * | 2020-09-24 | 2020-12-25 | 广州博冠信息科技有限公司 | 直播中虚拟对象控制方法及装置、存储介质和电子设备 |
| CN113490006A (zh) * | 2021-07-01 | 2021-10-08 | 北京云生万物科技有限公司 | 基于弹幕的直播互动方法及设备 |
| CN113688202A (zh) * | 2021-07-30 | 2021-11-23 | 杭州网易云音乐科技有限公司 | 情感极性分析方法、装置、电子设备以及计算机存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 孙振虎: "参与式文化视角下的弹幕视频分析", 《当代传播》, 15 November 2018 (2018-11-15) * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110020437B (zh) | 一种视频和弹幕相结合的情感分析及可视化方法 | |
| CN107197384B (zh) | 应用于视频直播平台的虚拟机器人多模态交互方法和系统 | |
| CN104933084B (zh) | 一种用于获得答案信息的方法、装置和设备 | |
| CN110446063B (zh) | 视频封面的生成方法、装置及电子设备 | |
| US9449256B1 (en) | Providing image candidates based on diverse adjustments to an image | |
| US20180268307A1 (en) | Analysis device, analysis method, and computer readable storage medium | |
| CN109509010B (zh) | 一种多媒体信息处理方法、终端及存储介质 | |
| CN112215171B (zh) | 目标检测方法、装置、设备及计算机可读存储介质 | |
| CN112307240B (zh) | 页面展示方法、装置、存储介质及电子设备 | |
| CN109885796B (zh) | 一种基于深度学习的网络新闻配图匹配性检测方法 | |
| CN105874449A (zh) | 用于提取和生成用于显示内容的图像的系统和方法 | |
| KR102111720B1 (ko) | 클라우드 저작물 분석을 통한 디자인 추천 방법 | |
| CN101668176A (zh) | 一种基于人际社交图的多媒体内容点播与分享方法 | |
| WO2023045635A1 (zh) | 多媒体文件的字幕处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品 | |
| CN112887746A (zh) | 直播互动方法及装置 | |
| CN111768377A (zh) | 图像色彩评估方法、装置、电子设备及存储介质 | |
| CN113497946A (zh) | 视频处理方法、装置、电子设备和存储介质 | |
| CN112822539B (zh) | 信息显示方法、装置、服务器及存储介质 | |
| CN111695323B (zh) | 信息处理方法、装置及电子设备 | |
| CN111597361B (zh) | 多媒体数据处理方法、装置、存储介质及设备 | |
| CN112488114A (zh) | 一种图片合成方法及装置、文字识别系统 | |
| CN112866577A (zh) | 图像的处理方法、装置、计算机可读介质及电子设备 | |
| CN113282770A (zh) | 一种多媒体推荐系统及方法 | |
| CN114286155A (zh) | 基于弹幕的画面元素修改方法、装置、设备和存储介质 | |
| CN111182295A (zh) | 一种视频数据处理方法、装置、设备以及可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |