CN113377198B - 一种屏保交互方法、装置、电子设备和存储介质 - Google Patents
一种屏保交互方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN113377198B CN113377198B CN202110664505.8A CN202110664505A CN113377198B CN 113377198 B CN113377198 B CN 113377198B CN 202110664505 A CN202110664505 A CN 202110664505A CN 113377198 B CN113377198 B CN 113377198B
- Authority
- CN
- China
- Prior art keywords
- interaction
- screen saver
- information
- dynamic
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 423
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000000694 effects Effects 0.000 claims abstract description 103
- 230000008846 dynamic interplay Effects 0.000 claims abstract description 100
- 230000008859 change Effects 0.000 claims description 112
- 238000012545 processing Methods 0.000 claims description 26
- 230000006399 behavior Effects 0.000 claims description 19
- 230000001133 acceleration Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 15
- 238000007499 fusion processing Methods 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 5
- 230000003068 static effect Effects 0.000 claims description 4
- 230000002452 interceptive effect Effects 0.000 description 96
- 230000006870 function Effects 0.000 description 17
- 241000251468 Actinopterygii Species 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 239000002245 particle Substances 0.000 description 6
- 238000013507 mapping Methods 0.000 description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000009182 swimming Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 241000533950 Leucojum Species 0.000 description 1
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Evolutionary Computation (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
本申请实施例公开了一种屏保交互方法、装置、电子设备和存储介质;本申请实施例可以显示屏保界面;当接收到交互对象针对屏保内容的交互触发指令时,根据该交互触发指令获取目标交互信息;根据目标交互信息确定该屏保内容对应的动态交互效果;在该屏保界面上显示针对该屏保内容的动态交互效果,以实现该交互对象和该屏保内容的动态交互。
Description
技术领域
本申请涉及通讯技术领域,具体涉及一种屏保交互方法、装置、电子设备和存储介质。
背景技术
屏保是为了保护显示器而设计的一种专门的程序,其可以防止电脑因无人操作而使显示器长时间显示同一画面,导致老化而缩短显示器寿命。近几年来,随着互联网技术和电视技术的快速发展,电视的使用场景和功能也逐渐增多。但是,电视上的屏保技术依旧发展缓慢,要么是仅提供电视剧或电影的海报,要么是一些固定的动画效果,屏保显示以及功能比较单一。
发明内容
本申请实施例提出了一种屏保交互方法、装置、电子设备和存储介质,可以实现对屏保进行动态交互。
本申请实施例提供了一种屏保交互方法,包括:
显示屏保界面;
当接收到交互对象针对所述屏保界面中屏保内容的交互触发指令时,根据所述交互触发指令获取目标交互信息;
根据所述目标交互信息确定所述屏保内容对应的动态交互效果;
在所述屏保界面上显示针对所述屏保内容的动态交互效果,以实现所述交互对象和所述屏保内容的动态交互。
相应的,本申请实施例还提供了一种屏保交互装置,包括:
第一显示单元,用于显示屏保界面;
获取单元,用于当接收到针对所述屏保界面中屏保内容的交互触发指令时,根据所述交互触发指令获取目标交互信息,其中,所述交互信息包括交互对象针对所述屏保界面中的屏保内容进行交互时生成的信息;
确定单元,用于根据所述目标交互信息确定所述屏保内容对应的动态交互效果;
第二显示单元,用于在所述屏保界面上显示针对所述屏保内容的动态交互效果,以实现交互对象和所述屏保内容的动态交互。
在一实施例中,所述获取单元,包括:
获取子单元,用于当接收到所述交互触发指令时,获取多个视频帧;
解析子单元,用于对每个视频帧进行解析,得到所述每个视频帧中所述交互对象针对所述屏保内容的交互信息;
信息融合处理子单元,用于对所述每个视频帧对应的交互信息进行信息融合处理,以得到所述目标交互信息。
在一实施例中,所述解析子单元,包括:
特征提取模块,用于对当前视频帧进行特征提取,得到当前视频帧的特征信息;
确定模块,用于根据所述特征信息,在所述视频帧中确定所述交互对象的交互部位;
生成模块,用于根据所述交互部位生成所述交互信息。
在一实施例中,所述信息融合子单元,包括:
对比处理模块,用于将每个视频帧对应的位置信息进行对比处理,得到所述目标交互方向信息;
逻辑运算处理模块,用于将每个视频帧对应的位置信息和预设视频帧率进行逻辑运算处理,得到所述目标交互速度信息。
在一实施例中,所述确定单元,包括:
方向适配子单元,用于将所述目标交互方向信息与所述屏保内容进行适配,得到所述屏保内容的变化方向;
速度适配子单元,用于将所述目标交互速度信息与所述屏保内容进行适配,得到所述屏保内容的变化速度;
确定子单元,用于根据所述变化方向和变化速度确定所述屏保内容对应的动态交互效果。
在一实施例中,所述第二显示单元,包括:
作用力信息生成子单元,用于根据所述动态变化方向,生成作用于所述屏保内容的作用力信息;
加速度信息生成子单元,用于根据所述动态变化速度,生成作用于所述屏保内容的加速度信息;
添加子单元,用于将所述加速度信息和作用力信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度,以及所述动态变化方向变化的动态交互效果。
在一实施例中,所述第二显示单元,包括:
噪声信息生成子单元,用于根据所述动态变化速度,生成作用于所述屏保内容的噪声信息;
添加子单元,用于将所述噪声信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度进行杂乱变化的动态交互效果。
相应的,本申请实施例还提供一种电子设备,所述电子设备包括包括存储器和处理器;所述存储器存储有计算机程序,所述处理器用于运行所述存储器内的计算机程序,以执行本申请实施例任一提供的屏保交互方法。
相应的,本申请实施例还提供一种存储介质,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时实现本申请实施例任一提供的屏保交互方法。
本申请实施例可以显示屏保界面;当接收到交互对象针对屏保内容的交互触发指令时,根据该交互触发指令获取目标交互信息;根据目标交互信息确定该屏保内容对应的动态交互效果;在该屏保界面上显示针对该屏保内容的动态交互效果,以实现该交互对象和该屏保内容的动态交互。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的屏保交互方法的场景示意图;
图2是本申请实施例提供的屏保交互方法的流程示意图;
图3是本申请实施例提供的位置信息的示意图;
图4是本申请实施例提供的位置信息的又一示意图;
图5是本申请实施例提供的位置信息的又一示意图;
图6是本申请实施例提供的位置信息的又一示意图;
图7是本申请实施例提供的屏保内容的场景示意图;
图8是本申请实施例提供的屏保内容的又一场景示意图;
图9是本申请实施例提供的屏保内容的又一场景示意图;
图10是本申请实施例提供的屏保内容交互装置的结构示意图;
图11是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,然而,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提出了一种屏保交互方法,该屏保交互方法可以由屏保交互装置执行,该屏保交互装置可以集成在具有屏保功能的电子设备中。其中,该电子设备可以包括终端以及服务器等中的至少一个。即该屏保交互方法可以由终端执行,也可以由服务器执行。
其中,该终端可以包括智能电视、智能手机、智能家居、可穿戴电子设备、VR/AR设备、车载计算机等等。
其中,服务器可以为多个异构系统之间的互通服务器或者产品验证测试系统的后台服务器,还可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、以及大数据和人工智能平台等基础云计算服务的云服务器等等。
在一实施例中,如图1所示,屏保交互装置可以集成在终端或服务器等电子设备上,以实施本申请实施例提出的屏保交互方法。具体地,电子设备1011可以显示屏保界面;当接收到交互对象1012针对屏保界面中屏保内容的交互触发指令时,根据该交互触发指令获取目标交互信息;根据目标交互信息确定该屏保内容对应的动态交互效果;在该屏保界面上显示针对该屏保内容的动态交互效果,以实现该交互对象1011和该屏保内容的动态交互。
以下分别进行详细说明,需要说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
本申请实施例将从屏保交互装置的角度进行描述,该屏保交互装置可以集成在电子设备中,该电子设备可以包括电视等具有屏保功能的设备。
如图2所示,提供了一种屏保交互方法,具体流程包括:
101、显示屏保界面。
其中,屏保界面包括电子设备上显示屏保内容的界面。例如,该屏保界面可以包括电视上显示屏保内容的界面,等等。
其中,屏保内容包括屏保界面上显示的内容。
例如,当屏保界面上显示的是电影海报时,则屏保界面的屏保内容是电影海报。
又例如,当屏保界面上显示的是满屏的线条飞舞时,则屏保界面的屏保内容是满屏在飞舞的线条。
又例如,当屏保界面上显示的是一个星空的背景时,则屏保界面的屏保内容是星空的背景。
在一实施例中,屏保内容包括具有动态效果的内容。
其中,具有动态效果的屏保内容可以包括屏保中的内容是具有动态变化的。
例如,当屏保内容是电影海报,但是该电影海报是在不断地动态变化的。例如,该电影海报的位置是在不断变化的,此时,该屏保内容便是具有动态效果的。
又例如,当屏保内容是满屏的线条飞舞时,由于线条是具有满屏飞舞的动态变化,所以该屏保内容是具有动态效果的。
又例如,当屏保内容是星空背景,且该星空背景具有不断变化的效果时,则该屏保内容是具有动态效果的。
在一实施例中,屏保内容还可以包括具有静态效果的内容。
其中,具有静态效果的屏保内容可以包括屏保中的内容是静态不动的。
例如,该屏保内容可以包括静态不动的单张图片或多张图片,等等。
在一实施例中,在显示屏保界面之前,还可以提前绘制好在屏保界面上显示的屏保内容。例如,可以利用图像视图(ImageView)提前绘制好屏保内容。又例如,还可以利用安卓画布(Android Canvas)提前绘制好屏保内容。又例如,还可以利用Processing库提前绘制好屏保内容。
其中,Android Canvas是一种绘图方法。其在Android操作系统上,借助2D绘图框架Canvas,为我们提供了在底层位图上进行绘图的方法。
其中,Processing是一种开源式语言,专门为电子艺术和视觉互动设计而创建,其目的是通过可视化的方式辅助编程教学,并在此基础之上表达数字创意。
在一实施例中,当电子设备处于开启状态,且长时间未使用电子设备时,电子设备便会显示屏保界面,其中,此时屏保界面中的内容可以是具有动态效果的屏保内容。例如,当电视处于开启状态,且该电视并没有播放任何电视节目时,便会显示屏保界面,其中,此时屏保界面中的内容可以是具有动态效果的屏保内容。
102、当接收到交互对象针对屏保界面中屏保内容的交互触发指令时,根据交互触发指令获取目标交互信息。
其中,目标交互信息包括可以表示交互对象交互行为的信息。例如,该目标交互信息可以包括目标交互方向信息、目标交互速度信息和目标交互位置信息、目标交互距离信息等中的至少一种。
其中,该目标交互方向信息包括可以交互行为方向变化的信息。例如,当交互对象通过手和屏保内容进行交互时,该目标交互方向信息可以包括交互对象手的变化方向。又例如,当交互对象通过脸和屏保内容进行交互时,该目标交互方向信息可以包括交互对象脸的变化方向,等等。例如,该目标交互方向信息可以表示交互对象手是从东向西变化,还是从西向东变化,等等。
其中,该目标交互速度信息可以包括交互行为速度变化的信息。例如,当交互对象通过手和屏保内容进行交互时,该目标交互速度信息可以包括交互对象手的变化速度。又例如,当交互对象通过脸和屏保内容进行交互时,该目标交互速度信息可以包括交互对象脸的变化速度,等等。
其中,目标交互位置信息可以包括交互对象交互部位在视频帧中的位置信息映射到屏保内容对应位置时的信息。
其中,目标交互距离信息可以包括交互对象和屏保界面进行交互时,交互对象和屏保界面之间的距离。例如,当交互对象和屏保界面之间的距离为1米时,目标交互信息为1米。又例如,当交互对象和屏保界面之间的距离为50厘米时,目标交互信息为0.5米。
在一实施例中,本申请实施例中所提及的电子设备可以具有感应功能。例如,当该电子设备是电视时,该电视可以具有红外线感应模块。当电视显示了屏保界面,且通过红外线感应模块感应到有交互对象准备和屏保内容进行交互时,电视便会接收到交易触发指令。例如,当红外感应模块感应到电视前有交互对象时,电视便会接收到交易触发指令。
在一实施例中,本申请实施例中所提及的电子设备还可以具有拍摄功能。例如,当该电子设备是电视时,该电视可以外接拍摄装置。又或者,该电视可以内嵌拍摄装置。例如,电视可以外接摄像头,还可以是内嵌有摄像头,等等。
通过令电子设备具有拍摄功能,从而使得电子设备接收到交互触发指令时,可以通过摄像头拍摄交互对象的交互行为,从而实现和交互对象的动态交互。
其中,该交互对象包括可以和屏保界面中的屏保内容进行交互的对象。例如,该交互对象可以包括人类或者动物,等等。
其中,该交互行为包括交互对象可以实现和屏保内容进行交互的行为。
例如,当电子设备是电视时,该交互行为可以是交互对象用手对电视上的屏保内容进行交互的操作。又例如,该交互行为可以是交互对象用脸部对电视上的屏保内容进行交互的操作。又例如,该交互行为可以是交互对象同时利用脸和手对屏保内容进行交互的操作,等等。
例如,当交互对象通过手和电视上的屏保内容进行交互时,该交互行为可以包括交互对象手和电视之间的位置不断变化的行为。又例如,该交互行为还可以包括交互对象手的姿势不断变化的行为,等等。
又例如,当交互对象通过脸和电视上屏保内容进行交互时,该交互行为可以包括交互对象脸的位置不断发生变化。又例如,还可以是交互对象的脸跟电视的距离有一个远近的变化,等等。
又例如,当交互对象通过脸以及手和电视上屏保内容进行交互时,该交互行为可以包括交互对象脸和手的变化,等等。
又例如,当交互对象通过改变距离和电视上屏保内容进行交互时,该交互行为可以包括交互对象和电视之间屏保距离的变化。
在一实施例中,当电视上同时具有红外线感应模块和拍摄装置时,若红外线感应模块检测到有交互对象想和屏保内容进行交互时,红外感应模块便会生成交互触发指令,并将该交互触发指令发送至屏保交互装置。此时,屏保交互装置可以开启拍摄装置,并通过拍摄装置拍摄交互对象的交互行为。
例如,当电视显示屏保界面时,若红外线感应模块检测到交互对象站在电视面前,则会生成交互触发指令,并将交互触发指令发送至屏保交互装置。
在一实施例中,当电子设备具有拍摄装置时,也可以直接利用拍摄装置对交互对象进行检测,当检测到有交互对象想对屏保内容进行交互时,便可以生成交互触发指令。
其中,当摄像头是通过数据线等形式外接于电视时,摄像头便会生成交互触发指令,并将交互触发指令传输至电视。此时,电视便会接收到交互触发指令,并根据该交互触发指令获取目标交互信息。
其中,当摄像头是内嵌于电视时,若摄像头拍摄到交互对象针对屏保内容进行交互,电视的屏保交互装置便会直接接收到交互触发指令,并根据该交互触发指令获取目标交互信息。
在一实施例中,当接收到交互触发指令时,拍摄装置会持续地拍摄交互对象针对屏保内容的交互行为,并将包括该交互行为的视频帧传输至电子设备的屏保交互装置中,以使得屏保交互装置根据该视频帧获取目标交互信息。具体地,步骤“当接收到针对所述屏保内容的交互触发指令时,根据所述交互触发指令获取目标交互信息”,可以包括:
当接收到交互触发指令时,获取多个视频帧;
对每个视频帧进行解析,得到每个视频帧中交互对象针对屏保内容的交互信息;
对每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息。
通过对每个视频帧进行解析,得到每个视频帧中交互对象针对屏保内容的交互信息,并对每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息,可以提高获取目标交互信息的准确性。
其中,交互信息可以包括每个视频帧中,交互对象进行交互行为时所用到的交互部位的信息。例如,交互信息可以包括每个视频帧中,交互对象进行交互行为时所用到的交互部位的位置信息,等等。又例如,由于交互对象可以通过改变和屏保界面的距离,从而实现和屏保内容的交互,因此交互信息可以包括每个视频帧中交互对象占视频帧面积的大小。例如,当交互对象和屏保界面之间的距离比较近时,交互对象占视频帧的面积会比较大。又例如,当交互对象和屏保界面之间的距离比较远时,交互对象占视频帧的面积会比较小。其中,该交互部位可以包括交互对象的手或脸等中的至少一种。
在一实施例中,当屏保交互装置接收到交互触发指令时,便会获取拍摄装置采集的多个视频帧,且该多个视频帧中包括了交互对象针对屏保内容的交互行为。
其中,电子设备和拍摄装置之间可以具有一个数据回调接口,通过该数据回调接口从而使得拍摄装置采集到的视频帧可以传输至屏保交互装置。
然后,屏保交互装置便可以对每个视频帧进行解析,从而得到每个视频帧中交互对象针对屏保内容的交互信息。
其中,在对视频帧进行解析时,可以利用多种方式对视频帧进行解析。
例如,可以利用各种具有图像解析功能的神经网络模型对视频帧进行解析。例如,可以利用卷积神经网络(Convolutional Neural Networks,CNN)、反卷积神经网络(De-Convolutional Networks,DN)、深度卷积逆向图网络(Deep Convolutional InverseGraphics Networks,DCIGN)、基于区域的卷积网络(Region-based ConvolutionalNetworks,RCNN)和基于区域的快速卷积网络(Faster Region-based ConvolutionalNetworks,Faster RCNN)等等。
又例如,还可以利用开源计算机视觉库(Open Source Computer VisionLibrary,openCV)对视频帧进行解析。其中,openCV是一个跨平台计算机视觉和机器学习软件库,可以运行在多个操作系统上,同时提供了多种编程语言的接口,实现了图像处理和计算机视觉方向的很多通用算法。
在一实施例中,当采用openCV对视频帧进行解析时,可以提前对openCV进行训练以及设置,从而使得openCV可以正确地对视频帧进行解析。例如,当对视频帧进行解析是需要得到交互对象手和脸的交互信息时,可以初始openCV中人脸以及人手的分类器,从而使得openCV可以正确地识别出交互对象手的交互信息和脸的交互信息。
在一实施例中,当利用openCV对视频帧进行解析之前,有可能需要对视频帧进行格式转换。
例如,openCV只可以对红绿蓝(RedGreenBlue,RGB)格式的图像进行解析,而视频帧是亮度色度(Luminance Chrominance,YUN)格式的,此时便需要对获取到的视频帧进行格式转换。
其中,YUV是一种颜色编码方法。常使用在各个影像处理组件中。YUV在对照片或视频编码时,考虑到人类的感知能力,允许降低色度的带宽。YUV是编译true-color颜色空间(color space)的种类,Y'UV,YUV,YCbCr,YPbPr等专有名词都可以称为YUV,彼此有重叠。“Y”表示明亮度(Luminance、Luma),“U”和“V”则是色度、浓度(Chrominance、Chroma)。
在一实施例中,当利用openCV对多个视频帧进行解析时,可以利用openCV对多个视频帧进行特征提取,得到视频帧的特征信息,并根据特征信息生成交互对象针对屏保内容的交互信息。具体地,步骤“对每个视频帧进行解析,得到每个视频帧中交互对象针对屏保内容的交互信息”,可以包括:
对当前视频帧进行特征提取,得到当前视频帧的特征信息;
根据特征信息,在视频帧中确定交互对象的交互部位;
根据交互部位生成交互信息。
在一实施例中,对于电子设备而言,视频帧即为一幅图像,而图像是由一个个像素构成的,每个像素都是由色彩数据构成的。因此,对于电子设备而言,图像便是一堆堆的数字。因此,在对当前视频帧进行特征提取时,便是对构成视频帧的数据进行特征提取。
其中,openCV中内置有多种特征提取的方式。例如,可以利用卷积、加权、求平均等方式对视频帧进行特征提取,从而得到视频帧的特征信息。
在一实施例中,在得到当前视频帧的特征信息之后,便可以根据特征信息,利用openCV在视频帧中确定交互对象的交互部位。其中,由于在利用openCV之前,有对openCV进行训练以及设置,因此openCV可以根据训练以及设置时得到的“经验”在视频帧中确定交互对象的交互部位。
例如,openCV根据训练以及设置得到的“经验”得交互部位的特征信息是一定阈值范围内。因此,当openCV得到当前视频帧中的特征信息后,便会将当前视频帧中的特征信息和预设阈值进行比较,从而在视频帧中确定出交互对象的交互部位,等等。
在一实施例中,当在视频帧中确定了交互对象的交互部位之后,便可以根据该交互部位生成交互信息。
其中,该交互信息可以包括每个视频帧中,交互对象进行交互行为时所用到的交互部位的信息。例如,交互信息可以包括每个视频帧中,交互对象进行交互行为时所用到的交互部位的位置信息,等等。
例如,当交互对象通过手和交互内容进行交互时,该交互信息可以包括交互对象的手在视频帧中的位置信息。又例如,当交互对象通过脸和交互内容进行交互时,该交互信息可以包括交互对象的脸在视频帧中的位置信息。
其中,该位置信息可以有多种表示方式。例如,可以为每个视频帧都建立一个具有预设坐标值的坐标轴,则该位置信息可以包括交互部位在坐标轴中的信息。例如,如图3所示,可以以视频帧1021的左下角为坐标原点建立具有预设坐标值的坐标轴,从而利用该预设坐标值表示交互部位的位置信息。
在一实施例中,为了方便地表示交互部位的位置信息,在视频帧中确定交互对象的交互部位时,在涵盖交互部位的范围内生成一个恰当的四边形,并将该四边形的位置信息作为交互部位的位置信息。
例如,如图4所示,当交互部分为交互对象的手时,可以在视频帧中生成一个恰好涵盖该手的矩形1022,并在该矩形的位置信息作为手的位置信息。
其中,当将矩形的位置信息作为手的位置信息时,该矩形的位置信息可以表示为一个矩形(Rectangle,Rect)对象。其中,该Rect对象可以包括四个参数,分别是(x,y,width,height)。其中,x可以表示矩形左上角的横坐标,y可以表示矩形左上角的纵坐标,width可以表示矩形的宽,height可以表示矩形的高,例如,如图5所示。
在一实施例中,当交互对象同时利用多个交互部位和屏保内容进行交互时,则可以分别为交互对象的各个交互部位都生成一个Rect对象,从而得到每个交互部位的位置信息。例如,当交互对象同时利用手和脸和屏保内容进行交互时,则可以分别为交互对象的手和脸都生成一个Rect对象,从而得到交互对象的手和脸的位置信息。例如,如图6所示,当交互对象同时利用手和脸和屏保内容进行交互时,则可以分别为交互对象的手和脸都生成一个Rect对象(如1023和1024),从而得到交互对象的手和脸的位置信息。
在一实施例中,在对每个视频帧对应的交互信息进行信息融合,得到目标交互信息时,可以根据交互对象针对屏保内容进行交互时的位置信息,得到目标交互信息。具体地,当目标交互包括目标交互方向信息和目标交互速度信息时,步骤“对每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息”,可以包括:
将每个视频帧对应的位置信息进行对比处理,得到目标交互方向信息;
将每个视频帧对应的位置信息和视频帧率进行逻辑运算处理,得到目标交互速度信息。
在一实施例中,当以Rect对象表示每个视频帧中交互部位的位置信息时,可以将当前视频帧中交互部位的位置信息和下一视频帧中交互部位的位置信息进行对比,计算出当前视频帧中位置信息和下一视频帧中位置信息的差值,从而当前视频帧中交互部位和下一帧中交互部位之间的变化方向。通过不断地将多个视频帧中相邻两帧的位置信息进行对比,并计算差值,从而确定了交互部位的变化方向,从而得到了目标交互方向信息。
在一实施例中,可以将每个视频帧对应的位置信息和预设视频帧率进行逻辑运算处理,从而得到目标交互速度信息。
其中,在将每个视频帧对应的位置信息和预设视频帧率进行逻辑运算处理时,可以包括将每个视频帧对应的位置信息和预设视频帧率按照预设运算逻辑进行加减乘除等逻辑运算,从而得到目标交互速度信息。
例如,可以按序地将多个视频帧中相邻两帧的位置信息和预设视频帧按照预设运算逻辑进行加减乘除等逻辑运算,从而确定交互部位的变化速度,得到目标交互速度信息。
其中,需要说明的是,上述两个步骤并没有执行顺序的现在。可以先执行步骤“将每个视频帧对应的位置信息进行对比处理,得到目标交互方向信息”,再执行步骤“将每个视频帧对应的位置信息和视频帧率进行逻辑运算处理,得到目标交互速度信息”。也可以先执行步骤“将每个视频帧对应的位置信息和视频帧率进行逻辑运算处理,得到目标交互速度信息”,再执行步骤“将每个视频帧对应的位置信息和视频帧率进行逻辑运算处理,得到目标交互速度信息”。
在一实施例中,当目标交互信息包括目标交互位置信息时,步骤“对每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息”,可以包括:
将每个视频帧对应的位置信息与屏保内容进行映射处理,得到目标交互位置信息。
例如,可以将每个视频帧对应的位置信息映射到屏保内容对应的位置中,从而得到目标交互位置信息。
103、根据目标交互信息确定屏保内容对应的动态交互效果。
其中,该动态交互效果包括可以使得该屏保内容根据目标交互信息进行动态变化的效果。例如,该动态交互效果可以包括屏保内容的动态变化方向和动态变化速度等中的至少一种,等等。其中,根据不同的屏保内容,可以有不同的动态交互效果。
例如,当电视上屏保内容是单张图片时,该动态交互效果可以包括该图片会随着交互对象交互部位的移动而不断变化。
又例如,当电视上屏保内容是多张图片时,该动态交互效果可以包括根据交互对象交互部位的移动速度,不断地切换对象。
又例如,当电视上屏保内容是线条在不断地飞舞时,该动态效果可以包括根据交互对象交互部位的变动,改变该线条飞舞的方向以及速度。
又例如,当电视上屏保内容是一个星空,星空中间有个黑洞,其它天体都随着该黑洞旋转时,该动态效果可以包括当交互对象交互部位移动时,此黑洞也跟着移动,且周围天体也随着一起运动。
又例如,当电视上屏保内容是屏保短视频时,该动态效果可以是可以根据交互对象和屏保界面之间的距离,播放屏保短视频。例如,当交互对象和屏保界面之间的距离比较近时,则加快播放屏保短视频的速度。当交互对象和屏保界面之间的距离比较远时,则降低播放屏保短视频的速度。又例如,还可以是当交互对象和屏保界面之间的距离比较远时,则加快播放屏保短视频的速度。而当交互对象和屏保界面之间的距离比较近时,则降低播放屏保短视频的速度。又例如,屏保短视频的进度条会根据交互对象交互部位的移动方向进行变化。例如,当交互对象相对于屏保界面向左变化时,屏保短视频的进度条会往倒回播放。又例如,当交互对象相对于屏保界面向右变化时,屏保短视频的进度条会往向前播放,等等。
在一实施例中,当目标交互信息包括目标交互方向信息和目标交互速度信息时,可以将目标交互方向信息以及目标交互速度信息,和屏保内容进行适配,从而确定屏保内容对应的动态交互效果。具体地,步骤“根据目标交互信息确定屏保内容对应的动态交互效果”,可以包括:
将目标交互方向信息与屏保内容进行适配,得到屏保内容的变化方向;
将目标交互速度信息与屏保内容进行适配,得到屏保内容的变化速度;
根据变化方向和变化速度确定屏保内容对应的动态交互效果。
其中,该动态交互效果可以指屏保内容的动态变化方向和动态变化速度等中的多种,也可以指屏保内容的动态变化方向和动态变化速度等中的其中一种。
例如,电视上的屏保内容是一条线条在不断飞舞,得到目标交互方向信息为交互对象的手从东向西变化。将该目标交互方向信息和线条进行适配,从而得到线条的变化方向为从东向西变化。此外,还得到目标交互速度信息为交互对象手的变化速度为20厘米每秒,将该目标交互速度信息和线条进行适配,得到线条的变化速度为20厘米每秒。然后,可以根据变化速度和变化方向确定线条的动态交互效果为从东往西变化,且变化速度为20厘米每秒。
又例如,电视上的屏保内容是多条线性在不断飞舞。此时,得到两个目标交互信息,其中一个目标交互方向信息为交互对象的其中一个手是从东向西变化,而另一个手是从西向东变化。则,将两个目标交互方向信息与屏保上的多条线条进行适配,可以令多条线条中的一部分线条是从西向东变化,而另一部分线条是从东向西变化。此外,得到其中一只手的目标交互速度信息为20厘米每秒,而另一只手的目标交互速度信息为30厘米每秒。则,将两个目标交互速度信息与屏保上的多条线条进行适配,可以令多条线条中一部分线条的变化速度为20厘米每秒,而另一部分线条的变化速度为30厘米每秒。然后,可以根据变化速度和变化方向确定多条线条的动态交互效果为,其中一部分线条从西到东变化,且变化速度为20厘米每秒。而另一部分线条从东到西变化,且变化速度为30厘米每秒。
又例如,电视上的屏保内容是一个星空,星空中间有个黑洞,其它天体都随着该黑洞旋转。此时,若得到目标交互方向信息为交互对象的手是从东向西移动,将该目标交互方向信息和屏保内容进行适配,可以得到黑洞从东向西变化的变化方向。而得到交互对象手的目标交互速度信息为20厘米每秒,将该目标交互速度信息和屏保内容进行适配,可以得到其它星体被黑洞吸收的速度为20厘米每秒。然后,可以根据变化速度和变化方向确定屏保内容的动态交互效果为黑洞从东向西移动,且黑洞以20厘米每秒的速度吸收其它星体。
又例如,电视上的屏保内容是多张电影海报,且多张电影海报之间可以互相切换,如图7所示。则可以将目标交互方向信息以及目标交互速度信息和屏保内容进行适配,从而得到屏保内容的动态交互效果。例如,可以当交互对象手的速度大小达到一定阈值时,便切换电影海报的显示。其中,当交互对象的手上下变化时,便上下切换电影海报,而到交互对象的手左右变化时,则左右切换电影海报。
在一实施例中,该目标交互信息包括目标交互位置信息时,步骤“根据目标交互信息确定屏保内容对应的动态交互效果”,可以包括:
将目标交互位置信息与屏保内容进行适配,得到屏保内容的变化速度;
根据变化速度确定屏保内容对应的动态交互效果。
例如,电视上屏保内容中包括多个沿着预设运动轨迹进行运动的粒子。当交互对象的手覆盖了部分粒子时,被覆盖的那部分例子可以加速运动,但速度方向不变。
又例如,屏保内容包括由屏保界面的中心点生成的水波纹效果。当交互对象的手覆盖了该中心点时,便可以生成一组向外不断扩散的波纹效果。
需要说明的是,上述只是动态交互效果的一些例子,在实际应用中,可以根据屏保内容确定不同的动态交互效果。
在一实施例中,当目标交互信息包括目标交互距离信息时,步骤“根据目标交互信息确定屏保内容对应的动态交互效果”,可以包括:
将目标交互距离信息与屏保内容向适配,得到屏保内容的变化速度;
根据所述变化速度确定屏保内容对应的动态交互效果。
例如,当电视屏保内容中为屏保短视频时,屏报短视频的播放速度会根据交互对象和屏保界面之间的距离变化而发生变化。
104、在屏保界面上显示针对屏保内容的动态交互效果,以实现交互对象和屏保内容的动态交互。
在一实施例中,在确定了屏保内容对应的动态交互效果之后,便可以在屏保界面上显示针对屏保内容的动态交互效果。
其中,当动态交互效果包括屏保内容的动态变化方向和动态变化速度时,步骤“在屏保界面上显示针对屏保内容的动态交互效果”,可以包括:
根据动态变化方向,生成作用于屏保内容的作用力信息;
根据所述动态变化速度,生成作用于屏保内容的加速度信息;
将加速度信息和作用力信息添加至屏保内容,以在屏保界面上显示屏保内容根据动态变化速度,以及动态变化方向变化的动态交互效果。
其中,该加速度信息包括可以令屏保内容的移动速度发生变化的信息。例如,当屏保内容是一条线条按照一定的速度在不断地飞舞时,则该加速度信息可以是令线条的移动速度发生变化的信息。
其中,作用力信息包括可以令屏保内容的移动方向发生变化的信息。例如,当屏保内容是一条鱼从东向西移动,则该作用力信息可以是令鱼的移动方向变为从东向西南方移动。
在一实施例中,可以根据动态变化方向生成一个作用于屏保内容的作用力信息。例如,可以根据动态变化方向生成一个方向变化的角度,并将该角度作为作用力信息。
例如,如图8所示,当前屏保内容是一条鱼从东向西移动。而动态变化方向是令鱼从东向西南运动。此时,鱼原始运动的方向和变化后运动的方向会形成一个角度差,则可以根据该角度差生成作用力信息。
在一实施例中,可以根据动态变化速度,生成作用于屏保内容的加速度信息。例如,当前屏保内容是一条鱼,可以将这条鱼的原始移动速度和动态变化速度进行逻辑运算处理,从而得到加速度信息。
在一实施例中,在得到加速度信息和作用力信息之后,便可以将加速度信息和作用力信息添加至屏幕内容,以在屏幕界面上显示屏幕内容根据动态变化速度以及动态变化方向变化的动态交互效果。
例如,当屏保内容是利用Processing库绘制生成时,Processing库中会存在多种生成该屏保内容时对应的生成信息。例如,该Processing库中存在控制该屏保内容的动态交互效果的信息。
譬如,当该屏保内容是一条鱼在游动时,该Processing库中可以包括控制这条鱼游动时的速度信息和方向信息。此时,便可以作用力信息添加至方向信息中,以及将加速度信息添加至速度信息中,从而使得这条鱼可以根据动态变化速度,以及动态变化方向进行游动的变化。在一实施例中,当动态交互效果包括动态变化速度时,可以根据该动态变化速度生成作用于屏保内容的噪声信息,并将该噪声信息添加至屏保内容。具体地,步骤“在屏保界面上显示针对屏保内容的动态交互效果”,包括:
根据动态变化速度,生成作用于屏保内容的噪声信息;
将噪声信息添加至屏保内容,以在屏保界面上显示屏保内容根据动态变化速度进行杂乱变化的动态交互效果。
其中,该噪声信息可以是令屏保内容产生杂乱运动的信息。例如,该噪声信息可以是柏林噪声(Perlinnoise),通过将Perlin噪声添加至屏保内容,从而使得屏保内容可以产生杂乱变化的动态交互效果。
在一实施例中,可以根据动态变化速度,生成作用于屏保内容的噪声信息。例如,可以将动态变化速度和预设映射表进行匹配,该预设映射表中包括了动态变化速度和噪声信息之间的映射关系。譬如,当动态变化速度较大时,可以生成一个较大的噪声信息,从而使得屏保内容的杂乱运动更加剧烈。而当动态变化速度较小时,可以生成一个较小的噪声信息,从而使得屏保内容的杂乱运动幅度较小。
通过将动态变化速度和预设映射表进行匹配,从而可以确定噪声信息的大小,并生成对应的噪声信息。例如,当该噪声信息为Perlin噪声时,可以利用柏林噪声生成算法或者柏林噪声生成函数生成Perlin噪声。
在一实施例中,在生成噪声信息后,便可以将噪声信息添加至屏保内容中,以在屏保界面上显示屏保内容进行杂乱变化的动态交互效果。
例如,当屏保内容是利用Processing库绘制生成时,该Processing库中可以包括控制屏保内容进行杂乱运动的信息。此时,可以将噪声信息添加至控制屏保内容进行杂乱运动的信息中,从而使得屏保内容进行杂乱运动。
例如,如图9所示,屏保内容可以包括在做匀速运动的粒子。通过将噪声信息添加至该粒子中,从而控制该粒子进行杂乱运动,以达到交互对象和屏保中的粒子进行交互的效果。
又例如,当屏保内容为由屏保界面的中心点生成的水波纹效果时,可以将该噪声信息添加至该水纹中,从而生成一组向外不断扩散的波纹效果。
在一实施例中,当动态交互效果包括动态交互方向时,可以根据动态变化方向生成作用于屏保内容的噪声信息,并将噪声信息添加至屏保内容,从而使得屏保内容进行杂乱变化。例如,当屏保交互对象距离电视的距离更近时,便可以生成一个较大的噪声信息,从而使得屏保内容产生剧烈的杂乱运动,等等。
在一实施例中,接下来将本申请实施例提出的屏保交互方法和具体场景结合,从而更生动地体现本申请实施例提出的屏保交互方法。
在一实施例中,当屏保内容为图片时,在屏保界面上显示屏保内容的动态交互效果可以包括在屏保界面上显示图片随着交互对象的交互方向和交互速度,在相应的变化方向和变化速度上发生变化的动态交互效果。
例如,当屏保内容为当单张图片时,当交互对象的手向左移动时,图片便会向左移动。而当交互对象的手向右移动时,图片也会向右移动。而当交互对象的手移动地快点时,图片会移动得快点。同理,当交互对象的手移动地慢点时,图片也会移动得慢点。
例如,当屏保内容为当多张图片时,当交互对象的手向左移动时,多张图片便同时会向左移动。而当交互对象的手向右移动时,多张图片也会同时向右移动。而当交互对象的手移动地快点时,多张图片会同时移动得快点。同理,当交互对象的手移动地慢点时,多张图片也会移动得慢点。
在一实施例中,当屏保内容为多张图像时,在屏保界面上显示屏保内容的动态交互效果可以包括根据交互对象的的交互方向和交互速度,在屏保界面上显示多张图片之间按照相应的变化方向和变化速度进行切换的动态交互效果。
例如,根据人手的交互方向(向左,向右),速度大小达到一定的阈值,就切换图片显示,对应上一张或者下一张。当然也可以不和传统多张图片切换一样,只有水平方向的切换,也可以做上下方向的切换,根据人手的移动方向(向上,向下),速度大小达到一定的阈值的时候,就自行切换图片。
在一实施例中,当屏保内容为预设图形在屏保界面上随机运动时,在屏保界面上显示针对屏保内容的动态交互效果,可以包括:在屏保界面上显示预设图形的运动速度和运动方向,随着交互对象的交互方向和交互速度发生变化的动态交互效果。其中,上述预设图形可以是包括线条、气泡、雪花等形状的图形。
例如,当预设图形为线条时,根据人手的交互方向(向左、向右、向下、向上)以及交互方向,线条也能在移动方向和移动速度上发生变化。
本申请实施例提出了一个屏保交互方法,该方法可以包括显示屏保界面;当接收到交互对象针对屏保内容的交互触发指令时,根据该交互触发指令获取目标交互信息;根据目标交互信息确定该屏保内容对应的动态交互效果;在该屏保界面上显示针对该屏保内容的动态交互效果,以实现该交互对象和该屏保内容的动态交互。
此外,根据不同的屏保内容,本申请可以实现不同的动态交互效果。例如,屏保效果是一个星空,中间有个黑洞,其它天体随着此黑洞旋转,当人手移动的时候,此黑洞也跟随者移动,那么周围的天体也会跟随的一起运动。又例如,当屏保内容为由屏保界面的中心点生成的水波纹效果时,可以将该噪声信息添加至该水纹中,从而生成一组向外不断扩散的波纹效果,等等,从而提高了本申请实施例中屏保交互的丰富性。
为了更好地实施本申请实施例提供的屏保交互方法,在一实施例中还提供了一种屏保交互装置,该屏保交互装置可以集成于电子设备中。其中名词的含义与上述产品的测试检验方法中相同,具体实现细节可以参考方法实施例中的说明。
在一实施例中,提供了一种屏保交互装置,该屏保交互装置具体可以集成在电子设备,例如电视中,如图10所示,该屏保交互装置包括:第一显示单元201、获取单元202、确定单元203、第二显示单元204,具体如下:
第一显示单元201,用于显示屏保界面;
获取单元202,用于当接收到针对所述屏保界面中屏保内容的交互触发指令时,根据所述交互触发指令获取目标交互信息,其中,所述交互信息包括交互对象针对所述屏保界面中的屏保内容进行交互时生成的信息;
确定单元203,用于根据所述目标交互信息确定所述屏保内容对应的动态交互效果;
第二显示单元204,用于在所述屏保界面上显示针对所述屏保内容的动态交互效果,以实现交互对象和所述屏保内容的动态交互。
在一实施例中,所述获取单元202,包括:
获取子单元,用于当接收到所述交互触发指令时,获取多个视频帧;
解析子单元,用于对每个视频帧进行解析,得到所述每个视频帧中所述交互对象针对所述屏保内容的交互信息;
信息融合处理子单元,用于对所述每个视频帧对应的交互信息进行信息融合处理,以得到所述目标交互信息。
在一实施例中,所述确定单元203,包括:
方向适配子单元,用于将所述目标交互方向信息与所述屏保内容进行适配,得到所述屏保内容的变化方向;
速度适配子单元,用于将所述目标交互速度信息与所述屏保内容进行适配,得到所述屏保内容的变化速度;
确定子单元,用于根据所述变化方向和变化速度确定所述屏保内容对应的动态交互效果。
在一实施例中,所述第二显示单元204,包括:
作用力信息生成子单元,用于根据所述动态变化方向,生成作用于所述屏保内容的作用力信息;
加速度信息生成子单元,用于根据所述动态变化速度,生成作用于所述屏保内容的加速度信息;
添加子单元,用于将所述加速度信息和作用力信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度,以及所述动态变化方向变化的动态交互效果。
在一实施例中,所述第二显示单元204,包括:
噪声信息生成子单元,用于根据所述动态变化速度,生成作用于所述屏保内容的噪声信息;
添加子单元,用于将所述噪声信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度进行杂乱变化的动态交互效果。
具体实施时,以上各个单元可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元的具体实施可参见前面的方法实施例,在此不再赘述。
通过上述的屏保交互装置可以实现交互对象和屏保内容的动态交互,提高了屏保内容的丰富性和趣味性。
本申请实施例还提供一种电子设备,该电子设备可以包括终端或服务器,比如,电子设备可以作为屏保交互终端,该屏保交互终端可以为智能电视等等;又比如计算机设备可以为服务器,如屏保交互服务器等。如图11所示,其示出了本申请实施例所涉及的终端的结构示意图,具体来讲:
该电子设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解,图11中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。可选的,处理器401可包括一个或多个处理核心;优选的,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户页面和应用程序等,调制解调处理器主要处理无线通讯。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
电子设备还包括给各个部件供电的电源403,优选的,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,电子设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,电子设备中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能,如下:
显示屏保界面;
当接收到交互对象针对屏保界面中屏保内容的交互触发指令时,根据交互触发指令获取目标交互信息;
根据目标交互信息确定屏保内容对应的动态交互效果;
在屏保界面上显示针对屏保内容的动态交互效果,以实现交互对象和屏保内容的动态交互。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述实施例中各种可选实现方式中提供的方法。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成,或通过计算机程序控制相关的硬件来完成,该计算机程序可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例还提供一种存储介质,其中存储有计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种屏保交互方法中的步骤。例如,该计算机程序可以执行如下步骤:
显示屏保界面;
当接收到交互对象针对屏保界面中屏保内容的交互触发指令时,根据交互触发指令获取目标交互信息;
根据目标交互信息确定屏保内容对应的动态交互效果;
在屏保界面上显示针对屏保内容的动态交互效果,以实现所述交互对象和所述屏保内容的动态交互。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种屏保交互方法中的步骤,因此,可以实现本申请实施例所提供的任一种屏保交互方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种屏保交互方法、装置、电子设备和存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种屏保交互方法,其特征在于,包括:
显示屏保界面;
当接收到交互触发指令时,获取多个视频帧,其中,所述视频帧记录有交互对象对屏保内容的交互行为;
对每个视频帧进行解析,得到所述每个视频帧中所述交互对象针对所述屏保内容的交互信息,所述交互信息包括所述交互对象针对所述屏保内容进行交互时的位置信息,所述位置信息包括所述交互对象的交互部位在视频帧中的位置的信息;
对所述每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息,其中,所述目标交互信息包括目标交互方向信息、目标交互速度信息、目标交互位置信息和目标交互距离信息中的至少一种,所述目标交互距离信息包括交互对象和屏保界面进行交互时,交互对象和屏保界面之间的距离;
根据所述目标交互信息确定所述屏保内容对应的动态交互效果,所述动态交互效果包括屏保内容的动态变化方向和动态变化速度中的至少一种;
在所述屏保界面上显示针对所述屏保内容的动态交互效果,以实现所述交互对象和所述屏保内容的动态交互;
所述对每个视频帧进行解析,得到所述每个视频帧中交互对象针对所述屏保内容的交互信息,包括:对当前视频帧进行特征提取,得到当前视频帧的特征信息,以及,根据所述特征信息,在所述视频帧中确定所述交互对象的交互部位,以及,根据所述交互部位生成所述交互信息;
所述对每个视频帧对应的交互信息进行信息融合处理,以得到所述目标交互信息,包括:将每个视频帧对应的位置信息进行对比处理,得到所述目标交互方向信息,以及,将每个视频帧对应的位置信息和预设视频帧率进行逻辑运算处理,得到所述目标交互速度信息。
2.如权利要求1所述的屏保交互方法,其特征在于,所述根据所述目标交互信息确定所述屏保内容对应的动态交互效果,包括:
将所述目标交互方向信息与所述屏保内容进行适配,得到所述屏保内容的变化方向;
将所述目标交互速度信息与所述屏保内容进行适配,得到所述屏保内容的变化速度;
根据所述变化方向和变化速度确定所述屏保内容对应的动态交互效果。
3.如权利要求1所述的屏保交互方法,其特征在于,所述动态交互效果包括屏保内容的动态变化方向和动态变化速度;
所述在所述屏保界面上显示针对所述屏保内容的动态交互效果,包括:
根据所述动态变化方向,生成作用于所述屏保内容的作用力信息;
根据所述动态变化速度,生成作用于所述屏保内容的加速度信息;
将所述加速度信息和作用力信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度,以及所述动态变化方向变化的动态交互效果。
4.如权利要求1所述的屏保交互方法,其特征在于,所述动态交互效果包括屏保内容的动态变化速度;
所述在所述屏保界面上显示针对所述屏保内容的动态交互效果,包括:
根据所述动态变化速度,生成作用于所述屏保内容的噪声信息;
将所述噪声信息添加至所述屏保内容,以在所述屏保界面上显示所述屏保内容根据所述动态变化速度进行杂乱变化的动态交互效果。
5.如权利要求1所述的屏保交互方法,其特征在于,所述屏保内容包括图片,所述在所述屏保界面上显示针对所述屏保内容的动态交互效果,包括:
在所述屏保界面上显示所述图片随着交互对象的交互方向和交互速度,在相应的变化方向和变化速度上发生变化的动态交互效果。
6.如权利要求1所述的屏保交互方法,其特征在于,所述屏保内容包括多张图片,所述在所述屏保界面上显示针对所述屏保内容的动态交互效果,包括:
根据交互对象的交互方向和交互速度,在所述屏保界面上显示所述多张图片之间按照相应的变化方向和变化速度进行切换的动态交互效果。
7.如权利要求1所述的屏保交互方法,其特征在于,所述屏保内容包括预设图形在屏保界面上随机运动,所述在所述屏保界面上显示针对所述屏保内容的动态交互效果,包括:
在所述屏保界面上显示所述预设图形的运动速度和运动方向,随着所述交互对象的交互方向和交互速度发生变化的动态交互效果。
8.一种屏保交互装置,其特征在于,包括:
第一显示单元,用于显示屏保界面;
获取子单元,用于当接收到交互触发指令时,获取多个视频帧,其中,所述视频帧记录有交互对象对屏保内容的交互行为;
解析子单元,用于对每个视频帧进行解析,得到所述每个视频帧中所述交互对象针对所述屏保内容的交互信息,所述交互信息包括所述交互对象针对所述屏保内容进行交互时的位置信息,所述位置信息包括所述交互对象的交互部位在视频帧中的位置的信息;
信息融合处理子单元,用于对所述每个视频帧对应的交互信息进行信息融合处理,以得到目标交互信息,其中,所述屏保内容包括具有动态效果的内容或具有静态效果的内容,所述目标交互信息包括目标交互方向信息、目标交互速度信息、目标交互位置信息和目标交互距离信息中的至少一种,所述目标交互距离信息包括交互对象和屏保界面进行交互时,交互对象和屏保界面之间的距离;
确定单元,用于根据所述目标交互信息确定所述屏保内容对应的动态交互效果,所述动态交互效果包括屏保内容的动态变化方向和动态变化速度中的至少一种;
第二显示单元,用于在所述屏保界面上显示针对所述屏保内容的动态交互效果,以实现交互对象和所述屏保内容的动态交互;
所述解析子单元,包括:特征提取模块,用于对当前视频帧进行特征提取,得到当前视频帧的特征信息;确定模块,用于根据所述特征信息,在所述视频帧中确定所述交互对象的交互部位;生成模块,用于根据所述交互部位生成所述交互信息;
所述信息融合处理子单元,包括:对比处理模块,用于将每个视频帧对应的位置信息进行对比处理,得到所述目标交互方向信息;逻辑运算处理模块,用于将每个视频帧对应的位置信息和预设视频帧率进行逻辑运算处理,得到所述目标交互速度信息。
9.一种电子设备,其特征在于,包括存储器和处理器;所述存储器存储有计算机程序,所述处理器用于运行所述存储器内的计算机程序,以执行权利要求1至7任一项所述的屏保交互方法。
10.一种存储介质,其特征在于,所述存储介质存储有多条计算机程序,所述计算机程序适于处理器进行加载,以执行权利要求1至7任一项所述的屏保交互方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110664505.8A CN113377198B (zh) | 2021-06-16 | 2021-06-16 | 一种屏保交互方法、装置、电子设备和存储介质 |
PCT/CN2022/097452 WO2022262618A1 (zh) | 2021-06-16 | 2022-06-07 | 一种屏保交互方法、装置、电子设备和存储介质 |
JP2023577118A JP2024523865A (ja) | 2021-06-16 | 2022-06-07 | スクリーンセーバーインタラクション方法、装置、電子機器及び記憶媒体 |
US18/570,082 US20240295941A1 (en) | 2021-06-16 | 2022-06-07 | Method and apparatus of screen saver interaction, electronic device and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110664505.8A CN113377198B (zh) | 2021-06-16 | 2021-06-16 | 一种屏保交互方法、装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113377198A CN113377198A (zh) | 2021-09-10 |
CN113377198B true CN113377198B (zh) | 2023-10-17 |
Family
ID=77574511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110664505.8A Active CN113377198B (zh) | 2021-06-16 | 2021-06-16 | 一种屏保交互方法、装置、电子设备和存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240295941A1 (zh) |
JP (1) | JP2024523865A (zh) |
CN (1) | CN113377198B (zh) |
WO (1) | WO2022262618A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113377198B (zh) * | 2021-06-16 | 2023-10-17 | 深圳Tcl新技术有限公司 | 一种屏保交互方法、装置、电子设备和存储介质 |
CN113747228B (zh) * | 2021-09-17 | 2023-09-15 | 四川启睿克科技有限公司 | 一种实现智能旋转电视动态屏保的方法 |
CN113918023B (zh) * | 2021-10-29 | 2023-12-05 | 深圳Tcl数字技术有限公司 | 屏保显示方法、装置及显示设备 |
CN114860119A (zh) * | 2022-03-29 | 2022-08-05 | 上海商汤临港智能科技有限公司 | 一种屏幕互动方法、装置、设备和介质 |
CN114840092A (zh) * | 2022-05-31 | 2022-08-02 | 上海商汤临港智能科技有限公司 | 一种与车载显示设备交互的方法、装置、设备及存储介质 |
CN116541121B (zh) * | 2023-07-06 | 2023-09-19 | 深圳市微克科技有限公司 | 基于智能穿戴设备的表盘鱼游动方法、系统和存储介质 |
CN116777490B (zh) * | 2023-08-18 | 2023-11-03 | 厦门澜天电子科技有限公司 | 一种基于智慧导示标识的动态指示智能管理系统 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103458288A (zh) * | 2013-09-02 | 2013-12-18 | 湖南华凯创意展览服务有限公司 | 手势感应方法、手势感应装置及音视频播放系统 |
CN105260182A (zh) * | 2015-10-10 | 2016-01-20 | 联想(北京)有限公司 | 一种电子设备及其信息处理方法 |
CN106713982A (zh) * | 2016-12-23 | 2017-05-24 | Tcl集团股份有限公司 | 一种智能电视的屏幕保护方法及系统 |
CN107396187A (zh) * | 2017-08-23 | 2017-11-24 | 四川长虹电器股份有限公司 | 用于智能播放设备的视频互动屏保系统及方法 |
CN108319329A (zh) * | 2017-12-27 | 2018-07-24 | 努比亚技术有限公司 | 一种显示控制方法、柔性屏终端及计算机可读存储介质 |
CN108717369A (zh) * | 2018-05-06 | 2018-10-30 | 深圳市保千里电子有限公司 | 一种实现及控制动态壁纸的方法和终端 |
CN110347244A (zh) * | 2019-06-10 | 2019-10-18 | 努比亚技术有限公司 | 一种终端及其交互控制方法、计算机可读存储介质 |
CN110866133A (zh) * | 2018-08-27 | 2020-03-06 | 阿里巴巴集团控股有限公司 | 信息搜索方法、页面显示方法、系统及设备 |
CN111104196A (zh) * | 2019-12-18 | 2020-05-05 | 聚好看科技股份有限公司 | 一种壁纸展示方法及终端设备 |
CN111800544A (zh) * | 2020-07-03 | 2020-10-20 | 中图云创智能科技(北京)有限公司 | 一种全景动态屏保技术 |
CN111836115A (zh) * | 2020-07-02 | 2020-10-27 | 海信视像科技股份有限公司 | 一种屏保展示方法、屏保跳转方法及显示设备 |
CN112788390A (zh) * | 2020-12-25 | 2021-05-11 | 深圳市优必选科技股份有限公司 | 一种基于人机交互的控制方法、装置、设备及存储介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008025012A2 (en) * | 2006-08-24 | 2008-02-28 | Neustar, Inc. | System and method for displaying dynamic information content in a screen saver of a mobile communication device |
CN102402377B (zh) * | 2010-09-17 | 2013-08-14 | 深圳Tcl新技术有限公司 | 一种实现屏保的显示装置及其屏保方法 |
US20120151341A1 (en) * | 2010-12-10 | 2012-06-14 | Ko Steve S | Interactive Screen Saver Method and Apparatus |
CN306486705S (zh) * | 2020-09-22 | 2021-04-23 | ||
CN113377198B (zh) * | 2021-06-16 | 2023-10-17 | 深圳Tcl新技术有限公司 | 一种屏保交互方法、装置、电子设备和存储介质 |
-
2021
- 2021-06-16 CN CN202110664505.8A patent/CN113377198B/zh active Active
-
2022
- 2022-06-07 WO PCT/CN2022/097452 patent/WO2022262618A1/zh active Application Filing
- 2022-06-07 US US18/570,082 patent/US20240295941A1/en active Pending
- 2022-06-07 JP JP2023577118A patent/JP2024523865A/ja active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103458288A (zh) * | 2013-09-02 | 2013-12-18 | 湖南华凯创意展览服务有限公司 | 手势感应方法、手势感应装置及音视频播放系统 |
CN105260182A (zh) * | 2015-10-10 | 2016-01-20 | 联想(北京)有限公司 | 一种电子设备及其信息处理方法 |
CN106713982A (zh) * | 2016-12-23 | 2017-05-24 | Tcl集团股份有限公司 | 一种智能电视的屏幕保护方法及系统 |
CN107396187A (zh) * | 2017-08-23 | 2017-11-24 | 四川长虹电器股份有限公司 | 用于智能播放设备的视频互动屏保系统及方法 |
CN108319329A (zh) * | 2017-12-27 | 2018-07-24 | 努比亚技术有限公司 | 一种显示控制方法、柔性屏终端及计算机可读存储介质 |
CN108717369A (zh) * | 2018-05-06 | 2018-10-30 | 深圳市保千里电子有限公司 | 一种实现及控制动态壁纸的方法和终端 |
CN110866133A (zh) * | 2018-08-27 | 2020-03-06 | 阿里巴巴集团控股有限公司 | 信息搜索方法、页面显示方法、系统及设备 |
CN110347244A (zh) * | 2019-06-10 | 2019-10-18 | 努比亚技术有限公司 | 一种终端及其交互控制方法、计算机可读存储介质 |
CN111104196A (zh) * | 2019-12-18 | 2020-05-05 | 聚好看科技股份有限公司 | 一种壁纸展示方法及终端设备 |
CN111836115A (zh) * | 2020-07-02 | 2020-10-27 | 海信视像科技股份有限公司 | 一种屏保展示方法、屏保跳转方法及显示设备 |
CN111800544A (zh) * | 2020-07-03 | 2020-10-20 | 中图云创智能科技(北京)有限公司 | 一种全景动态屏保技术 |
CN112788390A (zh) * | 2020-12-25 | 2021-05-11 | 深圳市优必选科技股份有限公司 | 一种基于人机交互的控制方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2024523865A (ja) | 2024-07-02 |
WO2022262618A1 (zh) | 2022-12-22 |
CN113377198A (zh) | 2021-09-10 |
US20240295941A1 (en) | 2024-09-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113377198B (zh) | 一种屏保交互方法、装置、电子设备和存储介质 | |
CN110650368B (zh) | 视频处理方法、装置和电子设备 | |
US10902234B2 (en) | Image recognition method and apparatus | |
CN109783178B (zh) | 一种界面组件的颜色调整方法、装置、设备和介质 | |
US20220360736A1 (en) | Method for frame interpolation and related products | |
US20180115743A1 (en) | Predictive virtual reality content streaming techniques | |
US9171200B2 (en) | Gestural interaction identification | |
CN111228821B (zh) | 智能检测穿墙外挂方法、装置、设备及其存储介质 | |
CN104349080B (zh) | 一种图像处理方法及电子设备 | |
US9704229B2 (en) | Post-render motion blur | |
CN114253647B (zh) | 元素展示方法、装置、电子设备及存储介质 | |
CN103748893A (zh) | 显示器作为照片或视频的照明 | |
US20230021533A1 (en) | Method and apparatus for generating video with 3d effect, method and apparatus for playing video with 3d effect, and device | |
CN112565909B (zh) | 视频播放方法、装置、电子设备及可读存储介质 | |
CN113706504A (zh) | 一种残影处理方法、装置、存储介质及电子设备 | |
CN114449355B (zh) | 一种直播互动的方法、装置、设备及存储介质 | |
US20200183497A1 (en) | Operation method and apparatus for service object, and electronic device | |
CN118159341A (zh) | 一种图像帧的渲染方法及相关装置 | |
CN113676734A (zh) | 图像压缩方法和图像压缩装置 | |
CN113762058A (zh) | 一种视频合成方法、装置、计算机设备和存储介质 | |
CN112843715B (zh) | 一种拍摄视角的确定方法、装置、设备及存储介质 | |
CN112843692B (zh) | 拍摄图像的方法、装置、电子设备及存储介质 | |
CN118102016A (zh) | 投屏优化方法、装置、设备和存储介质 | |
CN117392244A (zh) | 图像处理方法、装置、电子设备和存储介质 | |
CN116308996A (zh) | 图形显示方法、装置、设备、存储介质及程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |