CN112433698A - 一种资源展示方法、装置、电子设备及存储介质 - Google Patents
一种资源展示方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN112433698A CN112433698A CN202011382601.5A CN202011382601A CN112433698A CN 112433698 A CN112433698 A CN 112433698A CN 202011382601 A CN202011382601 A CN 202011382601A CN 112433698 A CN112433698 A CN 112433698A
- Authority
- CN
- China
- Prior art keywords
- target
- resource
- audio data
- client
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000009877 rendering Methods 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 230000003993 interaction Effects 0.000 description 10
- 230000009471 action Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 6
- 238000002156 mixing Methods 0.000 description 3
- 230000033764 rhythmic process Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 241000272194 Ciconiiformes Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000019692 hotdogs Nutrition 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种资源展示方法、装置、电子设备及存储介质。该方法包括:客户端通过接收至少一种音频数据,确定输出至少一种音频数据的目标应用程序,并基于目标应用程序确定目标展示资源,对目标展示资源进行展示,实现根据应用程序的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
Description
技术领域
本发明实施例涉及页面资源展示技术领域,尤其涉及一种资源展示方法、装置、电子设备及存储介质。
背景技术
随着通信技术的快速发展,智能手机、电脑、智能电视等电子设备的主屏幕,可以显示出用户设置的图像,如用户在系统默认的静态图像中选取的图像,或用户在拍摄、保存的相册中选取的图像。除此之外,电子设备的主屏幕还可以显示用户在系统默认的动画中所选取的动画。
然而,针对现有的电子设备屏幕的资源显示技术,如果用户想要对屏幕的显示资源进行更换,还需用户进行手动切换才可实现,费时费力。
发明内容
本发明提供一种资源展示方法、装置、电子设备及存储介质,以实现根据接收的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换的同时,提高了用户的视觉体验感。
第一方面,本发明实施例提供了一种资源展示方法,该方法包括:
客户端接收至少一种音频数据;
客户端确定输出至少一种所述音频数据的目标应用程序;
客户端基于所述目标应用程序确定目标展示资源,对所述目标展示资源进行展示。
第二方面,本发明实施例还提供了一种资源展示装置,配置于客户端,该装置包括:
数据接收模块,用于接收至少一种音频数据;
应用确定模块,用于确定输出至少一种所述音频数据的目标应用程序;
资源确定模块,用于基于所述目标应用程序确定目标展示资源,对所述目标展示资源进行展示。
第三方面,本发明实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例提供的资源展示方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如本发明实施例提供的资源展示方法。
上述发明中的实施例具有如下优点或有益效果:
客户端通过接收至少一种音频数据,确定输出至少一种音频数据的目标应用程序,并基于目标应用程序确定目标展示资源,对目标展示资源进行展示,实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
附图说明
为了更加清楚地说明本发明示例性实施例的技术方案,下面对描述实施例中所需要用到的附图做一简单介绍。显然,所介绍的附图只是本发明所要描述的一部分实施例的附图,而不是全部的附图,对于本领域普通技术人员,在不付出创造性劳动的前提下,还可以根据这些附图得到其他的附图。
图1为本发明实施例一所提供的一种资源展示方法的流程示意图;
图2为本发明实施例一所提供的一种客户端与状态机的交互过程示意图;
图3为本发明实施例一所提供的一种客户端、状态机以及渲染模块交互示意图;
图4为本发明实施例二所提供的一种资源展示方法的流程示意图;
图5为本发明实施例二所提供的一种客户端与状态机的交互过程示意图;
图6为本发明实施例三所提供的一种资源展示装置的结构示意图;
图7为本发明实施例四所提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种资源展示方法的流程示意图,本实施例可适用于根据客户端接收音频数据确定展示资源,以实现基于音频数据的展示资源的动态切换的情形,该方法可以由资源展示装置来执行,该装置可以由硬件和/或软件来实现,该方法具体包括如下步骤:
S110、客户端接收至少一种音频数据。
其中,音频数据指运行或安装所述客户端的目标系统在设定时间内传输的所有声音数据,如音乐APP播放的音乐、影音APP播放的电影声音、社交APP发出的通话声音和游戏APP播放的背景音等中的至少一项,即在运行或安装所述客户端的目标系统中正在运行的各应用程序在设定时间内所产生的声音数据。声音数据的类型可以分为以下几种:音乐、噪音、语音、提示音、通话或视频音等,音频数据可以是上述一种类型的声音数据,也可以是几种类型的声音数据的任意组合。
具体的,客户端可以通过接口函数来采集目标系统上运行的各个应用程序产生的声音数据,如AVAudioSession API音频会话接口函数,来接收至少一种音频数据。通过这种方式,客户端在接收到各音频数据的同时,还可以接收到输出各音频数据的对应的应用程序信息。或者,通过接口函数采集声卡输出的数据流来获取目标系统的所有音频数据,如Core Audio API核心音频接口函数或DirectSound API声音接口函数等。在这种方式中,客户端在接收至少一种音频数据时,无法得知各音频数据具体是由哪个应用程序输出的,因此,可以再对目标系统上运行的应用程序的运行状态进行判断,将输出音频数据的所有应用程序确定为当前接收的至少一种音频数据的对应应用程序。可以理解的是,虽然可以确定出产生音频数据的应用程序,但无法得到各音频数据与对应产生各音频数据的应用程序具体信息。
S120、客户端确定输出至少一种音频数据的目标应用程序。
其中,目标应用程序指在安装或运行所述客户端的目标系统上输出音频数据的应用程序。可以理解的是,目标应用程序的数量可以是一个或多个。由前述可知,通过音频会话接口函数接收各音频数据的同时,可以获取到输出各音频数据的对应应用程序,即目标应用程序;而通过核心音频接口函数或声音接口函数接收各音频数据的同时,可以通过判断确定出输出所有音频数据的应用程序。
示例性的,客户端接收到的音频数据包括网易云音乐播放的音乐、原神播放的游戏背景音乐和微信语音通话的通话音,则客户端确定的目标应用程序包括网易云音乐、原神和微信。
S130、客户端基于目标应用程序确定目标展示资源,对目标展示资源进行展示。
其中,目标展示资源指与目标应用程序相对应的,需要在特定界面进行展示的资源,如动画或图像等。特定界面可以是主屏幕的显示界面,即设备的桌面,还可以是设备的当前显示界面,即用户切换的显示界面,如游戏界面或网页界面等。除此之外,目标展示资源也可以在特定界面的预设区域进行展示,如特定界面的右下角区域、中间区域或左小角区域等。其中,动画可以理解为连续时间轴上的一系列图像帧的组合,即一系列图像帧经过连续播放可以得到所述动画;图像可以是绘画、拍摄照片或绘制图形等静态图。示例性的,动画可以包含动漫人物执行各种动作,如荡秋千、左顾右盼、打招呼或跳舞等动作。需要说明的是,上述包含各种执行动作的动画还可以通过相互组合的方式,生成包含多种执行动作的动画,以在特定界面持续展示目标展示资源。
在本实施例中,客户端可以根据目标应用程序的应用类型或者音频数据类型确定目标展示资源,其中,目标应用程序的应用类型指目标应用程序的功能分类,如音乐类和非音乐类,不同应用类型的目标应用程序可对应相同或不同的展示资源。示例性的,网易云音乐和酷狗音乐等用于播放音乐的应用程序为音乐类的目标应用程序,微信、WPS和微博等不用于播放音乐的应用程序为非音乐类的目标应用程序。其中,音乐类的目标应用程序对应的展示资源可以是包含佩戴耳机的动漫人物执行各个动作的动画,如佩戴头戴式耳机的少女听音乐、梳理头发或荡秋千等动画;非音乐类的目标应用程序对应的展示资源可以是不佩戴耳机的动漫人物执行各个动作的动画,如不佩戴耳机的少女荡秋千或打招呼等动画。
示例性的,当客户端确定的各目标应用程序中包含有音乐类的目标应用程序,即音乐类的应用程序输出了音频数据,则客户端可以确定音乐类应用程序对应的展示资源为目标展示资源;若各目标应用程序中不包含有音乐类的目标应用程序,即输出音频数据的应用程序均不是音乐类应用程序,则客户端可以确定非音乐类应用程序对应的展示资源为目标展示资源,从而对目标展示资源进行展示。
在本实施例中,还可以根据目标应用程序的运营商等属性信息对同一应用类型的目标应用程序进一步进行划分,进而基于划分后的目标应用程序确定目标展示资源。例如,可以将对音乐类的目标应用程序作进一步划分,如网易云音乐、QQ音乐或酷狗音乐等。各个类别的音乐类目标应用程序对应的展示资源也可以不同,示例性的,网易云音乐对应的展示资源可以是佩戴网易云耳机的少女执行各个动作的动画;QQ音乐对应的展示资源可以是企鹅伴随音乐跳舞的动画。客户端可以根据音乐类的目标应用程序的具体类别将对应的展示资源确定为目标展示资源。
可选的,客户端基于目标应用程序确定目标展示资源,包括:如果确定出至少两个所述目标应用程序,则基于所述至少两个所述目标应用程序确定出待展示应用程序,基于所述待展示应用程序确定目标展示资源。可选的,基于所述至少两个所述目标应用程序的音频数据确定出待展示应用程序;或者,基于所述至少两个所述目标应用程序的运行数据确定出待展示应用程序。其中,运行数据可包括运行时间,和/或,前端运行或后台运行等等。进而,还可以根据所述待展示应用程序的音频数据的声音状态信息确定目标展示资源。
举例而言,由于客户端接收的可以是多个音乐类的目标应用程序输出的音频数据,则客户端在确定目标展示资源的过程中,可以先确定各目标应用程序的类型,再判断各目标应用程序输出的音频数据是否具有音乐特性,从而将输出音乐特性的音频数据的目标应用程序对应的展示资源,确定为目标展示资源。其中,音乐特性指音频数据在预设时间段内是连续的,且音频数据的强度大于预设强度。
此外,客户端还可以将非音乐类的目标应用程序进一步划分为游戏类、社交类和影音类等类型,不同类型的目标应用程序可设置不同的展示资源。示例性的,原神和刺客信条为游戏类,微信和QQ为社交类,爱奇艺视频为影音类。其中,游戏类的目标应用程序对应的展示资源可以是坐电竞椅的动漫人物执行各个动作的动画,如坐电竞椅的少女敲键盘或欢呼等动画;社交类的目标应用程序对应的展示资源可以是手持电话的动漫人物执行各个动作的动画,如手持电话的少女张嘴说话等动画;影音类的目标应用程序对应的展示资源可以是抱膝的动漫人物坐在电脑椅上执行各个动作的动画,如抱膝的少女坐在电脑椅上观看电影等动画。客户端可以根据非音乐类的目标应用程序的类型将对应的展示资源确定为目标展示资源。
可以理解的是,由于客户端接收的可以是多个非音乐类的目标应用程序输出的音频数据,则客户端在确定目标展示资源的过程中,可以先确定各目标应用程序的类型,再判断各目标应用程序在预设时长内是否持续输出音频数据,将持续输出音频数据的目标应用程序对应的展示资源确定为目标展示资源。
本实施例的技术方案,客户端通过接收至少一种音频数据,确定输出至少一种音频数据的目标应用程序,并基于目标应用程序确定目标展示资源,对目标展示资源进行展示,实现根据应用程序的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
可选的,所述客户端基于目标应用程序确定目标展示资源,包括:客户端确定目标应用程序的应用类型,基于应用类型确定目标展示资源。
其中,目标应用程序的应用类型指目标应用程序的功能分类。如音乐类型和非音乐类型,音乐类型和非音乐类型对应着不同的展示资源,即目标展示资源在两种展示资源中切换。或者,音乐类型、游戏类型、影音类型和办公类型等,不同类型对应着不同的展示资源,即目标展示资源可以在至少两种展示资源中切换。
具体的,客户端可以预先存储有各个应用程序对应的应用类型的分类数据,以使客户端在确定出各目标应用程序时,根据各目标应用程序的应用属性信息确定出对应的应用类型。在一种实施方式中,可以是客户端预设设置多个白名单,各个白名单与各应用类型相对应,每个白名单中包括对应的应用类型的应用程序的应用名称,以使客户端根据各目标应用程序的应用名称,在各个白名单中进行比对,从而确定出目标应用程序的应用类型。
在本实施例中,客户端通过确定目标应用程序的应用类型,并基于应用类型确定目标展示资源,实现根据输出音频数据的应用程序的应用类型确定展示资源,从而实现基于应用类型的展示资源的动态切换,使得设备的展示资源多样化,提高了用户的视觉体验感。
可选的,所述基于应用类型确定目标展示资源,包括:客户端将应用类型发送至状态机;客户端接收状态机反馈的与应用类型对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
其中,状态机用于接收各目标应用程序对应的应用类型,从而根据接收的各目标应用程序对应的应用类型确定当前状态,以在当前状态与前一状态存在区别时,生成当前状态对应的界面展示控制参数发送至客户端。其中,界面展示控制参数用于确定目标展示资源,客户端可以根据界面展示控制参数执行调用对应的目标展示资源的操作。如图2所示,展示了客户端与状态机的交互过程,客户端通过接口函数获取各目标应用程序输出的音频数据,将各目标应用程序的应用类型实时推送至状态机,以使状态机确定当前状态,并判断当前状态是否发生改变,若是,在反馈界面展示控制参数至客户端,以使客户端确定并显示目标展示资源,实现展示资源的切换;若否,则不生成界面展示控制参数,即不进行处理。
在一种实施方式中,状态机的当前状态可以是音乐播放状态或非音乐播放状态,当状态机接收到的应用类型中包括音乐类型,则将当前状态确定为音乐播放状态;当状态机接收到的应用类型中不包括音乐类型,则将当前状态确定为非音乐状态。在另一种实施方式中,状态机的当前状态可以包括第一状态、第二状态和第三状态,当状态机接收到的应用类型为音乐类型,则将当前状态确定为第一状态;当状态机接收到的应用类型为游戏类型,则将当前状态确定为第二状态;当状态机接收到的应用类型为影音类型,则将当前状态确定为第三状态。可以理解的是,状态机的当前状态的种类可以根据目标展示资源的种类进行设置,以使状态机的各个当前状态具备对应的目标展示资源,本申请对此不作限定。
在本实施例,客户端通过将应用类型发送至状态机,并接收状态机反馈的与应用类型对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源,实现了根据状态机反馈的界面展示控制参数来确定目标展示资源,以通过状态机与客户端的交互,实现了展示资源的动态切换,提高了用户的视觉体验感。
可以理解的是,若状态机的当前状态没有发生变化,可以是如图2所示,状态机不进行处理,即不发送界面展示控制参数至客户端,从而使得客户端不切换目标展示资源;还可以是状态机生成当前状态对应的界面展示控制参数发送至客户端,客户端判断接收的界面展示控制参数是否与上一界面展示控制参数相同,若是,则将上一界面展示控制参数对应的目标展示资源确定当前目标展示资源,从而保持原目标展示资源的持续展示。
可选的,所述基于所述界面展示控制参数确定目标展示资源,包括:客户端调用渲染模块来读取界面展示控制参数对应的目标展示资源;相应的,对目标展示资源进行展示,包括:客户端调用渲染模块在目标区域展示目标展示资源。
其中,渲染模块是运行或存储所述客户端的目标系统中用于从存储区域中读取并展示目标展示资源的功能模块。具体的,存储区域中预先存储了各目标展示资源与界面展示控制参数的对应关系,以使渲染模块可以根据界面展示控制参数在存储区域中查询到对应的目标展示资源。渲染模块可以是采用视频覆盖方法对目标展示资源作拉伸或颜色空间变换等处理,来覆盖住目标区域,以使在目标区域展示目标展示资源。示例性的,渲染模块可以是Direct3D模块、目标系统默认渲染模块、覆盖混合渲染、视频混合渲染模块7(vmr7)、视频混合渲染模块9(vmr9)或EVR渲染模块等中的一种。
具体的,客户端、状态机以及渲染模块交互过程如图3所示,其中,客户端与状态机的交互过程为:通过将应用类型发送至状态机,以使状态机根据接收的应用类型确定界面展示控制参数,并反馈至客户端;客户端与渲染模块的交互过程为:客户端根据状态机反馈的界面展示控制参数,调用渲染模块,对界面展示控制参数对应的目标展示资源进行读取与展示。在本实施例中,通过调用渲染模块来读取界面展示控制参数对应的目标展示资源,并在目标区域展示目标展示资源,实现了基于渲染模块的资源展示,提高了用户的视觉体验感。
实施例二
图4为本发明实施例二提供的一种资源展示方法的流程示意图,本实施例在上述各实施例的基础上,对“客户端基于目标应用程序确定目标展示资源”进行了进一步优化。其中与上述各实施例相同或相应的术语的解释在此不再赘述。参见图4,本实施例提供的资源展示方法包括以下步骤:
S410、客户端接收至少一种音频数据。
S420、客户端确定输出至少一种音频数据的目标应用程序。
S430、客户端基于目标应用程序对应的声音状态信息确定目标展示资源,对目标展示资源进行展示。
其中,声音状态信息指根据目标应用程序输出的音频数据的信息确定的对应状态,包括有声状态和无声状态。具体的,声音状态信息可以根据音频数据对应的音量以及音频数据是否连续来确定。其中,音频数据对应的音量可以是目标应用程序的设置音量;音频数据是否连续指音频数据在设定时间内是否不中断,具体的,可以在音频数据对应的时间内均匀设置多个采样点,判断各个采样时间点是否具有音频数据,若具有音频数据的采样时间点的个数大于预设个数,则认为音频数据连续。在本实施例中,若音频数据对应的音量大于预设音量,且音频数据连续,则确定该音频数据对应的声音状态信息为有声状态;相应的,若音频数据对应的音量小于预设音量,或音频数据不连续,则确定该音频数据对应的声音状态信息为无声状态。若预设时间段内的音频数据均为有声状态,则目标展示资源可以是音乐类型的展示资源;若预设时间段内的音频数据均为无声状态,则目标展示资源可以是非音乐类型的展示资源。
在本实施例中,可以是仅对音乐类型的目标应用程序进行声音状态信息的确定,减少计算量的同时,避免在音乐类型的目标应用程序输出非音乐特性的音频数据时,切换到音乐类型的展示资源,提高了目标展示资源的准确性。还可以是对各目标应用程序进行声音状态信息的确定,在有目标应用程序输出音乐特性的音频数据时,切换到音乐类型的展示资源,以实现在音乐特性的音频数据输出时切换至对应的展示资源。
本实施例的技术方案,客户端确定输出至少一种音频数据的目标应用程序,并通过基于目标应用程序对应的声音状态信息确定目标展示资源,对目标展示资源进行展示,实现了根据应用程序的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,同时,还提高了目标展示资源的准确性。
可选的,所述客户端基于目标应用对应的声音状态信息确定目标展示资源,包括:客户端基于目标应用程序对应的音频数据确定目标应用程序对应的声音状态信息,并将声音状态信息发送至状态机;客户端接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
其中,状态机基于预设时间段内接收到的目标应用程序的各声音状态信息,确定当前状态,从而进一步确定界面展示控制参数。状态机的当前状态可以包括音乐播放状态和非音乐播放状态,若状态机在预设时间段内接收到的所有声音状态信息均为有声状态,则状态机将当前状态确定为音乐播放状态,并发送音乐播放状态对应的界面展示控制参数至客户端;若状态机在预设时间段内接收到的所有声音状态信息均为无声状态,则状态机将当前状态确定为非音乐播放状态,并发送非音乐播放状态对应的界面展示控制参数至客户端。可以理解的是,考虑到音乐的特性是连续的,因此,状态机的音乐播放状态和非音乐播放状态均是基于预设时间段内的目标应用程序输出的所有音频数据的声音状态信息确定的,利用预设时间段的延时判断来避免状态机对当前状态的误判,从而提高了目标展示资源的准确性。在本实施例中,通过基于状态机生成界面展示控制参数并发送至客户端,以使客户端进行目标展示资源的确定,从而实现展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率。
示例性的,如图5所示,客户端与状态机的交互过程如图所示,客户端将声音状态信息实时推送至状态机,以使状态机确定当前状态,并判断当前状态是否发生改变,若是,则反馈界面展示控制参数至客户端以使客户端确定并显示目标展示资源,以实现展示资源的切换。通过状态机与客户端的交互,实现了展示资源的动态切换,提高了用户的视觉体验感。
可选的,所述客户端基于目标应用程序对应的音频数据确定目标应用程序对应的声音状态信息,包括:客户端基于目标应用程序对应的音频数据的波形图确定目标应用程序对应的声音状态信息。
其中,由于音频数据是目标应用程序在设定时间内的输出的所有声音数据,因此,音频数据在设定时间内的幅值变化信息可以由波形图表征。波形图的横坐标为时间,纵坐标为音频数据的幅值,音频数据的幅值越大,则表明音频数据的音量越大。客户端可以根据各个音频数据的波形图,判断出各个音频数据在设定时间内是否连续以及是否满足预设音量条件,即是否满足音乐特性。具体的,若音频数据在设定时间内连续,且最低幅值大于预设幅值,则确定音频数据对应的声音状态信息为有声状态。
在本实施例中,客户端通过基于目标应用程序对应的音频数据的波形图确定目标应用程序对应的声音状态信息,实现了音频数据的声音状态的准确确定,从而提高了目标展示资源的准确性。
可选的,所述客户端基于目标应用程序对应的音频数据的波形图确定目标应用程序对应的声音状态信息,包括:客户端获取处于预设判断时长内的音频数据;若音频数据的波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔,则客户端将音频数据确定为有声状态。
其中,预设判断时长可以是目标应用程序传输音频数据的时间,即前述中的设定时间,也可以是设定时间内的部分时长,用于判断音频数据是否为有声状态。在本实施例中,若音频数据的波形图的幅值均大于预设幅值阈值,则表明音频数据在预设判断时长内不存在幅值为零的声音数据,即音频数据在预设判断时长内连续,且由于音频数据的波形图的幅值均大于预设幅值阈值,则可以确定音频数据满足预设音量条件,音频数据为有声状态。考虑到一些音乐具备节奏停顿点,此时音乐节奏停顿点在波形图中的幅值为零,且通常这些节奏停顿点的时长较短。因此,还可以将幅值小于预设幅值阈值的持续时间段小于预设时间间隔的音频数据确定为有声状态。
在本实施例中,通过将波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔的音频数据确定为有声状态,实现了音频数据的声音状态的准确确定,从而提高了目标展示资源的准确性。
可选的,在客户端基于音频数据的波形图确定音频数据对应的声音状态信息之前,还包括:客户端对音频数据进行数据格式化处理;相应的,客户端基于数据格式化处理后的音频数据的波形图确定目标应用程序对应的声音状态信息。其中,数据格式化指对音频数据进行解码和数据转换,通过解码得到PCM(Pulse Code Modulation,脉冲编码调制)数据,并通过数据转换将PCM数据转换成音频信号数据,从而得到音频信号数据的波形图。
实施例三
图6为本发明实施例三提供的一种资源展示装置的结构示意图,本实施例可适用于根据客户端接收的音频数据确定展示资源,以实现基于音频数据的展示资源的动态切换的情形,配置于客户端,该装置具体包括:数据接收模块610、应用确定模块620以及资源确定模块630。
数据接收模块610,用于接收至少一种音频数据;
应用确定模块620,用于确定输出至少一种所述音频数据的目标应用程序;
资源确定模块630,用于基于所述目标应用程序确定目标展示资源,对所述目标展示资源进行展示。
在本实施例中,通过数据接收模块接收至少一种音频数据,基于应用确定模块确定输出至少一种音频数据的目标应用程序,并通过资源确定模块基于目标应用程序确定目标展示资源,对目标展示资源进行展示,实现根据应用程序的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
可选的,应用确定模块包括第一确定单元和第二确定单元;其中,第一确定单元用于确定目标应用程序的应用类型;第二确定单元用于基于应用类型确定目标展示资源。
可选的,第二确定单元包括发送子单元和确定子单元;其中,发送子单元用于将应用类型发送至状态机;确定子单元用于接收状态机反馈的与应用类型对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
可选的,所述确定子单元具体用于调用渲染模块来读取界面展示控制参数对应的目标展示资源,调用渲染模块在目标区域展示目标展示资源。
可选的,资源确定模块包括状态确定单元,状态确定单元用于基于目标应用程序对应的声音状态信息确定目标展示资源。
可选的,状态确定单元包括状态发送子单元和状态接收子单元;其中,状态发送子单元用于基于目标应用程序对应的音频数据确定目标应用程序对应的声音状态信息,并将声音状态信息发送至状态机;状态接收子单元用于接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
可选的,状态发送子单元具体用于基于目标应用程序对应的音频数据的波形图确定目标应用程序对应的声音状态信息。
本发明实施例所提供的资源展示装置可执行本发明任意实施例所提供的资源展示方法,具备执行方法相应的功能模块和有益效果。
值得注意的是,上述系统所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明实施例的保护范围。
实施例四
图7为本发明实施例四提供的一种电子设备的结构示意图。图7示出了适于用来实现本发明实施例实施方式的示例性电子设备70的框图。图7显示的电子设备70仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示,电子设备70以通用计算设备的形式表现。电子设备70的组件可以包括但不限于:一个或者多个处理器或者处理单元701,系统存储器702,连接不同系统组件(包括系统存储器702和处理单元701)的总线703。
总线703表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备70典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备70访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器702可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)704和/或高速缓存存储器705。电子设备70可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统706可以用于读写不可移动的、非易失性磁介质(图7未显示,通常称为“硬盘驱动器”)。尽管图7中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线703相连。存储器702可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块707的程序/实用工具708,可以存储在例如存储器702中,这样的程序模块707包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块707通常执行本发明所描述的实施例中的功能和/或方法。
电子设备70也可以与一个或多个外部设备709(例如键盘、指向设备、显示器710等)通信,还可与一个或者多个使得用户能与该电子设备70交互的设备通信,和/或与使得该电子设备70能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口711进行。并且,电子设备70还可以通过网络适配器712与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器712通过总线703与电子设备70的其它模块通信。应当明白,尽管图7中未示出,可以结合电子设备70使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元701通过运行存储在系统存储器702中的程序,从而执行各种功能应用以及数据处理,例如实现本发实施例所提供的一种资源展示方法步骤,该方法包括:
客户端接收至少一种音频数据;
客户端确定输出至少一种音频数据的目标应用程序;
客户端基于目标应用程序确定目标展示资源,对目标展示资源进行展示。
当然,本领域技术人员可以理解,处理器还可以实现本发明任意实施例所提供的资源展示方法的技术方案。
实施例五
本实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的资源展示方法步骤,该方法包括:
客户端接收至少一种音频数据;
客户端确定输出至少一种音频数据的目标应用程序;
客户端基于目标应用程序确定目标展示资源,对目标展示资源进行展示。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种资源展示方法,其特征在于,包括:
客户端接收至少一种音频数据;
客户端确定输出至少一种所述音频数据的目标应用程序;
客户端基于所述目标应用程序确定目标展示资源,对所述目标展示资源进行展示。
2.根据权利要求1所述的方法,其特征在于,所述客户端基于所述目标应用程序确定目标展示资源,包括:
客户端确定所述目标应用程序的应用类型,基于所述应用类型确定目标展示资源。
3.根据权利要求2所述的方法,其特征在于,所述基于所述应用类型确定目标展示资源,包括:
客户端将所述应用类型发送至状态机;
客户端接收所述状态机反馈的与所述应用类型对应的界面展示控制参数,基于所述界面展示控制参数确定目标展示资源。
4.根据权利要求3所述的方法,其特征在于,所述基于所述界面展示控制参数确定目标展示资源,包括:
客户端调用渲染模块来读取所述界面展示控制参数对应的目标展示资源;
相应的,所述对所述目标展示资源进行展示,包括:
客户端调用渲染模块在目标区域展示所述目标展示资源。
5.根据权利要求1所述的方法,其特征在于,所述客户端基于所述目标应用程序确定目标展示资源,包括:
客户端基于所述目标应用程序对应的声音状态信息确定目标展示资源。
6.根据权利要求5所述的方法,其特征在于,所述客户端基于所述目标应用对应的声音状态信息确定目标展示资源,包括:
客户端基于所述目标应用程序对应的音频数据确定所述目标应用程序对应的声音状态信息,并将所述声音状态信息发送至状态机;
客户端接收所述状态机反馈的与声音状态信息对应的界面展示控制参数,基于所述界面展示控制参数确定目标展示资源。
7.根据权利要求6所述的方法,其特征在于,所述客户端基于所述目标应用程序对应的音频数据确定所述目标应用程序对应的声音状态信息,包括:
客户端基于所述目标应用程序对应的音频数据的波形图确定所述目标应用程序对应的声音状态信息。
8.一种资源展示装置,配置于客户端,其特征在于,包括:
数据接收模块,用于接收至少一种音频数据;
应用确定模块,用于确定输出至少一种所述音频数据的目标应用程序;
资源确定模块,用于基于所述目标应用程序确定目标展示资源,对所述目标展示资源进行展示。
9.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中所述的资源展示方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中所述的资源展示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011382601.5A CN112433698A (zh) | 2020-11-30 | 2020-11-30 | 一种资源展示方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011382601.5A CN112433698A (zh) | 2020-11-30 | 2020-11-30 | 一种资源展示方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112433698A true CN112433698A (zh) | 2021-03-02 |
Family
ID=74698109
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011382601.5A Pending CN112433698A (zh) | 2020-11-30 | 2020-11-30 | 一种资源展示方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112433698A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115113883A (zh) * | 2021-03-17 | 2022-09-27 | 深圳市万普拉斯科技有限公司 | 一种数据展示方法、装置及电子设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1934539A (zh) * | 2004-03-31 | 2007-03-21 | 咕果公司 | 用于监控应用程序中的事件的基于简档的捕捉组件 |
CN104731604A (zh) * | 2015-04-07 | 2015-06-24 | 锤子软件(北京)有限公司 | 确定正在播放声音的应用程序的方法及系统 |
CN106775983A (zh) * | 2016-12-23 | 2017-05-31 | 成都中科创达软件有限公司 | 一种应用程序场景切换方法、系统及移动终端 |
CN107172289A (zh) * | 2017-05-31 | 2017-09-15 | 广东欧珀移动通信有限公司 | 快速查找应用的方法及相关产品 |
CN109086105A (zh) * | 2018-08-14 | 2018-12-25 | 北京奇艺世纪科技有限公司 | 一种页面布局转换方法、装置及电子设备 |
CN109388367A (zh) * | 2018-09-04 | 2019-02-26 | Oppo广东移动通信有限公司 | 音效调整方法、装置、电子设备以及存储介质 |
CN110413182A (zh) * | 2019-07-24 | 2019-11-05 | 杭州网易云音乐科技有限公司 | 信息展示方法、装置、介质和计算设备 |
CN111862272A (zh) * | 2019-04-30 | 2020-10-30 | 北京达佳互联信息技术有限公司 | 动画状态机创建方法、动画控制方法、装置、设备及介质 |
CN111881353A (zh) * | 2020-07-28 | 2020-11-03 | 北京达佳互联信息技术有限公司 | 一种展示资源的推送方法、装置、电子设备和存储介质 |
US20200372114A1 (en) * | 2019-05-21 | 2020-11-26 | International Business Machines Corporation | Automatic translating and synchronization of audio data |
-
2020
- 2020-11-30 CN CN202011382601.5A patent/CN112433698A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1934539A (zh) * | 2004-03-31 | 2007-03-21 | 咕果公司 | 用于监控应用程序中的事件的基于简档的捕捉组件 |
CN104731604A (zh) * | 2015-04-07 | 2015-06-24 | 锤子软件(北京)有限公司 | 确定正在播放声音的应用程序的方法及系统 |
CN106775983A (zh) * | 2016-12-23 | 2017-05-31 | 成都中科创达软件有限公司 | 一种应用程序场景切换方法、系统及移动终端 |
CN107172289A (zh) * | 2017-05-31 | 2017-09-15 | 广东欧珀移动通信有限公司 | 快速查找应用的方法及相关产品 |
CN109086105A (zh) * | 2018-08-14 | 2018-12-25 | 北京奇艺世纪科技有限公司 | 一种页面布局转换方法、装置及电子设备 |
CN109388367A (zh) * | 2018-09-04 | 2019-02-26 | Oppo广东移动通信有限公司 | 音效调整方法、装置、电子设备以及存储介质 |
CN111862272A (zh) * | 2019-04-30 | 2020-10-30 | 北京达佳互联信息技术有限公司 | 动画状态机创建方法、动画控制方法、装置、设备及介质 |
US20200372114A1 (en) * | 2019-05-21 | 2020-11-26 | International Business Machines Corporation | Automatic translating and synchronization of audio data |
CN110413182A (zh) * | 2019-07-24 | 2019-11-05 | 杭州网易云音乐科技有限公司 | 信息展示方法、装置、介质和计算设备 |
CN111881353A (zh) * | 2020-07-28 | 2020-11-03 | 北京达佳互联信息技术有限公司 | 一种展示资源的推送方法、装置、电子设备和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115113883A (zh) * | 2021-03-17 | 2022-09-27 | 深圳市万普拉斯科技有限公司 | 一种数据展示方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2019086037A1 (zh) | 视频素材的处理方法、视频合成方法、终端设备及存储介质 | |
CN112738623B (zh) | 视频文件的生成方法、装置、终端及存储介质 | |
CN110298906B (zh) | 用于生成信息的方法和装置 | |
WO2020010971A1 (zh) | 视频文件的生成方法、装置及存储介质 | |
EP4336846A1 (en) | Audio sharing method and apparatus, device, and medium | |
CN107040452B (zh) | 一种信息处理方法、装置和计算机可读存储介质 | |
CN104995596A (zh) | 在选项卡层级管理音频以用于用户通知及控制 | |
WO2022022536A1 (zh) | 音频播放方法、音频播放装置和电子设备 | |
CN111629253A (zh) | 视频处理方法及装置、计算机可读存储介质、电子设备 | |
US9584761B2 (en) | Videoconference terminal, secondary-stream data accessing method, and computer storage medium | |
CN113873195A (zh) | 视频会议控制方法、装置和存储介质 | |
WO2023143299A1 (zh) | 消息展示方法、装置、设备及存储介质 | |
CN112286481A (zh) | 音频输出方法及电子设备 | |
CN111797271A (zh) | 多人听音乐实现方法、装置、存储介质及电子设备 | |
CN112433697B (zh) | 一种资源展示方法、装置、电子设备及存储介质 | |
CN112433698A (zh) | 一种资源展示方法、装置、电子设备及存储介质 | |
CN113973103A (zh) | 音频处理方法、装置、电子设备及存储介质 | |
CN114422468A (zh) | 消息处理方法、装置、终端及存储介质 | |
CN106354419A (zh) | 一种截图控制方法及装置 | |
JP2022095689A (ja) | 音声データノイズ低減方法、装置、機器、記憶媒体及びプログラム | |
CN115102931A (zh) | 自适应调整音频延迟的方法及电子设备 | |
CN112433696A (zh) | 一种壁纸显示方法、装置、设备和介质 | |
US11830120B2 (en) | Speech image providing method and computing device for performing the same | |
CN115379250B (zh) | 视频处理方法、装置、计算机设备及存储介质 | |
CN113542706B (zh) | 跑步机的投屏方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210302 |