CN112433697B - 一种资源展示方法、装置、电子设备及存储介质 - Google Patents

一种资源展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112433697B
CN112433697B CN202011379318.7A CN202011379318A CN112433697B CN 112433697 B CN112433697 B CN 112433697B CN 202011379318 A CN202011379318 A CN 202011379318A CN 112433697 B CN112433697 B CN 112433697B
Authority
CN
China
Prior art keywords
audio data
sound
resource
display
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011379318.7A
Other languages
English (en)
Other versions
CN112433697A (zh
Inventor
蔡浩宇
胡晓东
吴贻韡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mihoyo Tianming Technology Co Ltd
Original Assignee
Shanghai Mihoyo Tianming Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mihoyo Tianming Technology Co Ltd filed Critical Shanghai Mihoyo Tianming Technology Co Ltd
Priority to CN202011379318.7A priority Critical patent/CN112433697B/zh
Publication of CN112433697A publication Critical patent/CN112433697A/zh
Application granted granted Critical
Publication of CN112433697B publication Critical patent/CN112433697B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/162Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种资源展示方法、装置、电子设备及存储介质。该方法包括:通过客户端接收目标系统的音频数据,以及客户端基于音频数据确定目标展示资源,并对目标展示资源进行展示,实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。

Description

一种资源展示方法、装置、电子设备及存储介质
技术领域
本发明实施例涉及页面资源展示技术领域,尤其涉及一种资源展示方法、装置、电子设备及存储介质。
背景技术
随着通信技术的快速发展,智能手机、电脑、智能电视等电子设备的主屏幕,可以显示出用户设置的图像,如用户在系统默认的静态图像中选取的图像,或用户在拍摄、保存的相册中选取的图像。除此之外,电子设备的主屏幕还可以显示用户在系统默认的动画中所选取的动画。
然而,针对现有的电子设备屏幕的资源显示技术,如果用户想要对屏幕的显示资源进行更换,还需用户进行手动切换才可实现,费时费力。
发明内容
本发明提供一种资源展示方法、装置、电子设备及存储介质,以实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换的同时,还提高了用户的视觉体验感。
第一方面,本发明实施例提供了一种资源展示方法,该方法包括:
客户端接收目标系统的音频数据;
客户端基于所述音频数据确定目标展示资源,对所述目标展示资源进行展示。
第二方面,本发明实施例还提供了一种资源展示装置,配置于客户端,该装置包括:
接收模块,用于接收目标系统的音频数据;
展示模块,基于所述音频数据确定目标展示资源,对所述目标展示资源进行展示。
第三方面,本发明实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例提供的资源展示方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例提供的资源展示方法。
上述发明中的实施例具有如下优点或有益效果:
通过客户端接收目标系统的音频数据,以及客户端基于音频数据确定目标展示资源,并对目标展示资源进行展示,实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
附图说明
为了更加清楚地说明本发明示例性实施例的技术方案,下面对描述实施例中所需要用到的附图做一简单介绍。显然,所介绍的附图只是本发明所要描述的一部分实施例的附图,而不是全部的附图,对于本领域普通技术人员,在不付出创造性劳动的前提下,还可以根据这些附图得到其他的附图。
图1为本发明实施例一所提供的一种资源展示方法的流程示意图;
图2为本发明实施例一所提供的一种客户端与状态机的交互过程示意图;
图3为本发明实施例一所提供的一种客户端、状态机以及渲染模块交互示意图;
图4为本发明实施例二所提供的一种资源展示方法的流程示意图;
图5为本发明实施例三所提供的一种资源展示装置的结构示意图;
图6为本发明实施例四所提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种资源展示方法的流程示意图,本实施例可适用于根据系统的音频数据确定展示资源,以实现基于音频数据的展示资源的动态切换的情形,该方法可以由资源展示装置来执行,该装置可以由硬件和/或软件来实现,该方法具体包括如下步骤:
S110、客户端接收目标系统的音频数据。
其中,目标系统指安装有所述客户端的操作系统,如windows、linux、Android、unix或mac等。操作系统可以安装在计算机、手机、平板电脑或智能手表等电子设备上。音频数据指所述目标系统在设定时间内传输的所有声音数据,如音乐APP播放的音乐,游戏APP发出的提示音,社交APP发出的通话声音和视频APP播放的视频声音等中的至少一项,即所述目标系统中各个正在运行的应用程序在设定时间内所产生的声音数据。声音数据的类型可以分为以下几种:音乐、噪音、语音、提示音或视频音等,目标系统的音频数据可以是上述几种类型的声音数据的任意组合。具体的,音频数据是由声卡将原始声音信号进行转换,并输出到对应的音频设备的数据流,其中,声响设备可以是耳机、扬声器、扩音机或录音机等具备音频播放功能的设备。因此,可以通过采集声卡输出的数据流来获取目标系统的音频数据,以获取所述目标系统的音频数据。
具体的,可以基于目标系统提供的针对采集声卡输出数据流的应用程序接口来获取音频数据,如Windows Audio Session API、WaveOut API、Kernel Streaming API或DirectSound API等应用程序接口,将获取到的目标系统的音频数据发送至客户端;或者,客户端通过调用针对采集声卡输出数据流的应用程序接口,来获取目标系统的音频数据。
可选的,客户端接收目标系统的音频数据,包括:客户端通过音频接口函数接收目标系统的音频数据。其中,音频接口函数可包括核心音频接口函数和声音接口函数中的至少一项。
其中,音频接口函数指windows系统提供的用于采集声卡输出数据的底层应用程序接口,用于获取目标系统的全部音频数据流,客户端通过调用音频接口函数来接收目标系统的全部音频数据流。其中,核心音频接口函数指Core Audio API系列函数,核心音频接口函数可以获取Vista以上(包括Vista)的目标系统的音频数据,延时低且可靠性高。具体的,核心音频接口函数包括多媒体设备接口Multimedia Device API、Windows音频会话接口Windows Audio Session API、设备结构接口DeviceTopology API以及终端音量接口EndpointVolume API等。其中,Multimedia Device API可以访问目标系统中的各音频设备,Windows Audio Session API可以创建和管理来自各音频设备的音频数据流,DeviceTopology API可以访问声音适配器中的硬件数据通路的拓扑特性(如音量控制,复用器等),EndpointVolume API可以访问各音频设备的声音控制。在本实施例中,声音接口函数指DirectSound API系列函数,DirectSound API系列函数可以实现对麦克风输入的声音数据的采集,以及对声卡输出的声音数据的采集。DirectSound API系列函数可以获取XP以及XP之后的Windows的目标系统的音频数据,具备延时低的优点。具体的,可以使用DirectSound API系列函数中的声音捕获IDirectSoundCapture方法来实时接收目标系统的音频数据。
在本实施例中,客户端通过核心音频接口函数和/或声音接口函数接收目标系统的音频数据,实现了实时接收目标系统的音频数据,从而提高了目标展示资源的确定速度。
S120、客户端基于音频数据确定目标展示资源,对目标展示资源进行展示。
其中,目标展示资源指与音频数据相对应的,且需要在特定界面进行展示的资源,如动画或图像等。特定界面可以是主屏幕的显示界面,即设备的桌面,还可以是设备的当前显示界面,即用户切换的显示界面,如游戏界面或网页界面等。除此之外,目标展示资源也可以在特定界面的预设区域进行展示,如特定界面的右下角区域、中间区域或左小角区域等。其中,动画可以理解为连续时间轴上的一系列图像帧的组合,即一系列图像帧经过连续播放可以得到所述动画;图像可以是绘画、拍摄照片或绘制图形等静态图。示例性的,动画可以包含动漫人物执行各种动作,如荡秋千、梳理头发、打招呼或跳舞等动作。需要说明的是,上述包含各种执行动作的动画还可以通过相互组合的方式,生成包含多种执行动作的动画。
具体的,客户端根据音频数据所包含的声音类型来确定对应的展示资源,即目标展示资源。示例性的,音频数据所包含的声音类型包括音乐,则目标展示资源可以是包含佩戴耳机的动漫人物执行各个动作的动画,如佩戴头戴式耳机的少女听音乐、梳理头发或荡秋千等动画;音频数据所包含的声音类型不包括音乐,则目标展示资源可以是不佩戴耳机的动漫人物执行各个动作的动画,如不佩戴耳机的少女荡秋千或打招呼等动画;音频数据所包含的声音类型包括语音,则目标展示资源可以是手持电话的动漫人物执行各个动作的动画,如手持电话的少女梳理头发、张嘴说话或静坐等动画。
本实施例的技术方案,通过客户端接收目标系统的音频数据,以及客户端基于音频数据确定目标展示资源,并对目标展示资源进行展示,实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
可选的,客户端基于音频数据确定目标展示资源,包括:客户端基于音频数据确定音频数据对应的声音状态信息,并将音频数据对应的声音状态信息发送至状态机;客户端接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
其中,声音状态信息指根据音频数据的信息确定的对应状态,包括有声状态和无声状态。具体的,声音状态信息可以根据音频数据对应的音量以及音频数据是否连续来确定。其中,音频数据对应的音量可以是目标系统的系统音量,可以通过目标系统提供的应用程序接口来获取;音频数据是否连续指音频数据在设定时间内是否不中断,具体的,可以在音频数据对应的时间内均匀设置多个采样点,判断各个采样时间点是否具有音频数据,若具有音频数据的采样时间点的个数大于预设个数,则认为音频数据连续。在本实施例中,若音频数据对应的音量大于预设音量,且音频数据连续,则确定该音频数据对应的声音状态信息为有声状态;相应的,若音频数据对应的音量小于预设音量,或音频数据不连续,则确定该音频数据对应的声音状态信息为无声状态。
具体的,状态机用于根据接受的各个音频数据的声音状态信息确定当前状态,以在当前状态与前一状态存在区别时,生成当前状态对应的界面展示控制参数发送至客户端。其中,界面展示控制参数用于确定目标展示资源,客户端可以根据界面展示控制参数执行调用对应的目标展示资源的操作。
可选的,若状态机接收客户端发送的音频数据对应的声音状态信息,生成与声音状态信息对应的界面展示控制参数发送至客户端。
其中,状态机基于预设时间段内接收到的各音频数据的声音状态信息,确定当前状态,从而进一步确定界面展示控制参数。状态机的当前状态可以包括音乐播放状态和非音乐播放状态,若状态机在预设时间段内接收到的所有音频数据均为有声状态,则状态机将当前状态确定为音乐播放状态,并发送音乐播放状态对应的界面展示控制参数至客户端;若状态机在预设时间段内接收到的所有音频数据中均为无声状态,则状态机将当前状态确定为非音乐播放状态,并发送非音乐播放状态对应的界面展示控制参数至客户端。可以理解的是,考虑到音乐的特性是连续的,因此,状态机的音乐播放状态和非音乐播放状态均是基于预设时间段内的所有音频数据确定的,利用预设时间段的延时判断来避免状态机对当前状态的误判,从而提高了目标展示资源的准确性。在本实施例中,通过基于状态机生成界面展示控制参数并发送至客户端,以使客户端进行目标展示资源的确定,从而实现展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率。
示例性的,如图2所示,客户端与状态机的交互过程如图所示,客户端通过调用音频接口函数接收目标系统的音频数据,并根据音频数据确定对应的声音状态信息,将声音状态信息实时推送至状态机,以使状态机确定当前状态,并判断当前状态是否发生改变,若是,则反馈界面展示控制参数至客户端以使客户端确定并显示目标展示资源,以实现展示资源的切换;若否,则不生成界面展示控制参数,即不进行处理。在本实施例中,通过将基于音频数据确定音频数据对应的声音状态信息,并将音频数据对应的声音状态信息发送至状态机,从而使得客户端接收状态机反馈的与声音状态信息对应的界面展示控制参数,并基于界面展示控制参数确定目标展示资源,从而实现了根据状态机反馈的界面展示控制参数来确定目标展示资源,通过状态机与客户端的交互,实现了展示资源的动态切换,提高了用户的视觉体验感。
可以理解的是,当音频数据对应的声音状态信息没有发生变化时,即状态机的状态没有发生变化,可以是如图2所示,状态机维持当前的界面展示控制参数,从而使得目标展示资源不进行切换;还可以是状态机生成新的界面展示控制参数发送至客户端,客户端判断接收的界面展示控制参数是否与上一界面展示控制参数相同,若是,则将上一界面展示控制参数对应的目标展示资源确定当前目标展示资源,从而使得目标展示资源不进行切换,保持原目标展示资源的持续展示。
可选的,基于界面展示控制参数确定目标展示资源,包括:调用渲染模块来读取界面展示控制参数对应的目标展示资源;相应的,对目标展示资源进行展示,包括:调用渲染模块在目标区域展示目标展示资源。
其中,渲染模块是目标系统中用于从存储区域中读取并展示目标展示资源的功能模块。具体的,存储区域中预先存储了各目标展示资源与界面展示控制参数的对应关系,以使渲染模块可以根据界面展示控制参数在存储区域中查询到对应的目标展示资源。渲染模块可以是采用视频覆盖方法对目标展示资源作拉伸或颜色空间变换等处理,来覆盖住目标区域,以使在目标区域展示目标展示资源。示例性的,渲染模块可以是Direct3D模块、目标系统默认渲染模块、覆盖混合渲染、视频混合渲染模块7(vmr7)、视频混合渲染模块9(vmr9)或EVR渲染模块等中的一种。
具体的,客户端、状态机以及渲染模块交互过程如图3所示,其中,客户端与状态机的交互过程为:通过将音频数据的声音状态信息发送至状态机,以使状态机根据接收的声音状态信息确定界面展示控制参数,并反馈至客户端;客户端与渲染模块的交互过程为:客户端根据状态机反馈的界面展示控制参数,调用渲染模块,对界面展示控制参数对应的目标展示资源进行读取与展示。
在本实施例中,通过调用渲染模块来读取界面展示控制参数对应的目标展示资源,并在目标区域展示目标展示资源,实现了基于渲染模块的资源展示,提高了用户的视觉体验感。
实施例二
图4为本发明实施例二提供的一种资源展示方法的流程示意图,本实施例在上述各实施例的基础上,对“客户端基于音频数据确定各音频数据对应的声音状态信息”进行了进一步优化。其中与上述各实施例相同或相应的术语的解释在此不再赘述。参见图4,本实施例提供的资源展示方法包括以下步骤:
S410、客户端接收目标系统的音频数据。
S420、客户端基于音频数据的波形图确定音频数据对应的声音状态信息,并将音频数据对应的声音状态信息发送至状态机。
其中,由于音频数据是目标系统在设定时间内的传输的所有声音数据,因此,音频数据在设定时间内的幅值变化信息可以由波形图表征。波形图的横坐标为时间,纵坐标为音频数据的幅值,音频数据的幅值越大,则表明音频数据的音量越大。客户端可以根据各个音频数据的波形图,判断出各个音频数据在设定时间内是否连续以及是否满足预设音量条件。具体的,若音频数据在设定时间内连续,且最低幅值大于预设幅值,则确定音频数据对应的声音状态信息为有声状态。
可选的,客户端基于音频数据的波形图确定音频数据对应的声音状态信息,包括:客户端获取处于预设判断时长内的音频数据;若音频数据的波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔,则客户端将音频数据确定为有声状态。
其中,预设判断时长可以是目标系统传输音频数据的时间,即前述中的设定时间,也可以是设定时间内的部分时长,用于判断音频数据是否为有声状态。在本实施例中,若音频数据的波形图的幅值均大于预设幅值阈值,则表明音频数据在预设判断时长内不存在幅值为零的情形,即音频数据在预设判断时长内连续,且由于音频数据的波形图的幅值均大于预设幅值阈值,则可以确定音频数据满足预设音量条件,音频数据为有声状态。考虑到一些音乐具备节奏停顿点,此时音乐节奏停顿点在波形图中的幅值为零,且通常这些节奏停顿点的时长较短,因此,还可以将幅值小于预设幅值阈值的持续时间段小于预设时间间隔的音频数据确定为有声状态。在本实施例中,通过将波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔的音频数据确定为有声状态,实现了音频数据的声音状态的准确确定,从而提高了状态机反馈的界面展示控制参数的准确性,进一步的,提高了目标展示资源的准确性。
可选的,在客户端基于音频数据的波形图确定音频数据对应的声音状态信息之前,还包括:客户端对音频数据进行数据格式化处理;相应的,客户端基于处理后的音频数据的波形图确定音频数据对应的声音状态信息。其中,数据格式化指对音频数据进行解码和数据转换,通过解码得到PCM(Pulse Code Modulation,脉冲编码调制)数据,并通过数据转换将PCM数据转换成音频信号数据,从而得到音频信号数据的波形图。
S430、客户端接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源。
S440、对目标展示资源进行展示。
本实施例的技术方案,客户端基于音频数据的波形图确定音频数据对应的声音状态信息,将音频数据对应的声音状态信息发送至状态机;并接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源,实现了音频数据的声音状态的准确确定,提高了状态机反馈的界面展示控制参数的准确性,从而提高了目标展示资源的准确性。
实施例三
图5为本发明实施例三提供的一种资源展示装置的结构示意图,本实施例可适用于根据系统的音频数据确定展示资源,以实现基于音频数据的展示资源的动态切换的情形,该装置具体包括:接收模块510和展示模块520。
接收模块510,用于接收目标系统的音频数据;
展示模块520,基于音频数据确定目标展示资源,对目标展示资源进行展示。
在本实施例中,通过接收模块接收目标系统的音频数据,以及通过展示模块基于音频数据确定目标展示资源,并对目标展示资源进行展示,实现根据系统的音频数据确定展示资源,从而实现基于音频数据的展示资源的动态切换,无需用户手动切换,提高了展示资源的切换效率,同时,使得设备的展示资源多样化,提高了用户的视觉体验感。
可选的,在上述装置的基础上,所述展示模块520包括声音状态确定单元、展示资源确定单元以及展示资源展示单元;其中,声音状态确定单元用于基于音频数据确定音频数据对应的声音状态信息,并将音频数据对应的声音状态信息发送至状态机;展示资源确定单元用于接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源;展示资源展示单元用于对目标展示资源进行展示。
可选的,所述展示资源确定单元具体用于调用渲染模块来读取界面展示控制参数对应的目标展示资源;相应的,所述展示资源展示单元具体用于调用渲染模块在目标区域展示目标展示资源。
可选的,所述声音状态确定单元具体用于基于音频数据的波形图确定音频数据对应的声音状态信息。
可选的,所述声音状态确定单元包括获取子单元和确定子单元;其中,获取子单元用于获取处于预设判断时长内的音频数据;确定子单元用于在音频数据的波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔时,将音频数据确定为有声状态。
可选的,所述接收模块具体用于通过音频接口函数接收目标系统的音频数据,其中,音频接口函数包括核心音频接口函数和声音接口函数中的至少一项。
本发明实施例所提供的资源展示装置可执行本发明任意实施例所提供的资源展示方法,具备执行方法相应的功能模块和有益效果。
值得注意的是,上述装置所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明实施例的保护范围。
实施例四
图6为本发明实施例四提供的一种电子设备的结构示意图。图6示出了适于用来实现本发明实施例实施方式的示例性电子设备60的框图。图6显示的电子设备60仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示,电子设备60以通用计算设备的形式表现。电子设备60的组件可以包括但不限于:一个或者多个处理器或者处理单元601,系统存储器602,连接不同系统组件(包括系统存储器602和处理单元601)的总线603。
总线603表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备60典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备60访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器602可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)604和/或高速缓存存储器605。电子设备60可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统606可以用于读写不可移动的、非易失性磁介质(图6未显示,通常称为“硬盘驱动器”)。尽管图6中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线603相连。存储器602可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块607的程序/实用工具608,可以存储在例如存储器602中,这样的程序模块607包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块607通常执行本发明所描述的实施例中的功能和/或方法。
电子设备60也可以与一个或多个外部设备609(例如键盘、指向设备、显示器610等)通信,还可与一个或者多个使得用户能与该电子设备60交互的设备通信,和/或与使得该电子设备60能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口611进行。并且,电子设备60还可以通过网络适配器612与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器612通过总线603与电子设备60的其它模块通信。应当明白,尽管图6中未示出,可以结合电子设备60使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元601通过运行存储在系统存储器602中的程序,从而执行各种功能应用以及数据处理,例如实现本发实施例所提供的一种资源展示方法步骤,该方法包括:
客户端接收目标系统的音频数据;
客户端基于音频数据确定目标展示资源,对目标展示资源进行展示。
当然,本领域技术人员可以理解,处理器还可以实现本发明任意实施例所提供的资源展示方法的技术方案。
实施例五
本实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的资源展示方法步骤,该方法包括:
客户端接收目标系统的音频数据;
客户端基于音频数据确定目标展示资源,对目标展示资源进行展示。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.一种资源展示方法,其特征在于,包括:
客户端接收目标系统的音频数据,其中,所述音频数据为所述目标系统传输的所述目标系统中各个正在运行的应用程序在设定时间内所产生的声音数据;
客户端基于所述音频数据确定目标展示资源,对所述目标展示资源进行展示;
所述客户端基于所述音频数据确定目标展示资源,包括:
客户端基于所述音频数据确定音频数据对应的声音状态信息,并将所述音频数据对应的声音状态信息发送至状态机,其中,所述声音状态信息包括有声状态和无声状态;
客户端接收所述反馈的与声音状态信息对应的界面展示控制参数,基于所述界面展示控制参数确定目标展示资源,其中,所述界面展示控制参数由所述状态机根据所述声音状态信息确定当前状态,并在当前状态与前一状态存在区别时生成,所述当前状态包括音乐播放状态和非音乐播放状态。
2.根据权利要求1所述的方法,其特征在于,所述基于所述界面展示控制参数确定目标展示资源,包括:
调用渲染模块来读取所述界面展示控制参数对应的目标展示资源;
相应的,所述对所述目标展示资源进行展示,包括:
调用渲染模块在目标区域展示所述目标展示资源。
3.根据权利要求1所述的方法,其特征在于,所述客户端基于所述音频数据确定音频数据对应的声音状态信息,包括:
客户端基于所述音频数据的波形图确定所述音频数据对应的声音状态信息。
4.根据权利要求3所述的方法,其特征在于,所述客户端基于所述音频数据的波形图确定所述音频数据对应的声音状态信息,包括:
所述客户端获取处于预设判断时长内的音频数据;
若所述音频数据的波形图的幅值均大于预设幅值阈值,或幅值小于等于预设幅值阈值的持续时间段小于预设时间间隔,则所述客户端将所述音频数据确定为有声状态。
5.根据权利要求1所述的方法,其特征在于,还包括:
若状态机接收所述客户端发送的所述音频数据对应的声音状态信息,生成与所述声音状态信息对应的界面展示控制参数发送至客户端。
6.根据权利要求1所述的方法,其特征在于,所述客户端接收目标系统的音频数据,包括:
客户端通过音频接口函数接收目标系统的音频数据,其中,所述音频接口函数包括核心音频接口函数和声音接口函数中的至少一项。
7.一种资源展示装置,配置于客户端,其特征在于,包括:
接收模块,用于接收目标系统的音频数据,其中,所述音频数据为所述目标系统传输的所述目标系统中各个正在运行的应用程序在设定时间内所产生的声音数据;
展示模块,基于所述音频数据确定目标展示资源,对所述目标展示资源进行展示;
所述展示模块包括声音状态确定单元、展示资源确定单元以及展示资源展示单元,其中;
声音状态确定单元,用于基于音频数据确定音频数据对应的声音状态信息,并将音频数据对应的声音状态信息发送至状态机,其中,所述声音状态信息包括有声状态和无声状态;
展示资源确定单元,用于接收状态机反馈的与声音状态信息对应的界面展示控制参数,基于界面展示控制参数确定目标展示资源,其中,所述界面展示控制参数由所述状态机根据所述声音状态信息确定当前状态,并在当前状态与前一状态存在区别时生成,所述当前状态包括音乐播放状态和非音乐播放状态。
8.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-6中所述的资源展示方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6中所述的资源展示方法。
CN202011379318.7A 2020-11-30 2020-11-30 一种资源展示方法、装置、电子设备及存储介质 Active CN112433697B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011379318.7A CN112433697B (zh) 2020-11-30 2020-11-30 一种资源展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011379318.7A CN112433697B (zh) 2020-11-30 2020-11-30 一种资源展示方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112433697A CN112433697A (zh) 2021-03-02
CN112433697B true CN112433697B (zh) 2023-02-28

Family

ID=74699150

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011379318.7A Active CN112433697B (zh) 2020-11-30 2020-11-30 一种资源展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112433697B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033776A (zh) * 2009-09-29 2011-04-27 联想(北京)有限公司 一种音频播放方法及一种计算设备
CN102831912A (zh) * 2012-08-10 2012-12-19 上海量明科技发展有限公司 显示音频消息播放进度的方法、客户端及系统
CN107315591A (zh) * 2017-06-30 2017-11-03 上海棠棣信息科技股份有限公司 一种业务设计方法和系统
CN109086105A (zh) * 2018-08-14 2018-12-25 北京奇艺世纪科技有限公司 一种页面布局转换方法、装置及电子设备
CN110750659A (zh) * 2019-10-15 2020-02-04 腾讯数码(天津)有限公司 媒体资源动态显示方法、装置及存储介质
CN111488091A (zh) * 2020-04-16 2020-08-04 深圳传音控股股份有限公司 移动终端的界面显示方法、移动终端及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033776A (zh) * 2009-09-29 2011-04-27 联想(北京)有限公司 一种音频播放方法及一种计算设备
CN102831912A (zh) * 2012-08-10 2012-12-19 上海量明科技发展有限公司 显示音频消息播放进度的方法、客户端及系统
CN107315591A (zh) * 2017-06-30 2017-11-03 上海棠棣信息科技股份有限公司 一种业务设计方法和系统
CN109086105A (zh) * 2018-08-14 2018-12-25 北京奇艺世纪科技有限公司 一种页面布局转换方法、装置及电子设备
CN110750659A (zh) * 2019-10-15 2020-02-04 腾讯数码(天津)有限公司 媒体资源动态显示方法、装置及存储介质
CN111488091A (zh) * 2020-04-16 2020-08-04 深圳传音控股股份有限公司 移动终端的界面显示方法、移动终端及存储介质

Also Published As

Publication number Publication date
CN112433697A (zh) 2021-03-02

Similar Documents

Publication Publication Date Title
CN110298906B (zh) 用于生成信息的方法和装置
CN109257499B (zh) 一种歌词的动态展示方法及装置
CN111629253A (zh) 视频处理方法及装置、计算机可读存储介质、电子设备
US11200899B2 (en) Voice processing method, apparatus and device
CN113873195B (zh) 视频会议控制方法、装置和存储介质
WO2020173211A1 (zh) 图像特效的触发方法、装置和硬件装置
CN104615432B (zh) 闪屏信息处理方法及客户端
CN112286481A (zh) 音频输出方法及电子设备
US11272136B2 (en) Method and device for processing multimedia information, electronic equipment and computer-readable storage medium
CN112433697B (zh) 一种资源展示方法、装置、电子设备及存储介质
CN114422468A (zh) 消息处理方法、装置、终端及存储介质
CN115102931B (zh) 自适应调整音频延迟的方法及电子设备
JP2022095689A (ja) 音声データノイズ低減方法、装置、機器、記憶媒体及びプログラム
JP7331044B2 (ja) 情報処理方法、装置、システム、電子機器、記憶媒体およびコンピュータプログラム
CN112433698A (zh) 一种资源展示方法、装置、电子设备及存储介质
CN111580766B (zh) 一种信息显示方法、装置和信息显示系统
CN113160782B (zh) 音频处理的方法、装置、电子设备及可读存储介质
CN112433696A (zh) 一种壁纸显示方法、装置、设备和介质
CN111739510A (zh) 信息处理方法、装置、车辆和计算机存储介质
CN113542706B (zh) 跑步机的投屏方法、装置、设备及存储介质
CN110289010B (zh) 一种声音采集的方法、装置、设备和计算机存储介质
CN111768756B (zh) 信息处理方法、装置、车辆和计算机存储介质
CN113096674B (zh) 一种音频处理方法、装置及电子设备
CN112820307B (zh) 语音消息处理方法、装置、设备及介质
CN113840034B (zh) 声音信号处理方法和终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant