CN104216641B - 一种界面控制方法、装置和终端设备 - Google Patents

一种界面控制方法、装置和终端设备 Download PDF

Info

Publication number
CN104216641B
CN104216641B CN201310216271.6A CN201310216271A CN104216641B CN 104216641 B CN104216641 B CN 104216641B CN 201310216271 A CN201310216271 A CN 201310216271A CN 104216641 B CN104216641 B CN 104216641B
Authority
CN
China
Prior art keywords
voice signal
frequency domain
user interface
amplitude
amplitude information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310216271.6A
Other languages
English (en)
Other versions
CN104216641A (zh
Inventor
袁婉娣
宋铎
暴国辉
高玉峰
李金哲
张湜
王志强
王浩宇
金介生
宋郅鹏
王莹
吴楠楠
张天资
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Penguin fairy Technology Co., Ltd.
Original Assignee
Beijing Penguin Fairy Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Penguin Fairy Technology Co Ltd filed Critical Beijing Penguin Fairy Technology Co Ltd
Priority to CN201310216271.6A priority Critical patent/CN104216641B/zh
Publication of CN104216641A publication Critical patent/CN104216641A/zh
Application granted granted Critical
Publication of CN104216641B publication Critical patent/CN104216641B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种界面控制方法,包括:显示用户界面;获取输入的声音信号,并计算所述声音信号的幅度信息;当所述幅度信息满足预置的动画播放条件时,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。本发明实施例还公开了一种界面控制装置和终端设备。采用本发明,能使用户与设备的交互更方便。

Description

一种界面控制方法、装置和终端设备
技术领域
本发明涉及计算机领域,尤其涉及一种界面控制方法、装置和终端设备。
背景技术
人机交互是一门研究系统与用户之间的交互关系的学问。系统可以是各种各样的机器,也可以是计算机化的系统和软件。人机交互界面通常是指用户可见的部分。用户通过人机交互界面与系统交流,并进行操作。小如收音机的播放按键,大至飞机上的仪表板、或是发电厂的控制室。人机交互界面的设计要包含用户对系统的理解,那是为了系统的可用性或者交互友好性。
随着移动通信技术的发展,移动终端在人们的生活和工作中发挥着越来越重要的作用,移动终端所具有的音频、视频或图像功能给人们的生活带来了极大的乐趣,通常需要通过人机交互界面来实现,现有的人机交互界面通常包括按键、触摸屏或重量感应等。
本发明的发明人发现,现有的人机界面交互方式存在以下问题:第一、按键式交互界面容易出现因灰尘造成的接触不良、因按压力过大造成的卡键、因频繁侧向按压造成的按键脱落等问题;第二、触摸屏式交互界面容易出现因手汗而造成的屏幕模糊、因按压不当造成的屏幕划伤,最终影响了屏幕的显示质量;第三、重量感应人机交互界面容易出现感应失灵的问题。
综上所述,现有的人机界面交互总体上操作复杂(也即效率不足),容易操作出错的问题。
发明内容
有鉴于此,本发明实施例提供一种界面控制方法、装置和终端设备,以解决上述现有技术中存在的技术问题。
一方面,本发明实施例提供了一种界面控制方法,包括:
显示用户界面;
获取输入的声音信号,并计算所述声音信号的幅度信息;
当所述幅度信息满足预置的动画播放条件时,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
另一方面,本发明实施例还提供了一种界面控制装置,包括:
界面显示模块,用于显示用户界面;
幅度计算模块,用于获取输入的声音信号,并计算所述声音信号的幅度信息;
动画播放模块,用于当所述幅度信息满足预置的动画播放条件时,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
进一步地,本发明还提供一种终端设备,其包括上述的控制装置。
相对于现有技术,本发明实施例:通过对输入的声音信号进行幅度分析,并通过分析声音信号的幅度信息是否满足预置的动画播放条件来控制用户界面上的动画,具有操作简单的优点,可有效提升人机交互的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例的一种界面控制方法的流程示意图;
图2是本发明第二实施例的一种界面控制方法的流程示意图;
图3是本发明实施例的声音信号的波形图和频率图;
图4为本发明实施例的动画播放前的界面示意图;
图5为本发明实施例的动画播放后的界面示意图;
图6是本发明第三实施例的一种界面控制装置的结构示意图;
图7是本发明第四实施例的一种界面控制装置的结构示意图;
图8是图7中幅度计算模块的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
第一实施例
参见图1,本发明实施例提供一种界面控制方法,该方法包括步骤101至步骤103。
步骤101、显示用户界面;
步骤102、获取输入的声音信号,并计算所述声音信号的幅度信息;
步骤103、当所述幅度信息满足预置的动画播放条件时,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
实施本发明的实施例,通过对输入的声音信号进行幅度分析,并通过分析声音信号的幅度信息是否满足预置的动画播放条件来控制用户界面上的动画,具有操作简单的优点,可有效提升人机交互的效率。
第二实施例
参见图2,本发明实施例提供一种界面控制方法,该方法包括步骤201至步骤206。
步骤201、显示用户界面,所述用户界面中包括用于提示用户进行操作的提示信息。
请结合图4,在其中一种示例方式中,终端设备的在显示屏上显示一个点燃的蜡烛插在蛋糕上的用户界面,在该用户界面上显示一行提示用户对着话筒吹气的提示信息,其例可以是“吹吹这里,为宝贝听听庆生吧”,同时用箭头指向吹气的具体位置,该提示信息在用户界面的显示位置不作限制,可以位于用户界面的任何位置(如图4中在用户界面的下方),该提示信息可以提示用户如何与设备进行交互,在该用户界面上还可以包括其他的信息,例如,还可以显示几周岁生日快乐等文字信息。
步骤202、播放所述用户界面对应的背景音乐,并预置所述背景音乐的幅度信息不满足预置的动画播放条件。
具体的,终端设备在启动用户界面后会播放相应的背景音乐,例如在步骤201中,启动庆祝生日的用户界面后,播放生日快乐的背景音乐。此时,必须预置播放的背景音乐的幅度信息不满足预置的动画播放条件。例如,预设动画播放条件为5个单位值,超过5个单位值就触发用户界面播放对应的动画,则终端设备必须在播放背景音乐的时候预置幅度信息在5个单位值以下(包括5个),才不会发生误操作。可以理解的是,动画播放条件可以根据实际使用需要进行设定,例如设定动画播放条件为6个单位值、7个单位值或其它数目,不受具体实施例的限定。通过设置背景音乐的动画播放条件,可以有效防止由播放背景音乐而导致用户界面对应动画的误触发。
步骤203、对输入的声音信号进行采样处理得到时域离散序列,将所述时域离散序列进行FFT(Fast Fourier Transform,快速傅里叶变换,简称FFT)运算后得到所述声音信号的频域离散序列,根据所述频域离散序列得到所述声音信号的幅度信息。
具体的,请结合图3,在其中的一种示例方式中,终端设备通过麦克风将用户发出的声音转换为模拟声音信号,如图3上方展示的代表该模拟声音信号的波形图,然后对该声音信号进行采样处理、量化和编码处理,例如,采用PCM(Pulse Code Modulation,脉冲编码调制,简称PCM)方法将连续的模拟声音信号转化为时域离散序列,该时域离散序列为数字信号,假设该时域离散序列的采样点数为N,对该时域离散序列经过FFT快速傅里叶变换后就可得到N个点的FFT数值(FFT数值为复数),即该声音信号对应的频域离散序列,如图3下方展示的代表该频域离散序列的频谱图。为了方便进行FFT运算,通常N取2的整数次方。
假设采样频率为Fs,信号频率F,采样点数为N,频域离散序列中某一点(a+bi)n(n=1,2,3…N)的频率表示为F=(n-1)*Fs/N,该频率下该点的幅度表示为A=An/(N/2),其中,An=sqrt(a^2+b^2),该点的相位即该频率下的信号的相位表示为Pn=arctan(b/a),这样就可以计算出声音信号在每个频域点上的幅度信息S=A*cos(2*π*F*t+Pn)。
步骤204、过滤掉所述离散频域序列中人声频率范围之外的所述声音信号的幅度信息。
具体的,由于人发出的声音的频率范围是有限,一般在80Hz~3400Hz之间。终端设备采样的声音信号中可能包括人的声音信号之外的其他声音信号,可以根据需要取一个经验值范围,过滤掉其他的声音信号,即过滤掉人的声音信号频率范围之外的声音信号的幅度信息,只保留人的声音信号频率范围之间的声音信号的幅度信息,可以有效的防止误触发。
步骤205、检测幅度信息是否满足预置的动画播放条件。
具体的,预置的动画播放条件可以是,离散频域序列中是否存在预定数量的点大于预定的幅度值的情况,例如,是否存在至少100个点的幅度值大于50个单位值的情况,若检测为是,执行步骤206,否则继续检测。
步骤206、在所述用户界面上播放与所述声音信号幅度信息对应的动画。
请结合图5,在其中一种示例方式中,当满足上述的动画播放条件时,触发一个预置的与所述用户界面对应的动画。例如,以上面的庆祝生日界面为例,当满足预置的动画播放条件时,播放一个生日蜡烛熄灭并冒出青烟的动画,烘托生日气氛。
实施本发明的实施例,通过对输入的声音信号进行幅度分析,并通过分析声音信号的幅度信息是否满足预置的动画播放条件来控制用户界面上的动画,具有操作简单的优点,可有效提升人机交互的效率。
第三实施例
参见图6,本发明实施例提供一种界面控制装置,以下简称控制装置1,该控制装置1包括界面显示模块11、幅度计算模块12以及动画播放模块13。
界面显示模块11,用于显示用户界面。
具体的,假设界面显示模块11显示一个点燃的蜡烛插在蛋糕上的用户界面,该界面显示模块11还可以在该用户界面上显示一行提示用户对着话筒吹气的提示信息,其例可以是“吹吹这里,为宝贝听听庆生吧”,同时用箭头指向吹气的具体位置,该提示信息在用户界面的显示位置不作限制(例如在图4中用户界面的下方),可以位于用户界面的任何位置,该提示信息可以提示用户如何与设备进行交互,在该用户界面上还可以包括其他的信息,例如,还可以显示几周岁生日快乐等文字信息。
幅度计算模块12,用于获取输入的声音信号,并计算所述声音信号的幅度信息。
具体的,幅度计算模块12将用户发出的声音转换为模拟声音信号,然后对该声音信号进行采样处理、量化和编码处理,例如,采用PCM脉冲编码调制方法将连续的模拟声音信号转化为时域离散序列,该时域离散序列为数字信号,假设该时域离散序列的采样点数为N,对该时域离散序列经过FFT快速傅里叶变换后就可得到N个点的FFT数值(FFT数值为复数),即该声音信号对应的频域离散序列。为了方便进行FFT运算,通常N取2的整数次方。
假设采样频率为Fs,信号频率F,采样点数为N,频域离散序列中某一点(a+bi)n(n=1,2,3…N)的频率表示为F=(n-1)*Fs/N,该频率下该点的幅度表示为A=An/(N/2),其中,An=sqrt(a^2+b^2),该点的相位即该频率下的信号的相位表示为Pn=arctan(b/a),这样就可以计算出声音信号在每个频域点上的幅度信息S=A*cos(2*π*F*t+Pn)。
动画播放模块13,用于当所述幅度信息满足预置的动画播放条件时,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
实施本发明的实施例,通过对输入的声音信号进行幅度分析,并通过分析声音信号的幅度信息是否满足预置的动画播放条件来控制用户界面上的动画,具有操作简单的优点,可有效提升人机交互的效率。
第四实施例
进一步的,参见图7和图8,本发明实施例提供一种界面控制装置。包括界面显示模块11、幅度计算模块12、动画播放模块13,过滤模块14以及音乐播放模块15。
过滤模块14,用于过滤掉所述频域离散序列中人声频率范围之外的所述声音信号的幅度信息。
具体的,由于人发出的声音的频率范围是有限,一般在80Hz~3400Hz之间。终端设备采样的声音信号中可能包括人的声音信号之外的其他声音信号,可以根据需要取一个经验值范围,过滤模块14过滤掉其他的声音信号,即过滤掉人的声音信号频率范围之外的声音信号的幅度信息,只保留人的声音信号频率范围之间的声音信号的幅度信息,可以有效的防止误触发。
音乐播放模块15,用于播放所述用户界面对应的背景音乐,并预置所述背景音乐的幅度信息不满足所述预置的动画播放条件。
具体的,音乐播放模块15在启动用户界面后会播放相应的背景音乐。例如,在步骤201中,启动庆祝生日的用户界面后,播放生日快乐的背景音乐。此时,音乐播放模块15必须预置播放的背景音乐的幅度信息不满足预置的动画播放条件。例如,预设动画播放条件为5个单位值,超过5个单位值就触发用户界面播放对应的动画,则终端设备必须在播放背景音乐的时候预置幅度信息在5个单位值以下(包括5个),才不会发生误操作。可以理解的是,动画播放条件可以根据实际使用需要进行设定,例如设定动画播放条件为6个单位值、7个单位值或其它数目,不受具体实施例的限定。通过预置背景音乐的动画播放条件,可以有效防止由播放背景音乐而导致用户界面对应动画的误触发。
优选的,幅度计算模块12包括时域序列计算单元121、频域序列计算单元122以及幅度信息计算单元123。
时域序列计算单元121,用于对输入的声音信号进行采样处理得到时域离散序列;
频域序列计算单元122,用于将所述时域离散序列进行FFT运算后得到所述声音信号的频域离散序列;
幅度信息计算单元123,用于根据所述频域离散序列得到所述声音信号的幅度信息。
实施本发明的实施例,通过对输入的声音信号进行幅度分析,并通过分析声音信号的幅度信息是否满足预置的动画播放条件来控制用户界面上的动画,具有操作简单的优点,可有效提升人机交互的效率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本发明权利要求所作的等同变化,仍属于发明所涵盖的范围。

Claims (5)

1.一种界面控制方法,其特征在于,包括:
显示用户界面;
播放所述用户界面对应的背景音乐,并预置所述背景音乐的幅度信息不满足所述预置的动画播放条件;
获取输入的声音信号,并对所述声音信号进行采样处理得到时域离散序列;将所述时域离散序列进行FFT运算后得到所述声音信号的频域离散序列;根据所述频域离散序列得到所述声音信号的幅度信息;过滤掉所述频域离散序列中人声频率范围之外的所述声音信号的幅度信息;
当所述频域离散序列中频域点对应的幅度超过预置的幅度阈值且所述频域点的数量超过预定数量时,确认为所述幅度信息满足预置的动画播放条件,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
2.如权利要求1所述的控制方法,其特征在于,所述用户界面中包括用于提示用户进行操作的提示信息。
3.一种界面控制装置,其特征在于,包括:
界面显示模块,用于显示用户界面;
音乐播放模块,用于播放所述用户界面对应的背景音乐,并预置所述背景音乐的幅度信息不满足所述预置的动画播放条件;
所述幅度计算模块包括:
时域序列计算单元,用于对输入的声音信号进行采样处理得到时域离散序列;
频域序列计算单元,用于将所述时域离散序列进行FFT运算后得到所述声音信号的频域离散序列;
幅度信息计算单元,用于根据所述频域离散序列得到所述声音信号的幅度信息;
过滤模块,用于过滤掉所述频域离散序列中人声频率范围之外的所述声音信号的幅度信息;
动画播放模块,用于当所述频域离散序列中频域点对应的幅度超过预置的幅度阈值且该频域点的数量超过预定数量时,确认为所述幅度信息满足预置的动画播放条件,在所述用户界面上播放与所述声音信号的幅度信息对应的动画。
4.如权利要求3所述的装置,其特征在于,所述显示模块用于显示用于提示用户进行操作的提示信息。
5.一种终端设备,其特征在于,包括如权利要求3或4的装置。
CN201310216271.6A 2013-06-03 2013-06-03 一种界面控制方法、装置和终端设备 Active CN104216641B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310216271.6A CN104216641B (zh) 2013-06-03 2013-06-03 一种界面控制方法、装置和终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310216271.6A CN104216641B (zh) 2013-06-03 2013-06-03 一种界面控制方法、装置和终端设备

Publications (2)

Publication Number Publication Date
CN104216641A CN104216641A (zh) 2014-12-17
CN104216641B true CN104216641B (zh) 2019-08-23

Family

ID=52098195

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310216271.6A Active CN104216641B (zh) 2013-06-03 2013-06-03 一种界面控制方法、装置和终端设备

Country Status (1)

Country Link
CN (1) CN104216641B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105930047B (zh) * 2016-04-01 2020-05-19 腾讯科技(深圳)有限公司 飞行器的控制方法和装置
CN105975149A (zh) * 2016-04-28 2016-09-28 深圳市金立通信设备有限公司 一种图标的显示方法及终端
CN106649586A (zh) * 2016-11-18 2017-05-10 腾讯音乐娱乐(深圳)有限公司 一种音频文件的播放方法及装置
CN113920226A (zh) * 2021-09-30 2022-01-11 北京有竹居网络技术有限公司 用户交互方法、装置、存储介质及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1419683A (zh) * 2000-05-24 2003-05-21 虚拟视频英国有限公司 具有同步音频输出的动画方法和设备
CN101364309A (zh) * 2008-10-09 2009-02-11 中国科学院计算技术研究所 一种源虚拟角色上的口形动画生成方法
CN101546244A (zh) * 2008-03-27 2009-09-30 明基电通(上海)有限公司 手持电子装置及其操作方法
CN102270352A (zh) * 2010-06-02 2011-12-07 腾讯科技(深圳)有限公司 动画播放的方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1419683A (zh) * 2000-05-24 2003-05-21 虚拟视频英国有限公司 具有同步音频输出的动画方法和设备
CN101546244A (zh) * 2008-03-27 2009-09-30 明基电通(上海)有限公司 手持电子装置及其操作方法
CN101364309A (zh) * 2008-10-09 2009-02-11 中国科学院计算技术研究所 一种源虚拟角色上的口形动画生成方法
CN102270352A (zh) * 2010-06-02 2011-12-07 腾讯科技(深圳)有限公司 动画播放的方法和装置

Also Published As

Publication number Publication date
CN104216641A (zh) 2014-12-17

Similar Documents

Publication Publication Date Title
CN104216641B (zh) 一种界面控制方法、装置和终端设备
CN101795323B (zh) 一种电子闹铃运行方法、电子闹铃及一种移动通信终端
CN102568479B (zh) 一种移动手持设备的语音解锁方法及系统
CN109817220A (zh) 语音识别方法、装置及系统
CN104158970A (zh) 一种环境声音提醒方法和移动终端
CN110265011A (zh) 一种电子设备的交互方法及其电子设备
US9235985B2 (en) Electronic device and method for triggering function of electronic device
CN103631613A (zh) 一种触发终端解锁及程序运行的方法
CN110097868A (zh) 播放音乐的方法、装置和系统
CN105376408B (zh) 一种终端睡眠模式的设定方法及系统
CN104092809A (zh) 通话录音方法、通话录音播放方法及其相应装置
CN104599667B (zh) 信息处理方法及电子设备
CN202587121U (zh) 基于语音短命令和声纹技术解除锁屏状态的手机
CN111063375A (zh) 一种音乐播放控制系统、方法、设备和介质
CN107274919A (zh) 使用高保真混放器的高保真双音频播放装置及其播放方法
CN105843584A (zh) 一种调整录音音量的方法及装置
CN103247312A (zh) 一种均匀播放歌曲的方法
CN204765586U (zh) 一种腕式脉搏记录和分析装置
CN103577060B (zh) 一种数据处理方法及电子设备
CN104835512A (zh) 基于声音辨识以控制音乐播放的方法、系统及其装置
CN104007951B (zh) 一种信息处理方法及电子设备
CN105852810A (zh) 一种睡眠控制方法
CN105426085B (zh) 一种音乐文件截取方法及用户终端
CN202524545U (zh) 语音识别控制音箱
CN111614833A (zh) 界面控制方法及电子装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20170116

Address after: 101000 Haidian District, Zhichun Road, No. 4 West of layer 49, 406

Applicant after: Beijing Penguin fairy Technology Co., Ltd.

Address before: Shenzhen Futian District City, Guangdong province 518057 Zhenxing Road, SEG Science Park 2 East Room 403

Applicant before: Tencent Technology (Shenzhen) Co., Ltd.

GR01 Patent grant
GR01 Patent grant