CN107016949A - 信息展示方法、装置及其设备 - Google Patents
信息展示方法、装置及其设备 Download PDFInfo
- Publication number
- CN107016949A CN107016949A CN201710349666.1A CN201710349666A CN107016949A CN 107016949 A CN107016949 A CN 107016949A CN 201710349666 A CN201710349666 A CN 201710349666A CN 107016949 A CN107016949 A CN 107016949A
- Authority
- CN
- China
- Prior art keywords
- information
- voice
- presented
- audio component
- facial expression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Abstract
本发明公开了一种信息展示方法、装置及其设备,其中,方法包括:获取待展示信息;识别并显示待展示信息对应的面部表情;对待展示信息进行音频解析,得到对应的语音;在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。由此,通过面部表情进行信息的展示,实现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
Description
技术领域
本发明涉及信息处理技术领域,尤其涉及一种信息展示方法、装置及其设备。
背景技术
随着互联网技术的进步,智能手机、音响等信息提供终端设备的形式愈发多样化,然而,上述终端设备的信息展示方式不够人性化,形式较为单一,比如,录音机等语音播放设备中,使用处理器读取存储在存储单元内的录制好的人声录音文件,然后将录音文件使用DA模块将录音数字文件转换为模拟人声信号,然后输入到运算放大电路将人声信号增益放大后,最后输入到扬声器中播放出来,实现用户对设备控制的反馈或播报相关的提示信息,又比如,在天气预报播报设备中,获取到远程服务端的天气数据后,传输至本地语音播报模块播报天气信息,为用户提供交互及信息便利。因而,如果能够扩展信息的展示方式,将会增加信息展示的趣味性。
发明内容
本发明的目的旨在至少在一定程度上解决上述的技术问题之一。
为此,本发明的第一个目的在于提出一种信息展示方法,该方法通过面部表情进行信息的展示,实现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
本发明的第二个目的在于提出一种信息展示装置。
本发明的第三个目的在于提出一种信息展示设备。
本发明的第四个目的在于提出一种存储介质。
为了实现上述目的,本发明第一方面实施例提出的一种信息展示方法,包括以下步骤:获取待展示信息;识别并显示所述待展示信息对应的面部表情;对所述待展示信息进行音频解析,得到对应的语音;在对所述语音进行播放时,根据所述语音的变化,控制所述面部的嘴部运动。
本发明实施例的信息展示方法,获取待展示信息,识别并显示待展示信息对应的面部表情,对待展示信息进行音频解析,得到对应的语音,在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。由此,将待展示信息以面部表情的方式进行展现,营造出一种设备在表情变化,嘴巴在说话的交互视觉效果,真正有效的实现了设备交互的立体化效果,实现现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
为了实现上述目的,本发明第二方面实施例提出了一种信息展示装置,包括:第一获取模块,用于获取待展示信息;显示模块,用于识别并显示所述待展示信息对应的面部表情;第二获取模块,用于对所述待展示信息进行音频解析,得到对应的语音;控制模块,用于在对所述语音进行播放时,根据所述语音的变化,控制所述面部的嘴部运动。
本发明实施例的信息展示装置,获取待展示信息,识别并显示待展示信息对应的面部表情,对待展示信息进行音频解析,得到对应的语音,在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。由此,将待展示信息以面部表情的方式进行展现,营造出一种设备在表情变化,嘴巴在说话的交互视觉效果,真正有效的实现了设备交互的立体化效果,实现现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
为了实现上述目的,本发明第三方面实施例提出了一种信息展示设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述计算机程序时实现如本发明第一方面实施例所述的信息展示方法。
为了实现上述目的,本发明第四方面实施例提出了一种存储介质,用于存储应用程序,所述应用程序用于执行本发明第一方面实施例所述的信息展示方法。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是根据本发明一个实施例的信息展示方法的流程图;
图2是根据本发明一个实施例的面部表情表现示意图;
图3是根据本发明另一个实施例的信息展示方法的流程图;
图4是根据本发明一个实施例的灯光矩阵中通过灯的亮灭模拟嘴部运动的示意图;
图5是根据本发明一个实施例的根据天气信息变化联动的灯光表情系统的结构示意图;
图6是根据本发明另一个实施例的根据天气信息变化联动的灯光表情系统的结构示意图;
图7是根据本发明一个实施例的语音播报与灯光联动显示的语音播报系统的结构示意图;
图8是根据本发明一个实施例的语音播报与灯光联动显示的语音播报系统的电路结构示意图;
图9是根据本发明一个实施例的信息显示装置的结构示意图;
图10是根据本发明另一个实施例的信息展示装置的结构示意图;以及
图11是根据本发明又一个实施例的信息展示装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的信息展示方法、装置及设备。
图1是根据本发明一个实施例的信息展示方法的流程图。
如图1所示,该信息展示方法包括:
S101,获取待展示信息。
其中,待展示信息的具体包含内容与应用场景有关,包括天气信息、控制信息、数据信息等。
需要说明的是,在不同的应用场景下,获取待展示信息的方法与待展示信息的具体内容有关,示例说明如下:
第一种示例,待展示信息是控制信息。
在本示例中,如果待展示信息是控制信息,则从输入设备获取待展示信息,其中,输入设备包括遥控器、控制面板和/或移动终端。
举例而言,获取的控制信息是遥控器中的音量控制信息、节目频道更换信息、控制面板中的语音控制指令信息等。
第二种示例,待展示信息包括天气信息。
在本示例中,如果待展示信息是天气信息,则可以向天气预报平台请求天气信息,或者,可以接收天气平台发送的天气信息,当然,作为一种可能的实现方式,也可以由用户手动输入天气信息等。
S102,识别并显示待展示信息对应的面部表情。
其中,面部表情包括高兴、难过、生气、冷漠等,在实际的执行过程种,面部表情可以表情包的形式表现,以人物表情的形式展现、以表情符号的形式展现等,以“高兴”的面部为例,表现形式可以为图2左侧示出的表情包、图2中示出的人物表情,图2右侧示出的表情符号等,其中,面部表情可以是静态的,也可以是动态的。
应当理解的是,在本实施例中,将待展示信息以面部表情的方式进行展示,由此,将“刻板”的展示信息以一种具象化的形式进行表示,增加了信息展示的趣味性。
具体而言,在本实施例中,预先建立待展示信息与面部表情的对应关系,从而,在获取待展示信息后,查询上述对应关系,以识别并显示待展示信息对应的面部表情。
需要说明的是,根据应用场景的不同显示面部表情的方式不同,比如,可以依据信息展示方法实施设备上的装置的组成进行显示,如果该实施设备上具有灯光矩阵,则可以以灯光矩阵的方式展现面部表情,如果该实施设备上具有显示屏幕,则可以在显示屏幕上展现面部表情等,当然,在一些应用场景下,也可以独立于实施设备设置显示设备等,在此不作限制。
举例而言,在本实施例中,待展示信息是天气信息,如下表1所示,预先建立天气信息类别与面部表情的对应关系,进而,识别天气信息所描述的天气类别,根据天气类别,查询对应的面部表情,进而,采用灯光矩阵,展示对应的面部表情。
表1
当然,除了上述采用建立待展示信息与面部表情的对应关系的对应规则外,还可以采用其他对应规则,以获知与待展示信息对应的面部表情。作为一种可能的实现方式,预先建立面部表情与量化值的对应关系,从而对待展示信息进行量化处理以获取该待展示信息对应的量化值,进而根据该量化值查询上述对应关系,获取对应的面部表情并展示。
S103,对待展示信息进行音频解析,得到对应的语音。
S104,在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。
可以理解,为了使得面部表情更加拟人化,使用户感觉更加亲切,还可对面部表情的嘴部运动进行拟人化。
具体地,对待展示信息进行音频解析,得到对应的语音,从而,在对的语音进行播放时,根据语音的变化,控制面部的嘴部进行运动,比如,控制灯光矩阵显示出嘴部的形状以及闭合频率等。
需要强调的是,由于本发明实施例中的待展示信息可以是音频形式的,也可以是文本形式等,如果待展示信息是文本形式,需要进行语音转换操作,将其转换为音频进行解析,比如,可以使用文本识别技术,对该带展示形式进行播报以形成对应的音频等。当然,在本发明的实施例中,为了进一步实现面部表情的拟人化,还可以对面部表情的其他器官,比如眼睛等进行拟人化,或者,也可以通过在面部添加辅助动画,比如添加“怒火”符号等。
综上所述,本发明实施例的信息展示方法,获取待展示信息,识别并显示待展示信息对应的面部表情,对待展示信息进行音频解析,得到对应的语音,在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。由此,将待展示信息以面部表情的方式进行展现,营造出一种设备在表情变化,嘴巴在说话的交互视觉效果,真正有效的实现了设备交互的立体化效果,实现现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
基于以上实施例,为了更加清楚的说明,如何在对语音进行播放时,根据语音的变化,控制面部的嘴部运动,下面以根据语音的频率以及幅度等为例进行举例。
图3是根据本发明另一个实施例的信息展示方法的流程图,如图3所示,上述步骤S104包括:
S201,根据频率,对语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量。
具体地,预先建立目标频段,从而,在获取语音后,根据频率,对语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量。
举例而言,当待展示信息是人讲话的信息时,由于根据国际标准中,人声频段分布频率为:
男:低音82~392Hz,基准音区64~523Hz
男中音123~493Hz,男高音164~698Hz
女:低音82~392Hz,基准音区160~1200Hz
女低音123~493Hz,女高音220~1.1KHz
并且,由于人讲话的频率主要集中在1~3KHZ,低频段极少,高频也几乎没有,因而建立目标频段为位于男、女中音区(123~493Hz)的频段,从而,对语音进行过滤,筛选出位于男、女中音区(123~493Hz)的某一个音频分量。
S202,根据目标音频分量的幅度变化,控制用于展示嘴部的灯光开闭状态。
具体地,对目标频段内人的目标音频分量的幅度进行识别,根据目标音频分量的幅度变化,控制用于展示嘴部的灯光开闭状态,以模拟嘴部的开合。即如图4所示,在灯光矩阵中,控制不同阵点中的灯的亮灭,可以模拟出嘴部闭合与张开,其中,为了表现的清楚,在图4中,黑色的圆点表示灯亮,白色的圆点表示灯灭。
在本发明的一个实施例中,为了提高拟人化的准确性,避免音频分量过小而导致不识别,或者控制的嘴部变化较不明显,在根据频率,对所述语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量之后,还可对电压信号形式的目标音频分量,进行信号放大,其中,信号放大后的目标音频分量,电压幅度处于目标电压范围,从而根据放大后的目标音频分量的幅度变化,控制用于展示嘴部的灯光开闭状态。
基于以上描述,为了使得本领域的技术人员更加清楚的了解本发明,下面结合本发明实施例的信息展示方法应用在具体的场景中进行说明。
第一种场景,语音播报天气信息。
其中,在本示例中,待展示信息是天气信息。
可以理解,目前有相关技术中,可以实现网络获取天气信息并用人声语音播报出来,通过使用网络通信模块,获取到远程服务端的天气数据后,传输至本地语音播报模块播报天气信息,为用户提供交互及信息便利。然而,该技术仅实现了天气信息的语音的播报反馈,表现手段较单一,交互不够人性化,而且对于天气的变化信息并不进一步分析,没有做更智能的交互应用。
而将本发明实施例的信息展示方法应用在语音播报天气信息中,可组建根据天气信息变化联动的灯光表情系统,不仅实现了天气信息的语音播报功能,更可以根据天气数据的变化,实现与灯光联动,用灯光矩阵展现出对应的人脸表情变化和说话的效果。
基于该系统,用户在获取天气信息的同时,不仅可以同步听到设备的语音播报反馈,而且可以看到与天气数据对应的表情和嘴部变化,营造出一种设备在表情变化,嘴巴在说话的交互视觉效果,让设备人脸化、娱乐化起来,真正有效的实现了设备交互的立体化效果,让用户倍感温馨。
具体而言,本系统包含了如图5所示的两个联动子系统:语音播报子系统和音频解析与表情灯光驱动子系统。其中,参照图6,语音播报子系统包括网络通信模块、语音存储模块、数据处理模块、音频放大模块和扬声器,音频解析与灯光驱动子系统包括音频解析与嘴部灯光展现子系统和表情灯光展现子系统,继续参见图6,音频解析与嘴部灯光展现子系统包括频率过滤模块、电压调节放大模块、LED驱动显示模块和LED灯带,表情灯光展现子系统包括LED显示驱动模块和LED矩阵。
具体而言,应用了本发明实施例的信息显示方法的语音播子系统的工作机制如下:
网络通信模块可通过互联网络通信,获取网络服务器上的天气信息,接收天气信息后,传输至数据处理模块进行天气解析及处理。
进而,数据处理模块接收天气信息后,对该天气信息进行解析,数据处理模块将接收的一周内天气数据进行分类,按预先设定的规则进行区分晴好天气、正常天气、雨雪天气等,然后确定对应天气的对应规则,最终将对应规则输出到表情灯光展现子系统的LED显示驱动模块中。
从而,根据与面部表情的对应规则,不仅可以根据当天的天气不同,可以实现各种面部表情图像的同步显示与天气变化时做相应的表情变动。而且,表情不是死的,可以根据预制的规则进行眨眼等拟人化变化,最终形成非常生动的交互表情,让机器活化,让用户倍感亲切。其中,上述对应规则可继续参见上表1。
其中,在本示例中,数据处理模块也可将根据接收的天气信息,在数据存储模块中查找并调用对应的天气播报录音文件进行D/A转换,将数字音频信号转换为模拟音频信号一路输出到音频放大模块中,另一路同步输出到音频同步解析与嘴部灯光展现子系统的频率过滤模块中,进而,音频放大模块接收到模拟人声音频信号后,对该信号进行增益放大,然后将放大后的模拟音频信号输入扬声器,最后将人声播报出来。
进一步地,应用了本发明实施例的信息显示方法的音频解析与灯光驱动子系统的工作机制如下:
在频率过滤模块在接收到语音播报子系统传过来的模拟人声信号后,开始对人声频段进行过滤。模块的工作原理如下所述:
在国际标准中,人声频段分布如下表所示:
男:低音82~392Hz,基准音区64~523Hz
男中音123~493Hz,男高音164~698Hz
女:低音82~392Hz,基准音区160~1200Hz
女低音123~493Hz,女高音220~1.1KHz
由于人讲话的频率主要集中在1~3KHZ,低频段极少,高频也几乎没有。根据实际人声频率发分段,频率过滤模块将筛选男、女中音区(123~493Hz)的某一个频段进行幅度识别,在滤除掉其他频段语音后,得到需要频段的人声信号,然后将该频段的人声信号输入到电压调节放大模块中。
进而,电压调节放大模块将接收的特定频段人声信号进行放大,将幅度高低变化的模拟人声信号放大为在0~N伏特之间变化的电压信号,然后将该电压信号输入到LED驱动显示模块中。
LED驱动显示模块接收电压调节放大模块传输过来的变化的0~N伏特电压信号后,将变化的电压信号转换为1~N路LED灯的开关信号,最终驱动一个或多个LED灯开启或关闭,实现灯光与人声幅度变化的同步变化,让用户既能听到自己的控制反馈,又能看到表情的嘴部变化,LED灯带让设备产生一种说话的效果。
在表情灯光展现子系统中,LED显示驱动模块,将接收来自数据处理模块的对应规则,将对应规则转换为相应的LED矩阵灯显示规则,最终驱动相应的LED矩阵进行灯光变化显示,实现拟人化人脸显示。
第二种场景,语音播放场景。
在本示例中,待展示信息为语音播报信息。
可以理解,相关技术中,可以实现人声语音播报,使用处理器读取存储在存储单元内的录制好的人声录音文件,然后将录音文件使用DA模块将录音数字文件转换为模拟人声信号,然后输入到运算放大电路将人声信号增益放大后,最后输入到扬声器中播放出来,实现用户对设备控制的反馈或播报相关的提示信息。然而,该技术仅实现了语音的播报反馈,对于同一个反馈信息的传递,表现手段较单一,交互不够人性化。
而将本发明实施例的信息展示方法应用在语音播报中,可组建为语音播报与灯光联动显示的语音播报系统,基于该系统,用户在任何时刻在控制使用了该系统的设备时,不仅可以同步听到设备的语音播报反馈,而且可以看到与语音信号幅度同步变化的灯光变化指示,营造出一种设备真正在说话的视觉效果,让设备活化起来,真正有效的实现了设备交互的立体化效果,让用户倍感温馨。
如图7所示,本实施例中的语音播报与灯光联动显示的语音播报系统包括语音播报子系统和音频解析与灯光驱动子系统,其中,语音播报子系统包括通信模块语音存储模块、数据处理模块、音频放大模块和扬声器,音频解析与灯光驱动子系统包括频率过滤模块电压调节放大模块和LDE驱动显示模块。
进一步地,应用了本发明实施例的语音播报子系统工作机制如下:
通信模块接收用户的控制信号,该控制信号可能来自遥控器或设备的控制面板也可以来自移动终端软件,当通信模块接收到用户的控制信号后,将该控制信号发送给数据处理模块。数据处理模块接收控制信号后,对控制信号进行解析,确定用户所做的操作类型,然后根据操作类型在数据存储模块中查找并调用对应的控制反馈录音文件进行D/A转换,将数字音频信号转换为模拟音频信号一路输出到音频放大模块中,另一路同步输出到音频解析与灯光驱动子系统的频率过滤模块中。
音频放大模块接收到模拟人声音频信号后,对该信号进行增益放大,然后将放大后的模拟音频信号输入扬声器,最后将人声播报出来。
进一步地,应用了本发明实施例的信息显示方法的音频解析与灯光驱动子系统的工作机制如下:
在频率过滤模块在接收到语音播报子系统传过来的模拟人声信号后,开始对人声频段进行过滤。模块的工作原理如下所述:
在国际标准中,人声频段分布如下表所示:
男:低音82~392Hz,基准音区64~523Hz
男中音123~493Hz,男高音164~698Hz
女:低音82~392Hz,基准音区160~1200Hz
女低音123~493Hz,女高音220~1.1KHz
由于人讲话的频率主要集中在1~3KHZ,低频段极少,高频也几乎没有。根据实际人声频率发分段,频率过滤模块将筛选男、女中音区(123~493Hz)的某一个频段(目标频段)进行幅度识别,在滤除掉其他频段语音后,得到需要频段的人声信号,然后将该频段的人声信号输入到电压调节放大模块中。
进而,如图8所示,电压调节放大模块将接收的特定频段人声信号进行放大,将幅度高低变化的模拟人声信号放大为在0~N伏特之间变化的电压信号,然后将该电压信号输入到位于LED驱动模块中的LED驱动显示模块中。
LED驱动显示模块接收电压调节放大模块传输过来的变化的0~N伏特电压信号后,将变化的电压信号转换为1~N路LED灯的开关信号,最终驱动一个或多个LED灯开启或关闭,通过LED灯带实现灯光与人声幅度变化的同步变化,让用户既能听到自己的控制反馈,又能看到自己的控制反馈,展现多维度的人性化的交互效果。
综上所述,本发明实施例的信息显示方法,通过待展示信息对应语音的幅度进行信息显示,进一步实现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
为了实现上述实施例,本发明还提出了一种信息展示装置,图9是根据本发明一个实施例的信息显示装置的结构示意图,如图9所示,该信息显示装置包括:第一获取模块110、显示模块120、第二获取模块130和控制模块140。
其中,第一获取模块110,用于获取待展示信息。
在本发明的一个实施例中,待展示信息包括控制信息,第一获取模块110用于从输入设备获取待展示信息;其中,输入设备包括遥控器、控制面板和/或移动终端。
显示模块120,用于识别并显示待展示信息对应的面部表情。
图10是根据本发明另一个实施例的信息展示装置的结构示意图,如图10所示,在如图9所示的基础上,显示模块120包括识别单元121、查询单元122和展示单元123。
其中,识别单元121,用于识别天气信息所描述的天气类别。
查询单元122,用于根据天气类别,查询对应的面部表情。
展示单元123,用于采用灯光矩阵,展示面部表情。
第二获取模块130,用于对待展示信息进行音频解析,得到对应的语音。
控制模块140,用于在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。
需要说明的是,前述对信息展示方法的解释说明,也适用于本发明实施例的信息展示装置,其实现原理类似,在此不再赘述。
综上所述,本发明实施例的信息展示装置,获取待展示信息,识别并显示待展示信息对应的面部表情,对待展示信息进行音频解析,得到对应的语音,在对语音进行播放时,根据语音的变化,控制面部的嘴部运动。由此,将待展示信息以面部表情的方式进行展现,营造出一种设备在表情变化,嘴巴在说话的交互视觉效果,真正有效的实现了设备交互的立体化效果,实现现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
图11是根据本发明又一个实施例的信息展示装置的结构示意图,如图11所示,在如图9所示的基础上,控制模块140包括过滤单元141、控制单元142和放大单元143。
其中,过滤单元141,用于根据频率,对语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量;
控制单元142,用于根据目标音频分量的幅度变化,控制用于展示嘴部的灯光开闭状态。
放大单元143,用于对电压信号形式的目标音频分量,进行信号放大;其中,信号放大后的目标音频分量,电压幅度处于目标电压范围。
需要说明的是,前述对信息展示方法的解释说明,也适用于本发明实施例的信息展示装置,其实现原理类似,在此不再赘述。
综上所述,本发明实施例的信息展示装置,通过待展示信息对应语音的幅度进行信息显示,进一步实现了展示信息与用户的互动性,扩展了信息展示的方式,提高了信息展示方法的趣味性。
为了实现上述实施例,本发明还提出了一种信息展示设备,该信息展示设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,处理器执行计算机程序时实现本发明实施例的信息展示方法。
为了实现上述实施例,本发明还提出了一种存储介质,该存储介质用于存储应用程序,应用程序用于执行本发明实施例的信息展示方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (12)
1.一种信息展示方法,其特征在于,包括以下步骤:
获取待展示信息;
识别并显示所述待展示信息对应的面部表情;
对所述待展示信息进行音频解析,得到对应的语音;
在对所述语音进行播放时,根据所述语音的变化,控制所述面部的嘴部运动。
2.根据权利要求1所述的信息展示方法,其特征在于,所述待展示信息包括天气信息;所述识别并显示所述待展示信息对应的面部表情,包括:
识别所述天气信息所描述的天气类别;
根据所述天气类别,查询对应的面部表情;
采用灯光矩阵,展示所述面部表情。
3.根据权利要求1所述的信息展示方法,其特征在于,所述待展示信息包括控制信息,所述获取待展示信息,包括:
从输入设备获取所述待展示信息;其中,所述输入设备包括遥控器、控制面板和/或移动终端。
4.根据权利要求1-3任一项所述的信息展示方法,其特征在于,所述根据所述语音的变化,控制所述面部的嘴部运动,包括:
根据频率,对所述语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量;
根据所述目标音频分量的幅度变化,控制用于展示所述嘴部的灯光开闭状态。
5.根据权利要求4所述的信息展示方法,其特征在于,所述根据频率,对所述语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量之后,还包括:
对电压信号形式的所述目标音频分量,进行信号放大;其中,信号放大后的目标音频分量,电压幅度处于目标电压范围。
6.一种信息展示装置,其特征在于,包括:
第一获取模块,用于获取待展示信息;
显示模块,用于识别并显示所述待展示信息对应的面部表情;
第二获取模块,用于对所述待展示信息进行音频解析,得到对应的语音;
控制模块,用于在对所述语音进行播放时,根据所述语音的变化,控制所述面部的嘴部运动。
7.如权利要求6所述的装置,其特征在于,所述待展示信息包括天气信息,所述显示模块包括:
识别单元,用于识别所述天气信息所描述的天气类别;
查询单元,用于根据所述天气类别,查询对应的面部表情;
展示单元,用于采用灯光矩阵,展示所述面部表情。
8.如权利要求6所述的装置,其特征在于,所述待展示信息包括控制信息,所述第一获取模块用于:
从输入设备获取所述待展示信息;其中,所述输入设备包括遥控器、控制面板和/或移动终端。
9.如权利要求6-8任一所述的装置,其特征在于,所述控制模块包括:
过滤单元,用于根据频率,对所述语音的各音频分量进行过滤,以保留处于目标频段的目标音频分量;
控制单元,用于根据所述目标音频分量的幅度变化,控制用于展示所述嘴部的灯光开闭状态。
10.如权利要求9所述的装置,其特征在于,所述控制模块还包括:
放大单元,用于对电压信号形式的所述目标音频分量,进行信号放大;其中,信号放大后的目标音频分量,电压幅度处于目标电压范围。
11.一种信息展示设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述计算机程序时实现如权利要求1-5任一项所述的信息展示方法。
12.一种存储介质,其特征在于,用于存储应用程序,所述应用程序用于执行如权利要求1-5任一项所述的信息展示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710349666.1A CN107016949A (zh) | 2017-05-17 | 2017-05-17 | 信息展示方法、装置及其设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710349666.1A CN107016949A (zh) | 2017-05-17 | 2017-05-17 | 信息展示方法、装置及其设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107016949A true CN107016949A (zh) | 2017-08-04 |
Family
ID=59449180
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710349666.1A Pending CN107016949A (zh) | 2017-05-17 | 2017-05-17 | 信息展示方法、装置及其设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107016949A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109684544A (zh) * | 2018-12-14 | 2019-04-26 | 维沃移动通信有限公司 | 一种穿搭推荐方法及终端设备 |
CN111443801A (zh) * | 2020-03-25 | 2020-07-24 | 北京百度网讯科技有限公司 | 人机交互方法、装置、设备及存储介质 |
Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1252320A (zh) * | 1998-10-08 | 2000-05-10 | 索尼计算机娱乐公司 | 便携式玩具、便携式信息终端、娱乐系统及记录介质 |
CN101692681A (zh) * | 2009-09-17 | 2010-04-07 | 杭州聚贝软件科技有限公司 | 一种在话机终端上实现虚拟形象互动界面的方法和系统 |
JP2010519791A (ja) * | 2007-02-05 | 2010-06-03 | アミゴワールド エルティーディー | 通信ネットワーク、およびテキストから音声へ・テキストから顔の動画への変換装置 |
CN101888410A (zh) * | 2010-06-23 | 2010-11-17 | 宇龙计算机通信科技(深圳)有限公司 | 一种天气信息处理方法、服务器及终端 |
CN201638526U (zh) * | 2010-03-05 | 2010-11-17 | 上海未来伙伴机器人有限公司 | 用于模拟人类表情的装置及包含该装置的机器人 |
CN103067863A (zh) * | 2012-12-24 | 2013-04-24 | 朱佩芬 | 车载多媒体播放方法 |
CN103376988A (zh) * | 2012-04-16 | 2013-10-30 | 上海移云信息科技有限公司 | 一种移动终端实景天气的显示和人机交互方式 |
CN104468959A (zh) * | 2013-09-25 | 2015-03-25 | 中兴通讯股份有限公司 | 移动终端通话过程中显示图像的方法、装置及移动终端 |
CN104786911A (zh) * | 2015-04-15 | 2015-07-22 | 上海电机学院 | 一种基于语音控制的车载表情显示系统及方法 |
CN104850335A (zh) * | 2015-05-28 | 2015-08-19 | 瞬联软件科技(北京)有限公司 | 基于语音输入的表情曲线生成方法 |
CN105404878A (zh) * | 2015-12-11 | 2016-03-16 | 广东欧珀移动通信有限公司 | 一种照片分类方法和装置 |
CN105551499A (zh) * | 2015-12-14 | 2016-05-04 | 渤海大学 | 面向语音与面部表情信号的情感可视化方法 |
CN105690407A (zh) * | 2016-04-27 | 2016-06-22 | 深圳前海勇艺达机器人有限公司 | 一种具备表情显示功能的智能机器人 |
CN105818165A (zh) * | 2015-01-05 | 2016-08-03 | 沈阳新松机器人自动化股份有限公司 | 一种机器人面部表情模块化系统 |
CN106003077A (zh) * | 2016-06-22 | 2016-10-12 | 昆山邦泰汽车零部件制造有限公司 | 一种机器人语音对话方法 |
CN106115120A (zh) * | 2016-07-28 | 2016-11-16 | 郭胜群 | 一种智能垃圾筒 |
CN205721625U (zh) * | 2016-03-08 | 2016-11-23 | 龙卷风机电科技(昆山)有限公司 | 一种表情机器人交互系统 |
CN106302989A (zh) * | 2016-07-28 | 2017-01-04 | 维沃移动通信有限公司 | 天气信息的显示方法及其移动终端 |
CN106485774A (zh) * | 2016-12-30 | 2017-03-08 | 当家移动绿色互联网技术集团有限公司 | 基于语音实时驱动人物模型的表情和姿态的方法 |
CN106625698A (zh) * | 2016-11-15 | 2017-05-10 | 墨宝股份有限公司 | 一种具备表情显示功能的智能机器人 |
-
2017
- 2017-05-17 CN CN201710349666.1A patent/CN107016949A/zh active Pending
Patent Citations (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100782284B1 (ko) * | 1998-10-08 | 2007-12-07 | 소니 컴퓨터 엔터테인먼트 인코포레이티드 | 휴대용 장난감, 휴대용 정보 단말기, 오락 시스템 및 기록 매체 |
CN1252320A (zh) * | 1998-10-08 | 2000-05-10 | 索尼计算机娱乐公司 | 便携式玩具、便携式信息终端、娱乐系统及记录介质 |
JP2010519791A (ja) * | 2007-02-05 | 2010-06-03 | アミゴワールド エルティーディー | 通信ネットワーク、およびテキストから音声へ・テキストから顔の動画への変換装置 |
CN101692681A (zh) * | 2009-09-17 | 2010-04-07 | 杭州聚贝软件科技有限公司 | 一种在话机终端上实现虚拟形象互动界面的方法和系统 |
CN201638526U (zh) * | 2010-03-05 | 2010-11-17 | 上海未来伙伴机器人有限公司 | 用于模拟人类表情的装置及包含该装置的机器人 |
CN101888410A (zh) * | 2010-06-23 | 2010-11-17 | 宇龙计算机通信科技(深圳)有限公司 | 一种天气信息处理方法、服务器及终端 |
CN103376988A (zh) * | 2012-04-16 | 2013-10-30 | 上海移云信息科技有限公司 | 一种移动终端实景天气的显示和人机交互方式 |
CN103067863A (zh) * | 2012-12-24 | 2013-04-24 | 朱佩芬 | 车载多媒体播放方法 |
CN104468959A (zh) * | 2013-09-25 | 2015-03-25 | 中兴通讯股份有限公司 | 移动终端通话过程中显示图像的方法、装置及移动终端 |
CN105818165A (zh) * | 2015-01-05 | 2016-08-03 | 沈阳新松机器人自动化股份有限公司 | 一种机器人面部表情模块化系统 |
CN104786911A (zh) * | 2015-04-15 | 2015-07-22 | 上海电机学院 | 一种基于语音控制的车载表情显示系统及方法 |
CN104850335A (zh) * | 2015-05-28 | 2015-08-19 | 瞬联软件科技(北京)有限公司 | 基于语音输入的表情曲线生成方法 |
CN105404878A (zh) * | 2015-12-11 | 2016-03-16 | 广东欧珀移动通信有限公司 | 一种照片分类方法和装置 |
CN105551499A (zh) * | 2015-12-14 | 2016-05-04 | 渤海大学 | 面向语音与面部表情信号的情感可视化方法 |
CN205721625U (zh) * | 2016-03-08 | 2016-11-23 | 龙卷风机电科技(昆山)有限公司 | 一种表情机器人交互系统 |
CN105690407A (zh) * | 2016-04-27 | 2016-06-22 | 深圳前海勇艺达机器人有限公司 | 一种具备表情显示功能的智能机器人 |
CN106003077A (zh) * | 2016-06-22 | 2016-10-12 | 昆山邦泰汽车零部件制造有限公司 | 一种机器人语音对话方法 |
CN106115120A (zh) * | 2016-07-28 | 2016-11-16 | 郭胜群 | 一种智能垃圾筒 |
CN106302989A (zh) * | 2016-07-28 | 2017-01-04 | 维沃移动通信有限公司 | 天气信息的显示方法及其移动终端 |
CN106625698A (zh) * | 2016-11-15 | 2017-05-10 | 墨宝股份有限公司 | 一种具备表情显示功能的智能机器人 |
CN106485774A (zh) * | 2016-12-30 | 2017-03-08 | 当家移动绿色互联网技术集团有限公司 | 基于语音实时驱动人物模型的表情和姿态的方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109684544A (zh) * | 2018-12-14 | 2019-04-26 | 维沃移动通信有限公司 | 一种穿搭推荐方法及终端设备 |
CN111443801A (zh) * | 2020-03-25 | 2020-07-24 | 北京百度网讯科技有限公司 | 人机交互方法、装置、设备及存储介质 |
CN111443801B (zh) * | 2020-03-25 | 2023-10-13 | 北京百度网讯科技有限公司 | 人机交互方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107071542A (zh) | 视频片段播放方法及装置 | |
WO2021023667A1 (de) | System und verfahren zur unterstützung von selektivem hören | |
US7015934B2 (en) | Image displaying apparatus | |
CN107193841A (zh) | 媒体文件加速播放、传输及存储的方法和装置 | |
US10741089B2 (en) | Interactive immersion system for movies, television, animation, music videos, language training, entertainment, video games and social networking | |
CN111654715B (zh) | 直播的视频处理方法、装置、电子设备及存储介质 | |
CN102111601A (zh) | 内容可适性的多媒体处理系统与处理方法 | |
CN110085244A (zh) | 直播互动方法、装置、电子设备及可读存储介质 | |
KR20170090417A (ko) | 정보 처리 장치 및 정보 처리 방법, 그리고 프로그램 | |
CN109257659A (zh) | 字幕添加方法、装置、电子设备及计算机可读存储介质 | |
CN110362666A (zh) | 应用虚拟人物的交互处理方法、装置、存储介质和设备 | |
CN103430217A (zh) | 输入支持装置、输入支持方法及记录介质 | |
CN108012173A (zh) | 一种内容识别方法、装置、设备和计算机存储介质 | |
CN106571136A (zh) | 一种语音输出装置和方法 | |
CN108337543A (zh) | 一种视频播放方法、终端及计算机可读存储介质 | |
CN111294463A (zh) | 一种智能应答方法、系统及装置 | |
CN110198375A (zh) | 录音方法、终端及计算机可读存储介质 | |
CN107016949A (zh) | 信息展示方法、装置及其设备 | |
CN114157920A (zh) | 一种展示手语的播放方法、装置、智能电视及存储介质 | |
KR102011868B1 (ko) | 노래 대결의 서비스를 제공하기 위한 서버장치 | |
CN110337041A (zh) | 视频播放方法、装置、计算机设备及存储介质 | |
Solina et al. | Multimedia dictionary and synthesis of sign language | |
TW201102836A (en) | Content adaptive multimedia processing system and method for the same | |
CN108290289A (zh) | 用于使振动运动效果与虚拟现实会话同步的方法和系统 | |
CN114035686B (zh) | 融合触觉的多模态微动效广告情境构建方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170804 |
|
RJ01 | Rejection of invention patent application after publication |