CN102073780B - 信息仿真处理系统、装置及方法 - Google Patents

信息仿真处理系统、装置及方法 Download PDF

Info

Publication number
CN102073780B
CN102073780B CN200910221958A CN200910221958A CN102073780B CN 102073780 B CN102073780 B CN 102073780B CN 200910221958 A CN200910221958 A CN 200910221958A CN 200910221958 A CN200910221958 A CN 200910221958A CN 102073780 B CN102073780 B CN 102073780B
Authority
CN
China
Prior art keywords
information
emulator
emulation
module
information content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200910221958A
Other languages
English (en)
Other versions
CN102073780A (zh
Inventor
王文男
李镇樟
陈维德
蔡子宸
徐志浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute for Information Industry
Original Assignee
Institute for Information Industry
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute for Information Industry filed Critical Institute for Information Industry
Priority to CN200910221958A priority Critical patent/CN102073780B/zh
Publication of CN102073780A publication Critical patent/CN102073780A/zh
Application granted granted Critical
Publication of CN102073780B publication Critical patent/CN102073780B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供一种信息仿真处理系统、装置及方法。此系统包括经由一通讯网络进行通讯的网络平台端和至少一个用户端。网络平台端包括:信息获取模块,用以获取使用者信息;特征分析模块,用以对此使用者信息的内容进行特征分析,以标注对应此信息内容的仿真标签;仿真信息产生模块,用以为每一个仿真标签取得对应的仿真指令,并与信息内容结合以产生仿真信息。此外,用户端包括:用户装置,由通讯网络接收仿真信息,并输出仿真信息中所包含的信息内容及仿真指令至仿真表达装置;仿真表达装置,用以播放所接收的信息内容并执行对应的仿真指令。

Description

信息仿真处理系统、装置及方法
技术领域
本发明涉及一种信息仿真处理系统、装置及方法,且特别是涉及一种可依据信息内容进行特征分析,而标注此信息内容的仿真标签,后由一仿真表达装置进行仿真表达的系统、装置和方法。 
背景技术
现行的互动娱乐装置(例如电子公仔、电子宠物或机器人等低运算能力的装置)可与使用者进行互动,藉以达到娱乐效果。例如,电子鸡或电子狗等电子宠物可侦测使用者的声音或肢体动作,而对应变换表情或做出回应动作,因此可以即时反应使用者的行为,达到与使用者互动的效果。使用者还可利用定时喂食或陪伴游玩等附加功能,来培养或建立其与电子宠物的互动关系。 
然而,这些互动娱乐装置的动作或回应都必须预先定义,且在与使用者互动的过程中,也只能针对特定的指示(例如按下按键或发出声音)做出简单的动作,并无法依据使用者所表达信息(例如文字信息、语音或影像)的实际内容进行仿真回馈。部分的互动娱乐装置虽提供使用者可自行设定互动效果,但也仅止于表现在使用者端的硬件,并无法与其他使用者分享,因而失去了与他人互动的乐趣。 
发明内容
有鉴于此,本发明提供一种信息仿真处理系统,藉由设置网络平台以管理仿真指令,并可提供系统厂商或使用者一个更新或分享仿真指令的管道。 
本发明提供一种信息仿真处理装置,整合特征分析、仿真指令搜寻以及仿真回馈等功能于独立的装置中,使得装置可独立做出对应于信息内容的仿真回馈。 
本发明提供一种信息仿真处理方法,藉由分析所获取信息的内容,据以标注仿真标签并搜寻仿真指令,使得仿真表达装置能够做出可对应信息内容的仿真回馈动作。 
本发明提出一种信息仿真处理系统,其包括信息获取模块、特征分析模块、仿真信息产生模块、网络模块、驱动模块及仿真表达模块,而信息获取模块用于在一网络平台端获取使用者信息,特征分析模块用于对此使用者信息的内容进行特征分析,以标注对应此信息内容的仿真标签,仿真信息产生模块则用于在所述网络平台端为各仿真标签取得对应的仿真指令,并与信息内容结合以产生仿真信息,网络模块用于在一用户端经由一通讯网络接收该网络平台端的该仿真信息产生模块产生的仿真信息,驱动模块用于在所述用户端输出仿真信息中所包含的信息内容及仿真指令。仿真表达模块用于在一仿真表达装置接收信息内容及仿真指令,而据以播放信息内容并执行仿真指令。 
本发明提出一种信息仿真处理装置,其包括信息获取模块、特征分析模块、仿真信息产生模块及驱动模块,其中的信息获取模块用于获取使用者信息,特征分析模块用于对使用者信息的信息内容进行特征分析,以标注对应此信息内容的仿真标签。仿真信息产生模块则是用于为各仿真标签取得对应的仿真指令,并和信息内容结合以产生仿真信息。驱动模块用于依据仿真信息中所包含的信息内容及仿真指令,据以驱动一输出单元播放信息内容并执行仿真指令。 
本发明提出一种信息仿真处理方法,适用于网络平台端,此网络平台端经由通讯网络和至少一个用户端进行通讯,此方法获取使用者信息,而对此使用者信息的内容进行特征分析,以标注此信息内容的至少一个仿真标签。接着再为各仿真标签取得对应的仿真指令,并与信息内容结合以产生仿真信 息。最后则将此仿真信息传送至用户端的仿真表达装置,以令仿真表达装置执行以产生至少一个仿真回馈动作。 
基于上述,本发明的信息仿真处理系统、装置及方法藉由在网络平台或独立的仿真表达装置上记录客制化的仿真指令,并对所获取信息的内容进行特征分析以决定所要执行的仿真指令,而在播放信息内容的同时,也执行对应的仿真指令,而达到仿真回馈的功效。 
为让本发明的上述特征和优点能更明显易懂,下面特举实施例,并配合附图作详细说明如下。 
附图说明
图1是本发明第一实施例的信息仿真处理系统的方块图。 
图2是本发明第一实施例的信息仿真处理方法的流程图。 
图3是本发明第一实施例的特征分析模块的方块图。 
图4是本发明第一实施例的语音情绪辨识的范例。 
图5是本发明第一实施例的脸部表情辨识的范例。 
图6是本发明第一实施例的仿真信息的范例。 
图7(a)~7(e)是本发明第一实施例的仿真表达装置执行仿真指令的范例。 
图8是本发明第二实施例的信息仿真处理系统的方块图。 
图9是本发明第三实施例的信息仿真处理装置的方块图。 
图10是本发明第四实施例的信息仿真处理装置的方块图。 
主要元件符号说明: 
Figure DEST_PATH_GSB00000817787900021
Figure DEST_PATH_GSB00000817787900031
具体实施方式
本发明可应用于现行的社群、即时通讯、虚拟宠物、影音邮件等网络服务,建立一个网络平台即网络平台端,并针对所接收的文字、语音或影像等使用者信息进行信息的仿真处理以产生仿真信息,进而将该仿真信息传送至另一使用者端即用户端,使得在另一使用者端的仿真表达装置能依据该使用者信息的内容而进行仿真表达(例如依据信息所对应的情绪而有不同的表达方式),藉此达到仿真互动,增加互动娱乐的效果。以下即依据上述概念,提供多个实施例分别说明本发明的信息仿真处理方法的详细步骤以及信息仿真处理系统与装置的详细功能。 
第一实施例 
图1是本发明第一实施例的信息仿真处理系统的方块图,图2是本发明第一实施例的信息仿真处理方法的流程图。请同时参照图1及图2,信息仿真处理系统100主要包括一网络平台端110和至少一用户端112,经由一通讯网络进行通讯,其中,网络平台端110主要包括一信息获取模块102,获取一使用者信息;一特征分析模块104,对该使用者信息的一信息内容进行一特征分析,以标注对应该信息内容的至少一仿真标签;一仿真信息产生模块106,为每一该至少一仿真标签取得对应的一仿真指令,结合该信息内容以产生一仿真信息;以及一仿真指令存储操作模块108,用于将仿真指令存储到一仿真指令数据库中;而用户端112包括一用户装置120以及一仿真表达装置130,用户装置120包括一网络模块122以经由该通讯网络接收该仿真信息,以及一驱动模块124以输出该仿真信息中的该信息内容及所述至少一对应的仿真指令至一仿真表达模块,仿真表达模块130则接收该信息内容及所述至少一仿真指令,据以播放该信息内容并执行所述至少一对应的仿真指令。网络平台端110可经由一个以上的伺服器、电脑或工作站来实现,用户装置120可以是一个人电脑、笔记本电脑、手持通讯装置等各种计算机,而仿真表达模块130可以设置一仿真表达装置中,仿真表达装置是用以进行仿真表达的各种装置,例如灯光显示装置、声音播放装置、显示器、电子公仔、电子宠物机、机器人等。 
在一些实施例中,信息获取模块102可链结至一网络服务来获取该使用者信息,例如社群、即时通讯、虚拟宠物、影音邮件等,在另一些实施例中,网络平台端110还包含有一网络服务模块(图1未显示),可直接提供至少一用户端112的间进行通讯,而信息获取模块102可经由该网络服务模块来获取该使用者信息。 
以下即搭配图1所示的元件说明本实施例的信息仿真处理方法的详细步骤: 
首先,网络平台端110会利用信息获取模块102来获取一则使用者信息 (步骤S202)。其中,网络平台端110例如是经由社群、即时通讯、虚拟宠物或影音邮件等网络服务来获取该网络服务所提供的文字、语音或影像等形式的使用者信息,藉以对该使用者信息进行仿真处理。举例来说,网络平台端110可自动获取网络上某个部落格发表的文章或是某个联络人发出的即时信息,藉以对此文章或信息进行仿真处理。 
接着,网络平台端110会利用特征分析模块104对所获取的使用者信息的信息内容进行特征分析,进而对此信息内容标注至少一个仿真标签(步骤S204)。其中,特征分析模块104例如是根据信息获取模块102所获取的使用者信息的类型,分别采用文字情绪辨识、语音情绪辨识或脸部表情辨识等辨识方法来辨识情绪特征,并针对这些情绪特征来标注对应的仿真标签。 
详细地说,图3是本发明第一实施例的特征分析模块的方块图。请参照图3,本实施例的特征分析模块300包括情绪特征辨识单元310及仿真标签标注单元320两部分,而情绪特征辨识单元310则还依据信息种类而区分为文字情绪辨识单元312、语音情绪辨识单元314及脸部表情辨识单元316,以下则分别说明这些单元的功能: 
当所获取的使用者信息为文字信息时,该信息即会送入文字情绪辨识单元312。此时文字情绪辨识单元312会针对此使用者信息的内容进行文字情绪辨识,藉以辨识出多个文字情绪特征(例如喜、怒、哀、乐、一般)。之后仿真标签标注单元320则会针对这些文字情绪特征标注对应的仿真标签。在一些实施例中,文字情绪辨识单元312例如透过中文同义词林及断词系统的协助分析词组,并透过情绪语料库比对,取得原始语料的情绪关键字,将原始语料加注成具有各种情绪的情绪案例库,然后再分析此情绪案例库,建立情感模型及情绪相关本体知识,最后将此情绪案例库作为案例式推理系统的训练建构模型,使得推理系统能动态辨识使用者信息中的情绪特征,并标注仿真标签。在另一些实施例中,文字情绪辨识单元312可依据一语意分析功能及其分析结果对应情绪特征的决策树,以取得该情绪特征并标注仿真标 签。 
举例来说,下表1列示文字情绪辨识单元312针对文字信息:「哈啰,很高兴跟大家说:我要在上海办演唱会啰」进行文字辨识的结果。如表1所示,经由语意分析,文字情绪辨识单元312可直接在文字信息中找出「一般」与「开心」的情绪特征,而仿真标签标注单元320则会针对这些情绪特征标注对应的仿真标签。 
  哈啰   ,   很   高兴   跟   大家   说   我要   在   上海   办   演唱会   啰
  一般       开心           一般         开心  
表1 
当所获取的使用者信息为语音信息时,该信息则会送入语音情绪辨识单元314。由于语音对话内容中经常夹带着所要表达的情绪(例如:生气、快乐、厌烦、伤心),或者语音特征如音高、音频、音量等也能够进行分析以判断出情绪特征,因此本实施例的语音情绪辨识单元314即会针对使用者信息的内容或者语音特征等进行语音情绪辨识,藉以辨识出语音情绪特征。之后仿真标签标注单元320则会针对这些语音情绪特征标注对应的仿真标签。 
详细地说,图4是本发明第一实施例的语音情绪辨识的范例。请参照图4,语音情绪辨识单元314采用一个固定的时间间隔(例如0.2毫秒)将所接收的语音信息400切分为多个音框以进行分析。以音框410为例,语音情绪辨识单元314针对音框410取出音高(pitch)或能量等特征值420,如图4所示的音高为63.837,能量为3.473e+005,并将所取得的特征值与数据库作K个最近邻居(K Nearest Neighbor,KNN)比对,最后则分析此K笔数据,而判断出音框410的情绪特征430为生气。以此类推,语音情绪辨识单元314可判断出其他音框所对应的情绪特征。 
当所获取的使用者信息为影像信息时,该信息则会送入脸部表情辨识单元316。此时脸部表情辨识单元316会针对此使用者信息所包含的多张影像 分别进行脸部特征辨识,藉以取得各张影像的多个脸部特征,并根据这些脸部特征,判断出该影像的至少一个脸部表情特征。之后仿真标签标注单元320同样会针对这些脸部表情特征标注对应的仿真标签。 
详细地说,图5是本发明第一实施例的脸部表情辨识的范例。请参照图5,脸部表情辨识单元316例如是针对影像500进行辨识,而辨识出影像500中的眉毛510及嘴巴520的位置,然后将所辨识的眉毛510及嘴巴520与数据库内的数据进行比对,而找出3笔最相近的数据530(包括高兴99%、高兴95%及一般85%),最后则分析这3笔数据而判断出影像500的脸部表情540为高兴。 
回到步骤S204,在标注完仿真标签后,网络平台端110即利用仿真信息产生模块106搜寻每一个仿真标签对应的仿真指令,并将此些仿真指令与信息内容结合,进而产生仿真信息(步骤S206)。详细地说,仿真信息产生模块106例如是参照一个记录有对应于各种仿真标签的仿真指令的仿真指令数据库,藉以取得各仿真标签对应的仿真指令。仿真指令可以使仿真表达模块130据以于在仿真表达装置执行一仿真回馈动作或是一连串的仿真回馈动作,例如,仿真回馈动作可以是闪烁灯光、旋转、摇摆、机械动作、发出声音、屏幕显示特定影像等等。 
在另一些实施例中,不同的用户端可能具有不同的仿真表达装置,每一仿真表达装置可接受的仿真指令和可执行的仿真回馈动作可能亦不相同。因此,该网络平台端110还可包括一用户数据库,其中包括由用户存储操作模块记录的各用户端所对应的仿真表达装置,例如机型、种类、或编号代码等,而仿真指令数据库还包含记录数种仿真表达装置对应于各所述至少一仿真标签的至少一仿真指令,仿真信息产生模块106则可依据用户数据库和该仿真指令数据库,分别为各该用户端所对应仿真表达装置的每一该至少一仿真标签,来取得对应的一仿真指令,以结合该信息内容以产生一仿真信息。 
需说明的是,仿真信息产生模块106在搜寻仿真指令以产生仿真信息的 同时,也会在各个仿真指令中注记其对应的情绪特征在信息内容中出现的时间点,藉以在后续播放使用者信息内容的过程中,能够在适当的时间点执行对应的仿真指令。 
举例来说,图6是本发明第一实施例的仿真信息的范例。请参照图6,本实施例列出一则仿真信息的程序码,其包括信息内容610、信息内容种类620,以及仿真指令630~660。其中,仿真指令630~660除了注记情绪特征的仿真标签(即一般、开心)外,也注记了情绪特征在信息内容中出现的时间点。例如,仿真指令630即注记「一般」的仿真标签,且注记情绪特征在信息内容中出现的起始时间「0」以及结束时间「6」。据此,本实施例的仿真信息即可表达出完整的信息内容及其对应的仿真回馈动作。 
在产生仿真信息之后,网络平台端110随即将此仿真信息传送至用户装置120(步骤S208)。其中,网络平台端110还包含有一网络服务模块(未绘出),而提供用户端112中的用户装置120进行通讯,用户装置120例如是藉由网络模块122连结至网络,并透过网络接收由网络平台端110输出的仿真信息。此外,用户装置120也藉由驱动模块124来将所接收仿真信息中的信息内容及仿真指令输出至仿真表达模块130(步骤S210)。 
最后,仿真表达模块130即于仿真表达装置播放由用户装置120解读的信息内容,并执行对应的仿真指令(步骤S212)。详细地说,仿真表达模块130例如包括一个音效模块132,而用以播放仿真信息中的信息内容;仿真表达模块130可包括一个显示模块134,其在音效模块132播放到仿真信息中各个仿真指令注记的时间点,执行该仿真指令以显示出仿真表情;仿真表达模块130中可包括一个动作模块136,其同样是在音效模块132播放到仿真信息中各个仿真指令注记的时间点,执行该仿真指令以表现出仿真回馈动作;仿真表达模块130中也可包括一个转换模块138,其在所接收的使用者信息为文字信息时,透过文字转声音(Text-To-Speech,TTS)技术将此文字信息的内容转换为语音信息,以提供给音效模块132进行播放。 
举例来说,图7(a)~7(e)是本发明第一实施例的仿真表达装置执行仿真指令的范例。请参照图7(a)~7(e),本实施例的仿真表达装置为一个机器人,而在机器人的面部则配置有一个显示屏幕。当仿真表达装置的仿真表达模块接收到用户装置(未绘)输出的信息内容及仿真指令时,即会利用内建的扬声器来播放信息内容,而在播放的过程中,仿真表达模块还会在接收的仿真指令注记的时间点,控制显示屏幕来显示不同的表情,藉以表达使用者的情绪。例如,图7(a)即为仿真表达模块接收到仿真标签注记为「一般」的仿真指令时所显示的一般表情;图7(b)为仿真表达装置接收到仿真标签注记为「惊讶」的仿真指令时所显示的惊讶表情;以此类推,图7(c)~图7(e)分别为仿真表达装置所表达的生气、开心、害怕表情。值得一提的是,仿真表达装置除了利用显示屏幕来表现使用者的表情外,也可以利用其肢体的摆动来表现使用者的动作,而能够使仿真表达装置做出的仿真回馈还贴近使用者的目前情绪。 
综上所述,本实施例信息仿真处理系统100藉由在网络上建立网络平台端110并设置仿真指令数据库,不仅可提供客制化的仿真指令以供仿真表达装置130执行多样化的仿真回馈动作,系统厂商还可以透过网络平台端110来更新仿真指令数据库,藉以分享不同的仿真指令。此外,仿真表达装置的使用者也可透过用户装置120上的用户接口自订仿真指令,并上传至仿真指令数据库,藉以将其自订的仿真指令分享给其相关的联络人,使得这些联络人在接收到该使用者发出的信息时,也可以透过仿真表达装置观看到使用者所欲表达的仿真动作,而达到仿真指令分享的目的。 
需说明的是,在本实施例的信息仿真处理系统100中,仿真表达装置为独立于用户装置120之外的实体装置,然而在另一实施例中,仿真表达装置也可以是配置在用户装置120内部的虚拟装置。具体言之,仿真表达装置可以是显示在用户装置120的屏幕上的一个虚拟公仔,其同样可依照用户装置120所接收的信息内容及仿真指令,利用用户装置120的喇叭来播放信息内容,同时利用显示在用户装置120的屏幕上的虚拟公仔来做出仿真指令所定 义的仿真回馈动作。 
值得注意的是,在另一实施例中,仿真表达装置也可与用户装置120整合为一个实体装置。意即,仿真表达装置与用户装置120合而为一个电子公仔,其同样可以接收由网络平台端110输出的仿真信息,而播放其中的信息内容并执行仿真指令,以下则再举一实施例详细说明。 
第二实施例 
图8是本发明第二实施例的信息仿真处理系统的方块图。请参照图8,本实施例的信息仿真处理系统800分为网络平台端810所有模块及仿真表达模块820两个部分。其中,网络平台端810包括信息获取模块812、特征分析模块814、仿真信息产生模块816及仿真指令存储操作模块818,而其功能与第一实施例中的信息获取模块102、特征分析模块104、仿真信息产生模块106及仿真指令存储操作模块108的功能相同或相似,故在此不再赘述。 
然而,与第一实施例不同的是,本实施例的仿真表达模块820结合第一实施例的用户装置120与仿真表达装置内的所有元件,包括网络模块822、驱动模块824、音效模块832、显示模块834、动作模块836及转换模块838,仿真表达模块820也进一步整合这些模块的功能,其中包括利用网络模块822连结至网络,并透过网络接收由网络平台端810输出的仿真信息;利用驱动模块824来解读仿真信息中所包含的信息内容及仿真指令;利用音效模块832播放仿真信息中的信息内容;在音效模块832播放到仿真信息中各个仿真指令注记的时间点时,利用显示模块834执行仿真指令以显示出仿真表情,或利用动作模块836执行仿真指令以表现出仿真回馈动作;利用转换模块838透过文字转声音技术将文字信息的内容转换为语音信息,以提供给音效模块832进行播放。 
综上所述,本实施例的信息仿真处理系统800同样可藉由网络上的网络平台端810提供客制化的仿真指令,并分享不同的仿真指令,然而其中的仿真表达模块820则可独立地接收仿真信息,并直接地播放信息内容,以及执 行仿真指令,而达到仿真回馈的目的。 
在另一实施例中,该仿真表达模块820亦可再整合部分网络平台端810中的功能,使网络平台端810仅提供与该至少一用户端进行通讯、传送该至少一用户端信息的功能,而仿真表达模块820则包括网络模块、特征分析模块、仿真信息产生模块、驱动模块、仿真表达装置等各项功能,其皆与前述功能相同或相似,在此不再重复赘述。 
需说明的是,上述第一实施例及第二实施例均在网络上设置网络平台端藉以达到仿真指令的管理及更新。然而,在硬件资源容许的情况下,网络平台端的功能其实也能整合到仿真表达装置中,而提供更直接的方式进行信息的仿真处理,以下则再举一实施例详细说明。 
第三实施例 
图9是本发明第三实施例的信息仿真处理装置的方块图。请参照图9,本实施例的信息仿真处理装置900分为处理单元910及输出单元920两个部分,而处理单元910及输出单元920之间例如是藉由有线连结或无线连结的方式互相通讯。其中,处理单元910包括信息获取模块912、特征分析模块914、仿真信息产生模块916及仿真指令存储操作模块918,而其功能与第一实施例中的信息获取模块102、特征分析模块104、仿真信息产生模块106及仿真指令存储操作模块108的功能相同或相似,故在此不再赘述。 
然而,与第一实施例不同的是,本实施例的输出单元920中仅配置驱动模块924、音效模块932、显示模块934、动作模块936及转换模块938。输出单元920即整合这些模块的功能,其中包括利用驱动模块924来解读处理单元910输出的仿真信息中所包含的信息内容及仿真指令;利用音效模块932播放仿真信息中的信息内容;利用显示模块934在音效模块932播放到仿真信息中各个仿真指令注记的时间点时,执行仿真指令以显示出仿真表情;利用动作模块936在音效模块932播放到仿真信息中各个仿真指令注记的时间点时,执行仿真指令以表现出仿真回馈动作;利用转换模块938透过文字转 声音技术将文字信息的内容转换为语音信息,以提供给音效模块932进行播放。 
需说明的是,在本实施例的信息仿真处理装置900中,输出单元920为独立于处理单元910之外的实体装置,然而在另一实施例中,输出单元920也可以是配置在处理单元910内部的虚拟装置。具体言之,输出单元920可以是显示在信息仿真处理装置900的屏幕上的一个虚拟公仔,其同样可依照处理单元910所接收及解读的信息内容及仿真指令,利用信息仿真处理装置900的喇叭来播放信息内容,同时利用显示在信息仿真处理装置900的屏幕上的虚拟公仔来做出仿真指令所定义的仿真回馈动作。 
值得注意的是,在另一实施例中,输出单元920也可与处理单元910整合为一个实体装置。意即,输出单元920与处理单元910合而为一个电子公仔,其同样可对所接收的信息内容进行特征分析以取得仿真指令,并直接播放信息内容以及执行仿真指令,以下则再举一实施例详细说明。 
第四实施例 
图10是本发明第四实施例的信息仿真处理装置的方块图。请参照图10,本实施例的信息仿真处理装置1000将处理单元1010及输出单元1020整合为一个实体装置,而处理单元1010及输出单元1020中各个元件的功能与第三实施例的处理单元910及输出单元920中各个元件的功能相同或相似。 
然而,本实施例与第三实施例不同之处在于本实施例的信息仿真处理装置1000本身即具备本发明信息仿真处理的所有功能,其不仅能够对所接收的信息内容进行特征分析、标注仿真标签并搜寻仿真指令藉以产生仿真信息,也能够解读仿真信息、播放信息内容并执行仿真指令,而达到仿真回馈。 
综上所述,本发明的信息仿真处理系统、装置及方法藉由分析使用者的文字、声音、脸部表情来感应使用者的情绪,并结合现行文字及声音服务,提供仿真互动,因此能够让使用者透过电子公仔等仿真表达装置与他人互动,而增加互动的娱乐性及真实性。 
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。 

Claims (18)

1.一种信息仿真处理系统,:
一信息获取模块,用于在一网络平台端获取一使用者信息;
一特征分析模块,用于在所述网络平台端对该使用者信息的一信息内容进行一特征分析,以标注对应该信息内容的至少一仿真标签;
一仿真信息产生模块,用于在所述网络平台端为各所述仿真标签取得对应的一仿真指令,结合该信息内容以产生一仿真信息;
一网络模块,用于在一用户端经由一通讯网络接收该网络平台端的该仿真信息产生模块产生的该仿真信息;
一驱动模块,用于在所述用户端输出该仿真信息中的该信息内容及所述仿真指令;以及
一仿真表达模块,用于在一仿真表达装置接收该信息内容及所述仿真指令,据以播放该信息内容并执行所述仿真指令。
2.根据权利要求1所述的信息仿真处理系统,其中,该特征分析模块包括:
一情绪特征辨识单元,用于辨识该信息内容中的至少一情绪特征;以及
一仿真标签标注单元,用于针对各所述情绪特征标注对应的仿真标签,该仿真标签包含有所对应情绪特征在该信息内容中的一出现时间。
3.根据权利要求2所述的信息仿真处理系统,其中,该仿真表达模块于播放该信息内容时,依据该仿真标签的该出现时间以执行所述仿真指令。
4.根据权利要求1所述的信息仿真处理系统,还包括:
一仿真指令存储操作模块,用于将所述仿真指令存储到一仿真指令数据库中。
5.根据权利要求4所述的信息仿真处理系统,其中,所述仿真指令用以令该仿真表达模块执行以产生至少一仿真回馈动作。
6.根据权利要求4所述的信息仿真处理系统,还包括:
一用户存储操作模块,用于将所述用户端所对应的仿真表达模块信息存储到一用户数据库中;且其中,
该仿真指令存储操作模块还用于将所述仿真表达模块对应的仿真指令存储到该仿真指令数据库中;以及
该仿真信息产生模块用于依据该用户数据库和该仿真指令数据库,分别为所述用户端所对应仿真表达模块取得对应的仿真指令,结合该信息内容以产生该仿真信息。
7.根据权利要求1所述的信息仿真处理系统,其中,该仿真信息产生模块还用于在各所述仿真指令中注记所对应情绪特征在该信息内容中出现的一时间点,使得该仿真表达模块于播放该信息内容时,依据该时间点以执行所述仿真指令。
8.一种信息仿真处理装置,包括:
一信息获取模块,用于获取一使用者信息;
一特征分析模块,用于对该使用者信息的一信息内容进行一特征分析,以标注对应该信息内容的至少一仿真标签;以及
一仿真信息产生模块,用于为各所述仿真标签取得对应的一仿真指令,结合该信息内容以产生一仿真信息;以及
一驱动模块,用于依据该仿真信息中所包含的该信息内容及所述仿真指令,据以驱动一输出单元播放该信息内容并执行对应的所述仿真指令。
9.根据权利要求8所述的信息仿真处理装置,其中该特征分析模块包括:
一情绪特征辨识单元,用于辨识该信息内容中的至少一情绪特征;以及
一仿真标签标注单元,用于针对各所述情绪特征标注对应的仿真标签,该仿真标签包含所对应情绪特征在该信息内容中的一出现时间。
10.根据权利要求9所述的信息仿真处理装置,其中,该驱动模块驱动所述输出单元于播放该信息内容时,依据该仿真标签的出现时间以执行所述仿真指令。
11.根据权利要求8所述的信息仿真处理装置,其中,各所述仿真指令用以令该驱动模块执行以产生至少一仿真回馈动作。
12.根据权利要求8所述的信息仿真处理装置,其中,还包括:
一仿真指令存储操作模块,用于将所述仿真指令存储到一仿真指令数据库中。
13.根据权利要求12所述的信息仿真处理装置,其中,该仿真指令存储操作模块还用于更新所述仿真指令。
14.一种信息仿真处理方法,适用于一网络平台端,该网络平台端经由一通讯网络和至少一用户端进行通讯,该方法包括下列步骤:
获取一使用者信息;
对该使用者信息的一信息内容进行一特征分析,以标注对应该信息内容的至少一仿真标签;
为各所述仿真标签取得对应的一仿真指令,结合该信息内容以产生一仿真信息;以及
传送该仿真信息至所述用户端的一仿真表达装置,以令该仿真表达装置执行以产生至少一仿真回馈动作。
15.根据权利要求14所述的信息仿真处理方法,其中对该使用者信息的该信息内容进行该特征分析,以标注对应该信息内容的所述仿真标签的步骤包括:
辨识该信息内容中的至少一情绪特征;以及
针对各所述情绪特征标注对应的仿真标签,该仿真标签包含有所对应情绪特征在该信息内容中的一出现时间。
16.根据权利要求14所述的信息仿真处理方法,其中为各所述仿真标签取得对应的该仿真指令的步骤包括:
查询一仿真指令数据库以搜寻该仿真指令,该仿真指令数据库包括记录各所述仿真标签及对应的仿真指令。
17.根据权利要求14所述的信息仿真处理方法,其中产生该仿真信息的步骤还包括:
在各所述仿真指令中注记所对应情绪特征在该信息内容中出现的一时间点。
18.根据权利要求17所述的信息仿真处理方法,其中该仿真表达装置执行该仿真信息以产生所述仿真回馈动作的步骤包括:
播放该仿真信息中的该信息内容,并依据该时间点以执行各所述仿真指令。
CN200910221958A 2009-11-23 2009-11-23 信息仿真处理系统、装置及方法 Expired - Fee Related CN102073780B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910221958A CN102073780B (zh) 2009-11-23 2009-11-23 信息仿真处理系统、装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910221958A CN102073780B (zh) 2009-11-23 2009-11-23 信息仿真处理系统、装置及方法

Publications (2)

Publication Number Publication Date
CN102073780A CN102073780A (zh) 2011-05-25
CN102073780B true CN102073780B (zh) 2012-09-19

Family

ID=44032318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910221958A Expired - Fee Related CN102073780B (zh) 2009-11-23 2009-11-23 信息仿真处理系统、装置及方法

Country Status (1)

Country Link
CN (1) CN102073780B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103390409A (zh) * 2012-05-11 2013-11-13 鸿富锦精密工业(深圳)有限公司 电子装置及其侦测色情音频的方法
CN103914005A (zh) * 2012-12-31 2014-07-09 北京新媒传信科技有限公司 机器人控制方法及终端
CN103281235A (zh) * 2013-05-08 2013-09-04 百度在线网络技术(北京)有限公司 一种提供消息通信执行所选动作的方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1289665A (zh) * 1999-09-07 2001-04-04 索尼公司 机器人及其关节装置
CN1421094A (zh) * 2000-10-11 2003-05-28 皇家菲利浦电子有限公司 带动态控制外观的设备外壳
CN101206544A (zh) * 2006-12-22 2008-06-25 财团法人工业技术研究院 人机互动的触觉感测装置及其方法
CN101419499A (zh) * 2008-11-14 2009-04-29 东南大学 基于摄像头和话筒的多媒体人机交互方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1289665A (zh) * 1999-09-07 2001-04-04 索尼公司 机器人及其关节装置
CN1421094A (zh) * 2000-10-11 2003-05-28 皇家菲利浦电子有限公司 带动态控制外观的设备外壳
CN101206544A (zh) * 2006-12-22 2008-06-25 财团法人工业技术研究院 人机互动的触觉感测装置及其方法
CN101419499A (zh) * 2008-11-14 2009-04-29 东南大学 基于摄像头和话筒的多媒体人机交互方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2008-259921A 2008.10.30

Also Published As

Publication number Publication date
CN102073780A (zh) 2011-05-25

Similar Documents

Publication Publication Date Title
TWI430189B (zh) 訊息擬真處理系統、裝置及方法
CN106874265B (zh) 一种与用户情绪匹配的内容输出方法、电子设备及服务器
US9171539B2 (en) Transforming components of a web page to voice prompts
WO2022078102A1 (zh) 一种实体识别方法、装置、设备以及存储介质
JP6876752B2 (ja) 応答方法及び装置
CN101896803B (zh) 用于从源数据到音频/视频数据的语义媒体转换的方法、设备
CN102292766B (zh) 用于语音处理的方法和装置
JP5829000B2 (ja) 会話シナリオ編集装置
CN107515944A (zh) 基于人工智能的交互方法、用户终端、及存储介质
US20180374461A1 (en) System and method for automatically generating media
CN107516511A (zh) 意图识别和情绪的文本到语音学习系统
CN104350541A (zh) 能够将与用户的自然对话合并到其行为中的机器人,以及编程和使用所述机器人的方法
WO2008049834A2 (en) Virtual assistant with real-time emotions
CN110199274A (zh) 用于自动化查询回答生成的系统和方法
JP2010048980A (ja) 自動会話システム、並びに会話シナリオ編集装置
WO2007043679A1 (ja) 情報処理装置およびプログラム
CN107452378A (zh) 基于人工智能的语音交互方法和装置
JP2016536630A (ja) 人型ロボット等の機械と人間話者との間の対話方法、コンピュータプログラム製品、および同方法を実行する人型ロボット
Turchet et al. The internet of sounds: Convergent trends, insights and future directions
US20180272240A1 (en) Modular interaction device for toys and other devices
CN110232921A (zh) 基于生活服务的语音操作方法、装置、智能电视及系统
WO2021149929A1 (ko) 클라우드 기반 음성결합을 이용한 맞춤형 동영상 제작 서비스 제공 시스템
CN102073780B (zh) 信息仿真处理系统、装置及方法
CN108804667A (zh) 用于呈现信息的方法和装置
Piwek A flexible pragmatics-driven language generator for animated agents

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120919

Termination date: 20201123

CF01 Termination of patent right due to non-payment of annual fee