CN114844692A - 一种基于网络安全的智能信息交互用控制方法 - Google Patents

一种基于网络安全的智能信息交互用控制方法 Download PDF

Info

Publication number
CN114844692A
CN114844692A CN202210429998.1A CN202210429998A CN114844692A CN 114844692 A CN114844692 A CN 114844692A CN 202210429998 A CN202210429998 A CN 202210429998A CN 114844692 A CN114844692 A CN 114844692A
Authority
CN
China
Prior art keywords
user
information
security
network
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210429998.1A
Other languages
English (en)
Other versions
CN114844692B (zh
Inventor
陈琼
叶志伟
刘春�
贺红艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hubei University of Technology
Original Assignee
Hubei University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hubei University of Technology filed Critical Hubei University of Technology
Priority to CN202210429998.1A priority Critical patent/CN114844692B/zh
Publication of CN114844692A publication Critical patent/CN114844692A/zh
Application granted granted Critical
Publication of CN114844692B publication Critical patent/CN114844692B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/20Network architectures or network communication protocols for network security for managing network security; network security policies in general
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Engineering & Computer Science (AREA)
  • Child & Adolescent Psychology (AREA)
  • Acoustics & Sound (AREA)
  • Computer Hardware Design (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于网络安全的智能信息交互用控制方法,具体涉及智能信息交互技术领域,本发明通过构建信息安全数据库并在交互的过程中采集相关数据,从而可以判断当前网络是否存在安全问题,并根据以往的经验得到解决方法,降低了网络安全隐患,并且若没有相关解决经验,则发送到管理人员端并进行警示提醒,使得信息安全问题得到了很好的解决,同时本发明根据采集数据来判断用户当前的情绪状态,从而可以根据用户的情绪状态来切换不同的语音语气,还可以通过安抚情绪话术对用户的情绪进行安抚,使得交互方式更加智能,并且具有一定的人情味,使得用户具有更好的心情,使得交互方式变得多元化,增加趣味性,提升用户体验。

Description

一种基于网络安全的智能信息交互用控制方法
技术领域
本发明涉及智能信息交互技术领域,更具体地说,本发明涉及一种基于网络安全的智能信息交互用控制方法。
背景技术
基于城市生活数字化进程的不断推进,城市居民的便利生活需求也快速扩大,智能信息交互平台在智能社区大行其道的发展趋势下是必不可少的,如今更多新型智能社区配备着信息交互平台入驻社区服务于居民,被安置于社区大堂、周边广场或传统社区门店内,为居民提供简单易操作的查询和O2O互动交易。
在这种智能信息交互平台的使用过程中,由于互联网的开放性,信息系统自身的缺陷、敏感信息的泄露、计算机病毒的泛滥以及黑客入侵等,导致各种信息系统和平台面临着巨大的安全隐患,信息安全问题日渐凸显,另一方面,新的网络环境不断涌现,如大数据、云计算等,使得信息安全问题进一步加剧,而且现有技术中的交互方式一般是通过智能客服单一的语音进行沟通,使得交互的方式较为单一,无法智能的根据用户的状态来改变交互方式,从而用户体验较差,因此,研究一种新的基于网络安全的智能信息交互用控制方法来解决上述问题具有重要意义。
发明内容
为了克服现有技术的上述缺陷,本发明提供了一种基于网络安全的智能信息交互用控制方法,本发明所要解决的技术问题是:现有技术中由于互联网的开放性,信息系统自身的缺陷、敏感信息的泄露、计算机病毒的泛滥以及黑客入侵等,导致各种信息系统和平台面临着巨大的安全隐患,信息安全问题日渐凸显,另一方面,新的网络环境不断涌现,如大数据、云计算等,使得信息安全问题进一步加剧,而且现有技术中的交互方式一般是通过智能客服单一的语音进行沟通,使得交互的方式较为单一,无法智能的根据用户的状态来改变交互方式,从而用户体验较差的问题。
为实现上述目的,本发明提供如下技术方案:一种基于网络安全的智能信息交互用控制方法,包括以下步骤:
步骤一、基于历史数据构建信息安全数据库,储存在远程服务器中,并由此生成网络安全评估标准模型,并以其作为信息评估的参考和依据,同时统计以往用户交互习惯,对用户常用的业务进行统计和分类,同时采集网络上的安抚情绪话术,并根据有效度设定权重。
步骤二、通过接近开关识别来到附近的用户,并进行主动询问是否需要最常用的业务办理,同时通过生物技术识别用户信息,在交互的过程中同时进行网络安全相关数据采集,同时对用户进行监控和声音采集,然后分别对监控和声音进行处理。
步骤三、根据用户的声音和肢体动作判断当前用户的心情,同时根据用户的情绪状态改变语音的语气,当用户情绪为高兴状态时,控制语音的语气为愉悦状态,当用户的情绪为不高兴状态时,控制语音的语气为柔和状态,并根据用户的情绪状态选择合适的安抚情绪话术对用户进行安抚,根据和用户的对话内容转接到相应页面,并辅助用户对业务进行办理,同时播放舒缓的音乐,以此来提升用户的满意度。
步骤四、同时对采集的网络安全相关数据进行处理分析,具体步骤为:通过关联分析对计算机网络信息源进行汇聚、关联分析、严重性排序等一系列分析与处理操作,挖掘出隐藏在各个相关事件中的信息,并将真正具备威胁的安全事件并报告,以降低系统全面安全控制所需耗费的资源,提高工作效率,从而快速判断网络安全事件的类型,将处理分析后的数据与网络安全评估标准模型进行比对,判断是否存在问题,生成评估报告,并储存。
步骤五、若是存在问题,则根据以往的经验得到解决方法,并由网络安全处理工具进行处理,若没有相关解决经验,则发送到管理人员端并进行警示提醒,并针对网络信息安全事件类型采取相应的应对和处理措施。
若没有存在问题,则继续运行。
作为本发明的进一步方案:所述网络安全相关数据采集的具体方法为:控制传感器定时监控计算机网络和主机系统,同时通过政企内部组织架构、岗责体系、安全制度在内的安全制度体系逐层细化形成安全策略体系,在平台进行展示后形成数据监测系统,并从中获取能反映安全状态的原始数据。
作为本发明的进一步方案:所述构建信息安全数据库的具体方法为:从网络中搜寻以往发生过的网络安全事件,并通过爬虫获取保存后进行分类处理,然后将分类后的相关信息进行归一化格式处理,并去除重复内容和无效信息,得到有效信息,并根据所述有效信息构建成信息安全数据库,储存在远程服务器中,并进行定期更新。
作为本发明的进一步方案:所述网络安全处理工具包括但不限于网络系统扫描器、防火墙、系统进程监控器、查杀病毒软件、远程访问工具、远程控制工具、端口管理程序、反攻击工具和网络诊断工具。
作为本发明的进一步方案:所述识别用户信息的过程中自动识别用户的身份信息,并提取出用户的生日时间,当用户的生日时间与交互时间重叠时,在与用户交互时,为用户进行生日祝福,并通过语音播放生日快乐歌。
作为本发明的进一步方案:所述用户情绪进行判断的具体步骤为:
(1)将采集到的监控进行音频信号预处理、音频特征提取和GMM-HMM模型构建,然后视频序列量化为二维特征矩阵。
(2)对用户的面部表情进行预处理、视频特征提取和RF模型构建,将面部表情视频的时空特征矩阵和肢体动作视频的时空特征矩阵融合。
(3)通过改进CCA得到SPCCA算法,即通过获取样本间的全局稀疏重构权重函数,然后利用优化策略将其融入CCA算法中,使得投影后的两组特征之间具有最大的相关度。
(4)进行音频单模态情绪基调、视频单模态情绪基调和音视频双模态情绪基调进行一致性判断,若三者情绪基调不一致,则基于音视频情绪基调对音频和视频的单模态识别结果进行修正。
(5)若三者情绪基调一致,则在音视频正、负情绪基调下,分别对音视频双模态进行决策层融合,通过单模态间识别结果的相关性分析得到音视频双模态融合的权重向量,使用权重向量对两个模态的识别结果进行线性加权,得到音视频双模态的情绪识别结果,得到最终的情绪识别结果。
作为本发明的进一步方案:所述在结束交互时,邀请用户对服务进行打分,分值区间为1-10分,当用户打分分值低于六分时,主动对用户进行询问原因,定期统计分值和用户的低分理由并根据原因调节安抚情绪话术的权重。
作为本发明的进一步方案:所述对声音的处理步骤为:首先对声音的分贝大小进行检测,当声音的分贝较小时,说明声音来源在距离较远处或者声音过小,不进行分析,而当声音的分贝正常时,判断当前声音是否为人声,如果不是人声时,不进行处理,从而提取可方便进行分析和识别的用户声音,以减少重复计算,减少工作量,提高工作效率,而当声音的分贝较大时,通过监控视频判断用户的年龄,当用户的年龄较大时,判断用户的听力可能存在一些问题,调高互动设备的音量,使得用户可以听清互动内容,当用户结束互动时,将音量复位。
本发明的有益效果在于:
1、本发明通过构建信息安全数据库并在交互的过程中采集相关数据,从而可以判断当前网络是否存在安全问题,并根据以往的经验得到解决方法,降低了网络安全隐患,并且若没有相关解决经验,则发送到管理人员端并进行警示提醒,并针对网络信息安全事件类型采取相应的应对和处理措施,使得信息安全问题得到了很好的解决,同时本发明还通过对用户进行监控和声音采集,并根据采集数据来判断用户当前的情绪状态,从而可以根据用户的情绪状态来切换不同的语音语气,还可以通过安抚情绪话术对用户的情绪进行安抚,使得交互方式更加智能,并且具有一定的人情味,使得用户具有更好的心情,使得交互方式变得多元化,增加趣味性,提升用户体验;
2、本发明通过对声音的分贝大小进行检测,从而可以排出一些无用的杂声和较小的声音,从而可以降低重复计算,减少工作量,提高工作效率,并且当声音的分贝较大时,通过监控视频判断用户的年龄,当用户的年龄较大时,判断用户的听力可能存在一些问题,调高互动设备的音量,使得用户可以听清互动内容,从而方便了老年人的使用;
3、本发明通过自动识别用户的身份信息,并提取出用户的生日时间,当用户的生日时间与交互时间重叠时,在与用户交互时,为用户进行生日祝福,并通过语音播放生日快乐歌,使得用户在生日时可以收到生日祝福,从而在一定程度上可以提高用户的幸福感。
附图说明
图1为本发明网络安全处理的流程图;
图2为本发明智能交互方式的工作流程图;
图3为本发明声音处理的工作流程图。
具体实施方式
下面将对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1-3所示,一种基于网络安全的智能信息交互用控制方法,包括以下步骤:
步骤一、基于历史数据构建信息安全数据库,储存在远程服务器中,并由此生成网络安全评估标准模型,并以其作为信息评估的参考和依据,同时统计以往用户交互习惯,对用户常用的业务进行统计和分类,同时采集网络上的安抚情绪话术,并根据有效度设定权重。
安抚情绪话术可以为以下此种话术:
1、工作不必太累,生活有滋有味,快乐总会加倍,烦恼终归会累,愿你心情总最美,幸福总陶醉。
2、人生路上难免会遇到困难,拐个弯,绕一绕,何尝不是个办法。
3、日出东海落西山,愁也一天,喜也一天,遇事不钻牛觖,人也舒坦,心也舒坦。
4、健康是革命的本钱,为事业为家庭操劳的同时别忘,该休息时就休息,保持健康体魄。
5、官大官小,没完没了,钱多钱少,都有烦恼,知心朋友,无价之宝,知足常乐,心宽气少,人活一世,心情要好。
6、天将降大任于斯人也,必将苦其心志,劳其筋骨,饿其体肤,朋友,小小的磨难只是你成功路上的实验石,勇敢大步跨过去,精彩属于你。
步骤二、通过接近开关识别来到附近的用户,并进行主动询问是否需要最常用的业务办理,同时通过生物技术识别用户信息,在交互的过程中同时进行网络安全相关数据采集,同时对用户进行监控和声音采集,然后分别对监控和声音进行处理。
步骤三、根据用户的声音和肢体动作判断当前用户的心情,同时根据用户的情绪状态改变语音的语气,当用户情绪为高兴状态时,控制语音的语气为愉悦状态,当用户的情绪为不高兴状态时,控制语音的语气为柔和状态,并根据用户的情绪状态选择合适的安抚情绪话术对用户进行安抚,根据和用户的对话内容转接到相应页面,并辅助用户对业务进行办理,同时播放舒缓的音乐,以此来提升用户的满意度。
步骤四、同时对采集的网络安全相关数据进行处理分析,具体步骤为:通过关联分析对计算机网络信息源进行汇聚、关联分析、严重性排序等一系列分析与处理操作,挖掘出隐藏在各个相关事件中的信息,并将真正具备威胁的安全事件并报告,以降低系统全面安全控制所需耗费的资源,提高工作效率,从而快速判断网络安全事件的类型,将处理分析后的数据与网络安全评估标准模型进行比对,判断是否存在问题,生成评估报告,并储存。
步骤五、若是存在问题,则根据以往的经验得到解决方法,并由网络安全处理工具进行处理,若没有相关解决经验,则发送到管理人员端并进行警示提醒,并针对网络信息安全事件类型采取相应的应对和处理措施。
若没有存在问题,则继续运行。
网络安全相关数据采集的具体方法为:控制传感器定时监控计算机网络和主机系统,同时通过政企内部组织架构、岗责体系、安全制度在内的安全制度体系逐层细化形成安全策略体系,在平台进行展示后形成数据监测系统,并从中获取能反映安全状态的原始数据。
构建信息安全数据库的具体方法为:从网络中搜寻以往发生过的网络安全事件,并通过爬虫获取保存后进行分类处理,然后将分类后的相关信息进行归一化格式处理,并去除重复内容和无效信息,得到有效信息,并根据有效信息构建成信息安全数据库,储存在远程服务器中,并进行定期更新。
网络安全处理工具包括但不限于网络系统扫描器、防火墙、系统进程监控器、查杀病毒软件、远程访问工具、远程控制工具、端口管理程序、反攻击工具和网络诊断工具。
识别用户信息的过程中自动识别用户的身份信息,并提取出用户的生日时间,当用户的生日时间与交互时间重叠时,在与用户交互时,为用户进行生日祝福,并通过语音播放生日快乐歌。
用户情绪进行判断的具体步骤为:
(1)将采集到的监控进行音频信号预处理、音频特征提取和GMM-HMM模型构建,然后视频序列量化为二维特征矩阵。
(2)对用户的面部表情进行预处理、视频特征提取和RF模型构建,将面部表情视频的时空特征矩阵和肢体动作视频的时空特征矩阵融合。
(3)通过改进CCA得到SPCCA算法,即通过获取样本间的全局稀疏重构权重函数,然后利用优化策略将其融入CCA算法中,使得投影后的两组特征之间具有最大的相关度。
(4)进行音频单模态情绪基调、视频单模态情绪基调和音视频双模态情绪基调进行一致性判断,若三者情绪基调不一致,则基于音视频情绪基调对音频和视频的单模态识别结果进行修正。
(5)若三者情绪基调一致,则在音视频正、负情绪基调下,分别对音视频双模态进行决策层融合,通过单模态间识别结果的相关性分析得到音视频双模态融合的权重向量,使用权重向量对两个模态的识别结果进行线性加权,得到音视频双模态的情绪识别结果,得到最终的情绪识别结果。
在结束交互时,邀请用户对服务进行打分,分值区间为1-10分,当用户打分分值低于六分时,主动对用户进行询问原因,定期统计分值和用户的低分理由并根据原因调节安抚情绪话术的权重。
对声音的处理步骤为:首先对声音的分贝大小进行检测,当声音的分贝较小时,说明声音来源在距离较远处或者声音过小,不进行分析,而当声音的分贝正常时,判断当前声音是否为人声,如果不是人声时,不进行处理,从而提取可方便进行分析和识别的用户声音,以减少重复计算,减少工作量,提高工作效率,而当声音的分贝较大时,通过监控视频判断用户的年龄,当用户的年龄较大时,判断用户的听力可能存在一些问题,调高互动设备的音量,使得用户可以听清互动内容,当用户结束互动时,将音量复位。
本发明通过构建信息安全数据库并在交互的过程中采集相关数据,从而可以判断当前网络是否存在安全问题,并根据以往的经验得到解决方法,降低了网络安全隐患,并且若没有相关解决经验,则发送到管理人员端并进行警示提醒,并针对网络信息安全事件类型采取相应的应对和处理措施,使得信息安全问题得到了很好的解决,同时本发明还通过对用户进行监控和声音采集,并根据采集数据来判断用户当前的情绪状态,从而可以根据用户的情绪状态来切换不同的语音语气,还可以通过安抚情绪话术对用户的情绪进行安抚,使得交互方式更加智能,并且具有一定的人情味,使得用户具有更好的心情,使得交互方式变得多元化,增加趣味性,提升用户体验,本发明通过对声音的分贝大小进行检测,从而可以排出一些无用的杂声和较小的声音,从而可以降低重复计算,减少工作量,提高工作效率,并且当声音的分贝较大时,通过监控视频判断用户的年龄,当用户的年龄较大时,判断用户的听力可能存在一些问题,调高互动设备的音量,使得用户可以听清互动内容,从而方便了老年人的使用,本发明通过自动识别用户的身份信息,并提取出用户的生日时间,当用户的生日时间与交互时间重叠时,在与用户交互时,为用户进行生日祝福,并通过语音播放生日快乐歌,使得用户在生日时可以收到生日祝福,从而在一定程度上可以提高用户的幸福感。
最后应说明的几点是:虽然,上文中已经用一般性说明及具体实施例对本发明作了详尽的描述,但在本发明的基础上,以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (8)

1.一种基于网络安全的智能信息交互用控制方法,其特征在于,包括以下步骤:
步骤一、基于历史数据构建信息安全数据库,储存在远程服务器中,并由此生成网络安全评估标准模型,并以其作为信息评估的参考和依据,同时统计以往用户交互习惯,对用户常用的业务进行统计和分类,同时采集网络上的安抚情绪话术,并根据有效度设定权重;
步骤二、通过接近开关识别来到附近的用户,并进行主动询问是否需要最常用的业务办理,同时通过生物技术识别用户信息,在交互的过程中同时进行网络安全相关数据采集,同时对用户进行监控和声音采集,然后分别对监控和声音进行处理;
步骤三、根据用户的声音和肢体动作判断当前用户的心情,同时根据用户的情绪状态改变语音的语气,并根据用户的情绪状态选择合适的安抚情绪话术对用户进行安抚,根据和用户的对话内容转接到相应页面,并辅助用户对业务进行办理,同时播放舒缓的音乐,以此来提升用户的满意度;
步骤四、同时对采集的网络安全相关数据进行处理分析,快速判断网络安全事件的类型,将处理分析后的数据与网络安全评估标准模型进行比对,判断是否存在问题,生成评估报告,并储存;
步骤五、若是存在问题,则根据以往的经验得到解决方法,并由网络安全处理工具进行处理,若没有相关解决经验,则发送到管理人员端并进行警示提醒,并针对网络信息安全事件类型采取相应的应对和处理措施;
若没有存在问题,则继续运行。
2.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述网络安全相关数据采集的具体方法为:控制传感器定时监控计算机网络和主机系统,同时通过政企内部组织架构、岗责体系、安全制度在内的安全制度体系逐层细化形成安全策略体系,在平台进行展示后形成数据监测系统,并从中获取能反映安全状态的原始数据。
3.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述构建信息安全数据库的具体方法为:从网络中搜寻以往发生过的网络安全事件,并通过爬虫获取保存后进行分类处理,然后将分类后的相关信息进行归一化格式处理,并去除重复内容和无效信息,得到有效信息,并根据所述有效信息构建成信息安全数据库,储存在远程服务器中,并进行定期更新。
4.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述网络安全处理工具包括但不限于网络系统扫描器、防火墙、系统进程监控器、查杀病毒软件、远程访问工具、远程控制工具、端口管理程序、反攻击工具和网络诊断工具。
5.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述识别用户信息的过程中自动识别用户的身份信息,并提取出用户的生日时间,当用户的生日时间与交互时间重叠时,在与用户交互时,为用户进行生日祝福,并通过语音播放生日快乐歌。
6.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述用户情绪进行判断的具体步骤为:
(1)将采集到的监控进行音频信号预处理、音频特征提取和GMM-HMM模型构建,然后视频序列量化为二维特征矩阵;
(2)对用户的面部表情进行预处理、视频特征提取和RF模型构建,将面部表情视频的时空特征矩阵和肢体动作视频的时空特征矩阵融合;
(3)通过改进CCA得到SPCCA算法,即通过获取样本间的全局稀疏重构权重函数,然后利用优化策略将其融入CCA算法中,使得投影后的两组特征之间具有最大的相关度;
(4)进行音频单模态情绪基调、视频单模态情绪基调和音视频双模态情绪基调进行一致性判断,若三者情绪基调不一致,则基于音视频情绪基调对音频和视频的单模态识别结果进行修正;
(5)若三者情绪基调一致,则在音视频正、负情绪基调下,分别对音视频双模态进行决策层融合,通过单模态间识别结果的相关性分析得到音视频双模态融合的权重向量,使用权重向量对两个模态的识别结果进行线性加权,得到音视频双模态的情绪识别结果,得到最终的情绪识别结果。
7.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述在结束交互时,邀请用户对服务进行打分,分值区间为1-10分,当用户打分分值低于六分时,主动对用户进行询问原因,定期统计分值和用户的低分理由并根据原因调节安抚情绪话术的权重。
8.根据权利要求1所述的一种基于网络安全的智能信息交互用控制方法,其特征在于:所述对声音的处理步骤为:首先对声音的分贝大小进行检测,当声音的分贝较小时,说明声音来源在距离较远处或者声音过小,不进行分析,而当声音的分贝正常时,判断当前声音是否为人声,如果不是人声时,不进行处理,从而提取可方便进行分析和识别的用户声音,以减少重复计算,减少工作量,提高工作效率,而当声音的分贝较大时,通过监控视频判断用户的年龄,当用户的年龄较大时,判断用户的听力可能存在一些问题,调高互动设备的音量,使得用户可以听清互动内容,当用户结束互动时,将音量复位。
CN202210429998.1A 2022-04-22 2022-04-22 一种基于网络安全的智能信息交互用控制方法 Active CN114844692B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210429998.1A CN114844692B (zh) 2022-04-22 2022-04-22 一种基于网络安全的智能信息交互用控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210429998.1A CN114844692B (zh) 2022-04-22 2022-04-22 一种基于网络安全的智能信息交互用控制方法

Publications (2)

Publication Number Publication Date
CN114844692A true CN114844692A (zh) 2022-08-02
CN114844692B CN114844692B (zh) 2024-05-03

Family

ID=82565767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210429998.1A Active CN114844692B (zh) 2022-04-22 2022-04-22 一种基于网络安全的智能信息交互用控制方法

Country Status (1)

Country Link
CN (1) CN114844692B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100463706B1 (ko) * 2004-04-27 2004-12-29 주식회사 엠포컴 유무선 네트워크를 통한 음성 인식 기반 감정 분석 시스템및 그 방법
CN107220591A (zh) * 2017-04-28 2017-09-29 哈尔滨工业大学深圳研究生院 多模态智能情绪感知系统
US20200086496A1 (en) * 2018-09-14 2020-03-19 Lg Electronics Inc. Emotion recognizer, robot including the same, and server including the same
US20210134062A1 (en) * 2019-11-04 2021-05-06 Cognizant Technology Solutions India Pvt. Ltd. Artificial intelligence enabled mixed reality system and method
US20220060497A1 (en) * 2015-10-28 2022-02-24 Qomplx, Inc. User and entity behavioral analysis with network topology enhancements
CN114120985A (zh) * 2021-11-18 2022-03-01 上海深聪半导体有限责任公司 智能语音终端的安抚交互方法、系统、设备及存储介质
CN114115533A (zh) * 2021-11-11 2022-03-01 北京萌特博智能机器人科技有限公司 智能交互方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100463706B1 (ko) * 2004-04-27 2004-12-29 주식회사 엠포컴 유무선 네트워크를 통한 음성 인식 기반 감정 분석 시스템및 그 방법
US20220060497A1 (en) * 2015-10-28 2022-02-24 Qomplx, Inc. User and entity behavioral analysis with network topology enhancements
CN107220591A (zh) * 2017-04-28 2017-09-29 哈尔滨工业大学深圳研究生院 多模态智能情绪感知系统
US20200086496A1 (en) * 2018-09-14 2020-03-19 Lg Electronics Inc. Emotion recognizer, robot including the same, and server including the same
US20210134062A1 (en) * 2019-11-04 2021-05-06 Cognizant Technology Solutions India Pvt. Ltd. Artificial intelligence enabled mixed reality system and method
CN114115533A (zh) * 2021-11-11 2022-03-01 北京萌特博智能机器人科技有限公司 智能交互方法和装置
CN114120985A (zh) * 2021-11-18 2022-03-01 上海深聪半导体有限责任公司 智能语音终端的安抚交互方法、系统、设备及存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ZHIWEI YE等: "Security Situation Prediction based on Hybrid Rice Optimization Algorithm and Back Propagation Neural Network", 《 2018 IEEE 4TH INTERNATIONAL SYMPOSIUM ON WIRELESS SYSTEMS WITHIN THE INTERNATIONAL CONFERENCES ON INTELLIGENT DATA ACQUISITION AND ADVANCED COMPUTING SYSTEMS》, 8 November 2018 (2018-11-08) *
卫飞高等: "基于情绪基调的音视频双模态情绪识别算法", 《计算机应用与软件》, vol. 35, no. 8, 31 August 2018 (2018-08-31) *
叶志伟: "机器视觉实验平台建设与教学实践", 《计算机教育》, no. 11, 10 November 2021 (2021-11-10), pages 63 - 64 *

Also Published As

Publication number Publication date
CN114844692B (zh) 2024-05-03

Similar Documents

Publication Publication Date Title
CN110853618B (zh) 一种语种识别的方法、模型训练的方法、装置及设备
WO2022134833A1 (zh) 语音信号的处理方法、装置、设备及存储介质
CN111508474B (zh) 一种语音打断方法、电子设备及存储装置
JP2021525493A (ja) ディープラーニングに基づく音質特性処理方法及びシステム
WO2021012921A1 (zh) 图像数据处理方法、装置、电子设备以及存储介质
WO2020224126A1 (zh) 一种基于人脸识别的自适应调节方法、系统和可读存储介质
CN110517689A (zh) 一种语音数据处理方法、装置及存储介质
CN112102850B (zh) 情绪识别的处理方法、装置、介质及电子设备
CN110287314B (zh) 基于无监督聚类的长文本可信度评估方法及系统
US10548534B2 (en) System and method for anhedonia measurement using acoustic and contextual cues
CN111144359B (zh) 一种展品评价装置和方法及展品推送方法
CN107085717A (zh) 一种家庭监控方法、服务端及计算机可读存储介质
CN117041807B (zh) 蓝牙耳机播放控制方法
CN111491123A (zh) 视频背景处理方法、装置及电子设备
CN111967770A (zh) 基于大数据的问卷调查数据处理方法、装置及存储介质
WO2023184942A1 (zh) 语音交互方法、装置及电器
CN109841221A (zh) 基于语音识别的参数调节方法、装置及健身设备
KR101811751B1 (ko) 챗봇을 이용한 광고 제공 서버
CN111816170A (zh) 一种音频分类模型的训练和垃圾音频识别方法和装置
CN110111795B (zh) 一种语音处理方法及终端设备
KR102171658B1 (ko) 크라우드전사장치 및 그 동작 방법
CN107451185A (zh) 录音方法、朗读系统、计算机可读存储介质和计算机装置
CN111158490A (zh) 基于手势识别的辅助语义识别系统
CN114492579A (zh) 情绪识别方法、摄像装置、情绪识别装置及存储装置
KR101894060B1 (ko) 사용자 분석기반 챗봇을 이용한 지능형 광고 제공 서버

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant