CN112860064B - 一种基于ai技术的智能互动系统及设备 - Google Patents

一种基于ai技术的智能互动系统及设备 Download PDF

Info

Publication number
CN112860064B
CN112860064B CN202110149917.8A CN202110149917A CN112860064B CN 112860064 B CN112860064 B CN 112860064B CN 202110149917 A CN202110149917 A CN 202110149917A CN 112860064 B CN112860064 B CN 112860064B
Authority
CN
China
Prior art keywords
module
user
information
management module
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110149917.8A
Other languages
English (en)
Other versions
CN112860064A (zh
Inventor
丁娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China Normal University
Original Assignee
South China Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China Normal University filed Critical South China Normal University
Priority to CN202110149917.8A priority Critical patent/CN112860064B/zh
Publication of CN112860064A publication Critical patent/CN112860064A/zh
Application granted granted Critical
Publication of CN112860064B publication Critical patent/CN112860064B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3329Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation
    • G06F16/90332Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9537Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9538Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers

Abstract

本发明涉及人工智能技术领域,具体地说,涉及一种基于AI技术的智能互动系统及设备。包括基础感知单元、功能分布单元、应用管控单元和屏显展示单元;功能分布单元用于对系统包含的多种功能进行集中管控和分布管理;应用管控单元用于将系统的各项功能分别应用到不同服务应用上。本发明设计的系统可以通过语音及触控等多种方式与用户进行互动,丰富系统功能,另外AI形象可以在交互过程中智能学习改进,从而给用户提供更好的使用体验;本发明设计的设备可以给用户提供精确的现场引导服务,同时可以根据用户的身高调整显示屏的高度,适用于所有用户,给用户提供更加人性化的使用体感。

Description

一种基于AI技术的智能互动系统及设备
技术领域
本发明涉及人工智能技术领域,具体地说,涉及一种基于AI技术的智能互动系统及设备。
背景技术
人工智能(英语缩写为AI)亦称智械、机器智能,指由人制造出来的机器所表现出来的智能,通常人工智能是指通过普通计算机程序来呈现人类智能的技术。现代技术中,越来越多的智能家电开始应用AI智能互动系统,如智能电视、扫地机器人等。很多商业办公场所内也会应用AI智能设备给来访人员提供企业介绍及咨询服务。但是,现有的这些智能设备结构固定,无法适用于不同体型及身高的用户,同时其功能比较单一,无法与用户进行灵活的互动,也无法给用户提供精确的引导服务,从而导致用户的使用体验感较差。
发明内容
本发明的目的在于提供一种基于AI技术的智能互动系统及设备,以解决上述背景技术中提出的问题。
为实现上述技术问题的解决,本发明的目的之一在于,提供一种基于AI技术的智能互动系统,包括
基础感知单元、功能分布单元、应用管控单元和屏显展示单元;所述基础感知单元、所述功能分布单元、所述应用管控单元与所述屏显展示单元依次通过以太网通讯连接且独立运行;所述基础感知单元通过各传感器采集外界环境中的图像、声音等信息以建立人机交互的基础;所述功能分布单元用于对系统包含的多种功能进行集中管控和分布管理;所述应用管控单元用于将系统的各项功能分别应用到不同服务应用上;所述屏显展示单元用于管理控制系统展示给用户的显示界面及其内容;
所述基础感知单元包括视觉传感模块、听觉传感模块、触觉传感模块和距离传感模块;
所述功能分布单元包括运动管理模块、电源管理模块、身份管理模块和语音交互模块;
所述应用管控单元包括引导服务模块、咨询服务模块、休闲娱乐模块和智能训练模块;
所述屏显展示单元包括形象管理模块、交流会话模块、信息反馈模块和界面轮播模块。
作为本技术方案的进一步改进,所述视觉传感模块、所述听觉传感模块、所述触觉传感模块与所述距离传感模块并列运行;所述视觉传感模块用于通过摄像头实时采集外界环境及用户的图像、视频信息并反馈到处理器上;所述听觉传感模块用于采集外界环境的声音信息并控制音频信息的播放;所述触觉传感模块用于通过触摸屏实现用户触控系统的操作过程;所述距离传感模块用于通过距离传感芯片实时测量装载有该系统的装置与外界物品之间的距离以避免发生碰撞。
作为本技术方案的进一步改进,所述运动管理模块、所述电源管理模块、所述身份管理模块与所述语音交互模块依次通过以太网通讯连接并独立运行;所述运动管理模块用于通过可编程控制器分别控制装载有该系统的设备的行走运动及摄像头的升降运动;所述电源管理模块用于集中管理系统的电源分配;所述身份管理模块用于采集用户的人脸信息并自动查找或记录用户的身份信息;所述语音交互模块用于自动识别、分析用户的语音信息并及时以音频信息作出反应反馈。
作为本技术方案的进一步改进,所述引导服务模块、所述咨询服务模块、所述休闲娱乐模块与所述智能训练模块依次通过以太网通讯连接并独立运行;所述引导服务模块用于结合应用场所内的全景图形给用户提供现场或电子的导航指引服务;所述咨询服务模块用于给用户提供咨询访问的通道并及时反馈查询结果;所述休闲娱乐模块用于给用户提娱乐性的音视频播放及互动服务;所述智能训练模块用于通过多种AI技术在与用户的互动过程中采集用户的行为信息并通过训练渲染后达到提升服务质量的效果。
作为本技术方案的进一步改进,所述引导服务模块的引导过程采用曼哈顿距离算法,其公式为:
d=|x1-x2|+|y1-y2|;
其中,d为装载有该系统的设备与目的位置之间的曼哈顿距离,(x1,y1)为目的位置的坐标,(x2,y2)为设备的实时位置坐标。
作为本技术方案的进一步改进,所述形象管理模块、所述交流会话模块、所述信息反馈模块与所述界面轮播模块依次通过以太网通讯连接并独立运行;所述形象管理模块用于管理交互系统在屏幕上向用户展示出的AI形象并给用户提供修改形象信息的通道;所述交流会话模块用于将系统与用户之间的语音交互信息以文字会话框的形式展示出来便于用户查看核验信息;所述信息反馈模块用于将用户查询的结果信息展示反馈给用户;所述界面轮播模块用于在系统处在非交互状态时控制显示界面轮流播示不同的资讯信息。
作为本技术方案的进一步改进,所述形象管理模块包括造型切换模块、声音类型模块、语言选择模块和情绪管理模块;所述造型切换模块、所述声音类型模块、所述语言选择模块与所述情绪管理模块依次通过以太网通讯连接;所述造型切换模块用于创建、保存多种AI形象造型并控制不同造型之间的平滑切换;所述声音类型模块用于创建或收录多种音频类型并控制不同声音类型之间的平滑切换;所述语言选择模块用于收录多种不同语种及本地方言并控制不同语言类型之间的平滑切换;所述情绪管理模块用于创建各种情绪模拟信息并将情绪信息按照交互情景智能地应用到AI形象上。
本发明的目的之二在于,提供了基于AI技术的智能互动系统装置,包括处理器、存储器以及存储在存储器中并在处理器上运行的计算机程序,处理器用于执行计算机程序时实现上述任一的基于AI技术的智能互动系统。
本发明的目的之三在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述任一的基于AI技术的智能互动系统。
本发明的目的之四在于,提供一种基于AI技术的智能互动设备,包括机壳,所述机壳的底部设有行走机构,所述行走机构上规则设有处理器、电源管理器和升降机构,所述机壳的正上方通过升降机构滑动连接有显示器,所述显示器的正面中间设有触控显示屏,所述触控显示屏的正上方设有摄像头,所述摄像头的一侧设有距离传感芯片,所述显示器的正面靠近下端处规则设有喇叭孔和收音孔,所述喇叭孔的后方设有扬声器,所述收音孔的后方设有录音器。
作为本技术方案的进一步改进,所述行走机构的底端规则设有若干滚轮,所述行走机构通过控制器与所述处理器连接。
作为本技术方案的进一步改进,所述升降机构包括电动推杆,所述电动推杆的顶端通过螺栓固定有滑动支撑板,所述滑动支撑板与所述机壳的顶壁滑动卡接,所述滑动支撑板的顶端通过螺钉固定在所述显示器的底面侧壁上,所述电动推杆通过控制器与所述处理器连接。
与现有技术相比,本发明的有益效果:
1.该基于AI技术的智能互动系统中,通过对外界环境进行多方面的状态采集,并充分应用到系统服务中,可以通过语音及触控等多种方式与用户进行互动,丰富系统功能,另外通过设置多样可选的AI形象,并通过多种AI技术在交互过程中智能学习改进,从而给用户提供更好的使用体验;
2.该基于AI技术的智能互动设备中,通过在设备底端设置行走机构,主控处理器可以通过控制器驱动行走机构运行,便于给用户提供精确的现场引导服务,同时通过在显示器底端设置升降机构,便于根据用户的身高调整显示屏的高度,适用于所有用户,给用户提供更加人性化的使用体感。
附图说明
图1为本发明中系统的示例性产品架构图;
图2为本发明中系统的整体装置示意图;
图3为本发明中系统的局部装置示意图之一;
图4为本发明中系统的局部装置示意图之二;
图5为本发明中系统的局部装置示意图之三;
图6为本发明中系统的局部装置示意图之四;
图7为本发明中系统的局部装置示意图之五;
图8为本发明中系统的局部装置示意图之六;
图9为本发明中设备的整体结构示意图;
图10为本发明中设备的局部半剖结构示意图。
图中各个标号意义为:
100、基础感知单元;101、视觉传感模块;102、听觉传感模块;103、触觉传感模块;104、距离传感模块;
200、功能分布单元;201、运动管理模块;202、电源管理模块;203、身份管理模块;204、语音交互模块;
300、应用管控单元;301、引导服务模块;302、咨询服务模块;303、休闲娱乐模块;304、智能训练模块;
400、屏显展示单元;401、形象管理模块;4011、造型切换模块;4012、声音类型模块;4013、语言选择模块;4014、情绪管理模块;402、交流会话模块;403、信息反馈模块;404、界面轮播模块;
1、机壳;
2、行走机构;21、滚轮;
3、处理器;
4、电源管理器;
5、升降机构;51、电动推杆;52、滑动支撑板;
6、显示器;61、触控显示屏;62、摄像头;63、距离传感芯片;64、喇叭孔;65、扬声器;66、收音孔;67、录音器;
7、云端数据库;
8、控制器。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
系统实施例
如图1-图8所示,本实施例提供一种基于AI技术的智能互动系统,包括
基础感知单元100、功能分布单元200、应用管控单元300和屏显展示单元400;基础感知单元100、功能分布单元200、应用管控单元300与屏显展示单元400依次通过以太网通讯连接且独立运行;基础感知单元100通过各传感器采集外界环境中的图像、声音等信息以建立人机交互的基础;功能分布单元200用于对系统包含的多种功能进行集中管控和分布管理;应用管控单元300用于将系统的各项功能分别应用到不同服务应用上;屏显展示单元400用于管理控制系统展示给用户的显示界面及其内容;
基础感知单元100包括视觉传感模块101、听觉传感模块102、触觉传感模块103和距离传感模块104;
功能分布单元200包括运动管理模块201、电源管理模块202、身份管理模块203和语音交互模块204;
应用管控单元300包括引导服务模块301、咨询服务模块302、休闲娱乐模块303和智能训练模块304;
屏显展示单元400包括形象管理模块401、交流会话模块402、信息反馈模块403和界面轮播模块404。
本实施例中,视觉传感模块101、听觉传感模块102、触觉传感模块103与距离传感模块104并列运行;视觉传感模块101用于通过摄像头实时采集外界环境及用户的图像、视频信息并反馈到处理器上;听觉传感模块102用于采集外界环境的声音信息并控制音频信息的播放;触觉传感模块103用于通过触摸屏实现用户触控系统的操作过程;距离传感模块104用于通过距离传感芯片实时测量装载有该系统的装置与外界物品之间的距离以避免发生碰撞。
其中,触觉传感模块103适用于无法发出清晰语音的用户,包括但不限于聋哑用户、普通话不标准的用户等。
其中,距离传感模块104可以避免装载有该系统的设备在运动过程中撞到用户或墙面上。
本实施例中,运动管理模块201、电源管理模块202、身份管理模块203与语音交互模块204依次通过以太网通讯连接并独立运行;运动管理模块201用于通过可编程控制器分别控制装载有该系统的设备的行走运动及摄像头的升降运动;电源管理模块202用于集中管理系统的电源分配;身份管理模块203用于采集用户的人脸信息并自动查找或记录用户的身份信息;语音交互模块204用于自动识别、分析用户的语音信息并及时以音频信息作出反应反馈。
其中,电源管理模块202在电能降低时可以控制装载有该系统的设备自动行走到特定位置进行充电操作。
其中,身份管理模块203用于记录保存用户的身份信息,系统在再次与用户交互时可以根据往期交互的内容预测用户的使用需求,给用户提供更智能、更人性化的使用体验。
本实施例中,引导服务模块301、咨询服务模块302、休闲娱乐模块303与智能训练模块304依次通过以太网通讯连接并独立运行;引导服务模块301用于结合应用场所内的全景图形给用户提供现场或电子的导航指引服务;咨询服务模块302用于给用户提供咨询访问的通道并及时反馈查询结果;休闲娱乐模块303用于给用户提娱乐性的音视频播放及互动服务;智能训练模块304用于通过多种AI技术在与用户的互动过程中采集用户的行为信息并通过训练渲染后达到提升服务质量的效果。
具体地,引导服务模块301的引导过程采用曼哈顿距离算法,其公式为:
d=|x1-x2|+|y1-y2|;
其中,d为装载有该系统的设备与目的位置之间的曼哈顿距离,(x1,y1)为目的位置的坐标,(x2,y2)为设备的实时位置坐标。
其中,休闲娱乐的项目包括但不限于音乐、电影、动画的播放,讲笑话等。
其中,智能训练模块304中,应用到的AI算法技术包括但不限于ASR、TTS、QA、面部跟踪、面部重塑面部跟踪渲染等。
本实施例中,形象管理模块401、交流会话模块402、信息反馈模块403与界面轮播模块404依次通过以太网通讯连接并独立运行;形象管理模块401用于管理交互系统在屏幕上向用户展示出的AI形象并给用户提供修改形象信息的通道;交流会话模块402用于将系统与用户之间的语音交互信息以文字会话框的形式展示出来便于用户查看核验信息;信息反馈模块403用于将用户查询的结果信息展示反馈给用户;界面轮播模块404用于在系统处在非交互状态时控制显示界面轮流播示不同的资讯信息。
本实施例中,形象管理模块401包括造型切换模块4011、声音类型模块4012、语言选择模块4013和情绪管理模块4014;造型切换模块4011、声音类型模块4012、语言选择模块4013与情绪管理模块4014依次通过以太网通讯连接;造型切换模块4011用于创建、保存多种AI形象造型并控制不同造型之间的平滑切换;声音类型模块4012用于创建或收录多种音频类型并控制不同声音类型之间的平滑切换;语言选择模块4013用于收录多种不同语种及本地方言并控制不同语言类型之间的平滑切换;情绪管理模块4014用于创建各种情绪模拟信息并将情绪信息按照交互情景智能地应用到AI形象上。
其中,AI形象造型包括但不限于卡通人物造型、AI机器人造型、真人造型等。
其中,声音类型包括男声、女声、童声、电子音及部分广泛受到人们喜爱的明星的模拟声音。
电子设备及计算机程序产品实施例
参阅图1,示出了该基于AI技术的智能互动系统的示例性产品架构图。
参阅图8,示出了基于AI技术的智能互动系统装置结构示意图,该装置包括处理器、存储器以及存储在存储器中并在处理器上运行的计算机程序。
处理器包括一个或一个以上处理核心,处理器通过总线与处理器相连,存储器用于存储程序指令,处理器执行存储器中的程序指令时实现上述的基于AI技术的智能互动系统。
可选的,存储器可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随时存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
此外,本发明还提供计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述的基于AI技术的智能互动系统。
可选的,本发明还提供了包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述各方面基于AI技术的智能互动系统备。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,程序可以存储与计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
设备实施例1
如图9-图10所示,本实施例提供一种基于AI技术的智能互动设备,包括机壳1,机壳1的底部设有行走机构2,行走机构2上规则设有处理器3、电源管理器4和升降机构5,机壳1的正上方通过升降机构5滑动连接有显示器6,显示器6的正面中间设有触控显示屏61,触控显示屏61的正上方设有摄像头62,摄像头62的一侧设有距离传感芯片63,显示器6的正面靠近下端处规则设有喇叭孔64和收音孔66,喇叭孔64的后方设有扬声器65,收音孔66的后方设有录音器67。
本实施例中,处理器3外还配套设有存储器,存储器用于存储计算机程序,该计算机程序与上述基于AI技术的智能互动系统相匹配且能被处理器3执行。
具体地,显示器6通过VGA线与处理器3信号连接,摄像头62、扬声器65及录音器67分别通过导线与处理器3电性连接。
设备实施例2
如图9-图10所示,本实施例在设备实施例1的基础上提供一种基于AI技术的智能互动设备,包括机壳1,机壳1的底部设有行走机构2,行走机构2上规则设有处理器3、电源管理器4和升降机构5,机壳1的正上方通过升降机构5滑动连接有显示器6,显示器6的正面中间设有触控显示屏61,触控显示屏61的正上方设有摄像头62,摄像头62的一侧设有距离传感芯片63,显示器6的正面靠近下端处规则设有喇叭孔64和收音孔66,喇叭孔64的后方设有扬声器65,收音孔66的后方设有录音器67。
本实施例中,处理器3外还配套设有存储器,存储器用于存储计算机程序,该计算机程序与上述基于AI技术的智能互动系统相匹配且能被处理器3执行。
具体地,显示器6通过VGA线与处理器3信号连接,摄像头62、扬声器65及录音器67分别通过导线与处理器3电性连接。
本实施例中,行走机构2的底端规则设有若干滚轮21。
具体地,滚轮21的数量优选为四个,其中两个滚轮21为驱动轮,另外两个滚轮21为从动轮,便于通过控制驱动轮来管理行走机构2的运动,使行走机构2平整稳固。
进一步地,行走机构2上还应配备有驱动器、驱动轴,行走机构2的结构及工作原理均如同本领域技术人员所公知的那样,在此不做赘述。
具体地,行走机构2通过控制器8与处理器3连接,处理器3智能地分析行走路线,并通过控制器8控制行走机构2的启停过程。
设备实施例3
如图9-图10所示,本实施例在设备实施例2的基础上提供一种基于AI技术的智能互动设备,包括机壳1,机壳1的底部设有行走机构2,行走机构2上规则设有处理器3、电源管理器4和升降机构5,机壳1的正上方通过升降机构5滑动连接有显示器6,显示器6的正面中间设有触控显示屏61,触控显示屏61的正上方设有摄像头62,摄像头62的一侧设有距离传感芯片63,显示器6的正面靠近下端处规则设有喇叭孔64和收音孔66,喇叭孔64的后方设有扬声器65,收音孔66的后方设有录音器67。
本实施例中,处理器3外还配套设有存储器,存储器用于存储计算机程序,该计算机程序与上述基于AI技术的智能互动系统相匹配且能被处理器3执行。
具体地,显示器6通过VGA线与处理器3信号连接,摄像头62、扬声器65及录音器67分别通过导线与处理器3电性连接。
本实施例中,行走机构2的底端规则设有若干滚轮21。
具体地,滚轮21的数量优选为四个,其中两个滚轮21为驱动轮,另外两个滚轮21为从动轮,便于通过控制驱动轮来管理行走机构2的运动,使行走机构2平整稳固。
进一步地,行走机构2上还应配备有驱动器、驱动轴,行走机构2的结构及工作原理均如同本领域技术人员所公知的那样,在此不做赘述。
具体地,行走机构2通过控制器8与处理器3连接,处理器3智能地分析行走路线,并通过控制器8控制行走机构2的启停过程。
本实施例中,升降机构5包括电动推杆51,电动推杆51的顶端通过螺栓固定有滑动支撑板52。
进一步地,滑动支撑板52与机壳1的顶壁滑动卡接。
具体地,机壳1的顶壁中间设有与滑动支撑板52横向截面形状、尺寸均相匹配的槽口;其中,值得说明的是,该槽口的尺寸优选为大于滑动支撑板52的横向截面尺寸,便于进行处理器3与显示器6之间的连线布置。
进一步地,滑动支撑板52的顶端通过螺钉固定在显示器6的底面侧壁上,显示器6通过滑动支撑板52与电动推杆51上下连接,电动推杆51的伸缩杆伸缩过程中,滑动支撑板52带着显示器6随着伸缩杆的运行上下活动,进而实现显示器6高度可调的效果。
具体地,电动推杆51通过控制器8与处理器3连接,处理器3根据用户的图像信息分析其身高,通过控制器8控制电动推杆51的伸缩调节显示器6的高度,使其与用户的身高相适配,给用户提供更舒适的使用体感。
方法实施例
本实施例的目的在于,提供一种基于AI技术的智能互动系统及设备的示例性运行方法,包括如下步骤:
S1、系统自动在显示屏上展示唤起的文字提示,用户根据文字提示通过语音唤起系统或通过触屏唤起系统;
S2、距离传感芯片63检测到用户靠近设备时通过距离传感模块104将采集到的距离参数发送到处理,3,同时摄像头62拍摄采集用户的图像信息,存储并反馈到处理器3,处理器3根据采集到的距离参数及用户图像信息分析用户的身高,然后运动管理模块201通过向控制器8发出工作指令来控制电动推杆51运行,电动推杆51的伸缩杆活动使显示器6调节到符合用户身高的位置;
S3、用户通过触屏或语音向设备发出操控指令,处理器3接收并分析用户的指令信息并及时作出回应,用户可以通过形象管理模块401对系统展示的AI形象及声音、语言等进行修改,AI形象在与用户交互过程中,通过情绪管理模块4014自动应用符合情景的模拟情绪;
S4、用户通过语音与系统交互时,处理器3通过听觉传感模块102对用户的语音进行识别并及时回复,同时通过交流会话模块402将用户及系统的回复信息以文字对话框的模式展示在显示屏上;
S5、当用户发起信息咨询时,处理器通过咨询服务模块302自动提取用户咨询的关键词并在与该系统通过无线数据传输技术连接的云端数据库7中搜索相关信息,而后通过信息反馈模块403将搜索结果展示在显示屏上;
S6、当用户发起地点咨询时,引导服务模块301结合所处场所的全面地图,通过屏显展示单元400将导航显示的路线图展示给用户,当用户发出导航请求时,引导服务模块301将工作指令与路线图信息数据同时传输到运动管理模块201上,运动管理模块201通过向控制器8发出工作指令来驱动行走机构2行走,给用户提供现场的导航引导服务,其在行走过程中,距离传感模块104通过距离传感芯片63时刻测量距离信息,避免设备与用户或其他物品之间发生碰撞;
S7、当用户发出休闲指令时,系统根据用户的需求,休闲娱乐模块303提取用户指令中的关键词后,自动播放符合用户需求的音视频等信息;
S8、当系统在一定时间段内未接收到用户的任何指令,则界面轮播模块404自动运行,在显示器6上自动轮流播放AI形象、广告、实时资讯等画面;
S9、系统与用户第一次接触时,身份管理模块203自动记录用户的人脸信息,再次与用户接触时,身份管理模块203根据用户的图像信息在记录用户身份的数据库中对比确认用户信息,并经应用管控单元300根据用户身份在系统自动保存的历史工作记录中自动搜寻与该用户的往期交互记录,并智能地主动咨询用户的需求;
S10、系统在处于非交互状态时,电源管理模块202可以自动降低电能输出,当电源管理模块202检测到系统设备电量较低时,电源管理模块202将需要充电的指令信息传输到运动管理模块201,处理器3通过运动管理模块201向控制器8发出工作指令驱动行走机构2运行到特定位置,而后电源管理模块202自动进行充电操作。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的仅为本发明的优选例,并不用来限制本发明,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。

Claims (6)

1.一种基于AI技术的智能互动系统,其特征在于:包括
基础感知单元(100)、功能分布单元(200)、应用管控单元(300)和屏显展示单元(400);所述基础感知单元(100)、所述功能分布单元(200)、所述应用管控单元(300)与所述屏显展示单元(400)依次通过以太网通讯连接且独立运行;所述基础感知单元(100)通过各传感器采集外界环境中的图像、声音信息以建立人机交互的基础;所述功能分布单元(200)用于对系统包含的多种功能进行集中管控和分布管理;所述应用管控单元(300)用于将系统的各项功能分别应用到不同服务应用上;所述屏显展示单元(400)用于管理控制系统展示给用户的显示界面及其内容;
所述基础感知单元(100)包括视觉传感模块(101)、听觉传感模块(102)、触觉传感模块(103)和距离传感模块(104);
所述功能分布单元(200)包括运动管理模块(201)、电源管理模块(202)、身份管理模块(203)和语音交互模块(204);
所述应用管控单元(300)包括引导服务模块(301)、咨询服务模块(302)、休闲娱乐模块(303)和智能训练模块(304);
所述屏显展示单元(400)包括形象管理模块(401)、交流会话模块(402)、信息反馈模块(403)和界面轮播模块(404);
所述引导服务模块(301)、所述咨询服务模块(302)、所述休闲娱乐模块(303)与所述智能训练模块(304)依次通过以太网通讯连接并独立运行;所述引导服务模块(301)用于结合应用场所内的全景图形给用户提供现场或电子的导航指引服务;所述咨询服务模块(302)用于给用户提供咨询访问的通道并及时反馈查询结果;所述休闲娱乐模块(303)用于给用户提娱乐性的音视频播放及互动服务;所述智能训练模块(304)用于通过多种AI技术在与用户的互动过程中采集用户的行为信息并通过训练渲染后达到提升服务质量的效果;
所述引导服务模块(301)的引导过程采用曼哈顿距离算法,其公式为:
Figure QLYQS_1
其中,/>
Figure QLYQS_2
为装载有该系统的设备与目的位置之间的曼哈顿距离,/>
Figure QLYQS_3
为目的位置的坐标,/>
Figure QLYQS_4
为设备的实时位置坐标;
所述形象管理模块(401)、所述交流会话模块(402)、所述信息反馈模块(403)与所述界面轮播模块(404)依次通过以太网通讯连接并独立运行;所述形象管理模块(401)用于管理交互系统在屏幕上向用户展示出的AI形象并给用户提供修改形象信息的通道;所述交流会话模块(402)用于将系统与用户之间的语音交互信息以文字会话框的形式展示出来便于用户查看核验信息;所述信息反馈模块(403)用于将用户查询的结果信息展示反馈给用户;所述界面轮播模块(404)用于在系统处在非交互状态时控制显示界面轮流播示不同的资讯信息;
所述形象管理模块(401)包括造型切换模块(4011)、声音类型模块(4012)、语言选择模块(4013)和情绪管理模块(4014);所述造型切换模块(4011)、所述声音类型模块(4012)、所述语言选择模块(4013)与所述情绪管理模块(4014)依次通过以太网通讯连接;所述造型切换模块(4011)用于创建、保存多种AI形象造型并控制不同造型之间的平滑切换;所述声音类型模块(4012)用于创建或收录多种音频类型并控制不同声音类型之间的平滑切换;所述语言选择模块(4013)用于收录多种不同语种及本地方言并控制不同语言类型之间的平滑切换;所述情绪管理模块(4014)用于创建各种情绪模拟信息并将情绪信息按照交互情景智能地应用到AI形象上。
2.根据权利要求1所述的基于AI技术的智能互动系统,其特征在于:所述视觉传感模块(101)、所述听觉传感模块(102)、所述触觉传感模块(103)与所述距离传感模块(104)并列运行;所述视觉传感模块(101)用于通过摄像头实时采集外界环境及用户的图像、视频信息并反馈到处理器上;所述听觉传感模块(102)用于采集外界环境的声音信息并控制音频信息的播放;所述触觉传感模块(103)用于通过触摸屏实现用户触控系统的操作过程;所述距离传感模块(104)用于通过距离传感芯片实时测量装载有该系统的装置与外界物品之间的距离以避免发生碰撞。
3.根据权利要求1所述的基于AI技术的智能互动系统,其特征在于:所述运动管理模块(201)、所述电源管理模块(202)、所述身份管理模块(203)与所述语音交互模块(204)依次通过以太网通讯连接并独立运行;所述运动管理模块(201)用于通过可编程控制器分别控制装载有该系统的设备的行走运动及摄像头的升降运动;所述电源管理模块(202)用于集中管理系统的电源分配;所述身份管理模块(203)用于采集用户的人脸信息并自动查找或记录用户的身份信息;所述语音交互模块(204)用于自动识别、分析用户的语音信息并及时以音频信息作出反应反馈。
4.一种基于AI技术的智能互动设备,其特征在于:该设备作为与权利要求1-3任一项所述的基于AI技术的智能互动系统匹配的计算机程序的载体,包括机壳(1),所述机壳(1)的底部设有行走机构(2),所述行走机构(2)上规则设有处理器(3)、电源管理器(4)和升降机构(5),所述机壳(1)的正上方通过升降机构(5)滑动连接有显示器(6),所述显示器(6)的正面中间设有触控显示屏(61),所述触控显示屏(61)的正上方设有摄像头(62),所述摄像头(62)的一侧设有距离传感芯片(63),所述显示器(6)的正面靠近下端处规则设有喇叭孔(64)和收音孔(66),所述喇叭孔(64)的后方设有扬声器(65),所述收音孔(66)的后方设有录音器(67)。
5.根据权利要求4所述的基于AI技术的智能互动设备,其特征在于:所述行走机构(2)的底端规则设有若干滚轮(21),所述行走机构(2)通过控制器(8)与所述处理器(3)连接。
6.根据权利要求4所述的基于AI技术的智能互动设备,其特征在于:所述升降机构(5)包括电动推杆(51),所述电动推杆(51)的顶端通过螺栓固定有滑动支撑板(52),所述滑动支撑板(52)与所述机壳(1)的顶壁滑动卡接,所述滑动支撑板(52)的顶端通过螺钉固定在所述显示器(6)的底面侧壁上,所述电动推杆(51)通过控制器(8)与所述处理器(3)连接。
CN202110149917.8A 2021-02-03 2021-02-03 一种基于ai技术的智能互动系统及设备 Active CN112860064B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110149917.8A CN112860064B (zh) 2021-02-03 2021-02-03 一种基于ai技术的智能互动系统及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110149917.8A CN112860064B (zh) 2021-02-03 2021-02-03 一种基于ai技术的智能互动系统及设备

Publications (2)

Publication Number Publication Date
CN112860064A CN112860064A (zh) 2021-05-28
CN112860064B true CN112860064B (zh) 2023-06-30

Family

ID=75987675

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110149917.8A Active CN112860064B (zh) 2021-02-03 2021-02-03 一种基于ai技术的智能互动系统及设备

Country Status (1)

Country Link
CN (1) CN112860064B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114179083B (zh) * 2021-12-10 2024-03-15 北京云迹科技股份有限公司 一种引领机器人语音信息的生成方法、装置和引领机器人
CN115294896B (zh) * 2022-08-15 2024-05-03 广州视通网络科技有限公司 一种基于ai的智能音视频互动装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105824970A (zh) * 2016-04-12 2016-08-03 华南师范大学 基于大数据知识库和用户反馈的机器人交互方法和系统
WO2017206493A1 (zh) * 2016-05-30 2017-12-07 北京百度网讯科技有限公司 基于人工智能的物联网实现系统和方法
CN108470533A (zh) * 2018-03-30 2018-08-31 南京七奇智能科技有限公司 基于虚拟人的增强型智能交互广告系统及装置
CN108873707A (zh) * 2017-05-10 2018-11-23 杭州欧维客信息科技股份有限公司 语音智能控制系统
CN111313551A (zh) * 2020-03-05 2020-06-19 广东电网有限责任公司计量中心 一种基于智能用电网络的多元用户友好互动用电系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105824970A (zh) * 2016-04-12 2016-08-03 华南师范大学 基于大数据知识库和用户反馈的机器人交互方法和系统
WO2017206493A1 (zh) * 2016-05-30 2017-12-07 北京百度网讯科技有限公司 基于人工智能的物联网实现系统和方法
CN108873707A (zh) * 2017-05-10 2018-11-23 杭州欧维客信息科技股份有限公司 语音智能控制系统
CN108470533A (zh) * 2018-03-30 2018-08-31 南京七奇智能科技有限公司 基于虚拟人的增强型智能交互广告系统及装置
CN111313551A (zh) * 2020-03-05 2020-06-19 广东电网有限责任公司计量中心 一种基于智能用电网络的多元用户友好互动用电系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
人工智能语境下的情感交互设计研究;祝明;;数码世界(第06期);全文 *

Also Published As

Publication number Publication date
CN112860064A (zh) 2021-05-28

Similar Documents

Publication Publication Date Title
US11605193B2 (en) Artificial intelligence-based animation character drive method and related apparatus
US11858118B2 (en) Robot, server, and human-machine interaction method
TWI778477B (zh) 互動方法、裝置、電子設備以及儲存媒體
US11765439B2 (en) Intelligent commentary generation and playing methods, apparatuses, and devices, and computer storage medium
CN112860064B (zh) 一种基于ai技术的智能互动系统及设备
US11504856B2 (en) System and method for selective animatronic peripheral response for human machine dialogue
CN112162628A (zh) 基于虚拟角色的多模态交互方法、装置及系统、存储介质、终端
US11017551B2 (en) System and method for identifying a point of interest based on intersecting visual trajectories
CN108877336A (zh) 基于增强现实技术的教学方法、云服务平台和教学系统
CN107300970A (zh) 虚拟现实交互方法和装置
CN105093986A (zh) 基于人工智能的拟人机器人控制方法、系统及拟人机器人
CN104298722A (zh) 多媒体交互系统及其方法
US20210205987A1 (en) System and method for dynamic robot configuration for enhanced digital experiences
US20140002464A1 (en) Support and complement device, support and complement method, and recording medium
CN110598576A (zh) 一种手语交互方法、装置及计算机介质
US11308312B2 (en) System and method for reconstructing unoccupied 3D space
US20190251350A1 (en) System and method for inferring scenes based on visual context-free grammar model
WO2023030010A1 (zh) 交互方法、电子设备及存储介质
CN113760100B (zh) 一种带有虚拟形象生成、显示和控制功能的人机交互设备
JP7278307B2 (ja) コンピュータプログラム、サーバ装置、端末装置及び表示方法
CN109343695A (zh) 基于虚拟人行为标准的交互方法及系统
CN113436602A (zh) 虚拟形象语音交互方法、装置、投影设备和计算机介质
US20190248012A1 (en) System and method for dynamic program configuration
CN112669422A (zh) 仿真3d数字人生成方法、装置、电子设备及存储介质
CN113196390A (zh) 一种基于听觉的感知系统及其使用方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant