CN109036392A - 机器人交互系统 - Google Patents

机器人交互系统 Download PDF

Info

Publication number
CN109036392A
CN109036392A CN201810549123.9A CN201810549123A CN109036392A CN 109036392 A CN109036392 A CN 109036392A CN 201810549123 A CN201810549123 A CN 201810549123A CN 109036392 A CN109036392 A CN 109036392A
Authority
CN
China
Prior art keywords
user
robot
module
controller
interactive system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810549123.9A
Other languages
English (en)
Inventor
陈琦
许壮志
陈志军
占文
白云飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhu Xingtu Robot Technology Co Ltd
Original Assignee
Wuhu Xingtu Robot Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhu Xingtu Robot Technology Co Ltd filed Critical Wuhu Xingtu Robot Technology Co Ltd
Priority to CN201810549123.9A priority Critical patent/CN109036392A/zh
Publication of CN109036392A publication Critical patent/CN109036392A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0005Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231Biological data, e.g. fingerprint, voice or retina
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3234Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials involving additional secure or trusted devices, e.g. TPM, smartcard, USB or software token
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Abstract

本发明公开了一种机器人交互系统,包括:控制器、语音采集模块、3D摄像头、麦克风阵列模块以及扬声器;语音采集模块通过语音识别模块与控制器相连,3D摄像头、麦克风阵列模块以及麦克风分别与控制器相连;语音采集模块用于采集用户的语音,语音识别模块用于将用户的语音转换成数字信号,控制器通过云端服务器搜索给予用户的答案,并且通过扬声器与用户进行语音交流;麦克风阵列模块用于检测用户的发声位置,从而通过舵机驱动机器人本体转动至面朝用户,3D摄像头用于获取用户的图像信息。该机器人交互系统克服现有技术中的机器人语音交互系统功能简单,而且不够任性化,从而导致客户与其之间的交互体验差的问题。

Description

机器人交互系统
技术领域
本发明涉及智能机器人领域,具体地,涉及一种机器人交互系统。
背景技术
机器人(Robot)是自动执行工作的机器装置。它既可以接受人类指挥,又可以运行预先编排的程序,也可以根据以人工智能技术制定的原则纲领行动,随着社会的发展,机器人的技术也得到了飞速地发展,因此,机器人的应用也越来越普遍了,对于机器人设计也各种各样。
机器人中有一类称为服务型机器人,一般用于服务行业来对客户进行专职服务的,所以对人性化地要求较高。
但是现有技术中的机器人语音交互系统功能简单,而且不够任性化,从而导致客户与其之间的交互体验差。
因此,提供一种在使用过程中可以智能识别用户的身份,根据不同的用户习惯,与其进行不同的交互,从而使得客户的体验更好的机器人交互系统是本发明亟需解决的问题。
发明内容
根据上述技术问题,本发明的目的是克服现有技术中的机器人语音交互系统功能简单,而且不够任性化,从而导致客户与其之间的交互体验差的问题,从而提供一种在使用过程中可以智能识别用户的身份,根据不同的用户习惯,与其进行不同的交互,从而使得客户的体验更好的机器人交互系统。
为了实现上述目的,本发明提供了一种机器人交互系统,所述机器人交互系统包括:控制器、语音采集模块、3D摄像头、麦克风阵列模块以及扬声器;所述语音采集模块通过语音识别模块与所述控制器相连,所述3D摄像头、所述麦克风阵列模块以及所述扬声器分别与所述控制器相连;其中,所述语音采集模块用于采集用户的语音,所述语音识别模块用于将用户的语音转换成数字信号,所述控制器通过云端服务器搜索给予用户的答案,并且通过所述扬声器与用户进行语音交流;所述麦克风阵列模块用于检测用户的发声位置,从而通过舵机驱动机器人本体转动至面朝用户,所述3D摄像头用于获取用户的图像信息。
优选地,所述控制器采用RK3399处理器。
优选地,所述控制器与所述麦克风之间还设置有功放,所述功放用于控制机器人的发声强度以及语速。
优选地,所述机器人交互系统还包括信息采集模块,所述信息采集模块通过VIP认证模块与所述控制器相连,所述VIP认证模块用于识别VIP客户的身份。
优选地,所述信息采集模块包括:刷卡器和指纹识别器。
优选地,所述控制器上还连接有VIP信息库模块,用于存储VIP客户的信息。
优选地,所述控制器上还连接有显示模块,所述显示模块用于显示机器人的说话信息。
优选地,所述显示模块至少包括两块显示器,一块用于显示信息,另一块为触摸型,给予用户操作使用。
根据上述技术方案,本发明提供的机器人交互系统在使用时,利用所述语音采集模块采集用户的语音信息,所述语音识别模块用于将用户的语音转换成数字信号,所述控制器通过云端服务器搜索给予用户的答案,并且通过所述扬声器与用户进行语音交流,为了使得人机交互更加的人性化,本发明中利用所述麦克风阵列模块检测用户的发声位置,从而将机器人本体转动至面朝用户,从而和用户进行面对面交流,所述3D摄像头用于获取用户的图像信息,从而获取用户的信息以及确定用户的准确位置,从而将机器人本体调节至合适的位置与用户进行交流,使得用户的交互体验更好。本发明提供的机器人交互系统克服现有技术中的机器人语音交互系统功能简单,而且不够任性化,从而导致客户与其之间的交互体验差的问题。
本发明的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本发明的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本发明,但并不构成对本发明的限制。在附图中:
图1是本发明的一种优选的实施方式中提供的机器人交互系统的结构示意图。
具体实施方式
以下结合附图对本发明的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本发明,并不用于限制本发明。
如图1所示,本发明提供了一种机器人交互系统,所述机器人交互系统包括:控制器、语音采集模块、3D摄像头、麦克风阵列模块以及扬声器;所述语音采集模块通过语音识别模块与所述控制器相连,所述3D摄像头、所述麦克风阵列模块以及所述扬声器分别与所述控制器相连;其中,所述语音采集模块用于采集用户的语音,所述语音识别模块用于将用户的语音转换成数字信号,所述控制器通过云端服务器搜索给予用户的答案,并且通过所述扬声器与用户进行语音交流;所述麦克风阵列模块用于检测用户的发声位置,从而通过舵机驱动机器人本体转动至面朝用户,所述3D摄像头用于获取用户的图像信息。
根据上述技术方案,本发明提供的机器人交互系统在使用时,利用所述语音采集模块采集用户的语音信息,所述语音识别模块用于将用户的语音转换成数字信号,所述控制器通过云端服务器搜索给予用户的答案,并且通过所述扬声器与用户进行语音交流,为了使得人机交互更加的人性化,本发明中利用所述麦克风阵列模块检测用户的发声位置,从而将机器人本体转动至面朝用户,从而和用户进行面对面交流,所述3D摄像头用于获取用户的图像信息,从而获取用户的信息以及确定用户的准确位置,从而将机器人本体调节至合适的位置与用户进行交流,使得用户的交互体验更好。本发明提供的机器人交互系统克服现有技术中的机器人语音交互系统功能简单,而且不够任性化,从而导致客户与其之间的交互体验差的问题。
在本发明的一种优选的实施方式中,所述控制器采用RK3399处理器,该处理器处理速度快,处理能力高。
在本发明的一种优选的实施方式中,所述控制器与所述麦克风之间还设置有机器人发声控制器,所述机器人发声控制器用于控制机器人的发声强度以及语速,所述机器人发声控制器使得机器人的发声更加的多元化,不至于死板,给予用户一种更加良好的互动体验,所述机器人发声控制器为功放。
在本发明的一种优选的实施方式中,所述机器人交互系统还包括信息采集模块,所述信息采集模块通过VIP认证模块与所述控制器相连,所述VIP认证模块用于识别VIP客户的身份,本发明的机器人为服务型机器人,所以针对VIP客户需要提高更好良好地服务,本发明中利用所述信息采集模块采集用户的信息,从而判断是否是VIP客户。
在本发明的一种优选的实施方式中,所述信息采集模块包括:刷卡器和指纹识别器,利用所述刷卡器和指纹识别器可以有效地采集用户的信息,从而可以准确地判断用户是否为VIP客户。
在本发明的一种优选的实施方式中,所述控制器上还练级有VIP信息库模块,用于存储VIP客户的信息,针对VIP客户,系统可以通过所述VIP信息库模块获取客户的喜好以及性格特点,从而通过所述机器人发声控制器发出客户喜好的声音以及语速等,使得用户的交互体验更好。
在本发明的一种优选的实施方式中,所述控制器上还连接有显示模块,所述显示模块用于显示机器人的说话信息,用户可以通过所述显示模块了解机器人的说话信息,防止机器人发声过于模糊,用户无法明白它的意思。
在本发明的一种优选的实施方式中,所述显示模块至少包括两块显示器,一块用于显示信息,另一块为触摸型,给予用户操作使用。两块不同功能的显示器给予用户更加方便的交互,使得其体验更好。
以上结合附图详细描述了本发明的优选实施方式,但是,本发明并不限于上述实施方式中的具体细节,在本发明的技术构思范围内,可以对本发明的技术方案进行多种简单变型,这些简单变型均属于本发明的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本发明对各种可能的组合方式不再另行说明。
此外,本发明的各种不同的实施方式之间也可以进行任意组合,只要其不违背本发明的思想,其同样应当视为本发明所公开的内容。

Claims (8)

1.一种机器人交互系统,其特征在于,所述机器人交互系统包括:控制器、语音采集模块、3D摄像头、麦克风阵列模块以及扬声器;
所述语音采集模块通过语音识别模块与所述控制器相连,所述3D摄像头、所述麦克风阵列模块以及所述扬声器分别与所述控制器相连;其中,
所述语音采集模块用于采集用户的语音,所述语音识别模块用于将用户的语音转换成数字信号,所述控制器通过云端服务器搜索给予用户的答案,并且通过所述扬声器与用户进行语音交流;所述麦克风阵列模块用于检测用户的发声位置,从而通过舵机驱动机器人本体转动至面朝用户,所述3D摄像头用于获取用户的图像信息。
2.根据权利要求1所述的机器人交互系统,其特征在于,所述控制器采用RK3399处理器。
3.根据权利要求1所述的机器人交互系统,其特征在于,所述控制器与所述麦克风之间还设置有功放,所述功放用于控制机器人的发声强度以及语速。
4.根据权利要求3所述的机器人交互系统,其特征在于,所述机器人交互系统还包括信息采集模块,所述信息采集模块通过VIP认证模块与所述控制器相连,所述VIP认证模块用于识别VIP客户的身份。
5.根据权利要求4所述的机器人交互系统,其特征在于,所述信息采集模块包括:刷卡器和指纹识别器。
6.根据权利要求4所述的机器人交互系统,其特征在于,所述控制器上还连接有VIP信息库模块,用于存储VIP客户的信息。
7.根据权利要求1所述的机器人交互系统,其特征在于,所述控制器上还连接有显示模块,所述显示模块用于显示机器人的说话信息。
8.根据权利要求7所述的机器人交互系统,其特征在于,所述显示模块至少包括两块显示器,一块用于显示信息,另一块为触摸型,给予用户操作使用。
CN201810549123.9A 2018-05-31 2018-05-31 机器人交互系统 Pending CN109036392A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810549123.9A CN109036392A (zh) 2018-05-31 2018-05-31 机器人交互系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810549123.9A CN109036392A (zh) 2018-05-31 2018-05-31 机器人交互系统

Publications (1)

Publication Number Publication Date
CN109036392A true CN109036392A (zh) 2018-12-18

Family

ID=64611754

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810549123.9A Pending CN109036392A (zh) 2018-05-31 2018-05-31 机器人交互系统

Country Status (1)

Country Link
CN (1) CN109036392A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109920424A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN109920425A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN112420045A (zh) * 2020-12-11 2021-02-26 奇瑞汽车股份有限公司 一种汽车车载语音交互系统及方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100168914A1 (en) * 2008-12-29 2010-07-01 Electronics And Telecommunications Research Institute Diagnosis and management server for multi-kinds robots
CN205942833U (zh) * 2016-07-15 2017-02-08 杭州国辰机器人科技有限公司 一种可用于物业管理中的机器人智能系统
CN106570491A (zh) * 2016-11-11 2017-04-19 华南智能机器人创新研究院 一种机器人智能互动的方法及智能机器人
CN106737724A (zh) * 2016-11-29 2017-05-31 上海小持智能科技有限公司 一种家庭社交服务型机器人系统
CN107358950A (zh) * 2017-05-27 2017-11-17 芜湖星途机器人科技有限公司 服务机器人语音交互系统
CN107511832A (zh) * 2016-06-15 2017-12-26 深圳光启合众科技有限公司 云端互动系统及其多感知型智能机器人和感知互动方法
CN206795817U (zh) * 2017-05-03 2017-12-26 山东大学 一种基于多生物识别信息的银行业务助理机器人
CN206991377U (zh) * 2017-05-17 2018-02-09 黑龙江大学 用于客户信息管理的机器人

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100168914A1 (en) * 2008-12-29 2010-07-01 Electronics And Telecommunications Research Institute Diagnosis and management server for multi-kinds robots
CN107511832A (zh) * 2016-06-15 2017-12-26 深圳光启合众科技有限公司 云端互动系统及其多感知型智能机器人和感知互动方法
CN205942833U (zh) * 2016-07-15 2017-02-08 杭州国辰机器人科技有限公司 一种可用于物业管理中的机器人智能系统
CN106570491A (zh) * 2016-11-11 2017-04-19 华南智能机器人创新研究院 一种机器人智能互动的方法及智能机器人
CN106737724A (zh) * 2016-11-29 2017-05-31 上海小持智能科技有限公司 一种家庭社交服务型机器人系统
CN206795817U (zh) * 2017-05-03 2017-12-26 山东大学 一种基于多生物识别信息的银行业务助理机器人
CN206991377U (zh) * 2017-05-17 2018-02-09 黑龙江大学 用于客户信息管理的机器人
CN107358950A (zh) * 2017-05-27 2017-11-17 芜湖星途机器人科技有限公司 服务机器人语音交互系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109920424A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN109920425A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN109920425B (zh) * 2019-04-03 2021-11-12 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN112420045A (zh) * 2020-12-11 2021-02-26 奇瑞汽车股份有限公司 一种汽车车载语音交互系统及方法

Similar Documents

Publication Publication Date Title
CN108073600B (zh) 一种智能问答交互方法、装置以及电子设备
US11430438B2 (en) Electronic device providing response corresponding to user conversation style and emotion and method of operating same
CN107591155B (zh) 语音识别方法及装置、终端及计算机可读存储介质
KR20190022109A (ko) 음성 인식 서비스를 활성화하는 방법 및 이를 구현한 전자 장치
CN108922564B (zh) 情绪识别方法、装置、计算机设备及存储介质
CN105320726A (zh) 降低对手动开始/结束点和触发短语的需求
CN109036392A (zh) 机器人交互系统
CN108664472A (zh) 自然语言处理方法、装置及其设备
KR20190046631A (ko) 자연어 프로세싱을 위한 시스템 및 방법
WO2016132729A1 (ja) ロボット制御装置、ロボット、ロボット制御方法およびプログラム記録媒体
Trafton et al. Integrating vision and audition within a cognitive architecture to track conversations
CN107398900A (zh) 机器人识别人体后主动跟随系统
CN110706707B (zh) 用于语音交互的方法、装置、设备和计算机可读存储介质
CN111178081B (zh) 语义识别的方法、服务器、电子设备及计算机存储介质
CN103680505A (zh) 语音识别方法及系统
US20210183388A1 (en) Voice recognition method and device, photographing system, and computer-readable storage medium
EP4310838A1 (en) Speech wakeup method and apparatus, and storage medium and system
EP3776171A1 (en) Non-disruptive nui command
CN111429924A (zh) 语音交互方法、装置、机器人及计算机可读存储介质
CN113703585A (zh) 交互方法、装置、电子设备及存储介质
CN107452381B (zh) 一种多媒体语音识别装置及方法
CN111370004A (zh) 人机交互方法、语音处理方法及设备
CN104077105A (zh) 一种信息处理方法以及一种电子设备
WO2023231211A1 (zh) 语音识别方法、装置、电子设备、存储介质及产品
US20200202738A1 (en) Robot and method of controlling the same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181218