CN106681483A - 一种智能设备的交互方法及系统 - Google Patents
一种智能设备的交互方法及系统 Download PDFInfo
- Publication number
- CN106681483A CN106681483A CN201510751146.4A CN201510751146A CN106681483A CN 106681483 A CN106681483 A CN 106681483A CN 201510751146 A CN201510751146 A CN 201510751146A CN 106681483 A CN106681483 A CN 106681483A
- Authority
- CN
- China
- Prior art keywords
- voice
- information
- video information
- smart machine
- interaction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
Abstract
本发明涉及电子通信技术领域，具体涉及一种智能设备的交互方法及系统，包括采集使用者的语音和/或视频信息，并发送；分析并发送与所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令信息；根据指令信息调用并执行预先存储的与指令信息相匹配的操作指令；发送与语音和/或视频信息的交互信息；接收并传递交互信息。这种智能设备的交互方法及系统可实现人与机器之间的交互更加智能，提高工作效率并为使用者节省大量的成本，实现对实时信息问题的回答，大大扩展了智能服务机器人的交互范围，并提高与丰富了智能服务机器人的用户体验，该系统整体结构简单，实用性强，制造方便，易于推广使用。
Description
技术领域
本发明涉及电子通信技术领域，具体涉及一种智能设备的交互方法及系统。
背景技术
随着智能技术的发展，智能服务机器人已开始走进日常生活，在家庭、商业、工业等各种环境中得到广泛应用。家用服务机器人功能主要为教育娱乐、安保服务、亲情互动、智能提醒、家电控制等功能；商用服务机器人主要功能是安保服务、店铺管理、远程监控等用途。随着机器人技术的不断发展，现在市面上出现了很多的智能人机交互装置，例如电子宠物、电子玩具和智能机器人等。人们要求智能人机交互装置能够替代和辅助人类从事越来越广泛、越来越复杂的工作，并要求在越来越多的方面能够替代、补偿和加强人的感知功能、思维功能和行为功能，这就必然地要求智能人机交互装置具有越来越强的情感识别、情感理解和情感表达能力。现在市面上智能人机交互装置越来越多，例如一种机器人，它包括多种多媒体手段，用户可通过语音命令它进行跳舞、讲幼教内容，和宝宝聊天等，当你碰它特定部位时，它也会做出特定反应。但用户一个特定的语音或动作命令，该机器人做出一个特定的反应，缺少变化，给人印象还是人与机器的感觉，使人机交互不够真实和智能化。
而且传统的远程临场感机器人多应用于商业会议、跨国公司管理及远程医疗等领域，操作模式多为仅通过语音、视频模式进行人与人交流，使用环境和方式较为单一并且没有与外界进行信息交流的渠道或方法。
发明内容
本发明的目的在于克服现有技术中的上述缺陷，以实现人与机器之间的交互更加智能，提供一种智能设备的交互装置，解决以上技术问题；
一种智能设备的交互装置，包括：
信息采集模块，用于采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
数据处理模块，用于接收并分析所采集的语音和/或视频信息，并发送所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令；
交互匹配模块，用于接收数据处理模块发送的指令，并根据所述指令调用并执行预先存储的与指令信息相匹配的操作指令；
终端设备，用于接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
无线传输模块，用于接收并传递所述语音和/或视频信息以及所述终端设备发送的交互信息，实现交互的过程。
上述的智能设备的交互装置，所述信息采集模块包括：显示器，用于显示所述视频图像信息；摄像头，用于采集使用者的语音和/或视频信息；扫描仪，设置在所述摄像头下端，用于将使用者的图像信息进行扫描。
上述的智能设备的交互装置，所述交互匹配模块包括触控识别模块，与所述显示器相配合，用于监控使用者触摸触发，将触发转化为相对应处理指令后传送数据处理模块进行处理。
上述的智能设备的交互装置，所述终端设备包括手机、平板电脑、笔记本、车载电脑等中的一种或多种。
一种设置有智能设备交互装置的机器人，以上任一所述的智能设备的交互装置。
上述的设置有智能设备交互装置的机器人，包括机器人本体，所述交互匹配模块包括设置在机器人本体下端的全向移动底盘，所述全向移动底盘驱动机器人本体进行全方位移动。
机器人采用多轮全向移动结构，占地面积较小适合在较为拥挤的环境中运行。全向移动结构通过全向轮结构使机器人可不转向的情况下向任意方向移动。其结构具有较好的移动能力和机动性。机器人可进行多对一交互，及由多个远端操作者共同接入同一机器人平台，由其中一人进行操作，其他操作者可以通过视频和语音了解现场信息。机器人系统通过无线网络连接并通过账号进行通讯，操作者通过特定账号登陆机器人并获得控制权。
本发明的目的还在于实现指令操作等信息的有效传递，提供一种智能设备的交互方法，解决以上技术问题。
本发明所解决的技术问题可以采用以下技术方案来实现：一种智能设备的交互方法，包括以下步骤：
步骤A，启动智能设备，打开程序；
步骤B，采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
步骤C，接收并分析所采集的语音和/或视频信息，并发送与所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令信息；
步骤D，接收发送的指令信息，并根据所述指令信息调用并执行预先存储的与指令信息相匹配的操作指令；
步骤E，接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
步骤F，接收并传递所述语音和/或视频信息以及所述的交互信息。
上述的智能设备的交互方法，所述步骤B包括：
步骤B1，将使用者的图像信息进行扫描；
步骤B2，采集使用者的语音和/或视频信息；
步骤B3，显示所述视频图像信息。
上述的智能设备的交互方法，所述步骤C包括步骤C1，监控使用者触摸触发，将触发转化为相对应处理指令后进行处理。
有益效果：由于采用以上技术方案，本发明这种智能设备的交互方法及系统可通过双向语音与视频信息与现场的人员或其他机器人进行直接交互，完全模拟人与人面对面交互的模式和方法，实现人与机器之间的交互更加智能，提高工作效率并为使用者节省大量的成本，实现对实时信息问题的回答，大大扩展了智能服务机器人的交互范围，并提高与丰富了智能服务机器人的用户体验，该系统整体结构简单，实用性强，制造方便，易于推广使用。
附图说明
图1为本发明实施例中的一种智能设备的交互装置的结构示意图；
图2为本发明实施例中的一种智能设备的交互方法的工作流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
下面结合附图和具体实施例对本发明作进一步说明，但不作为本发明的限定。
参照图1，一种智能设备的交互装置，包括：
信息采集模块1，用于采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
数据处理模块2，用于接收并分析所采集的语音和/或视频信息，并发送所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令；
交互匹配模块3，用于接收数据处理模块发送的指令，并根据所述指令调用并执行预先存储的与指令信息相匹配的操作指令；
终端设备4，用于接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
无线传输模块5，用于接收并传递所述语音和/或视频信息以及所述终端设备4发送的交互信息，实现交互的过程。
进一步地，本发明一种智能设备的交互装置的较佳的实施例中，所述信息采集模块1包括：
显示器11，用于显示所述视频图像信息；
摄像头12，用于采集使用者的语音和/或视频信息；
扫描仪13，设置在所述摄像头12下端，用于将使用者的图像信息进行扫描。
进一步地，本发明一种智能设备的交互装置的较佳的实施例中，所述交互匹配模块3包括触控识别模块31，与所述显示器11相配合，用于监控使用者触摸触发，将触发转化为相对应处理指令后传送所述数据处理模块2进行处理。
进一步地，本发明一种智能设备的交互装置的较佳的实施例中，所述终端设备4包括手机、平板电脑、笔记本、车载电脑等中的一种或多种。
一种设置有智能设备交互装置的机器人，其特征在于，包括权利要求1～4任一所述的智能设备的交互装置。
进一步地，本发明一种设置有智能设备交互装置的机器人的较佳的实施例中，包括机器人本体，所述交互匹配模块3包括设置在机器人本体下端的全向移动底盘，所述全向移动底盘驱动机器人本体进行全方位移动。
本发明的具体实施方案：首先，机器人系统采用多轮全向移动结构，占地面积较小适合在较为拥挤的环境中运行。全向移动结构通过全向轮结构使机器人可不转向的情况下向任意方向移动。其结构具有较好的移动能力和机动性。
其次，机器人系统由全向移动底盘、机器人本体和交互屏幕构成。其中底盘负责机器人运动及结构支撑作用；机器人本体部分安装机器人主控计算机、电池、无线通讯设备、传感器等必要组件；交互屏幕采用触摸方式控制，高度可通过升降机构调节以保持在与人或其他机器人交互式双方基本保持对等高度，以提供较好的临场感和代入感。触摸方式可以让对方输入信息。
再次，机器人采用遥感操作模式和自主导航相结合的控制方式。遥感操作模式下机器人运动完全由远端操作者控制；自主导航模式下，机器人可通过预输入线路进行巡航，通过激光雷达等传感器对线路上的障碍物或人进行规避。并且，机器人采用视频与语音双向交互模式，远端控制者和现场人员通过视频信息进行交互，同时通过双向语音信息进行交谈，模拟人正常谈话交流的环境和模式。其中，机器人系统通过屏幕播放或数据交换方式进行信息交流。机器人屏幕除显示控制者图像信息外也可显示特定文档、幻灯片、视频等信息已与现场人员进行信息交互。同时现场人员所拥有的数字文件可通过机器人本体自带USB(通用串行总线)接口、蓝牙接口、NFC(近场通讯)等方式进行双向交换。
此外，机器人可进行多对一交互，及由多个远端操作者共同接入同一机器人平台，由其中一人进行操作，其他操作者可以通过视频和语音了解现场信息。
最后，机器人系统通过无线网络连接并通过账号进行通讯，操作者通过特定账号登陆机器人并获得控制权。
参照图2，一种智能设备的交互方法，包括以下步骤：
步骤A，启动智能设备，打开程序；
步骤B，采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
步骤C，接收并分析所采集的语音和/或视频信息，并发送与所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令信息；
步骤D，接收发送的指令信息，并根据所述指令信息调用并执行预先存储的与指令信息相匹配的操作指令；
步骤E，接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
步骤F，接收并传递所述语音和/或视频信息以及所述的交互信息。
进一步地，本发明一种智能设备的交互方法的较佳的实施例中，所述步骤B包括：
步骤B1，将使用者的图像信息进行扫描；
步骤B2，采集使用者的语音和/或视频信息；
步骤B3，显示所述视频图像信息。
进一步地，本发明一种智能设备的交互方法的较佳的实施例中，所述步骤C包括步骤C1，监控使用者触摸触发，将触发转化为相对应处理指令后进行处理。
本发明这种智能设备的交互方法及系统可通过双向语音与视频信息与现场的人员或其他机器人进行直接交互，完全模拟人与人面对面交互的模式和方法，实现人与机器之间的交互更加智能，提高工作效率并为使用者节省大量的成本，实现对实时信息问题的回答，大大扩展了智能服务机器人的交互范围，并提高与丰富了智能服务机器人的用户体验，该系统整体结构简单，实用性强，制造方便，易于推广使用。
以上仅为本发明较佳的实施例，并非因此限制本发明的实施方式及保护范围，对于本领域技术人员而言，应当能够意识到凡运用本发明说明书及图示内容所作出的等同替换和显而易见的变化所得到的方案，均应当包含在本发明的保护范围内。
Claims (9)
1.一种智能设备的交互装置，其特征在于，包括：
信息采集模块(1)，用于采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
数据处理模块(2)，用于接收并分析所采集的语音和/或视频信息，并发送所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令；
交互匹配模块(3)，用于接收数据处理模块发送的指令，并根据所述指令调用并执行预先存储的与指令信息相匹配的操作指令；
终端设备(4)，用于接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
无线传输模块(5)，用于接收并传递所述语音和/或视频信息以及所述终端设备(4)发送的交互信息，实现交互的过程。
2.根据权利要求1所述的一种智能设备的交互装置，其特征在于，所述信息采集模块(1)包括：
显示器(11)，用于显示所述视频图像信息；
摄像头(12)，用于采集使用者的语音和/或视频信息；
扫描仪(13)，设置在所述摄像头(12)下端，用于将使用者的图像信息进行扫描。
3.根据权利要求1所述的一种智能设备的交互装置，其特征在于，所述交互匹配模块(3)包括触控识别模块(31)，与所述显示器(11)相配合，用于监控使用者触摸触发，将触发转化为相对应处理指令后传送所述数据处理模块(2)进行处理。
4.根据权利要求1所述的一种智能设备的交互装置，其特征在于，所述终端设备(4)包括手机、平板电脑、笔记本、车载电脑等中的一种或多种。
5.一种设置有智能设备交互装置的机器人，其特征在于，包括权利要求1～4任一所述的智能设备的交互装置。
6.根据权利要求5所述的一种设置有智能设备交互装置的机器人，其特征在于，包括机器人本体，所述交互匹配模块(3)包括设置在机器人本体下端的全向移动底盘，所述全向移动底盘驱动机器人本体进行全方位移动。
7.一种智能设备的交互方法，其特征在于，包括以下步骤：
步骤A，启动智能设备，打开程序；
步骤B，采集使用者的语音和/或视频信息，并发送所述语音和/或视频信息；
步骤C，接收并分析所采集的语音和/或视频信息，并发送与所采集的语音和/或视频信息和与语音和/或视频信息相匹配的指令信息；
步骤D，接收发送的指令信息，并根据所述指令信息调用并执行预先存储的与指令信息相匹配的操作指令；
步骤E，接收并分析所述语音和/或视频信息，发送与所述语音和/或视频信息的交互信息；
步骤F，接收并传递所述语音和/或视频信息以及所述的交互信息。
8.根据权利要求7所述的一种智能设备的交互方法，其特征在于，所述步骤B包括：
步骤B1，将使用者的图像信息进行扫描；
步骤B2，采集使用者的语音和/或视频信息；
步骤B3，显示所述视频图像信息。
9.根据权利要求8所述的一种智能设备的交互方法，其特征在于，所述步骤C包括步骤C1，监控使用者触摸触发，将触发转化为相对应处理指令后进行处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510751146.4A CN106681483A (zh) | 2015-11-05 | 2015-11-05 | 一种智能设备的交互方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510751146.4A CN106681483A (zh) | 2015-11-05 | 2015-11-05 | 一种智能设备的交互方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106681483A true CN106681483A (zh) | 2017-05-17 |
Family
ID=58858461
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510751146.4A Pending CN106681483A (zh) | 2015-11-05 | 2015-11-05 | 一种智能设备的交互方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106681483A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107471226A (zh) * | 2017-09-21 | 2017-12-15 | 塔米智能科技（北京）有限公司 | 一种服务机器人系统及其交互方法 |
| CN108115691A (zh) * | 2018-01-31 | 2018-06-05 | 塔米智能科技（北京）有限公司 | 一种机器人交互系统及方法 |
| CN109523218A (zh) * | 2018-11-27 | 2019-03-26 | 苏州优智达机器人有限公司 | 移动智能机器人与人的交互方法 |
| CN109941231A (zh) * | 2019-02-21 | 2019-06-28 | 初速度（苏州）科技有限公司 | 车载终端设备、车载交互系统和交互方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW201120685A (en) * | 2009-12-09 | 2011-06-16 | Ind Tech Res Inst | Portable virtual human-machine interaction device and method therewith |
| CN202261530U (zh) * | 2011-08-19 | 2012-05-30 | 天津天地伟业数码科技有限公司 | 人机交互式语音控制智能球 |
| CN103414720A (zh) * | 2013-08-19 | 2013-11-27 | 苏州跨界软件科技有限公司 | 交互式3d语音服务方法 |
| CN104407701A (zh) * | 2014-11-27 | 2015-03-11 | 曦煌科技(北京)有限公司 | 一种面向个人的集群化虚拟现实交互系统 |
| CN104656653A (zh) * | 2015-01-15 | 2015-05-27 | 长源动力（北京）科技有限公司 | 一种基于机器人的交互系统及方法 |
-
2015
- 2015-11-05 CN CN201510751146.4A patent/CN106681483A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW201120685A (en) * | 2009-12-09 | 2011-06-16 | Ind Tech Res Inst | Portable virtual human-machine interaction device and method therewith |
| CN202261530U (zh) * | 2011-08-19 | 2012-05-30 | 天津天地伟业数码科技有限公司 | 人机交互式语音控制智能球 |
| CN103414720A (zh) * | 2013-08-19 | 2013-11-27 | 苏州跨界软件科技有限公司 | 交互式3d语音服务方法 |
| CN104407701A (zh) * | 2014-11-27 | 2015-03-11 | 曦煌科技(北京)有限公司 | 一种面向个人的集群化虚拟现实交互系统 |
| CN104656653A (zh) * | 2015-01-15 | 2015-05-27 | 长源动力（北京）科技有限公司 | 一种基于机器人的交互系统及方法 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107471226A (zh) * | 2017-09-21 | 2017-12-15 | 塔米智能科技（北京）有限公司 | 一种服务机器人系统及其交互方法 |
| CN108115691A (zh) * | 2018-01-31 | 2018-06-05 | 塔米智能科技（北京）有限公司 | 一种机器人交互系统及方法 |
| CN109523218A (zh) * | 2018-11-27 | 2019-03-26 | 苏州优智达机器人有限公司 | 移动智能机器人与人的交互方法 |
| CN109941231A (zh) * | 2019-02-21 | 2019-06-28 | 初速度（苏州）科技有限公司 | 车载终端设备、车载交互系统和交互方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210208766A1 (en) | Communications interface and a communications method, a corresponding computer program, and a corresponding registration medium | |
| CN103631221B (zh) | 一种遥操作服务机器人系统 | |
| CN104656653A (zh) | 一种基于机器人的交互系统及方法 | |
| CN103877727B (zh) | 一种由手机控制并通过手机进行交互的电子宠物 | |
| CN103164995A (zh) | 儿童体感交互式学习系统及方法 | |
| Gardner et al. | The Immersive Education Laboratory: understanding affordances, structuring experiences, and creating constructivist, collaborative processes, in mixed-reality smart environments | |
| US20130014028A1 (en) | Method and system for drawing | |
| CN106681483A (zh) | 一种智能设备的交互方法及系统 | |
| CN102693047A (zh) | 在协同环境中提供位置信息 | |
| CN108021046A (zh) | 一种实现人机交互的机器人 | |
| CN208013683U (zh) | 带体感功能的智能家居管家中控设备 | |
| CN107943282A (zh) | 一种基于增强现实和可穿戴设备的人机交互系统及方法 | |
| CN110311856A (zh) | 即时通信方法、设备及计算机可读存储介质 | |
| CN105388786B (zh) | 一种智能提线木偶偶人控制方法 | |
| CN109542377A (zh) | 智能设备、显示设备、存储设备及屏显互动控制方法 | |
| CN108388399A (zh) | 虚拟偶像的状态管理方法及系统 | |
| Hoshi et al. | Designing blended reality space: conceptual foundations and applications | |
| CN106155292A (zh) | 具情境化仿真系统 | |
| Ito et al. | Motion control algorithm of ARM-COMS for entrainment enhancement | |
| Yang et al. | Research on the application of new generation of Human-computer interaction in education | |
| CN106548379A (zh) | 一种用于智能机器人的广告输出方法及装置 | |
| CN102572597A (zh) | 多网音视频播放设备 | |
| CN101527688A (zh) | 网络聊天宠物、系统及实现方法 | |
| CN110611711A (zh) | 一种教学系统、教学系统通信方法和装置及存储介质 | |
| CN110430228A (zh) | 一种通过移动端对计算设备进行操作的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170517 |