CN101169684A - 一种远距离多通道人机交互装置及其交互方法 - Google Patents
一种远距离多通道人机交互装置及其交互方法 Download PDFInfo
- Publication number
- CN101169684A CN101169684A CNA2007101904681A CN200710190468A CN101169684A CN 101169684 A CN101169684 A CN 101169684A CN A2007101904681 A CNA2007101904681 A CN A2007101904681A CN 200710190468 A CN200710190468 A CN 200710190468A CN 101169684 A CN101169684 A CN 101169684A
- Authority
- CN
- China
- Prior art keywords
- program
- intelligent terminal
- host side
- user
- wireless transceiver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明涉及一种远距离多通道人机交互装置及其交互方法，包括有智能终端设备，主机端设备；主机端设备内的PC端程序内设有语音识别程序，语音合成程序和语法分析程序；智能终端上设有音频输入、输出设备。人机交互装置的交互方法，包括以下步骤：用户说出语音命令，利用主机端设备内的语音识别程序将语音命令的音频信号处理为具有一定语意的文本信息；识别后的文本信息通过语法分析程序可转化为启动并执行相应程序的程序命令；执行该命令的反馈信息和所获得的文字信息通过语音合成程序转化为相应的音频信号通过智能终端设备上的音频输出装置用语音播报给用户听取或通过显示屏显示给用户。
Description
技术领域
本发明涉及一种用于用户和计算机之间交互的装置和交互方法，更确切地说是涉及一种利用语音技术、无线通信技术、计算机软件技术，实现用户与计算机之间远距离多通道人机交互的装置及其交互方法。
背景技术
人机交互的发展历史，是从人适应计算机到计算机不断地适应人的发展史，传统的人机交互，经历了以下几个阶段：(1)早期的手工作业阶段当时交互的特点是采用手工操作和依赖机器(二进制机器代码)的方法来进行输入。(2)作业控制语言及交互命令语言阶段这一阶段的特点是计算机使用者可采用批处理作业语言或交互命令语言的方式和计算机打交道。(3)图形用户界面(GUI)阶段GUI的主要特点是桌面隐喻(WIMP技术、直接操纵和所见即所得(WYSIWYG)，GUI简明易学，实现了事实上的标准化，开拓了用户人群。从命令行界面发展到GUI界面，计算机到用户的输出带宽大大提高，但从用户到计算机的通信带宽仍然受到限制。无论是命令行界面，还是GUI界面，实质上都属于单通道人机界面。
目前，计算机的输入输出设备，主要包括鼠标、键盘、手写笔、显示器、打印机、麦克风等；采取这些输入输出设备，往往要求用户长时间坐在电脑前，并且容易造成手、眼的劳累，拥有极大的缺陷和不足：1，人机界面的表现方式采用了多种媒体，而人向计算机的表达方式目前常用的只是利用手通过键盘或者鼠标、手写输入进行。这样用户到计算机的输入宽带与计算机到用户的输出宽带产生了不平衡，用户的输入宽带低于计算机输出的宽带，用户输入所在的意义层次也很低。2，文本的输入和直接操纵这两种交互都要手来进行，使得手在鼠标和键盘之间切换频繁，并且把用户局限在电脑周围；3，输入输出方式单一，不能充分利用用户的认知资源，一些通道负荷很重，比如视觉，而另一些通道几乎完全没有被利用，如听觉；长时间的使用电脑后，用户的眼睛、手等极为疲劳，使得用户肌肉酸痛、脖子僵硬、头痛头晕，并极大地增加了用户患近视、肥胖、下肢静脉曲张、颈椎病、腰椎间盘突出、神经衰弱、电脑狂暴症等疾病的概率。
发明内容
本发明针对现有技术的不足，结合语音识别技术、语音合成技术、按键操控技术、无线传输技术、计算机软件技术，提供一种可通过语音命令结合按键操控实现远距离多通道人机交互装置及其交互方法，使用户在离开电脑时通过多种交互方式的有机写作，方便自然地与电脑进行丰富容易和谐的交互。
本发明是通过以下技术方案实现的：
一种远距离多通道人机交互装置，包括有智能终端和主机端；智能终端上设有控制单元和与控制单元相连接的电源模块、按键、显示屏和智能设备端无线收发器，主机端内设有PC端程序和主机端无线收发器，智能设备端无线收发器与主机端无线收发器无线连接，所述的PC端程序内设有语音识别程序和语法分析程序；智能终端上设有音频输入设备，音频输入设备的输出端与所述控制单元的输入端相连接。
一种远距离多通道人机交互装置，所述的PC端程序内设有语音合成程序；智能终端上设有音频输出装置，音频输出装置的输入端与所述控制单元的输出端相连接。
一种远距离多通道人机交互装置，所述的智能终端上设有触控板，触控板输出端与所述控制单元的输入端相连接。
一种远距离多通道人机交互装置的交互方法，包括以下步骤：
(1)用户说出语音命令，语音命令经音频输入设备输入到智能终端；
(2)智能终端通过智能设备端无线收发器传输到主机端设备中，利用主机端设备内的语音识别程序将语音命令的音频信号处理为具有一定语意的文本信息；
(3)识别后的文本信息通过语法分析程序可转化为启动并执行相应程序的程序命令；
(4)被启动并执行的相应程序将执行该命令的反馈信息和所获得的文字信息通过主机端无线收发器传输到智能终端设备，并在显示屏上给用户显示出执行相应程序所得到的反馈信息和所获得的文字信息。
一种远距离多通道人机交互装置的交互方法，所述的执行该命令的反馈信息和所获得的文字信息可通过语音合成程序转化为相应的音频信号，通过主机端无线收发器传输到智能终端设备，并通过智能终端设备上的音频输出装置用语音播报给用户听取。
一种远距离多通道人机交互装置的交互方法，用户还可通过智能终端的触控板输入所述的程序命令。
本发明将用户从电脑旁解放出来，无需坐在电脑旁也可操作电脑，扩展使用电脑以及享受多媒体娱乐的空间，并极大地降低了长时间坐在电脑前工作的健康隐患。交互方式新颖便捷。语音结合按键的操控方式，无需屏幕和键盘也可控制电脑，让电脑可以听懂用户的语音命令，并用语音进行反馈，智能又简便。有机地结合了语音用户界面与图形用户界面，实现更加容易简单的多通道人机交互，让用户从繁琐复杂的控制界面和命令中解放出来，最大程度地实现真正的用户自由。降低了用户使用键盘、鼠标的次数，有利于保护用户的手腕手指健康。
附图说明
图1为装置结构示意图。
图2为信息交互示意图。
具体实施方式
实施例1
远距离多通道人机交互装置，包括有智能终端，主机端；智能终端上设有控制单元1和与控制单元1相连接的电源模块7、按键3、显示屏2和智能设备端无线收发器6，主机端设备内设有PC端程序和主机端无线收发器4，智能设备端无线收发器6与主机端无线收发器4无线连接。PC端程序内设有语音识别程序，语音合成程序和语法分析程序；智能终端上还设有音频输入设备、音频输出装置和触控板5。音频输入设备的输出端与所述控制单元1的输入端相连接，音频输出装置的输入端与所述控制单元1的输出端相连接，触控板5输出端与所述控制单元的输入端相连接。
人机交互装置的交互方法，包括以下步骤：
(1)用户说出语音命令，语音命令经音频输入设备输入到智能终端；
(2)智能终端通过智能设备端无线收发器6传输到主机端设备中，利用主机端设备内的语音识别程序将语音命令的音频信号处理为具有一定语意的文本信息；
(3)识别后的文本信息通过语法分析程序可转化为启动并执行相应程序的程序命令；
(4)被启动并执行的相应程序将执行该命令的反馈信息和所获得的文字信息通过主机端无线收发器4传输到智能终端设备，并在显示屏2上给用户显示出执行相应程序所得到的反馈信息和所获得的文字信息。同时执行该命令的反馈信息和所获得的文字信息可通过语音合成程序转化为相应的音频信号，通过主机端无线收发器4传输到智能终端设备，并通过智能终端设备上的音频输出装置用语音播报给用户听取。
同时用户也可通过智能终端的触控板5输入命令信号，启动并执行相应程序。
实施例2
远距离多通道人机交互装置，包括有智能终端，主机端；智能终端上设有控制单元1和与控制单元1相连接的电源模块7、按键3、触控板5、显示屏2和智能设备端无线收发器6，主机端设备内设有PC端程序和主机端无线收发器4，智能设备端无线收发器6与主机端无线收发器4无线连接。PC端程序内设有语音识别程序和语法分析程序；智能终端上设有音频输入设备，音频输入设备的输出端与所述控制单元1的输入端相连接。
人机交互装置的交互方法，包括以下步骤：
(1)用户说出语音命令，语音命令经音频输入设备输入到智能终端；
(2)智能终端通过智能设备端无线收发器6传输到主机端设备中，利用主机端设备内的语音识别程序将语音命令的音频信号处理为具有一定语意的文本信息；
(3)识别后的文本信息通过语法分析程序可转化为启动并执行相应程序的程序命令；
(4)被启动并执行的相应程序将执行该命令的反馈信息和所获得的文字信息通过主机端无线收发器4传输到智能终端设备，并在显示屏2上给用户显示出执行相应程序所得到的反馈信息和所获得的文字信息。
Claims (6)
1.一种远距离多通道人机交互装置，包括有智能终端和主机端；智能终端上设有控制单元和与控制单元相连接的电源模块、按键、显示屏和智能设备端无线收发器，主机端内设有PC端程序和主机端无线收发器，智能设备端无线收发器与主机端无线收发器无线连接，其特征在于所述的PC端程序内设有语音识别程序和语法分析程序；智能终端上设有音频输入设备，音频输入设备的输出端与所述控制单元的输入端相连接。
2.根据权利要求1所述的一种远距离多通道人机交互装置，其特征在于所述的PC端程序内设有语音合成程序；智能终端上设有音频输出装置，音频输出装置的输入端与所述控制单元的输出端相连接。
3.根据权利要求1所述的一种远距离多通道人机交互装置，其特征在于所述的智能终端上设有触控板，触控板输出端与所述控制单元的输入端相连接。
4.一种远距离多通道人机交互装置的交互方法，其特征在于包括以下步骤：
(1)用户说出语音命令，语音命令经音频输入设备输入到智能终端；
(2)智能终端通过智能设备端无线收发器传输到主机端设备中，利用主机端设备内的语音识别程序将语音命令的音频信号处理为具有一定语意的文本信息；
(3)识别后的文本信息通过语法分析程序可转化为启动并执行相应程序的程序命令；
(4)被启动并执行的相应程序将执行该命令的反馈信息和所获得的文字信息通过主机端无线收发器传输到智能终端设备，并在显示屏上给用户显示出执行相应程序所得到的反馈信息和所获得的文字信息。
5.根据权利要求4所述的一种远距离多通道人机交互装置的交互方法，其特征在于所述的执行该命令的反馈信息和所获得的文字信息可通过语音合成程序转化为相应的音频信号，通过主机端无线收发器传输到智能终端设备，并通过智能终端设备上的音频输出装置用语音播报给用户听取。
6.根据权利要求4或5所述的一种远距离多通道人机交互装置的交互方法，其特征在于用户可通过智能终端的触控板输入所述的程序命令。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNA2007101904681A CN101169684A (zh) | 2007-11-27 | 2007-11-27 | 一种远距离多通道人机交互装置及其交互方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNA2007101904681A CN101169684A (zh) | 2007-11-27 | 2007-11-27 | 一种远距离多通道人机交互装置及其交互方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101169684A true CN101169684A (zh) | 2008-04-30 |
Family
ID=39390329
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNA2007101904681A Pending CN101169684A (zh) | 2007-11-27 | 2007-11-27 | 一种远距离多通道人机交互装置及其交互方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101169684A (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102708613A (zh) * | 2012-05-02 | 2012-10-03 | 南京环盟科技有限责任公司 | 一种触控一体机及其语音实现方法 |
| CN103680498A (zh) * | 2012-09-26 | 2014-03-26 | 华为技术有限公司 | 一种语音识别方法和设备 |
| CN106023991A (zh) * | 2016-05-23 | 2016-10-12 | 丽水学院 | 一种面向多任务交互的手持式语音交互装置及交互方法 |
| CN108088043A (zh) * | 2017-12-13 | 2018-05-29 | 广东美的制冷设备有限公司 | 空气调节装置及其语音播报方法、终端和存储介质 |
| CN109189364A (zh) * | 2018-08-08 | 2019-01-11 | 厦门快商通信息技术有限公司 | 一种多信道语音采集系统及方法 |
| WO2020082309A1 (en) * | 2018-10-25 | 2020-04-30 | Microsoft Technology Licensing, Llc | Multi-phrase responding in full duplex voice conversation |
| CN111857370A (zh) * | 2020-07-27 | 2020-10-30 | 吉林大学 | 一种多通道交互设备研发平台 |
-
2007
- 2007-11-27 CN CNA2007101904681A patent/CN101169684A/zh active Pending
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102708613B (zh) * | 2012-05-02 | 2016-01-13 | 南京环盟科技有限责任公司 | 一种触控一体机及其语音实现方法 |
| CN102708613A (zh) * | 2012-05-02 | 2012-10-03 | 南京环盟科技有限责任公司 | 一种触控一体机及其语音实现方法 |
| CN103680498A (zh) * | 2012-09-26 | 2014-03-26 | 华为技术有限公司 | 一种语音识别方法和设备 |
| US9368108B2 (en) | 2012-09-26 | 2016-06-14 | Huawei Technologies Co., Ltd. | Speech recognition method and device |
| CN106023991B (zh) * | 2016-05-23 | 2019-12-03 | 丽水学院 | 一种面向多任务交互的手持式语音交互装置及交互方法 |
| CN106023991A (zh) * | 2016-05-23 | 2016-10-12 | 丽水学院 | 一种面向多任务交互的手持式语音交互装置及交互方法 |
| CN108088043B (zh) * | 2017-12-13 | 2020-05-22 | 广东美的制冷设备有限公司 | 空气调节装置及其语音播报方法、终端和存储介质 |
| CN108088043A (zh) * | 2017-12-13 | 2018-05-29 | 广东美的制冷设备有限公司 | 空气调节装置及其语音播报方法、终端和存储介质 |
| CN109189364A (zh) * | 2018-08-08 | 2019-01-11 | 厦门快商通信息技术有限公司 | 一种多信道语音采集系统及方法 |
| WO2020082309A1 (en) * | 2018-10-25 | 2020-04-30 | Microsoft Technology Licensing, Llc | Multi-phrase responding in full duplex voice conversation |
| US11979360B2 (en) | 2018-10-25 | 2024-05-07 | Microsoft Technology Licensing, Llc | Multi-phrase responding in full duplex voice conversation |
| CN111857370A (zh) * | 2020-07-27 | 2020-10-30 | 吉林大学 | 一种多通道交互设备研发平台 |
| CN111857370B (zh) * | 2020-07-27 | 2022-03-15 | 吉林大学 | 一种多通道交互设备研发平台 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110444191B (zh) | 一种韵律层级标注的方法、模型训练的方法及装置 | |
| CN101169684A (zh) | 一种远距离多通道人机交互装置及其交互方法 | |
| CN106878566B (zh) | 语音操控方法、移动终端装置及语音操控系统 | |
| CN101923858B (zh) | 一种实时同步互译语音终端 | |
| CN106997762A (zh) | 家用电器的语音控制方法以及装置 | |
| CN104765455A (zh) | 基于敲击振动的人机交互系统 | |
| CN110047484A (zh) | 一种语音识别交互方法、系统、设备和存储介质 | |
| CN102063282B (zh) | 汉语语音输入系统及方法 | |
| CN104239007B (zh) | 汉语自然人语音遥控电灯的方法 | |
| CN104679733B (zh) | 一种语音对话翻译方法、装置及系统 | |
| CN106648054A (zh) | 一种基于RealSense的陪伴机器人的多模式交互方法 | |
| CN104235998A (zh) | 非特定人汉语语音遥控智能空调机的方法 | |
| CN109243458A (zh) | 一种用于智能机器人的语音识别系统 | |
| CN102298445A (zh) | 通用速录键盘 | |
| CN208752948U (zh) | 一种智能语音控制装置 | |
| CN107251137A (zh) | 利用语音改善至少一种语义单元的集合的方法、装置及计算机可读记录介质 | |
| CN201084135Y (zh) | 一种用于远距离多通道人机交互的装置 | |
| CN115167674A (zh) | 基于数字人多模态交互信息标准的智能交互方法 | |
| CN109830239B (zh) | 语音处理装置、语音识别输入系统及语音识别输入方法 | |
| CN108735049A (zh) | 聋哑人辅助发声系统及其发声方法 | |
| CN104301500A (zh) | 一种终端控制方法、装置和终端 | |
| CN111009234B (zh) | 语音转换方法、装置和设备 | |
| CN111933139A (zh) | 一种离在线语音识别方法及系统 | |
| CN102521577A (zh) | 一种交互式多媒体设备的笔迹识别、合成和跟踪方法 | |
| JP2007140419A (ja) | 状況対応知能を持つ対話型情報伝達装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080430 |