CN1963752A - 基于自然语言的电子设备人机交互操作界面技术 - Google Patents

基于自然语言的电子设备人机交互操作界面技术 Download PDF

Info

Publication number
CN1963752A
CN1963752A CN 200610144126 CN200610144126A CN1963752A CN 1963752 A CN1963752 A CN 1963752A CN 200610144126 CN200610144126 CN 200610144126 CN 200610144126 A CN200610144126 A CN 200610144126A CN 1963752 A CN1963752 A CN 1963752A
Authority
CN
China
Prior art keywords
natural language
interface
input
window
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 200610144126
Other languages
English (en)
Inventor
李博航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN 200610144126 priority Critical patent/CN1963752A/zh
Publication of CN1963752A publication Critical patent/CN1963752A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Input From Keyboards Or The Like (AREA)

Abstract

本发明提出一种基于自然语言的电子设备人机交互操作界面技术,将电子设备的各种人机交互操作与人们易于理解和日常表达的自然语言建立对应关系,使电子设备的操作人员或使用人员只需要输入自然语言或从列表中选择自然语言就可以完成相应的功能操作,同时采用自然语言匹配数据信息以及语意和词义的分析,可以实现同一功能的不同自然语言表达,极大的方便使用者的使用。基于该技术的电子设备人机交互操作界面十分简洁,只要能识别部分单词或文字的人员就可以很快掌握该电子设备操作的使用,是实现基于自然语言的人机交互操作界面技术的有效技术。

Description

基于自然语言的电子设备人机交互操作界面技术
技术领域
本发明涉及使用自然语言实现电子设备人机交互操作的界面技术,将电子设备的各种人机交互操作与人们易于理解和日常表达的自然语言建立对应关系,使电子设备的操作人员或使用人员只需要输入自然语言或从列表中选择自然语言就可以完成相应的功能操作,同时采用自然语言匹配数据信息以及语意或词义的分析,可以实现同一功能的不同自然语言表达,极大的方便使用者的使用。基于该技术的电子设备人机交互操作界面十分简洁,只要能识别很少单词或字的人员就可以很快掌握该电子设备操作的使用,是实现基于自然语言的人机交互操作界面技术的有效技术,属于电子产品交互操作界面技术领域。
背景技术
当今社会,电子设备进入了人们生活的各个角落,以手机为代表的移动终端更是全面普及,以个人电脑为主信息化设备也日益普及。由于电子设备的功能越来越多,操作界面也变得越来越复杂。目前常见的操作界面有图形化界面操作(如WINDOWS操作系统)、菜单操作、命令行操作等。随着功能的增加,操作界面的级数越来越多,菜单的层次也越来越深,操作命令也越来越多。对于大多数人来说,要充分使用电子设备提供的功能,没有操作说明书是很难完成的,而且对于每个图形按钮或菜单条目的描述是生产厂家确定好了的,不可以更改。而且大多是用专业术语进行描述,这也成为大多数人使用的障碍。即使对于人们目前比较熟悉的微软公司WINDOS操作系统平台,由于功能越来越多,需要学习的操作过程越来越复杂,如果不经过专门的培训和技术指导是很难完全掌握其使用。由于目前的电子设备并不能理解人们的日常语言,也就是人们表达的自然语言,所以无法将人们已自然语言表达的要求转化为电子设备内部的操作,这是目前电子设备所使用的操作界面技术的最大弱点。
比如,对于WINDOWS操作系统,以自然语言表达的需求是“我想玩ABCD游戏”,操作系统不能理解这样的需求,必须由操作者经过分析后转化为多个操作步骤,手动去执行各个步骤。显然不经过培训,操作者将难以实现他的需求。
对于人们经常使用的电子设备手机也有同样的情况。例如,人们的需求表达是“把XXXXXXXXXXXX信息发送给朋友”时,如果用目前提供的移动终端如手机去操作,操作者需要先选择菜单中的“信息”,然后从菜单中选择“发送短信”,再输入短信内容,然后再输入朋友的电话号码,再按“发送”按钮等一系列操作步骤才能完成,同时由于不同手机的菜单差别很大,经常出现不知道如何操作的情况。如果对于同样的需求,只需要在一个界面将“把XXXXXXXXXXXX信息发送给朋友”整个信息输入后,移动终端如手机可以自动完成其他操作过程,将极大方便操作者。
本发明所要解决的问题是在十分简洁的操作界面上将操作者的需求以自然语言表达的方式输入电子设备后,电子设备能够分析和比对输入的自然语言,自动完成自然语言所描述的操作功能,是一种全新的操作界面技术。
发明内容
为解决上述问题,本发明提出了在电子设备中增加了自然语音分析与比对硬件或程序代码,将以自然语言表达的操作需求自动与电子设备的功能或功能组合对应,并按照功能需求自动完成所有的操作步骤,同时改变目前电子设备的界面操作模式,变成十分简洁的纯文字输入窗口或是包含列表选择的文字输入窗口,并将人们日常表达的大多数自然语言与电子设备的内部功能的信息预置到电子设备的存储体中,减少操作着的输入内容,实现大多数操作可以直接从列表中选择或只需要输入很少的内容就可以通过智能匹配获得余下内容。
本发明的详细描述如下:
1、对于本发明所述的基于自然语言操作的电子设备,为了实现基于自然语言的操作界面,其技术内容有:
1)包含具有信息处理能力的硬件系统和存储在其内的可以执行的程序代码;
2)具有需要操作界面操作的各种功能;
3)包含有需要人机交互界面操作的各种功能与一个或多个自然语言的对应信息;
4)包含有对自然语言进行比较和分析的硬件或软件程序代码;
5)包含输入自然语言的操作界面或通过下拉列表或非下拉列表选择自然语言的操作界面;
6)包含进行界面操作的输入部件,如键盘、按钮、鼠标或手写笔等;
7)包含存储自然语言同义词和相同语义语句的信息;
8)包含用于显示信息内容的和操作界面的显示部件,如电子显示屏、液晶显示器等;
9)在需要通过声音识别技术来输入自然语言的电子设备中,需要包含声音信号采集硬件电路和声音分析处理芯片或处理软件。
2、对于本发明所述的基于自然语言操作的电子设备,为了减少操作者的输入,对于输入界面有如下形式之一:
1)只有一级自然语言输入或选择界面,并只有一个输入或选择窗口;
2)只有一级自然语言输入或选择界面,并有多个输入或选择窗口;
3)有多级自然语言输入或选择界面,并且每级界面有一个或多个输入或选择窗口。
3、对于只有一级自然语言输入或选择界面,并只有一个输入或选择窗口,是将需要完成的功能用自然语言在该级显示界面的一个窗口中全部输入或选择列表中已经有的自然语言,然后按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
4、对于只有一级自然语言输入或选择界面,并有多个输入或选择窗口,是将需要完成的功能用自然语言在该级显示界面的多个窗口中分别输入或选择列表中已经有的自然语言,几个窗口内容按一定顺序连接在一起描述了需要完成某个功能的完整自然语言,然后按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
5、对于有多级自然语言输入或选择界面,并且每级界面有一个或多个输入或选择窗口,是将需要完成的功能用自然语言在多级显示界面的一个或多个窗口中分别输入或选择列表中已经有的自然语言,多级界面的多个个窗口内容按一定顺序连接在一起描述了需要完成某个功能的完整自然语言,当多级界面的某级不是最后一级界面时按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备的显示界面将自动进入下一级界面,当多级界面的某级已经是最后一级界面时按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
6、对于包含有对自然语言进行比较和分析的硬件或软件程序代码有如下特点:
1)存储了人们日常表达的词汇的同义词信息,可以将同义词的表达判定为同一个功能需求的表达;
2)存储了人们日常表达的具有相同含义的语句信息,可以将同义语句的表达判定为同一个功能需求的表达;
3)对于获得的功能需求可以通过自动调用电子设备内部定义的功能函数来执行,也可以通过自动执行电子设备内部安装的可执行程序代码或程序文件来执行,还可以通过自动调用电子设备内部定义的功能函数与自动执行电子设备内部安装的可执行程序代码或程序文件的各种组合来执行。
7、对于通过下拉列表或非下拉列表选择自然语言的操作界面,具有如下特点:
1)对于下拉列表选择自然语言的操作界面,输入窗口有一个下拉指示按钮,按下后输入窗口将展开可选内容列表,当一个显示屏显示不完整时将自动根据内容生成纵向滚动条或横向滚动条。
2)对于非下拉列表选择自然语言的操作界面,输入窗口有一个已经展开的可选内容列表,当一个显示屏显示不完整时将自动根据内容生成纵向滚动条或横向滚动条;
3)在输入窗口输入内容时具有一定的自动匹配功能,即已经输入的自然语言内容正好与列表中的某条内容的部分字符匹配,将自动将该条内容的其他字符更新到输入窗口,减少用户的操作。
8、对于只有一级自然语言输入或选择界面,并有多个输入或选择窗口,对于多个输入或选择窗口的内容之间可以具有一定的语法逻辑关系,使前一个窗口输入或选择的内容可以缩小其它未输入或选择窗口的内容范围。
9、对于有多级自然语言输入或选择界面,并且每级界面有一个或多个输入或选择窗口,对于多级输入或选择界面之间可以具有一定的语法逻辑关系,前一级窗口输入或选择的内容可以缩小其下一级界面输入或选择窗口的内容范围,同时对于多个输入或选择窗口的内容之间也可以具有一定的语法逻辑关系,使前一个窗口输入或选择的内容可以缩小其它未输入或选择窗口的内容范围。
10、对于包含有对自然语言进行比较和分析的硬件或软件程序代码,有如下功能:
1)对于通过使用者操作中输入的自然语言,并经过所述软件程序代码运行分析后匹配了电子设备某个具体功能或功能组合,该所属软件程序代码可以将所输入的自然语言保存在电子设备的内部存储体中,并在下一次操作具有下拉列表或非下拉列表的输入窗口时显示在列表中,方便操作者选择;
2)对于自然语言中的同义词或相同语义的内容,可以通过所述的硬件或软件程序代码和所述的存储自然语言同义词和相同语义语句的信息来选择对应的操作功能;
3)可以修改、增加、删除电子设备内部存储的自然语言的信息及其与操作功能或功能组合的对应信息;
4)可以修改、增加、删除电子设备内部存储的自然语言同义词和相同语义语句的信息及其与操作功能或功能组合的对应信息。
附图说明
图1是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的电子设备示意图。
图2是本发明基于自然语言的电子设备人机交互操作界面技术包含下拉列表和文字输入窗口实现操作的电子设备示意图。
图3是本发明基于自然语言的电子设备人机交互操作界面技术包含非下拉列表和文字输入窗口实现操作的电子设备示意图。
图4是本发明基于自然语言的电子设备人机交互操作界面技术包含单级单个下拉列表和文字输入窗口实现操作步骤示意图。
图5是本发明基于自然语言的电子设备人机交互操作界面技术包含单级多个下拉列表和文字输入窗口实现操作步骤示意图。
图6是本发明基于自然语言的电子设备人机交互操作界面技术包含多级单个非下拉列表和文字输入窗口实现操作步骤示意图。
图7是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的一个示例示意图。
图8是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的另一个示例示意图。
具体实施方式
下面结合附图和实施示例对本发明的技术方案进一步详细说明:
在具体实施示例中,以使用十分广泛的移动电话终端(手机)为电子设备的参考示例。图1是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的电子设备示意图。如图1所示,移动终端[101]的输入输出部分是完成界面操作的主要部件,至少包括输入信息的按键区域部件[106]和显示信息的显示屏部件[102],在显示屏部件[102]中包含单纯文字输入窗口[103],在按键区域部件[106]除了数字按键外,还有确定或OK按键[104]和取消或C按键[105]。在该示例中,单纯文字输入窗口[103]是一个文本输入窗口,操作人员通过按键或手写笔(需要显示屏部件[102]具有触摸屏功能)输入自然语言,通过取消或C按键[105]可以删除前面输入的内容实现对于输入内容的修改,按下确定或OK按键[104]即表示完成自然语言的输入,移动终端将输入的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的功能,然后自动调用内部功能函数或运行相应的程序完成相应的功能,然后将执行结果显示到移动终端[101]的显示屏部件[102]上。当移动终端完成开机状态后显示屏部件[102]的默认状态可以是输入窗口等待输入状态,也可以是其他机器闲置等待状态,当需要进行其他操作时,按下确定或OK按键[104]就会进入输入窗口等待输入状态。为了减少输入,在输入窗口输入内容时电子设备的运行软件具有一定的自动匹配功能,即已经输入的自然语言内容正好与电子设备中存储的自然语言与操作功能对应信息的某条内容的部分字符匹配时,将自动把该条内容的其他文字字符更新到输入窗口中。
图2是本发明基于自然语言的电子设备人机交互操作界面技术包含下拉列表和文字输入窗口实现操作的电子设备示意图。如图2所示,移动终端[201]的输入输出部分是完成界面操作的主要部件,至少包括输入信息的按键区域部件[206]和显示信息的显示屏部件[202],在显示屏部件[202]中包含下拉列表和文字输入窗口[203],在按键区域部件[206]除了数字按键外,还有确定或OK按键[204]、取消或C按键[205]、在列表中向上移动选中条目的按钮[207]、向下移动选中条目的按钮[208]、向右移动按钮[209]和向左移动按钮[210]。在该示例中,包含下拉列表和文字输入窗口[203]是一个带有下拉列表框的文本输入窗口,操作人员通过按键或手写笔(需要显示屏部件[202]具有触摸屏功能)输入自然语言,也可以直接从下拉列表框中选择符合要求的内容条目,通过取消或C按键[205]可以删除前面输入的内容实现对于输入内容的修改,通过向上移动选中条目的按钮[207]、向下移动选中条目的按钮[208]可以改变选定的列表条目,向右移动按钮[209]和向左移动按钮[210]可以移动横向滚动条查看条目中未显示的字符,按下确定或OK按键[204]即表示完成自然语言的输入,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的功能,然后自动调用内部功能函数或运行相应的程序完成相应的功能,然后将执行结果显示到移动终端[201]的显示屏部件[202]上。当移动终端完成开机状态后显示屏部件[202]的默认状态可以是包含下拉列表已展开的输入窗口等待输入状态,也可以是下拉列表没有展开的输入窗口等待输入状态,也可以是其他机器闲置等待状态,当需要进行其他操作时,按下确定或OK按键[204]就会进入包含下拉列表的输入窗口等待输入状态。一方面,下拉列表展开时,如果列表的条目数超过了一个显示页面的高度,将自动生成纵向滚动条,便于操作选择其他条目。另一方面,下拉列表展开时,如果列表的某个条目内容超过了一个显示页面的宽度,将自动生成横向滚动条,便于操作查看条目的完整内容。为了减少输入,在包含下拉列表的输入窗口输入内容时电子设备的运行软件具有一定的自动匹配功能,即已经输入的自然语言内容正好与电子设备中存储的自然语言与操作功能对应信息的某条内容的部分字符匹配时,将自动把该条内容的其他文字字符更新到输入窗口中。
图3是本发明基于自然语言的电子设备人机交互操作界面技术包含非下拉列表和文字输入窗口实现操作的电子设备示意图。如图3所示,移动终端[301]的输入输出部分是完成界面操作的主要部件,至少包括输入信息的按键区域部件[306]和显示信息的显示屏部件[302],在显示屏部件[302]中包含非下拉列表和文字输入窗口[303],在按键区域部件[306]除了数字按键外,还有确定或OK按键[304]、取消或C按键[305]、在列表中向上移动选中条目的按钮[307]、向下移动选中条目的按钮[308]、向右移动按钮[309]和向左移动按钮[310]。在该示例中,包含非下拉列表和文字输入窗口[303]是一个带有非下拉列表框的文本输入窗口,操作人员通过按键或手写笔(需要显示屏部件[302]具有触摸屏功能)输入自然语言,也可以直接从非下拉列表框中选择符合要求的内容条目,通过取消或C按键[305]可以删除前面输入的内容实现对于输入内容的修改,通过向上移动选中条目的按钮[207]和向下移动选中条目的按钮[208]可以改变选定的列表条目,向右移动按钮[309]和向左移动按钮[310]可以移动横向滚动条查看条目中未显示的字符,按下确定或OK按键[304]即表示完成自然语言的输入,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的功能,然后自动调用内部功能函数或运行相应的程序完成相应的功能,然后将执行结果显示到移动终端[301]的显示屏部件[302]上。当移动终端完成开机状态后显示屏部件[302]的默认状态可以是包含非下拉列表的输入窗口等待输入状态,也可以是其他机器闲置等待状态,当需要进行其他操作时,按下确定或OK按键[304]就会进入包含非下拉列表的输入窗口等待输入状态。一方面,显示非下拉列表时,如果列表的条目数超过了一个显示页面的高度,将自动生成纵向滚动条,便于操作选择其他条目。另一方面,显示非下拉列表时,如果列表的某个条目内容超过了一个显示页面的宽度,将自动生成横向滚动条,便于操作查看条目的完整内容。为了减少输入,在包含非下拉列表的输入窗口输入内容时电子设备的运行软件具有一定的自动匹配功能,即已经输入的自然语言内容正好与电子设备中存储的自然语言与操作功能对应信息的某条内容的部分字符匹配时,将自动把该条内容的其他文字字符更新到输入窗口中。
图4是本发明基于自然语言的电子设备人机交互操作界面技术包含单级单个下拉列表和文字输入窗口实现操作步骤示意图。图4a是下拉列表未展开时的状态,图4b是下拉列表已经展开的状态。如图4a所示,包含单级单个下拉列表和文字输入窗口的下拉列表框没有展开时的状态,[401]是文字文本输入窗口,[402]是下拉列表的下拉按钮指示,对于显示屏是非触摸屏,只要按下图2所示的[OK]操作按钮就可以展开下拉列表的内容;对于显示屏是触摸屏,只要按下触摸屏上显示的下拉按钮指示[402]就可以展开下拉列表的内容。下拉列表内容展开后的显示屏显示状态如图4b所示,其中[403]是列表内容显示区,[404]是列表的纵向滚动条,[405]是列表的横向滚动条。对于显示屏是非触摸屏,只要按下图2所示的[UP]和[DN]操作按钮就可以选择下拉列表的某个条目内容,当条目内容超过显示宽度时,按下图2所示的[LT]和[RT]操作按钮就可以查看列表的某个条目内容横向未显示的字符,对于显示屏是触摸屏,只要按下触摸屏上显示的纵向滚动条可以显示其他条目内容,点击触摸屏上显示的某个条目就可以选中该条目,当条目内容超过显示宽度时,只要按下触摸屏上显示的横向滚动条可以显示条目内容的其他文字。此时按下图2所示的[OK]操作按钮,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的功能,然后自动调用内部功能函数或运行相应的程序完成相应的功能,然后将执行结果显示到移动终端的显示屏部件上。
图5是本发明基于自然语言的电子设备人机交互操作界面技术包含单级多个下拉列表和文字输入窗口实现操作步骤示意图。以两个包含下拉列表的输入窗口为例进行描述。图5a是下拉列表未展开时的状态,图5b是第一个下拉列表已经展开的状态,图5c是第二个下拉列表已经展开的状态,图5d是两个输入窗口都完成输入或选择后的状态。如图4a所示,包含单级多个下拉列表和文字输入窗口的下拉列表框没有展开时的状态,[501]和[502]是文字文本输入窗口,[503]和[504]是下拉列表的下拉按钮指示,对于显示屏是非触摸屏,第一次按下图2所示的[OK]操作按钮就可以展开第一下拉列表的内容;第二次按下图2所示的[OK]操作按钮就可以展开第二下拉列表的内容;第三次按下图2所示的[OK]操作按钮就表明完成内容的输入或选择;对于显示屏是触摸屏,只要按下触摸屏上显示的下拉按钮指示[503]和[504]就可以展开下拉列表的内容。第一个下拉列表内容展开后的显示屏显示状态如图5b所示,其中[505]是列表内容显示区,[506]是列表的纵向滚动条,[507]是列表的横向滚动条。对于显示屏是非触摸屏,只要按下图2所示的[UP]和[DN]操作按钮就可以选择下拉列表的每个条目内容,对于显示屏是触摸屏,只要按下触摸屏上显示的纵向滚动条可以显示其他条目内容,点击触摸屏上显示的某个条目就可以选中该条目,当条目内容超过显示宽度时,只要按下触摸屏上显示的横向滚动条可以显示条目内容的其他文字。第二个下拉列表内容展开后的显示屏显示状态如图5c所示,其操作方法与第一个下拉列表相同。两个输入窗口内容输入或选择完毕后的状态如图5d,此时按下图2所示的[OK]操作按钮,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的操作,然后自动调用内部功能函数或运行相应的程序完成相应的功能,然后将执行结果显示到移动终端的显示屏部件上。
图6是本发明基于自然语言的电子设备人机交互操作界面技术包含多级单个非下拉列表和文字输入窗口实现操作步骤示意图。这里描述的多级是指操作界面通过多个显示画面完成,本示例中以两级为例进行说明。图6a是第一级包含非下拉列表输入窗口,在本示例中,这一级输入或选择的内容是自然语言中的动词,如“发送”、“拨打”、“查询”等,图6b是第二级包含非下拉列表输入窗口,在本示例中,这一级输入或选择的内容是自然语言中的与前面一级动作相关的名词,如第一级选择了“查询”,在第二级显示列表中有“接收短信”、“话费余额”、“通话记录”等。在第二级中输入或选择“话费余额”就完成了自然语言“查询话费余额”的输入。此时按下图2所示的[OK]操作按钮,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的操作,并自动执行相应的操作,然后将执行结果显示到移动终端的显示屏部件上,例如,对于装有中国移动SIM卡的手机,对于“查询话费余额”这条自然语言的描述将是自动拨通查询话费余额的服务号码,并将执行结果显示在显示屏上。
图7是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的一个示例示意图。当用户输入了“发送信息ABSEJKJSKJDJ到12345678900”这条自然语言时,按下图2所示的[OK]操作按钮,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的操作是将信息“ABSEJKJSKJDJ”发送到目的号码“12345678900”,移动终端自动执行相应的操作,然后将执行结果显示到移动终端的显示屏部件上,也就完成了发送短信的操作。
图8是本发明基于自然语言的电子设备人机交互操作界面技术包含单纯文字输入窗口实现操作的另一个示例示意图。当用户输入了“给手机充值”这条自然语言时,按下图2所示的[OK]操作按钮,移动终端将输入或选择的自然语言信息由内部的硬件或执行程序进行分析,并与内部存储的自然语言信息及其与相应功能的关系分析得出操作人员需要移动终端完成的操作是“拨通对移动终端进行充值服务的目的号码”,移动终端自动执行相应的操作,也就完成了自动拨通对移动终端进行充值服务的目的号码进行给手机充值的操作。
由于本发明中的基于自然语言的电子设备人机交互操作界面技术将自然语言作为对电子设备的操作语言和界面,相比目前已知的电子设备的操作界面复杂、多变、不统一的状况,具有界面简洁、操作统一、易于理解、人人都可以掌握的优点,同时采用了自然语言的分析和理解技术,可以实现使用日常语言就可以操作的智能性,是对于电子设备系统操作界面技术的本质改变。由于克服了电子设备的操作障碍,在电子设备的推广和普及中将起到很大的作用。
最后所应说明的是:以上图示说明和实施示例仅用以说明而非限制本发明的技术方案,尽管参照上述实例对本发明进行了详细说明,本领域的技术人员应当理解:依然可以对本发明进行修改或者同等替换,而不脱离本发明的精神和范围的任何修改或者局部替换,其均应涵盖在本发明的权利要求范围当中。

Claims (10)

1、一种基于自然语言的电子设备人机交互操作界面技术,其特征在于:
1)包含具有信息处理能力的硬件系统和存储在其内的可以执行的程序代码;
2)具有需要操作界面操作的各种功能;
3)包含有需要人机交互界面操作的各种功能与一个或多个自然语言的对应信息;
4)包含有对自然语言进行比较和分析的硬件或软件程序代码;
5)包含输入自然语言的操作界面或通过下拉列表或非下拉列表选择自然语言的操作界面;
6)包含进行界面操作的输入部件,如键盘、按钮、鼠标或手写笔等;
7)包含存储自然语言同义词和相同语义语句的信息;
8)包含用于显示信息内容的和操作界面的显示部件,如电子显示屏、液晶显示器等;
9)在需要通过声音识别技术来输入自然语言的电子设备中,需要包含声音信号采集硬件电路和声音分析处理芯片或处理软件。
2、一种基于自然语言的电子设备人机交互操作界面技术,其特征在于操作界面具有如下形式之一:
1)只有一级自然语言输入或列表选择界面,并只有一个输入或列表选择窗口;
2)只有一级自然语言输入或列表选择界面,并有多个输入或列表选择窗口;
3)有多级自然语言输入或列表选择界面,并且每级界面有一个或多个输入或列表选择窗口。
3、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的只有一级自然语言输入或列表选择界面,并只有一个输入或列表选择窗口,是将需要完成的功能用自然语言在该级显示界面的一个窗口中全部输入或选择列表中已经有的自然语言,然后按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
4、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的只有一级自然语言输入或列表选择界面,并有多个输入或列表选择窗口,是将需要完成的功能用自然语言在该级显示界面的多个窗口中分别输入或选择列表中已经有的自然语言,几个窗口内容按一定顺序连接在一起描述了需要完成某个功能的完整自然语言,然后按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
5、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的有多级自然语言输入或列表选择界面,并且每级界面有一个或多个输入或列表选择窗口,是将需要完成的功能用自然语言在多级显示界面的一个或多个窗口中分别输入或选择列表中已经有的自然语言,多级界面的多个个窗口内容按一定顺序连接在一起描述了需要完成某个功能的完整自然语言,当多级界面的某级不是最后一级界面时按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备的显示界面将自动进入下一级界面,当多级界面的某级已经是最后一级界面时按下确定按钮或在具有触摸功能的显示界面中显示的确定按钮,电子设备将根据存储的自然语言与具体功能对应信息并结合对自然语言的分析结果自动完成相应的功能或动作。
6、如权利要求1所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的包含有对自然语言进行比较和分析的硬件或软件程序代码有如下特点:
1)存储了人们日常表达的词汇的同义词信息,可以将同义词的表达判定为同一个功能需求的表达;
2)存储了人们日常表达的具有相同含义的语句信息,可以将同义语句的表达判定为同一个功能需求的表达;
3)对于获得的功能需求可以通过自动调用电子设备内部定义的功能函数来执行,也可以通过自动执行电子设备内部安装的可执行程序代码或程序文件来执行,还可以通过自动调用电子设备内部定义的功能函数与自动执行电子设备内部安装的可执行程序代码或程序文件的各种组合来执行。
7、如权利要求1所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的通过下拉列表或非下拉列表选择自然语言的操作界面,具有如下特点:
1)对于下拉列表选择自然语言的操作界面,输入窗口有一个下拉指示按钮,按下后输入窗口将展开可选内容列表,当一个显示屏显示不完整时将自动根据内容生成纵向滚动条或横向滚动条。
2)对于非下拉列表选择自然语言的操作界面,输入窗口有一个已经展开的可选内容列表,当一个显示屏显示不完整时将自动根据内容生成纵向滚动条或横向滚动条;
3)在输入窗口输入内容时具有一定的自动匹配功能,即已经输入的自然语言内容正好与列表中的某条内容的部分字符匹配,将自动将该条内容的其他字符更新到输入窗口,减少用户的操作。
8、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的只有一级自然语言输入或选择界面,并有多个输入或选择窗口,对于多个输入或选择窗口的内容之间可以具有一定的语法逻辑关系,使前一个窗口输入或选择的内容可以缩小其它未输入或选择窗口的内容范围。
9、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的有多级自然语言输入或选择界面,并且每级界面有一个或多个输入或选择窗口,对于多级输入或选择界面之间可以具有一定的语法逻辑关系,前一级窗口输入或选择的内容可以缩小其下一级界面输入或选择窗口的内容范围,同时对于多个输入或选择窗口的内容之间也可以具有一定的语法逻辑关系,使前一个窗口输入或选择的内容可以缩小其它输入或选择窗口的内容范围。
10、如权利要求1和权利要求2所述的一种基于自然语言的电子设备人机交互操作界面技术,其特征在于,所述的包含有对自然语言进行比较和分析的硬件或软件程序代码,具有如下功能:
1)对于通过使用者操作中输入的自然语言,并经过所述软件程序代码运行分析后匹配了电子设备某个具体功能或功能组合,该所属软件程序代码可以将所输入的自然语言保存在电子设备的内部存储体中,并在下一次操作具有下拉列表或非下拉列表的输入窗口时显示在列表中,方便操作者选择;
2)对于自然语言中的同义词或相同语义的内容,可以通过所述的硬件或软件程序代码和所述的存储自然语言同义词和相同语义语句的信息来选择对应的操作功能;
3)可以修改、增加、删除电子设备内部存储的自然语言的信息及其与操作功能或功能组合的对应信息;
4)可以修改、增加、删除电子设备内部存储的自然语言同义词和相同语义语句的信息及其与操作功能或功能组合的对应信息。
CN 200610144126 2006-11-28 2006-11-28 基于自然语言的电子设备人机交互操作界面技术 Pending CN1963752A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200610144126 CN1963752A (zh) 2006-11-28 2006-11-28 基于自然语言的电子设备人机交互操作界面技术

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200610144126 CN1963752A (zh) 2006-11-28 2006-11-28 基于自然语言的电子设备人机交互操作界面技术

Publications (1)

Publication Number Publication Date
CN1963752A true CN1963752A (zh) 2007-05-16

Family

ID=38082825

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200610144126 Pending CN1963752A (zh) 2006-11-28 2006-11-28 基于自然语言的电子设备人机交互操作界面技术

Country Status (1)

Country Link
CN (1) CN1963752A (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102737101A (zh) * 2011-03-31 2012-10-17 微软公司 用于自然用户界面系统的组合式激活
CN102779144A (zh) * 2012-03-20 2012-11-14 北京捷通华声语音技术有限公司 一种手写控制、查询的方法和装置
CN103116648A (zh) * 2013-02-28 2013-05-22 魏骁勇 基于图形式上下文语境和机器学习的单词记忆方法及其装置
US9454962B2 (en) 2011-05-12 2016-09-27 Microsoft Technology Licensing, Llc Sentence simplification for spoken language understanding
CN106034068A (zh) * 2015-03-20 2016-10-19 阿里巴巴集团控股有限公司 群聊中进行私聊的方法、装置、客户端、服务器及系统
US9760566B2 (en) 2011-03-31 2017-09-12 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
US9842168B2 (en) 2011-03-31 2017-12-12 Microsoft Technology Licensing, Llc Task driven user intents
US9858343B2 (en) 2011-03-31 2018-01-02 Microsoft Technology Licensing Llc Personalization of queries, conversations, and searches
US10049667B2 (en) 2011-03-31 2018-08-14 Microsoft Technology Licensing, Llc Location-based conversational understanding
US10061843B2 (en) 2011-05-12 2018-08-28 Microsoft Technology Licensing, Llc Translating natural language utterances to keyword search queries
CN110248019A (zh) * 2013-06-08 2019-09-17 苹果公司 用于启用语音的对话界面的方法、计算机存储介质和设备
US10642934B2 (en) 2011-03-31 2020-05-05 Microsoft Technology Licensing, Llc Augmented conversational understanding architecture
CN112068832A (zh) * 2020-08-26 2020-12-11 施剑侃 一种可视化界面设计方法及平台
CN112506357A (zh) * 2020-12-09 2021-03-16 深圳市联谛信息无障碍有限责任公司 输入方法、电子设备和非易失性计算机可读存储介质

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10296587B2 (en) 2011-03-31 2019-05-21 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
CN102737101B (zh) * 2011-03-31 2018-09-04 微软技术许可有限责任公司 用于自然用户界面系统的组合式激活
US10049667B2 (en) 2011-03-31 2018-08-14 Microsoft Technology Licensing, Llc Location-based conversational understanding
CN102737101A (zh) * 2011-03-31 2012-10-17 微软公司 用于自然用户界面系统的组合式激活
US10585957B2 (en) 2011-03-31 2020-03-10 Microsoft Technology Licensing, Llc Task driven user intents
US9858343B2 (en) 2011-03-31 2018-01-02 Microsoft Technology Licensing Llc Personalization of queries, conversations, and searches
US9760566B2 (en) 2011-03-31 2017-09-12 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
US9842168B2 (en) 2011-03-31 2017-12-12 Microsoft Technology Licensing, Llc Task driven user intents
US10642934B2 (en) 2011-03-31 2020-05-05 Microsoft Technology Licensing, Llc Augmented conversational understanding architecture
US9454962B2 (en) 2011-05-12 2016-09-27 Microsoft Technology Licensing, Llc Sentence simplification for spoken language understanding
US10061843B2 (en) 2011-05-12 2018-08-28 Microsoft Technology Licensing, Llc Translating natural language utterances to keyword search queries
CN102779144A (zh) * 2012-03-20 2012-11-14 北京捷通华声语音技术有限公司 一种手写控制、查询的方法和装置
CN103116648B (zh) * 2013-02-28 2016-05-11 魏骁勇 基于图形式上下文语境和机器学习的单词记忆方法及其装置
CN103116648A (zh) * 2013-02-28 2013-05-22 魏骁勇 基于图形式上下文语境和机器学习的单词记忆方法及其装置
CN110248019A (zh) * 2013-06-08 2019-09-17 苹果公司 用于启用语音的对话界面的方法、计算机存储介质和设备
CN106034068A (zh) * 2015-03-20 2016-10-19 阿里巴巴集团控股有限公司 群聊中进行私聊的方法、装置、客户端、服务器及系统
CN112068832A (zh) * 2020-08-26 2020-12-11 施剑侃 一种可视化界面设计方法及平台
CN112506357A (zh) * 2020-12-09 2021-03-16 深圳市联谛信息无障碍有限责任公司 输入方法、电子设备和非易失性计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN1963752A (zh) 基于自然语言的电子设备人机交互操作界面技术
US6864809B2 (en) Korean language predictive mechanism for text entry by a user
US7149550B2 (en) Communication terminal having a text editor application with a word completion feature
JP4184567B2 (ja) 予測エディタアプリケーションを有する通信ターミナル
CN100367185C (zh) 在具有用户接口的电子设备中提供允许语音的输入的方法和设备
US7155683B1 (en) Communication terminal having a predictive editor application
JP4059502B2 (ja) 予測エディタアプリケーションを有する通信端末装置
CN101256462B (zh) 基于全混合联想库的手写输入方法和装置
US20040153975A1 (en) Text entry mechanism for small keypads
US20020152203A1 (en) Communication terminal having a predictive text editor application
CN108377289B (zh) 已发送信息修改方法、装置及计算机可读存储介质
CN101227669A (zh) 具有触摸屏的移动终端
KR20100127525A (ko) 휴대단말의 잠금 모드 해제 방법 및 장치
CN102111505A (zh) 一种移动终端短信息提示显示方法
JP2005242490A (ja) 問題解決支援装置、及びプログラム
CN101909103B (zh) 便携式电话
CN104076916A (zh) 一种信息处理方法以及电子设备
CN105718072B (zh) 一种字符输出方法及移动终端
KR20060129735A (ko) 이동통신 단말기 및 이를 이용한 데이터 처리 방법
CN102177701A (zh) 便携式电子设备、字符输入画面显示方法及程序
US20080003984A1 (en) Method and system for improved handling of message templates
CN103003874A (zh) 基于语言属性到联系人条目的分配而提供文本服务
KR20100062251A (ko) 단말기 및 그 제어 방법
KR20120007168A (ko) 이동단말 상에서의 사용자 편의를 고려한 메시지전송방법
KR20050091283A (ko) 이동통신 단말기의 문자 메세지내 문자열 처리 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication