CN103888799B - 控制方法和控制装置 - Google Patents

控制方法和控制装置 Download PDF

Info

Publication number
CN103888799B
CN103888799B CN201210556733.4A CN201210556733A CN103888799B CN 103888799 B CN103888799 B CN 103888799B CN 201210556733 A CN201210556733 A CN 201210556733A CN 103888799 B CN103888799 B CN 103888799B
Authority
CN
China
Prior art keywords
display
operation object
user
identifier
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210556733.4A
Other languages
English (en)
Other versions
CN103888799A (zh
Inventor
韩瑜
过晓冰
陈司司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201210556733.4A priority Critical patent/CN103888799B/zh
Publication of CN103888799A publication Critical patent/CN103888799A/zh
Application granted granted Critical
Publication of CN103888799B publication Critical patent/CN103888799B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种控制方法和控制装置,所述方法应用于一电子设备并且包括:确定可操作对象;向所述可操作对象分配对象标识符;与所述可操作对象相关联地显示所述对象标识符;检测用户输入的第一控制信号;根据所述第一控制信号来识别用户所选择的对象标识符;以及对与用户所选择的对象标识符对应的可操作对象执行操作。因此,在本发明中,可以实现一种使用对象标识符的信息输入方式,从而简化了用户操作,提高了用户体验。

Description

控制方法和控制装置
技术领域
本发明涉及计算机技术领域,更具体地,本发明涉及一种控制方法和控制装置。
背景技术
随着计算机技术的不断发展,个人用户拥有了越来越多的高性能电子设备,比如智能手机、平板电脑(PAD)、超级本、智能电视(Smart TV)和个人计算机(PC)等。
在传统意义上,不同的电子设备被设计为用于实现不同的功能并适应于不同的应用场景,比如智能手机适应于使用在移动环境中,PC适应于用作家庭环境下的媒体中心,Smart TV适用于执行媒体广播数据管理,PAD适用于观看电子书和移动媒体消费,而超级本适用于满足家庭办公和小型办公需求等。
为了实现设计时的固有功能,在不同类型的电子设备上会安装不同的应用程序,而这些应用程序往往仅仅适于使用原生的信息输入方式(或称之为,交互方式)。比如PC上的应用程序适用于基于鼠标和键盘的交互方式,智能手机和PAD上的应用程序适用于基于触摸屏的交互方式,而TV上的应用程序适用于基于遥控器的操作方式等。
然而,随着各种跨平台技术的出现,这些电子设备在具有非常强的计算能力的同时,逐渐能够实现并未为其固有设计的功能(或称之为,外源功能,即为其他电子设备设计的功能)。
以智能电视为例,由于其处理性能的不断增强,除了观看普通的电视节目之外,人们可以利用在其上装备的大屏幕、以更佳的视觉体验来执行其他各种功能,诸如上网浏览网页、阅读编辑离线文档等等。然而,由于智能电视目前仍然只能基于遥控器来进行信息输入,所以要实现各种外源功能(例如,在网页中定位用户需要的信息)往往很不方便。
对此,现有技术中的一种解决方案是在智能电视中实现语音识别功能。然而,现有的语音识别功能仅仅能够用于对电视机进行简单的语音控制,诸如用户通过说出“音量增加”来调高电视机的音量;或者用户通过直接读出文字来将该文字录入到电视机的文本框中。显然,这种单纯的语音识别功能仍然无法满足各种外源功能的交互需求。
因此,需要一种新型的控制方法和控制装置来解决上述问题。
发明内容
为了解决上述技术问题,根据本发明的一个方面,提供了一种控制方法,所述方法应用于一电子设备,其特征在于,所述方法包括:确定可操作对象;向所述可操作对象分配对象标识符;与所述可操作对象相关联地显示所述对象标识符;检测用户输入的第一控制信号;根据所述第一控制信号来识别用户所选择的对象标识符;以及对与用户所选择的对象标识符对应的可操作对象执行操作。
此外,根据本发明的另一方面,提供了一种控制装置,所述装置应用于一电子设备,其特征在于,所述装置包括:确定单元,用于确定可操作对象;分配单元,用于向所述可操作对象分配对象标识符;显示单元,用于与所述可操作对象相关联地显示所述对象标识符;检测单元,用于检测用户输入的第一控制信号;识别单元,用于根据所述第一控制信号来识别用户所选择的对象标识符;以及执行单元,用于对与用户所选择的对象标识符对应的可操作对象执行操作。
与现有技术相比,采用根据本发明的控制方法和控制装置,可以确定用户准备对其进行操作的可操作对象,向该可操作对象分配对象标识符,并向用户反馈该可操作对象的对象标识符,使得用户可以直接使用对象标识符来对该可操作对象执行操作。因此,在本发明中,可以实现一种使用对象标识符的信息输入方式,从而简化了用户操作,提高了用户体验。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1图示了根据本发明的控制方法。
图2图示了根据本发明的控制装置。
图3图示了根据本发明实施例的控制方法。
图4图示了根据本发明实施例的控制装置。
图5图示了根据本发明实施例的搜索初始显示画面。
图6图示了根据本发明实施例的搜索结果显示画面。
图7图示了根据本发明实施例的第一显示示例。
图8图示了根据本发明实施例的第二显示示例。
图9图示了根据本发明实施例的第三显示示例。
具体实施方式
将参照附图详细描述根据本发明的各个实施例。这里,需要注意的是,在附图中,将相同的附图标记赋予基本上具有相同或类似结构和功能的组成部分,并且将省略关于它们的重复描述。
在下文中,将参考图1和图2来描述根据本发明的控制方法和控制装置。
图1图示了根据本发明的控制方法,而图2图示了根据本发明的控制装置。
图1所图示的控制方法可以通过图2所图示的控制装置来实现。具体地,所述控制装置100包括:确定单元110、分配单元120、显示单元130、检测单元140、识别单元150、和执行单元160。
如图1所图示的,所述控制方法应用于一电子设备,并且包括:
在步骤S110中,确定单元110确定可操作对象;
在步骤S120中,分配单元120向所述可操作对象分配对象标识符;
在步骤S130中,显示单元130与所述可操作对象相关联地显示所述对象标识符;
在步骤S140中,检测单元140检测用户输入的第一控制信号;
在步骤S150中,识别单元150根据所述第一控制信号来识别用户所选择的对象标识符;以及
在步骤S160中,执行单元160对与用户所选择的对象标识符对应的可操作对象执行操作。
由此可见,采用根据本发明的控制方法和控制装置,可以确定用户准备对其进行操作的可操作对象,向该可操作对象分配对象标识符,并向用户反馈该可操作对象的对象标识符,使得用户可以直接使用对象标识符来对该可操作对象执行操作。因此,在本发明中,可以实现一种使用对象标识符的信息输入方式,从而简化了用户操作,提高了用户体验。
如背景技术中所述的,随着电子设备跨平台功能的不断强大,其固有的信息输入方式难以满足外源功能的控制需求。下面,在具体示例中说明在现有技术中存在的这种问题。
例如,随着智能电视的出现,电视机的功能越发多样化,为了实现某一个功能(比如,用户想要放弃观看电视节目,转而进入浏览器以搜索图像、音视频),用户可能需要经过众多的按钮选择和界面转换。这需要用户在遥控器和电视显示器之间反复转换视线,无疑增加了用户的视觉疲劳,因而难以获得较佳的用户体验。而且,如果用户并不了解电视机的功能切换方法,他/她的目的恐怕更是难以实现的。
另外,即便用户只是想实现一个简单的功能(例如,在浏览器中点击搜索引擎返回的诸如图像、音频、视频之类的多媒体对象,以打开该多媒体对象的详细内容),但是由于智能电视仍然必须基于遥控器来在浏览器所显示的网页中移动光标、且为了满足点击的粒度而导致光标的移动步长相对较小,所以用户想要跨越网页而将光标定位到自己需要的信息上也将是非常耗时的。
因此,本发明人设想出一种通用、快捷的信息输入方式来解决现有技术中的技术问题。
在下文中,将参考图3和图4来描述根据本发明实施例的控制方法和控制装置。
图3图示了根据本发明实施例的控制方法,而图4图示了根据本发明实施例的控制装置。
图3所图示的控制方法可以通过图4所图示的控制装置来实现。与图2中一样的,如图4所图示的,该控制装置100包括:确定单元110、分配单元120、显示单元130、检测单元140、识别单元150、和执行单元160。具体地,该确定单元110包括:接收模块111、识别模块112、搜索模块113、和确定模块114。
该控制装置100应用于一电子设备。在一个示例中,该控制装置100可以作为一个功能模块和/或硬件装置而集成到该电子设备中。例如,当电子设备是移动电话时,该控制装置100可以是该移动电话的操作系统中的一个软件模块,或者可以是针对于该移动电话所开发的一个应用程序。替换地,在另一示例中,该控制装置100与该电子设备也可以是分离的设备,并且该控制装置100可以通过有线和/或无线网络连接到该电子设备,并且按照约定的数据格式来传输控制信息。例如,当电子设备是电视机时,该控制装置100可以集成在专用于该电视机的遥控装置中。
下面,将在以下场景中具体地说明本发明的实施例,其中将电子设备选取为在传统中基于遥控器来进行操作的电视机,将控制装置100集成在该电视机中,将控制方法应用于对电视机进行控制以打开在搜索引擎返回的搜索结果之中用户需要浏览的多媒体对象(诸如图像、音频、视频)的过程中。
需要说明的是,本发明不限于此。而是,还可以将控制装置100集成在该电视机的遥控器中,或者作为一个单独的装置而与该电视机和遥控器分离。此外,还可以将本发明应用于控制装置与其他的一个或多个电子设备(例如,个人计算机、平板电脑、移动电话、多媒体播放器、个人数字助理、超级本等)之间的任何交互过程。
如图3所图示的,根据本发明实施例的控制方法包括:
在步骤S210中,接收用户输入的第二控制信号。
具体地,当用户想要使用电视机来完成自己期望的某一功能时,用户可以例如通过操作遥控器面板中的“开机”按钮,或者通过按压电视机机身上的“开机”按键来对电视机执行开机操作,来使得电视机进入开机运行状态。
接下来,用户可以通过各种方式(语音、手写输入、按钮选择)来向电视机输入自己期望的控制命令。例如,当用户希望在电视机的大屏幕上通过搜索引擎来搜索多媒体对象的时候,他/她可以首先在电视机上打开浏览器,并在地址栏中输入提供搜索服务的网站地址(即,启动搜索引擎)。然后,搜索引擎的初始页面将显示在电视机的显示器上,在该初始页面中包括有关键字搜索栏,以供用户选择自身感兴趣的主题进行搜索。在搜索引擎执行搜索操作之后,包括众多搜索结果信息的网页将显示在电视机的显示器上,使得用户能够进一步选择自身感兴趣的多媒体对象进行具体浏览。
在现有技术中,这种具体搜索的操作往往是依靠用户逐步长地移动光标以点击该搜索栏,并输入关键字执行搜索,并其后在搜索结果中重新移动光标以选定期望的多媒体对象来进行的,然而,在本发明的实施例中,用户可以直接输入关键字来执行搜索并且直接输入标识符来定位相关的多媒体对象。
例如,当用户希望浏览与“各国货币符号”相关联的所有图像时,他/她可以向控制装置100输入关键字“各国货币符号”,作为控制信号。相应地,在控制装置100的确定单元110中,接收模块111接收用户输入的控制信号。
在一个优选示例中,根据本发明实施例的控制装置100可以具有语音识别的功能,使得用户可以通过语音方式来向电视机输入自己期望的控制命令。
图5图示了根据本发明实施例的搜索初始显示画面。
如图5所图示的,在该搜索初始显示画面中包括:关键字搜索栏、用于提供搜索引擎服务的网站标识(logo)、在该网站中嵌入的广告服务等。其中,附图标记510示出了在本发明实施例中新加入的一个具有语句输入功能的搜索表单栏。这时,用户可以激活控制装置100的语音输入功能并向集成有该控制装置100的电视机通过语音方式直接说出自己需要检索的关键字“各国货币符号”。然后,接收模块111接收用户输入的音频信号,并将该音频信号发送到后续模块以进行识别。
然而,基于语音识别技术的原理可知,在要识别的语音中包括的文字越多,语音命令的识别错误率将以几何倍数增加。因此,为了提高语音识别的正确率,优选地,在本发明的实施例中,用户只需要说出期望执行命令的一部分文字即可。例如,用户可以仅仅说出“各国货币符号”中的“货币符号”四个字。这时,接收模块111将接收到用户通过语音方式输入的具有较少音节的音频信号,并将该音频信号发送到后续模块以进行识别。
具体地,为了实现上述语音输入的功能,可以对在电视机中安装的用于网页浏览的应用程序(例如,浏览器)进行功能扩展,从而建立一个用于语音输入的新的当前页面搜素栏。
例如,以超文本链接标示语言(HTML)实现网页功能的扩展为例进行说明。如果在网页页面中本身已经存在关键字搜索栏,则只需对其直接加入语音输入属性x-webkit-speech即可。否则,需要首先在网页中加入一个<form>标签,然后,在这个<form>标签中加入HTML语句<input type="text"x-webkit-speech/>。
这样,就可以在检索栏中实现图标为小话筒的语音输入功能,从而使得用户通过移动光标点击该小话筒、点击遥控器上的相应语音输入控制按钮、或执行特定的手势操作等来激活电视机的语音输入功能。显然,该电视机的语音输入功能也可以时刻保持开启状态,以便随时接收用户输入的语音指令。
在步骤S220中,根据第二控制信号来识别关键字。
具体地,在接收到用户输入的音频控制信号之后,接收模块111将它传送到识别模块112。识别模块112对用户通过语音方式输入的具有较少音节的音频信号“货币符号”进行语音识别。如上所述,由于该音频信号包含较少的音节,所以识别模块112进行语音识别的正确率被大大提升。
该识别模块112对该音频信号进行识别,并且判断出用户所输入的文字是“货币符号”,并且将该文字作为后续使用的关键字。
此外,优选地,当用户所输入的文字具有同音字或者该识别模块112无法进行正确识别时,该识别模块112也可以在电视机的显示器中向用户提示同音字或近音字,以供用户进一步选择。
例如,当该用户输入的文字是“风景”时,该识别模块112可以向用户提示其同音字“风景”或“风井”。而当识别模块112无法识别出正确的音调或音节时,它还可以向用户提示近音字“风镜”、“分镜”、“风紧”等。然后,该识别模块112还可以通知控制装置100中的分配单元120向这些同音字或近音字分配唯一的标识符以供用户进行选择等。
此外,该识别模块112还可以根据可能的概率对这些同音字或近音字进行降序排列,以方便用户的选择。
在步骤S230中,利用搜索引擎来搜索关键字。
具体地,在识别模块112识别出用户输入的关键字之后,识别模块112将它传送到搜索模块113。搜索模块113与在电视机中启动的搜索引擎进行通信,使得该搜索引擎在网络(例如,因特网)中搜索与该关键字相关联的多媒体对象。
图6图示了根据本发明实施例的搜索结果显示画面。
例如,在电视机中显示的搜索结果的页面可以如图6所图示的。在图6中显示有与关键字“货币符号”相关联的4条图像信息,分别通过附图标记610到640表示,并且显示有诸如搜索到的结果数目、搜索用时等与本次搜索相关的提示信息、相关搜索项目、以及网站logo信息和广告信息。此外,图5中的附图标记650和660分别示出了用于对搜索结果页面进行翻页跳转的箭头。例如,该箭头可包括超级链接,以便当用户点击时向前翻页或向后翻页,以显示更多的多媒体对象。
在步骤S240中,将在搜索结果页面中包括的显示对象确定为可操作对象。
具体地,确定模块114获取搜索引擎返回的关于关键字“货币符号”的搜索结果页面,将在所述搜索结果页面中包括的显示对象确定为所述可操作对象,并且将它返回到控制装置100的分配单元120。
在第一示例中,该确定模块113可以将在该搜索结果页面中包括的所有显示对象都确定为可操作对象。也就是说,该确定模块113将4条图像信息、翻页图标、与本次搜索相关的提示信息、以及网站logo信息、和广告信息都确定为显示对象。
然而,由于通常用户在后续操作中不会期望对与本次搜索相关的提示信息、网站的logo信息、或广告信息执行任何操作,所以该确定模块113产生的此确定结果显然不是最优的,因而需要对确定结果进一步进行优化。
在第二示例中,由于用户在后续操作中往往需要对搜索结果进行操作(例如,进行点击以跳转到包括该多媒体对象详细内容的页面),所以该确定模块113可以判断在该搜索结果页面中包括的显示对象是否包括能够执行的操作指令(例如,是否包括超级链接)。如果该显示对象包括能够执行的操作指令,则该确定模块113将其确定为可操作对象;否则该确定模块113对其进行忽略。
这样,就可以将搜索到的结果数目和搜索用时等提示信息与其他显示对象区分开。然而,由于网站logo信息和广告信息也都可能包括有超级链接,而用户往往不期望对其执行任何操作,所以该确定模块113还需要对如此产生的确定结果进行过滤。
在第三示例中,如本实施例中所述的,如果用户希望搜索多媒体格式(例如,图像、音视频等)的对象并从而启动多媒体格式的搜索引擎,则该确定模块113可以根据该搜索引擎的类型来判断当前用户期望的搜索结果的格式,并且仅将符合用户期望格式的多媒体对象确定为可操作对象。
例如,当用户希望浏览与“各国货币符号”相关联的所有图像时,该确定模块113可以首先确定出期望的格式是图像格式,并且判断在该搜索结果页面中包括的显示对象是否是图像格式。如果该显示对象是图像格式,则该确定模块113将其确定为可操作对象;否则该确定模块113对其进行忽略。
这样,就可以将相关搜索项目等纯文本对象与搜索结果区分开。然而,当网站logo信息和广告信息同样是图像格式时,该确定模块113进一步需要用其他过滤方式来对如此产生的所有确定结果进行再次过滤。
进一步优选地,该确定各模块113根据所述显示对象的多媒体格式来对所述显示对象进行内容识别,并且仅将与所述关键字或页面导航对象(例如,向前翻页650和向后翻页660)相关联的多媒体对象确定为可操作对象。
例如,该确定模块113可以从识别模块112接收用户输入的关键字“货币符号”,并且获得与关键字相关联的多媒体对象的参考样本,即各种货币符号的参考图像。另外,该确定模块113还可以获得与用于翻页的显示对象相关联的参考样本,即左右箭头的参考图像。然后,该确定各模块113对在该搜索结果页面中包括的显示对象进行内容识别,并且判断这些显示对象的内容与上述参考样本的相似度是否在阈值之内。如果显示对象的内容与参考样本的内容足够相似,则该确定模块113将其确定为可操作对象;否则该确定模块113对其进行忽略。
这样,就可以将图像格式的网站logo信息和广告信息与作为搜索结果的图像区分开。然而,在极端情况下,如果网站logo信息或广告信息同样与关键字或页面导航对象相关联,则该确定模块113可以进一步执行更加精确过滤操作。
在第四示例中,该确定模块113可以判断所述显示对象是否出现在所述搜索结果页面之前的搜索初始显示页面中,并且仅将没有出现在搜索初始显示页面中的显示对象确定为所述可操作对象。这是由于通常而言,搜索结果只可能出现在搜索结果页面,并且随着搜索结果页面的翻页而不同,只有广告信息和网站logo信息才会一直出现在搜索初始显示页面或不同的搜索结果页面中。
这样,就可以更加精确地将网站logo信息和广告信息与搜索结果区分开。
此外,在其他示例中,该确定模块113还可以使用其他过滤方法来对非搜索结果进行滤除。例如在一个搜索结果页面中,搜索结果的显示区域往往是固定的,虽然每个搜索引擎所返回的搜索结果页面可能并非完全相同,但是其大致的范围都是可以确定。因此,该确定模块113还可以进一步确定作为搜索结果的显示对象所处的范围而将其确定为可操作对象。
需要说明的是,尽量在此将上述过滤方式级联地使用以获得最优的可操作对象确定结果,但是本发明不限于此。而是,还可以将各种过滤方式单独地或在任何组合中进行使用。
在步骤S250中,向可操作对象分配对象标识符。
具体地,在确定模块113将在所述搜索结果页面中包括的、与关键字或者页面导航对象相关联的显示对象确定为所述可操作对象之后,分配单元120向作为可操作对象的每一个显示对象分配对象标识符。
例如,该对象标识符可以是数字编号。这时,该分配单元120可以逐一地向与用户输入的关键字或者页面导航对象相关联的显示对象分配唯一的编号,例如向附图标记610所表示的图像分配编号“1”;向附图标记620所表示的图像分配编号“2”;向附图标记630所表示的图像分配编号“3”;向附图标记640所表示的图像分配编号“4”;向附图标记650所表示的向前翻页图标分配编号“5”;并且向附图标记660所表示的向后翻页图标分配编号“6”。
显然,该分配单元120也可以向上述每一个显示对象分配一个英文字母,例如依次地向它们分配字母“A”到“F”。
同理,该对象标识符也可以采用其他方式(例如,颜色),只要其易于向电视机输入并易于被电视机识别即可。
此外,优选地,该分配单元120还可以根据统计或经验数据,向用户选择概率较高的显示对象分配在顺序中更为靠前的标识符,比如编号“1”或字母“A”等。
在步骤S260中,与可操作对象相关联地显示对象标识符。
具体地,在分配单元120向搜索引擎返回的关于关键字或页面导航对象的显示对象分配对象标识符之后,显示单元130与作为可操作对象的显示对象相关联地显示所述对象标识符。
图7图示了根据本发明实施例的第一显示示例。
例如,显示单元130可以在电视机的当前显示画面中添加一个显示图层,该显示图层可以覆盖当前显示画面的至少一部分。接下来,该显示单元130在该显示图层中显示所述可操作对象的采样(例如,图像的缩略图、音视频的部分片段)和所述可操作对象的对象标识符。另外,为了清楚地体现出可操作对象的缩略图和所述可操作对象的对象标识符,该显示图层优选地可以是非透明或者半透明的。
如图7所图示的,显示单元130在电视机的显示器上显示出一个方框,在该方框中包括有一个列表,其中列出了用户所输入的关键字“货币符号”、与搜索结果图像或翻页图标相关联的缩略图、以及每个显示对象的相应标识符。
显然,除了列表之外,该显示单元130也可以采用其他方式(诸如,表格、图案)来显示上述显示对象及其标识符。
图8图示了根据本发明实施例的第二显示示例。
例如,显示单元130可以确定所述可操作对象在所述当前显示画面中的位置。接下来,该显示单元130在电视机的当前显示画面中添加一个优选地为透明的显示图层,所述透明显示图层完全覆盖所述当前显示画面。然后,该显示单元130在所述透明显示图层中,在与所述可操作对象的位置对应的位置处显示所述可操作对象的对象标识符。
如图8所图示的,显示单元130在当前显示的网页前端添加一个透明图层,确定所有与该关键字和页面导航对象相关联的显示对象在该网页上的坐标,并且在新添加的透明显示图层中,在每一个显示对象的位置附近处显示在步骤S250中向该显示对象分配的对象标识符。例如,显示单元130可以利用HTML中的div标签和CSS技术,使得在这里每一个关键字的结果对应一个div块,从而在该透明图层中在每一个显示对象所在地进行半透明显示并且添加对象标识符。
另外,在此示例中,当用户需要对网页文档进行滚动或翻页时,因为可以根据文件对象模型(DOM)树来计算每一个显示对象的位置属性,所以显示单元130可以容易地计算出目标所在网页中的位置信息,这样,在设计div属性的时候,显示单元130可以用显示对象的绝对位置对其进行定位,使得它的显示可以不受滚屏的影响,即,使得对象标识符可以随着屏幕滚动而跟随显示对象移动。
图9图示了根据本发明实施例的第三显示示例。
例如,显示单元130可以确定所述可操作对象在所述当前显示画面中的位置。接下来,该显示单元130对电视机的当前显示画面进行修改,使得在所述可操作对象的位置处插入所述可操作对象的对象标识符。
如图9所图示的,显示单元130首先获取在当前显示画面中显示的网页页面的源代码,确定每一个显示对象在该网页上的坐标,并且对该网页页面的源代码进行修改,使得在与每一个显示对象的位置对应的位置处插入与之一一对应的对象标识符。并优选地,还可以对网页中剩余元素的排版进行适当调整,以免破坏原有页面的布局,影响美观。
另外,在此示例中,显示单元130还可以优选地保存该网页页面的原始显示页面,以便当用户取消搜索操作时,恢复该页面的原有显示。
在步骤S270中,检测用户输入的第一控制信号。
具体地,在显示单元130向用户显示出与所述关键字或者页面导航对象相关联的显示对象及其标识符之后,用户可以通过各种方式(语音、手写输入、按钮选择)来进一步选择他/她所期望对哪一个显示对象执行后续的操作指令。
例如,用户可以继续使用语音输入的方式来进行上述选择。如果用户希望查阅美元的货币符号,则他/她在观看到如图7到图9之一所图示的显示画面之后,他/她将读出编号“3”。相应地,在控制装置100中,检测单元140检测用户输入的音频控制信号,并将该音频信号发送到后续模块以进行识别。
当然,方便起见,用户也可以通过手写板或体感工具来输入“3”,或直接通过按压遥控器上的按钮“3”来选择期望对其执行操作指令的显示对象。
在步骤S280中,根据第一控制信号来识别用户所选择的对象标识符。
具体地,在接收到用户输入的用于选择显示对象的音频控制信号之后,检测单元140将它传送到识别单元150。
识别模块150对用户通过语音方式输入的音频控制信号进行语音识别。同样地,由于每个显示对象的对象标识符仅仅具有单一音节或者具有较少的音节,所以它们易于识别。因此,识别模块150将容易地识别出用户所选择的对象标识符是1。
在步骤S290中,对与用户所选择的对象标识符对应的可操作对象执行操作。
在一个示例中,在识别模块150识别出用户所选择的对象标识符之后,执行单元160可以对与用户所选择的对象标识符对应的可操作对象执行所述操作对象的默认操作指令。例如,在可操作对象是包括超级链接的图像的情况下,执行单元160可以向电视机发送控制信号,使得浏览器打开用户所选择的图像并进入其大尺寸图像,以满足用户的操作需求。又如,在可操作对象是包括超级链接的向后翻页图标的情况下,执行单元160可以向电视机发送控制信号,使得浏览器打开下一页的搜索结果页面。
在另一示例中,在识别模块150识别出用户所选择的对象标识符之后,执行单元160可以确定与所述可操作对象相关联的操作指令。然后,该执行单元160可以重复上述的一部分步骤,以便向所述操作指令分配指令标识符,其中,所述指令标识符的长度小于所述操作指令的名称的长度。另外,与所述操作指令相关联地显示所述指令标识符,检测用户输入的第三控制信号,根据所述第三控制信号来识别用户所选择的指令标识符,以及对与用户所选择的对象标识符对应的可操作对象执行与用户所选择的指令标识对应的操作指令。
例如,在可操作对象是图像或翻页图标的情况下,该操作指令可以包括但不限于:打开、在新标签页中打开、在后台标签页中打开、目标另存为等等。并且,该执行单元160可以使得分配单元120向这些操作指令分别分配数字编号1-4。然后,显示单元130显示这些操作指令的名称和相应编号,以便检测单元140和识别单元150检测和识别用户所选择的期望执行操作指令,并由执行单元150进行执行。
这样,用户在完全没有使用遥控器的情况下,即完成了自己期望实现的控制命令。
由此可见,采用根据本发明实施例的控制方法和控制装置,可以首先确定用户期望搜索的关键字,然后启动搜索引擎来搜索与该关键字相关联的所有显示对象作为可操作对象,向每一个显示对象分配一个唯一的对象标识符,向用户提示上述可操作对象及其标识符,并且根据用户选择的标识符来使得对用户所选择的显示对象执行操作指令,使得能够通过一种通用、快捷且跨平台的信息输入方式来完全取代为电子设备设计的固有信息输入方式。
因此,本发明显然具有以下优点:
(1)可实现性强。由于语音识别技术在产业中已经比较成熟,所以目前只需要在多媒体搜索结果定位选择上稍作改善即可实现。
(2)信息提取效率高。当用户面对在页面中显示大量的多媒体对象(诸如,图像、音视频)时,通过语音输入就可以实现定位,效率比用遥控器要高得多。
(3)人机交互性强,用户体验性好。抛弃了传统的键盘、鼠标和遥控器等设备,使用语音输入,使得在方便获得所需要的信息的同时增加了娱乐性,操作更加简单、快捷。
需要说明的是,尽管在上文中以用户通过语音方式来输入信息的方式描述了根据本发明实施例的控制方法,但是本发明不限于此。显然,用户也可以通过其他方式(诸如,手写输入、按钮选择)来输入信息。
在手写输入的情况下,在确定可操作对象的过程中,控制装置可以接收用户通过手写板或体感工具等输入的文字信号,并根据该文字信号来识别关键字;同理,在检测用户输入的第一控制信号的过程中,该控制装置同样可以接收用户输入的文字信号,并且根据该文字信号来识别对象标识符。
在按钮选择的情况下,在确定可操作对象的过程中,控制装置可以接收用户通过遥控器输入的按钮信号,并根据该按钮信号来生成关键字;同理,在检测用户输入的第一控制信号的过程中,该控制装置同样可以接收用户输入的按钮信号,并且根据该按钮信号来确定对象标识符。
此外,尽管在上文中将启动搜索引擎和在搜索引擎中输入搜索用关键字的步骤包括在本发明的实施例中,但是本发明的其他实施例也可以不包括这个步骤,而是仅仅在获得搜索结果页面之后,执行步骤S240到S290。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助于软件加必需的硬件平台的方式来实现,当然也可以全部通过软件、或硬件来实施。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁盘、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
在上面详细描述了本发明的各个实施例。然而,本领域技术人员应该理解,在不脱离本发明的原理和精神的情况下,可对这些实施例进行各种修改,组合或子组合,并且这样的修改应落入本发明的范围内。

Claims (10)

1.一种控制方法,所述方法应用于一电子设备,其特征在于,所述方法包括:
获取搜索引擎返回的关于关键字的搜索结果页面,并且将在所述搜索结果页面中包括的显示对象确定为可操作对象;
向所述可操作对象分配对象标识符;
与所述可操作对象相关联地显示所述对象标识符;
检测用户输入的第一控制信号;
根据所述第一控制信号来识别用户所选择的对象标识符;以及
对与用户所选择的对象标识符对应的可操作对象执行操作,
其中,所述将在所述搜索结果页面中包括的显示对象确定为所述可操作对象的步骤包括:
通过判断所述显示对象是否包括能够执行的操作指令确定可操作对象;或者
通过所述显示对象的格式确定可操作对象,如果所述显示对象属于多媒体格式,则将所述显示对象确定为所述可操作对象;或者
通过判断所述显示对象是否出现在所述搜索结果页面之前的显示页面中确定可操作对象,
其中所述与所述可操作对象相关联地显示所述对象标识符的步骤包括:
在所述电子设备的当前显示画面中添加显示图层,所述显示图层覆盖所述当前显示画面的至少一部分;以及
在所述显示图层中显示所述可操作对象的采样和所述可操作对象的对象标识符;或者
所述与所述可操作对象相关联地显示所述对象标识符的步骤包括:
确定所述可操作对象在所述当前显示画面中的位置;
在所述电子设备的当前显示画面中添加透明显示图层,所述透明显示图层完全覆盖所述当前显示画面;以及
在所述透明显示图层中,在与所述可操作对象的位置对应的位置处显示所述可操作对象的对象标识符;或者
所述与所述可操作对象相关联地显示所述对象标识符的步骤包括:
确定所述可操作对象在所述当前显示画面中的位置;
对所述当前显示画面进行修改;以及
在所述可操作对象的位置处插入所述可操作对象的对象标识符。
2.根据权利要求1所述的方法,其特征在于,在所述获取搜索引擎返回的关于关键字的搜索结果页面的步骤之前,所述方法还包括:
接收用户输入的第二控制信号;
根据所述第二控制信号来识别关键字;以及
利用所述搜索引擎来搜索所述关键字。
3.根据权利要求1所述的方法,其特征在于,通过判断所述显示对象是否包括能够执行的操作指令确定可操作对象包括:
如果是,则将所述显示对象确定为所述可操作对象。
4.根据权利要求1所述的方法,其特征在于,
根据所述显示对象的多媒体格式来对所述显示对象进行内容识别;
判断所述显示对象的内容是否与所述关键字或者页面导航对象相关联;以及
如果是,则将所述显示对象确定为所述可操作对象。
5.根据权利要求1所述的方法,其特征在于,通过判断所述显示对象是否出现在所述搜索结果页面之前的显示页面中确定可操作对象包括:
如果否,则将所述显示对象确定为所述可操作对象。
6.一种控制装置,所述装置应用于一电子设备,其特征在于,所述装置包括:
确定单元,用于确定可操作对象;
分配单元,用于向所述可操作对象分配对象标识符;
显示单元,用于与所述可操作对象相关联地显示所述对象标识符;
检测单元,用于检测用户输入的第一控制信号;
识别单元,用于根据所述第一控制信号来识别用户所选择的对象标识符;以及
对与用户所选择的对象标识符对应的可操作对象执行操作,
其中所述确定单元包括:
确定模块,用于获取搜索引擎返回的关于关键字的搜索结果页面,并且通过判断搜索结果页面中包括的显示对象是否包括能够执行的操作指令确定可操作对象;或者通过搜索结果页面中包括的显示对象的格式确定可操作对象,如果所述显示对象属于多媒体格式,则将所述显示对象确定为所述可操作对象;或者通过判断搜索结果页面中包括的显示对象是否出现在所述搜索结果页面之前的显示页面中确定可操作对象,
其中所述显示单元在所述电子设备的当前显示画面中添加显示图层,所述显示图层覆盖所述当前显示画面的至少一部分,并且在所述显示图层中显示所述可操作对象的采样和所述可操作对象的对象标识符;或者
所述显示单元确定所述可操作对象在所述当前显示画面中的位置,在所述电子设备的当前显示画面中添加透明显示图层,所述透明显示图层完全覆盖所述当前显示画面,并且在所述透明显示图层中,在与所述可操作对象的位置对应的位置处显示所述可操作对象的对象标识符;或者
所述显示单元确定所述可操作对象在所述当前显示画面中的位置,对所述当前显示画面进行修改,并且在所述可操作对象的位置处插入所述可操作对象的对象标识符。
7.根据权利要求6所述的装置,其特征在于,所述确定单元还包括:
接收模块,用于在所述确定模块获取搜索引擎返回的关于关键字的搜索结果页面之前,接收用户输入的第二控制信号;
识别模块,用于根据所述第二控制信号来识别关键字;以及
搜索模块,用于利用所述搜索引擎来搜索所述关键字。
8.根据权利要求6所述的装置,其特征在于,当所述确定模块通过判断所述显示对象是否包括能够执行的操作指令确定可操作对象时,如果是,则将所述显示对象确定为所述可操作对象。
9.根据权利要求6所述的装置,其特征在于,所述确定模块根据所述显示对象的多媒体格式来对所述显示对象进行内容识别,判断所述显示对象的内容是否与所述关键字或者页面导航对象相关联,并且如果是,则将所述显示对象确定为所述可操作对象。
10.根据权利要求6所述的装置,其特征在于,当所述确定模块通过判断所述显示对象是否出现在所述搜索结果页面之前的显示页面中确定可操作对象时,如果否,则将所述显示对象确定为所述可操作对象。
CN201210556733.4A 2012-12-20 2012-12-20 控制方法和控制装置 Active CN103888799B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210556733.4A CN103888799B (zh) 2012-12-20 2012-12-20 控制方法和控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210556733.4A CN103888799B (zh) 2012-12-20 2012-12-20 控制方法和控制装置

Publications (2)

Publication Number Publication Date
CN103888799A CN103888799A (zh) 2014-06-25
CN103888799B true CN103888799B (zh) 2019-04-23

Family

ID=50957487

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210556733.4A Active CN103888799B (zh) 2012-12-20 2012-12-20 控制方法和控制装置

Country Status (1)

Country Link
CN (1) CN103888799B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11397558B2 (en) * 2017-05-18 2022-07-26 Peloton Interactive, Inc. Optimizing display engagement in action automation
CN108459786B (zh) * 2018-02-05 2020-10-16 优视科技有限公司 显示定制logo的方法、装置和客户端设备
CN108600779B (zh) * 2018-05-18 2021-04-06 新华三信息技术有限公司 一种基于视频内容的目标对象操作方法及装置
CN109143875B (zh) * 2018-06-29 2021-06-15 广州市得腾技术服务有限责任公司 一种手势控制智能家居方法及其系统
CN110874252A (zh) * 2018-08-30 2020-03-10 Tcl集团股份有限公司 一种焦点控制方法、装置及设备
CN109976861B (zh) * 2019-03-28 2023-01-10 北京小米移动软件有限公司 交互界面显示方法、装置及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075797A (zh) * 2010-12-29 2011-05-25 深圳市同洲电子股份有限公司 一种语音浏览频道或节目的方法及数字电视接收终端
CN102831229A (zh) * 2012-08-30 2012-12-19 浙大网新科技股份有限公司 适合盲人使用的网页浏览方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070005370A1 (en) * 2005-06-30 2007-01-04 Scott Elshout Voice-activated control system
US20070152961A1 (en) * 2005-12-30 2007-07-05 Dunton Randy R User interface for a media device
CN100470551C (zh) * 2007-08-24 2009-03-18 新诺亚舟科技(深圳)有限公司 在手持学习终端上实现的联合搜索的方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075797A (zh) * 2010-12-29 2011-05-25 深圳市同洲电子股份有限公司 一种语音浏览频道或节目的方法及数字电视接收终端
CN102831229A (zh) * 2012-08-30 2012-12-19 浙大网新科技股份有限公司 适合盲人使用的网页浏览方法

Also Published As

Publication number Publication date
CN103888799A (zh) 2014-06-25

Similar Documents

Publication Publication Date Title
US10733360B2 (en) Simulated hyperlinks on a mobile device
CN108139849B (zh) 针对用户选择内容的动作建议
CN108432190B (zh) 应答消息推荐方法及其设备
CN103888799B (zh) 控制方法和控制装置
US9218414B2 (en) System, method, and user interface for a search engine based on multi-document summarization
US9342233B1 (en) Dynamic dictionary based on context
CN105247540A (zh) 管理实时手写识别
EP2122443A1 (en) Process and apparatus for selecting an item from a database
CN113194346A (zh) 一种显示设备
CN111859856A (zh) 信息显示方法、装置、电子设备及存储介质
US6760408B2 (en) Systems and methods for providing a user-friendly computing environment for the hearing impaired
KR20160015326A (ko) 데이터베이스 검색 방법
CN103888800B (zh) 控制方法和控制装置
Semaan et al. Toward enhancing web accessibility for blind users through the semantic web
KR20150097250A (ko) 태그 정보를 이용한 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN107643831A (zh) 设定功能键方法和输入装置
CN113157966A (zh) 显示方法、装置及电子设备
JP2010165120A (ja) 電子情報表示装置及び電子情報表示方法
CN103885661A (zh) 控制方法和控制装置
US9411885B2 (en) Electronic apparatus and method for processing documents
KR101727821B1 (ko) 컨텐츠 내 단어에 대한 정답성 검색 결과를 제공하는 방법 및 시스템
JP2012168590A (ja) コミック閲覧システム
CN106815288A (zh) 一种视频相关信息生成方法及其装置
JP2007213554A (ja) コンピュータにより実施される、確率論的クエリーに対して順位付けした結果セットをレンダリングする方法
CN112162955A (zh) 用户日志的处理装置及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant