CN108540851A - 基于语音交互的选择推荐位方法、装置及智能电视 - Google Patents
基于语音交互的选择推荐位方法、装置及智能电视 Download PDFInfo
- Publication number
- CN108540851A CN108540851A CN201810284159.9A CN201810284159A CN108540851A CN 108540851 A CN108540851 A CN 108540851A CN 201810284159 A CN201810284159 A CN 201810284159A CN 108540851 A CN108540851 A CN 108540851A
- Authority
- CN
- China
- Prior art keywords
- recommendation
- focus
- recommends
- target
- moved
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开在于提供一种基于语音交互的选择推荐位方法、装置及智能电视,包括:响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。应用本公开的方法,能够使用户更加便捷的选择目标推荐,改善用户体验。
Description
技术领域
本申请涉及显示接收终端,尤其一种基于语音交互的选择推荐位方法、装置、智能电视设备以及电视内容的图形用户界面的显示方法。
背景技术
智能电视一般侧重于在线互动媒体、互联网电视和点播式流媒体,而不是传统的广播媒体。其能为用户提供更加丰富的内容和服务,以及电视厂商致力于开发便于用户使用的各种便捷功能,以提升对产品的使用体验感受。语音助手的出现使得智能电视越来越智能化,用户不仅可以通过遥控器的按键,还可以通过用户的语音来控制智能电视,智能电视通过理解用户的语音输入,其显示界面将呈现用户想要观看的节目。
因而,为现有智能电视提供更为简单和直观,以及能与用户习惯无缝对接用户界面和可视化内容链接,以浏览和/或执行智能电视的各种功能,用户界面配合语音操作做动态变化,以增强用户体验显得尤为重要。
发明内容
本申请在于提供一种智能电视,为满足更为直观的用户界面和无缝用户互动功能的需求。本内容通过其各个方面、实例和/或配置,阐述了这些改进功能需求。此外,虽然本内容按照示范性实例来介绍,但应理解,可以就本内容的各个方面分别提出权利要求。本内容可以提供许多优点,具体视特定的方面、实例和/配置而定。
本公开实施方式的第一方面,提供一种基于语音交互的选择推荐位方法,包括:
响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈行向排布,响应于选择推荐位的指令,沿所述行向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈列向排布,响应于选择推荐位的指令,沿所述列向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一行,响应于选择推荐位的指令,沿行向移动所述多个推荐位中该行上的推荐位,且所述多个推荐位中其余行上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一列,所述响应于选择推荐位的指令,沿列向移动所述多个推荐位中该列上的推荐位,且所述多个推荐位中其余列上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,沿行向或者列向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与所述当前推荐位不属于同一行和同一列,响应于选择推荐位的指令,先沿行向再沿列向移动所述多个推荐位,或者,先沿列向再沿行向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
本公开实施方式的第二方面,提供一种基于语音交互的选择推荐位装置,包括:
第一模块,用于响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;第二模块,用于响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈行向排布,响应于选择推荐位的指令,沿所述行向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈列向排布,响应于选择推荐位的指令,沿所述列向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一行,响应于选择推荐位的指令,沿行向移动所述多个推荐位中该行上的推荐位,且所述多个推荐位中其余行上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一列,所述响应于选择推荐位的指令,沿列向移动所述多个推荐位中该列上的推荐位,且所述多个推荐位中其余列上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,沿行向或者列向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与所述当前推荐位不属于同一行和同一列,响应于选择推荐位的指令,先沿行向再沿列向移动所述多个推荐位,或者,先沿列向再沿行向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
本公开实施方式第三方面,提供一种基于语音交互的选择推荐位方法,所述方法包括:
响应于用户的搜索指令,得到的搜索结果存放在交互界面的多个推荐位上;响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上;其中,移动前位于所述第一位置的预设方向侧的推荐位移出所述交互界面,且位于位于所述第一位置的预设方向的相反方向侧的推荐位移入所述交互界面,移入和移出的推荐位数量相同。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位中与所述第一位置同行的推荐位,按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上,且所述多个推荐位中与所述第一位置不同行的推荐位不发生移动。
可选的,所述第一位置位于所述交互界面中心,所述第二位置位于所述交互界面的边界。
本公开实施方式第四方面,提供一种基于语音交互的选择推荐位装置,所述装置用于:
响应于用户的搜索指令,得到的搜索结果存放在交互界面的多个推荐位上;响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上;其中,移动前位于所述第一位置的预设方向侧的推荐位移出所述交互界面,且位于位于所述第一位置的预设方向的相反方向侧的推荐位移入所述交互界面,移入和移出的推荐位数量相同。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位中与所述第一位置同行的推荐位,按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上,且所述多个推荐位中与所述第一位置不同行的推荐位不发生移动。
可选的,所述第一位置位于所述交互界面中心,所述第二位置位于所述交互界面的边界。
本公开实施方式第五方面,提供一种智能电视,包括:
显示屏,被配置为显示视频内容和网页内容以及用户界面;
存储器,以及与所述存储器和所述显示屏通信的处理器,该处理器用于执行上述任一所述方法。
本概述不是对申请及其各个方面、实例和/或配置的全面或详尽的概述。其目的既不是确定申请的主要或关键元件,也不描述申请的范围,而是简要地介绍申请的某些概念,作为对下文详细描述的介绍。应该理解,本披露文件的其他方面、实例和/或配置可以单独或组合利用上文陈述或下文详述的一个或多个特征。
附图说明
图1A为一个环境或智能电视实例的第一个视图;
图1B为一个环境或智能电视实例的第二个视图;
图2为一个智能电视实例的第一个视图;
图3是一个智能电视硬件实例的方框图;
图4是一个智能电视软件和/或固件实例的方框图;
图5是一个智能电视软件和/或固件实例的第二个方框图;
图6是一个智能电视软件和/或固件实例的第三个方框图;
图7是一个内容实数据服务实例的方框图;
图8A是智能电视语音输入流程图;
图8B是智能电视语音搜索结果显示流程图;
图8C是智能电视的用户界面示意图;
图8D是在图8C基础上再次进行语音输入的用户界面示意图;
图8E是用户输入搜索内容后的智能电视用户界面示意图;
图8F是用户输入“右一个”的智能电视用户界面示意图;
图8G是用户输入“下一个”的智能电视用户界面示意图
图8H是带引导语的用户界面示意图;
图8I是用户语音控制焦点一次移动多个推荐位的示意图;
图8J是用户语音控制焦点一次跨多行多列推荐位的示意图;
图8K是用户语音控制焦点移动到位于边界处的推荐位的示意图;
图8L是用户语音控制焦点移动到当前显示界面未显示出的那些推荐位的示意图;
图8M是确定目标焦点位置的示意图;
图9A是智能电视定焦设计的一种示意图;
图9B是智能电视定焦设计的又一种示意图;
图9C是智能电视定焦滚动长度的示意图;
图10A是智能电视采用滚焦设计翻页的一种示意图;
图10B是智能电视采用定焦设计翻页的一种示意图;
图10C是智能电视采用定焦和滚焦结合设计翻页的一种示意图;
图10D是智能电视快速翻页的一种示意图;
图11是用户在智能电视上选择推荐位的处理过程流程图;
图12是用户在智能电视上执行翻页指令的处理过程流程图;
图13是本公开提出的一种基于语音交互的推荐位选择方法流程图;
图14是本公开提出的又一种基于语音交互的推荐位选择方法流程图。
在这些附图中,类似的组件和/或特点可能有相同的参考标签。而且,各种同类型的组件可以通过参考标签中的字母与其他类似组件区别开来。如果规格中只使用第一个参考标签,本说明则适用于第一个参考标签相同的任何一个类似组件,而不管第二个参考标签是否相同。
具体实施方式
在以下描述中,阐述了大量特定细节以提供对本发明实施例的更透彻说明。然而,对于本领域技术人员显而易见的是,在实现本发明实施例而可以不用这些特定细节。
本申请中使用的术语“直播电视”是指实时或与事件发生时间基本同步的电视制作广播。
本申请中使用的术语“视频点播”(VOD)是指允许用户选择和观看/收听点播视频或音频内容的系统和过程。VOD系统可以将内容分流,从而观看实时内容或将其下载到储存介质以稍后再观看。
术语“遥控器”是指电子设备(最常见的是电视接收机、DVD播放器和/或家庭影院系统)的一个组件,一般可在较短的视线范围内无线控制设备。遥控器一般使用红外线和/或射频(RF)信号,可以包括WiFi、无线USB、蓝牙TM连接、动作传感器启用功能和/或语音控制。触摸屏遥控器是手持式遥控装置,以触摸屏用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语“显示图像”是指在显示屏上形成的图像内容。典型的显示图像是电视广播内容。显示图像会占用显示屏的全部或一部分。
本申请中使用的术语“面板”可以指至少在显示屏的一部分显示的用户界面。面板可以是互动式(如接受用户输入)或只提供信息(如不接受用户输入)。面板可以是半透明的,因而面板会变得模糊但不遮掩显示屏上的内容。面板可根据来自按钮或遥控器界面的用户输入而变化。
本申请中使用的术语“筒仓”可以是输入、源或应用程序的逻辑表示。输入可以是通过端口(如HDMI、视频/音频输入端口等)或网络(如局域和广域网等)连接到电视的电子设备(如DVD、录像机等)。不同于设备,输入可以作为一种电气或实体连接配置,连接到一个或多个设备。源,尤其是内容源,可以是提供内容的数据服务(如媒体中心、文件系统等)。应用程序可以是提供特定功能类型的软件服务(如直播电视、视频点播、用户应用程序、图片显示等)。筒仓作为一种逻辑表示可以有其他相关的定义或属性,如设置、功能或其他特性。
本申请中使用的术语“焦点”,其位置和移动反映了用户当前的关注点,用户可以通过移动焦点的位置,达到对页面应用布局的显示调整以及进入不同的应用界面。
本申请中使用的术语“定焦”可以指当界面显示推荐位(例如推荐的视频)时,焦点停留在固定的位置,例如最中间的推荐位上,当用户按导航键“下一个”或者语音输入“下一个”时,此时焦点的位置仍固定不变,界面显示的推荐位实现左右/上下移动,表现出来的效果就是焦点对应的推荐位发生变化。
本申请中使用的术语“滚焦”与上述“定焦”效果对应,当用户按导航键“下一个”或者语音输入“下一个”时,此时推荐位的排布不发生变化,但是焦点的位置却发生左右/上下移动,表现出来的效果也是焦点对应的推荐位发生变化。
本申请中使用的术语“入口式”是指UI界面的一种设计方式,采用这种设计可以通过界面显示的推荐位在焦点移动后,直接打开焦点目标位置对应的推荐位相关内容,不会给界面带来复杂的导航关系。
本申请中使用的术语“确定”、“计算”和“计算机计算”及其变通说法,可互换使用,并包括任何类型的方法论、过程、数学运算或技巧。
此后,当本公开提到“选择”、“被选择”“将选择”或“正选择”GUI中的用户界面元素时,这些属于应该被理解为包括使用鼠标或其他输入设备,在用户界面元素之上点击或者“悬停”,或使用一个或者多个手指或触针在用户界面元素上触摸屏幕、敲击或做出手势动作。用户界面元素可以是虚拟按钮、菜单按钮、选择器、开关、滑动条、橡皮擦、旋钮、缩略图、链接、图标、单选按钮、复选框和接收来自用户输入的任何其他机制。
智能电视(TV)环境:
参考图1A和1B所示的智能电视100的一些实施例。智能电视100可用于娱乐、商业应用、社交互动、内容创建和/或消费,和/或,还包括用于组织和控制与智能电视100进行通信的一个或多个其他设备。因此可以理解为,智能电视可以用于增强用户互动体验,无论是在家中还是工作场所。
在一些实例中,智能电视100可以通过配置来接收和理解各种用户和/或设备输入。例如,用户可通过一个或多个物理或电子控件和智能电视100互动,这些控件可包括按钮、开关、触摸屏/区(如电容式触摸屏、电阻式触摸屏等)和/或与智能电视100关联的其他控件。在某些情况中,智能电视100可包含一个或多个互动控件。附加地或选择性地,上述一个或多个控件可以和遥控器相关联。遥控器可以通过有线和/或无线信号和智能电视100通信。因此可以理解为,遥控器可以通过射频(RF)、红外线(IR)和/或特定的无线通信协议(如蓝牙TM、Wi-Fi等)工作。在某些情况中,可以配置上述物理或电子控件(如编程),以适合用户的喜好。
在一些实例中,可以使用智能电话、平板电脑、计算机、笔记本电脑、上网本和其他智能设备以控制智能电视100。例如,使用在智能设备上运行的应用程序控制智能电视100。该应用程序通过配置可以在与智能电视100关联的屏幕上,在直观的用户界面(UI)中为用户提供各种智能电视100控制。用户在UI上的选项输入可通过配置,凭借应用程序使用一个或多个与智能设备关联的通信功能,从而控制智能设备100。
在一些实例中,智能电视100可配置通过各种输入设备接收输入,包括但绝不限于视频、音频、无线电、光、触觉及其组合。而且,这些输入设备可以通过配置使智能电视100看到和识别用户手势并作出反应。例如,用户可以会话方式和智能电视100讲话。智能电视100就像是智能设备的智能私人助手和音控导航应用程序(如苹果的Siri、安卓的Skyvi、Robin、Iris和其他应用程序)一样接收和理解语音命令。
在一些实例中,智能电视100可配置为一个通信设备,它可以通过许多不同方式(包括有线108或无线112方式、蜂窝式网络116),建立网络连接104和使用电话线路120连接电话公司运营的电话网络。这些连接104使智能电视100能够访问一个或多个通信网络。通信网络包含任何已知的通信介质或通信媒体的集合,可以使用任何类型的协议在端点之间传送信息或信号。通信网络可包含有线和/或无线通信技术。互联网是通信网络132的一个例子,它和许多计算机、计算机网络和全球各地的其他通信设备一同构成了互联网协议(IP)网络,通过许多电话系统和其他方式实现互联。
在某些实例中,智能电视100可配备多种通信工具。多种通信工具可允许智能电视100通过局域网(LAN)124、无线局域网(WLAN)128和其他网络132进行通信。这些网络可以作为冗余连接以确保网络接入。换言之,如果一个连接中断,智能电视100将使用另一个连接路径重新建立和/或维持网络连接104。而且,智能电视100还使用这些网络连接104发送和接收信息,以及电子节目指南(EPG)136互动,接收软件更新140,联系客户服务144(如获取帮助或服务等)和/或访问远程储存的数字媒体库148。此外,这些连接还允许智能电视100打电话、发送和/或接收电子邮件信息、发送和/接收文本消息(如电子邮件和即时消息),使用互联网搜索引擎进行网上冲浪、博客服务,以及连接/与社交媒体网站和/或社交网络服务维护的在线社区(如Facebook、Twitter、LinkedIn、Pinterest、GooglePlus、MySpace等)互动。当这些网络连接104和智能电视100的其他组件(下文将更加详细说明)组合使用时,我们还可以在智能电视100上召开视频电话会议、电子会议和进行其他类型的通信。智能电视100可以使用连接的摄像头、麦克风和其他传感器捕获和储存图像和声音。
在某一些实例中,如图1B所示,智能电视100可以和其他电子设备168通过有线108和/或无线112连接进行互动。如本申请所述,智能电视100的组件允许设备100连接到设备168,包括但不限于DVD播放器168a、蓝光播放器168b、便携式数字媒体设备168c、智能电话168d、平板设备168e、个人计算机168f、外置分线盒168g、键盘168h、定位装置168i、打印机168j、游戏控制器和/或游戏手柄168k、卫星碟168l、外置显示设备168m和其他通用串行总线(USB)、局域网(LAN)、蓝牙TM、高清多媒体接口(HDMI)组件设备和/或无线设备。当连接到外置分线盒168g或卫星碟168l时,智能电视100可以访问更多媒体内容。
在某一些实例中,智能电视100可接收电视台的数字和/或模拟信号广播。智能电视100还可以配置为用于控制并与其他智能组件互动,如安全系统172、门禁/门控器176、远程视频摄像头180、照明系统184、恒温控制器188、冰箱192和其他装置。
智能电视:
图2说明了智能电视100的组件。如图2所示,智能电视100可由与框架208连接的可移动基底或支架204支撑。框架208包围着显示屏212的边缘,而不遮掩其正面。显示屏212可包含液晶显示屏(LCD)、等离子屏幕、发光二级管(LED)屏幕或其他类型的屏幕。
在一些实例中,智能电视100可包含整合式(或分离式)扬声器216和至少一个麦克风220。框架208的第一个区包含水平手势捕获区224,第二个区包含垂直手势捕获区228。手势捕获区224和228包含能通过识别用户手势来接收输入的区。在某些例子中,用户根本不需要实际触摸智能电视100的屏幕212的表面。但是手势捕获区224和228不包含可以执行显示功能或能力的像素。
在一些实例中,添加一个或多个图像捕获设备232(如摄像头)以捕获静止和/或视频图像。图像捕获设备232可以包含或连接其他元件,如闪光或其他光源236和测距设备240以辅助图像捕获设备的聚焦。此外,智能电视100还可以使用麦克风220、手势捕获区224和228、图像捕获设备232和测距设备240识别各个用户。以及,智能电视100可以学习和记住各个用户的喜好。在某些实例中,学习和记忆(例如识别和调出储存的信息)可能与用户识别相关。
在一些实例中,还可以设置一个红外发送器与接收器244通过遥控设备(此处未显示)或其他红外设备连接智能电视100。遥控设备可以通过射频、光和/或红外线以外的其他方式发送无线信号。
在一些实施例中,智能电视通过遥控设备的语音收集模块和/或麦克风220接收用户的控制指令,示例性的,首先把遥控器与智能电视建立连接,然后按压遥控器上的语音键开启遥控器的无线麦克,以使遥控器通过无线麦克采集用户的语音信号,并将采集到的语音信号的遥控指令发送给智能电视。
在一些实例中,音频插座248隐藏在可折或可移动面板的后面。音频插座248含有一个尖头圆形套管(TRS)连接器,例如允许用户使用耳机、头戴式耳机或其他外置音频设备。
在一些实例中,智能电视100还包含数个按钮252。例如,图2显示了智能电视100顶部的按钮252,这些按钮也可以位于其他位置。如图所示,智能电视100包含六个按钮252(从a到f),可以为特定输入配置。例如,第一个按钮252可以配置为开/关按钮,用于控制整个智能电视100的系统电源。按钮252可以一起或单独配置以控制智能电视100的多个方面。某些非限制性例子包括但不限于整个系统音量、亮度、图像捕获设备、麦克风和视频会议的召开/结束。不同于独立的按钮,两个按钮可以组合成一个波动按钮。这种波动按钮在某些情况中非常有用,如控制音量或亮度等功能。
在某些实例中,可以使用一个或多个按钮252支持不同的用户命令。例如,正常按下的持续时间一般少于1秒,类似于快速输入。中等按下的持续时间一般为1秒或以上但不超过12秒。长按的持续时间一般为12秒或以上。按钮的这种功能一般视智能电视100上激活的应用程序而定。例如在视频会议应用程序中,根据特定的按钮,正常、中等或长按可能意味着结束视频会议、增加或减少音量、提高输入响应速度和开关麦克风静音。取决于特定的按钮,正常、中等或长按还可以控制图像捕获设备232增加或减少缩放、拍照或录像。
硬件功能:
图3说明了依照本申请的实例的智能电视100的一些组件。智能电视100包含一个显示屏304。
可以使用一个或多个显示控制器316控制显示屏304的操作。显示控制器316可以控制显示屏304的操作,包括输入和输出(显示)功能。显示控制器316还可以控制显示屏304的操作并和其他输入互动,如红外线和/或无线电输入信号(例如门禁/门控制器、警报系统组件等)。依照其他一些实例,显示控制器316的功能可能会纳入其他组件中,如处理器364。
处理器364可包含一个执行应用程序设计或指令的通用可编程处理器或控制器。依照至少某些实例,处理器364包含多个处理器核心和/或执行多个虚拟处理器。依照其他一些实例,处理器364可能包含多个物理处理器。作为一个具体例子,处理器364可包含特别配置的专用集成电路(ASIC)或其他集成电路、数字信号处理器、控制器、硬接线电子或逻辑电路、可编程逻辑设备或门阵列、专用计算机等。处理器364一般用于运行程序码或指令以执行智能电视100的各种功能。
为支持连接功能或能力,智能电视100可包含一个编码/解码和/或压缩/解压模块366,以接收和管理数字电视信息。编码/解码压缩/解压模块366可以解压和/或解码从公共电视链发出的或在私人电视网中的,通过天线324、I/O模块348、无线连接模块328和/或其他无线通信模块332接收的模拟和/数字信息。电视信息可以发送到显示屏304和/或接收模拟或数字接收信号的附属的扬声器。任何编码/解码和压缩/解压均可基于多种格式执行(如音频、视频和数据)。加密模块324与编码/解码压缩/解压模块366通信,使得用户或供应商接收或发送的所有数据得以保密。
在一些实例中,智能电视100包含额外的或其他无线通信模块332。例如,其他无线通信模块332可包含Wi-Fi,、蓝牙TM、WiMax、红外线或其他无线通信链接。无线连接模块328和其他无线通信模块332可各自与一个共用或专用的天线324和一个共用或专用的I/O模块348相互连接。
在一些实例中,为支持通信功能或能力,智能电视100可包含无线连接模块328。例如,无线连接模块328可包含GSM、CDMA、FDMA和/或模拟蜂窝电话收发器,能够通过蜂窝网络传输语音、多媒体和/或数据。
可以添加输入/输出模块348和关联的端口,以便通过有线网络或链接与其他通信设备、服务器和/或外围设备等支持通信。输入/输出模块348的例子包括以太网端口、通用串行总线(USB)端口、ThunderboltTM或Light Peak接口、电气与电子工程师协会(IEEE)1394端口或其他接口。
可以添加音频输入/输出接口/设备344,以输出模拟音频到互连扬声器或其他设备,以及接收来自连接的麦克风或其他设备的模拟音频输入,以实现语音识别、语音复制、数字记录等功能。例如,音频输入/输出接口/设备344可包含一个关联的放大器和模数转换器。选择性地或附加地,智能电视100可包含一个整合的音频输入/输出设备356和/或连接外置扬声器或麦克风的音频插座。例如,添加一个整合的扬声器和整合麦克风,为近端谈话或扬声器电话操作提供支持。
可以添加端口接口352。端口接口352包含外围或通用端口,为设备100连接到其他设备或组件(如坞站)提供支持,互连后这些设备或组件可能会也可能不会为设备100提供额外的或不同的功能。除支持设备100和其他设备或组件之间交换通信信号外,对接端口136和/或端口接口352还可以供电给设备100或从设备100中输出电源。对接端口352还包含一个智能元件,其包括控制智能电视100和连接的设备或元件之间通信或其他互动的对接模块。对接模块可以和软件应用程序互动,以遥控其他设备或组件(如媒体中心、媒体播放器和计算机系统)。
智能电视100还可包含存储器308,以便处理器364执行应用程序设计或指令,以及用于临时或长期储存程序指令和/或数据。例如,存储器308可包含RAM、DRAM、SDRAM或其他固态存储器。在一些实例中,添加数据存储器312。类似于存储器308,数据存储器312可包含一个或多个固态存储器。在一些实例中,数据存储器312可包含一个硬盘驱动器或其他随机存储器。
例如,硬件按钮358可以用于某些控制操作。可以添加一个或多个图像捕获接口/设备340(如摄像头)以捕获静止和/或视频图像。在一些实例中,图像捕获接口/设备340可以包含一个扫描器、代码阅读器或动作传感器。图像捕获接口/设备340可以包含或连接其他元件,如闪光或其他光源。图像捕获接口/设备340可以和用户ID模块350互动,该模块帮助识别智能电视100用户的身份。
在一些实例中,智能电视100还可以包含全球定位系统(GPS)接收器336。根据本发明的一些实例,GPS接收器336可以进一步包含GPS模块,以提供绝对定位信息给智能电视100的其他组件。因此可以理解为,其他卫星定位系统接收器可以代替或和GPS一起使用。
智能电视100的组件可以通过主电源和/或电源控制模块360取电。例如,电源控制模块360包含一个电池、交流到直流变换器、电源控制逻辑和/或互连智能电视100和外置电源的端口。
固件和软件:
图4显示了软件系统组件和模块400的一个实例。软件系统400可能包含一个或多个层次,包括但不限于操作系统内核404、一个或多个库408、一个应用程序框架412和一个或多个应用程序416。一层或多层404-416可以互相通信,以执行智能电视100的功能。
操作系统(OS)内核404包含允许软件和智能电视100关联的硬件互动的主要功能。内核404可以包含一系列软件,用以管理计算机硬件资源并为其他计算机程序或软件代码提供服务。操作系统内核404是操作系统的主要组件,充当应用程序和使用硬件组件完成的数据处理之间的媒介。部分操作系统内核404可包含一个或多个设备驱动器420。设备驱动器420可以是操作系统中的任何一个代码,用以帮助操作或控制连接到或和智能电视关联的设备或硬件。驱动器420可以包含操作视频、音频和/或其他智能电视100的多媒体组件的代码。驱动器的示例包括显示屏、摄像头、Flash、Binder(IPC)、键盘、WiFi和音频驱动器。
库408可以包含软件系统400操作期间访问和执行的代码或其他组件。库408可能包含但不限于一个或多个操作系统运行时间库424、一个电视系统超文本应用程序语言(HAL)库428、和/或数据服务库432。操作系统运行时间库424可能包含操作系统内核404要求的代码和软件系统400运行期间执行的其他操作系统功能。该库可以包含软件系统400运行期间启动的代码。
电视服务超文本应用程序语言428可以包含电视服务要求的代码,由应用程序框架412或应用程序416执行。电视服务HAL库428特定于控制不同智能电视功能的智能电视100操作。此外,电视服务HAL库428还可以由除超文本应用程序语言以外的其他类型的应用程序语言或不同代码类型或代码格式的实例组成。
数据服务库432可以包含一个或多个组件或代码,用以执行实现数据服务功能的组件。数据服务功能可以在应用程序框架412和/或应用程序层416中执行。图6显示了可能包括在内的数据服务功能和组件类型的实例。
应用程序框架412可以包含关于提供功能的总体抽象概念,该功能可以通过一个或多个应用程序416选择,以为这些应用程序提供特定的应用程序功能或软件。因此,框架412可包含一项或多项不同的服务,或是可通过应用程序416访问以提供两个或两个以上应用程序上的一般功能的其他应用程序。例如,这种功能包括一个或多个视窗或面板、平面、活动、内容和资源的管理。应用程序框架412可包含但不限于一个或多个电视服务434、电视服务框架440、电视资源444和用户界面组件448。
电视服务框架440可以为不同的电视服务提供额外的抽象概念。电视服务框架440允许和电视功能相关的服务的常规访问和操作。电视服务436是在电视服务框架440中提供的一般服务,电视服务框架440可以通过应用程序层416中的应用程序进行访问。电视资源444提供用于访问电视资源的代码,这些资源包括任何类型的储存内容、视频、音频或其他智能电视100提供的功能。电视资源444、电视服务436和电视服务框架440为执行各种伴随智能电视100的电视功能服务。
一个或多个用户界面组件448可以为智能电视100的显示提供一般组件。用户界面组件448可以作为一般组件通过应用程序框架412提供的各种应用程序访问。可以访问用户界面组件448,为如图5所述的面板和筒仓提供服务。
应用程序层416既包含也可执行和智能电视100相关的应用程序。应用程序层416可能包含但不限于一个或多个直播电视应用程序452、视频点播应用程序456、媒体中心应用程序460、应用程序中心应用程序464和用户界面应用程序468。直播电视应用程序452可以通过不同的信号源提供直播电视。例如,直播电视应用程序452可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视。然后直播电视应用程序452可在智能电视100的显示屏上显示多媒体演示或直播电视信号的视频和音频演示。
视频点播应用程序456可以提供来自不同储存源的视频。不同于直播电视应用程序452,视频点播456提供来自某些储存来源的视频显示。视频点播源可以和用户或智能电视或某些其他类型的服务关联。例如,视频点播456可以从以云技术储存的iTunes库、从包含已存视频节目的本地硬盘存储器或某些其他来源提供。
媒体中心应用程序460可以提供各种媒体演示所需的应用程序。例如,媒体中心460可以为不同于直播电视或视频点播但用户仍可访问的图像或音频的显示提供服务。媒体中心460可以通过访问不同的来源获得在智能电视100上显示的媒体。
应用程序中心464可以提供、储存和使用应用程序。应用程序可以是一种游戏、生产力应用程序或某些和计算机系统或其他设备普遍相关的但可以在智能电视中运行的其他应用程序。应用程序中心464可从不同来源获得这些应用程序,将它们储存在本地存储器中,然后在智能电视100上为用户执行这些应用程序。
用户界面应用程序468可为与智能电视100关联的特定用户界面提供服务。这些用户界面可以包含图5所述的筒仓和面板。用户界面软件500的一个实例如图5所示。此处的应用程序框架412包含一个或多个代码组件,可帮助控制用户界面事件,同时应用程序层416中的一个或多个应用程序影响着智能电视100的用户界面的使用。应用程序框架412可以包含一个筒仓切换控制器504和/或输入事件发送器508。应用程序框架412中的代码组件可能比图5所示的更多或更少。筒仓切换控制器504包含管理一个或多个筒仓之间的切换的代码和语言。筒仓可以是智能电视上垂直的用户界面功能,包含用户可用信息。切换控制器504可以在用户界面发生事件时管理两个筒仓之间的切换。输入事件发送器508可以接收用户界面的事件信息,这些事件信息来自操作系统,然后发送到输入事件发送器508。这些事件信息可以包含遥控器或电视上的按钮选择或其他类型的用户界面输入。然后,输入事件发送器可以将这些事件信息发送至筒仓管理器532或面板管理器536(视事件类型而定)。筒仓切换控制器504可以和筒仓管理器532互动以影响筒仓的更改。
应用程序框架416可以包含用户界面应用程序468和/或筒仓应用程序512。应用程序框架416可包含的控制智能电视100所必须的用户界面应用程序可以比图5所示的更多或更少。用户界面应用程序可以包含筒仓管理器532、面板控制器536和一种或多种面板516至528。筒仓管理器532管理筒仓的显示和/或功能。筒仓管理器532可以接收或发送来自筒仓切换控制器504或输入事件发送器508的信息,以更改显示的筒仓和/或决定筒仓接收的输入类型。
面板管理器536可以在用户界面中显示面板,以管理这些面板之间的切换或影响在面板中接收的用户界面输入。因此,面板管理器536可以和不同用户界面面板通信,如全局面板516、音量面板520、设置面板524和/或通知面板528。面板管理器536可以显示这些类型的面板,具体取决于来自输入事件发送器508的输入。全局面板516可能包含和主屏幕相关的信息或用户的最高层级信息。音量面板520显示的信息和音频音量控件或其他音量设置相关。设置面板524显示的信息和音频或视频设置或智能电视100的其他可设置特性相关。通知面板528可以提供和用户通知相关的信息。这些通知可能和诸如视频点播显示、收藏、目前提供的节目等或其他信息相关。通知的内容和媒体或某些类型的设置或操作或智能电视100相关。面板管理器536可以和筒仓应用程序512的面板控制器552通信。
面板控制器552可控制上述几种类型中的某些面板。因此,面板控制器552可以和顶面板应用程序540、应用程序面板544和/或底面板548通信。这几种面板在智能电视100的用户界面中显示时各不相同。因此,面板控件可基于系统配置或当前使用的显示屏类型而定,将面板516至528设置成一定的显示方向(由顶面板应用程序540、应用程序面板544或底面板应用程序548决定)。
图6是数据服务432与数据管理操作的一个实例。数据管理600可包含和不同类型的数据关联的一个或多个代码组件。例如,数据服务432中可以有数个代码组件,可执行视频点播、电子节目指南或媒体数据并与之相关。数据服务432的组件类型可能比图6所示的更多或更少。每种不同类型的数据都可能包含数据模型604-612。这些数据模型决定着数据服务要储存什么信息以及将如何储存这些信息。因此,数据模型可以管理任何数据,不论它们来自哪里以及它们将如何在智能电视系统中被接收和管理。因此,数据模型604、608和/或612可以提供转化能力或影响数据从一种形式转化成另一种可供智能电视100使用的形式的能力。
各种不同的数据服务(视频点播、电子节目指南、媒体)都有一种数据子服务620、624和/或628,用于和一个或多个内部和/或外部内容提供器616通信。数据子服务620、624和628与内容提供器616通信以获取数据,然后将其储存在数据库632、636和640中。子服务620、624和628可以与内容提供器通信,启动或启用一个或多个源插件644、648和652以与内容提供器通信。对于各个内容提供器616,其源插件644、648和652也有所不同。因此,如果数据有多个内容源,每个数据子服务620、624和628可以决定,然后启用或启动不同的源插件644、648和/或652。此外,内容提供器616还可以为资源仲裁器656和/或缩略图缓存管理器660提供信息。资源仲裁器656可以和数据服务432之外的资源664通信。因此,资源仲裁器656可以和云存储器、网络存储器或资源664中的其他类型的外置存储器通信。然后,信息将通过内容提供器模块616提供给数据子服务620、624、628。类似地,缩略图缓存管理器包含来自数据子服务620、624、628其中之一的缩略图信息,并将信息储存在缩略图数据库666中。而且,缩略图缓存管理器660还可以从缩略图数据库666中提取或检索信息以提供给数据子服务620、624、628其中之一。
图7显示的是示范性内容聚合结构1300。该结构可包含一个用户界面和内容聚合层1304和1308。用户界面层1304可包含一个电视应用程序1312、媒体播放器1316和应用程序1320。电视应用程序1312使观众可以观看通过恰当的传送媒介(如电缆、卫星和/或互联网)接收到的频道。媒体播放器1316可观看通过恰当的传送媒介(如互联网)接收到的其他类型的媒体。应用程序1320包含其他与电视相关(预安装)的应用程序,如内容查看、内容搜索、设备查看和设置算法,还可以和媒体播放器1316协作以给观众提供信息。
内容源层1308作为数据服务包含一个内容源服务1328、内容聚合服务1332和内容展示服务1336。内容源服务1328管理内容源调查器,包括本地和/或网络文件系统、数字网络设备管理器(其通过已知技术,如多路广播通用的即插即用或UPnP发现技术,发现手持式或非手持式设备(例如数字媒体服务器、播放器、渲染器、控制器、打印机、上传器、下载器、网络连接功能和互操作单元),并对发现的每个设备检索、分析和加密设备描述符,通知新发现设备的内容源服务,以及提供和之前发现的设备有关的信息,如索引)、互联网协议电视或IPTV、数字电视或DTV(包括高清和增强电视)、第三方服务(如上文引用的服务)和应用程序(如安卓应用程序)。
内容源调查器可以追踪内容源,一般配置为二进制。内容源服务1328可启动内容源调查器并维护开放和持久的通信通道。通信包括查询或命令和响应对。内容聚合服务1332管理内容元数据获取器,如视频、音频和/或图像元数据获取器。内容展示服务1336提供内容索引界面,如安卓应用程序界面和数字设备界面。
内容源服务1328可发送送往和接收来自内容聚合服务1332的通信1344。通信包含关于最新和已删除的数字设备和/或内容和搜索查询和结果的通知。内容聚合服务1332可发送送往和接收来自内容展示服务1336的通信1348,包括设备和/或内容查找通知,感兴趣内容的咨询和通知以及搜索查询和结果。
执行搜索时,尤其是用户正在搜索或浏览内容时,内容展示服务1336可接收来自用户界面层1300的用户请求,从而打开插座并将该请求发送至内容聚合服务1332。内容聚合服务1332首先返回来自本地数据库1340的结果。本地数据库1340包含索引或数据模型和已编入索引的元数据。内容源服务1328进一步发出对于所有内容源调查器和其他数据管理系统的搜索并浏览请求。所述结果将被发送至内容聚合服务1332,其更新数据库1340以反映进一步搜索结果,并通过之前打开的插座,将原始内容聚合数据库搜索结果和反映更多内容源服务搜索结果的数据更新结果提供给内容展示服务1336。然后内容展示服务1336将该结果提供给用户界面层1300的一个或多个组件以向观众展示。当搜索阶段结束后(例如搜索阶段被用户或用户的操作终止),用户界面层1300将断开插座的连接。如图所示,媒体可以从内容聚合服务1332直接提供到媒体播放器1316以向用户显示。
智能电视语音控制:
智能电视的语音控制功能可以通过安装在智能电视中的语音助手实现,如图8A所展示的语音输入流程图,以遥控器收集语音为例,当遥控器的语音按键检测到按压触发后,首先判断电视的蓝牙网络是否连接,若没有检测到蓝牙网络,电视界面给出“连接蓝牙网络”的提示,若检测到蓝牙网络正常连接后,检测遥控器的语音按键是否被长按(例如按压时间超过预设秒数),若未检测到长按操作,电视界面给出“提示帮助”,引导用户进行语音输入,若检测到长按则进入语音输入步骤,通常从长按操作到收集语音之间会预留反应时间,即语音输入的等待时间,超过等待时间后才进行语音收集,同时还要判断语音是否结束,结束收音后则进行语音识别步骤。其中,对用户语音输入进行语音识别的实现方法可以参考现有技术,这里不再详细说明。
参考图8B,智能电视对语音进行识别后,要判断识别结果是否有效,若识别结果无效(例如输入的语音未在语音库中查找到相匹配的预存指令),此时提示用户重新进行语音的输入,若识别结果有效,则查询识别结果并显示在用户界面上。另外,第一轮语音输入后,还可以再进行多轮的语音输入,经过多轮语音输入后筛选出目标结果进行显示,最后打开搜索结果,跳出语音助手。
如图8C所示,电视显示界面主要分为两个区域,区域801用于展示用户、天气等图标,区域802用于展示语音搜索结果,例如当用户语音搜索影视资讯时,显示界面802呈现出图8C所示的搜索结果。可选的,采用入口式方式,设计两行推荐位,每个推荐位上显示搜索出来的影视缩略图,及在该缩略图下方显示影视名称。焦点默认位于最左上角的推荐位上,可以以加粗的黑框来做标识,用户输入“确定”语音,则可以打开焦点对应的影视观看界面,操作十分便捷。若当前界面未容纳全部的搜索结果,可以在显示界面的边界处显示部分缩略图(可选的,只显示缩略图的一半),用以提示下一页还存在隐藏的搜索结果,当用户执行翻页操作后,该部分缩略图会移到相对的另一边界处完全显示;若当前界面能够完全容纳所有的搜索结果,则不需要显示该部分缩略图,然后完全显示整个缩略图。这样设计的好处是,在当前界面上可以提示下一界面第一个搜索结果,给用户以提示当前界面无法显示出全部的搜索结果,并且,从部分缩略图到完整缩略图的变化,具有连贯性,与现有的翻页过程,将新的一个界面完全覆盖当前界面相比,上述设计带来更多动态效果。
在一些可选的实施方式下,当前采用语音控制模式时,显示界面会给语音显示“语音输入”留出空间,此时,其他界面呈现的内容会整体上移,参考图8D。对比图8D与图8C可得,图8D的显示界面上增加区域803,该区域803包括“麦克风”图标及“语音输入”字样,用于提示用户,该智能电视支持语音识别功能,引导用户通过语音来查找相关内容。智能电视检测到用户语音输入的过程中,区域803中将呈现出识别的语音结果,用于给用户反馈识别内容。
在一些可选的实施方式下,显示界面上可以去除区域801部分,或者增添其他区域,增添的区域可以位于显示界面的侧面(例如纵向导航栏)。
值得说明的,显示界面呈现影片、应用游戏、资讯等内容,用户可以在此页面中,对页面呈现的内容再次进行交互,可以通过语音控制实现焦点的移动,也可以通过语音实现翻页等功能。可根据设计需求来设定显示界面上区域的数量及区域的布局,可以采用一行、多行显示推荐位方式进行搜索结果的呈现。
可选的,上述过程通过语音助手来实现,该语音助手可以是安装在智能电视操作系统中的软件程序,执行该软件程序可以控制智能电视通过与遥控器的通信接口接收来自遥控器的语音控制命令,从而在电视界面中显示用户要搜索的目标内容。例如通过接收“青岛天气”的语音,智能电视通过语义识别,然后对所识别出的内容进行搜索,最终在显示界面上显示青岛的相关天气信息。当然,用户输入的语音不仅限于上述示例,还包括新闻、影视、教育、购物等,这里不再举例说明。
以上是对智能电视从硬件、软件、语音控制等方面进行介绍,通过语音控制不仅可以实现传统电视遥控器的所有功能,还可以实现遥控器所不能实现的功能,方便用户对电视的操作,提升用户体验,使得电视变得越来越智能化。
接下来以用户语音输入“我想看最新电影”为例来介绍智能电视的内容搜索与显示功能:
方式一:滚焦
在一些可选的实施方式下,图8E示例性地给出了一种根据用户输入,智能电视的搜索结果呈现的显示界面,智能电视响应用户的输入,得到如图8E所示的显示界面,该显示界面包括四个区域:区域802,区域803,区域804和区域805。其中,区域802以推荐位的方式来显示搜索出来的电影的缩略图,即每一个推荐位上对应一个电影的缩略图,这里分两行显示,每一行显示4个完整的缩略图和1个部分缩略图,通常这些搜索的结果会根据预设规则(例如相关度、热度等)进行排序,得到如图8E排列的电影A-电影H;区域803中显示麦克风标识和相关提示语,指示用户可以通过语音控制电视;区域804包括用户图标及用户输入的内容,例如显示“我想看最新电影”,通过区域804可以清楚反馈智能电视对用户语音的识别结果;区域805包括搜索图标及搜索结果,例如显示“为您找到36部最新电影”。
通常,焦点默认定位在左上角的推荐位上(可以根据设计需求调整焦点的默认位置),为了凸显当前焦点的位置,将焦点对应的电影缩略图四周增加焦点框,如图中焦点框806,这样可以明显给用户以提示当前焦点的位置,以及方便用户进行接下来的操作。同时,焦点框806中的电影缩略图将被放大,由于焦点框806对应的电影缩略图放大,其下方的电影名称的位置则下移。
可选的,可以选择不同于上述方式来标识焦点的位置,例如,可以为焦点对应的缩略图设置不同的背景色或者添加阴影,可以仅采用放大缩略图但不加焦点框的方式等。
在一些可选的实施方式下,用户可以通过语音来控制焦点的移动。图8F示例性给出在图8E的基础上当用户再次输入语音“右一个”的显示界面,智能电视响应用户的语音输入在图8F中的上图区域803中显示语音识别结果“右一个”;接着,智能电视语响应语音识别的结果,焦点发生“滚焦”动作,得到图8F中的下图,具体的,焦点框806由粗线条变成细线条,且原来被放大的电影缩略图会缩小,而焦点框809由细线条变成粗线条,且对应的电影缩略图被放大,表现出来的效果为焦点从焦点框806对应的推荐位移动到焦点框809对应的推荐位上,即焦点发生水平方向上的移动,另外,区域803的内容又变成最初的图8E所示的内容,等待用户下一次的语音输入状态。图8F展示了语音控制焦点移动的过程,这种“滚焦”的设计效果给用户以动态感,智能电视的显示界面配合用户的操作,能够实时响应用户的移动指令。
在一些可选的实施方式下,焦点移动后则直接播放移动后所对应的影片,也可以在焦点移动后,还需要接收用户的指令,当用户输入“确定”后打开焦点对应的影片。
在一些可选的实施方式下,用户可以连续多次输入语音控制指令,例如连续移动焦点的位置。以图8F、图8G为例,在图8F示意的用户先语音输入“右一个”后,接着用户又语音输入“下一个”,得到图8G所示的显示界面,关于在“下一个”语音控制指令下,焦点移动的过程参考上述焦点的移动过程,焦点同样发生“滚焦”动作,图8G中,焦点框809由粗线条变成细线条,且原来被放大的电影缩略图会缩小,而焦点框810由细线条变成粗线条,且对应的电影缩略图被放大,表现出来的效果为焦点从焦点框809对应的推荐位移动到焦点框810对应的推荐位,即焦点发生垂直方向上的移动。
值得说明的,上述焦点移动仅为相邻方向上的移动,输入的语音指令可选为“上一个”、“下一个”、“左一个”、“右一个”,当然焦点实现上述四个方向移动的语音指令不限定上述四种,还可以将相近的指令词存入语音库,当检测到用户输入语音指令与预存的模板相匹配时,智能电视则相应该语音指令,使得焦点移动到目标位置处。
可选的,语音库中存储了大量的语音指令,但是用户并不知道哪些指令是预存在语音库中,哪些指令是没有预存在语音库中,为了帮助用户更方便、准确的输入能够匹配的语音指令,在智能电视的显示界面上可以显示“引导语”,用来引导用户接下来可以下发哪些语音指令。另外,引导语是根据用户上一次输入的语音指令相关,引导语的数量可以根据设计需求来定。图8H给出一种带引导语的显示界面,如图8H所示,在用户界面的区域805中,增加一个区域811用于显示引导语,例如:您还可以说“美国的电影”、“喜剧”、“小明主演”、“下一个”,当然,引导语并不能将所有的语音指令都显示在用户界面中,这里仅给出了有限数量的语音指令。引导语显示位置并不限定在区域805中,可以根据设计需求而定,设计、显示引导语的技术可以参考现有相关技术,这里不再赘述。
上述示出的可选方案中,焦点的移动仅是由当前的推荐位移动到相邻的推荐位,也就是焦点移动的步长只能是一个推荐位的距离,在一些可选的实施方式下,采用语音控制的方式能够实现焦点一次移动多个推荐位的距离,以下实施例中来具体介绍:
示例性的,图8I给出语音控制焦点一次移动多个推荐位的示意图,如图8I所示,当用户语音输入“右两个”时,智能电视响应用户的语音指令,焦点从当前焦点框806对应的推荐位上移动到焦点框812对应的推荐位,跟上述“右一个”实施例中焦点框变化类似,对比图8I中上下两图,焦点框806由粗线条变成细线条,且原来被放大的电影缩略图会缩小,而焦点框812由细线条变成粗线条,且对应的电影缩略图被放大,即焦点发生了水平方向的滚动,且滚动了两个推荐位的距离。可见,智能电视的语音控制可以实现传统遥控器所不能实现的功能,而采用传统的遥控器要实现上述过程,需要按压两个方向键,而通过语音控制则一步可以实现,节省了用户操作时间,减少操作步骤。
可选的,用户还可以实现“右三个”、“右四个”、“下两个”、“下三个”等,从而实现焦点在当前显示界面上的推荐位之间的移动,这里不再详细列举,并且,用户指令也不仅限于上述给出的语音指令,可以在语音库中预存若干个实现同一功能的不同语音指令。
上述实施例给出了同一行或者同一列上,焦点一次移动多个推荐位的情况,在一些可选的实施方式下,焦点可以跨多行和多列的推荐位来移动,参考图8J,当用户语音输入“第二行第三个”时,智能电视响应用户的语音指令,焦点从当前焦点框806对应的推荐位上移动到焦点框813对应的推荐位上,其焦点框粗细变化及缩略图的大小变化参考上述介绍,这里不再详细说明。
在一些可选的实施方式下,当焦点移动到显示界面的边界位置处,即移动到只显示部分缩略图的推荐位时,整个区域802中的推荐位整体左移或右移,使得移动后的焦点对应的推荐位上能够显示完整的视频缩略图。示例性的,参考图8K,当用户语音输入“第五个”时(这里是按行向查找第五个),智能电视响应用户的语音指令,焦点从当前焦点框806对应的推荐位上移动到焦点框814对应的推荐位上,此时,该推荐位上的显示的视频缩略图由原来仅显示部分变成现在能够完整显示,而显示区域另一边界位置处,区域815中推荐位上的视频缩略图由原来完全显示变成现在仅显示部分,其表现出来的效果是区域802中的所有视频缩略图会向左发生了滚动,给用户以动态感。可选的,若焦点从当前的状态返回到最左边界的推荐位时,区域802中的所有视频缩略图会向右发生滚动,这里不再给出示意图。
上述实施方式都给出了焦点在当前显示页面所显示的推荐位之间的移动,若用户发现当前显示界面上没有感兴趣的内容时,通常需要执行翻页操作,然后在翻页后的页面上定位目标推荐位,显然这样操作起来,步骤比较多。在一些可选的实施方式下,本公开可以响应用户的语音指令,焦点可以直接移动到当前显示界面未显示的那些推荐位上,也就是能够实现定位目标推荐位且翻页的效果,值得注意的是,这里的翻页限于翻到下一页,可以一次翻好几页,是根据目标推荐位与当前推荐位的距离而确定的。因此,较传统的先将焦点移动到最边界位置处,然后用户语音输入“翻页”这种操作过程而言,本公开可以使焦点跳转到目标位置上,更加快捷。
结合图8L,当用户语音输入“第六个”时(这里是按行向查找第六个),智能电视响应用户的语音指令,判断出焦点的目标位置已经不在当前显示界面的推荐位上,确定根据目标推荐位在第二页上,显示界面执行翻页操作,即若上一页最右边界处的缩略图未完全显示,则移到下一页时,该未完全显示的缩略图在最左边界处完全显示,如图8L中虚线框815中显示的情况,而“第六个”则位于焦点框816对应的推荐位上,从而完成了焦点从当前焦点框806对应的推荐位上移动到焦点框816对应的推荐位上。
可选的,当用户输入语音指令“第N个”时,可以预设按行查找或者按列查找,这里不做限定。
以上介绍了智能电视识别用户的语音输入来实现焦点的移动,下面简单介绍下如何根据语义理解来确定目标焦点的位置的处理过程:
参考图8M所示的显示界面,以显示界面的左上角为坐标原点,水平方向为X轴,垂直方向为Y轴建立坐标系,以焦点框的左上角所在位置代表焦点的位置,根据焦点框的长度、宽度,以及相邻两个焦点框之间的间隔,就可以计算显示界面上任一一个推荐位的坐标。其中,用户输入的语音指令指示焦点仅在一个方向上移动时,当前焦点的坐标也只在横坐标/纵坐标上做加减,而用户输入的语音指令指示焦点在两个方向上都移动时,其横坐标和纵坐标都做加减。这里,通过预设的语音模型能够判断出焦点将要移动的方向和意图,例如,“左一个”,“左”代表方向,“一个”代表移动步长。
示例性的,当前焦点的位置坐标(x1,y1),当用户语音输入“右m个”可以得到目标焦点的位置坐标(x1+m*(w+s),y1),其中w代表焦点框的长度,s代表左右相邻两个焦点框的间隔。又例如,用户语音输入第m行第n个,则目标焦点的位置坐标(x1+(n-1)*(w+s),y1+(m-1)*(h+r)),其中,h代表焦点框的高度,r代表上下相邻两个焦点框的间隔。
值得注意的是,当计算出目标焦点的位置时,还要判断目标焦点位置是否已经超出当前的显示界面,若已经超出时,则要减掉整数个界面长度/宽度后,才能够得到目标焦点在显示界面上的位置,这里不再详细说明。
方式二:定焦
在一些可选的实施方式下,设置“定焦”方式来得到用户的目标搜索结果,即焦点的位置不发生变化,而是该焦点对应的推荐位发生变化,可以得到焦点定位的搜索结果不断改变的效果。
图9A是智能电视定焦设计的一种示意图,如图9A中的上图所示,电视用户界面呈现用户的搜索结果,搜索的视频排布在两行的推荐位上,焦点框901对应推荐位903(电影B),电影A位于推荐位903的左侧的推荐位902上,电影C位于推荐位903的右侧的推荐位904上,电影A-电影C排列一行中;推荐位906位于推荐位903的下一行,该推荐位对应电影F,电影E位于推荐位906的左侧的推荐位905上,电影G位于推荐位906的右侧的推荐位907上,电影E-电影G排列一行中。
在一些可选的实施方式下,图9A上图所示的情况下,若智能电视响应用户语音指令“右一个”,得到图9A中的下图所示的用户界面,对比两个图可得,焦点框901的位置没有发生变化,但是焦点框901对应的不是推荐位903而是推荐位904,且推荐位902和推荐位905从显示界面中消失,推荐位903向左移动到原推荐位902的位置处,推荐位906向左移动到原推荐位905的位置处,依次类推,同一行中的其他推荐位也分别向左移动到其左侧的推荐位上。并且,推荐位903上的缩略图缩小,推荐位904上的缩略图放大,显示界面右边界处的两个推荐位上出现下一页隐藏的部分缩略图。表现出来的效果是,智能电视响应用户的“右一个”指令,两行推荐位整体向左移动一个推荐位的距离,原本位于最左侧的,但是焦点的位置没有改变,由于推荐位发生了移动,该焦点对应的推荐位就发生了变化,定焦设计呈现出推荐位滚动的效果,富有动态感。
类似的,当用户语音输入“左K个”指令,推荐位则向左发生滚动K个推荐位的距离;当用户语音输入“第M行第N个”指令,推荐位既要左右滚动又要上下滚动,从而实现焦点停留在目标推荐位上,具体不再附图说明。
上述定焦设置情况下,两行的推荐位是一起滚动,在另一个可能的实施方式下,可以仅实现当前焦点所在的行上的推荐位滚动,其他行的推荐位不发生变化。示例性的,如图9B所示的情况,智能电视当前用户界面如图9B中上图所示,响应用户语音指令“右一个”后,得到图9B中下图结果,对比上下两图可得,在第一行中,焦点框901的位置不变,但是焦点框901对应的不是推荐位903而是推荐位904,且推荐位902从显示界面中消失,推荐位903向左移动到原推荐位902的位置处,依次类推,第一行中的其他推荐位也分别向左移动到其左侧的推荐位上,但第二行中的推荐位并不发生变化,表现出来的效果是,只有焦点所在的那一行的推荐位发生滚动。
以上是采用定焦,即移动推荐位的方式来选择目标推荐位,下面以推荐位视屏滚动为例,介绍其具体处理过程:
示例性的,仅示例一行排列的推荐位,如图9C所示,两条虚线之间的长度代表显示界面的长度L,两条虚线之间的框代表焦点框,当前焦点位于推荐位908上(焦点框加粗显示),焦点框的长度为w,当用户语音输入“右n个”,可得滚动的距离为:
x=[n/5]*L+mod(n/5)*w
其中,[]代表取整,mod()代表取余。
在一些可能的实施方式下,若焦点位于当前推荐位上,响应用户的语音输入指令,直接将当前推荐位和目标推荐位的显示位置互换,使得目标推荐位位于焦点所在位置上,而其余的推荐位的位置都不发生变化。
以上是采用定焦实现推荐位的滚动方式的介绍,接下来介绍下“翻页”。
方式三:翻页
有些实施例中,当用户想要浏览下一页的内容,可以采用滚焦的方式,将焦点移动到显示界面的边界,然后输入语音“下一页”或“上一页”,则可实现翻页功能,即当前页面的内容会被新的一页的内容所替换。
示例性的,图10A展示了翻页的过程,前面实施例中也介绍过,当焦点框1001位于显示界面最右边界处时,推荐位整体向左移,使得该推荐位能够完整显示缩略图,智能电视响应用户“下一页”的指令后,当前的显示界面上的推荐位则会被替换成下一页上的推荐位,得到图10A下图所示的情况,此时焦点从显示界面的最右端移动到最左端。
在另一种实施例中,采用定焦的方式来实现翻页功能,并且不限定焦点只能位于显示界面边界处才能进行翻页操作,采用定焦的方式下,焦点可以在任何位置,智能电视都能响应“翻页”指令。
示例性的,如图10B所示,上图中焦点框1002位于第一行左边界开始第二个位置处,执行翻页操作得到下图,显然,焦点框1002仍然位于第二个位置处,而图10B上图右边界处的区域1003中部分显示的缩略图,在下图中移动到左边界处区域1004,并且能够完整显示缩略图,实际上是推荐位整体向左滚动一个页面的长度,呈现给用户的是实现翻页的效果。
可选的,采用定焦和滚焦结合的方式进行显示界面设计,示例性的,如图10C所示,若焦点在区域1004中,采用滚焦的方式进行目标的移动,若焦点移出区域1004进入区域1005中,采用滚动推荐位的定焦方式进行目标的确定,若当前显示界面是最后一页,此时可以将焦点从区域1004移动到区域1005中,然后采用滚焦的方式确定目标即可。以上仅给出定焦和滚焦相结合的一种可能的实现方式。
在一些可能的实施方式下,当焦点移动到指定位置上,例如显示界面的中间位置,显示界面上的所有推荐位沿预设方向整体移动,使得焦点移动到显示界面边界处,此时,一部分推荐位移出当前的显示界面,而将之前未在显示界面上显示的另一部分推荐位移入到当前显示界面上,移出和移入的推荐位数量相同。如图10D所示,响应用户的语音指令,焦点移动到位置1007处,也就是显示界面的中间位置处,显示界面上的推荐位整体向左移动,使得焦点位于显示界面最右边界的1010位置处,可见区域1009中的推荐位被移出当前的显示界面,而区域1008中的推荐位移动到区域1011处,区域1012中的推荐位移入到当前的显示界面。这样,可以实现快速翻页,随着焦点位置的移动,且将焦点移过的那部分区域中的推荐位移出当前显示界面,而将隐藏的那些推荐位移入显示界面上,方便用户定位目标推荐位。
可选的,焦点可以始终位于指定位置的推荐位上,也可以是从指定位置处沿预设方向移动到显示界面边界处的推荐位上,本公开不限定焦点的位置。预设方向可以是横向,也可以是纵向,根据设计方案而定,无论横向还是纵向,其实现原理类似,这里不再重复说明。
基于现有智能电视语音操作技术,本公开提出两种焦点控制方式,即定焦和滚焦,并且实现了智能电视的列表滚动,通过这种方式,大大降低用户语音控制指令输入次数,提高用户体验。
根据用户的语音输入,显示设备显示搜索结果,该搜索结果可以以推荐位的方式进行显示,响应用户的语音指令,对推荐位可以采用定焦或者滚焦的方式来选择,如附图8I-图8L,图9A-图9B所示,也可以响应用户的语音指令来实现翻页功能,如图10A-图10D所示。接下来结合附图11来介绍选择推荐位方法的实现步骤,结合附图12介绍翻页方法的实现步骤。
虽然图11-图12显示了方法的一般执行顺序,但方法可以包含更多或更少的步骤,或者其步骤的顺序可以与图11-图12所示方法不同的顺序安排。方法是一组可由计算机系统或处理器执行的计算机执行指令,在一种计算机可读媒体上编码或储存,或具体体现为可执行该方法的专用集成电路(ASIC)或现场可编程门阵列(FPGA)中的电路。在下文中,我们将结合图1-图10D所述的系统、组件、模块、数据结构、用户界面等来解释方法。
图11在概念上示出了用户在电视上选择推荐位的某些实施例的处理过程。如图所示,首先根据用户的输入指令,该指令可以通过语音、用户遥控器按钮、手势或者触摸屏幕的用户交互集合或者通过某种变型来接收,在用户界面上呈现搜索结果。
步骤S101,启动显示界面,并显示默认的显示界面布局,示例性的,参考图8C-图8E所示,显示界面包括的内容这里不再介绍。
步骤S102,接收用户的语音输入,进行语音解析和语义理解,该过程可以参考现有技术,这里不做具体说明,如界面8E所示,电视将用户输入的语音以文字形式呈现在界面上。
步骤S103,根据语义理解来检索相关的内容,例如,当用户输入“我想看小明的电影”,根据这句话在搜索引擎中检索每一个电影,并确定电影与这句话的匹配程度。
步骤S104,根据步骤S103确定的匹配度,判断是否检索到相匹配的内容,例如,将匹配度大于预设阈值的那些电影视为匹配成功的,若匹配度都小于预设阈值,则视为不存在成功匹配的电影。若存在相匹配的内容时,执行步骤S106,在推荐位上显示搜索结果;若不存在相匹配的内容时,执行步骤S105,提示预设文字,例如“对不起,我没有检索到相关内容”。
步骤S107,当查找完显示结果后,用户还可以进一步筛选结果,电视进一步接收用户选择推荐位的语音指令,例如“下一个”、“第二行第二个”等。
步骤S108,解析语音指令中目标推荐位的位置坐标,语音指令中包括指示方向的词(左、右、上、下等)和移动距离词(例如数字),通过语音分词后进行语义理解,确定目标推荐位位于当前推荐位的方向及其到当前推荐位的距离,从而确定目标推荐位的位置坐标。
步骤S109,若采用滚焦的方式,根据目标推荐位的位置坐标,移动焦点的位置使得焦点定位到目标推荐位上,参考图8I-图8L;或者,若采用定焦的方式,根据目标推荐位的位置坐标,移动(滚动)推荐位,使得焦点定位到目标推荐位上,参考图9A-图9B。具体的过程不再重复,参考上述实施例。
步骤S110,打开目标推荐位上的内容,例如,用户可以再次语音输入“确定”,便可打开推荐位上的电影。
图12在概念上示出在电视上执行翻页的处理过程,如图12所示,具体步骤如下:
步骤S201-步骤S206与上述步骤S101-步骤S106相似,这里不再重复说明。
步骤S207,接收用户翻页的语音指令,需要判断当前搜索结果是否存在存在隐藏内容,即执行步骤S208。具体的,当前显示界面智能呈现10个推荐位,若搜索结果为20个,剩余的10个推荐位是处于隐藏状态,响应翻页指令后,才能将隐藏的这10个推荐位显示出来,但之前显示的那10个推荐位则被隐藏。
步骤S208判断出存在隐藏内容时,需要执行步骤S209,根据显示界面的尺寸,移动焦点位置或者推荐位的显示位置,使得显示界面呈现隐藏的内容。具体的,若采用定焦的方式进行翻页,参考图10B,焦点位置不发生改变,推荐位发生移动(滚动),从而将隐藏的推荐位滚动到显示界面上,将之前显示界面上的推荐位滚动到隐藏界面上。若采用滚焦方式进行翻页,参考图10A,焦点移动到当前界面的最边上的推荐位上,执行翻页后,下一页的推荐位覆盖当前页面的推荐位,焦点从最边上的推荐位移动到相对边的推荐位上。若采用焦点移动到指定位置时,自动将当前显示界面上的部分推荐位移出,且移入相同数量的隐藏的推荐位进行显示。
步骤S208判断出未存在隐藏内容时,显示界面提示文字,例如“抱歉,下一页没有内容”。
在一些可选的实施方式下,参考图13,本公开提供一种基于语音交互的推荐位选择方法,包括:
步骤S301,响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;
步骤S302,响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,若所述多个推荐位呈行向排布,响应于选择推荐位的指令,沿所述行向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈列向排布,响应于选择推荐位的指令,沿所述列向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上。这里示例了单行排列的推荐位或者单列排列的推荐位的情况,实现了推荐位滚动的效果。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,沿行向或者列向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。具体可以参考图9A,采用定焦的方式,这里不再重复说明。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一行,响应于选择推荐位的指令,沿行向移动所述多个推荐位中该行上的推荐位,且所述多个推荐位中其余行上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上;或者,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一列,所述响应于选择推荐位的指令,沿列向移动所述多个推荐位中该列上的推荐位,且所述多个推荐位中其余列上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上。具体参考图9B,采用定焦方式,这里不再说明。
可选的,若所述多个推荐位呈多行多列排布,且所述目标推荐位与所述当前推荐位不属于同一行和同一列,响应于选择推荐位的指令,先沿行向再沿列向移动所述多个推荐位,或者,先沿列向再沿行向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。这里是采用定焦方式,目标推荐位和当前推荐位在行向上和列向上都存在间隔,也就是说,多个推荐位移动时候既要行向移动,又要列向移动,可以参考前述实施例来理解,这里不再附图说明。
在一些可选的实施方式中,与上述方法对应的,本公开提供一种推荐位的选择装置,包括:
第一模块,用于响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;
第二模块,用于响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,该装置还用于,若所述多个推荐位呈行向排布,响应于选择推荐位的指令,沿所述行向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上;
或者,若所述多个推荐位呈列向排布,响应于选择推荐位的指令,沿所述列向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上。
可选的,该装置还用于,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一行,响应于选择推荐位的指令,沿行向移动所述多个推荐位中该行上的推荐位,且所述多个推荐位中其余行上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上;
或者,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一列,所述响应于选择推荐位的指令,沿列向移动所述多个推荐位中该列上的推荐位,且所述多个推荐位中其余列上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,该装置还用于,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,沿行向或者列向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
可选的,该装置还用于,若所述多个推荐位呈多行多列排布,且所述目标推荐位与所述当前推荐位不属于同一行和同一列,响应于选择推荐位的指令,先沿行向再沿列向移动所述多个推荐位,或者,先沿列向再沿行向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
其中,第一模块、第二模块的具体实现步骤请参考上述方法的介绍。
在一些可选的实施方式下,参考图14,本公开提供一种基于语音交互的推荐位选择方法,包括:
步骤S401,响应于用户的搜索指令,得到的搜索结果存放在交互界面的多个推荐位上;
步骤S402,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上;
其中,移动前位于所述第一位置的预设方向侧的推荐位移出所述交互界面,且位于位于所述第一位置的预设方向的相反方向侧的推荐位移入所述交互界面,移入和移出的推荐位数量相同。具体的可参考图10D,其实现的效果是快速翻页,当焦点位于设定位置上,那么推荐位就发生滚动,使得当前显示界面上的推荐位一部分移出,而移入一部分隐藏推荐位,无需用户语音输入“翻页”指令,更加便捷。
可选的,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位中与所述第一位置同行的推荐位,按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上,且所述多个推荐位中与所述第一位置不同行的推荐位不发生移动。这里与图9B的效果类似,不再说明。
可选的,所述第一位置位于所述交互界面中心,所述第二位置位于所述交互界面的边界。也就是说,示例性的,当焦点移动到中心位置上,整个显示界面的中心左侧一半的推荐位移动到右边界处,而后将隐藏的推荐位移入到显示界面中心右侧的另一半区域上,也就刷新的界面一半的推荐位。
与之对应的,在另一些实施例中,本公开提供一种基于语音交互的推荐位选择装置,所述装置用于:
响应于用户的搜索指令,得到的搜索结果存放在交互界面的多个推荐位上;响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上;其中,移动前位于所述第一位置的预设方向侧的推荐位移出所述交互界面,且位于位于所述第一位置的预设方向的相反方向侧的推荐位移入所述交互界面,移入和移出的推荐位数量相同。
可选的,所述装置还用于,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位中与所述第一位置同行的推荐位,按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上,且所述多个推荐位中与所述第一位置不同行的推荐位不发生移动。
可选的,所述装置还用于,所述第一位置位于所述交互界面中心,所述第二位置位于所述交互界面的边界。
具体的参考上述方法对应的介绍,这里不做说明。
有些实施方式下,提供一种基于语音交互的推荐位选择方法,应用于显示设备中,所述显示设备包括用于存放搜索结果的多个推荐位,所述显示设备的交互界面上显示所述多个推荐位中部分推荐位,包括:
响应于选择推荐位的语音指令,根据目标推荐位与当前推荐位的位置关系,将焦点从所述当前推荐位移动到所述目标推荐位;其中,所述目标推荐位与所述当前推荐位不在同一行且不在同一列,所述目标推荐位的位置是根据所述选择推荐位的语音指令确定的。
可选的,若所述目标推荐位与所述当前推荐位之间的行向距离大于所述显示界面的行向长度,将所述多个推荐位移动所述行向长度整数倍的距离,使得所述目标推荐位显示在所述交互界面上,并且将焦点移动到所述目标推荐位上。或者,若所述目标推荐位与所述当前推荐位之间的列向距离大于所述显示界面的列向长度,将所述多个推荐位移动所述列向长度整数倍的距离,使得所述目标推荐位显示在所述交互界面上,并且将焦点移动到所述目标推荐位上。具体可参考图9C,这里不再说明。
可选的,若所述目标推荐位仅有一部分显示在所述交互界面上,将焦点从所述当前推荐位移动到所述目标推荐位后,所述多个推荐位发生移动,使得所述目标推荐位能够完整显示。具体可参考图8K,这里不再重复。
有些实施例中,与上述方法对应的,提供一种基于语音交互的推荐位选择装置,应用于显示设备中,所述显示设备包括用于存放搜索结果的多个推荐位,所述显示设备的交互界面上显示所述多个推荐位中部分推荐位,所述装置还用于:
响应于选择推荐位的语音指令,根据目标推荐位与当前推荐位的位置关系,将焦点从所述当前推荐位移动到所述目标推荐位;其中,所述目标推荐位与所述当前推荐位不在同一行且不在同一列,所述目标推荐位的位置是根据所述选择推荐位的语音指令确定的。
可选的,所述装置还用于,若所述目标推荐位与所述当前推荐位之间的行向距离大于所述显示界面的行向长度,将所述多个推荐位移动所述行向长度整数倍的距离,使得所述目标推荐位显示在所述交互界面上,并且将焦点移动到所述目标推荐位上。
可选的,所述装置还用于,若所述目标推荐位与所述当前推荐位之间的列向距离大于所述显示界面的列向长度,将所述多个推荐位移动所述列向长度整数倍的距离,使得所述目标推荐位显示在所述交互界面上,并且将焦点移动到所述目标推荐位上。
可选的,所述装置还用于,若所述目标推荐位仅有一部分显示在所述交互界面上,将焦点从所述当前推荐位移动到所述目标推荐位后,所述多个推荐位发生移动,使得所述目标推荐位能够完整显示。
在一些实施方式下,提供一种基于语音识别的推荐位选择方法,包括:在显示设备上显示交互界面及部分推荐位,焦点位于所述部分推荐位中的当前推荐位上;响应于选择推荐位的语音指令,移动所述焦点和/或移动推荐位,使得所述焦点位于目标推荐位上,其中,所述选择推荐位的语音指令包括所述目标推荐位的二维坐标。具体的,可以参考图8J。
可选的,若所述目标推荐位的二维坐标超出所述交互界面的范围,移动推荐位,使得所述目标推荐位移动到焦点所在位置处,且所述焦点的位置不变。
可选的,若所述目标推荐位的二维坐标属于所述交互界面的范围,移动所述焦点,使得焦点位于所述目标推荐位上,且推荐位的位置不变。
在一些实施方式下,提供一种基于语音识别的推荐位选择装置,用于,在显示设备上显示交互界面及部分推荐位,焦点位于所述部分推荐位中的当前推荐位上;响应于选择推荐位的语音指令,移动所述焦点和/或移动推荐位,使得所述焦点位于目标推荐位上,其中,所述选择推荐位的语音指令包括所述目标推荐位的二维坐标。
可选的,所述装置还用于若所述目标推荐位的二维坐标超出所述交互界面的范围,移动推荐位,使得所述目标推荐位移动到焦点所在位置处,且所述焦点的位置不变。
可选的,所述装置还用于若所述目标推荐位的二维坐标属于所述交互界面的范围,移动所述焦点,使得焦点位于所述目标推荐位上,且推荐位的位置不变。
在一些实施方式下,提供一种智能电视,包括:显示屏,被配置为显示视频内容和网页内容以及用户界面;存储器,以及与所述存储器和所述显示屏通信的处理器,该处理器用于执行上述任一所述方法。
此外,尽管已按特定的事件次序讨论和说明了一些流程图,但应理解,这种次序可以变更、增加和省略,而不会对已披露的实例、配置和各方面的操作产生实质性影响。
可以采用本申请的一系列更改变动和修改。有可能只提供本申请的某些特点,而不提供其余特点。
在另一个实例中,本申请的系统和方法在实施时可以与专用计算机、已编程的微处理器或微控制器和外围集成电路元件、ASIC或其他集成电路、数字信号处理器、硬连线电子或逻辑电路(如离散元件电路)、可编程逻辑设备或门阵列(如PLD、PLA、FPGA、PAL)、专用计算机、任何可比较的工具等结合使用。一般而言,任何能够实施本申请所述的方法的设备或工具均可用于实施本申请的各个方面。适用于已披露的实例、配置和方面的示范性硬件包括计算机、手持式设备、电话(如手机、可启用互联网的、数字、模拟、混合体和其他)和其他本领域内已知的硬件。某些这类设备包括处理器(例如一个或多个微处理器)、存储器、非易失性存储器、输入设备和输出设备等。而且,还可以使用其他软件实施过程来实施本申请所述的方法,这些实施过程包括但不限于分布式处理或组件/对象分布式处理、并行处理或虚拟机器处理。
在另一个实例中,已披露的方法也可以容易地与使用对象或面向对象的软件开发环境的软件结合来实施,因为这些环境可以提供可在各种计算机或工作站平台上使用的便捷式源代码。或者,所披露的系统可以部分或全部在使用标准逻辑电路或VLSI设备的硬件中实施。在实施依照本申请的系统时使用的是软件还是硬件,取决于系统的速度和/或效率要求、特定功能和特定的软件或硬件系统,或正在使用的微处理器或微计算机系统。
在另一个实例中,所披露的方法可以部分地在软件中实施,该软件可以储存在储存媒体中,在配备控制器和存储器的已编程通用计算机上、专用计算机、微处理器上运行。在这些例子中,本申请中的系统和方法可以作为嵌入个人计算机中的程序(如小应用程序、或CGI脚本)、保存在服务器或计算机工作站上的资源、嵌入专用测量系统和系统组件等的例行程序实施。此外,还可以通过以物理方式将该系统和/或方法整合到软件和/或硬件系统中,从而执行该系统。
尽管本申请按照特定标准和协议来说明在某些方面、实例和/或配置中实施的组件和功能,但不表示这些方面、实例和/或配置受限于这些标准和协议。本申请未提及的其他类似标准和协议也是存在的,并视为包含在本申请内。而且,本申请提及的标准和协议和本申请未提及的其他类似标准和协议将定期由最快和更有效的在本质上具有相同功能的对等物取代。这种具有相同功能的替代标准和协议被视为对等物包含在本申请中。
本申请在各个方面、实例和/或配置中包含本申请详细说明的组件、方法、过程、系统和/或仪器,包括各个方面、实例、配置实例、子组合和/或上述的子集。本领域技术人员在理解本申请后将知道如何制作和使用已披露的方面、实例和/或配置。本申请在各个方面、实例和/或配置中包括在缺少本申请或各个方面、实例和/或配置中未描述和/或说明的项目的情况下,或在缺少可能已在以前的设备或过程中使用过的那些项目的情况下,提供设备和流程,以改善性能、实现简便和/或降低实施成本等。
提出上述讨论是出于说明和描述的目的,并不企图将本申请限制于所披露的一种或多种形式。在前述的详细描述中,例如,申请中的各种特点被归纳为一个或多个方面、实例和/或配置,以使申请的结构更为清晰简要。本申请的各个方面、实例和/或配置的各种特点可以组合在以上所述之外的其他方面、实例和/或配置中。这一披露方法不应被解释为反映了这样一种意图,即诸项权利要求需要比每项权利要求中已经明确列举的所有特点以外更多的特点。相反,如以下诸项权利要求所反映,创新的诸方面存在于单一的前述披露的方面、实例和/或配置的所有特点之中。因此,以下权利要求以此方式包含在本详细描述中,每项要求均作为本申请的单独的优选实例而独立存在。
而且,尽管上述描述已包含对于一个或多个方面、实例和/或配置以及某些变动和修改的描述,但是其他变动、组合和修改仍然在本申请的范围内,就如同是在理解本申请后的本领域技术人员的技术和知识范围内。申请者的意图是在允许的范围内获取包括替代的方面、实例和/或配置在内的权利,包括相对于那些已在权利要求中包括的方面、实例和/或配置是属于替代的、可互换的和/或对等的结构、功能、范围或步骤,而无论该等替代的、可互换的和/或对等的结构、功能、范围或步骤是否已在本申请中披露,而且无意公开地奉献任何专利适格标的。
Claims (10)
1.一种基于语音交互的选择推荐位方法,其特征在于,包括:
响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;
响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
2.根据权利要求1所述的方法,其特征在于,若所述多个推荐位呈行向排布,响应于选择推荐位的指令,沿所述行向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上;
或者,若所述多个推荐位呈列向排布,响应于选择推荐位的指令,沿所述列向移动所述多个推荐位,使所述目标推荐位移动到所述焦点所在位置上。
3.根据权利要求1所述的方法,其特征在于,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一行,响应于选择推荐位的指令,沿行向移动所述多个推荐位中该行上的推荐位,且所述多个推荐位中其余行上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上;
或者,若所述多个推荐位呈多行多列排布,且所述目标推荐位与当前推荐位处于同一列,所述响应于选择推荐位的指令,沿列向移动所述多个推荐位中该列上的推荐位,且所述多个推荐位中其余列上的推荐位不动,使得所述目标推荐位移动到所述焦点所在位置上。
4.根据权利要求1所述的方法,其特征在于,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,沿行向或者列向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
5.根据权利要求1所述的方法,其特征在于,若所述多个推荐位呈多行多列排布,且所述目标推荐位与所述当前推荐位不属于同一行和同一列,响应于选择推荐位的指令,先沿行向再沿列向移动所述多个推荐位,或者,先沿列向再沿行向移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
6.一种基于语音交互的选择推荐位方法,其特征在于,所述方法包括:
响应于用户的搜索指令,得到的搜索结果存放在交互界面的多个推荐位上;
响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上;
其中,移动前位于所述第一位置的预设方向侧的推荐位移出所述交互界面,且位于所述第一位置的预设方向的相反方向侧的推荐位移入所述交互界面,移入和移出的推荐位数量相同。
7.根据权利要求6所述的方法,其特征在于,若所述多个推荐位呈多行多列排布,响应于选择推荐位的指令,当焦点移动到第一位置时,所述多个推荐位中与所述第一位置同行的推荐位,按照预设方向移动预设距离,使得移动前的所述第一位置上的推荐位移动到第二位置上,且所述多个推荐位中与所述第一位置不同行的推荐位不发生移动。
8.根据权利要求6所述的方法,其特征在于,所述第一位置位于所述交互界面中心,所述第二位置位于所述交互界面的边界。
9.一种推荐位的选择装置,其特征在于,包括:
第一模块,用于响应于用户的搜索指令,得到的搜索结果存放在多个推荐位上,显示设备的交互界面上显示所述多个推荐位中部分推荐位,确定属于所述部分推荐位中的当前推荐位的位置,其中,焦点位于所述当前推荐位上;
第二模块,用于响应于选择推荐位的指令,确定属于所述多个推荐位中的目标推荐位的位置,若所述目标推荐位不属于所述部分推荐位,根据所述目标推荐位和所述当前推荐位之间的位置关系,移动所述多个推荐位,使得所述目标推荐位移动到所述焦点所在位置上。
10.一种智能电视,包括:
显示屏,被配置为显示视频内容和网页内容以及用户界面;
存储器,以及与所述存储器和所述显示屏通信的处理器,该处理器用于执行权利要求1-8中任一所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810284159.9A CN108540851A (zh) | 2018-04-02 | 2018-04-02 | 基于语音交互的选择推荐位方法、装置及智能电视 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810284159.9A CN108540851A (zh) | 2018-04-02 | 2018-04-02 | 基于语音交互的选择推荐位方法、装置及智能电视 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108540851A true CN108540851A (zh) | 2018-09-14 |
Family
ID=63482749
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810284159.9A Withdrawn CN108540851A (zh) | 2018-04-02 | 2018-04-02 | 基于语音交互的选择推荐位方法、装置及智能电视 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108540851A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507212A (zh) * | 2020-04-03 | 2020-08-07 | 咪咕文化科技有限公司 | 视频焦点区域提取方法、装置、设备及存储介质 |
CN112231618A (zh) * | 2020-10-14 | 2021-01-15 | 北京思特奇信息技术股份有限公司 | 一种多触点非侵入式页面信息推荐位配置方法及相关装置 |
CN113900576A (zh) * | 2021-11-03 | 2022-01-07 | 杭州逗酷软件科技有限公司 | 交互方法、装置、电子设备以及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030179185A1 (en) * | 2002-01-28 | 2003-09-25 | Fujitsu Limited | Character input device |
CN102281415A (zh) * | 2010-06-08 | 2011-12-14 | 深圳Tcl新技术有限公司 | 在电视机显示的页面中选择选项的方法 |
WO2014139648A1 (de) * | 2013-03-12 | 2014-09-18 | Audi Ag | Einem fahrzeug zugeordnete vorrichtung mit buchstabiereinrichtung - vervollständigungs-vorschlag |
CN104145434A (zh) * | 2012-08-17 | 2014-11-12 | 弗莱克斯电子有限责任公司 | 智能电视的频道切换器 |
CN106210904A (zh) * | 2016-08-01 | 2016-12-07 | 乐视控股(北京)有限公司 | 基于语音交互的信息查看方法及装置 |
-
2018
- 2018-04-02 CN CN201810284159.9A patent/CN108540851A/zh not_active Withdrawn
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030179185A1 (en) * | 2002-01-28 | 2003-09-25 | Fujitsu Limited | Character input device |
CN102281415A (zh) * | 2010-06-08 | 2011-12-14 | 深圳Tcl新技术有限公司 | 在电视机显示的页面中选择选项的方法 |
CN104145434A (zh) * | 2012-08-17 | 2014-11-12 | 弗莱克斯电子有限责任公司 | 智能电视的频道切换器 |
WO2014139648A1 (de) * | 2013-03-12 | 2014-09-18 | Audi Ag | Einem fahrzeug zugeordnete vorrichtung mit buchstabiereinrichtung - vervollständigungs-vorschlag |
CN106210904A (zh) * | 2016-08-01 | 2016-12-07 | 乐视控股(北京)有限公司 | 基于语音交互的信息查看方法及装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507212A (zh) * | 2020-04-03 | 2020-08-07 | 咪咕文化科技有限公司 | 视频焦点区域提取方法、装置、设备及存储介质 |
CN112231618A (zh) * | 2020-10-14 | 2021-01-15 | 北京思特奇信息技术股份有限公司 | 一种多触点非侵入式页面信息推荐位配置方法及相关装置 |
CN113900576A (zh) * | 2021-11-03 | 2022-01-07 | 杭州逗酷软件科技有限公司 | 交互方法、装置、电子设备以及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11601719B2 (en) | Method for processing television screenshot, smart television, and storage medium | |
US11812189B2 (en) | Smart television and method for displaying graphical user interface of television screen shot | |
CN108055590B (zh) | 电视画面截图的图形用户界面的显示方法 | |
CN104145434B (zh) | 智能电视的频道切换器 | |
CN108521595A (zh) | 基于语音交互的选择推荐位方法、装置及智能电视 | |
US20130173765A1 (en) | Systems and methods for assigning roles between user devices | |
CN108307222A (zh) | 智能电视以及基于显示设备中访问主页应用上内容的方法 | |
CN108111898B (zh) | 电视画面截图的图形用户界面的显示方法以及智能电视 | |
CN108200464A (zh) | 智能电视以及便于选择教育课程内容的方法 | |
EP2934017A1 (en) | Display apparatus and control method thereof | |
CN108429927A (zh) | 智能电视以及搜索用户界面中虚拟商品信息的方法 | |
CN108235091A (zh) | 智能电视以及基于显示设备中访问主页应用上内容的方法 | |
CN108307221A (zh) | 智能电视以及便于选择教育课程内容的方法 | |
CN108540851A (zh) | 基于语音交互的选择推荐位方法、装置及智能电视 | |
CN103748586B (zh) | 智能电视 | |
CN103748542A (zh) | 互动电视的屏幕上设置互动 | |
CN110430383A (zh) | 终端、信令服务器、音视频通信方法及计算机存储介质 | |
KR20150117212A (ko) | 디스플레이 장치 및 그 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20180914 |
|
WW01 | Invention patent application withdrawn after publication |