CN110557666B - 遥控交互方法、装置和电子设备 - Google Patents
遥控交互方法、装置和电子设备 Download PDFInfo
- Publication number
- CN110557666B CN110557666B CN201910664852.3A CN201910664852A CN110557666B CN 110557666 B CN110557666 B CN 110557666B CN 201910664852 A CN201910664852 A CN 201910664852A CN 110557666 B CN110557666 B CN 110557666B
- Authority
- CN
- China
- Prior art keywords
- party application
- key
- remote control
- touch operation
- operation instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Selective Calling Equipment (AREA)
Abstract
本发明涉及一种遥控交互方法，其包括如下步骤：接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用。本发明所述的遥控交互方法能够解决第三方应用无法遥控的问题，提升用户的电视交互体验。
Description
技术领域
本发明涉及智能电视技术领域，特别涉及遥控交互方法、装置、存储介质和计算机设备。
背景技术
随着电视机技术的发展，电视机已进入千家万户，成为人们生活、休闲、娱乐不可或缺消费品之一。电视机通过都会配备遥控设备，遥控设备是控制电视机重要工具，遥控设备几乎可以控制电视机所有的功能操作。
目前市场上一些Android智能电视，大部分是基于AOSP(Android Open SourceProject)开发，只要是.apk(AndroidPackage的缩写，即Android安装包)格式的应用，同时Android系统的API版本在应用支持的范围内，Android智能电视就可以支持该应用的安装。
在一些场合，用户希望将手机版本的apk格式的第三方应用，安装在Android智能电视上，以体验更大屏的播放效果，但这就会面临一个问题：虽然Android智能电视能够安装.apk格式的第三方应用，但是由于电视机的遥控交互逻辑是基于焦点，而手机版本的apk格式的第三方应用的交互方式是基于触摸、点击、滑动的，该第三方应用焦点丢失，无法通过遥控设备操作，给用户带来不好的交互体验。
发明内容
基于此，本发明实施例的目的在于，提供一种遥控交互方法，其能够解决第三方应用无法遥控的问题，提升用户的电视交互体验。
第一方面，本发明实施例提供一种遥控交互方法，包括如下步骤：
接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用；
所述根据所述按键事件模拟产生触摸操作指令的步骤包括：
分发并处理所述按键事件获取按键值；
根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令；
其中，遥控设备上的每个按键各对应一个按键值；所述按键步长为按一下遥控设备上的按键，第三方应用的视图滑动的距离值；
还包括如下步骤：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据；
获取第三方应用的视图的宽和高；
判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
所述图形用户界面具有与所述遥控设备的按键事件对应的虚拟按键，
根据所述按键事件模拟产生触摸操作指令时，根据所述遥控设备的按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮。
相较于现有技术，本发明实施例的遥控交互方法，是一种系统适配应用的解决方案，在第三方应用的控制指令的输入接口用于或者只用于输入触摸操作指令时，由系统对按键事件进行处理，模拟出在手机或者平板电脑上的触摸操作效果，模拟产生触摸操作指令，再由模拟的触摸操作指令驱动第三方应用，实现遥控设备第三方应用的操作，“导航”到用户想看的界面，带来更好的遥控交互体验。
在一个实施例中，所述获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据的步骤，包括：
所述第三方应用读取所述触摸操作指令以获得所述滑动方向和滑动距离值；
所述第三方应用将其视图从当前位置朝所述滑动方向滑动所述滑动距离值后到达目标位置，产生第二显示数据。
为了获得更优的交互体验和用户操作的可视化，在一个实施例中，所述接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据的步骤之后还包括：
获取智能电视的遥控设备的启动按键事件，绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
其中，所述启动按按键事件在按下遥控设备的启动按键时产生。
为了实现用户的沉浸式体验，在一个实施例中，所述获取智能电视的遥控设备的按键事件的步骤还包括：
在获取到当前的按键事件之后进行计时，若在预设的时间阈值内没有获取到下一个按键事件，隐藏所述图形用户界面。
在一个实施例中，根据所述按键事件模拟产生触摸操作指令的同时还包括如下步骤：
唤醒并显示所述图形用户界面；
根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮状态。
第二方面，本发明实施例还提供一种遥控交互装置，包括：
启动模块，用于接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
交互模块，用于获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用；
所述交互模块包括触摸模拟模块，所述触摸模拟模块配置为：
分发并处理所述按键事件获取按键值；
根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令；
其中，遥控设备上的每个按键各对应一个按键值；所述按键步长为按一下遥控设备上的按键，第三方应用的视图滑动的距离值；
显示模块，所述显示模块配置为：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据；
所述显示模块还配置为：
获取第三方应用的视图的宽和高；
判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
所述图形用户界面具有与所述遥控设备的按键事件对应的虚拟按键，
根据所述按键事件模拟产生触摸操作指令时，根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮。
相较于现有技术，本发明实施例的遥控交互装置，是一种系统适配应用的解决方案，在第三方应用的控制指令的输入接口用于或者只用于输入触摸操作指令时，由系统对按键事件进行处理，模拟出在手机或者平板电脑上的触摸操作效果，模拟产生触摸操作指令，再由模拟的触摸操作指令驱动第三方应用，实现遥控设备第三方应用的操作，“导航”到用户想看的界面，带来更好的遥控交互体验。
第三方面，本发明实施例还提供一种计算机设备，包括：
存储器以及处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上任一实施例所述的遥控交互方法。
为了更好地理解和实施，下面结合附图详细说明本发明。
附图说明
图1为本发明较佳实施例提供的遥控交互方法的应用环境示意图；
图2为本申请较佳实施例提供的遥控交互方法的一种流程步骤图；
图3为本申请较佳实施例提供的遥控交互方法的一种流程示意图；
图4为本发明一个实施例中的遥控交互方法的一种流程步骤图；
图5为本发明一个实施例中的遥控交互方法的一种流程步骤图；
图6为本发明一个实施例中的遥控交互方法的一种流程步骤图；
图7为本发明一个实施例的图形用户界面；
图8为本发明一个实施例中的遥控交互方法的一种流程步骤图；
图9为本发明的遥控交互方法的一个具体实施例；
图10为本发明实施例的遥控交互装置的结构示意图；
图11为本发明实施例的电子设备的结构示意图。
具体实施方式
现在参看后文中的附图，更完整地描述本发明，在图中，显示了本发明的实施例。然而，本发明可体现为多种不同的形式，并且不应理解为限于本文中所提出的特定实施例。确切地说，这些实施例用于将本发明的范围传达给本领域的技术人员。
除非另外限定，否则，本文中所使用的术语(包括技术性和科学性术语)应理解为具有与本发明所属的领域中的技术人员通常所理解的意义相同的意义。而且，要理解的是，本文中所使用的术语应理解为具有与本说明书和相关领域中的意义一致的意义，并且不应通过理想的或者过度正式的意义对其进行解释，除非本文中明确这样规定。
以下以电子设备为基于安卓(Android)系统的智能电视为例，对本申请的方案作具体说明：
请参阅图1，为本申请较佳实施例提供的遥控交互方法的一个应用环境示意图。本申请较佳实施例中，所述遥控交互方法具体应用在智能电视100中，所述智能电视100为基于安卓(Android)系统的智能电视。所述智能电视100可以与遥控设备200(例如，遥控设备，移动终端等)连接，以接收遥控设备发送的按键信号。所述智能电视100由遥控设备200无线遥控，遥控技术包括红外遥控，2.4G遥控，蓝牙遥控等。当用户按动所述遥控设备200的按键，所述遥控设备200向所述智能电视100发送不同的遥控控制信号。所述智能电视100根据所述遥控控制信号产生按键事件，所述按键事件包括在用户按动所述遥控设备的上、下、左和右按键时，产生的向上、向下、向左和向右等方向按键事件。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
请参见图2和图3，为本申请较佳实施例提供的遥控交互方法的一种流程示意图，所述方法由图1所示的智能电视100执行。应当说明的是，本申请实施例提供的方法不以图2、图3及以下所述的具体顺序为限制。所述方法的具体流程如下：
步骤S201：接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
步骤S202：获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用。
在本实施例中，智能电视具体是指Android系统的智能电视100，第三方应用包括没有适配TV版本的应用，或称不能处理按键事件的安卓应用，所述第三方应用的控制指令的输入接口用于或只用于输入触摸操作指令。当然，本发明实施例的遥控交互方法同样适用于支持焦点操作的安卓应用。
在一个实施例中，还包括如下步骤：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据。
在此实施例中，在用户通过遥控设备或者其他操作点击智能电视主界面的第三方应用图标的时候，相当于安卓系统接收智能电视启动第三方应用的启动指令，这时，智能电视显示第三方应用启动后的首页内容或者主页内容，也即显示所述第三方应用启动后产生的第一显示数据。而将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，所述第三方应用执行所述触摸操作指令，会将第三方应用的视图从当前位置移动到目标位置，引起智能电视的电视屏幕显示内容的改变，产生第二显示数据。应该理解的是，所述第三方应用的视图是用来承载视图内容的View，View是UI控件，可以是一个ListView或RecyclerView或者其他的控件，承载的视图内容包括上述的首页内容或者主页内容，以及处于智能电视显示区域之外的其他视图内容。对于第三方应用的触摸操作是对于View的操作。这里所指的第一显示数据和第二数据为采用本发明实施例的遥控交互方法，通过系统适配辅助遥控设备控制第三方应用的视图移动前后电视屏幕的显示数据，两者分别显示视图的不同位置的视图内容。
在一个具体的实施例中，请参阅图4，所述根据所述按键事件模拟产生触摸操作指令的步骤包括：
步骤S401：分发并处理所述按键事件获取按键值；
其中，智能电视本身能够分发并处理按键事件，分发和处理过程按照按键事件分发和消费机制进行。遥控设备上的每个按键各对应一个按键值，例如：向上按键对应的按键值为19，向下按键对应的按键值为20，向左按键对应的按键值为21，向右按键对应的按键值为22……
步骤S402：根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
当用户按动向上、向下、向左、向右等方向按键时，根据按键值即可以获得滑动方向，而为了获得滑动距离值，预设按一下遥控设备上的按键，第三方应用的视图滑动的距离值为按键步长。进一步地，所述按键步长可以在智能电视或者遥控设备中进行调整，按键步长的一个典型值为20，也即按一下遥控设备上的按键，第三方应用的视图滑动的距离值为20。
步骤S403：将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令。
至此，安卓系统辅助将按键事件输入转化为模拟的触摸操作指令，为下一步将触摸操作指令通过第三方应用的输入接口传输给第三方，由第三方应用执行所述触摸操作指令做好准备。
具体地，在所述第三方应用获取了触摸操作指令之后，请参阅图5，所述获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据的步骤，包括：
步骤S501：所述第三方应用读取所述触摸操作指令以获得所述滑动方向和滑动距离值；
步骤S502：所述第三方应用将其视图从当前位置朝所述滑动方向滑动所述滑动距离值后到达目标位置，产生第二显示数据。
除了智能电视后台辅助适配遥控设备处理按键事件，模拟触摸操作指令之外，为了获得更优的交互体验和用户操作的可视化，智能电视的电视屏幕上还可以创设一个图形用户界面。在一个实施例中，所述接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据的步骤之后还包括：
获取智能电视的遥控设备的启动按键事件，绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
其中，所述启动按键事件在按下遥控设备的启动按键时产生。启动按键是为了创建/启动所述图形用户界面而设置的，用于在Android智能电视安装了不支持焦点操作的第三方应用时，用户按动启动按键而使Android系统绘制一个图形用户界面来可视化来自遥控设备的其他按键事件。
系统界面是安卓系统与用户进行交互的界面，能够在其上显示系统应用、第三方应用的视图，可以层叠显示，系统界面顶层为最上面一层，其上没有其他视图。
或者，作为另一个可选的实施方式，请参阅图6，所述接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据步骤之后，还包括：
步骤S601：获取第三方应用的视图的宽和高；
其中，第三方应用的视图可以是一个ListView或RecyclerView或者其他的UI控件。计算视图的高和宽主要用于判断视图是否需要进行滑动操作。当内容区域大于显示区域时，为了看到更多内容，就需要去滑动操作查看。所述内容区域以第三方应用的视图的宽和高属性为限，所述显示区域以电视屏幕的宽和高为限。以第三方应用的视图显示海报列表(ListView)为例，那么这个海报列表具有高度和宽度，以海报列表的高和宽围成的内容区域用来装载海报内容。而电视屏幕的高和宽围成的范围作为显示区域。当海报有多页时，电视屏幕当前显示的只是海报内容的一部分，还有其他部分的海报内容未显示出，需要滑动操作视图才能将其显示出。
而步骤S601获取第三方应用的视图的宽和高，具体是通过调用安卓系统提供的接口，获取到第三方应用的视图存在未显示出来的内容，从而作为启动或者显示导航UI的先决条件。
步骤S602：判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
步骤S603：若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示。
具体地，若第三方应用的视图的高大于智能电视的显示区域的高，则视图需要上下滑动操作才能显示所有的视图内容；若第三方应用的视图的宽大于智能电视的显示区域的宽，则视图需要左右滑动操作才能显示所有的视图内容。这两种情况也可能同时存在。子步骤S603是在判断内容区域大于显示区域后，安卓系统发出一个广播和启动相应service，在智能电视的显示区域的最顶层绘制一个悬浮的图形用户界面，置于系统界面顶层显示。
应当理解的是，在第三方应用执行所述触摸控制指令滑动视图而使得电视屏幕的显示数据发生改变的时候，也即由第一显示数据转变为第二显示数据的过程中，所述图形用户界面仍然位于系统界面顶层显示，悬浮在第三方应用的视图上。
在上述两个实施例中，请参阅图7，所述绘制一个悬浮图形用户界面包括：绘制包括向上、向下、向左、向右4个方向控件在内的图形用户界面控件；所述方向控件与所述遥控设备的方向按键对应。此外，所述绘制一个悬浮图形用户界面还可以包括：绘制与遥控设备的数字键、返回键、确认键和房子键对应的图形用户界面控件。
为了实现用户的沉浸式体验，在一个实施例中，所述获取智能电视的遥控设备的按键事件的步骤之后，还包括：
在获取到当前的按键事件之后进行计时，若在预设的时间阈值内没有获取到下一个按键事件，隐藏所述图形用户界面。
在无需执行遥控操作时，隐藏所述图形用户界面以免影响智能电视的观看体验。
一个可选的实施例中，为了实现用户的沉浸式体验，请参阅图7和图8，根据所述按键事件模拟产生触摸操作指令的同时还包括如下步骤：
步骤S801：唤醒并显示所述图形用户界面。
在非第一次启动所述图形用户界面时，在获取到智能电视的遥控设备的按键事件之后，可以将隐藏的图形用户界面的唤醒和显示，减少智能电视的频繁操作。
步骤S802：根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮状态。
例如，当用户按动遥控设备上的向下按键时，所述图形用户界面的向下方向控件进行高亮显示，以表明所述导航UI正在响应用户操作，给用户带来更好的交互体验。
进一步地，为了实现更好的交互体验，还可以通过设置关闭所述图形用户界面的按键事件。具体地，当用户按动遥控设备的预设的按键，例如菜单键、返回键、启动按键等，都可以触发关闭所述图形用户界面的按键事件，以使Android智能电视关闭所述应用界面。
相较于现有技术，本发明实施例的遥控交互方法，是一种系统适配应用的解决方案，在第三方应用的控制指令的输入接口用于或者只用于输入触摸操作指令时，由系统对按键事件进行处理，模拟出在手机或者平板电脑上的触摸操作效果，模拟产生触摸操作指令，再由模拟的触摸操作指令驱动第三方应用，实现遥控设备第三方应用的操作，“导航”到用户想看的界面，带来更好的遥控交互体验。
从智能电视的安卓系统运行的角度来看，本发明实施例的遥控交互方法的实质是设置了一条UI线程用来响应遥控设备的按键事件，并在电视屏幕上绘制一个与UI线程对应的图形用户界面来实现与用户交互的可视化。请参阅图9，其为本发明的遥控交互方法的一个具体实施例。
如图所示，第三方应用(第三方apk)只支持触摸操作，不支持焦点操作，无法实现遥控设备直接操作第三方应用的视图，需要创建一个UI线程来进行适配适配，解决无法交互的问题。具体的流程如下：
startActivity：用户启动第三方应用；
handleKeyEvents：用户按动遥控设备上的启动按键，触发启动按键事件；
new NavigationSlippingUI(OptionService.this)：响应所述启动按键事件，创建/启动UI线程，绘制如图8所示的图形用户界面；
dispatchKeyEvent(event)：接收并分发由于用户按动遥控设备上的按键而触发的按键事件，包括方向按键事件；
showKeypadMenu：唤醒并显示所述图形用户界面；
sandMessageDelayed(msg)：发送延迟处理任务；
handle Message(msg)：根据不同的按键值响应不同的消息；
processKey()：进行逻辑处理；
updateView()：将响应消息的图形用户界面控件设置为高亮显示；
simulateKeysTouch()：模拟滑动方向和滑动距离值模拟触摸操作；
updateXY()：将上一步simulateKeysTouch()处理后的输出参数，同步给pointer，产生一个pointer event或MotionEvent(触摸操作指令)，传递具体xy参数(滑动距离值)，用于给下一步第三应用的响应。
第三方应用响应pointer event或MotionEvent，控制视图滑动操作，并显示滑动操作后的视图，产生第二显示数据。
除了上述以滑动操作为例进行说明之外，通过要遥控设备按下确认键，返回键等，UI线程同样模拟出触摸点击等操作，实现遥控设备全功能的复制控制。
基于同一发明构思，请参阅图10，本发明实施例还提供一种遥控交互装置，包括：
启动模块301，用于接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
交互模块302，用于获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用。
在一个实施例中，还包括显示模块，所述显示模块配置为：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据。
在一个实施例中，所述交互模块302包括触摸模拟模块，所述触摸模拟模块配置为：
分发并处理所述按键事件获取按键值；
根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令；
其中，遥控设备上的每个按键各对应一个按键值；所述按键步长为按一下遥控设备上的按键，第三方应用的视图滑动的距离值。
在一个实施例中，所述显示模块303还配置为：
通过所述第三方应用读取所述触摸操作指令以获得所述滑动方向和滑动距离值；
通过所述第三方应用将其视图从当前位置朝所述滑动方向滑动所述滑动距离值后到达目标位置，产生第二显示数据。
为了获得更优的交互体验和用户操作的可视化，在一个实施例中，所述显示模块303还配置为：
获取智能电视的遥控设备的启动按键事件，绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
其中，所述启动按按键事件在按下遥控设备的启动按键时产生。
在一个实施例中，所述显示模块303还配置为：
获取第三方应用的视图的宽和高；
判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示。
在一个实施例中，所述交互模块302配置为：
唤醒并显示所述图形用户界面；
根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮状态。
为了实现用户的沉浸式体验，所述交互模块302配置为：
在获取到当前的按键事件之后进行计时，若在预设的时间阈值内没有获取到下一个按键事件，隐藏所述图形用户界面。
相较于现有技术，本发明实施例的遥控交互装置，是一种系统适配应用的解决方案，在第三方应用的控制指令的输入接口用于或者只用于输入触摸操作指令时，由系统对按键事件进行处理，模拟出在手机或者平板电脑上的触摸操作效果，模拟产生触摸操作指令，再由模拟的触摸操作指令驱动第三方应用，实现遥控设备第三方应用的操作，“导航”到用户想看的界面，带来更好的遥控交互体验。
本申请较佳实施例提供的遥控交互方法和遥控交互装置可以应用于包括显示单元的电子设备中，用于控制显示单元所显示的视图执行滑动操作，其能够解决第三方应用无法遥控的问题，提升用户的电视交互体验。所述电子设备可以是智能电视、智能机顶盒、电视机盒子、平板电脑、移动终端等。所述电子设备可以是基于安卓(Android)系统的智能电视，也可以是基于其他智能操作系统的电子设备。请参阅图11，所述电子设备，包括：
存储器401以及处理器402；
所述存储器401，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器402执行，使得所述一个或多个处理器402实现如上任一实施例所述的遥控交互方法。
在本实施例中，处理器402和存储器401通过总线连接，处理器402可以是一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件。存储器401可采用在一个或多个其中包含有程序代码的存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机可读储存介质包括永久性和非永久性、可移动和非可移动媒体，可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于：相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息，在本实施例中，所述处理器402还可以为多个。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。
Claims (7)
1.一种遥控交互方法，其特征在于，包括如下步骤：
接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用；
所述根据所述按键事件模拟产生触摸操作指令的步骤包括：
分发并处理所述按键事件获取按键值；
根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令；
其中，遥控设备上的每个按键各对应一个按键值；所述按键步长为按一下遥控设备上的按键，第三方应用的视图滑动的距离值；
还包括如下步骤：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据；
获取第三方应用的视图的宽和高；
判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
所述图形用户界面具有与所述遥控设备的按键事件对应的虚拟按键，
根据所述按键事件模拟产生触摸操作指令时，根据所述遥控设备的按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮。
2.根据权利要求1所述的遥控交互方法，其特征在于，所述获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据的步骤，包括：
所述第三方应用读取所述触摸操作指令以获得所述滑动方向和滑动距离值；
所述第三方应用将其视图从当前位置朝所述滑动方向滑动所述滑动距离值后到达目标位置，产生第二显示数据。
3.根据权利要求1所述的遥控交互方法，其特征在于，所述接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据的步骤之后还包括：
获取智能电视的遥控设备的启动按键事件，绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
其中，所述启动按按键事件在按下遥控设备的启动按键时产生。
4.根据权利要求1或3所述的遥控交互方法，其特征在于，所述获取智能电视的遥控设备的按键事件的步骤还包括：
在获取到当前的按键事件之后进行计时，若在预设的时间阈值内没有获取到下一个按键事件，隐藏所述图形用户界面。
5.根据权利要求4所述的遥控交互方法，其特征在于，根据所述按键事件模拟产生触摸操作指令的同时还包括如下步骤：
唤醒并显示所述图形用户界面；
根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮状态。
6.一种遥控交互装置，其特征在于：包括：
启动模块，用于接收智能电视启动第三方应用的启动指令，获取所述第三方应用的控制指令的输入接口；其中，所述第三方应用的控制指令的输入接口用于输入触摸操作指令；
交互模块，用于获取智能电视的遥控设备的按键事件，根据所述按键事件模拟产生触摸操作指令，并将所述触摸操作指令通过所述输入接口传输给所述第三方应用；
所述交互模块包括触摸模拟模块，所述触摸模拟模块配置为：
分发并处理所述按键事件获取按键值；
根据所述按键值和预设的按键步长获取滑动方向和滑动距离值；
将所述滑动方向和滑动距离值输入触摸操作模拟器生成触摸操作指令；
其中，遥控设备上的每个按键各对应一个按键值；所述按键步长为按一下遥控设备上的按键，第三方应用的视图滑动的距离值；
显示模块，所述显示模块配置为：
接收智能电视启动第三方应用的启动指令后，显示所述第三方应用启动后产生的第一显示数据；
将所述触摸操作指令通过所述输入接口传输给所述第三方应用后，获取所述第三方应用执行所述触摸操作指令而产生的第二显示数据，控制所述智能电视显示所述第二显示数据；
所述显示模块还配置为：
获取第三方应用的视图的宽和高；
判断所述第三方应用的视图的宽和高是否分别对应大于智能电视的显示区域的宽和高；
若所述第三方应用的视图的宽大于智能电视的显示区域的宽，或者所述第三方应用的视图的高大于智能电视的显示区域的高，则绘制一个图形用户界面，并将所述图形用户界面置于系统界面顶层显示；
所述图形用户界面具有与所述遥控设备的按键事件对应的虚拟按键，
根据所述按键事件模拟产生触摸操作指令时，根据所述按键事件与所述图形用户界面的虚拟按键的对应关系，将对应的虚拟按键设置为高亮。
7.一种电子设备，其特征在于，包括：
存储器以及处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5中任一所述的遥控交互方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910664852.3A CN110557666B (zh) | 2019-07-23 | 2019-07-23 | 遥控交互方法、装置和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910664852.3A CN110557666B (zh) | 2019-07-23 | 2019-07-23 | 遥控交互方法、装置和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110557666A CN110557666A (zh) | 2019-12-10 |
| CN110557666B true CN110557666B (zh) | 2022-01-11 |
Family
ID=68735842
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910664852.3A Active CN110557666B (zh) | 2019-07-23 | 2019-07-23 | 遥控交互方法、装置和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110557666B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111669633A (zh) * | 2020-06-22 | 2020-09-15 | 深圳创维－Rgb电子有限公司 | 遥控信号转触控操作方法、装置和显示设备 |
| CN112099681B (zh) * | 2020-09-02 | 2021-12-14 | 腾讯科技（深圳）有限公司 | 基于三维场景应用的交互方法、装置和计算机设备 |
| CN112449227B (zh) * | 2020-10-26 | 2022-09-20 | 广州视源电子科技股份有限公司 | 触屏应用兼容遥控器操作的交互方法、装置及智能电视 |
| CN114339343A (zh) * | 2021-12-29 | 2022-04-12 | 北京字跳网络技术有限公司 | 控制方法、装置、电子设备、介质和产品 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102905182A (zh) * | 2011-07-26 | 2013-01-30 | 联想(北京)有限公司 | 一种输入方法、智能电视机和智能交互系统 |
| KR20140072482A (ko) * | 2012-12-05 | 2014-06-13 | 김경희 | 스마트 tv 의 원격 제어 장치 및 원격 제어 방법. |
| CN104202637A (zh) * | 2014-08-27 | 2014-12-10 | 深圳市启望科文技术有限公司 | 按键遥控器、目标拖动方法 |
| CN104602092A (zh) * | 2015-02-12 | 2015-05-06 | 江苏银河电子股份有限公司 | Android系统下智能机顶盒适配手机应用的方法 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8276098B2 (en) * | 2006-12-22 | 2012-09-25 | Apple Inc. | Interactive image thumbnails |
| CN103838560B (zh) * | 2012-11-26 | 2016-03-30 | 腾讯科技（深圳）有限公司 | 显示终端的音频信息的显示方法及装置 |
| CN103984494A (zh) * | 2013-02-07 | 2014-08-13 | 上海帛茂信息科技有限公司 | 用于多种设备间的直觉式用户互动系统及方法 |
| US20150241984A1 (en) * | 2014-02-24 | 2015-08-27 | Yair ITZHAIK | Methods and Devices for Natural Human Interfaces and for Man Machine and Machine to Machine Activities |
| CN107316228A (zh) * | 2017-06-29 | 2017-11-03 | 北京小米移动软件有限公司 | 信息展示方法、装置、设备及存储介质 |
-
2019
- 2019-07-23 CN CN201910664852.3A patent/CN110557666B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102905182A (zh) * | 2011-07-26 | 2013-01-30 | 联想(北京)有限公司 | 一种输入方法、智能电视机和智能交互系统 |
| KR20140072482A (ko) * | 2012-12-05 | 2014-06-13 | 김경희 | 스마트 tv 의 원격 제어 장치 및 원격 제어 방법. |
| CN104202637A (zh) * | 2014-08-27 | 2014-12-10 | 深圳市启望科文技术有限公司 | 按键遥控器、目标拖动方法 |
| CN104602092A (zh) * | 2015-02-12 | 2015-05-06 | 江苏银河电子股份有限公司 | Android系统下智能机顶盒适配手机应用的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110557666A (zh) | 2019-12-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110557666B (zh) | 遥控交互方法、装置和电子设备 | |
| CN109618206B (zh) | 呈现用户界面的方法和显示设备 | |
| US9621434B2 (en) | Display apparatus, remote control apparatus, and method for providing user interface using the same | |
| WO2021114529A1 (zh) | 用户界面展示方法及显示设备 | |
| CN111770366A (zh) | 一种消息补发方法、服务器及显示设备 | |
| CN103037264A (zh) | 电视机多个桌面的实现方法 | |
| US20160006971A1 (en) | Display apparatus and controlling method thereof | |
| CN111510788B (zh) | 一种双屏双系统屏幕切换动画的显示方法及显示设备 | |
| CN111491190B (zh) | 一种双系统摄像头切换控制方法及显示设备 | |
| CN111526402A (zh) | 多屏显示设备的语音搜索视频资源的方法及显示设备 | |
| CN111176603A (zh) | 一种用于显示设备的图像显示方法及显示设备 | |
| CN112203154A (zh) | 一种显示设备 | |
| CN113115083A (zh) | 显示设备及显示方法 | |
| WO2018010338A1 (zh) | 显示方法和装置 | |
| US20130155095A1 (en) | Mapping Visual Display Screen to Portable Touch Screen | |
| CN112506859A (zh) | 一种维护硬盘数据的方法及显示设备 | |
| CN113347482B (zh) | 一种播放数据的方法及显示设备 | |
| WO2021223074A1 (zh) | 显示设备及交互控制方法 | |
| US11451871B2 (en) | Electronic device for providing information related to bookmarked content, and method for controlling electronic device | |
| US20070078945A1 (en) | System and method for displaying information of a media playing device on a display device | |
| CN111259639A (zh) | 一种表格的自适应调节方法及显示设备 | |
| US20200267453A1 (en) | Display device and control method therefor | |
| CN111462702B (zh) | 显示设备背光控制方法及显示设备 | |
| CN110032410B (zh) | 用于提供用户界面的显示装置和方法 | |
| CN113766164B (zh) | 显示设备及信号源界面显示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |