CN110719514A - 设备的控制方法及系统、终端 - Google Patents

设备的控制方法及系统、终端 Download PDF

Info

Publication number
CN110719514A
CN110719514A CN201911095647.6A CN201911095647A CN110719514A CN 110719514 A CN110719514 A CN 110719514A CN 201911095647 A CN201911095647 A CN 201911095647A CN 110719514 A CN110719514 A CN 110719514A
Authority
CN
China
Prior art keywords
target
remote controller
key
terminal
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911095647.6A
Other languages
English (en)
Inventor
丁科芝
王金童
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Poly Polytron Technologies Inc
Juhaokan Technology Co Ltd
Original Assignee
Poly Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Poly Polytron Technologies Inc filed Critical Poly Polytron Technologies Inc
Priority to CN201911095647.6A priority Critical patent/CN110719514A/zh
Publication of CN110719514A publication Critical patent/CN110719514A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212Specific keyboard arrangements
    • H04N21/42213Specific keyboard arrangements for facilitating data entry
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212Specific keyboard arrangements
    • H04N21/42218Specific keyboard arrangements for mapping a matrix of displayed objects on the screen to the numerical key-matrix of the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]

Abstract

本申请公开了一种设备的控制方法及系统、终端,属于电子技术领域。所述方法包括:获取目标设备的遥控器中物理按键的特征,物理按键的特征包括物理按键的排布方式和功能;基于物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,目标按键模板为:按键模板库中,特征与物理按键的特征相似度最高的按键模板,按键模板的特征包括:按键模板中多个虚拟按键的排布方式和功能;基于目标按键模板中多个虚拟按键的排布方式,显示目标按键模板;基于针对目标按键模板中任一虚拟按键的触发操作,以及该任一虚拟按键的功能,控制目标设备。本申请解决了智能手机模拟的遥控器的使用效果较差的问题。本申请用于控制目标设备。

Description

设备的控制方法及系统、终端
技术领域
本申请涉及电子技术领域,特别涉及一种设备的控制方法及系统、终端。
背景技术
通常电视和空调等家电设备可以通过控制设备进行控制,示例地,该控制设备通常为遥控器。随着电子技术的发展,智能手机的功能越来越多,目前已可以采用智能手机作为用于控制家电设备的控制设备。
相关技术中,智能手机中预设有遥控器的按键模板(也可称为遥控器样式),该按键模板包括按照固定的排布方式排布的多个虚拟按键,且每个虚拟按键对应固定的功能。当需要采用智能手机控制家电设备时,智能手机显示该按键模板以模拟遥控器,进而用户可以通过触摸显示的该按键模板中的虚拟按键,控制家电设备实现该虚拟按键对应的功能。
由于家电设备的厂商会不断推出不同型号的家电设备,且各个型号的家电设备对应的遥控器样式存在差异,因此,智能手机中预设的遥控器样式与家电设备对应的遥控器样式通常差异较大。当用户通过智能手机模拟的遥控器控制家电设备时,需要花费时间适应智能手机模拟的遥控器中按键的排布方式,所以,智能手机模拟的遥控器的使用效果较差。
发明内容
本申请提供了一种设备的控制方法及系统、终端,可以解决智能手机模拟的遥控器的使用效果较差的问题。所述技术方案如下:
一方面,提供了一种设备的控制方法,所述方法包括:
获取目标设备的遥控器中物理按键的特征,所述物理按键的特征包括所述物理按键的排布方式和功能;
基于所述物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,所述目标按键模板为:所述按键模板库中,特征与所述物理按键的特征相似度最高的按键模板,所述按键模板的特征包括:所述按键模板中多个虚拟按键的排布方式和功能;
基于所述目标按键模板中所述多个虚拟按键的排布方式,显示所述目标按键模板;
基于针对所述目标按键模板中任一虚拟按键的触发操作,以及所述任一虚拟按键的功能,控制所述目标设备。
另一方面,提供了一种终端,所述终端包括:
控制器,用于获取目标设备的遥控器中物理按键的特征,所述物理按键的特征包括所述物理按键的排布方式和功能;基于所述物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,所述目标按键模板为:所述按键模板库中,特征与所述物理按键的特征相似度最高的按键模板,所述按键模板的特征包括:所述按键模板中多个虚拟按键的排布方式和功能;
显示屏,用于基于所述目标按键模板中所述多个虚拟按键的排布方式,显示所述目标按键模板;
所述控制器,还用于基于针对所述目标按键模板中任一虚拟按键的触发操作,以及所述任一虚拟按键的功能,控制所述目标设备。
再一方面,提供了一种设备的控制系统,所述系统包括:目标设备以及所述终端,所述终端用于控制所述目标设备。
本申请提供的技术方案带来的有益效果至少包括:
本申请中显示的目标按键模板的特征与遥控器的物理按键的特征相似度较高,因此,用户在通过该目标按键模板控制目标设备时,无需再次适应目标按键模板中虚拟按键的排布方式。所以,终端对遥控器的模拟效果较好,终端模拟的遥控器的使用效果较好。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种设备的控制系统的示意图;
图2是本申请实施例提供的一种目标设备的硬件配置框图;
图3是本申请实施例提供的一种终端的配置框图;
图4是本申请实施例提供的一种目标设备功能配置示意图;
图5是本申请实施例提供的一种目标设备中软件系统的配置框图;
图6是本申请实施例提供的一种设备的控制方法的流程图;
图7是本申请实施例提供的另一种设备的控制方法的流程图;
图8是本申请实施例提供的一种终端的显示界面图;
图9是本申请实施例提供的另一种终端的显示界面图;
图10是本申请实施例提供的再一种终端的显示界面图;
图11是本申请实施例提供的又一种终端的显示界面图;
图12是本申请另一实施例提供的一种终端的显示界面图;
图13是本申请另一实施例提供的另一种终端的显示界面图;
图14是本申请实施例提供的一种终端的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
通常,各种电子设备大多可以通过控制装置进行无线控制,该控制装置通常为遥控器。本申请中使用的术语“遥控器”,是指电子设备(如本申请中的目标设备)的一个组件,通常可在较短的距离范围内无线控制电子设备,或者遥控器也可以不属于电子设备,而是一个独立的装置。遥控器一般使用红外线、射频(Radio Frequency,RF)信号和蓝牙中的一种或多种与电子设备连接,也可以包括无线保真(Wireless Fidelity,WiFi)、无线通用串行总线(Universal Serial Bus,USB)、蓝牙和动作传感器中的一个或多个功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。随着电子技术的发展,智能手机的功能越来越多,现在也可以采用智能手机作为遥控器对电子设备进行控制。
图1是本申请实施例提供的一种设备的控制系统的示意图,也即是目标设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过终端300和遥控器100操作目标设备200。可选地,目标设备200可以为任意的可被遥控的电子设备,如电视、洗衣机、电冰箱和空调等,图1以该目标设备200为电视为例进行示意。终端300可以为移动终端、平板电脑、计算机、笔记本电脑和其他智能设备。
其中,终端300和遥控器100可以通过红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制目标设备200。用户可以通过在终端和遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制目标设备200。如:当目标设备200为电视时,用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制目标设备200的功能。
在一些实施例中,也可以使用在智能设备上运行的应用程序控制目标设备200。该应用程序通过配置可以在与智能设备关联的屏幕(如该智能设备的显示屏)上,在直观的用户界面(UI)中为用户提供各种控制。示例的,终端300可与目标设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用终端300与目标设备200建立控制指令协议,将遥控控制键盘同步到终端300上,通过控制终端300上用户界面,实现控制目标设备200的功能。也可以将终端300上显示音视频内容传输到目标设备200上,实现同步显示功能。
如图1中还示出,目标设备200还与服务器400通过多种通信方式进行数据通信。可允许目标设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向目标设备200提供各种内容和互动。示例的,目标设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以一组,也可以多组,可以一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
目标设备200可以为液晶显示器、OLED显示器和投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,目标设备200可以根据需要做性能和配置上一些改变。目标设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPV)等。
示例地,图2是本申请实施例提供的一种目标设备的硬件配置框图。如图2中示出,目标设备200中包括控制器210、调谐解调器220、通信接口230、检测器240、输入\输出接口250、视频处理器260-1,音频处理器60-2,显示器280,音频输出270、存储器290,供电电源、红外接收器。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。显示器280包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
同时,显示器280,同时显示目标设备200中产生且用于控制目标设备200的用户操控UI界面。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
通信接口230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信接口230可以是Wifi芯片231,蓝牙通信协议芯片232,有线以太网通信协议芯片233等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器(图中未示出)。
目标设备200可以通过通信接口230与外部控制设备或内容提供设备之间建立控制信号和数据信号发送和接收。以及,红外接收器,可用于接收终端300或遥控器100(如:红外遥控器等)红外控制信号的接口器。
检测器240,是目标设备200用于采集外部环境或与外部交互的信号。检测器240包括光接收器242,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
以及包括图像采集器241,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。本申请中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
在其他一些示例性实施例中,检测器240,还可为温度传感器等,如通过感测环境温度,目标设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整目标设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整目标设备200显示图像偏暖色调。
在其他一些示例性实施例中,检测器240,还可声音采集器等,如麦克风,可以用于接收用户的声音,包括用户控制目标设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,目标设备200可以自适应适应环境噪声。
输入/输出接口250,在控制器210的控制目标设备200与外部其他设备间数据传输。如接收外部设备的视频信号和音频信号、或命令指令等数据。
其中,输入/输出接口250可以包括,但不限于如下:可以高清多媒体接口HDMI接口251、模拟或数据高清分量输入接口253、复合视频输入接口252、USB输入接口254、RGB端口(图中未示出)等任一个或多个接口。
在其他一些示例性实施例中,输入/输出接口250也可以上述多个接口形成复合性的输入/输出接口。
调谐解调器220,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多个无线或有线广播电视信号中解调出用户所选择电视频道频率中所携带的电视音视频信号,以及EPG数据信号。
调谐解调器220,可根据用户选择,以及由控制器210控制,响应用户选择的电视信号频率以及该频率所携带的电视信号。
调谐解调器220,可以接收信号的途径,根据电视信号广播制式不同,有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播信号等;以及根据调制类型不同,可以数字调制,也可以模拟调制方式。根据接收电视信号种类不同,可以模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器220也可设置在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过输入/输出接口250输入目标设备200中。
视频处理器260-1,用于将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可目标设备200上显示或播放的信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对转换输入视频帧率,如将60Hz帧率转换为120Hz帧率或240Hz帧率,通常的格式采用如插帧方式实现。
显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
音频处理器260-2,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在其他一些示例性实施例中,视频处理器260-1可以包括一颗或多颗芯片组成。音频处理器260-2,也可以包括一颗或多颗芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以单独的芯片,也可以于控制器210一起集成在一颗或多颗芯片中。
音频输出272,在控制器210的控制下接收音频处理器260-2输出的声音信号,如:扬声器272,以及除了目标设备200自身携带的扬声器272之外,可以输出至外接设备的发生装置的外接音响输出端子274,如:外接音响接口或耳机接口等。
供电电源,在控制器210控制下,将外部电源输入的电力为目标设备200提供电源供电支持。供电电源可以包括安装目标设备200内部的内置电源电路,也可以是安装在目标设备200外部电源,在目标设备200中提供外接电源的电源接口。
用户输入接口,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器210。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。
示例的,用户通过遥控器100或终端300输入用户命令,用户输入接口则根据用户的输入,目标设备200则通过控制器210响应用户的输入。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
控制器210,通过存储在存储器290上中各种软件控制程序,来控制目标设备200的工作和响应用户的操作。
如图2所示,控制器210包括RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218,如:第一接口218-1到第n接口218-n,以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,目标设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM213中,以使开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM213中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行目标设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于在待机模式等状态下一种操作。
控制器210可以控制显示设备100的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到目标设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动目标设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块用于目标设备200中各个硬件之间的信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3是本申请实施例提供的一种终端的配置框图。如图3所示,终端300包括控制器110、通信接口130、用户输入/输出接口140、存储器190、供电电源180。终端300还包括显示屏。
终端300被配置为控制目标设备200,以及可接收用户的输入操作指令,且将操作指令转换为目标设备200可识别和响应的指令,起用户与目标设备200之间交互中介作用。如:目标设备200为电视,用户通过操作终端300上频道加减键,目标设备200响应频道加减的操作。
在一些实施例中,终端300可是一种智能设备。如:终端300可根据用户需求安装控制目标设备200的各种应用。
在一些实施例中,如图1所示,移动终端或其他智能电子设备,在安装操控目标设备200的应用之后,可以起到遥控器100的类似功能。如:用户可以通过安装应用,在移动终端或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现遥控器100的实体按键的功能。
控制器110包括处理器112和RAM113和ROM114、通信接口218以及通信总线。控制器110用于控制终端300的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信接口130在控制器110的控制下,实现与目标设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至目标设备200上。通信接口130可包括WiFi芯片、蓝牙模块、NFC模块等其他近场通信模块中至少之一种。
用户输入/输出接口140,其中,用户输入接口用于用户操作终端,进而实现终端的指令输入功能。该用户输入接口可以包括麦克风141、触摸板142、传感器143、按键144和图像采集设备(如相机和摄像头)等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压和拍照等动作实现用户指令输入功能。终端可以通过麦克风接收用户发出的语音进而实现指令输入;终端可以通过触摸板上用户的触摸实现用户指令输入;终端可以通过传感器检测到的用户操作实现指令输入,如用户晃动手机时终端中的加速度传感器会检测到终端的晃动操作;终端也可以通过对于按键的按压操作实现指令输入;终端也可以通过摄像头拍摄照片的方式实现指令输入。用户输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至目标设备200。
用户输出接口包括将接收的用户指令发送至目标设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至目标设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至目标设备200。
在一些实施例中,终端300包括通信接口130和输出接口中至少一者。终端300中配置通信接口130,如:WiFi、蓝牙、NFC等模块,可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码,发送至目标设备200.
存储器190,用于在控制器110的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为终端300各元件提供运行电力支持。可以电池及相关控制电路。
图4是本申请实施例提供的一种目标设备功能配置示意图。如图4所示,存储器290用于存储操作系统、应用程序、内容和用户数据等,在控制器210控制下执行驱动目标设备200的系统运行以及响应用户的各种操作。存储器290可以包括易失性和/或非易失性存储器。
存储器290,具体用于存储驱动目标设备200中控制器210的运行程序,以及存储目标设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用相关各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用的内部数据。存储器290用于存储OS内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储音视频处理器260-1和260-2、显示器280、通信接口230、调谐解调器220、检测器240输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等其他应用。
图5是本申请实施例提供的一种目标设备中软件系统的配置框图。如图5所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成的数据处理的媒介。一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序可访问,可实现用户可操作性。
控制应用程序2911-4,用于可控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现,以一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指目标设备200中一个或多个传感器检测的输入,以及外界控制设备(如终端300或遥控器100等)的输入。如:语音输入各种子事件,手势识别的手势输入,以及遥控器的物理按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左/右/、确定键、按键按住等中一个或组合。以及终端中的虚拟按键(也即非实体按键)的操作,如移动、按住、释放等操作。
界面布局管理器2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
图6是本申请实施例提供的一种设备的控制方法的流程图。该方法可以用于图1中的终端300。如图6所示,该方法可以包括:
步骤601、获取目标设备的遥控器中物理按键的特征,物理按键的特征包括物理按键的排布方式和功能。
步骤602、基于物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,目标按键模板为:按键模板库中,特征与物理按键的特征相似度最高的按键模板,按键模板的特征包括:按键模板中多个虚拟按键的排布方式和功能。
步骤603、基于目标按键模板中多个虚拟按键的排布方式,显示目标按键模板。
步骤604、基于针对目标按键模板中任一虚拟按键的触发操作,以及该任一虚拟按键的功能,控制目标设备。
综上所述,本申请实施例中显示的目标按键模板的特征与遥控器的物理按键的特征相似度较高,因此,用户在通过该目标按键模板控制目标设备时,无需再次适应目标按键模板中虚拟按键的排布方式。所以,终端对遥控器的模拟效果较好,终端模拟的遥控器的使用效果较好。
图7是本申请实施例提供的另一种设备的控制方法的流程图。该方法可以用于图1中的终端300。如图7所示,该方法可以包括:
步骤701、接收方式设置指令,其中,该方式设置指令用于指示获取遥控器的指示信息的目标方式。
本申请实施例中以终端为智能手机,目标设备为电视为例进行解释说明。可选地,终端可以通过其中安装的用于模拟遥控器的目标应用程序控制目标设备。在需要通过终端模拟遥控器时,用户可以触发终端启动其中安装的目标应用程序。目标应用程序启动后,用户可以对终端进行操作,以触发终端接收方式设置指令,进而使终端确定获取遥控器的指示信息的目标方式。
可选地,遥控器的指示信息可以包括:遥控器的型号和遥控器用于控制的目标设备的型号中的一种或多种,以下实施例均以遥控器的指示信息为该遥控器的型号为例进行解释说明。由于通常一种电子设备会配置有固定型号的遥控器,故也可以将遥控器所用于控制的目标设备的型号作为遥控器的指示信息来标识遥控器。
终端可以通过多种方式中的任意一种或组合获取遥控器的指示信息。可选地,该多种方式可以包括:文本输入方式、语音输入方式和图像识别方式。用户在触发终端获取遥控器的指示信息之前,可以先触发终端接收方式设置指令,为终端选择获取遥控器的指示信息的目标方式,进而使终端通过该目标方式获取遥控器的指示信息。需要说明的是,可以存在多种可实现方式触发终端接收方式设置指令,进而确定获取遥控器的指示信息的目标方式,本申请实施例以其中的三种可实现方式为例进行解释说明。
对于触发终端接收方式设置指令的第一种可实现方式:图8是本申请实施例提供的一种终端的显示界面图。在终端中安装的目标应用程序启动后,如图8所示,终端300的显示屏上可以显示有默认的按键模板。需要说明的是,终端显示的任一按键模板包括多个虚拟按键A,各个虚拟按键A按照固定的排布方式进行排布,且每个虚拟按键A具有对应的功能;该按键模板中虚拟按键A的排布方式以及各个虚拟按键A的功能可以为该按键模板的特征。
可选地,终端300的显示屏上可以显示有第一提示信息,以提示用户触发终端通过目标方式获取遥控器的指示信息。如图8所示,该第一提示信息可以为“点我扫描识别遥控器型号”,该第一提示信息可以对应一种获取遥控器的指示信息的方式。当终端检测到针对该第一提示信息的触发操作时,该终端可以确定接收到了方式设置指令,且可以将该第一指示信息对应的获取遥控器的指示信息的方式确定为目标方式。
示例地,该第一提示信息对应的目标方式为图像识别方式,针对该第一提示信息的触发操作可以为:针对该第一提示信息显示的位置的点击操作。当用户点击该第一提示信息显示的位置时,终端确定接收到了方式设置指令,且该方式设置指令指示获取遥控器的指示信息的目标方式为图像识别方式。
接着,终端的显示屏可以显示图9所示的界面,该界面可以为图像拍摄界面。可选地,该图像拍摄界面中还可以显示第二提示信息,以提示用户使被拍摄物体位于固定位置。例如,该第二提示信息为“将电视实体遥控器放入框内,即可自动扫描”。可选地,当用户点击图8所示的显示界面中的该第一提示信息显示的位置时,终端的显示屏也可以显示图像选择界面,图像选择界面中可以显示多张图像,且用户可以在该多张图像中选择目标图像,进而终端可以对该目标图像进行识别得到得到遥控器的指示信息。可选地,也可以通过某触发操作使显示屏显示的界面由显示图像拍摄界面跳转至显示图像选择界面,如用户可以点击图9所示的图像拍摄界面中右上角显示的“相册”字样,进而触发显示屏显示图像选择界面;或者也可以通过某触发操作由图像选择界面跳转至图像拍摄界面。
需要说明的是,本申请实施例仅以图8所示的显示界面中该第一提示信息对应图像识别方式为例,该第一提示信息也可以对应语音输入识别方式或者文本输入方式,本申请实施例对此不做限定。
可选地,请继续参考图8,在图8所示的显示界面中还可以显示语音输入按钮Y,该语音输入按钮Y可以通过话筒样式的图标进行标识,该语音输入按钮Y可以对应语音输入方式。当终端检测到针对该语音输入按钮Y的触发操作时,可以确定接收到了方式设置指令,且可以将该第一指示信息对应的语音输入方式确定为获取遥控器的指示信息的目标方式。
可选地,在图8所示的显示界面中还可以显示文本输入界面(图8未对该文本输入界面进行示意),该文本输入界面可以对应文本输入方式。当终端检测到针对文本输入界面的触发操作(如在文本输入界面中输入文本)时,可以确定接收到了方式设置指令,且可以将该文本输入框对应的文本输入方式确定为获取遥控器的指示信息的目标方式。
对于触发终端接收方式设置指令的第二种可实现方式:图10是本申请实施例提供的再一种终端的显示界面图。在目标应用程序启动后,如图10所示,终端300的显示屏上可以显示有选择页面,该选择页面可以包括多个选项X,该多个选项X分别用于指示获取遥控器的指示信息的多种方式。该多种方式可以包括:文本输入方式、语音输入方式和图像识别方式中的至少两种。图10所示的选择页面包括三个选项X,该三个选项X可以分别为文本输入选项、语音输入选项和图像识别选项,该三个选项依次用于指示文本输入方式、语音输入方式和图像识别方式。
当终端检测到针对显示的任一选项X的触发操作时,可以确定接收到了方式设置指令,且可以将该选项X指示的获取遥控器的指示信息的方式确定为目标方式。该触发操作可以为针对该选项的点击操作、长按操作或者双击操作等。
可选地,当终端检测到针对文本输入选项的触发操作时,终端的显示屏上可以显示文本输入界面;当终端检测到针对语音输入选项的触发操作时,终端可以启用其中的麦克风等收音组件;当制装置检测到针对图像识别选项的触发操作时,终端可以显示图像获取界面,该图像获取界面可以包括图像拍摄界面或图像选择界面。
可选地,图10所示的选择页面中还可以显示有第三提示信息,用于提示用户对显示的选项执行触发操作,以触发终端接收方式设置指令,进而基于该方式设置执行确定遥控器的指示信息的目标方式。如图10所示,该第三提示信息可以为“请点击下方选项,以选择获取遥控器的指示信息的目标方式”。
对于触发终端接收方式设置指令的第三种可实现方式:终端可以具有至少一个实体按键,终端在检测的针对终端上的实体按键的触发操作时,可以确定接收到方式设置指令。可选地,当针对实体按键的触发操作不同时,终端接收到的方式设置指令所指示的目标方式也不同。
可选地,终端也可以具有多个实体按键,每个实体按键对应获取遥控器的指示信息的一种方式。当任一实体按键被按压后,终端均可以接收到方式设置指令,且不同实体按键被按压后终端接收到的方式设置指令所指示的目标方式不同。
可选地,终端还可以在检测到目标手势时,确定接收到方式设置指令,且目标手势不同时终端接收到的方式设置指令指示的目标方式不同。
步骤702、通过目标方式获取遥控器的指示信息。
在步骤701中终端接收到方式设置指令后,便可以确定通过该方式设置指令指示的目标方式获取遥控器的指示信息。
可选地,目标方式包括文本输入方式,在步骤702中终端可以获取携带有遥控器的指示信息的文本,进而基于该文本确定遥控器的指示信息。示例地,当终端接收到指示目标方式为文本输入方式的方式设置指令时,终端可以显示文本输入界面。进而,用户可以通过该文本输入界面将遥控器的指示信息输入终端。
例如,用户可以直接将遥控器的型号或者目标设备的型号输入终端,如此终端便直接获得了遥控器的指示信息。又例如,终端在接收到用户输入的文本后,可以对该文本进行识别,进而从该文本中识别遥控器的指示信息。如用户可以将遥控器的说明书信息输入终端,该说明书信息中包括遥控器的型号或遥控器所能控制的目标设备的型号,进而控制设备可以在接收到的说明书信息中提取遥控器的指示信息。
可选地,目标方式包括图像识别方式,在步骤702中终端可以获取与遥控器相关的目标图像,进而识别该目标图像得到遥控器的指示信息。示例地,当终端接收到指示目标方式为图像识别方式的方式设置指令时,终端可以显示图像获取界面,该图像获取界面可以包括图像拍摄界面或图像选择界面。终端可以通过图像拍摄界面拍摄目标图像,或者通过图像选择界面在终端中存储的图像中选择目标图像。
可选地,目标图像可以包括以下图像中的一种或多种:遥控器的按键所在侧的图像,遥控器的出厂标签的图像,目标设备的出厂标签的图像,目标设备的条形码的图像,目标设备的二维码的图像,目标设备的图像。
示例地,如图11所示,终端可以拍摄遥控器100的按键所在侧的图像,此时终端的显示屏上可以显示遥控器100的图像Q。通常不同遥控器中,物理按键的排布方式、物理按键上图标的样式、遥控器的轮廓以及遥控器的材质等均会存在差异,根据遥控器的按键所在侧的图像可以确定该遥控器的类型等指示信息。又示例地,遥控器和目标设备在出厂时通常会在其表面(如背面)粘贴出厂标签,控制设备也可以拍摄遥控器的出厂标签的图像或目标设备出厂标签的图像,进而对拍摄的出厂标签的图像进行识别得到出厂标签中记载的型号。又示例地,遥控器的背面通常会标注有遥控器的型号,终端也可以拍摄遥控器的背面图像,进而对该背面图像进行识别得到遥控器的背面标注的遥控器的型号。又示例地,目标设备上通常会粘贴有其对应的条形码或二维码,或者在目标设备启动后,显示屏上会显示该条形码或二维码。控制设备可以通过扫描该条形码和二维码得到该目标设备的相关设备信息,该设备信息包括目标设备的型号或者能够控制目标设备的遥控器的型号。可选地,该条形码或二维码也可以是目标设备的标识,用于唯一标识该目标设备。终端也可以拍摄目标设备的图像(如目标设备的正面图像),通常不同电子设备的形状、材质、纹理和各部件之间的尺寸关系均存在差异,通过目标设备的图像可以得到目标设备的型号等信息。
可选地,本申请实施例中对文本的识别和对目标图像的识别均可以由终端执行;或者,终端也可以与服务器通信连接,终端可以将获取的文本或目标图像上传至服务器,进而使服务器对该文本和目标图像进行识别,得到遥控器的指示信息。如此一来,无需终端进行过多的计算比对,对于终端的数据处理能力的要求较低,即使是配置较低的终端也可以用于控制目标设备。并且,由于避免了对终端的计算资源的过多损耗,进而保证了终端的其他功能的正常运行。
步骤703、基于遥控器的指示信息,在特征信息库中查询遥控器的指示信息对应的物理按键的特征。
其中,特征信息库包括:多个遥控器指示信息,以及每个遥控器指示信息对应的物理按键特征。可选地,一个遥控器指示信息仅可对应一个物理按键特征,不同的遥控器指示信息可以对应相同的物理按键特征。示例地,某遥控器的型号和该遥控器能够控制的目标设备的型号可以对应相同的物理按键特征,该物理按键特征即为该遥控器中物理按键的特征,该物理按键的特征包括物理按键的排布方式和功能。
示例地,该特征信息库可以存储在终端中,进而终端可以根据获取到遥控器的指示信息,在该特征信息库中查询该遥控器的指示信息对应的遥控器的物理按键的特征。
又示例地,终端与服务器连接,该特征信息库可以存储在服务器中。当步骤702中终端将获取的文本或目标图像传输至服务器,且服务器根据该文本或目标图像识别出遥控器的指示信息后,可以直接根据该指示信息在特征信息库中查找该遥控器的指示信息对应的遥控器的物理按键的特征。如此一来,特征信息库无需占用控制设备的内存,避免了对控制设备的运行效率的影响。
需要说明的是,本申请以上实施例均以根据遥控器的指示信息查找遥控器的物理按键的特征为例进行解释说明;可选地,用户也可以直接将遥控器的物理按键的特征输入至终端,或者将包括该特征的信息输入至终端,进而由终端或服务器从该信息中提取遥控器物理按键的特征,本申请实施例对此不作限定。
可选地,当遥控器或目标设备的生产厂家每生产一个型号的遥控器或目标设备后,均可以将该遥控器的型号或目标设备的型号,及其对应的遥控器中物理按键的特征录入特征信息库,以保证特征信息库中信息的完整度和精准性。
需要说明的是,本申请实施例中通过遥控器的指示信息在特征信息库中查找遥控器的物理按键的特征,得到的该物理按键的特征的精准度较高。避免了直接对遥控器的图像进行识别,根据各个物理按键上的图标确定各个物理按键的功能的精准度较低的问题。
步骤704、基于遥控器的物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板。
其中,目标按键模板为:按键模板库中,特征与物理按键的特征相似度最高的按键模板,按键模板的特征包括:按键模板中多个虚拟按键的排布方式和功能。请参考上述对于特征信息库的描述,按键模板库也可以存储在终端中,或者存储在与终端通信连接的服务器中。
可选地,本申请实施例中目标按键模板可以为:虚拟按键的排布方式与物理按键的排布方式的相似度最高,且虚拟按键的功能与物理按键的功能的相似度最高的按键模板。
可选地,遥控器中通常存在重要物理按键和普通物理按键,该重要物理被按压的频率通常较高,该普通物理按键被按压的频率较低。示例地,该重要物理按键可以包括:音量加减键、频道控制键、上/下/左/右的移动按键和返回键等,在进行相似度匹配时可以着重考虑重要物理按键的相似度。例如,可以为重要按键设置较高的权重,为普通物理按键设置较低的权重。在针对排布方式与功能,确定某按键模板中虚拟按键与遥控器的物理按键的相似度后,将各个虚拟按键的相似度乘以对应的虚拟按键的权重之后求和,进而得到该按键模板的整体相似度。将按键模板库中整体相似度最高的按键模板确定为目标按键模板。
可选地,若按键模板库存储在服务器中,由服务器确定目标按键模板,则服务器可以将该目标按键模板发送至终端。可选地,图12是本申请另一实施例提供的一种终端的显示界面图。如图12所示,在终端获取到目标按键模板后,终端可以显示第四提示信息,以提示用户是否显示目标按键模板。示例地,请参考图12,该第四提示信息可以包括“已识别到您的遥控器型号,点击【确定】更新您手机遥控器样式,点击【取消】继续使用默认手机遥控器样式”。终端还可以显示“确定”选项和“取消”选项。当用户点击“确定”选项时,终端可以显示目标按键模板。
需要说明的是,本申请实施例提供的各种提示消息的内容,各种选项的显示方式,以及各种触发操作的具体实现方式均为示例性的描述,均可以根据实际情况进行具体调整,本申请实施例对此不作限定。
步骤705、基于目标按键模板中多个虚拟按键的排布方式,显示目标按键模板。
示例地,图13是本申请另一实施例提供的另一种终端的显示界面图。通过图11中的目标方式获取遥控器的指示信息,进而根据该指示信息查找的目标按键模板可以如图13所示。由图13可知,本申请实施例中的目标按键模板中虚拟按键的排布方式与遥控器的物理按键的排布方式相似度较高,虚拟按键的具体的排布位置,各个按键之间的距离大小可能存在些许差异,虚拟按键的个数也可以与物理按键的个数不同,终端通过目标按键模板可能仅模拟了遥控器的部分物理按键。示例地,请结合图11与图13,图13中的目标按键模板中并未包括图11中的遥控器中最后一行的四个物理按键对应的虚拟按键。由于通常该四个物理按键的使用频率较低,即使目标按键模板中不存在这些物理按键所对应的虚拟按键也并不会对用户的使用造成影响。
步骤706、基于针对目标按键模板中任一虚拟按键的触发操作,以及该任一虚拟按键的功能,控制目标设备。
示例地,终端可以根据该虚拟按键的功能向目标设备发送控制指令,以控制目标设备执行对应的操作以实现该虚拟按键的功能。示例地,该虚拟按键的功能为返回功能,则终端可以控制目标设备显示当前页面之前的页面。
可选地,终端可以通过无线局域网、蓝牙、红外信号连接或者射频信号连接等方式,直接控制目标设备。或者,终端与目标设备均可与服务器通信连接,当终端检测到针对显示的目标按键模板中任一虚拟按键的触发操作时,终端可以向服务器发送控制指令,进而使得服务器向目标设备发送控制指令,以控制目标设备执行对应的操作以实现该虚拟按键的功能。
综上所述,本申请实施例中显示的目标按键模板的特征与遥控器的物理按键的特征相似度较高,因此,用户在通过该目标按键模板控制目标设备时,无需再次适应目标按键模板中虚拟按键的排布方式。所以,终端对遥控器的模拟效果较好,终端模拟的遥控器的使用效果较好。
在一些实施例中,不同的物理按键的特征对应不同的目标按键模板,在一些实施方式中,确定出的目标按键模板的特征和目标设备的实体遥控器的物理按键的特征具有预设的相似程度,以使得模拟出的遥控器中模拟出的按键的相对位置和功能,与实体遥控器的按键的相对位置和功能相同,符合用户的适应习惯。
在一些实施例中,响应于所述遥控器的指示信息,配置目标按键模板进行显示,其中,目标按键模板中模拟出的按键的相对位置和实体遥控器的按键的相对位置相同。
在一些实施例中,所述响应于所述遥控器的指示信息,配置目标按键模板进行显示具体为:基于所述遥控器的指示信息,获取目标设备的遥控器中物理按键的特征,所述物理按键的特征包括所述物理按键的排布方式和功能;基于所述物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,所述目标按键模板为:所述按键模板库中,特征与所述物理按键的特征相似度最高的按键模板,所述按键模板的特征包括:所述按键模板中多个虚拟按键的排布方式和功能;基于所述目标按键模板中所述多个虚拟按键的排布方式,显示所述目标按键模板。
图14是本申请实施例提供的一种终端的结构示意图。该终端可以为图1或图3中的终端300。如图14所示,该终端可以包括:
控制器110,用于获取目标设备的遥控器中物理按键的特征,物理按键的特征包括物理按键的排布方式和功能;基于物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,目标按键模板为:按键模板库中,特征与物理按键的特征相似度最高的按键模板,按键模板的特征包括:按键模板中多个虚拟按键的排布方式和功能。
显示屏120,用于基于目标按键模板中多个虚拟按键的排布方式,显示目标按键模板。
控制器110,还用于基于针对目标按键模板中任一虚拟按键的触发操作,以及任一虚拟按键的功能,控制目标设备。
综上所述,本申请实施例中终端的显示屏显示的目标按键模板的特征与遥控器的物理按键的特征相似度较高,因此,用户在通过该目标按键模板控制目标设备时,无需再次适应目标按键模板中虚拟按键的排布方式。所以,终端对遥控器的模拟效果较好,终端模拟的遥控器的使用效果较好。
可选地,本申请实施例中控制器110可以参考对于图3中控制器110的介绍。
可选地,控制器110还用于:
基于遥控器的指示信息,在特征信息库中查询遥控器的指示信息对应的物理按键的特征;其中,特征信息库包括:多个遥控器指示信息,以及每个遥控器指示信息对应的物理按键特征。
可选地,控制器110还用于:通过目标方式获取遥控器的指示信息,目标方式包括文本输入方式或者图像识别方式。
可选地,目标方式包括文本输入方式,所述控制器110还用于:
获取携带有遥控器的指示信息的文本;基于文本确定遥控器的指示信息。
可选地,目标方式包括图像识别方式,控制器110还用于:
获取遥控器相关的目标图像;识别遥控器相关的目标图像,得到遥控器的指示信息。
示例地,控制器110可以通过终端的用户输入接口获取该文本和该目标图像,进而根据获取的文本或目标图像确定遥控器的指示信息。其中,对于该用户输入接口可以参考对于图3中用户输入接口的介绍。例如,在控制器获取文本时,用户可以在终端的触摸板上进行触摸以输入文本,或者对终端上的按键进行按压以输入文本,或者终端的麦克风可以接收用户的语音进而控制器可以将该语音转换为文本。在控制器获取目标图像时,用户可以触发终端的摄像头拍摄目标图像。
可选地,目标图像包括以下一种或多种:
遥控器的按键所在侧的图像;遥控器的出厂标签的图像;目标设备的出厂标签的图像;目标设备的条形码的图像;目标设备的二维码的图像;目标设备的图像。
可选地,遥控器的指示信息包括:目标设备的型号和遥控器的型号中的一种或多种。
可选地,控制器110还用于:接收方式设置指令,方式设置指令用于指示目标方式为文本输入方式或图像识别方式;基于方式设置指令,确定目标方式。
综上所述,本申请实施例中终端的显示屏显示的目标按键模板的特征与遥控器的物理按键的特征相似度较高,因此,用户在通过该目标按键模板控制目标设备时,无需再次适应目标按键模板中虚拟按键的排布方式。所以,终端对遥控器的模拟效果较好,终端模拟的遥控器的使用效果较好。
本申请实施例还提供了一种设备的控制系统,该控制系统可以为图1所示的系统,该系统可以包括目标设备200以及终端300。该终端300可以为图3或图14所示的终端,该终端300用于控制该目标设备200。
示例地,该目标设备200可以为任意可以通过遥控器控制的电子设备。例如该目标设备可以包括家电设备,如电视、洗衣机、空调、冰箱和风扇等。终端300可以为移动终端、平板电脑、计算机、笔记本电脑和其他智能设备。
可选地,请继续参考图1,该控制系统还可以包括服务器400,该服务器400可以与目标设备200及终端300均通信连接。
应当理解,本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语“模块”,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
需要说明的是:上述实施例提供的设备的终端在控制目标设备时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
需要说明的是,本申请实施例提供的方法实施例能够与相应的装置实施例相互参考,本申请实施例对此不做限定。本申请实施例提供的方法实施例步骤的先后顺序能够进行适当调整,步骤也能够根据情况进行相应增减,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化的方法,都应涵盖在本申请的保护范围之内,因此不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种设备的控制方法,其特征在于,所述方法包括:
获取目标设备的遥控器中物理按键的特征,所述物理按键的特征包括所述物理按键的排布方式和功能;
基于所述物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,所述目标按键模板为:所述按键模板库中,特征与所述物理按键的特征相似度最高的按键模板,所述按键模板的特征包括:所述按键模板中多个虚拟按键的排布方式和功能;
基于所述目标按键模板中所述多个虚拟按键的排布方式,显示所述目标按键模板;
基于针对所述目标按键模板中任一虚拟按键的触发操作,以及所述任一虚拟按键的功能,控制所述目标设备。
2.根据权利要求1所述的方法,其特征在于,所述获取所述目标设备的遥控器中物理按键的特征,包括:
基于所述遥控器的指示信息,在特征信息库中查询所述遥控器的指示信息对应的所述物理按键的特征;
其中,所述特征信息库包括:多个遥控器指示信息,以及每个所述遥控器指示信息对应的物理按键特征。
3.根据权利要求2所述的方法,其特征在于,在所述获取所述目标设备的遥控器中物理按键的特征之前,所述方法还包括:
通过目标方式获取所述遥控器的指示信息,所述目标方式包括文本输入方式或者图像识别方式。
4.根据权利要求3所述的方法,其特征在于,所述目标方式包括所述文本输入方式,所述通过目标方式获取所述遥控器的指示信息,包括:
获取携带有所述遥控器的指示信息的文本;
基于所述文本确定所述遥控器的指示信息。
5.根据权利要求3所述的方法,其特征在于,所述目标方式包括图像识别方式,所述通过目标方式获取所述遥控器的指示信息,包括:
获取所述遥控器相关的目标图像;
识别所述遥控器相关的目标图像,得到所述遥控器的指示信息。
6.根据权利要求5所述的方法,其特征在于,所述目标图像包括以下一种或多种:
所述遥控器的按键所在侧的图像;
所述遥控器的出厂标签的图像;
所述目标设备的出厂标签的图像;
所述目标设备的条形码的图像;
所述目标设备的二维码的图像;
所述目标设备的图像。
7.根据权利要求2至6任一所述的方法,其特征在于,所述遥控器的指示信息包括:所述目标设备的型号和所述遥控器的型号中的一种或多种。
8.根据权利要求3所述的方法,其特征在于,在所述通过目标方式获取所述遥控器的指示信息之前,所述方法还包括:
接收方式设置指令,所述方式设置指令用于指示所述目标方式为文本输入方式或图像识别方式;
基于所述方式设置指令,确定所述目标方式。
9.一种终端,其特征在于,所述终端包括:
控制器,用于获取目标设备的遥控器中物理按键的特征,所述物理按键的特征包括所述物理按键的排布方式和功能;基于所述物理按键的特征,在包括多个按键模板的按键模板库中查找目标按键模板,其中,所述目标按键模板为:所述按键模板库中,特征与所述物理按键的特征相似度最高的按键模板,所述按键模板的特征包括:所述按键模板中多个虚拟按键的排布方式和功能;
显示屏,用于基于所述目标按键模板中所述多个虚拟按键的排布方式,显示所述目标按键模板;
所述控制器,还用于基于针对所述目标按键模板中任一虚拟按键的触发操作,以及所述任一虚拟按键的功能,控制所述目标设备。
10.一种设备的控制系统,其特征在于,所述系统包括:目标设备以及权利要求9所述的终端。
CN201911095647.6A 2019-11-11 2019-11-11 设备的控制方法及系统、终端 Pending CN110719514A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911095647.6A CN110719514A (zh) 2019-11-11 2019-11-11 设备的控制方法及系统、终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911095647.6A CN110719514A (zh) 2019-11-11 2019-11-11 设备的控制方法及系统、终端

Publications (1)

Publication Number Publication Date
CN110719514A true CN110719514A (zh) 2020-01-21

Family

ID=69215895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911095647.6A Pending CN110719514A (zh) 2019-11-11 2019-11-11 设备的控制方法及系统、终端

Country Status (1)

Country Link
CN (1) CN110719514A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112017415A (zh) * 2020-08-24 2020-12-01 青岛海信传媒网络技术有限公司 虚拟遥控器的推荐方法、显示设备及移动终端
CN113625636A (zh) * 2021-08-13 2021-11-09 珠海格力电器股份有限公司 一种按键触发控制方法、装置及电器设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101799975A (zh) * 2009-02-10 2010-08-11 Tcl集团股份有限公司 一种学习型遥控器及其按键模板创建方法
CN104680770A (zh) * 2013-11-29 2015-06-03 红板凳科技股份有限公司 远程更新控制代码的红外遥控器
CN105611349A (zh) * 2015-12-21 2016-05-25 深圳市金立通信设备有限公司 一种播放终端遥控器的生成方法及移动终端
CN106341606A (zh) * 2016-09-29 2017-01-18 努比亚技术有限公司 一种设备控制方法及移动终端
CN108021917A (zh) * 2017-10-27 2018-05-11 浙江兀兀科技有限公司 一种基于图像的遥控器识别方法、系统和便携式电子设备
CN108829481A (zh) * 2018-06-14 2018-11-16 青岛海信移动通信技术股份有限公司 基于控制电子设备的遥控器界面的呈现方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101799975A (zh) * 2009-02-10 2010-08-11 Tcl集团股份有限公司 一种学习型遥控器及其按键模板创建方法
CN104680770A (zh) * 2013-11-29 2015-06-03 红板凳科技股份有限公司 远程更新控制代码的红外遥控器
CN105611349A (zh) * 2015-12-21 2016-05-25 深圳市金立通信设备有限公司 一种播放终端遥控器的生成方法及移动终端
CN106341606A (zh) * 2016-09-29 2017-01-18 努比亚技术有限公司 一种设备控制方法及移动终端
CN108021917A (zh) * 2017-10-27 2018-05-11 浙江兀兀科技有限公司 一种基于图像的遥控器识别方法、系统和便携式电子设备
CN108829481A (zh) * 2018-06-14 2018-11-16 青岛海信移动通信技术股份有限公司 基于控制电子设备的遥控器界面的呈现方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112017415A (zh) * 2020-08-24 2020-12-01 青岛海信传媒网络技术有限公司 虚拟遥控器的推荐方法、显示设备及移动终端
CN113625636A (zh) * 2021-08-13 2021-11-09 珠海格力电器股份有限公司 一种按键触发控制方法、装置及电器设备

Similar Documents

Publication Publication Date Title
CN109618206B (zh) 呈现用户界面的方法和显示设备
CN111405318B (zh) 视频展示方法、装置及计算机存储介质
CN110996136B (zh) 视频资源的显示方法及装置
WO2021031623A1 (zh) 显示设备、分享文件的方法和服务器
CN111208969A (zh) 一种声音输出设备的选择控制方法及显示设备
CN111050198A (zh) 显示设备及蓝牙音频设备的切换方法
CN111131898B (zh) 播放媒体资源的方法、装置、显示设备及存储介质
CN111031375B (zh) 一种开机动画详情页的跳转方法及显示设备
CN112073762B (zh) 基于多系统显示设备的信息获取方法及多系统显示设备
CN111405331B (zh) 一种蓝牙Mesh设备状态更新方法及显示设备
CN110675872A (zh) 基于多系统显示设备的语音交互方法及多系统显示设备
CN112543359B (zh) 一种显示设备及自动配置视频参数的方法
CN111542031B (zh) 显示设备及蓝牙设备配对方法
CN112073865A (zh) 蓝牙耳机的音量设置方法及装置、电子设备
CN114079829A (zh) 一种显示设备及视频集锦文件水印的生成方法
CN111343495A (zh) 一种显示设备及播放终端中音乐的方法
CN111083538A (zh) 一种背景图像的显示方法及设备
CN110719514A (zh) 设备的控制方法及系统、终端
CN112473121B (zh) 一种显示设备及基于肢体识别的躲避球显示方法
CN111586463B (zh) 显示设备
CN113542899A (zh) 信息展示方法、显示设备、服务器
CN111479146B (zh) 显示设备和显示方法
CN112929717B (zh) 一种焦点管理的方法及显示设备
CN113495654A (zh) 一种控件展示方法及显示设备
CN112073816A (zh) 双系统usb升级方法、装置及显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200121