CN110321051A - 控件配置方法、装置以及电子设备 - Google Patents

控件配置方法、装置以及电子设备 Download PDF

Info

Publication number
CN110321051A
CN110321051A CN201910652747.8A CN201910652747A CN110321051A CN 110321051 A CN110321051 A CN 110321051A CN 201910652747 A CN201910652747 A CN 201910652747A CN 110321051 A CN110321051 A CN 110321051A
Authority
CN
China
Prior art keywords
control
virtual
equipment
virtual control
infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910652747.8A
Other languages
English (en)
Inventor
姚坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Realme Chongqing Mobile Communications Co Ltd
Original Assignee
Realme Chongqing Mobile Communications Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Realme Chongqing Mobile Communications Co Ltd filed Critical Realme Chongqing Mobile Communications Co Ltd
Priority to CN201910652747.8A priority Critical patent/CN110321051A/zh
Publication of CN110321051A publication Critical patent/CN110321051A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种控件配置方法、装置以及电子设备。所述方法包括:获取控制设备的实体图像;识别所述实体图像中的控件,生成对应的虚拟控件;获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。本方法实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。

Description

控件配置方法、装置以及电子设备
技术领域
本申请涉及终端技术领域,更具体地,涉及一种控件配置方法、装置以及电子设备。
背景技术
电子设备在配备了红外线收发器后,通过特定的软件,可以实现模拟红外控制设备的功能。在一种相关的方式中,为了在电子设备上生成外控制设备的按键,需要用户执行多次较为繁琐的操作,造成按键的生成过程效率较低,同时也使得极大的影响了用户体验。
发明内容
鉴于上述问题,本申请提出了一种控件配置方法、装置以及电子设备,以改善上述问题。
第一方面,本申请提供了一种控件配置方法,应用于电子设备,所述方法包括:获取控制设备的实体图像;识别所述实体图像中的控件,生成对应的虚拟控件;获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
第二方面,本申请提供了一种控件配置装置,运行于电子设备,所述装置包括:图像获取单元,用于获取控制设备的实体图像;控件生成单元,用于识别所述实体图像中的控件,生成对应的虚拟控件;控件配置单元,用于获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
第三方面,本申请提供了一种电子设备,包括多核处理器、启动控制器以及存储器,所述存储器用于存储待加载的数据;一个或多个程序被存储在所述启动控制器中并被配置为由所述启动控制器执行以实现上述的方法。
第四方面,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码被启动控制器运行时执行上述的方法。
本申请提供的一种控件配置方法、装置以及电子设备,通过获取控制设备的实体图像,然后识别所述实体图像中的控件,生成对应的虚拟控件,再获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储的方式,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请一实施例提出的一种控件配置方法的流程图;
图2示出了本申请另一实施例提出的一种控件配置方法的流程图;
图3示出了本申请再一实施例提出的一种控件配置方法的流程图;
图4示出了本申请再一实施例提出的一种控件配置方法的中虚拟控件显示的示意图;
图5示出了本申请又一实施例提出的一种控件配置方法的流程图;
图6示出了本申请又一实施例提出的一种控件配置方法的中实体的控制设备的示意图;
图7示出了本申请又一实施例提出的一种控件配置方法的中展示虚拟控件的示意图;
图8示出了本申请又一实施例提出的一种控件配置方法的中展示虚拟控件的示意图;
图9示出了本申请又一实施例提出的一种控件配置方法的虚拟控件进行红外学习的流程图;
图10示出了本申请又一实施例提出的一种控件配置方法的虚拟控件进行红外学习过程的示意图;
图11示出了本申请又一实施例提出的一种控件配置方法的虚拟控件进行红外学习过程的示意图;
图12示出了本申请又一实施例提出的一种控件配置方法的流程图;
图13示出了本申请实施例提出的一种控件配置装置的结构框图;
图14示出了本申请另一实施例提出的一种控件配置装置的结构框图;
图15示出了本申请再一实施例提出的一种控件配置装置的结构框图;
图16示出了本申请的用于执行根据本申请实施例的控件配置方法的电子设备的结构框图;
图17是本申请实施例的用于保存或者携带实现根据本申请实施例的控件配置方法的程序代码的存储单元。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
基于短距离无线控制技术,控制设备可以以一定距离的进行无线控制。其中,短距离无线控制技术包括基于蓝牙的无线控制技术或者基于红外的无线控制技术等。
以红外控制为例,红外控制是利用红外线进行传递信息的一种控制方式,红外控制具有抗干扰,电路简单,容易编码和解码,功耗小,成本低的优点。红外控制几乎适用所有家电的控制。红外控制器的发射单元包括键扫描、编码、发射电路。当按下红外控制器上任一按键时,产生的编码脉冲对载波进行脉冲幅度调制(PAM)后便形成红外控制信号,经驱动电路由红外发射管发射出去。红外遥控接收头接收到调制后的控制信号后,经前置放大、限幅放大、带通滤波、峰值检波和波形整形,从而解调出与输入控制信号反相的脉冲。
而随着电子技术的发展,越来越多的智能手机以及平板电脑等电子设备开始配置有红外线收发器,使得电子设备用户通过操作电子设备中对应的软件就可以触发电子设备发射红外控制信号,以实现对外部设备的红外控制。而在这种方式中,电子设备通常需要预先获取到红外编码库,以便实现电子设备具备红外控制功能。
而发明人发现,对于一些无法直接通过机型匹配方式获取到的红外编码库,可以通过红外学习的方式来获取对应的红外编码。而发明人发现,在学习过程中首先需要用户手动操作电子设备在电子设备中先建立一个控件,然后再触发实体的控制设备发送红外控制信号,电子设备学习到该红外控制信号对应的红外编码后,再将该红外编码与前述建立的控件对应起来,然后再次不断的重复手动操作电子设备建立控件以及红外学习的步骤,进而造成在红外学习的过程中,用户需要重复不断的操作电子设备建立控件。再者,通过用户一个一个手动建立的控件的布局与原本的控制设备的控件布局是不同的,还需要用户重新调整布局。
因此,发明人提出了本申请中可以改善上述问题的控件配置方法、装置以及电子设备。通过本申请实施例提供的方法实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。
下面将结合附图具体描述本申请的各实施例。
请参阅图1,本申请实施例提供的一种控件配置方法,应用于电子设备,所述方法包括:
步骤S110:获取控制设备的实体图像。
其中,可以理解的是,控制设备的实体图像表征的是控制设备的实际所展示出来的样式。在本申请实施例中,电子设备有多种方式来获取控制设备的实体图像。
作为一种方式,在电子设备配置有摄像头的情况下,电子设备可以通过摄像头对控制设备进行图像采集,以获取到控制设备的实体图像。例如,在电子设备所安装的应用程序中,配置有图像采集按钮,当电子设备检测到该图像采集按钮被触控以后,就可以调用摄像头进行图像采集,进而采集控制设备的图像作为获取的控制设备的实体图像。
作为另外一种方式,电子设备可以通过网络搜索的方式获取到控制设备的实体图像。在这种方式下,电子设备可以配置一搜索界面,在该搜索界面中用户可以输入想要搜索的关键词以便搜索对应的内容。例如,在用户输入遥控器的情况下,电子设备就会以遥控器为关键词进行图片搜索以得到遥控器相关的图片。在电子设备展示搜索到的关于遥控器的图片后,电子设备可以检测用户的选择操作,将用户选择的图片作为获取的控制设备的实体图像。
作为再一种方式,电子设备可以通过预先建立的控制设备的实体图像库搜索得到控制设备的实体图像。在这种方式下,可以预先采集各个品牌以及各个型号的遥控器的实体图片建立实体图像库,并且以品牌以及型号建立搜索索引,那么在这种方式下,用户可以在电子设备中基于品牌以及型号搜索到对应的遥控器的实体图像作为获取的控制设备的实体图像。
需要说明的是,在基于前述的直接通过摄像头进行图片采集或者基于网络搜索的方式中,都有可能出现获取的控制设备的实体图像不符合后续的处理需求,造成无法识别出所需的内容。以通过摄像头进行图片采集这种方式为例,若用户在采集过程中出现抖动,则会造成图片内容模糊,进而就会造成无法进行图片内容识别。再以通过网络获取图片的方式为例,在这种方式中所获取到的图片中可能实际是包括有控制设备的,但是该包括的控制设备的图像内容不符合后续的识别需求。其中,该识别需求可以包括以下条件中的至少一个:控制设备处于图片的中间;控制设备中有标识每个按键功能的字符;图片中有控制设备品牌标识以及型号标识。
作为一种改善上述问题的方式,可以预先通过机器学习的方式来获取到关于控制设备的神经网络模型,该神经网络模型可以识别图片是否包括控制设备或者图片中关于控制设备的图像内容是否符合前述的识别需求。那么在电子设备获取到用户选择的图片后,可以将被选择的图片输入到该神经网络模型中,以便该神经网络模型可以对关于控制设备的图像内容是否符合前述的识别需求进行判定。
在直接通过摄像头进行图片采集这种方式中,若电子设备接收到判定结果表征不符合识别需求,电子设备会提示用户重新进行图像采集。而在基于网络搜索的方式中,若电子设备接收到判定结果表征不符合识别需求,那么电子设备可以提示用户重新选择图片,或者重新基于关键词进行搜索后,再提示用户重新选择图片。
步骤S120:识别所述实体图像中的控件,生成对应的虚拟控件。
可以理解的是,电子设备在获取到控制设备的实体图像后,就可以进一步的识别实体图像中哪些区域表征控件,进而生成与识别出的控件对应的虚拟控件。可以理解的是,控件为触发控制设备发送控制信号的元件。
作为一种识别方式,电子设备可以调用OpenCV库来进行实体图像的识别。在这种方式下,电子设备可以基于OpenCV方式将所述实体图像转换为灰度图像。其中,可以通过OpenCV库中的cvtcolor函数将所述实体图像转换为灰度图像。然后对所述灰度图像进行二值化分割,再对进行所述二值化分割后的图像提取矩阵结构元,然后基于获取的所述矩阵结构元获取连通区域,将获取到的一个连通区域作为一个控件。
其中,可选的,所生成的虚拟控件的数量可以和控制设备实际的控件数量相同。例如,控制设备中实际布置有10个实体的控件,那么在生成虚拟控件时,也会生成10个虚拟控件与前述的10个实体控件一一对应。此外,作为另外一种方式,也可以从控制设备的实体控件中选择部分控件生成对应的虚拟控件。例如,实体的控制设备中包括有10个实体的控件,而电子设备从该10个实体的控件中选择5个或者6个实体的控件生成对应的虚拟控件。
作为一种方式,电子设备可以根据配置的需求来进行虚拟控件的生成。例如,若配置需求为虚拟控件是以网页的形式进行展示,那么电子设备在生成虚拟控件时,就可以按照网页所定义的格式来生成虚拟控件。在一种方式中,网页是基于html((Hyper TextMarkup Language))标记语言生成的,而在html标记语言中可以作为触控控件的包括<button>标签。那么在这种方式下,电子设备在识别到控制设备的实体图像中的控件后,可以先生成一个html文件,并在该html文件中生成一个<button>标签以作为对应的虚拟控件。当然,若识别到控制设备的实体图像中有多个实体的控件的情况下,电子设备可以同时建立多个<button>标签作为与多个实体的控件对应的虚拟控件。那么在完成虚拟控件的生成后,可以将前述的html文件进行存储。可以理解的是,该存储的html文件所渲染得到的图像即为与控制设备的实体图像所对应的虚拟图像,在该虚拟图像中包括与实体的控件所对应的虚拟控件。
此外,在基于网页生成虚拟控件的方式中。除了可以基于<button>标签生成虚拟控件以外,还可以配置任一一个可以添加触控事件的标签作为虚拟控件。例如,对于一个<img>标签可以通过添加“onclick”事件使得该<img>标签可以响应触控操作,进而在这种情况下,在识别到实体图像中的控件后,可以生成一个添加有“onclick”事件的<img>标签作为虚拟控件。
在另一种方式中,配置需求为虚拟控件是以应用程序控件形式进行展示的。以Android系统为例,在运行于Android系统的应用程序中,通常是通过xml文件来存储界面的布局,并且在xml文件中通常通过button控件来生成按钮类型的控件。那么在这种方式下,电子设备在识别到实体图像中的控件后,可以在配置的xml文件中生成一个button控件来作为虚拟控件。类似的,若电子设备从实体图像中识别到了多个实体的控件的情况下,可以一次性在该xml文件中生成多个button控件。
需要说明的是,在生成虚拟控件的过程中,可以直接一次性生成多个对应的虚拟控件。例如,实体的控制设备有多个实体的控件,那么电子设备在生成虚拟控件的过程中,可以一次性的生成与多个实体的控件对应的多个虚拟控件。此外,电子设备可以可以一次性生成一个对应的虚拟控件。
步骤S130:获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
其中,控制功能标识用于标识每个虚拟按键所具备的控制功能。该控制功能标识可以为与控制功能对应的信号内容,例如,红外信号编码或者蓝牙信号中表征控制功能的内容。此外,控制功能标识也可以为与信号编码方式对应的一个字符。
在本实施例中电子设备可以通过多种方式来获取到虚拟控件对应的控制功能标识。例如,若虚拟控件后续执行的为红外控制功能,那么电子设备可以通过红外学习的方式来获取到红外编码作为控制功能标识。此外,也可以通过从网络中进行控制设备型号匹配的方式获取到红外编码作为控制功能标识。
本申请提供的一种控件配置方法,通过获取控制设备的实体图像,然后识别所述实体图像中的控件,生成对应的虚拟控件,再获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储的方式,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。
请参阅图2,本申请实施例提供的一种控件配置方法,应用于电子设备,所述方法包括:
步骤S210:获取控制设备的实体图像。
步骤S220:识别所述实体图像中的控件,生成对应的虚拟控件。
步骤S230:获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
需要说明的是,对于一些控制设备,例如电视机的遥控器,为用户常用的控制设备,在使用过程中用户已经比较熟悉也比较习惯了每个控件的位置。那么为了便于所生成的虚拟控件能够更加适配用户的使用习惯,作为一种方式,本实施例提供的方法还包括:
步骤S240:获取所述实体图像中的控件在所述控制设备中的位置信息。
步骤S250:将所述实体图像中的控件的位置信息对应虚拟控件对应存储。
步骤S260:获取所述实体图像中所述控制设备的边缘轮廓信息,将所述边缘轮廓信息与所述虚拟控件对应存储。
可以理解的是,在控制设备中有多个控件的情况下,每个控件都有自己的绝对位置的。例如,控制设备配置有电源键以及音量调节键,而其中电源键配置在控制设备的顶部,音量调节键配置在控制设备的底部。那么这里所提到的顶部以及底部分别为电源键以及音量调节键的绝对位置。作为一种方式,电子设备可以通过坐标的方式来标识每个控件的位置,那么在这种方式下,电子设备获取到的控件的位置信息为坐标信息。再者,可以理解的是,前述的边缘轮廓信息表征的是控制设备的实际样式,该实际样式包括外形尺寸以及形状。
需要说明的是,对于前述的控件的位置信息以及控制设备的边缘轮廓信息,电子设备可以只获取其中的一种,也可以两种都获取。再者,在获取到虚拟控件的位置信息以及控制设备的边缘轮廓信息后,可以将该虚拟控件的位置信息以及控制设备的边缘轮廓信息用于后续在实际的控制过程中,对虚拟控件进行展示,也可以用于在控制功能标识获取之前就对虚拟控件进行展示。
作为一种方式,电子设备可以调用OpenCV库中的findContours()函数来获取到控件在所述控制设备中的位置信息以及所述实体图像中所述控制设备的边缘轮廓信息。
本申请提供的一种控件配置方法,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。并且,在本实施例中,还会获取每个虚拟控件在所述控制设备中的位置信息以及所述控制设备的边缘轮廓信息,进而实现可以在电子设备中对于控制设备的原本形态以及其中的控件排布进行复原,使得可以直接在电子设备中建立整体轮廓以及控件布局都和实体的控制设备相同的虚拟控制设备。
请参阅图3,本申请实施例提供的一种控件配置方法,应用于电子设备,所述方法包括:
步骤S310:获取控制设备的实体图像。
步骤S320:识别所述实体图像中的控件。
步骤S330:若识别到所述实体图像中的控件有多个,分多次生成待配置的虚拟控件,其中,每次生成一个待配置的虚拟控件,且在当次生成的待配置的虚拟控件完成红外学习后执行下一次的待配置的虚拟控件生成。
可以理解的是,在本实施例中,电子设备在识别到需要生成多个虚拟控件的情况下,是分多次来生成该多个虚拟控件,且将每次生成的一个虚拟控件作为该次待配置的虚拟控件。
步骤S340:基于红外学习的方式获取当次生成的所述待配置的虚拟控件对应的红外编码,将所述红外编码作为控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的红外编码所标识的控制功能。
下面再通过一个实例来对本实施例的方案进行说明。
若电子设备通过前述的方式识别到实体图像中包括有10个实体的控件,那么电子设备会分10次生成待配置的虚拟控件。其中,在第一次生成待配置的虚拟控件后,电子设备可以提示用户开始关于第一次生成的待配置的虚拟控件的红外学习,那么用户就可以操作实体的控制设备上的某一个控件,以便控制设备可以对着电子设备发送与该被操作的控件的控制功能对应的红外信号。而电子设备在接收到红外信号后,可以通过对红外信号的学习得到红外编码,进而将该红外编码与本次生成的待配置的虚拟控件对应存储,在完成当次生成待配置的虚拟控件的红外学习后,电子设备会识别到当前已经完成学习的虚拟按键数为1,不大于前述确定的实体的控件的数量10,那么电子设备会继续下一次的待配置的虚拟控件的生成以及红外学习,直到完成建立10个虚拟控件并完成对应的红外学习。
其中,需要说明的是,在虚拟控件的生成以及配置进行红外学习的过程中。电子设备可以将当次生成的待配置的虚拟控件显示在电子设备的屏幕上,也可以不显示。
其中,在不显示待配置的虚拟控件的这种方式中,可以预先定义好电子设备生成虚拟控件的顺序。例如,为从控制设备中从左到右且从上到下色顺序生成虚拟控件。那么在这种方式下,电子设备可以通过发出第一声音来提示用户开始某个虚拟控件的红外学习,以及发出第二提示音来提示用户某个虚拟控件的学习已经完成。
而在可以将当次生成的待配置的虚拟控件显示在电子设备的屏幕上的这种方式中。可选的,电子设备可以按照指定的顺序依次显示所生成的虚拟控件,以提升用户操作当次所显示的虚拟控件的红外学习。例如,如图4中的左图所示,在电子设备中显示有标识功能为电源的虚拟控件,那么当次显示的虚拟控件就是功能为控制电源的虚拟控件,进而用户就可以触控实体的控制设备中实体的电源键来完成红外学习,而在下一次,如图4的右图所示,生成了功能为控制输入源的虚拟控件,进而用户就可以触控实体的控制设备中实体的输入源控件来完成红外学习。可以理解的是,当次显示的虚拟控件可以理解为当次生成的待配置的虚拟控件。
需要说明的是,在对实体图像进行识别的过程中,可以基于OCR(OpticalCharacter Recognition)技术对于实体图像中的文本进行识别,并将文本标注在对应的虚拟控件旁边,以便用户可以识别所生成的虚拟控件的作用。
本申请提供的一种控件配置方法,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。并且,在本实施例中,会先获取从控制设备的实体图像中识别出的控件的数量,然后按照生成对应的待配置的虚拟控件以及配置该待配置的虚拟控件的方式,依次生成并配置多个虚拟控件,直到完成所有的虚拟控件的生成以及配置操作。通过这种方式可以实现生成一个虚拟控件后即会立即对生成的虚拟控件配置对应的控制功能标识,提升控件配置效率的同时,也可以提升配置的准确性。
请参阅图5,本申请实施例提供的一种控件配置方法,应用于电子设备,所述方法包括:
步骤S410:获取控制设备的实体图像。
步骤S420:识别所述实体图像中的控件,生成对应的虚拟控件。
在本实施例中,电子设备可以一次性生成多个虚拟控件。可以理解的是,对于这里一次性生成的多个虚拟控件可以均显示在屏幕上,也可以不显示。例如,如图6所示,在图6的左侧为实体的控制设备99,那么作为一种方式,电子设备可以基于前述实施例中的方式仅获取控制设备99中控件的位置信息以生成如图7中所示的虚拟控件排布界面。可以理解的是,图7中的虚拟控件的相对位置关系与图6中的实体的控制设备99中的实体的控件的相对位置关系是相同的。再者,如图8所示,电子设备除了获取图6中的控件的位置信息外,还会获取图6中的控制设备的边缘轮廓信息,以生成图8中与图6中的实体的控制设备对应的虚拟图像98。
步骤S430:基于红外学习的方式获取所述虚拟控件对应的红外编码。
作为一种方式,如图9所示,所述基于红外学习的方式获取所述虚拟控件对应的红外编码的步骤包括下列步骤:
步骤S431:在当次的功能获取过程中,获取所述虚拟控件中进行功能获取的目标控件。
步骤S432:发出提示录入所述目标控件的红外编码的信息。
作为一种方式,所述获取所述虚拟控件对应的控制功能标识的步骤之前还包括:基于生成的虚拟控件,显示与所述控制设备的实体图像所对应的虚拟图像。例如,如图8所示的虚拟图像98。
在这种方式下,可选的,所述发出提示录入所述目标控件的红外编码的信息的步骤包括:改变所述虚拟图像中的目标虚拟控件的颜色,以作为发出的提示录入所述目标虚拟控件的红外编码的信息。例如,如图10所示,图中填充有阴影的虚拟控件97就是表征颜色改变的目标控件,那么在这种情况下,用户就会操作实体的控制设备中与该虚拟控件97对应的控件发射红外信号,以便进行红外学习。在完成虚拟控件97的红外学习后,如图11所示,就可以改变下一个虚拟控件的颜色以确定下一个目标控件96,并可以恢复上一个确定的目标控件的颜色。可以理解的是,作为一种方式,电子设备在最初生成实体的控制设备的虚拟图像时,所生成的虚拟图像中的控件的颜色可以与实体控件中的颜色是相同的。
作为另外一种方式,所述发出提示录入所述目标控件的红外编码的信息的步骤包括:发出提示按照指定的控件排布顺录入对应的红外学习信号的信息。例如,在完成虚拟控件的生成后,电子设备可以发出提示开始红外学习的提示信息,那么用户就可以直接按照指定的顺序触控实体的控制设备上的控制以便按照指定的控件排布顺序完成红外学习。
步骤S433:接收待学习的红外控制信号,将所述红外控制信号所表征的红外编码作为与所述目标控件对应的红外编码。
步骤S434:进入下一次的功能获取过程,直到获取所有虚拟控件的红外编码。
步骤S440:将所述红外编码作为控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
本申请提供的一种控件配置方法,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。并且,在本实施例中,在红外学习过程中,用户只需要按照提示依次执行录入红外编码的操作即可,而不用反复的执行虚拟控件的创建操作,极大的提升了用户体验。
请参阅图12,本申请实施例提供的一种控件配置方法,应用于电子设备,所述方法包括:
步骤S510:获取控制设备的实体图像。
步骤S520:识别所述实体图像中的控件,生成对应的虚拟控件。
步骤S530:基于图文识别的方式获取所述实体图像中标识控件的控制功能的字符,以便获取对应的虚拟控件的控制功能。
可以理解的是,一些实体的控制设备的控件的旁边都会标注有表征每个控件的作用的字符,那么电子设备通过图像识别的方式就可以获取到每个控件对应的字符以便了解每个控件的功能的同时,可以将字符标注在对应的虚拟控件旁边。
步骤S540:获取所述控制设备唯一性的标识。
通常一些控制设备会将自身的品牌以及型号标注在控制设备表面。那么电子设备在通过图文识别的方式对实体图像进行识别的过程中,就可以获取到控制设备的品牌以及型号。作为另外一种方式,电子设备也可以通过提供和输入接口让用户手动输入控制设备唯一性的标识,例如,控制设备的品牌以及信号。此外,电子设备还可以通过列表的方式让用户通过选择的方式来录入所述控制设备唯一性的标识。
步骤S550:基于所述标识从网络获取每个虚拟控件的字符对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
当电子设备获取到控制设备的品牌以及型号后,可以通过网络查询的方式获取到控制设备的每个控件对应的信号内容作为控制功能标识。而在不同控制方式中,该信号内容所表征的内容不同。例如,在红外控制方式中,前述的信号内容表征的是红外编码,而身在蓝牙控制方式中,前述的信号内容表征的蓝牙信号中的表征控制功能的内容。
本申请提供的一种控件配置方法,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。并且,在本实施例中,在红外学习过程中,用户只需要按照提示依次执行录入红外编码的操作即可,而不用反复的执行虚拟控件的创建操作,极大的提升了用户体验。
请参阅图13,本申请实施例提供的一种控件配置装置600,运行于电子设备,所述装置600包括:
图像获取单元610,用于获取控制设备的实体图像。
控件生成单元620,用于识别所述实体图像中的控件,生成对应的虚拟控件。
作为一种方式,控件生成单元620,具体用于基于OpenCV方式将所述实体图像转换为灰度图像;对所述灰度图像进行二值化分割;对进行所述二值化分割后的图像提取矩阵结构元;基于获取的所述矩阵结构元获取连通区域,将获取到的一个连通区域作为一个控件。
控件配置单元630,用于获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
作为一种方式,控件生成单元620,还用于获取所述实体图像中的控件在所述控制设备中的位置信息。在这种方式下,控件配置单元630,还用于将所述实体图像中的控件的位置信息对应虚拟控件对应存储,所述位置信息用于对所述虚拟控件进行显示时基于所述位置信息进行显示。
作为一种方式,控件生成单元620,还用于获取所述实体图像中所述控制设备的边缘轮廓信息。在这种方式下,控件配置单元630,还用于将所述边缘轮廓信息与所述虚拟控件对应存储;所述边缘轮廓信息用于生成表征所述控制设备外形的目标区域后,以便基于所述位置信息在所述目标区域显示所述虚拟控件。
其中,作为一种方式,控件配置单元630,具体用于基于红外学习的方式获取所述虚拟控件对应的红外编码;将所述红外编码作为控制功能标识与所述虚拟控件对应存储。
可选的,控件配置单元630,具体用于在当次的功能获取过程中,获取所述虚拟控件中进行功能获取的目标控件;发出提示录入所述目标控件的红外编码的信息;接收待学习的红外控制信号,将所述红外控制信号所表征的红外编码作为与所述目标控件对应的红外编码;进入下一次的功能获取过程,直到获取所有虚拟控件的红外编码。
如图14所示,所述装置600还包括图像显示单元640,用于基于生成的虚拟控件,显示与所述控制设备的实体图像所对应的虚拟图像。在这种方式下,控件配置单元630,具体用于改变所述虚拟图像中的目标虚拟控件的颜色,以作为发出的提示录入所述目标虚拟控件的红外编码的信息。在这种方式下,控件配置单元630,也可以具体用于发出提示按照指定的控件排布顺录入对应的红外学习信号的信息。
如图15所示,所述控件配置单元630,具体包括:
控制功能标识子单元631,用于基于图文识别的方式获取所述实体图像中标识控件的控制功能的字符,以便获取对应的虚拟控件的控制功能。
标识识别子单元632,用于获取所述控制设备唯一性的标识。
控制功能获取子单元633,用于基于所述标识从网络获取每个虚拟控件的字符对应的控制功能标识。
需要说明的是,本申请中装置实施例与前述方法实施例是相互对应的,装置实施例中具体的原理可以参见前述方法实施例中的内容,此处不再赘述。
下面将结合图16对本申请提供的一种电子设备进行说明。
请参阅图16,基于上述的控件配置方法、装置,本申请实施例还提供的另一种可以执行前述控件配置方法的电子设备200。电子设备200包括相互耦合的一个或多个(图中仅示出一个)处理器102、存储器104、网络模块106以及无线通信模块108。其中,该存储器104中存储有可以执行前述实施例中内容的程序,而处理器102可以执行该存储器104中存储的程序。
其中,处理器102可以包括一个或者多个用于处理数据的核。处理器102利用各种接口和线路连接整个电子设备200内的各个部分,通过运行或执行存储在存储器104内的指令、程序、代码集或指令集,以及调用存储在存储器104内的数据,执行电子设备200的各种功能和处理数据。可选地,处理器102可以采用数字信号处理(Digital SignalProcessing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器102可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics ProcessingUnit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器102中,单独通过一块通信芯片进行实现。
存储器104可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器104可用于存储指令、程序、代码、代码集或指令集。存储器104可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。
所述网络模块106用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯,例如和音频播放设备进行通讯。所述网络模块106可包括各种现有的用于执行这些功能的电路元件,例如,天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。所述网络模块106可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。例如,网络模块106可以与基站进行信息交互。
其中,该无线通信模块108可以支持收发蓝牙信号,或也可以支持收发红外信号。
请参考图17,其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质1100中存储有程序代码,所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质1100可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质1100包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质1100具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码1110可以例如以适当形式进行压缩。
本申请提供的一种控件配置方法、装置以及电子设备,通过获取控制设备的实体图像,然后识别所述实体图像中的控件,生成对应的虚拟控件,再获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储的方式,实现了可以直接基于控制设备的实体图像来生成对应的虚拟控件,并给其中的每个虚拟控件配置对应的控制功能,进而提升了控件的配置效率,极大的提升了用户体验。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (14)

1.一种控件配置方法,其特征在于,应用于电子设备,所述方法包括:
获取控制设备的实体图像;
识别所述实体图像中的控件,生成对应的虚拟控件;
获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
2.根据权利要求1所述的方法,其特征在于,所述识别所述实体图像中的控件的步骤包括:
基于OpenCV方式将所述实体图像转换为灰度图像;
对所述灰度图像进行二值化分割;
对进行所述二值化分割后的图像提取矩阵结构元;
基于获取的所述矩阵结构元获取连通区域,将获取到的一个连通区域作为一个控件。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述实体图像中的控件在所述控制设备中的位置信息;
将所述实体图像中的控件的位置信息对应虚拟控件对应存储,所述位置信息用于对所述虚拟控件进行显示时基于所述位置信息进行显示。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
获取所述实体图像中所述控制设备的边缘轮廓信息,将所述边缘轮廓信息与所述虚拟控件对应存储;所述边缘轮廓信息用于生成表征所述控制设备外形的目标区域后,以便基于所述位置信息在所述目标区域显示所述虚拟控件。
5.根据权利要求1所述的方法,其特征在于,所述生成对应的虚拟控件的步骤包括:
一次生成对应的一个虚拟控件或者一次生成对应的多个虚拟控件。
6.根据权利要求5所述的方法,其特征在于,所述获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储的步骤包括:
基于红外学习的方式获取所述虚拟控件对应的红外编码;
将所述红外编码作为控制功能标识与所述虚拟控件对应存储。
7.根据权利要求6所述的方法,其特征在于,所述一次生成对应的一个虚拟控件的步骤包括:
若识别到所述实体图像中的控件有多个,分多次生成待配置的虚拟控件,其中,每次生成一个待配置的虚拟控件,且在当次生成的待配置的虚拟控件完成红外学习后执行下一次的待配置的虚拟控件生成;
所述基于红外学习的方式获取所述虚拟控件对应的红外编码的步骤包括:
基于红外学习的方式获取当次生成的所述待配置的虚拟控件对应的红外编码。
8.根据权利要求6所述的方法,其特征在于,若一次生成对应的多个虚拟控件,所述基于红外学习的方式获取所述虚拟控件对应的红外编码的步骤包括:
在当次的功能获取过程中,获取所述虚拟控件中进行功能获取的目标控件;
发出提示录入所述目标控件的红外编码的信息;
接收待学习的红外控制信号,将所述红外控制信号所表征的红外编码作为与所述目标控件对应的红外编码;
进入下一次的功能获取过程,直到获取所有虚拟控件的红外编码。
9.根据权利要求8所述的方法,其特征在于,所述获取所述虚拟控件对应的控制功能标识的步骤之前还包括:
基于生成的虚拟控件,显示与所述控制设备的实体图像所对应的虚拟图像;
所述发出提示录入所述目标控件的红外编码的信息的步骤包括:
改变所述虚拟图像中的目标虚拟控件的颜色,以作为发出的提示录入所述目标虚拟控件的红外编码的信息。
10.根据权利要求8所述的方法,其特征在于,所述发出提示录入所述目标控件的红外编码的信息的步骤包括:
发出提示按照指定的控件排布顺录入对应的红外学习信号的信息。
11.根据权利要求1所述的方法,其特征在于,所述获取所述虚拟控件对应的控制功能标识的步骤包括:
基于图文识别的方式获取所述实体图像中标识控件的控制功能的字符,以便获取对应的虚拟控件的控制功能;
获取所述控制设备唯一性的标识;
基于所述标识从网络获取每个虚拟控件的字符对应的控制功能标识。
12.一种控件配置装置,其特征在于,运行于电子设备,所述装置包括:
图像获取单元,用于获取控制设备的实体图像;
控件生成单元,用于识别所述实体图像中的控件,生成对应的虚拟控件;
控件配置单元,用于获取所述虚拟控件对应的控制功能标识,将所述控制功能标识与所述虚拟控件对应存储,所述虚拟控件用于在被触控时触发所在设备执行与对应的控制功能标识所标识的控制功能。
13.一种电子设备,其特征在于,包括处理器以及存储器;
一个或多个程序被存储在所述存储器中并被配置为由所述处理器执行以实现权利要求1-11任一所述的方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码被处理器运行时执行权利要求1-11任一所述的方法。
CN201910652747.8A 2019-07-14 2019-07-14 控件配置方法、装置以及电子设备 Pending CN110321051A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910652747.8A CN110321051A (zh) 2019-07-14 2019-07-14 控件配置方法、装置以及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910652747.8A CN110321051A (zh) 2019-07-14 2019-07-14 控件配置方法、装置以及电子设备

Publications (1)

Publication Number Publication Date
CN110321051A true CN110321051A (zh) 2019-10-11

Family

ID=68124094

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910652747.8A Pending CN110321051A (zh) 2019-07-14 2019-07-14 控件配置方法、装置以及电子设备

Country Status (1)

Country Link
CN (1) CN110321051A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112558492A (zh) * 2020-12-03 2021-03-26 深圳市欧瑞博科技股份有限公司 智能多路开关的控制方法、装置、服务器以及存储介质
CN112785487A (zh) * 2019-11-06 2021-05-11 RealMe重庆移动通信有限公司 图像处理方法及装置、存储介质和电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354273A (zh) * 2011-09-21 2012-02-15 歌尔声学股份有限公司 遥控方法及用于实现该遥控方法的电子设备
CN103531015A (zh) * 2013-10-08 2014-01-22 海信集团有限公司 一种实现遥控功能的方法和电子设备
CN105589591A (zh) * 2015-03-27 2016-05-18 海信(山东)空调有限公司 一种遥控方法及电子设备
CN105632159A (zh) * 2015-12-30 2016-06-01 深圳创维数字技术有限公司 一种遥控器管理方法及终端设备
CN105843595A (zh) * 2014-10-27 2016-08-10 中兴通讯股份有限公司 一种界面显示方法、装置及终端
CN106781419A (zh) * 2016-12-01 2017-05-31 华为技术有限公司 一种移动终端及遥控学习方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354273A (zh) * 2011-09-21 2012-02-15 歌尔声学股份有限公司 遥控方法及用于实现该遥控方法的电子设备
CN103531015A (zh) * 2013-10-08 2014-01-22 海信集团有限公司 一种实现遥控功能的方法和电子设备
CN105843595A (zh) * 2014-10-27 2016-08-10 中兴通讯股份有限公司 一种界面显示方法、装置及终端
CN105589591A (zh) * 2015-03-27 2016-05-18 海信(山东)空调有限公司 一种遥控方法及电子设备
CN105632159A (zh) * 2015-12-30 2016-06-01 深圳创维数字技术有限公司 一种遥控器管理方法及终端设备
CN106781419A (zh) * 2016-12-01 2017-05-31 华为技术有限公司 一种移动终端及遥控学习方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112785487A (zh) * 2019-11-06 2021-05-11 RealMe重庆移动通信有限公司 图像处理方法及装置、存储介质和电子设备
CN112785487B (zh) * 2019-11-06 2023-08-04 RealMe重庆移动通信有限公司 图像处理方法及装置、存储介质和电子设备
CN112558492A (zh) * 2020-12-03 2021-03-26 深圳市欧瑞博科技股份有限公司 智能多路开关的控制方法、装置、服务器以及存储介质

Similar Documents

Publication Publication Date Title
CN107944325B (zh) 一种扫码方法、扫码装置及移动终端
CN104270404B (zh) 一种基于终端标识的登录方法及装置
US20190068574A1 (en) Method, device, and system establishing a wireless communication channel between electronic devices
US20160057298A1 (en) Information processing system, information processing device, portable terminal and non-transitory computer readable recording medium
US10952267B2 (en) Terminal and method for connecting to target devices
CN110555171B (zh) 一种信息处理方法、装置、存储介质及系统
US11412555B2 (en) Mobile terminal
CN110321051A (zh) 控件配置方法、装置以及电子设备
CN105791593A (zh) 移动终端模式切换方法和装置
CN105843595A (zh) 一种界面显示方法、装置及终端
CN102843596A (zh) 一种用于智能电视的输入方法
US10628031B2 (en) Control instruction identification method and apparatus, and storage medium
CN109922457A (zh) 信息交互方法、装置及系统
CN111970676A (zh) WiFi热点接入方法、装置、设备及存储介质
CN112732379B (zh) 智能终端上应用程序的运行方法、终端和存储介质
CN112488157B (zh) 一种对话状态追踪方法、装置、电子设备及存储介质
CN105279466B (zh) 图形码识别方法及装置、图形码生成方法及装置
WO2024002300A1 (zh) 设备接入无线网络的方法、装置及存储介质
JP5768841B2 (ja) 画像形成システム、画像形成装置、遠隔操作装置およびプログラム
CN115408492A (zh) 资源显示的方法、终端及服务器
CN108376333A (zh) 文件审批方法、介质、装置和计算设备
WO2023103917A1 (zh) 语音控制方法、装置、电子设备及存储介质
KR101370263B1 (ko) 제스처 기반의 전자기기 리모트 제어 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
WO2020124454A1 (zh) 字体切换方法及相关产品
CN109936772A (zh) 智能电视的输入方法、智能电视、移动终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination