CN111193871B - 操作控制方法、电子设备及介质 - Google Patents

操作控制方法、电子设备及介质 Download PDF

Info

Publication number
CN111193871B
CN111193871B CN202010031820.2A CN202010031820A CN111193871B CN 111193871 B CN111193871 B CN 111193871B CN 202010031820 A CN202010031820 A CN 202010031820A CN 111193871 B CN111193871 B CN 111193871B
Authority
CN
China
Prior art keywords
target
area
electronic device
operation panel
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010031820.2A
Other languages
English (en)
Other versions
CN111193871A (zh
Inventor
杨庆
邓伟泽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202010031820.2A priority Critical patent/CN111193871B/zh
Publication of CN111193871A publication Critical patent/CN111193871A/zh
Application granted granted Critical
Publication of CN111193871B publication Critical patent/CN111193871B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种操作控制方法、电子设备及介质，涉及通信技术领域，能够解决现有技术中存在的控制电子设备操作不便的问题。该方法包括：获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。

Description

操作控制方法、电子设备及介质
技术领域
本发明实施例涉及通信技术领域，尤其涉及一种操作控制方法、电子设备及介质。
背景技术
现有技术中，用户一般通过触控电子设备或通过语音操作来控制电子设备，但是当周围环境较为嘈杂的时候，较大的噪音会影响语音的采集，在环境较为安静但不适合讲话的场合比如图书馆，使用语音操控电子设备也不方便，并且使用语音控制电子设备对用户的发音、语言、语调有一定的限制；通过触控电子设备来控制电子设备时，在用户距离电子设备具有一定的距离，或者用户的双手不方便触控电子设备的时候，如何控制电子设备给用户带来了困扰。
发明内容
本发明实施例提供一种操作控制方法，能够解决现有技术中存在的控制电子设备操作不便的问题。
为了解决上述技术问题，本发明是这样实现的：
第一方面，本发明实施例提供了一种操作控制方法，应用于电子设备，所述电子设备包括摄像头，所述方法包括：
获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；
基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；
执行与目标对象关联的第一控制操作；
其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中。
第二方面，本发明实施例提供了一种电子设备，包括：
第一获取模块，用于获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；
第二获取模块，用于基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；
第一控制模块，用于执行与目标对象关联的第一控制操作；
其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中。
第三方面，本发明实施例提供了一种电子设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如第一方面所述的操作控制方法的步骤。
第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的操作控制方法的步骤。
在本发明实施例中，电子设备通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。
附图说明
图1为本发明实施例提供的操作控制方法的流程图；
图2为本发明实施例提供的操作控制方法的操作板和电子设备的映射关系的示意图；
图3为本发明实施例提供的操作控制方法的操作板内的对象和电子设备的控制操作的对应关系的示意图；
图4(a)为本发明实施例提供的操作控制方法的确定目标操作体在操作板内的目标第一区域的示意图之一；
图4(b)为本发明实施例提供的操作控制方法的确定目标操作体在操作板内的目标第一区域的示意图之二；
图5为本发明实施例提供的操作控制方法的确定目标操作体在操作板内的目标第一区域的示意图之三；
图6为本发明实施例提供的操作控制方法的分割条的示意图；
图7为本发明实施例提供的操作控制方法的确定目标操作体在操作板内的目标第一区域的示意图之四；
图8为本发明实施例提供的电子设备的结构示意图；
图9为本发明实施例提供的电子设备的硬件示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同的对象，而不是用于描述对象的特定顺序。例如，第一输入、第二输入、第三输入和第四输入等是用于区别不同的输入，而不是用于描述输入的特定顺序。
在本发明实施例中，“示例性地”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性地”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性地”或者“例如”等词旨在以具体方式呈现相关概念。
在本发明实施例的描述中，除非另有说明，“多个”的含义是指两个或者两个以上，例如，多个处理单元是指两个或者两个以上的处理单元；多个元件是指两个或者两个以上的元件等。
本发明实施例提供一种操作控制方法，通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。从而能够解决现有技术中存在的控制电子设备操作不便的问题。
本发明实施例中的电子设备可以为移动电子设备，也可以为非移动电子设备。移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等；非移动电子设备可以为个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等；本发明实施例不作具体限定。
需要说明的是：在本发明实施例中，该电子设备可以是多面屏电子设备，如双面屏电子设备、折叠屏电子设备等，本发明实施例不作限定。
本发明实施例提供的操作控制方法的执行主体可以为上述的电子设备(包括移动电子设备和非移动电子设备)，也可以为该电子设备中能够实现该方法的功能模块和/或功能实体，具体地可以根据实际使用需求确定，本发明实施例不作限定。下面以电子设备为例，对本发明实施例提供的操作控制方法进行示例性地说明。
参考图1所示，本发明实施例提供了一种操作控制方法，应用于电子设备，该方法可以包括下述的步骤101-步骤103。
步骤101、获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板。
可选地，所述目标操作体可以包括但不限于：用户的手指、笔、触控笔、棍等任意物体。
可选地，所述操作板可以包括但不限于：纸、金属板、塑料板、木板等。
步骤102、基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域。
具体地，基于所述第一图像，获取所述目标操作体在所述操作板内的相对位置。
步骤103、执行与目标对象关联的第一控制操作；
其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中。
在本发明实施例中，电子设备通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。
可选地，步骤103具体包括步骤1031或步骤1032：
步骤1031、对所述电子设备的目标第二区域执行第一控制操作。
可选地，基于所述目标操作体在所述操作板内的第一区域，确定所述电子设备的目标第二区域，所述目标第一区域与所述目标第二区域存在映射关系，执行与目标第二区域关联的第一控制操作。
步骤1032、执行与所述目标第一区域中的第一对象关联的第一控制操作。
可选地，执行与第一对象关联的第一控制操作，所述第一对象位于所述目标第一区域中。
可选地，获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，确定所述目标操作体在所述操作板内的操作对象为所述第一对象；控制所述电子设备执行与所述第一对象对应的第一控制操作。
示例性地，通过图像识别技术确定目标操作体在操作板内的操作对象为所述第一对象，控制所述电子设备执行与所述第一对象对应的第一控制操作。
可选地，所述操作板包括N个第一区域，所述电子设备包括M个第二区域，其中，所述操作板的N个区域包括所述目标第一区域，所述电子设备的M个区域包括所述目标第二区域；
所述操作板的M个第一区域与所述电子设备的M个第二区域存在一一映射关系，N和M均为正整数，且N大于或等于M。
可选地，所述操作板包括N个第一区域通过分割标识分割。
可选地，所述分割标识可以是用户绘制的，也可以是操作板上预设好的。
可选地，所述分割标识可以被擦除或移除。
示例性地，如图2中的(a)所示，所述分割标识205是绘制在操作板上的具有一定宽度的实线，所述分割标识将所述操作板划分成N个区域，每个小方格代表一个第一区域。
可选地，所述分割标识是固定在操作板上的具有一定宽度的实物。
可选地，所述分割标识粘在所述操作板上，或者通过磁力固定在所述操作板上，或者通过其他方式固定在操作板上，比如通过螺钉固定等。
可选地，N等于M，所述操作板内的区域和所述电子设备内的区域一一对应。示例性地，如图2中的(a)和(b)所示，操作板201内的小方格所在的M个第一区域与电子设备202显示屏内的M个第二区域一一对应，目标第一区域203与目标第二区域204对应。
可选地，所述操作板的M个第一区域与所述电子设备的M个第二区域等比例一一对应。
具体地，所述等比例是指所述操作板的M个第一区域的面积与分别对应的所述电子设备的M个第二区域的面积相等。
可选地，所述操作板的M个第一区域与所述电子设备的M个第二区域成比例一一对应。
具体地，所述成比例是指所述操作板的M个第一区域的面积与分别对应的所述电子设备的M个第二区域的面积成预设比例。比如，所述操作板的M个第一区域的面积分别是对应的所述电子设备的M个第二区域的面积的二分之一。
在本发明实施例中，操作板中的区域与电子设备中的区域一一对应，通过操控操作板中的区域，便可以实现对电子设备的操控。
可选地，所述操作板还包括R个对象，所述R个对象与所述电子设备的R个控制操作一一对应；其中，所述R个对象包括所述第一对象，所述R个控制操作包括所述第一控制操作，所述第一对象与所述第一控制操作相对应，R为正整数。
可选地，所述第一控制操作可以包括但不限于：与电子设备的应用某个功能相关的控制操作、与按键相关的控制操作等，比如静音键、音量键、电源键等。
可选地，R＝N-M，所述操作板的M个第一区域与所述电子设备的M个第二区域存在一一映射关系，示例性地，如图3中的(a)所示，所述R个对象301位于除所述M个第一区域之外的其他第一区域内，每个其他第一区域内有一个对象。
可选地，所述R个对象为基于所述目标操作体在所述操作板上绘制的轨迹生成的对象；
或者，所述R个对象为实体对象，即实物。
示例性地，所述R个对象为用户通过笔在操作板上绘制的图案。
示例性地，所述R个对象为实体对象，比如一枚棋子、一枚硬币、一个瓶盖等。
可选地，所述R个对象可以被擦除或移除。
可选地，所述R个对象粘在所述操作板上，或者通过磁力固定在所述操作板上，或者通过其他方式固定在操作板上，比如通过螺钉固定等。
示例性地，在开会时，将电子设备放置在桌子上，投影幕布的目标区域为所述操作板，通过对投影幕布的目标区域的操控，对电子设备进行操控，并实时将电子设备的显示内容显示在投影幕布上，方便对会议内容的讲解。
示例性地，如图3所示，所述R个对象为用户通过笔在操作板201上绘制的图案，第一对象3011对应电子设备202中的电源键302的相关控制操作，比如锁屏，解锁，开机，关机等操作，其他对象分别对应电子设备中的与音量加键、音量减键、和静音键相关的控制操作。
在本发明实施例中，操作板内的对象与电子设备内的第一控制操作相对应，通过操控操作板内的对象，便可以隔空操控电子设备。
可选地，步骤102具体包括：
步骤1021、获取所述第一图像中所述操作板的至少三个角的位置和所述目标操作体的位置。
所述操作板的角即操作板的边角，所述操作板的边角的位置相对于操作板而言是固定的。
可选地，通过图像识别技术识别操作板的至少三个边角的位置和所述目标操作体的位置。
可选地，所述目标操作体为用户的手指，通过指尖识别算法来识别到手指指尖的位置。
步骤1022、基于所述操作板的至少三个角的位置和所述目标操作体的位置，确定所述目标操作体分别距离所述至少三个角的第二目标距离。
示例性地，如图7所示，通过图像识别技术，识别到操作板三个角的位置X1、X2、X3，以及目标操作体的位置X4，X4距离X1、X2、X3的距离分别为S1、S2、S3，X1的坐标为(x1，y1)，X2的坐标为(x2，y2)，X3的坐标为(x3，y3)，X4的坐标为(x4，y4)，则：
Figure BDA0002364600790000051
Figure BDA0002364600790000052
Figure BDA0002364600790000053
示例性地，如图7所示，操作板中位置X1、X2、X3、X4分别与电子设备中的位置X5、X6、X7、X8一一对应，X8距离X5、X6、X7的距离分别为S4、S5、S6，其中:
Figure BDA0002364600790000054
步骤1023、基于所述第二目标距离，获取所述目标操作体在所述操作板内的目标第一区域。
位置X5周围的区域为目标第一区域，位置X8周围的区域为目标第二区域，目标第一区域203与目标第二区域204存在映射关系，即存在对应关系。
基于所述操作板的至少三个角的位置以及目标操作体分别距离所述至少三个角的第二目标距离，获取所述目标操作体在所述操作板内的目标第一区域。
可选地，基于所述目标操作体在所述操作板内的第一区域，确定所述电子设备的目标第二区域，所述目标第一区域与所述目标第二区域存在映射关系，执行与目标第二区域关联的第一控制操作。
可选地，所述操作板的至少三个角具有不同的识别标识，通过识别第一图像中的所述识别标识，判断所述操作板的至少三个角的位置。
可选地，所述识别标识可以包括但不限于：字母、数字、图案等。
示例性地，如图4(a)所示，操作板的三个角的识别标识为分别“A”、“B”、“C”，目标第一区域203与目标第二区域204对应，不管操作板如何旋转，目标第一区域203在所述操作板中的位置不会变，示例性地，如图4(b)所示，操作板旋转180°，目标第一区域203在操作板中的位置没有变，目标第一区域203与目标第二区域204对应。
可选地，所述第一图像中，操作板中距离所述电子设备的目标部位最近的一个角为目标角，基于该目标角和操作板的其他至少两个角的位置以及目标操作体的位置，确定所述目标操作体在所述操作板内的目标第一区域。
可选地，所述电子设备的目标部位可以包括但不限于：电子设备的左下角的位置、电子设备的右下角的位置、电子设备的左上角的位置、电子设备的前置摄像头所在的位置等。
示例性地，所述电子设备的目标部位为电子设备的右上角的位置，如图5中的(a)所示，为所述电子设备202的俯视图，操作板201中距离所述电子设备的目标部位最近的一个角b为目标角501，目标第一区域203与目标第二区域对应。随着操作板的旋转，目标角501发生了变化，目标第一区域203在所述操作板中的位置也相应发生变化，示例性地，如图5中的(b)所示，操作板旋转180°，目标角501变为了角c，目标第一区域203在操作板中的位置发生了变化，目标第一区域203与目标第二区域对应。
可选地，步骤102具体包括：
步骤1024、获取所述第一图像中，所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置。
所述操作板的边角的位置以及所述对象的位置相对于操作板而言是固定的。
可选地，通过图像识别技术识别操作板的S个边角的位置和T个所述对象的位置以及所述目标操作体的位置。
步骤1025、基于所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置，确定所述目标操作体分别距离所述S个角和T个所述对象的第一目标距离。
示例性地，识别到操作板三个对象的位置X5、X6、X7，以及目标操作体的位置X8，X8距离X5、X6、X7的距离分别为S4、S5、S6。
步骤1026、基于所述第一目标距离，获取所述目标操作体在所述操作板内的目标第一区域；
其中，S和T为非负整数，且S和T的和大于或等于3。
可选地，所述操作板还包括一个分割条，所述分割条用于触发所述电子设备进行分屏操作。
可选地，在不进行分屏操作时，所述分割条位于操作板内的第五区域。
示例性地，如图6中的(a)所示，在不进行分屏操作时，所述分割条601位于操作板的最左侧的区域，如图6中的(b)所示，当所述分割条位于操作板内的N个第一区域所在区域时，触发所述电子设备进行分屏操作。
可选地，所述操作板为具有磁性的操作板，所述分割条被所述操作板的磁性吸附在操作板上，并可在操作板内移动。
可选地，所述分割条可以是用户绘制的具有一定宽度的线。
可选地，所述方法还包括：
步骤104、获取所述摄像头采集的第三图像，所述第三图像包括所述操作板。
步骤105、在所述分割条显示在所述操作板的目标区域的情况下，获取所述分割条在所述操作板中的显示位置。
所述分割条的颜色或形状大小是特殊的，摄像头可以捕捉并识别所述分割条。
可选地，所述目标区域为操作板内的N个第一区域所在区域。
步骤106、控制所述电子设备按照目标比例进行分屏操作；
其中，所述目标比例与所述分割条在所述操作板中的显示的位置相关联。
可选地，电子设备按照预设比例分屏，所述预设比例是分割条将操作板的所述N个第一区域划分的比例。
示例性地，所述分割条在所述操作板中的位置为所述N个第一区域的正中间的位置，则所述电子设备按照1:1的比例进行分屏。
示例性地，所述分割条在所述操作板中的位置将所述N个第一区域分为1:2的两部分，则所述电子设备按照1:2的比例分屏。
可选地，所述分割条在所述操作板中可以移动。
可选地，所述分割条通过在操作板中竖着放置或者横着放置，可以控制电子设备在竖屏模式下分屏或者在横屏模式下分屏。
可选地，所述分割条可以有多个，将电子设备分为多个分屏。示例性地，在目标区域内间隔设置有两个分割条，则将电子设备分为三屏。
在本发明实施例中，通过移动分割条的位置，可以触发电子设备的分屏操作，以及控制电子设备的分屏比例。
可选地，步骤102之后，步骤103之前，还包括：
步骤107、获取所述目标操作体的第一操作轨迹。
步骤103具体包括：
步骤1033、执行与目标对象和所述第一操作轨迹关联的第一控制操作。
可选地，所述第一操作轨迹包括：所述目标操作体从所述目标第一区域移动至第三区域的移动轨迹；
步骤1033具体包括：
步骤10331、将所述目标第二区域内的第二对象从所述目标第二区域移动至第四区域；
其中，所述第三区域是所述操作板内的区域，所述第四区域是所述电子设备内的区域，所述第三区域与所述第四区域存在映射关系。
所述第三区域是所述操作板的M个第一区域中的至少一个第一区域，所述第四区域是所述电子设备的M个第二区域中的至少一个第二区域。
示例性地，所述目标第二区域内的第二对象是悬浮球，目标操作体从所述目标第一区域移动至第三区域，则电子设备中的悬浮球从所述目标第二区域移动至第四区域。
在本发明实施例中，通过在操作板内的操作轨迹，即可操控电子设备内的目标对象。
在本发明实施例中，电子设备通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。
如图8所示，本发明实施例提供一种电子设备700，所述电子设备700包括：第一获取模块701，用于获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；第二获取模块702，用于基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；第一控制模块703，用于执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中。
可选地，第一控制模块703，具体用于对所述电子设备的目标第二区域执行第一控制操作；或者，执行与所述目标第一区域中的第一对象关联的第一控制操作。
可选地，所述电子设备还包括：第三获取模块，用于获取所述目标操作体的第一操作轨迹；所述第一控制模块，包括第一控制单元，用于执行与目标对象和所述第一操作轨迹关联的第一控制操作。
可选地，所述第一操作轨迹包括：所述目标操作体从所述目标第一区域移动至第三区域的移动轨迹；所述第一控制单元，具体用于将所述目标第二区域内的第二对象从所述目标第二区域移动至第四区域；其中，所述第三区域是所述操作板内的区域，所述第四区域是所述电子设备内的区域，所述第三区域与所述第四区域存在映射关系。
可选地，所述操作板包括N个第一区域，所述电子设备包括M个第二区域，其中，所述操作板的N个区域包括所述目标第一区域，所述电子设备的M个区域包括所述目标第二区域；所述操作板的M个第一区域与所述电子设备的M个第二区域存在一一映射关系，N和M均为正整数，且N大于或等于M。
可选地，所述操作板还包括R个对象，所述R个对象与所述电子设备的R个控制操作一一对应；其中，所述R个对象包括所述第一对象，所述R个控制操作包括所述第一控制操作，所述第一对象与所述第一控制操作相对应，R为正整数。
可选地，所述R个对象为基于所述目标操作体在所述操作板上绘制的轨迹生成的对象；或者，所述R个对象为实体对象。
可选地，所述第二获取模块，包括：第一获取单元，用于获取所述第一图像中，所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置；第一确定单元，用于基于所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置，确定所述目标操作体分别距离所述S个角和T个所述对象的第一目标距离；第二获取单元，用于基于所述第一目标距离，获取所述目标操作体在所述操作板内的目标第一区域；其中，S和T为非负整数，且S和T的和大于或等于3。
可选地，所述第二获取模块，包括：第三获取单元，用于获取所述第一图像中所述操作板的至少三个角的位置和所述目标操作体的位置；第二确定单元，用于基于所述操作板的至少三个角的位置和所述目标操作体的位置，确定所述目标操作体分别距离所述至少三个角的第二目标距离；第四获取单元，用于基于所述第二目标距离，获取所述目标操作体在所述操作板内的目标第一区域。
可选地，所述操作板还包括一个分割条，所述分割条用于触发所述电子设备进行分屏操作。
可选地，所述电子设备还包括：第四获取模块，用于获取所述摄像头采集的第三图像，所述第三图像包括所述操作板；第五获取模块，用于在所述分割条显示在所述操作板的目标区域的情况下，获取所述分割条在所述操作板中的显示位置；第二控制模块，用于控制所述电子设备按照目标比例进行分屏操作；其中，所述目标比例与所述分割条在所述操作板中的显示的位置相关联。
本发明实施例提供的电子设备能够实现上述方法实施例中电子设备实现的各个过程，为避免重复，此处不再赘述。
在本发明实施例中，电子设备通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。
图9为实现本发明各个实施例的一种电子设备的硬件结构示意图，如图9所示，该电子设备800包括但不限于：射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示单元806、用户输入单元807、接口单元808、存储器809、处理器810、以及电源811等部件。本领域技术人员可以理解，图9中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中，图像捕获装置，用于获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；图形处理器8041，用于基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；处理器810，用于执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中。
本发明实施例提供了一种电子设备，电子设备可以通过获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；执行与目标对象关联的第一控制操作；其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中，能够实现通过操控操作板中的区域或对象，便可以操控电子设备，可以便捷地控制电子设备。
应理解的是，本发明实施例中，射频单元801可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器810处理；另外，将上行的数据发送给基站。通常，射频单元801包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元801还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块802为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元803可以将射频单元801或网络模块802接收的或者在存储器809中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元803还可以提供与电子设备800执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元803包括扬声器、蜂鸣器以及受话器等。
输入单元804用于接收音频或视频信号。输入单元804可以包括图形处理器(Graphics Processing Unit，GPU)8041和麦克风8042，图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头，图中未示出)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元806上。经图形处理器8041处理后的图像帧可以存储在存储器809(或其它存储介质)中或者经由射频单元801或网络模块802进行发送。麦克风8042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元801发送到移动通信基站的格式输出。
电子设备800还包括至少一种传感器805，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板8061的亮度，接近传感器可在电子设备800移动到耳边时，关闭显示面板8061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器805还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元806用于显示由用户输入的信息或提供给用户的信息。显示单元806可包括显示面板8061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板8061。
用户输入单元807可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元807包括触控面板8071以及其他输入设备8072。触控面板8071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板8071上或在触控面板8071附近的操作)。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器810，接收处理器810发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板8071。除了触控面板8071，用户输入单元807还可以包括其他输入设备8072。具体地，其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步地，触控面板8071可覆盖在显示面板8061上，当触控面板8071检测到在其上或附近的触摸操作后，传送给处理器810以确定触摸事件的类型，随后处理器810根据触摸事件的类型在显示面板8061上提供相应的视觉输出。虽然在图9中，触控面板8071与显示面板8061是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板8071与显示面板8061集成而实现电子设备的输入和输出功能，具体此处不做限定。
接口单元808为外部装置与电子设备800连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元808可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到电子设备800内的一个或多个元件或者可以用于在电子设备800和外部装置之间传输数据。
存储器809可用于存储软件程序以及各种数据。存储器809可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器809可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器810是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器809内的软件程序和/或模块，以及调用存储在存储器809内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器810可包括一个或多个处理单元；可选地，处理器810可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器810中。
电子设备800还可以包括给各个部件供电的电源811(比如电池)，可选地，电源811可以通过电源管理系统与处理器810逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外，电子设备800包括一些未示出的功能模块，在此不再赘述。
可选地，本发明实施例还提供一种电子设备，包括处理器810，存储器809，存储在存储器809上并可在所述处理器810上运行的计算机程序，该计算机程序被处理器810执行时实现上述操作控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述操作控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台电子设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (13)

1.一种操作控制方法，应用于电子设备，所述电子设备包括摄像头，其特征在于，所述方法包括：
获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；
基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；
执行与目标对象关联的第一控制操作；
其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中；
所述操作板还包括一个分割条，所述分割条用于触发所述电子设备进行分屏操作。
2.根据权利要求1所述的方法，其特征在于，所述执行与目标对象关联的第一控制操作，包括：
对所述电子设备的目标第二区域执行第一控制操作；
或者，执行与所述目标第一区域中的第一对象关联的第一控制操作。
3.根据权利要求1所述的方法，其特征在于，所述获取所述目标操作体在所述操作板内的目标第一区域之后，所述执行与目标对象关联的第一控制操作之前，还包括：
获取所述目标操作体的第一操作轨迹；
所述执行与目标对象关联的第一控制操作，包括：
执行与目标对象和所述第一操作轨迹关联的第一控制操作。
4.根据权利要求3所述的方法，其特征在于，所述第一操作轨迹包括：所述目标操作体从所述目标第一区域移动至第三区域的移动轨迹；
所述执行与目标对象和所述第一操作轨迹关联的所述第一控制操作，包括：
将所述目标第二区域内的第二对象从所述目标第二区域移动至第四区域；
其中，所述第三区域是所述操作板内的区域，所述第四区域是所述电子设备内的区域，所述第三区域与所述第四区域存在映射关系。
5.根据权利要求1所述的方法，其特征在于，所述操作板包括N个第一区域，所述电子设备包括M个第二区域，其中，所述操作板的N个区域包括所述目标第一区域，所述电子设备的M个区域包括所述目标第二区域；
所述操作板的M个第一区域与所述电子设备的M个第二区域存在一一映射关系，N和M均为正整数，且N大于或等于M。
6.根据权利要求1或5所述的方法，其特征在于，所述操作板还包括R个对象，所述R个对象与所述电子设备的R个控制操作一一对应；其中，所述R个对象包括所述第一对象，所述R个控制操作包括所述第一控制操作，所述第一对象与所述第一控制操作相对应，R为正整数。
7.根据权利要求6所述的方法，其特征在于，所述R个对象为基于所述目标操作体在所述操作板上绘制的轨迹生成的对象；
或者，所述R个对象为实体对象。
8.根据权利要求6所述的方法，其特征在于，所述基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域，包括：
获取所述第一图像中，所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置；
基于所述操作板的S个角的位置和T个所述对象的位置以及所述目标操作体的位置，确定所述目标操作体分别距离所述S个角和T个所述对象的第一目标距离；
基于所述第一目标距离，获取所述目标操作体在所述操作板内的目标第一区域；
其中，S和T为非负整数，且S和T的和大于或等于3。
9.根据权利要求1所述的方法，其特征在于，所述基于所述第一图像，获取所述目标操作体在所述操作板内的第一区域，包括：
获取所述第一图像中所述操作板的至少三个角的位置和所述目标操作体的位置；
基于所述操作板的至少三个角的位置和所述目标操作体的位置，确定所述目标操作体分别距离所述至少三个角的第二目标距离；
基于所述第二目标距离，获取所述目标操作体在所述操作板内的目标第一区域。
10.根据权利要求1所述的方法，其特征在于，还包括：
获取所述摄像头采集的第三图像，所述第三图像包括所述操作板；
在所述分割条显示在所述操作板的目标区域的情况下，获取所述分割条在所述操作板中的显示位置；
控制所述电子设备按照目标比例进行分屏操作；
其中，所述目标比例与所述分割条在所述操作板中的显示的位置相关联。
11.一种电子设备，其特征在于，包括：
第一获取模块，用于获取摄像头采集的第一图像，所述第一图像包括目标操作体和操作板；
第二获取模块，用于基于所述第一图像，获取所述目标操作体在所述操作板内的目标第一区域；
第一控制模块，用于执行与目标对象关联的第一控制操作；
其中，所述目标对象包括：目标第二区域或第一对象，所述目标第二区域位于所述电子设备中，所述目标第一区域与所述目标第二区域存在映射关系，所述第一对象位于所述目标第一区域中；
所述操作板还包括一个分割条，所述分割条用于触发所述电子设备进行分屏操作。
12.一种电子设备，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至10中任一项所述的操作控制方法的步骤。
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至10中任一项所述的操作控制方法的步骤。
CN202010031820.2A 2020-01-13 2020-01-13 操作控制方法、电子设备及介质 Active CN111193871B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010031820.2A CN111193871B (zh) 2020-01-13 2020-01-13 操作控制方法、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010031820.2A CN111193871B (zh) 2020-01-13 2020-01-13 操作控制方法、电子设备及介质

Publications (2)

Publication Number Publication Date
CN111193871A CN111193871A (zh) 2020-05-22
CN111193871B true CN111193871B (zh) 2021-06-04

Family

ID=70710023

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010031820.2A Active CN111193871B (zh) 2020-01-13 2020-01-13 操作控制方法、电子设备及介质

Country Status (1)

Country Link
CN (1) CN111193871B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104980659A (zh) * 2015-06-30 2015-10-14 广州三星通信技术研究有限公司 控制拍摄显示的电子终端及其控制方法
CN106708333A (zh) * 2016-12-20 2017-05-24 哈尔滨拓博科技有限公司 一种基于空间识控技术的控制模块
CN109117240A (zh) * 2018-09-25 2019-01-01 维沃移动通信有限公司 一种操作控制方法及移动终端
CN110362231A (zh) * 2019-07-12 2019-10-22 腾讯科技（深圳）有限公司 抬头触控设备、图像显示的方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110602314B (zh) * 2019-08-30 2021-02-12 维沃移动通信有限公司 一种操作控制方法、电子设备及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104980659A (zh) * 2015-06-30 2015-10-14 广州三星通信技术研究有限公司 控制拍摄显示的电子终端及其控制方法
CN106708333A (zh) * 2016-12-20 2017-05-24 哈尔滨拓博科技有限公司 一种基于空间识控技术的控制模块
CN109117240A (zh) * 2018-09-25 2019-01-01 维沃移动通信有限公司 一种操作控制方法及移动终端
CN110362231A (zh) * 2019-07-12 2019-10-22 腾讯科技（深圳）有限公司 抬头触控设备、图像显示的方法及装置

Also Published As

Publication number Publication date
CN111193871A (zh) 2020-05-22

Similar Documents

Publication Publication Date Title
CN108319390B (zh) 一种柔性屏的控制方法及移动终端
CN109558061B (zh) 一种操作控制方法及终端
CN110874147B (zh) 一种显示方法及电子设备
CN109240577B (zh) 一种截屏方法及终端
CN110174993B (zh) 一种显示控制方法、终端设备及计算机可读存储介质
CN109032486B (zh) 一种显示控制方法及终端设备
JP7331245B2 (ja) 対象位置調整方法及び電子機器
CN107783747B (zh) 一种界面显示处理方法及移动终端
CN111026316A (zh) 一种图像显示方法及电子设备
CN109558000B (zh) 一种人机交互方法及电子设备
CN111610904B (zh) 图标整理方法、电子设备及存储介质
CN108563392B (zh) 一种图标显示控制方法及移动终端
CN110933505A (zh) 一种进度调节方法及电子设备
CN111352547A (zh) 显示方法及电子设备
CN108055399B (zh) 一种文本复制方法及移动终端
CN111464428A (zh) 音频处理方法、服务器、电子设备及计算机可读存储介质
CN111142679A (zh) 一种显示处理方法及电子设备
CN110941469B (zh) 一种应用分身的创建方法及其终端设备
JP7408627B2 (ja) 文字入力方法及び端末
JP7221305B2 (ja) 対象物認識方法及び移動端末
CN110780751A (zh) 一种信息处理方法及电子设备
JP7329135B2 (ja) アイコン表示方法及び端末
CN111443860B (zh) 触控方法和电子设备
CN110536007B (zh) 一种界面显示方法、终端及计算机可读存储介质
CN110795020A (zh) 一种解锁方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant