CN117193583A - 光标显示的方法及电子设备 - Google Patents

光标显示的方法及电子设备 Download PDF

Info

Publication number
CN117193583A
CN117193583A CN202210607324.6A CN202210607324A CN117193583A CN 117193583 A CN117193583 A CN 117193583A CN 202210607324 A CN202210607324 A CN 202210607324A CN 117193583 A CN117193583 A CN 117193583A
Authority
CN
China
Prior art keywords
screen
electronic device
cursor
user
mouse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210607324.6A
Other languages
English (en)
Inventor
卢跃东
孟德泉
李荣根
周星辰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202210607324.6A priority Critical patent/CN117193583A/zh
Priority to PCT/CN2023/096281 priority patent/WO2023231893A1/zh
Publication of CN117193583A publication Critical patent/CN117193583A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供了一种光标显示的方法及电子设备,该方法应用于第一电子设备,第一电子设备与第二电子设备投屏连接,该方法包括:第一电子设备在第一屏幕上显示光标;第一电子设备响应于接收到用户的第一操作,控制光标从第一屏幕移动至第二屏幕,第一屏幕和第二屏幕为不同的逻辑屏幕。该方法使得第一电子设备可以根据用户意图移动光标,使得光标可在不同电子设备的屏幕上自由切换,方便用户通过多设备协同处理任务,提升用户的使用感受。

Description

光标显示的方法及电子设备
技术领域
本申请实施例涉及电子设备领域,尤其涉及一种光标显示的方法及电子设备。
背景技术
随着电子技术和移动互联网的发展,用户往往需要通过手机、平板电脑、个人电脑等终端设备处理任务。为增强用户的体验感,用户可以将手机、平板电脑或个人电脑投屏至显示器。当用户外接了鼠标时,光标可被显示在显示器上,用户通过显示器上的光标执行操作。
但在现有技术中,难以通过一个外接鼠标实现在手机、平板电脑、个人电脑等终端设备与显示器之间的自由移动,且终端设备与显示器之间的数据交互也有一定的困难,影响用户的使用体验。因此,如何实现鼠标的光标在终端设备与显示器之间的灵活移动,以及如何实现终端设备与显示器之间方便快捷的数据交互,以增强用户的体验感,是目前亟待解决的问题。
发明内容
本申请实施例提供一种光标显示的方法及电子设备,该方法可以实现光标在不同电子设备直接方便快捷数据交互,增强了用户的体验感。
第一方面,提供了一种光标显示的方法,该方法应用于第一电子设备,该第一电子设备与第二电子设备投屏连接,该方法包括:该第一电子设备在第一屏幕上显示光标,该第一屏幕为该第一电子设备的屏幕;该第一电子设备响应于接收到用户的第一操作,控制该光标从该第一屏幕移动至第二屏幕,该第二屏幕为该第二电子设备的屏幕,该第一屏幕与该第二屏幕为不同的逻辑屏幕。
应理解,第一电子设备与第二电子设备投屏连接。其中,第一电子设备具有类似第二电子设备主机的功能。光标为输入设备在屏幕上的显示方式。其中,第一电子设备控制光标从第一屏幕移动至第二屏幕。也可以理解为,当光标在第二屏幕上显示时,光标在第一屏幕上显示消失,从而产生光标从第一屏幕移动至第二屏幕的视觉效果。
需要说明的是,第一操作可用于表示用户意图。第一电子设备根据用户意图确定光标所要移动的目标屏幕(第二屏幕),并在该目标屏幕上显示光标。
本申请实施例中,第一电子设备通过感知用户意图并判定用户意图,确定光标移动的目标屏幕,将光标显示于目标屏幕上,以实现光标在多个电子设备的屏幕上的自由移动。该方法能够提高用户在一芯多屏场景下的办公效率,增强用户的体验感。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备控制该光标从该第一屏幕移动至第二屏幕之前,该方法还包括:该第一电子设备根据该第一操作确定第二屏幕的标识,该第二屏幕的标识与该第一屏幕的标识不同;该第一电子设备根据该第二屏幕的标识确定该第二屏幕为目标屏幕。
本申请实施例中,第一电子设备可以根据用户意图,确定光标移动的目标屏幕的标识,进而确定光标移动的目标屏幕,该目标屏幕(可以是第二屏幕)与原屏幕(可以是第一屏幕)是不同的逻辑屏幕。方便第一电子设备控制光标移动至目标屏幕的后续操作。
结合第一方面,在第一方面的某些实现方式中,第一电子设备控制光标从第一屏幕移动至第二屏幕,包括:该第一电子设备发送输入事件至该第二屏幕,该输入事件包括以下至少一项:鼠标移动事件、鼠标点击事件或拖拽事件。
本申请实施例中,在第一电子设备确定了目标屏幕之后,第一电子设备可以将输入事件发送至目标屏幕。以便用户可以在目标屏幕上执行后续操作。其中,第一电子设备发送输入事件至第二屏幕,也可以理解为第一电子设备发送输入事件至第二电子设备。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备响应于接收到用户的第一操作,包括:该第一电子设备响应于接收到用户在该第一屏幕上以预设路径移动该光标;或者该第一电子设备响应于接收到用户在该第一屏幕或该第二屏幕上敲击;或者该第一电子设备响应于接收到用户在该第一电子设备上系统设置。
需要说明的是,用户的第一操作包括但不限于以上实现方式。第一操作的具体方式可以根据实际情况预先设定。当用户采用在第一屏幕或第二屏幕上敲击的方式输入时,可以增强光标移动过程的趣味性;当用户采用系统设置的方式输入时,可较为准确地将光标移动至目标屏幕上。用户可以通过指关节在第一屏幕或第二屏幕上敲击,具体敲击的方式本申请不作限定。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备响应于接收到用户在该第一屏幕上以预设路径移动该光标,包括:该第一电子设备响应于接收到用户在该第一屏幕上移动该光标至该第一屏幕的边缘并继续移动;或者该第一电子设备响应于接收到用户在该第一屏幕上以预设形状晃动该光标。
应理解,预设路径可以是光标的移动路径,也可以是光标的晃动路径。预设路径可以为“C”或“S”等预设形状的路径,本申请对此不作限定。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备响应于接收到用户在该第一屏幕上移动该光标至该第一屏幕的边缘并继续移动,包括:该第一电子设备确定该第一电子设备与该第二电子设备的位置关系;该第一电子设备响应于接收到用户在该第一屏幕上根据该位置关系移动该光标至该第一屏幕的边缘并继续移动。
需要说明的是,当用户采用在第一屏幕上移动光标至第一屏幕的边缘并继续移动的方式输入时,在第二电子设备的屏幕上显示光标之前,第一电子设备还需要确定第一电子设备与第二电子设备的位置关系,也就是第一屏幕与第二屏幕的位置关系。当然,与第一电子设备处于同一光标系统的其他电子设备也可以确定电子设备之间的位置关系,例如,第二电子设备也可以确定第一电子设备和第二电子设备的位置关系。
示例性的,当第二屏幕位于第一屏幕右侧时,第一电子设备响应于接收到用户在第一屏幕上移动光标至第一屏幕的右侧边缘并继续向右侧移动,在第二屏幕上显示光标;当第二屏幕位于第一屏幕左侧时,第一电子设备响应于接收到用户在第一屏幕上移动光标至第一屏幕的左侧边缘并继续向左侧移动,在第二屏幕上显示光标。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备确定该第一电子设备与该第二电子设备的位置关系,包括:该第一电子设备响应于接收到用户的第二操作,确定该第一电子设备与该第二电子设备的位置关系;或者该第一电子设备感知该第二电子设备所在位置,确定该第一电子设备与该第二电子设备的位置关系。
应理解,第二操作可以是用户的设置操作。用户的设置操作可以是在第一电子设备的系统设置界面中进行的,也可以是第一电子设备出厂设置的,本申请对第一电子设备与第二电子设备位置关系的具体设置操作不作限定。第一电子设备可以自行感知第二电子设备所在位置,也可以在自行感知之后,用户对位置关系进行进一步设置。
结合第一方面,在第一方面的某些实现方式中,该方法还包括:该第一电子设备响应于接收到用户的第一操作,确定该光标在该第二屏幕上的位置。
应理解,第一电子设备响应于接收到第一操作,在第二电子设备的屏幕上显示光标的同时,还需要确定光标所在第二屏幕上的具体位置。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备响应于接收到用户的第一操作,确定该光标在该第二屏幕上的位置,包括:该第一电子设备响应于接收到用户的第一操作,确定该光标在该第二屏幕上的位置与在该第一屏幕上的位置相对应;或者该第一电子设备响应于接收到用户的第一操作,确定该光标在该第二屏幕上为默认位置。
应理解,当第一电子设备响应于接收到用户在第一屏幕上以预设形状晃动光标时,或者第一电子设备响应于接收到用户在第一屏幕上敲击时,第一电子设备确定光标位于第二屏幕的位置与光标在第一屏幕上的位置对应或者,第一电子设备确定光标在第二屏幕上位默认位置。这样,当光标移动到第二屏幕的对应位置或默认位置时,用户可直接执行针对对应位置上图标、图片或文字等对象的操作,无需将光标移动到上述对象的相应位置,更加方便用户的后续操作。
结合第一方面,在第一方面的某些实现方式中,该第一屏幕上显示有拖拽对象,该方法还包括:该第一电子设备响应于接收到用户对该拖拽对象的第三操作,向该第二屏幕发送该输入事件,使得该第二屏幕上显示从该第一屏幕上拖拽来的该拖拽对象。
应理解,第三操作为用户对拖拽对象的拖拽操作。
本申请实施例中,在移动第一电子设备的光标的同时,还可将拖拽对象一并移动。该方法实现了拖拽对象在多个屏幕之间的移动,更进一步提高多个电子设备协同使用的使用效率,提升用户的使用体验。
结合第一方面,在第一方面的某些实现方式中,该方法还包括:该第一电子设备响应于接收到用户对该第二屏幕上的该拖拽对象的第四操作,向该第二屏幕发送该输入事件,使得该第二屏幕上显示该拖拽对象的移动效果。
应理解,第四操作为用户对拖拽对象的移动操作。
结合第一方面,在第一方面的某些实现方式中,该拖拽对象包括以下至少一项:文件、应用程序图标、文本、图片或窗口。
结合第一方面,在第一方面的某些实现方式中,该第一电子设备与该第二电子设备投屏连接,包括:该第一电子设备与该第二电子设备通过以下至少一种方式投屏连接:蓝牙、有线或无线通信技术Wi-Fi。
第二方面,提供了一种光标显示的系统,其特征在于,包括:第一电子设备和第二电子设备,该第一电子设备与该第二电子设备投屏连接;该第一电子设备,用于在第一屏幕上显示光标,该第一屏幕为该第一电子设备的屏幕;响应于接收到用户的第一操作,控制该光标从该第一屏幕移动至第二屏幕,该第二屏幕为该第二电子设备的屏幕,该第一屏幕与该第二屏幕为不同的逻辑屏幕;该第二电子设备,用于在该第二屏幕上显示该光标。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备控制该光标从该第一屏幕移动至第二屏幕之前,该第一电子设备,还用于根据该第一操作确定第二屏幕的标识,该第二屏幕的标识与该第一屏幕的标识不同;根据该第二屏幕的标识确定该第二屏幕为目标屏幕。
结合第二方面,在第二方面的某些实现方式中,第一电子设备控制光标从第一屏幕移动至第二屏幕,包括:该第一电子设备发送输入事件至该第二屏幕,该输入事件包括以下至少一项:鼠标移动事件、鼠标点击事件或拖拽事件。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备响应于接收到用户的第一操作,包括:该第一电子设备响应于接收到用户在该第一屏幕上以预设路径移动该光标;或者该第一电子设备响应于接收到用户在该第一屏幕或该第二屏幕上敲击;或者该第一电子设备响应于接收到用户在该第一电子设备上系统设置。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备响应于接收到用户在该第一屏幕上以预设路径移动该光标,包括:该第一电子设备响应于接收到用户在该第一屏幕上移动该光标至该第一屏幕的边缘并继续移动;或者该第一电子设备响应于接收到用户在该第一屏幕上以预设形状晃动该光标。
结合第二方面,在第二方面的某些实现方式中,当该第一电子设备响应于接收到用户在该第一屏幕上移动该光标至该第一屏幕的边缘并继续移动;该第一电子设备和/或该第二电子设备,还用于确定该第一电子设备与该第二电子设备的位置关系;该第一电子设备响应于接收到用户在该第一屏幕上根据该位置关系移动该光标至该第一屏幕的边缘并继续移动。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备,还用于接收到用户的第一操作,确定该光标在该第二屏幕上的位置。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备,还用于接收到用户的第一操作,确定该光标在该第二屏幕上的位置,包括:该第一电子设备,还用于响应于接收到用户的第一操作,确定该光标在该第二屏幕上的位置与在该第一屏幕上的位置相对应;或者该第一电子设备,还用于响应于接收到用户的第一操作,确定该光标在该第二屏幕上为默认位置。
结合第二方面,在第二方面的某些实现方式中,该第一屏幕上显示有拖拽对象;该第一电子设备,还用于响应于接收到用户对该拖拽对象的第三操作,向该第二屏幕发送该输入事件;该第二电子设备,还用于在该第二屏幕上显示从该第一屏幕上拖拽来的该拖拽对象。
结合第二方面,在第二方面的某些实现方式中,该第一电子设备,还用于响应于接收到用户对该拖拽对象的第四操作,向该第二屏幕发送该输入事件;该第二电子设备,还用于在该第二屏幕上显示该拖拽对象的移动效果。
结合第二方面,在第二方面的某些实现方式中,该拖拽对象包括以下至少一项:文件、应用程序图标、文本、图片或窗口。
结合第二方面,在第二方面的某些实现方式中,其特征在于,该第一电子设备与该第二电子设备投屏连接,包括:该第一电子设备与该第二电子设备通过以下至少一种方式投屏连接:蓝牙、有线或无线通信技术Wi-Fi。
第三方面,提供给了一种电子设备,该电子设备包括执行上述第一方面或者第一方面的任意一种可能的设计的方法的模块/单元;这些模块/单元可以通过硬件实现,也可以通过硬件执行相应的软件实现。
第四方面,提供了一种计算机可读存储介质,其特征在于,该计算机可读存储介质包括计算机程序或指令,当该计算机程序或指令在计算机上运行时,使得如第一方面及其任一种可能的实现方式中的方法被执行。
第五方面,提供了一种计算机程序产品,其特征在于,该计算机程序产品包括计算机程序或指令,当该计算机程序或指令在计算机上运行时,使得如第一方面及其任一种可能的实现方式中的方法被执行。
第六方面,提供了一种计算机程序,当其在计算机上运行时,使得如第一方面及其任一种可能的实现方式中的方法被执行。
附图说明
图1是一种电子设备的结构示意图。
图2是本申请实施例提供的电子设备的软件结构框图。
图3是本申请实施例提供的一种平板电脑与显示器连接场景示意图。
图4是本申请实施例提供的第一电子设备的系统架构图。
图5是本申请实施例提供的一组GUI。
图6是本申请实施例提供的另一组GUI。
图7是本申请实施例提供的另一组GUI。
图8是本申请实施例提供的另一组GUI。
图9是本申请实施例提供的另一组GUI。
图10是本申请实施例提供的另一组GUI。
图11是本申请实施例提供的另一组GUI。
图12是本申请实施例提供的另一组GUI。
图13是本申请实施例提供的另一组GUI。
图14是本申请实施例提供的另一组GUI。
图15是本申请实施例提供的另一组GUI。
图16是本申请实施例提供的另一组GUI。
图17是本申请实施例提供的另一组GUI。
图18是本申请实施例提供的一种光标显示的方法示意性流程图。
图19是本申请实施例提供的另一组GUI。
图20是本申请实施例提供的另一组GUI。
图21是本申请实施例提供的一种光标显示的方法示意性流程图。
图22是本申请实施例提供的一种光标显示的方法示意性流程图。
具体实施方式
以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括例如“一个或多个”这种表达形式,除非其上下文中明确地有相反指示。还应当理解,在本申请以下各实施例中,“至少一个”、“一个或多个”是指一个、两个或两个以上。术语“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系;例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
以下介绍电子设备、用于这样的电子设备的用户界面、和用于使用这样的电子设备的实施例。在一些实施例中,电子设备可以是还包含其它功能诸如个人数字助理和/或音乐播放器功能的便携式电子设备,诸如手机、平板电脑、具备无线通讯功能的可穿戴电子设备(如智能手表)等。便携式电子设备的示例性实施例包括但不限于搭载 或者其它操作系统的便携式电子设备。上述便携式电子设备也可以是其它便携式电子设备,诸如膝上型计算机(Laptop)等。还应当理解的是,在其他一些实施例中,上述电子设备也可以不是便携式电子设备,而是台式计算机。
示例性的,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户身份识别(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户身份识别(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如,当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于闹钟应用图标时,执行新建闹钟的指令。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。例如,当手机在锁屏界面检测到用户的触控操作时,手机可以通过指纹传感器180H采集用户的指纹信息,并通过采集的指纹信息与手机中预置的指纹信息进行匹配。若匹配成功,则手机可以从锁屏界面进入非锁屏界面。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
图2是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
如图2所示,应用程序层可以包括相机、设置、皮肤模块、用户界面(userinterface,UI)、三方应用程序等。其中,三方应用程序可以包括图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层可以包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等,例如本申请实施例中的用于提示虚拟快门键的指示信息等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
此外,系统库还可以包括状态监测服务模块等,例如物理状态识别模块,用于对用户手势进行分析和识别;传感器服务模块,用于对硬件层各类传感器上传的传感器数据进行监测,确定电子设备100的物理状态。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
硬件层可以包括各类传感器,例如图1中介绍的各类传感器,在本申请实施例中涉及的加速度传感器、陀螺仪传感器、触摸传感器等。
结合以上图1和图2介绍的电子设备,在本申请实施例中,电子设备100涉及的物理器件主要包括传感器、决策支持系统(decision support systems,DSS)显示芯片、触摸显示屏、指纹识别模块等硬件组件;以及屏幕管理模块、显示驱动、指纹驱动、防误触等内核软件层;防误触输入、屏幕控制、灭屏显示(always on display,AOD)服务、电源管理等应用程序框架层功能;以及特殊适配应用(camera)、三方应用、系统休眠、AOD等应用层业务。
如图3所示,示出了一种平板电脑与显示器投屏连接场景示意图。其中,图中平板电脑还可以是手机、个人电脑等电子设备。图中的平板电脑仅作为示例性说明。平板电脑和显示器处于一芯多屏的场景。示例性的,平板电脑搭载Android系统;显示器搭载HarmonyOS等系统。平板电脑的屏幕与显示器的屏幕分别具有不同的标识(display ID),这两个屏幕相互独立,具有不同的特征,可视为不同的逻辑屏幕。这会导致应用程序、图标或窗口等对象会分别显示在不同的逻辑屏幕上。输入事件也会分别分发给不同的逻辑屏幕,鼠标光标也不能在多个逻辑屏幕之间自由移动。当平板电脑与显示器建立投屏连接后,平板电脑类似于电脑的主机,显示器可作为平板电脑的第二屏幕,通过显示器显示平板电脑上的内容,用户可以像使用电脑一样使用平板电脑。本申请所适用的场景与搭载Windows系统的电脑连接扩展屏的场景不同,Windows系统的电脑连接扩展屏时,电脑的屏幕与扩展屏的屏幕组成一块逻辑屏幕,但电脑的屏幕与扩展屏的屏幕分别为不同的物理屏幕。应用程序、图标或窗口等对象会在显示在该逻辑屏幕上,同时可以分别在不同物理屏幕上显示。可以理解为,不同物理屏幕为一块逻辑屏幕裁切而成的。这种场景下并不存在鼠标无法在多个逻辑屏幕之间移动的问题。
示例性的,在本申请平板电脑与显示器投屏连接的场景下,当用户想要将光标从显示器的屏幕移动到平板电脑的屏幕时,用户的这一操作时无法实现的。在现有技术中,在平板电脑与显示器连接时,平板电脑的鼠标只能显示于显示器上,可以在显示器上执行移动或者点击等操作。但无法实现鼠标光标在平板电脑与显示器之间的自由移动,更无法实现平板电脑与显示器之间数据的直接交互。
本申请实施例提供一种光标显示的方法及电子设备,该方法可以应用于多个电子设备一芯多屏的使用场景下,为一芯多屏场景提供了键鼠动态移动与输入事件上报的解决方案。
该方法可以通过感知用户意图并判定用户意图,动态移动鼠标光标所在的屏幕(平板电脑的屏幕或显示器的屏幕)。并将输入事件发送至指定的屏幕上。这样,可以实现光标在不同屏幕之间的自由移动,也可以实现不同屏幕之间输入事件的传输。用户可以通过一个鼠标光标在多个屏幕之间自由移动光标,可以同时浏览多个屏幕上的内容,也可以实现多个屏幕之间内容的拖拽。该方法可以提高多个电子设备协同使用的使用效率,从而提高用户的使用体验。
示例性的,第一电子设备400的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构或云架构。以分层架构为例,分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,如图4所示,示出了第一电子设备400的系统架构示意图。第一电子设备400的结构可以类似于上文中的电子设备100。在一种实现方式中,屏幕管理模块411、拖拽管理模块412和键鼠管理模块413在应用层410(也可以理解为图2所示的应用程序层)内,视图模块421、窗口管理服务模块422、输入管理服务模块423和底层输入模块424在框架层420(也可以理解为图2所示的应用程序框架层)内。在另一种实现方式中,屏幕管理模块411、拖拽管理模块412、键鼠管理模块413、视图模块421、窗口管理服务模块422、输入管理服务模块423和底层输入模块424在框架层420内。框架层420主要负责为应用层提供应用编程接口和编程框架。当然,第一电子设备400还可以包括其他层,如内核层(如图2所示的内核层)等。内核层是硬件和软件之间的层。内核层至少可以包括显示驱动,摄像头驱动,音频驱动,传感器驱动等。
具体地,屏幕管理模块411可用于确定鼠标光标移动的目标屏幕,或者输入事件被发送的目标屏幕,屏幕管理模块411存储有各个屏幕的标识(Identity,ID)。拖拽管理模块412用于管理拖拽事件。键鼠管理模块413用于管理鼠标事件。视图模块421用于管理控件。示例性的,输入事件包括鼠标事件或拖拽事件,鼠标事件包括鼠标移动事件或鼠标点击事件。其中,鼠标移动可以理解为鼠标光标的移动。以鼠标移动事件为例,键鼠管理模块413可以向窗口管理服务模块模块422注册鼠标事件监听,当发生鼠标移动事件时,窗口管理服务模块422向键鼠管理模块413回调鼠标移动事件。键鼠管理模块413判定鼠标移动事件后,向输入管理服务模块模块423发送鼠标移动事件,输入管理服务模块模块423向底层输入模块424发送鼠标移动事件,进而,底层输入模块424更改鼠标显示位置与鼠标移动事件的上报方向。对于拖拽事件,拖拽管理模块412可以通过视图模块421或窗口管理服务模块422获知是否发生拖拽事件。
如图5所示,示出本申请实施例提供的一组图形用户界面(graphical userinterface,GUI)。其中,第一电子设备400可以是手机、平板电脑、个人电脑、蜂窝电话、可穿戴设备等电子设备。第二电子设备500可以是平板电脑、个人电脑、显示器或智慧屏等电子设备。输入设备600可以是鼠标、键盘、触摸板或触摸屏等,本申请对此不作具体限定。可以理解为,第一电子设备400的屏幕为第一屏幕,第二电子设备500的屏幕为第二屏幕,由于鼠标可以在第一屏幕和第二屏幕之间移动,因此第一屏幕和第二屏幕都可以作为目标屏幕。目标屏幕也可称为使能屏幕,使能屏幕可以理解为显示鼠标操作的屏幕。鼠标在使能屏幕上以光标的形式显示。下面,以第一电子设备400为手机,第二电子设备500为显示器,输入设备600为鼠标为例进行说明。
第一电子设备400与第二电子设备500可以通过有线或者无线的方式建立连接。基于建立的连接,第一电子设备400和第二电子设备500可以配合一起使用。在本申请实施例中,第一电子设备400和第二电子设备500采用无线方式建立连接时,采用的无线通信协议可以是无线保真(wireless fidelity,Wi-Fi)协议、蓝牙(Bluetooth)协议、ZigBee协议、近距离无线通信(near field communication,NFC)协议等,还可以是各种蜂窝网协议。
如图5(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,本申请对此不作限定。用户将手机与显示器进行有线或无线连接,将显示器作为手机的第二屏幕。手机与显示器可以显示不同的GUI,以便于用户可以通过手机和显示器同时处理不同的工作任务。用户将鼠标连接在手机上。显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。用户通过从左到右移动鼠标,使得鼠标的光标显示在手机上的光标到达手机屏幕的右侧边缘。一种实现方式中,当鼠标继续向右侧移动时,当前鼠标的光标可以如图5(b)中显示在显示器的左侧边缘。另一种实现方式中,当鼠标继续向右侧移动时,当前鼠标的光标可以直接显示在显示器的默认位置,示例性的,默认位置可以是显示器的中央位置。这一过程,可以实现鼠标的光标从手机向显示器的移动。当然,鼠标的光标也可以实现从显示器向手机的移动。随后,用户可以将鼠标在显示器的屏幕上移动或执行任意的操作任务。
应理解,如图5所示的显示器位于手机的右侧,此为预先设定好的方向。该方向可以是用户在手机或显示器界面上设定的预设方向;也可以是手机或显示器通过感知其相对位置后确定的预设方向;也可以是手机或显示器感知其相对位置后,用户进一步调整所确定的预设方向。可以将预设方向设置为显示器相对于手机的任意方向,本申请对此不作限定。手机中的键鼠管理模块根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标从手机的屏幕移动至显示器的屏幕),也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在显示器上显示的位置(例如,如图5(b)所示的显示器屏幕的左侧边缘的位置)。示例性的,鼠标光标在显示器上显示的位置与原处于手机上的位置可以具有对应关系。该对应关系可以是,鼠标光标显示在显示器上的左侧边缘位置与原处于手机上的右侧边缘位置相对应。或者,鼠标光标显示在显示器的默认位置与原处于手机上的右侧边缘位置相对应。其中,默认位置可以为显示器的中央位置。本申请对于鼠标光标在显示器上显示的位置与原处于手机上的位置的具体对应关系不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户通过移动鼠标至手机的边缘并继续向外移动),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上,例如,鼠标移动事件的后续输入事件可以是鼠标点击事件。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕上显示的对应位置或默认位置。该方法能够使得一芯多屏场景下,光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,有助于提高用户使用多个屏幕时的体验感。
如图6所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为显示器为例进行说明。
示例性的,输入设备600为鼠标。如图6(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,本申请对此不作限定。用户将手机与显示器进行有线或无线连接,手机的屏幕为第一屏幕,显示器的屏幕为第二屏幕。用户将鼠标连接在手机上。示例性的,显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,鼠标的光标显示在手机屏幕的中央位置。用户在手机屏幕中央以预设形状晃动或者旋转鼠标,触发鼠标移动到如图6(b)中所示的显示器屏幕的中央。例如,用户在手机屏幕中央以预设形状“C”晃动鼠标。这一过程,可以实现鼠标从手机向显示器的移动。当然,鼠标也可以实现从显示器向手机的移动,可详见图14的内容。随后,用户可以将鼠标在显示器的屏幕上移动或执行任意的操作任务。例如,用户可以通过点击鼠标实现对显示器屏幕中央位置图片的操作。一种实现方式中,鼠标的光标在显示器屏幕中显示的位置与在手机屏幕中显示的位置对应。例如,用户在手机屏幕中央晃动鼠标,鼠标的光标可以从手机屏幕中央位置移动至显示器屏幕中央位置。又例如,用户在手机屏幕偏左侧晃动鼠标,鼠标的光标可以从手机屏幕偏左侧位置移动到显示器屏幕偏左侧位置。另一种实现方式中,鼠标的光标在显示器屏幕中显示的位置可以为设定的默认位置,此时,用户在手机屏幕的任意位置晃动鼠标,鼠标的光标会从手机屏幕移动至显示器屏幕中的默认位置,示例性的,该默认位置可以为显示器屏幕中央。
示例性的,输入设备800为触摸板。如图6(c)所示,输入设备800可以是第一电子设备400的外设,也可以是第二电子设备500的外设,本申请对此不作限定。用户可以通过手指在触摸屏上画出预设形状“C”,以实现鼠标光标从手机屏幕移动至显示器的目的。
如图7所示,示出了本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为显示器,输入设备600为鼠标为例进行说明。
如图7(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,本申请对此不作限定。用户将手机与显示器进行有线或无线连接,手机的屏幕为第一屏幕,显示器的屏幕为第二屏幕。用户将鼠标连接在手机上。示例性的,显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,鼠标的光标显示在手机屏幕的中央位置。用户通过指关节在手机屏幕中央位置点击或敲击两次屏幕,可以触发鼠标的光标移动到如图7(b)中所示的显示器屏幕的中央。也就是说,手机不仅可以根据用户在预设形状晃动鼠标判定用户意图,也可以根据用户指关节的做出或者画出的手势判定用户意图。一种实现方式中,鼠标的光标在显示器屏幕中显示的位置与在手机屏幕中的显示位置对应。例如,用户在手机屏幕中央点击或敲击屏幕,鼠标的光标可以从手机屏幕中央位置移动至显示器屏幕中央位置。又例如,用户在手机屏幕偏左侧点击或敲击屏幕,鼠标的光标可以从手机屏幕偏左侧位置移动到显示器屏幕偏左侧位置。另一种实现方式中,鼠标在显示器屏幕中显示的位置可以为设定的默认位置,此时,用户在手机屏幕的任意位置点击或敲击屏幕,鼠标的光标会从手机屏幕移动至显示器屏幕中的默认位置,示例性的,该默认位置可以为显示器屏幕中央。
应理解,手机中的键鼠管理模块根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标从手机的屏幕移动至显示器的屏幕),也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在显示器上显示的位置(例如,如图6(b)或图7(b)所示的显示器屏幕的中央位置)。示例性的,鼠标的光标在显示器上显示的位置与原处于手机上的位置可以具有对应关系。该对应关系可以是,鼠标的光标显示在显示器上的中央位置与原处于手机上的中央位置相对应;或者,鼠标的光标显示在显示器屏幕中偏左侧位置与原处于手机屏幕中偏左侧的位置相对应;或者,鼠标的光标显示在显示器屏幕中默认位置与原处理手机的任意位置相对应,其中,默认位置可以为显示器屏幕的中央。本申请对于鼠标的光标在显示器上显示的位置与原处于手机上的位置的具体对应关系不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户在手机屏幕中央以预设形状晃动或者用户通过指关节在手机屏幕中央位置双击屏幕),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕上显示的对应位置或默认位置。该方法能够使得光标可以在不同的屏幕之间自由移动,并且使得光标可以直接显示于目标屏幕的对应位置或默认位置,方便用户执行下一步操作。可以进一步提高用户使用多个屏幕时的体验感。
如图8所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为显示器为例进行说明。
如图8(a)所示,用户将手机与显示器进行有线或无线连接,手机的屏幕为第一屏幕,显示器的屏幕为第二屏幕。用户将鼠标连接在手机上。显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。用户在手机中对鼠标显示的屏幕进行系统设置,通过系统设置鼠标显示于外接屏幕(显示器屏幕),可以实现鼠标的光标从手机向显示器的移动。例如,如图8(a)所示,用户通过鼠标点击系统设置中的外设屏幕设置控件801,手机显示外设屏幕设置GUI。用户通过鼠标点击外设屏幕设置GUI中的外接屏幕控件802,实现鼠标的光标从手机向显示器的移动。随后,用户可以将鼠标在显示器的屏幕上移动或执行任意的操作任务。例如,用户通过系统设置,使得鼠标的光标从手机屏幕上移动至如图8(b)所示的显示器屏幕中央位置。示例性的,通过系统设置移动鼠标时,鼠标的光标在目标屏幕上的显示位置可以默认为目标屏幕的中央位置。此时,用户可以通过点击鼠标实现对显示器屏幕中央位置图片的操作。
应理解,手机中的键鼠管理模块可以根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标的光标所在的屏幕(例如,将鼠标从手机的屏幕移动至显示器的屏幕),也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在显示器中显示的位置(例如,如图8(b)所示默认的显示器屏幕的中央位置)。当然,鼠标光标在显示器中显示的位置可以是预先设定的任意位置,本申请实施例对此不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户在手机中对鼠标显示的屏幕进行系统设置),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕显示的对应位置或默认位置。该方法能够使得光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,有助于提高用户使用多个屏幕时的体验感。
在一芯多屏的场景下,第一电子设备400常与多个第二电子设备有线或无线连接。下面以一个第一电子设备400分别与第二电子设备500和第三电子设备700连接为例,对本申请实施例中光标显示的方法进行说明。
如图9所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。
如图9(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置,示例性的,鼠标的光标显示于手机的屏幕上。用户通过从左到右移动鼠标,使得鼠标的光标显示在手机上的光标到达手机屏幕的右侧边缘。当鼠标继续向右侧移动时,鼠标的光标首先显示在第一显示器的左侧边缘。跟随鼠标继续向右移动,鼠标的光标会移动至第一显示器的右侧边缘。当鼠标继续向右侧移动时,鼠标的光标可以如图9(b)中显示在第二显示器的左侧边缘。这一过程,可以实现鼠标的光标在手机与多个显示器之间的移动。当鼠标移动至第二显示屏的屏幕上之后,用户可以将鼠标的光标在第二显示器的屏幕上移动或执行任意的操作任务。可以理解,用户通过从右到左移动鼠标,也可以实现鼠标的光标从第二显示器到第一显示器到手机的移动,该过程与上述过程相反,在此不再赘述。
应理解,如图9所示的第一显示器和第二显示器均位于手机的右侧,此为预先设定好的方向。该方向可以是用户在手机或显示器界面上设定的预设方向;也可以是手机或显示器通过感知其相对位置确定的预设方向;也可以是手机或显示器感知其相对位置后,用户进一步调整所确定的预设方向。可以将预设方向设置为显示器相对于手机的任意方向,本申请对此不作限定。手机中的键鼠管理模块可以根据用户意图确定用户想要将鼠标的光标从手机移动至显示器。同时,屏幕管理模块移动鼠标的光标所在的屏幕(例如,将鼠标的光标从手机的屏幕移动至第二显示器的屏幕),也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,第二显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在第二显示器上显示的位置(例如,如图9(b)所示的第二显示器屏幕的左侧边缘的位置)。示例性的,鼠标光标在第二显示器上显示的位置与原处于手机屏幕上的位置可以具有对应关系。该对应关系可以是,鼠标光标显示在第二显示器上的左侧边缘位置与原处于手机上的右侧边缘位置相对应;或者,鼠标光标显示在第二显示器的默认位置与原处于手机上的右侧边缘位置相对应。其中,默认位置可以为第二显示器的中央位置。本申请对于鼠标光标在显示器上显示的位置与原处于手机上的位置的具体对应关系不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户通过移动鼠标至手机的边缘并继续向外移动),并根据用户意图选择鼠标的光标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕显示的对应位置或默认位置。该方法能够使得光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,有助于提高用户使用多个屏幕时的体验感。
如图10所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器为例进行说明。
示例性的,输入设备600为鼠标。如图10(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,鼠标显示在手机屏幕的中央位置。用户在手机屏幕中央以预设形状晃动或者旋转鼠标,可以触发鼠标的光标移动到对应的显示器屏幕的中央位置。例如,如图10(a)所示,用户在手机屏幕中央以预设形状“C”晃动鼠标,鼠标的光标可以直接从手机移动至第一显示器;如图10(b)所示,用户在手机屏幕中央以预设形状“S”晃动鼠标,鼠标的光标可以直接从手机移动至第二显示器。随后,用户可以将鼠标的光标在第一显示器或第二显示器的屏幕上移动或执行任意的操作任务。例如,用户可以通过点击鼠标实现对第一显示器或第二显示器屏幕中央位置图片的操作。一种实现方式中,鼠标的光标在第一显示器和第二显示器屏幕中显示的位置与在手机屏幕中显示的位置对应。例如,用户在手机屏幕中央晃动鼠标,鼠标的光标从手机屏幕中央位置移动至第一显示器屏幕或第二显示器屏幕中央位置。又例如,用户在手机屏幕偏左侧晃动鼠标,鼠标的光标可以从手机屏幕偏左侧位置移动到第一显示器屏幕或第二显示器屏幕偏左侧位置。另一种实现方式中,鼠标的光标在第一显示器和第二显示器屏幕中显示的位置可以为设定的默认位置,此时,用户在手机屏幕的任意位置晃动鼠标,鼠标的光标会从手机屏幕移动至第一显示器屏幕或第二显示器屏幕中的默认位置,示例性的,该默认位置可以为屏幕中央。
示例性的,输入设备800为触摸板。输入设备800可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。如图10(c)所示,用户可以通过手指在触摸屏上画出预设形状“C”,以实现鼠标光标从手机屏幕移动至第一显示器的目的。如图10(d)所示,用户可以通过手指在触摸屏上画出预设形状“S”,以实现鼠标光标从手机屏幕移动至第二显示器的目的。
如图11所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。
如图11(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,显示在手机屏幕的中央位置。如图11(a)所示,用户通过指关节在手机屏幕中央位置点击两次屏幕,鼠标的光标可以直接从手机移动至第一显示器;如图11(b)所示,用户通过指关节在手机屏幕中央位置点击三次屏幕,鼠标的光标可以直接从手机移动至第二显示器。随后,用户可以将鼠标的光标在第一显示器或第二显示器的屏幕上移动或执行任意的操作任务。例如,用户可以通过点击鼠标实现对第一显示器或第二显示器屏幕中央位置图片的操作。一种实现方式中,鼠标的光标在第一显示器和第二显示器屏幕中显示的位置与在手机屏幕中显示的位置对应。例如,用户通过指关节点击手机屏幕中央位置,鼠标的光标从手机屏幕中央位置移动至第一显示器屏幕或第二显示器屏幕中央位置。又例如,用户在手机屏幕偏左侧点击屏幕,鼠标的光标可以从手机屏幕偏左侧位置移动到第一显示器屏幕或第二显示器屏幕偏左侧位置。另一种实现方式中,鼠标的光标在第一显示器和第二显示器屏幕中显示的位置可以为设定的默认位置,此时,用户在手机屏幕的任意位置点击屏幕,鼠标的光标会从手机屏幕移动至第一显示器屏幕或第二显示器屏幕中的默认位置,示例性的,该默认位置可以为屏幕中央。
应理解,手机中的键鼠管理模块根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标从手机的屏幕移动至显示器的屏幕)。也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,第一显示器或第二显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在显示器中显示的位置。示例性的,鼠标光标所在第一显示器或第二显示器的位置与原处于手机屏幕上的位置具有对应关系。该对应关系可以是,鼠标显示在第一显示器或第二显示器屏幕的中央位置与原处于手机屏幕上的中央位置相对应;或者,鼠标显示在第一显示器或第二显示器屏幕的偏左侧位置与原处于手机屏幕上的偏左侧位置相对应;或者鼠标光标显示在第一显示器或第二显示器的默认位置与原处于手机屏幕的任意位置相对应,其中,默认位置可以为第一显示器或第二显示器的中央位置。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户在手机屏幕中央以预设形状晃动或者用户通过指关节在手机屏幕中央位置点击屏幕),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕上显示的对应位置或默认位置。该方法能够使得光标可以在不同的屏幕之间自由移动,并且使得光标可以直接显示于目标屏幕的对应位置或默认位置,方便用户执行下一步操作。可以进一步提高用户使用多个屏幕时的体验感。
为方便理解,下面示出用户通过晃动鼠标,或者用户通过点击屏幕实现鼠标光标在不同屏幕之间连续移动的方法。
如图12所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。图12示出了在图10场景下,用户通过晃动鼠标实现鼠标的光标从第一显示器移动至第二显示器。
如图12(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,鼠标显示在手机屏幕的中央位置。用户在手机屏幕中央以预设形状晃动或者旋转鼠标,可以触发鼠标移动到对应的显示器屏幕的中央位置。
在一种实现方式中,如图12(a)所示,用户在手机屏幕中央以预设形状“C”晃动鼠标,鼠标的光标首先可以从手机移动至第一显示器;如图12(b)所示,用户在第一显示器的屏幕中央再次以预设形状“C”晃动鼠标,鼠标的光标可以从第一显示器移动至第二显示器。
示例性的,在上述实现方式中,用户以预设形状“C”晃动鼠标,对应于鼠标光标可以向右侧的电子设备移动。用户每次以预设形状“C”晃动鼠标表示鼠标光标向右侧的电子设备移动一次。可以随着用户连续移动鼠标,鼠标光标会直至移动到目标屏幕上。
在另一种实现方式中,当用户在手机屏幕的中央以预设形状“C”晃动鼠标,使得鼠标光标显示在第一显示器上时,如图12(c)所示,用户又在第一显示器的屏幕中央以预设形状“S”晃动鼠标,鼠标的光标可以从第一显示器移动至第二显示器。
示例性地,在上述实现方式中,用户以预设形状“C”晃动鼠标,鼠标光标可以从手机屏幕移动至第一显示器的屏幕,也就是说,预设形状“C”对应的目标屏幕为第一显示器的屏幕。用户以预设形状“S”晃动鼠标,鼠标光标可以从第一显示器的屏幕移动至第二显示器的屏幕,也就是说,预设形状“S”对应的目标屏幕为第二显示器的屏幕。用户可以通过连续晃动不同的预设形状,使得鼠标光标移动到相应的目标屏幕上。
如图13所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。
如图13(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,显示在手机屏幕的中央位置。
在一种实现方式中,如图13(a)所示,用户通过指关节在手机屏幕中央位置点击两次屏幕,鼠标的光标首先可以从手机移动至第一显示器;如图13(b)所示,用户在第一显示器的屏幕中央再次点击两次屏幕,鼠标的光标可以从第一显示器移动至第二显示器。
示例性的,在上述实现方式中,用户点击两次屏幕,对应于鼠标光标可以向右侧的电子设备移动。用户每次点击两次屏幕表示鼠标光标向右侧的电子设备移动一次。可以随着用户连续点击屏幕,鼠标光标会直至移动到目标屏幕上。
在另一种实现方式中,当用户在手机屏幕的点击两次屏幕,使得鼠标光标显示在第一显示器上时,如图13(c)所示,用户又在第一显示器的屏幕中央点击三次屏幕,鼠标的光标可以从第一显示器移动至第二显示器。
示例性地,在上述实现方式中,用户点击两次屏幕,鼠标光标可以从手机屏幕移动至第一显示器的屏幕,也就是说,点击两次屏幕对应的目标屏幕为第一显示器的屏幕。用户点击三次屏幕,鼠标光标可以从第一显示器的屏幕移动至第二显示器的屏幕,也就是说,点击三次屏幕对应的目标屏幕为第二显示器的屏幕。用户可以通过点击屏幕不同次数,使得鼠标光标移动到相应的目标屏幕上。
在再一种实现方式中,用户点击的屏幕可以为鼠标光标移动的目标屏幕。例如,用户点击两次第一显示器的屏幕,鼠标光标可以移动至第一显示的屏幕;用户点击两次手机屏幕,鼠标光标可以移动至手机屏幕。用户可以通过点击不同设备的屏幕,使得鼠标光标移动到所点击的目标屏幕上。
应理解,图12和图13示出了用户晃动鼠标以及用户点击屏幕两种方式移动鼠标光标的方式,可以实现鼠标光标从手机屏幕移动至第一显示器的屏幕,再移动至第二显示器的屏幕的过程。需要说明的是,连续移动鼠标光标的方式不限于以上所述方式。用户可以先通过晃动鼠标的方式将鼠标光标移动至第一显示器的屏幕,再通过点击屏幕的方式将鼠标光标移动至第二显示器的屏幕;或者,用户可以先通过移动鼠标的光标至手机屏幕边缘并继续向边缘移动的方式将鼠标的光标移动至第一显示器的屏幕,再通过晃动鼠标或点击屏幕的方式将鼠标光标移动至第二显示器的屏幕。
为了方便理解,下面示出用户通过晃动鼠标,或者用户通过点击屏幕实现鼠标光标从目标屏幕移动至原屏幕的方法。
如图14所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。
如图14(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,鼠标显示在手机屏幕的中央位置。用户在手机屏幕中央以预设形状晃动或者旋转鼠标,可以触发鼠标移动到对应的显示器屏幕的中央位置。
在一种实现方式中,如图14(a)所示,用户在手机屏幕中央以预设形状“C”晃动鼠标,鼠标的光标可以从手机移动至第一显示器;如图14(b)所示,用户在第一显示器的屏幕中央以预设形状“V”晃动鼠标,鼠标的光标可以从第一显示器移动至手机屏幕。
在另一种实现方式中,如图14(c)所示,用户在手机屏幕中央以预设形状“S”晃动鼠标,鼠标的光标可以从手机移动至第二显示器;如图14(d)所示,用户在第二显示器的屏幕中央以预设形状“V”晃动鼠标,鼠标的光标可以从第二显示器移动至手机屏幕。
需要说明的是,也可以预设用户以预设形状“V”晃动鼠标表示将鼠标光标移动至上一次鼠标显示的屏幕。例如,当鼠标光标上一次显示在第一显示器上时,用户在第二显示器的屏幕中央以预设形状“V”晃动鼠标,鼠标的光标从第二显示器移动至第一显示器。
如图15所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器,输入设备600为鼠标为例进行说明。
如图15(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器均位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。例如,显示在手机屏幕的中央位置。
示例性的,以点击两次屏幕对应的目标屏幕为第一显示器的屏幕,点击三次屏幕对应的目标屏幕为第二显示器的屏幕,点击四次屏幕对应的目标屏幕为手机屏幕为例。如图15(a)所示,用户在手机屏幕中央位置点击两次屏幕,鼠标的光标可以从手机移动至第一显示器;如图15(b)所示,用户在第一显示器的屏幕中央点击四次屏幕,鼠标的光标可以从第一显示器移动至手机屏幕。如图15(c)所示,用户在手机屏幕中央点击三次屏幕,鼠标的光标可以从手机移动至第二显示器;如图15(d)所示,用户在第二显示器的屏幕中央点击四次屏幕,鼠标的光标可以从第二显示器移动至手机屏幕。
需要说明的是,也可以预设用于点击四次屏幕(或其他操作)表示将鼠标光标移动至上一次鼠标显示的屏幕。例如,当鼠标光标上一次显示在第一显示器上时,用户在第二显示器的屏幕中央点击四次,鼠标的光标从第二显示器移动至第一显示器。或者,用户可以通过点击不同设备的屏幕,使得鼠标光标移动到所点击的目标屏幕上。
如图16所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器为例进行说明。
如图16(a)所示,用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器和第二显示器位于手机的右侧。当鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。用户在手机中对鼠标显示的屏幕进行系统设置,通过系统设置鼠标显示于外接屏幕1(第一显示器的屏幕)或外接屏幕2(第二显示器的屏幕),可以实现鼠标的光标从手机向第一显示器或第二显示器的移动。例如,如图16(a)所示,用户通过鼠标点击系统设置中的外设屏幕设置控件1601,手机显示外设屏幕设置GUI。用户通过鼠标点击外设屏幕设置GUI中的外接屏幕2控件1602,实现鼠标的光标从手机向第二显示器的移动。随后,用户可以将鼠标的光标在第二显示器的屏幕上移动或执行任意的操作任务。例如,用户通过系统设置,使得鼠标的光标从手机屏幕上移动至如图16(b)所示的第二显示器屏幕中央位置。可以理解为,通过系统设置移动鼠标时,鼠标的光标在目标屏幕上的显示位置可以默认为目标屏幕的中央位置。此时,用户可以通过点击鼠标实现对显示器屏幕中央位置图片的操作。
应理解,手机中的键鼠管理模块根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标从手机的屏幕移动至第二显示器的屏幕)。也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,第二显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在显示器中显示的位置(例如,如图12(b)所示默认的第二显示器屏幕的中央位置)。当然,鼠标光标在显示器中显示的位置可以是预先设定的任意位置,本申请实施例对此不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户在手机中对鼠标显示的屏幕进行系统设置),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕的对应位置。该方法能够使得光标可以在不同的屏幕之间自由移动,在多个屏幕的场景下可以直接移动到目标屏幕上。从而使得多个屏幕能够共用一个光标执行操作,有助于提高用户使用多个屏幕时的体验感。
如图17所示,示出本申请实施例提供的另一组GUI。下面以第一电子设备400为手机,第二电子设备500为第一显示器,第三电子设备700为第二显示器显示器,输入设备600为鼠标为例进行说明。
如图17(a)所示,输入设备600可以是第一电子设备400的外设,也可以是第二电子设备500的外设,也可以是第三电子设备700的外设,本申请对此不作限定。用户将手机与第一显示器和第二显示器进行有线或无线连接,手机屏幕为第一屏幕,将第一显示器作为手机的第二屏幕,将第二显示器作为手机的第三屏幕。用户将鼠标连接在手机上。示例性的,第一显示器位于手机的左侧,第二显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。用户通过从左到右移动鼠标,使得鼠标显示在手机上的光标到达手机屏幕的右侧边缘。当鼠标继续向右侧移动时,鼠标的光标可以显示在如图17(a)中所示的第二显示器的左侧边缘。用户通过从右到左移动鼠标,使得鼠标显示在手机的光标到达手机屏幕的左侧边缘。当鼠标继续向左侧移动时,鼠标的光标可以显示在如图17(b)中所示的第一显示器的右侧边缘。这一过程,可以实现鼠标在手机与多个显示器之间的移动。随后,用户可以将鼠标在第一显示器或第二显示器的屏幕上移动或执行任意的操作任务。
应理解,如图17所示的第一显示器位于手机的左侧,第二显示器位于手机的右侧,此为预先设定好的方向。该方向可以是用户在手机或显示器界面上设定的预设方向;也可以是手机或显示器通过感知其相对位置确定的预设方向;也可以是手机或显示器感知其相对位置后,用户进一步调整所确定的预设方向。可以将预设方向设置为显示器相对于手机的任意方向,本申请对此不作限定。手机中的键鼠管理模块根据用户意图确定用户想要将鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标从手机的屏幕移动至第一显示器或第二显示器的屏幕)。也就是说,修改输入事件(鼠标移动事件)上报的屏幕ID。这样可以使得输入事件被发送至被选择的屏幕上(例如,第一显示器或第二显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标在第一显示器或第二显示器中显示的位置(例如,如图17(a)所示的第二显示器屏幕的左侧边缘的位置,或如图17(b)所示的第一显示器屏幕的右侧边缘的位置)。示例性的,鼠标光标所在第二显示器或第一显示器上显示的位置与原处于手机屏幕上的位置可以具有对应关系。该对应关系可以是,鼠标光标显示在第二显示器上的左侧边缘位置与原处于手机上的右侧边缘位置相对应,鼠标光标在第一显示器上右侧边缘位置与原处于手机上的左侧边缘位置相对应;或者,鼠标光标显示在第二显示器的默认位置与原处于手机上的右侧边缘位置相对应,鼠标光标在第一显示器的默认位置与原处于手机上的左侧边缘位置相对应。其中默认位置可以为第一显示器或第二显示器的中央位置。本申请对于鼠标光标在显示器上显示的位置与原处于手机上的位置的具体对应关系不作限定。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户通过移动鼠标至手机的边缘并继续向外移动),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕中显示的对应位置。该方法能够使得光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,有助于提高用户使用多个屏幕时的体验感。
需要说明的是,上文中所述的用户意图可以是如图5、图9或图17所示的用户将鼠标移动至第一屏幕边缘并继续向外移动;可以是如图6、图10、图12或图14所示的用户以预设形状晃动鼠标;可以是如图7、图11、图13或图15所示的用户通过指关节点击屏幕;可以是如图8或图16所示的用户更改系统设置。应理解,本申请中体现用户意图的方式包括但不限于以上几种,具体实现可以根据实际需要进行设置,本申请对用户意图的具体实现方式不作限定。
为了方便理解,图18示出了一种光标显示的方法示意性流程图。该方法可应用于如图5至图17所示的场景中,可应用于如图4所示的第一电子设备400的系统架构中。下面对该方法1800详细说明。
S1801,窗口管理服务模块感知鼠标移动。
S1802,底层输入模块控制鼠标在第一屏幕上移动。
S1803,底层输入模块控制向第一屏幕分发输入事件。
S1804,底层输入模块将鼠标移动事件传递至键鼠管理模块。
鼠标作为输入设备,也可被称为外设。鼠标的光标在第一屏幕可跟随用户的操作自由移动。伴随鼠标移动事件的其他输入事件也会被显示于第一屏幕上。其他的输入事件例如可以是鼠标点击事件。其中,第一屏幕可以是多个屏幕中的任意一个、可以理解为,第一屏幕是鼠标移动的原屏幕。第二屏幕是鼠标移动的目标屏幕。例如,当鼠标光标从手机屏幕移动至电脑屏幕时,手机屏幕为第一屏幕,电脑屏幕为第二屏幕。当鼠标光标从电脑屏幕移动至手机屏幕是,电脑屏幕为第一屏幕,手机屏幕为第二屏幕。
需要说明的是,上述步骤S1802,S1803与步骤S1801的执行没有先后顺序的限定,可以先执行步骤S1801,再执行步骤S1802,S1803;也可以先执行步骤S1802,S1803,再执行步骤S1801;或者同时执行步骤S1801和步骤S1802,S1803;本申请对此不予限制。
S1805,键鼠管理模块判定用户意图。
窗口管理服务模块感知鼠标移动,将鼠标移动事件传递至键鼠管理模块。键鼠管理模块根据用户对鼠标等输入设备的操作,判定用户意图。其中,用户对鼠标的操作可以包括以下至少一项:鼠标移动到屏幕边缘并将继续向外移动、用户以预设形状晃动鼠标、用户通过鼠标画出指定手势内容、用户通过指关节画出手势。
S1806,键鼠管理模块将用户意图发送至屏幕管理模块。
S1807,屏幕管理模块选择第二屏幕。
S1808,屏幕管理模块将第二屏幕的信息发送至键鼠管理模块。
S1809,键鼠管理模块修改输入事件上报的第二屏幕。
S1810,键鼠管理模块将第二屏幕的信息发送至底层输入模块。
屏幕管理模块可以根据用户意图选择第二屏幕,第二屏幕可以理解为显示器的屏幕,也可以理解为鼠标移动的目标屏幕。屏幕管理模块确定第二屏幕的ID等信息,并将该信息发送至键鼠管理模块。键鼠管理模块根据用户意图,修改输入事件上报的屏幕ID。也就是说,移动鼠标至第二屏幕,并使得输入事件被发送到第二屏幕上。键鼠管理模块还可以根据用户意图设置鼠标在第二屏幕上显示的位置,鼠标光标所在第二屏幕的位置与原所在第一屏幕的位置相对应。该对应关系可以是,鼠标光标在第二屏幕的中央位置与原所在第一屏幕的中央位置相对应;或者,鼠标光标在第二屏幕的左侧(或右侧)位置与原所在第一屏幕的左侧(或右侧)位置相对应;或者,鼠标光标在第二屏幕的默认位置与原所在第一屏幕的任一位置向对应,其中,默认位置可以为中央位置。
当然,在如上文所述的图9至图17的场景中,涉及到一个第一电子设备400可以连接多个外接屏幕(包括第一显示器和第二显示器)时,屏幕管理模块还可以根据用户意图选择第三屏幕(例如第二显示器的屏幕),并根据用户意图设置鼠标在第三屏幕上显示的位置。
S1811,底层输入模块控制鼠标在第二屏幕上移动。
S1812,底层输入模块控制向第二屏幕分发输入事件。
应理解,在一芯多屏的场景中实现了鼠标可以在多个屏幕之间自由移动的基础上,为了方便用户在多个屏幕之间的数据交互,本申请实施例提供了一种光标显示的方法,能够使得多个屏幕在之间的数据交互更加方便快捷。下面,对该方法进行详细介绍。
如图19所示,示出本申请实施例提供的另一组GUI。下面,以第一电子设备400为手机,第二电子设备500为显示器,拖拽对象为图片为例进行说明。
如图19(a)所示,用户将手机与显示器进行有线或无线连接,将显示器作为手机的第二屏幕。用户将鼠标连接在手机上。显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。手机与显示器可以显示不同的GUI。示例性的,手机显示相册应用程序(application,App)的界面,显示器显示社交App的界面。用户通过点击鼠标左键,将手机屏幕上的图片拖拽至手机的右侧边缘。继续拖拽,并保持鼠标左键按下,鼠标的光标与被拖拽的图片显示在显示器的左侧边缘。随着用户继续移动鼠标,图片可移动至如图19(a)所示的社交App界面的底部,用户可以将鼠标在显示器的屏幕上移动或执行任意的操作任务。应理解,跟随鼠标移动的拖拽对象会在手机与显示器的屏幕上表现出拖拽的显示效果。当用户松开鼠标左键时,该图片可输入到如图19(b)所示的输入框中,或者直接发送到如图19(b)所示的聊天界面中。这一过程,可以实现鼠标将图片从手机向显示器拖拽。当然,鼠标也可以实现将图片从显示器向手机的拖拽。
应理解,手机中的键鼠管理模块根据用户意图确定用户想要通过鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标的光标从手机的屏幕移动至显示器的屏幕)。也就是说,修改输入事件(鼠标事件)上报的屏幕ID。这样可以使得鼠标事件被发送至被选择的屏幕上(例如,显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标所在显示器的位置(例如,如图19(a)所示的显示器屏幕的左侧边缘的位置)。在鼠标的光标从手机的屏幕移动至显示器的屏幕的同时,手机中的拖拽管理模块确定正在发生拖拽事件,修改输入事件(拖拽事件)上报的屏幕ID,使得拖拽事件发送至被选择的屏幕上(例如,显示器的屏幕)。拖拽管理模块还可以修改拖拽效果上报的屏幕ID,使得拖拽效果显示在显示器的屏幕上。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户通过移动鼠标至手机的边缘并继续向外移动,同时鼠标拖拽对象),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕的对应位置。该方法能够使得光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,同时使得拖拽的对象可以更加便捷地在多个屏幕之间交互,有助于提高用户使用多个屏幕时的体验感。
如图20所示,示出本申请实施例提供的另一组GUI。下面,以第一电子设备400为手机,第二电子设备500为显示器,拖拽对象为窗口为例进行说明。
如图20(a)所示,用户将手机与显示器进行有线或无线连接,将显示器作为手机的第二屏幕。用户将鼠标连接在手机上。显示器位于手机的右侧。鼠标的光标可显示于上一次出现的位置。示例性的,鼠标的光标显示于手机的屏幕上。手机与显示器可以显示不同的GUI。示例性的,手机显示计算器App的界面,显示器显示社交App的界面。用户通过点击鼠标左键,将手机屏幕上的计算器窗口1601拖拽至手机的右侧边缘,计算器窗口1601的显示效果为部分显示于手机屏幕,部分显示于显示器屏幕。继续拖拽,并保持鼠标左键按下,当计算器窗口2001完全显示于显示器屏幕上、或者计算器窗口1601拖入显示器屏幕的部分超过一定阈值时,用户松开鼠标左键,计算器窗口2001可显示于如图20(b)所示的显示器屏幕中,可选的,计算器窗口2001可以全屏或者非全屏显示在显示器屏幕中。此时,手机屏幕可显示为主界面。这一过程,可以实现鼠标将计算器窗口1601从手机向显示器拖拽。随后,用户可以将鼠标在显示器的屏幕上移动或执行任意的操作任务。当然,鼠标也可以实现将计算器窗口2001从显示器向手机的拖拽。
应理解,手机中的键鼠管理模块根据用户意图确定用户想要通过鼠标从手机移动至显示器。同时,屏幕管理模块移动鼠标所在的屏幕(例如,将鼠标的光标从手机的屏幕移动至显示器的屏幕)。也就是说,修改输入事件(鼠标事件)上报的屏幕ID。这样可以使得鼠标被发送至被选择的屏幕上(例如,显示器的屏幕)。键鼠管理模块还可以根据用户意图确定鼠标光标所在显示器的位置。在鼠标的光标从手机的屏幕移动至显示器的屏幕的同时,手机中的拖拽管理模块确定正在发生拖拽事件,修改输入事件(拖拽事件)上报的屏幕ID,使得拖拽事件被发送至被选择的屏幕上(例如,显示器的屏幕)。拖拽管理模块还可以修改拖拽效果上报的屏幕ID,使得拖拽效果显示在显示器的屏幕上。
本申请实施例提供的光标显示的方法,通过获取用户意图(例如,用户通过移动鼠标至手机的边缘并继续向外移动,同时鼠标拖拽对象),并根据用户意图选择鼠标移动的目标屏幕,修改输入事件上报的目标屏幕。这使得后续的输入事件会被发送至被选择的目标屏幕上。同时,在获取用户意图后,可以设置鼠标光标在目标屏幕的对应位置。该方法能够使得光标可以在不同的屏幕之间自由移动,从而使得多个屏幕能够共用一个光标执行操作,同时使得拖拽对象可以更加便捷地在多个屏幕之间交互,有助于提高用户使用多个屏幕时的体验感。
示例性的,拖拽对象可以是如图19中所示的图片、如图20中所示的窗口、应用程序、数据、文件或文件等。申请对拖拽对象的具体形式或内容不作限定。
需要说明的是,上文中所述的输入事件包括鼠标事件和拖拽事件。在一芯多屏场景中,用户可以通过如图19和20所示的方式,通过选中拖拽对象移动至屏幕边缘并继续向外移动的同时,将拖拽对象也移动至目标屏幕;用户也可以通过选中拖拽对象并以预设形状晃动鼠标的方式,在移动鼠标的同时显示出拖拽对象也被一并移动的效果。应理解,本申请体现鼠标移动且拖拽对象也被移动的显示效果包括但不限于以上几种,本申请对此不作具体限定。
为了方便理解,图21示出了一种光标显示的方法示意性流程图。该方法可应用于如图19至图20所示的场景中,可应用于如图4所示的第一电子设备400的系统架构中。下面对该方法2100详细说明。
S2101,窗口管理服务模块感知拖拽事件。
S2102,底层输入模块控制拖拽在第一屏幕上执行。
S2103,底层输入模块控制向第一屏幕分发输入事件。
需要说明的是,上述步骤S2102,S2103与步骤S2101的执行没有先后顺序的限定,可以先执行步骤S2101,再执行步骤S2102,S2103;也可以先执行步骤S2102,S2103,再执行步骤S2101;或者同时执行步骤S2101和步骤S2102,S2103;本申请对此不予限制。
S2104,底层输入模块将拖拽事件传递至键鼠管理模块。
S2105,键鼠管理模块处理鼠标数据。
当用户通过鼠标拖拽一定对象时,底层输入模块会将拖拽时间传递键鼠管理模块。其中,拖拽事件常与鼠标移动事件同时发生。因此,键鼠管理模块可以对其中的鼠标数据进行处理,并确定当前发生了鼠标移动事件。
S2106,键鼠管理模块向屏幕管理模块发送请求第二屏幕信息。
S2107,屏幕管理模块选择第二屏幕。
S2108,屏幕管理模块将第二屏幕的信息发送至拖拽管理模块。
S2109,键鼠管理模块将鼠标移动信息发送至拖拽管理模块。
S2110,拖拽管理模块修改拖拽事件信息。
S2111,拖拽管理模块将拖拽事件显示位置信息发送至窗口管理服务模块。
S2112,拖拽管理模块将拖拽事件分发屏幕信息发送至底层输入模块。
应理解,在发生拖拽事件的同时伴随有鼠标移动事件的反生。键鼠管理模块确定有鼠标在不同屏幕之间移动时,拖拽管理模块检测当前是否发生拖拽事件。当拖拽管理模块检测到当前发生拖拽事件时,拖拽管理模块修改拖拽事件信息。也就是说,拖拽管理模块修改拖拽事件上报的目标屏幕ID,以便使得拖拽事件被发送到目标屏幕上。其中,目标屏幕可以是第二屏幕,也可以是涉及到多个屏幕时的多个屏幕中的其中一个(例如,第一显示器和第二显示器的屏幕中的一个)。
S2113,底层输入模块控制拖拽在第二屏幕上执行。
S2114,底层输入模块向第二屏幕分发输入事件。
经过上述步骤,在拖拽事件发生时,拖拽对象的拖拽效果会显示在目标屏幕上,此后,拖拽事件等输入事件也会向该目标屏幕分发。应理解,键盘作为一种输入设备可以跟随鼠标的移动至目标屏幕的一定位置,并且在该位置处执行输入操作。
图22示出了本申请提供的一种光标显示的方法2200,该方法可应用于如图4所示的第一电子设备的系统架构中,详细步骤如下:
S2201,第一电子设备在第一屏幕上显示光标。
应理解,第一电子设备与第二电子设备投屏连接。连接方式可以为蓝牙、无线通信技术Wi-Fi或有线等方式。示例性的,第一电子设备将社交App的界面投屏至第二电子设备,此时第二电子设备上显示第一电子设备的社交App界面,第一电子设备可关闭当前社交App界面。也就是说,第一电子设备与第二电子设备投屏连接时,两个电子设备显示的界面可以相同也可以不同,本申请对此不作限定。
应理解,第一屏幕为第一电子设备的屏幕,光标为第一电子设备的输入设备在屏幕上的显示方式。
S2202,第一电子设备响应于接收到用户的第一操作,控制光标从第一屏幕移动至第二屏幕。
应理解,第二屏幕为第二电子设备的屏幕。第一屏幕与第二屏幕为不同的逻辑屏幕。第一电子设备和第二电子设备处于光标显示系统内。
需要说明的是,第一电子设备响应于接收到用户的第一操作,控制光标从第一屏幕移动至第二屏幕。也可以理解为,光标在第二屏幕上显示时,光标在第一屏幕上显示消失,从而产生光标从第一屏幕移动至第二屏幕的视觉效果。
在一些实施例中,第一电子设备根据第一操作确定第二屏幕的标识,第二屏幕的标识与第一屏幕的标识不同。第一电子设备根据第二屏幕的标识确定第二屏幕为目标屏幕。
在一些实施例中,第一电子设备发送输入事件至第二屏幕。输入事件包括以下至少一项:鼠标移动事件、鼠标点击事件或拖拽事件。其中,第一电子设备发送输入事件至第二屏幕,也可以理解为,第一电子设备发送输入事件至第二电子设备。
在一些实施例中,第一电子设备响应于接收到用户的第一操作包括:第一电子设备响应于接收到用户在第一屏幕上以预设路径移动光标;或者第一电子设备响应于接收到用户在第一屏幕或第二屏幕上敲击;或者第一电子设备响应于接收到用户在第一电子设备上系统设置。其中第一操作用于表示用户意图。
在一些实施例中,第一电子设备响应于接收到用户在第一屏幕上以预设路径移动所述光标,包括:第一电子设备响应于接收到用户在第一屏幕上移动所述光标至第一屏幕的边缘并继续移动;或者第一电子设备响应于接收到用户在第一屏幕上以预设形状晃动所述光标。
示例性的,第一电子设备响应于接收到用户在第一屏幕上移动所述光标至第一屏幕的边缘并继续移动可如图5所示;第一电子设备响应于接收到用户在第一屏幕上以预设形状晃动所述光标可如图6所示,第一电子设备响应于接收到用户在第一屏幕上敲击可如图7所示,第一电子设备响应于接收到用户在第一电子设备上系统设置可如图8所示。
在一些实施例中,第一电子设备确定第一电子设备与第二电子设备的位置关系,第一电子设备响应于接收到用户在第一屏幕上根据位置关系移动光标至第一屏幕的边缘并继续移动。应理解,第一电子设备与第二电子设备的位置关系也就是第一屏幕与第二屏幕的位置关系。在光标显示系统中,除了第一电子设备之外的其他电子设备也可以确定电子设备之间的位置关系,例如,第二电子设备确定第一电子设备与第二电子设备的位置关系。
在一些实施例中,第一电子设备响应于接收到用户的第二操作,确定第一电子设备与第二电子设备的位置关系。其中,用户的第二操作为用户的设置操作。或者,第一电子设备感知第二电子设备所在位置,确定第一电子设备与第二电子设备的位置关系。
示例性的,第二屏幕可位于第一屏幕的左侧或右侧,例如图9或图17所示。
在一些实施例中,第一电子设备响应于接收到用户的第一操作,确定光标在第二屏幕上的位置。
在一些实施例中,第一电子设备响应于接收到用户的第一操作,确定光标在第二屏幕上的位置与在第一屏幕上的位置相对应;或者,第一电子设备响应于接收到用户的第一操作,确定光标在第二屏幕上为默认位置。应理解,默认位置可以是第二屏幕的中央位置。
在一些实施例中,第一屏幕上显示有拖拽对象,第一电子设备响应于接收到用户对拖拽对象的第三操作,向第二电子设备发送输入事件,使得第二屏幕上显示从第一屏幕上拖拽来的拖拽对象。其中,用户的第三操作可以是用户的拖拽操作,输入事件可以是拖拽事件。
在一些实施例中,第一电子设备响应于接收到用户对第二屏幕上的拖拽对象的第四操作,向第二电子设备发送输入事件,使得第二屏幕上显示拖拽对象的移动效果。其中,用户的第四操作为用户的移动操作,输入事件可以是拖拽事件。
在一些实施例中,拖拽对象包括以下至少一项:文件、应用程序图标、文本、图片或窗口。
本申请实施例中,在一芯多屏的场景下,通过对感知用户意图并判定用户意图,能够动态移动光标所显示的屏幕,同时,将输入事件发送到输、光标所显示的屏幕上。这样,可以实现光标在不同屏幕之间的自由移动,也可以实现不同屏幕之间输入事件的传输。用户可以通过一个鼠标在多个屏幕之间自由移动光标,可以同时浏览多个屏幕上的内容,也可以实现多个屏幕之间内容的拖拽。该方法可以提高多个电子设备协同使用的使用效率,从而提高用户的使用体验。
本申请实施例提供一种计算机程序产品,当所述计算机程序产品在第一电子设备运行时,使得第一电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第一电子设备运行时,使得所述第一电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
本申请实施例提供一种芯片,所述芯片用于执行指令,当所述芯片运行时,执行上述实施例中的技术方案。其实现原理和技术效果类似,此处不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请实施例的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请实施例的具体实施方式,但本申请实施例的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请实施例揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请实施例的保护范围之内。因此,本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (28)

1.一种光标显示的方法,其特征在于,所述方法应用于第一电子设备,所述第一电子设备与第二电子设备投屏连接,所述方法包括:
所述第一电子设备在第一屏幕上显示光标,所述第一屏幕为所述第一电子设备的屏幕;
所述第一电子设备响应于接收到用户的第一操作,控制所述光标从所述第一屏幕移动至第二屏幕,所述第二屏幕为所述第二电子设备的屏幕,所述第一屏幕与所述第二屏幕为不同的逻辑屏幕。
2.根据权利要求1所述的方法,其特征在于,所述第一电子设备控制所述光标从所述第一屏幕移动至第二屏幕之前,所述方法还包括:
所述第一电子设备根据所述第一操作确定第二屏幕的标识,所述第二屏幕的标识与所述第一屏幕的标识不同;
所述第一电子设备根据所述第二屏幕的标识确定所述第二屏幕为目标屏幕。
3.根据权利要求2所述的方法,其特征在于,所述第一电子设备控制所述光标从第一屏幕移动至第二屏幕,包括:
所述第一电子设备发送输入事件至所述第二屏幕,所述输入事件包括以下至少一项:
鼠标移动事件、鼠标点击事件或拖拽事件。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述第一电子设备响应于接收到用户的第一操作,包括:
所述第一电子设备响应于接收到用户在所述第一屏幕上以预设路径移动所述光标;或者
所述第一电子设备响应于接收到用户在所述第一屏幕或所述第二屏幕上敲击;或者
所述第一电子设备响应于接收到用户在所述第一电子设备上系统设置。
5.根据权利要求4所述的方法,其特征在于,所述第一电子设备响应于接收到用户在所述第一屏幕上以预设路径移动所述光标,包括:
所述第一电子设备响应于接收到用户在所述第一屏幕上移动所述光标至所述第一屏幕的边缘并继续移动;或者
所述第一电子设备响应于接收到用户在所述第一屏幕上以预设形状晃动所述光标。
6.根据权利要求5所述的方法,其特征在于,所述第一电子设备响应于接收到用户在所述第一屏幕上移动所述光标至所述第一屏幕的边缘并继续移动,包括:
所述第一电子设备确定所述第一电子设备与所述第二电子设备的位置关系;
所述第一电子设备响应于接收到用户在所述第一屏幕上根据所述位置关系移动所述光标至所述第一屏幕的边缘并继续移动。
7.根据权利要求6所述的方法,其特征在于,所述第一电子设备确定所述第一电子设备与所述第二电子设备的位置关系,包括:
所述第一电子设备响应于接收到用户的第二操作,确定所述第一电子设备与所述第二电子设备的位置关系;或者
所述第一电子设备感知所述第二电子设备所在位置,确定所述第一电子设备与所述第二电子设备的位置关系。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述方法还包括:
所述第一电子设备响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置。
9.根据权利要求8所述的方法,其特征在于,所述第一电子设备响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置,包括:
所述第一电子设备响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置与在所述第一屏幕上的位置相对应;或者
所述第一电子设备响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上为默认位置。
10.根据权利要求3所述的方法,其特征在于,所述第一屏幕上显示有拖拽对象,所述方法还包括:
所述第一电子设备响应于接收到用户对所述拖拽对象的第三操作,向所述第二屏幕发送所述输入事件,使得所述第二屏幕上显示从所述第一屏幕上拖拽来的所述拖拽对象。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
所述第一电子设备响应于接收到用户对所述第二屏幕上的所述拖拽对象的第四操作,向所述第二屏幕发送所述输入事件,使得所述第二屏幕上显示所述拖拽对象的移动效果。
12.根据权利要求10或11所述的方法,其特征在于,所述拖拽对象包括以下至少一项:
文件、应用程序图标、文本、图片或窗口。
13.根据权利要求1至12中任一项所述的方法,其特征在于,所述第一电子设备与所述第二电子设备投屏连接,包括:
所述第一电子设备与所述第二电子设备通过以下至少一种方式投屏连接:
蓝牙、有线或无线通信技术Wi-Fi。
14.一种光标显示的系统,其特征在于,包括:第一电子设备和第二电子设备,所述第一电子设备与所述第二电子设备投屏连接;
所述第一电子设备,用于在第一屏幕上显示光标,所述第一屏幕为所述第一电子设备的屏幕;响应于接收到用户的第一操作,控制所述光标从所述第一屏幕移动至第二屏幕,所述第二屏幕为所述第二电子设备的屏幕,所述第一屏幕与所述第二屏幕为不同的逻辑屏幕;
所述第二电子设备,用于在所述第二屏幕上显示所述光标。
15.根据权利要求14所述的系统,其特征在于,所述第一电子设备控制所述光标从所述第一屏幕移动至第二屏幕之前,所述第一电子设备,还用于根据所述第一操作确定第二屏幕的标识,所述第二屏幕的标识与所述第一屏幕的标识不同;根据所述第二屏幕的标识确定所述第二屏幕为目标屏幕。
16.根据权利要求15所述的系统,其特征在于,所述第一电子设备控制所述光标从所述第一屏幕移动至第二屏幕,包括:
所述第一电子设备发送输入事件至所述第二屏幕,所述输入事件包括以下至少一项:鼠标移动事件、鼠标点击事件或拖拽事件。
17.根据权利要求14至16中任一项所述的系统,其特征在于,所述第一电子设备响应于接收到用户的第一操作,包括:
所述第一电子设备响应于接收到用户在所述第一屏幕上以预设路径移动所述光标;或者
所述第一电子设备响应于接收到用户在所述第一屏幕或所述第二屏幕上敲击;或者
所述第一电子设备响应于接收到用户在所述第一电子设备上系统设置。
18.根据权利要求17所述的系统,其特征在于,所述第一电子设备响应于接收到用户在所述第一屏幕上以预设路径移动所述光标,包括:
所述第一电子设备响应于接收到用户在所述第一屏幕上移动所述光标至所述第一屏幕的边缘并继续移动;或者
所述第一电子设备响应于接收到用户在所述第一屏幕上以预设形状晃动所述光标。
19.根据权利要求18所述的系统,其特征在于,所述第一电子设备响应于接收到用户在所述第一屏幕上移动所述光标至所述第一屏幕的边缘并继续移动,包括:
所述第一电子设备和/或所述第二电子设备,还用于确定所述第一电子设备与所述第二电子设备的位置关系;
所述第一电子设备响应于接收到用户在所述第一屏幕上根据所述位置关系移动所述光标至所述第一屏幕的边缘并继续移动。
20.根据权利要求14至19中任一项所述的系统,其特征在于,
所述第一电子设备,还用于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置。
21.根据权利要求20所述的系统,其特征在于,所述第一电子设备,还用于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置,包括:
所述第一电子设备,还用于响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上的位置与在所述第一屏幕上的位置相对应;或者
所述第一电子设备,还用于响应于接收到用户的第一操作,确定所述光标在所述第二屏幕上为默认位置。
22.根据权利要求16所述的系统,其特征在于,所述第一屏幕上显示有拖拽对象;
所述第一电子设备,还用于响应于接收到用户对所述拖拽对象的第三操作,向所述第二屏幕发送所述输入事件;
所述第二电子设备,还用于在所述第二屏幕上显示从所述第一屏幕上拖拽来的所述拖拽对象。
23.根据权利要求22所述的系统,其特征在于,
所述第一电子设备,还用于响应于接收到用户对所述拖拽对象的第四操作,向所述第二屏幕发送所述输入事件;
所述第二电子设备,还用于在所述第二屏幕上显示所述拖拽对象的移动效果。
24.根据权利要求22或23所述的系统,其特征在于,所述拖拽对象包括以下至少一项:
文件、应用程序图标、文本、图片或窗口。
25.根据权利要求14至24中任一项所述的系统,其特征在于,所述第一电子设备与所述第二电子设备投屏连接,包括:
所述第一电子设备与所述第二电子设备通过以下至少一种方式投屏连接:
蓝牙、有线或无线通信技术Wi-Fi。
26.一种电子设备,其特征在于,包括一个或多个处理器;一个或多个存储器;显示屏;所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行权利要求1至13中任一项所述的方法。
27.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机程序或指令,当所述计算机程序或指令在计算机上运行时,使得如权利要求1至13中任一项所述的方法被执行。
28.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序或指令,当所述计算机程序或指令在计算机上运行时,使得如权利要求1至13中任一项所述的方法被执行。
CN202210607324.6A 2022-05-31 2022-05-31 光标显示的方法及电子设备 Pending CN117193583A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210607324.6A CN117193583A (zh) 2022-05-31 2022-05-31 光标显示的方法及电子设备
PCT/CN2023/096281 WO2023231893A1 (zh) 2022-05-31 2023-05-25 光标显示的方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210607324.6A CN117193583A (zh) 2022-05-31 2022-05-31 光标显示的方法及电子设备

Publications (1)

Publication Number Publication Date
CN117193583A true CN117193583A (zh) 2023-12-08

Family

ID=89003938

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210607324.6A Pending CN117193583A (zh) 2022-05-31 2022-05-31 光标显示的方法及电子设备

Country Status (2)

Country Link
CN (1) CN117193583A (zh)
WO (1) WO2023231893A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104049779A (zh) * 2014-06-25 2014-09-17 华东理工大学 在多个显示器之间实现鼠标指针快速切换
CN105512086B (zh) * 2016-02-16 2018-08-10 联想(北京)有限公司 信息处理设备以及信息处理方法
CN112527174B (zh) * 2019-09-19 2022-10-11 华为技术有限公司 一种信息处理方法及电子设备
CN117891369A (zh) * 2020-07-29 2024-04-16 华为技术有限公司 一种跨设备的对象拖拽方法及设备

Also Published As

Publication number Publication date
WO2023231893A1 (zh) 2023-12-07

Similar Documents

Publication Publication Date Title
US11722449B2 (en) Notification message preview method and electronic device
US20230046708A1 (en) Application Interface Interaction Method, Electronic Device, and Computer-Readable Storage Medium
CN112486363B (zh) 一种跨设备的内容分享方法、电子设备及系统
WO2020052529A1 (zh) 全屏显示视频中快速调出小窗口的方法、图形用户接口及终端
US20240179237A1 (en) Screenshot Generating Method, Control Method, and Electronic Device
WO2021036770A1 (zh) 一种分屏处理方法及终端设备
WO2020173370A1 (zh) 一种应用图标的移动方法及电子设备
WO2022017393A1 (zh) 显示交互系统、显示方法及设备
CN113805487B (zh) 控制指令的生成方法、装置、终端设备及可读存储介质
WO2020024108A1 (zh) 一种应用图标的显示方法及终端
CN112130788A (zh) 一种内容分享方法及其装置
WO2023273543A1 (zh) 一种文件夹管理方法及装置
EP4273687A1 (en) Picture sharing method and electronic device
WO2022002213A1 (zh) 翻译结果显示方法、装置及电子设备
WO2022048453A1 (zh) 解锁方法及电子设备
CN115016697A (zh) 投屏方法、计算机设备、可读存储介质和程序产品
WO2021042878A1 (zh) 一种拍摄方法及电子设备
CN110609650B (zh) 一种应用状态切换方法及终端设备
CN113867657A (zh) 跨设备桌面管理方法、第一电子设备及第二电子设备
WO2023029916A1 (zh) 批注展示方法、装置、终端设备及可读存储介质
CN116301541A (zh) 共享文件的方法、电子设备及计算机可读存储介质
CN116301483A (zh) 一种应用卡片的管理方法、电子设备和存储介质
CN117193583A (zh) 光标显示的方法及电子设备
CN115328592B (zh) 显示方法及相关装置
CN114764300B (zh) 一种窗口页面的交互方法、装置、电子设备以及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination