CN112929734A - 投屏方法、装置和电子设备 - Google Patents

投屏方法、装置和电子设备 Download PDF

Info

Publication number
CN112929734A
CN112929734A CN202110163167.XA CN202110163167A CN112929734A CN 112929734 A CN112929734 A CN 112929734A CN 202110163167 A CN202110163167 A CN 202110163167A CN 112929734 A CN112929734 A CN 112929734A
Authority
CN
China
Prior art keywords
screen
position information
finger
ultra
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110163167.XA
Other languages
English (en)
Other versions
CN112929734B (zh
Inventor
马士强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202110163167.XA priority Critical patent/CN112929734B/zh
Publication of CN112929734A publication Critical patent/CN112929734A/zh
Application granted granted Critical
Publication of CN112929734B publication Critical patent/CN112929734B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本申请公开了一种投屏方法、装置和电子设备,属于通信技术领域。该投屏方法,应用于电子设备,所述电子设备屏下预设位置设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述方法包括:在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。本申请能够使得用户在观看目标电子设备的屏幕时也能获取到用户手指相对源电子设备的屏幕的位置,使用户不需要看着源电子设备的屏幕就能精准操作源电子设备。

Description

投屏方法、装置和电子设备
技术领域
本申请属于通信技术领域,具体涉及一种投屏方法、装置和电子设备。
背景技术
智能电子设备功能越来越丰富,满足用户的生活、娱乐和办公等需求。但由于一些电子设备的屏幕较小,在视觉体验上有比较大的局限性。因此很多用户选择通过投屏技术将原本在屏幕较小的电子设备上看的图像,投屏发射到屏幕较大的电子设备(例如电视)上播放,利用大屏幕提升视觉体验。
但是,发明人发现在投屏过程中至少存在以下问题:如果需要基于显示的内容进行操作,用户只观看投屏的目标电子设备的屏幕无法实现精准操作,例如点击的位置不在按钮图标的实际显示位置,因此当用户需要对投屏的源电子设备操作时不得不继续看着源电子设备的小屏幕进行相应操作,体验不到投屏带来的视觉提升。
发明内容
本申请实施例的目的是提供一种投屏方法、装置和电子设备,能够解决投屏过程中用户只能看着源电子设备的屏幕才能精准操作的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种投屏方法,应用于电子设备,所述电子设备屏下预设位置设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述方法包括:
在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
可选的,所述根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取所述用户手指相对所述电子设备的屏幕的第一位置信息,包括:
根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
可选的,所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备之前,还包括:
以所述超宽带模块所在位置为原点建立坐标系;
获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,包括:
在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
可选的,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
第二方面,本申请实施例提供了一种投屏装置,应用于电子设备,所述电子设备屏下预设位置设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述装置包括:
第一位置信息获取模块,用于在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
位置信息发送模块,用于通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
可选的,所述第一位置信息获取模块,包括:
第二位置信息获取单元,用于根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
第一位置信息确定单元,用于将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
可选的,所述装置还包括:
坐标系建立模块,用于以所述超宽带模块所在位置为原点建立坐标系;
位置坐标获取模块,用于获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较模块,用于比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述位置信息发送模块,用于在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
可选的,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,投屏的源电子设备可以根据设置于其屏下预设位置处的超宽带模块以及位于用户手指上的可穿戴设备之间的通信信号,获取用户手指相对投屏的源电子设备的屏幕的位置,然后将该位置的信息发送至投屏的目标电子设备以使得目标电子设备能够根据该位置信息显示用户手指位置指示图像,从而用户在观看目标电子设备的屏幕时也能获取到用户手指相对源电子设备的屏幕的位置,进而用户不需要看着源电子设备的屏幕就能精准操作源电子设备,进一步提升用户的视觉体验。另外,所述超宽带模块不仅可以用于获取用户手指相对电子设备的屏幕的位置信息,还可以复用为将获取到的第一位置信息传输至投屏的目标电子设备的通信模块。
附图说明
图1是本申请实施例中的一种投屏方法的流程示意图;
图2是本申请实施例中的一种在投屏的目标电子设备上显示手指位置指示图像的示意图;
图3是本申请实施例中的一种超宽带模块在投屏的源电子设备中的安装位置示意图;
图4是本申请实施例中的一种以超宽带模块所在位置为原点建立的坐标系的示意图;
图5是本申请实施例中的一种投屏装置的结构示意图;
图6是本申请实施例中的一种电子设备的结构示意图;
图7是实现本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的投屏方法、装置和电子设备进行详细地说明。
请参阅图1,本申请实施例提供了一种投屏方法,应用于电子设备,该电子设备可以是投屏的源电子设备,所述电子设备屏下预设位置设置有超宽带(Ultra Wide Band,UWB)模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述方法包括以下步骤:
步骤101:在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
步骤102:通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
其中,设置于所述电子设备屏下预设位置处的超宽带模块可以是一个也可以是多个。所述可穿戴设备上可以包括另一个超宽带模块(或称为超宽带端子)。所述可穿戴设备,一般安装在用户常用的操作手指上,例如可以在左、右手拇指指甲处贴装所述可穿戴设备。
举例来说,请参阅图2,在将源电子设备201上显示的内容投屏至目标带电子设备202时,目标电子设备上可以显示用于指示用户手指相对源电子设备201的屏幕的位置的手指位置指示图像203,该手指位置指示图像203可以是透明、半透明或不透明状态。
另外,在投屏过程中可以每间隔预设时长(例如1ms),获取一次用户手指相对电子设备的屏幕的第一位置信息,并将所述第一位置信息发送至投屏的目标电子设备。
本申请实施例中,投屏的源电子设备可以根据设置于其屏下预设位置处的超宽带模块以及位于用户手指上的可穿戴设备之间的通信信号,获取用户手指相对投屏的源电子设备的屏幕的位置,然后将该位置的信息发送至投屏的目标电子设备以使得目标电子设备能够根据该位置信息显示用户手指位置指示图像,从而用户在观看目标电子设备的屏幕时也能获取到用户手指相对源电子设备的屏幕的位置,进而用户不需要看着源电子设备的屏幕就能精准操作源电子设备,进一步提升用户的视觉体验。另外,所述超宽带模块不仅可以用于获取用户手指相对电子设备的屏幕的位置信息,还可以复用为将获取到的第一位置信息传输至投屏的目标电子设备的通信模块。
下面举例说明上述投屏方法。
其中一种可选的具体实施方式中,所述根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取所述用户手指相对所述电子设备的屏幕的第一位置信息,包括:
根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
其中,根据所述通信信号的强度或传输时间可以确定所述可穿戴设备与所述超宽带模块之间的距离。
本申请实施例中,如果超宽带模块紧邻电子设备的屏幕且可穿戴设备或者说可穿戴设备上用来与超宽带模块通信的模块紧邻用户手指上用来触控屏幕的区域,那么所述可穿戴设备相对所述超宽带模块的第二位置信息即可代表用户手指相对电子设备的屏幕的位置;如果超宽带模块距离电子设备的屏幕有一定距离,或,可穿戴设备或者说可穿戴设备上用来与超宽带模块通信的模块距离手指上用来触控屏幕的区域有一定距离,那么需要根据所述可穿戴设备相对所述超宽带模块的第二位置信息换算出用户手指相对电子设备的屏幕的位置。
其中,超宽带模块设置于所述电子设备屏下的预设位置,例如可以是该电子设备的中心处,该超宽带模块在屏幕上的正投影可以位于所述屏幕的中心。
具体的,可以以超宽带模块所在位置为原点建立坐标系(该坐标系的XY平面可以与屏幕所在平面平行),然后根据超宽带模块与可穿戴设备之间的距离和角度关系,确定可穿戴设备在该坐标系中的位置坐标,该位置坐标即为所述第二位置信息。
在投屏过程中,超宽带模块可以每隔预设时长(例如1ms),检测可穿戴设备相对于超宽带模块的距离,并解算可穿戴设备在以超宽带模块所在位置为原点的坐标系中的位置坐标。
本申请实施例中,基于UWB技术,侦测用户手指在投屏的源电子设备的屏幕上的相对位置,并在投屏的目标电子设备上通过手指位置指示图像虚拟出手指位置,从而用户视觉停留在目标电子设备的屏幕上,而手指仍可对源电子设备的屏幕进行精准操作,进而使得用户在操作需求较高的投屏场景(例如玩游戏时进行投屏)仍然能够享受投屏带来的视觉体验提升。
可选的,所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,包括:
在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
换句话说,本申请实施例中,只在用户手指触摸到源电子设备的屏幕或在屏幕的正上方时,才将第一位置信息发送至投屏的目标电子设备。
当然,如果用户手指在不屏幕正上方的区域内,但是仅偏离一点点,也可以将第一位置信息发送至投屏的目标电子设备。也即是说,用户手指在所述屏幕所在平面的正投影与所述屏幕之间的距离小于预设值时,也可以将第一位置信息发送至投屏的目标电子设备。
进一步可选的,所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备之前,还包括:
以所述超宽带模块所在位置为原点建立坐标系;
获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内。
举例来说,超宽带模块在屏幕上的正投影位于所述屏幕的中心且紧邻屏幕。请参阅图3和图4,以所述超宽带模块301所在位置为原点、屏幕的长度方向为X轴、屏幕的宽度方向为Y轴建立坐标系,根据屏幕的长度和宽度获取屏幕的边界在坐标系中的位置坐标(即第一位置坐标),第一位置坐标的Z=0。在获取可穿戴设备在该坐标系中的第二位置坐标后,比较第二位置坐标和第一位置坐标的X轴和Y轴的值,判断所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内。
可选的,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
具体的,目标电子设备可以根据所述用户手指与所述屏幕之间的距离,确定所述手指位置指示图像的尺寸和/或透明度;然后,根据确定的所述尺寸和/或所述透明度,显示所述手指位置指示图像。
本申请实施例中,用户还可以根据手指位置指示图像的尺寸和/或透明度确定用户手指与源电子设备的屏幕之间的距离,以更加精准地进行触控操作。
需要说明的是,本申请实施例提供的投屏方法,执行主体可以为投屏装置,或者该投屏装置中的用于执行投屏方法的控制模块。本申请实施例中以投屏装置执行投屏方法为例,说明本申请实施例提供的投屏装置。
请参阅图5,本申请实施例提供了一种投屏装置500,包括:
第一位置信息获取模块501,用于在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
位置信息发送模块502,用于通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
可选的,所述第一位置信息获取模块501,包括:
第二位置信息获取单元,用于根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
第一位置信息确定单元,用于将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
可选的,所述投屏装置500还包括:
坐标系建立模块,用于以所述超宽带模块所在位置为原点建立坐标系;
位置坐标获取模块,用于获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较模块,用于比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述位置信息发送模块502,用于在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
本申请实施例中,投屏的源电子设备可以根据设置于其屏下预设位置处的超宽带模块以及位于用户手指上的可穿戴设备之间的通信信号,获取用户手指相对投屏的源电子设备的屏幕的位置,然后将该位置的信息发送至投屏的目标电子设备以使得目标电子设备能够根据该位置信息显示用户手指位置指示图像,从而用户在观看目标电子设备的屏幕时也能获取到用户手指相对源电子设备的屏幕的位置,进而用户不需要看着源电子设备的屏幕就能精准操作源电子设备,进一步提升用户的视觉体验。另外,所述超宽带模块不仅可以用于获取用户手指相对电子设备的屏幕的位置信息,还可以复用为将获取到的第一位置信息传输至投屏的目标电子设备的通信模块。
本申请实施例中的投屏装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的投屏装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的投屏装置能够实现图1至图3的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选的,如图6所示,本申请实施例还提供一种电子设备600,包括处理器601,存储器602,存储在存储器602上并可在所述处理器601上运行的程序或指令,该程序或指令被处理器601执行时实现上述投屏方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图7为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、以及处理器710等部件。其中,显示单元706和用户输入单元707集成在一起形成屏幕,该电子设备700的所述屏幕的下方预设位置还设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上。
本领域技术人员可以理解,电子设备700还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图7中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器710,用于在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
所述超宽带模块,用于将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
可选的,处理器710,用于根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
可选的,处理器710,还用于以所述超宽带模块所在位置为原点建立坐标系;获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述超宽带模块,用于在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,将所述第一位置信息发送至所述目标电子设备。
可选的,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
本申请实施例中,投屏的源电子设备可以根据设置于其屏下预设位置处的超宽带模块以及位于用户手指上的可穿戴设备之间的通信信号,获取用户手指相对投屏的源电子设备的屏幕的位置,然后将该位置的信息发送至投屏的目标电子设备以使得目标电子设备能够根据该位置信息显示用户手指位置指示图像,从而用户在观看目标电子设备的屏幕时也能获取到用户手指相对源电子设备的屏幕的位置,进而用户不需要看着源电子设备的屏幕就能精准操作源电子设备,进一步提升用户的视觉体验。另外,所述超宽带模块不仅可以用于获取用户手指相对电子设备的屏幕的位置信息,还可以复用为将获取到的第一位置信息传输至投屏的目标电子设备的通信模块。
应理解的是,本申请实施例中,输入单元704可以包括图形处理器(GraphicsProcessing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元706可包括显示面板7061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板7061。用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器709可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述投屏方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述投屏方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种投屏方法,应用于电子设备,其特征在于,所述电子设备屏下预设位置设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述方法包括:
在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
2.根据权利要求1所述的方法,其特征在于,所述根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取所述用户手指相对所述电子设备的屏幕的第一位置信息,包括:
根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
3.根据权利要求1或2所述的方法,其特征在于,所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备之前,还包括:
以所述超宽带模块所在位置为原点建立坐标系;
获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,包括:
在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
4.根据权利要求1所述的方法,其特征在于,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
5.一种投屏装置,其特征在于,所述电子设备屏下预设位置设置有超宽带模块,所述超宽带模块与可穿戴设备建立通信连接,所述可穿戴设备位于用户手指上,所述装置包括:
第一位置信息获取模块,用于在投屏过程中,根据所述超宽带模块与所述可穿戴设备之间的通信信号,获取用户手指相对电子设备的屏幕的第一位置信息;
位置信息发送模块,用于通过所述超宽带模块将所述第一位置信息发送至投屏的目标电子设备,以使所述目标电子设备根据所述第一位置信息显示手指位置指示图像。
6.根据权利要求5所述的装置,其特征在于,所述第一位置信息获取模块,包括:
第二位置信息获取单元,用于根据所述通信信号的强度和方向,或者根据所述通信信号的传输时间和方向,获取所述可穿戴设备相对所述超宽带模块的第二位置信息;
第一位置信息确定单元,用于将所述第二位置信息作为第一位置信息,或根据所述第二位置信息确定所述第一位置信息。
7.根据权利要求5或6所述的装置,其特征在于,还包括:
坐标系建立模块,用于以所述超宽带模块所在位置为原点建立坐标系;
位置坐标获取模块,用于获取所述屏幕的边界在所述坐标系中的第一位置坐标以及所述可穿戴设备在所述坐标系中的第二位置坐标;
比较模块,用于比较所述第二位置坐标与所述第一位置坐标,确定所述用户手指在所述屏幕所在平面的正投影是否位于所述屏幕范围内;
所述位置信息发送模块,用于在确定所述用户手指在所述屏幕所在平面的正投影位于所述屏幕范围内的情况下,通过所述超宽带模块将所述第一位置信息发送至所述目标电子设备。
8.根据权利要求5所述的装置,其特征在于,所述第一位置信息能够指示所述用户手指与所述屏幕之间的距离;
所述手指位置指示图像的尺寸和/或透明度是根据所述用户手指与所述屏幕之间的距离确定。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-4任一项所述的投屏方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-4任一项所述的投屏方法的步骤。
CN202110163167.XA 2021-02-05 2021-02-05 投屏方法、装置和电子设备 Active CN112929734B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110163167.XA CN112929734B (zh) 2021-02-05 2021-02-05 投屏方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110163167.XA CN112929734B (zh) 2021-02-05 2021-02-05 投屏方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN112929734A true CN112929734A (zh) 2021-06-08
CN112929734B CN112929734B (zh) 2023-09-05

Family

ID=76170865

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110163167.XA Active CN112929734B (zh) 2021-02-05 2021-02-05 投屏方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN112929734B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113485664A (zh) * 2021-07-09 2021-10-08 维沃移动通信有限公司 投屏方法、装置和电子设备
CN113778359A (zh) * 2021-08-13 2021-12-10 惠州Tcl移动通信有限公司 一种无线投屏方法、装置、穿戴设备及存储介质
CN114679612A (zh) * 2022-03-15 2022-06-28 辽宁科技大学 智能家居系统及其控制方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150338998A1 (en) * 2014-05-22 2015-11-26 Ubi interactive inc. System and methods for providing a three-dimensional touch screen
US20150378590A1 (en) * 2014-06-25 2015-12-31 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20160274733A1 (en) * 2013-11-19 2016-09-22 Hitachi Maxell, Ltd. Projection-type video display device
CN107305431A (zh) * 2016-04-25 2017-10-31 钦赛勇 基于手势操作的投影演示装置及方法
CN109960449A (zh) * 2019-03-22 2019-07-02 深圳前海达闼云端智能科技有限公司 一种投屏显示方法及相关装置
CN110279405A (zh) * 2019-07-17 2019-09-27 芯盟科技有限公司 智能可穿戴设备
CN110782532A (zh) * 2019-10-23 2020-02-11 北京达佳互联信息技术有限公司 图像生成方法、生成装置、电子设备及存储介质
CN111859334A (zh) * 2020-06-29 2020-10-30 维沃移动通信有限公司 屏幕状态控制方法、装置和电子设备
CN112019756A (zh) * 2020-10-06 2020-12-01 青岛天纵通信网络技术有限公司 一种基于5g的智能可穿戴设备的控制方法及系统
CN112083832A (zh) * 2020-09-07 2020-12-15 中国人民解放军军事科学院国防科技创新研究院 基于imu和红外感应的可移植触碰屏装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160274733A1 (en) * 2013-11-19 2016-09-22 Hitachi Maxell, Ltd. Projection-type video display device
US20150338998A1 (en) * 2014-05-22 2015-11-26 Ubi interactive inc. System and methods for providing a three-dimensional touch screen
US20150378590A1 (en) * 2014-06-25 2015-12-31 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN107305431A (zh) * 2016-04-25 2017-10-31 钦赛勇 基于手势操作的投影演示装置及方法
CN109960449A (zh) * 2019-03-22 2019-07-02 深圳前海达闼云端智能科技有限公司 一种投屏显示方法及相关装置
CN110279405A (zh) * 2019-07-17 2019-09-27 芯盟科技有限公司 智能可穿戴设备
CN110782532A (zh) * 2019-10-23 2020-02-11 北京达佳互联信息技术有限公司 图像生成方法、生成装置、电子设备及存储介质
CN111859334A (zh) * 2020-06-29 2020-10-30 维沃移动通信有限公司 屏幕状态控制方法、装置和电子设备
CN112083832A (zh) * 2020-09-07 2020-12-15 中国人民解放军军事科学院国防科技创新研究院 基于imu和红外感应的可移植触碰屏装置
CN112019756A (zh) * 2020-10-06 2020-12-01 青岛天纵通信网络技术有限公司 一种基于5g的智能可穿戴设备的控制方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐一华;李善青;贾云得;: "一种基于视觉的手指屏幕交互方法", 电子学报, no. 11 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113485664A (zh) * 2021-07-09 2021-10-08 维沃移动通信有限公司 投屏方法、装置和电子设备
CN113778359A (zh) * 2021-08-13 2021-12-10 惠州Tcl移动通信有限公司 一种无线投屏方法、装置、穿戴设备及存储介质
CN114679612A (zh) * 2022-03-15 2022-06-28 辽宁科技大学 智能家居系统及其控制方法

Also Published As

Publication number Publication date
CN112929734B (zh) 2023-09-05

Similar Documents

Publication Publication Date Title
CN109905754B (zh) 虚拟礼物收取方法、装置及存储设备
CN112929734B (zh) 投屏方法、装置和电子设备
CN109002243B (zh) 一种图像参数调节方法及终端设备
CN111049973B (zh) 一种屏幕显示的控制方法、电子设备及计算机可读存储介质
CN110442297B (zh) 分屏显示方法、分屏显示装置及终端设备
CN111176764B (zh) 显示控制方法和终端设备
CN109085968B (zh) 一种截屏方法及终端设备
CN110673770B (zh) 消息展示方法及终端设备
CN112540740A (zh) 分屏显示方法、装置、电子设备和可读存储介质
CN109495616B (zh) 一种拍照方法及终端设备
CN112817555B (zh) 音量控制方法及音量控制装置
CN112929860B (zh) 蓝牙连接方法、装置和电子设备
CN110647277A (zh) 一种控制方法及终端设备
CN112486444A (zh) 投屏方法、装置、设备和可读存储介质
CN111651106A (zh) 未读消息的提示方法、装置、设备及可读存储介质
CN112783406B (zh) 操作执行方法、装置和电子设备
CN109067975B (zh) 一种联系人信息管理方法及终端设备
CN114217754A (zh) 投屏控制方法、装置、电子设备及存储介质
CN112416199A (zh) 控制方法、装置和电子设备
CN110740265B (zh) 图像处理方法及终端设备
CN112287708A (zh) 近场通信nfc模拟卡切换方法、装置及设备
CN112416172A (zh) 电子设备控制方法、装置及电子设备
CN111050223A (zh) 弹幕信息处理方法及电子设备
CN110888572A (zh) 一种消息显示方法及终端设备
CN112269510B (zh) 信息处理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant