CN113507694B - 一种基于无线辅流设备的投屏方法及装置 - Google Patents
一种基于无线辅流设备的投屏方法及装置 Download PDFInfo
- Publication number
- CN113507694B CN113507694B CN202110677507.0A CN202110677507A CN113507694B CN 113507694 B CN113507694 B CN 113507694B CN 202110677507 A CN202110677507 A CN 202110677507A CN 113507694 B CN113507694 B CN 113507694B
- Authority
- CN
- China
- Prior art keywords
- target program
- display device
- equipment
- display
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000002452 interceptive effect Effects 0.000 claims abstract description 46
- 238000005266 casting Methods 0.000 claims 1
- 230000006870 function Effects 0.000 description 27
- 238000004590 computer program Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 241000870659 Crassula perfoliata var. minor Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2358/00—Arrangements for display data security
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
Abstract
本申请实施例提供了一种基于无线辅流设备的投屏方法及装置，应用于无线辅流设备，无线辅流设备分别连接终端设备以及扩展显示设备，终端设备还连接有本地显示设备，所述方法包括：当接入终端设备时，在本地显示设备上显示交互界面，交互界面上设有可触发的多个功能按键，多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，多个程序为终端设备当前时刻正在运行的程序，在用户触发目标程序对应的目标程序显示按键时，获取目标程序在本地显示设备上显示的目标程序图像，并通过扩展显示设备显示目标程序图像，在用户触发屏幕显示按键时，通过扩展显示设备显示本地显示设备上显示的所有图像。
Description
技术领域
本申请涉及数据处理技术领域，特别是涉及一种基于无线辅流设备的投屏方法及装置。
背景技术
随着数据处理技术的发展，投屏的使用越来越多频繁，例如，开会时，将电脑上的内容进行投屏，目前，通常采用在无线辅流设备上添加物理按键，点击按键进入投屏，再次点击就退出投屏，所以会把待投屏装置的整个屏幕和所有程序都进行投屏上去，用户的隐私就可能会泄露到所有参与者，比如用户在做PPT演示的时候，这时聊天工具收到消息，也会在投屏上显示出来，用户的隐私就会被公开。
发明内容
本申请实施例提供一种基于无线辅流设备的投屏方法及装置，以解决用户的隐私就可能会泄露到所有参与者的问题，包括：
一种基于无线辅流设备的投屏方法，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，所述方法包括：
当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；
在用户触发目标程序对应的目标程序显示按键时，获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像；
在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
可选地，所述获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像，包括：
获取所述本地显示设备上显示的所有图像；
识别所述目标程序在所述所有图像上的多个外框坐标；
根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；
通过所述扩展显示设备显示所述目标程序图像。
可选地，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述通过所述扩展显示设备显示所述目标程序图像，包括：
根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
可选地，所述多个程序包括目标程序以及位于所述目标程序上层的非目标程序，所述获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像，包括：
识别所述目标程序图像与所述非目标程序图像的重叠部分；
将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；
通过所述扩展显示设备显示所述覆盖后的目标程序图像。
可选地，所述方法还包括：
在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
一种基于无线辅流设备的投屏装置，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，所述装置包括：
第一交互界面显示模块，用于当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；
目标程序图像显示模块，用于在用户触发目标程序对应的目标程序显示按键时，获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像；
桌面图像显示模块，用于在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
可选地，所述目标程序图像显示模块，包括：
本地显示设备显示图像获取子模块，用于获取所述本地显示设备上显示的所有图像；
外框坐标识别子模块，用于识别所述目标程序在所述所有图像上的多个外框坐标；
目标程序图像拷贝子模块，用于根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；
目标程序图像显示子模块，用于通过所述扩展显示设备显示所述目标程序图像。
可选地，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述目标程序图像显示子模块，包括：
第一目标程序图像显示单元，用于根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
可选地，所述多个程序包括目标程序以及位于所述目标程序上层的非目标程序，所述目标程序图像显示模块，包括：
重叠部分识别子模块，用于识别所述目标程序图像与所述非目标程序图像的重叠部分；
覆盖后的目标程序图像识别子模块，用于将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；
第二目标程序图像显示子模块，用于通过所述扩展显示设备显示所述覆盖后的目标程序图像。
可选地，所述装置还包括：
第二交互界面显示模块，用于在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
本申请具有以下优点：
在本申请中，通过当接入终端设备时，在本地显示设备上显示交互界面，交互界面上设有可触发的多个功能按键，多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，多个程序为终端设备当前时刻正在运行的程序，在用户触发目标程序对应的目标程序显示按键时，获取目标程序在本地显示设备上显示的目标程序图像，并通过扩展显示设备显示目标程序图像，在用户触发屏幕显示按键时，通过扩展显示设备显示本地显示设备上显示的所有图像。实现了对投屏内容的选择，无需将本地显示设备的整个屏幕和所有程序都进行投屏，保护了用户的隐私。
附图说明
为了更清楚地说明本申请的技术方案，下面将对本申请的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的一种基于无线辅流设备的投屏方法的步骤流程图；
图2是本申请一实施例提供的又一种基于无线辅流设备的投屏方法的步骤流程图；
图3是本申请一实施例提供的一种基于无线辅流设备的投屏装置的结构框图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
参照图1，示出了本申请一实施例提供的一种基于无线辅流设备的投屏方法的步骤流程图，应用于无线辅流设备，该无线辅流设备上可以设有物理按键，该无线辅流设备上也可以不设任何物理按键，所述无线辅流设备分别连接终端设备以及扩展显示设备即终端设备通过无线辅流设备和扩展显示设备连接。如一种方式是无线辅流设备分别和终端设备连接以及扩展显示设备连接，另一种方式是无线辅流设备和终端设备连接并通过无线网络和扩展显示设备进行数据传输。具体的，无线辅流设备可以通过通用串行总线分别与终端设备与扩展显示设备进行连接，即插拔式的活动连接，两个无线辅流设备之间通过无线连接的方式进行数据传输。还可以是无线辅流设备通过通用串行总线分别与终端设备然后通过无线连接的方式与扩展显示设备直接进行数据传输。扩展显示设备可以是显示器、投影仪，扩展显示设备也可以为任意可用于显示的设备如智能会议平板(IWB)，扩展设备也可以是和显示设备连接的主机设备会议主机。所述终端设备还连接有本地显示设备，具体的，终端设备可以为电脑主机，本地显示设备可以为电脑主机的显示器，终端设备也可以为笔记本电脑，本地显示设备可以为该笔记本电脑上设置的显示器，具体可以包括如下步骤：
步骤101，当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；
其中，交互界面只在本地显示设备上显示，也可以被采集下来进行投屏。
首次在终端设备上使用无线辅流设备，需要用户安装辅流设备上的启动软件，此后，终端设备对应启动软件的后台程序可以检测辅流设备，在发现辅流设备接入后会自动启动交互界面。无线辅流设备接入终端设备时，如，无线辅流设备通过通用串行接口连接终端设备，显示设备上自动启动交互界面，交互界面上设置有多个功能按键，多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，多个功能按键还包括投屏质量的选择按键，下次插入无线辅流设备时是否自动投屏的功能选择按键，用户可以通过投屏质量的选择按键调整扩展显示设备上画面的显示质量，显示质量的调整可以是显示画面分辨率的调整。若无线辅流设备上设有物理按键，可以通过该物理按键控制交互界面的弹出。
在现有技术中，无线辅流设备上只有一个物理按键不利于投屏的功能扩展。比如用户在网络状况好的情况，可以选择更高的投屏质量，在网络状况差的情况，可以选择以流畅优先进行投屏。而在本申请中，可以通过在交互界面上设置多个功能按键，保证投屏的功能扩展。
在本申请一实施例中，所述方法还包括：
在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
在无线辅流设备连接终端设备后，可以通过识别用户的目标手势，在本地显示设备上显示所述交互界面，如，在无线辅流设备连接终端设备后，当识别到用户摇手时，在本地显示设备上显示所述交互界面。
此外，当用户通过交互界面进行投屏后，交互界面会退出，本地显示设备的屏幕的边沿会出现一个小图标显示，用户可以通过该小图标显示交互界面，也可以通过目标手势显示交互界面。
步骤102，在用户触发目标程序对应的目标程序显示按键时，获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像；
在本申请一实施例中，所述多个程序包括目标程序以及位于所述目标程序上层的非目标程序，所述步骤102，包括：
子步骤S11，识别所述目标程序图像与所述非目标程序图像的重叠部分；
子步骤S12，将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；
子步骤S13，通过所述扩展显示设备显示所述覆盖后的目标程序图像。
在具体实现中，通过获取目标程序和其他非目标程序的窗口层叠顺序，选取位于目标程序窗口上层的其他非目标程序窗口并求这些窗口的并集窗口P，即目标程序图像与非目标程序图像的重叠部分，设目标程序窗口为S，目标程序窗口的可显示区域为Q＝S-P，即，目标程序内容区域S上只保留可见显示区域Q，S的其余部位都使用黑色画笔覆盖为黑色，将以上操作后的图像编码成h264码流传输给扩展显示设备，便可实现仅将目标程序进行投屏而不显示其他程序。
步骤103，在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
在本申请中，通过当接入终端设备时，在本地显示设备上显示交互界面，交互界面上设有可触发的多个功能按键，多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，多个程序为终端设备当前时刻正在运行的程序，在用户触发目标程序对应的目标程序显示按键时，获取目标程序在本地显示设备上显示的目标程序图像，并通过扩展显示设备显示目标程序图像，在用户触发屏幕显示按键时，通过扩展显示设备显示本地显示设备上显示的所有图像。实现了对投屏内容的选择，无需将本地显示设备的整个屏幕和所有程序都进行投屏，保护了用户的隐私。
参照图2，示出了本申请一实施例提供的又一种基于无线辅流设备的投屏方法的步骤流程图，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，具体可以包括如下步骤：
步骤201，当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；
步骤202，获取所述本地显示设备上显示的所有图像；
步骤203，识别所述目标程序在所述所有图像上的多个外框坐标；
识别目标程序的多个外框坐标(外框上下左右相对于屏幕原点的距离)
步骤204，根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；
步骤205，通过所述扩展显示设备显示所述目标程序图像；
步骤206，在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
在本申请一实施例中，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述步骤206，包括：
根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
在本申请中，通过获取所述本地显示设备上显示的所有图像，识别所述目标程序在所述所有图像上的多个外框坐标，根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像，通过所述扩展显示设备显示所述目标程序图像，在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像，保证了目标程序图像的精准识别，保护了用户的隐私。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本申请实施例所必须的。
参照图3，示出了本申请一实施例提供的一种基于无线辅流设备的投屏装置的结构框图，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，具体可以包括如下模块：
第一交互界面显示模块301，用于当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；
目标程序图像显示模块302，用于在用户触发目标程序对应的目标程序显示按键时，获取所述目标程序在所述本地显示设备上显示的目标程序图像，并通过所述扩展显示设备显示所述目标程序图像；
桌面图像显示模块303，用于在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
在本申请一实施例中，所述目标程序图像显示模块302，包括：
本地显示设备显示图像获取子模块，用于获取所述本地显示设备上显示的所有图像；
外框坐标识别子模块，用于识别所述目标程序在所述所有图像上的多个外框坐标；
目标程序图像拷贝子模块，用于根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；
目标程序图像显示子模块，用于通过所述扩展显示设备显示所述目标程序图像。
在本申请一实施例中，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述目标程序图像显示子模块，包括：
第一目标程序图像显示单元，用于根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
在本申请一实施例中，所述多个程序包括目标程序以及位于所述目标程序上层的非目标程序，所述目标程序图像显示模块302，包括：
重叠部分识别子模块，用于识别所述目标程序图像与所述非目标程序图像的重叠部分；
覆盖后的目标程序图像识别子模块，用于将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；
第二目标程序图像显示子模块，用于通过所述扩展显示设备显示所述覆盖后的目标程序图像。
在本申请一实施例中，所述装置还包括：
第二交互界面显示模块，用于在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
在本申请中，通过当接入终端设备时，在本地显示设备上显示交互界面，交互界面上设有可触发的多个功能按键，多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，多个程序为终端设备当前时刻正在运行的程序，在用户触发目标程序对应的目标程序显示按键时，获取目标程序在本地显示设备上显示的目标程序图像，并通过扩展显示设备显示目标程序图像，在用户触发屏幕显示按键时，通过扩展显示设备显示本地显示设备上显示的所有图像。实现了对投屏内容的选择，无需将本地显示设备的整个屏幕和所有程序都进行投屏，保护了用户的隐私。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本申请一实施例还提供了电子设备，可以包括处理器、存储器及存储在存储器上并能够在处理器上运行的计算机程序，计算机程序被处理器执行时实现如上基于无线辅流设备的投屏方法的步骤。
本申请一实施例还提供了计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现如上基于无线辅流设备的投屏方法的步骤。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本申请实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本申请实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请实施例是参照根据本申请实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本申请所提供的一种基于无线辅流设备的投屏方法及装置，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。
Claims (6)
1.一种基于无线辅流设备的投屏方法，其特征在于，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，所述方法包括：
当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；其中，所述多个程序包括：目标程序以及位于所述目标程序上层的非目标程序；
在用户触发目标程序对应的目标程序显示按键时，获取所述本地显示设备上显示的所有图像；识别所述目标程序在所述所有图像上的多个外框坐标；根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；通过所述扩展显示设备显示所述目标程序图像；或，
识别所述目标程序图像与所述非目标程序图像的重叠部分；将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；通过所述扩展显示设备显示所述覆盖后的目标程序图像；
在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
2.根据权利要求1所述的基于无线辅流设备的投屏方法，其特征在于，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述通过所述扩展显示设备显示所述目标程序图像，包括：
根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
3.根据权利要求1所述的基于无线辅流设备的投屏方法，其特征在于，所述方法还包括：
在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
4.一种基于无线辅流设备的投屏装置，其特征在于，应用于无线辅流设备，所述无线辅流设备分别连接终端设备以及扩展显示设备，所述终端设备还连接有本地显示设备，所述装置包括：
第一交互界面显示模块，用于当接入所述终端设备时，在所述本地显示设备上显示交互界面，所述交互界面上设有可触发的多个功能按键，所述多个功能按键包括多个程序分别对应的程序显示按键以及屏幕显示按键，所述多个程序为所述终端设备当前时刻正在运行的程序；其中，所述多个程序包括：目标程序以及位于所述目标程序上层的非目标程序；
目标程序图像显示模块，用于在用户触发目标程序对应的目标程序显示按键时，获取所述本地显示设备上显示的所有图像；识别所述目标程序在所述所有图像上的多个外框坐标；根据所述多个外框坐标，在所述所有图像上拷贝目标程序图像；通过所述扩展显示设备显示所述目标程序图像；或，
识别所述目标程序图像与所述非目标程序图像的重叠部分；将所述目标程序图像上的重叠部分覆盖为黑色，并生成覆盖后的目标程序图像；通过所述扩展显示设备显示所述覆盖后的目标程序图像；
桌面图像显示模块，用于在用户触发屏幕显示按键时，通过所述扩展显示设备显示所述本地显示设备上显示的所有图像。
5.根据权利要求4所述的基于无线辅流设备的投屏装置，其特征在于，所述扩展显示设备与所述本地显示设备能显示图像的尺寸一致，所述扩展显示设备与所述本地显示设备建立的坐标轴一致，所述目标程序图像显示模块，包括：
第一目标程序图像显示单元，用于根据所述多个外框坐标，将所述目标程序图像显示在所述扩展显示设备上的目标位置。
6.根据权利要求4所述的基于无线辅流设备的投屏装置，其特征在于，所述装置还包括：
第二交互界面显示模块，用于在识别到用户的目标手势时，在所述本地显示设备上显示所述交互界面。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110677507.0A CN113507694B (zh) | 2021-06-18 | 2021-06-18 | 一种基于无线辅流设备的投屏方法及装置 |
| US17/842,821 US20220404879A1 (en) | 2021-06-18 | 2022-06-17 | Screen projection method and apparatus based on wireless auxiliary stream device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110677507.0A CN113507694B (zh) | 2021-06-18 | 2021-06-18 | 一种基于无线辅流设备的投屏方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113507694A CN113507694A (zh) | 2021-10-15 |
| CN113507694B true CN113507694B (zh) | 2024-02-23 |
Family
ID=78010146
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110677507.0A Active CN113507694B (zh) | 2021-06-18 | 2021-06-18 | 一种基于无线辅流设备的投屏方法及装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20220404879A1 (zh) |
| CN (1) | CN113507694B (zh) |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016201803A1 (zh) * | 2015-06-19 | 2016-12-22 | 中兴通讯股份有限公司 | 屏幕投影显示的控制方法、装置及移动终端 |
| CN108815719A (zh) * | 2018-04-13 | 2018-11-16 | 沈阳东软医疗系统有限公司 | 一种位置显示方法及位置显示系统 |
| CN108958684A (zh) * | 2018-06-22 | 2018-12-07 | 维沃移动通信有限公司 | 投屏方法及移动终端 |
| CN109348167A (zh) * | 2018-12-17 | 2019-02-15 | 厦门亿联网络技术股份有限公司 | 基于视频会议系统的无线辅流数据传输方法及系统 |
| CN110134356A (zh) * | 2019-04-29 | 2019-08-16 | 维沃移动通信有限公司 | 一种投屏方法及终端 |
| CN110221798A (zh) * | 2019-05-29 | 2019-09-10 | 华为技术有限公司 | 一种投屏方法、系统及相关装置 |
| CN110995923A (zh) * | 2019-11-22 | 2020-04-10 | 维沃移动通信（杭州）有限公司 | 一种投屏控制方法及电子设备 |
| CN111324327A (zh) * | 2020-02-20 | 2020-06-23 | 华为技术有限公司 | 投屏方法及终端设备 |
| CN111367486A (zh) * | 2020-05-26 | 2020-07-03 | 北京小米移动软件有限公司 | 一种来电隐私保护方法及系统 |
| CN112149194A (zh) * | 2020-09-18 | 2020-12-29 | 珠海格力电器股份有限公司 | 设备投屏的方法和装置、存储介质和电子装置 |
| CN112433692A (zh) * | 2020-12-11 | 2021-03-02 | 上海中通吉网络技术有限公司 | 投屏方法及装置 |
| CN112463089A (zh) * | 2020-10-21 | 2021-03-09 | 贝壳技术有限公司 | 跨终端的图片同步缩放方法、装置、电子介质及存储介质 |
| CN112492364A (zh) * | 2019-09-11 | 2021-03-12 | 西安诺瓦星云科技股份有限公司 | 投屏方法、投屏装置和源设备 |
| CN112540739A (zh) * | 2019-09-21 | 2021-03-23 | 华为技术有限公司 | 一种投屏方法及系统 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7640502B2 (en) * | 2004-10-01 | 2009-12-29 | Microsoft Corporation | Presentation facilitation |
| US8700097B2 (en) * | 2009-02-05 | 2014-04-15 | Samsung Electronics Co., Ltd. | Method and system for controlling dual-processing of screen data in mobile terminal having projector function |
| US8898577B2 (en) * | 2010-03-09 | 2014-11-25 | Microsoft Corporation | Application sharing with occlusion removal |
| JP2015090570A (ja) * | 2013-11-06 | 2015-05-11 | ソニー株式会社 | 情報処理装置および制御方法 |
| US10082941B2 (en) * | 2015-05-20 | 2018-09-25 | Vmware, Inc. | Optimizing window move actions for remoted applications |
| JP7022622B2 (ja) * | 2018-03-08 | 2022-02-18 | キヤノン株式会社 | 情報処理装置およびその制御方法、並びにプログラム |
| KR102604570B1 (ko) * | 2018-03-23 | 2023-11-22 | 삼성전자주식회사 | 사용자 입력 지원 방법 및 이를 지원하는 전자 장치 |
| CN110673782B (zh) * | 2019-08-29 | 2022-11-29 | 荣耀终端有限公司 | 一种应用于投屏场景的控制方法以及相关设备 |
| US11616814B2 (en) * | 2019-09-30 | 2023-03-28 | Thinkrite, Inc. | Data privacy in screen sharing during a web conference |
-
2021
- 2021-06-18 CN CN202110677507.0A patent/CN113507694B/zh active Active
-
2022
- 2022-06-17 US US17/842,821 patent/US20220404879A1/en active Pending
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016201803A1 (zh) * | 2015-06-19 | 2016-12-22 | 中兴通讯股份有限公司 | 屏幕投影显示的控制方法、装置及移动终端 |
| CN108815719A (zh) * | 2018-04-13 | 2018-11-16 | 沈阳东软医疗系统有限公司 | 一种位置显示方法及位置显示系统 |
| CN108958684A (zh) * | 2018-06-22 | 2018-12-07 | 维沃移动通信有限公司 | 投屏方法及移动终端 |
| CN109348167A (zh) * | 2018-12-17 | 2019-02-15 | 厦门亿联网络技术股份有限公司 | 基于视频会议系统的无线辅流数据传输方法及系统 |
| CN110134356A (zh) * | 2019-04-29 | 2019-08-16 | 维沃移动通信有限公司 | 一种投屏方法及终端 |
| CN110221798A (zh) * | 2019-05-29 | 2019-09-10 | 华为技术有限公司 | 一种投屏方法、系统及相关装置 |
| CN112492364A (zh) * | 2019-09-11 | 2021-03-12 | 西安诺瓦星云科技股份有限公司 | 投屏方法、投屏装置和源设备 |
| CN112540739A (zh) * | 2019-09-21 | 2021-03-23 | 华为技术有限公司 | 一种投屏方法及系统 |
| CN110995923A (zh) * | 2019-11-22 | 2020-04-10 | 维沃移动通信（杭州）有限公司 | 一种投屏控制方法及电子设备 |
| CN111324327A (zh) * | 2020-02-20 | 2020-06-23 | 华为技术有限公司 | 投屏方法及终端设备 |
| CN111367486A (zh) * | 2020-05-26 | 2020-07-03 | 北京小米移动软件有限公司 | 一种来电隐私保护方法及系统 |
| CN112149194A (zh) * | 2020-09-18 | 2020-12-29 | 珠海格力电器股份有限公司 | 设备投屏的方法和装置、存储介质和电子装置 |
| CN112463089A (zh) * | 2020-10-21 | 2021-03-09 | 贝壳技术有限公司 | 跨终端的图片同步缩放方法、装置、电子介质及存储介质 |
| CN112433692A (zh) * | 2020-12-11 | 2021-03-02 | 上海中通吉网络技术有限公司 | 投屏方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 一种面向家庭的多屏互动媒体播放系统的设计与实现;陈猛;《中国优秀硕士学位论文辑》;20191215;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113507694A (zh) | 2021-10-15 |
| US20220404879A1 (en) | 2022-12-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111601120A (zh) | 一种无线传屏显示系统与显示方法 | |
| US20210051374A1 (en) | Video file playing method and apparatus, and storage medium | |
| US11294495B2 (en) | Electronic whiteboard, method for image processing in electronic whiteboard, and recording medium containing computer program of electronic whiteboard | |
| WO2022100262A1 (zh) | 显示设备、人体姿态检测方法及应用 | |
| CN106791574B (zh) | 视频标注方法、装置及视频会议系统 | |
| CN113873272B (zh) | 一种控制直播视频的背景图像的方法、装置及存储介质 | |
| JP2021516501A (ja) | 映像に基づく情報取得方法及び装置 | |
| EP2939411B1 (en) | Image capture | |
| CN113010135B (zh) | 一种数据处理方法、装置、显示终端和存储介质 | |
| CN110928509A (zh) | 显示控制方法、显示控制装置、存储介质、通信终端 | |
| US20160117553A1 (en) | Method, device and system for realizing visual identification | |
| US20230384868A1 (en) | Display apparatus | |
| CN113507694B (zh) | 一种基于无线辅流设备的投屏方法及装置 | |
| CN113268211A (zh) | 图像获取方法、装置、电子设备及存储介质 | |
| CN112235510A (zh) | 拍摄方法、装置、电子设备和介质 | |
| CN209980227U (zh) | 一种智能显示系统及装置 | |
| JP2014236336A (ja) | 情報共有システム、情報共有装置、端末装置、プログラム、及び情報共有方法 | |
| CN112714272A (zh) | 设备间控制方法、终端和计算机可读存储介质 | |
| CN111447361B (zh) | 一种显示切换方法、装置、设备及存储介质 | |
| CN116980654B (zh) | 基于视频教学的交互方法、装置、设备及存储介质 | |
| WO2024051467A1 (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| JP6823628B2 (ja) | 描画システム、サーバ、および描画命令情報の送信方法 | |
| CN117615195A (zh) | 一种基于多路视频融合的投屏控制方法及相关设备 | |
| CN116506678A (zh) | 一种显示设备及融合虚拟人物的媒资播放方法 | |
| CN117632065A (zh) | 一种投屏显示系统、方法及显示设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |