CN115495307A - 一种传屏数据的处理方法、装置、计算机可读存储介质及系统 - Google Patents

一种传屏数据的处理方法、装置、计算机可读存储介质及系统 Download PDF

Info

Publication number
CN115495307A
CN115495307A CN202211032198.2A CN202211032198A CN115495307A CN 115495307 A CN115495307 A CN 115495307A CN 202211032198 A CN202211032198 A CN 202211032198A CN 115495307 A CN115495307 A CN 115495307A
Authority
CN
China
Prior art keywords
data
type
screen transmission
instruction
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211032198.2A
Other languages
English (en)
Other versions
CN115495307B (zh
Inventor
张文锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CSmartlink Information Technology Co Ltd
Original Assignee
CSmartlink Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CSmartlink Information Technology Co Ltd filed Critical CSmartlink Information Technology Co Ltd
Priority to CN202211032198.2A priority Critical patent/CN115495307B/zh
Publication of CN115495307A publication Critical patent/CN115495307A/zh
Application granted granted Critical
Publication of CN115495307B publication Critical patent/CN115495307B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G06F9/44521—Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
    • G06F9/44526—Plug-ins; Add-ons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本申请涉及一种传屏数据的处理方法、装置、计算机可读存储介质及系统。本申请的方案通过检测发送端的显示画面数据类型，并且检测一定时间段内发送端为无操作指令或仅存在第一类型指令时，则暂停发送传屏数据；若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令，若是，则恢复发送传屏数据。通过该方法，使得传屏装置在需要进行传屏时正常传屏，当显示画面数据类型为第一画面数据类型时，且在预设时间段内无操作或者仅存在预设操作，则暂停发送传屏数据，使得传屏装置无需时刻都进行高负荷的运行，避免由于传屏装置长时间工作造成温度过高、性能下降所造成的卡顿。

Description

一种传屏数据的处理方法、装置、计算机可读存储介质及系统
技术领域
本申请涉及数据传输及显示技术领域，特别涉及一种传屏的数据处理方法、装置、计算机可读存储介质及系统。
背景技术
随着经济的发展，人们的生活水平在不断提升，人们不再满足于使用小屏幕的终端获取信息，传屏技术的出现满足了人们的视听欲望。传屏技术，顾名思义，将一个屏幕上的内容传送到另一个屏幕上进行显示，该技术被广泛应用在工作会议、家庭影院、教育、医疗等领域。常见的传屏技术分为两大类：一种是有线传屏，通过USB或者HDMI等数据线将两个屏幕连接起来；另一种是无线传屏，通过无线的方式传送屏幕数据。随着无线传输技术的发展以及4G、5G网络的普及，无线传屏成为现在的主流。
现有的无线传屏技术中，根据连接的接口不同，其传屏的机制也有所差异。当采用USB接口进行传屏时，传屏器运行内置的截屏软件，通过不停的截屏并发送至接收端，使得接收端获取发送端的画面，以实现传屏；当采用TYPE-C接口进行传屏时，传屏器直接获取发送端的视频流数据发送至接收端以实现传屏；两种主流的无线传屏技术各有利弊。目前，采用USB接口的无线投屏技术中，由于其采用不停截屏的方式实现传屏，因此存在占用资源严重，传输数据量大的问题，当需要处理的数据量较大、或者受其他因素影响设备的传输性能下降时，容易造成卡顿。目前存在以下几种解决上述问题的方法：1、通过检测画面是否进行切换，若切换，则将切换前的画面、切换后的画面以及切换动画发送至接收端，使得该切换动画在接收端执行，以此解决在切换动画存在的同时执行截屏操作，处理器负荷过高而出现卡顿现象；2、通过将窗体信息或者应用数据发送至接收端，使得接收端根据该窗体信息或者应用数据显示相应的数据，当需要切换窗体或者切换应用时，将切换操作发送至接收端，由接收端直接进行切换；然而该方法在传屏开始时就要发送大量数据，并且需要接收端也具有与发送端相同的或相似的配置信息，其需要具有能够打开窗体信息或者应用数据的系统，并且安装有相应的应用程序；3、在某些特定的应用场景，通过自动调节传屏参数，例如分辨率、帧率等，以动态调整需要传输的数据，避免传屏过程中画面卡顿；然而该方式仅适用于某些特定的应用场景，并且对于解决卡顿现象并不明显，甚至当设备的传输性能下降(例如温度过高等情况)时，会牺牲传输的画质以保证流畅度。由上可知，现有的技术中都无法很好的解决上述问题，导致用户体验较差。
因此，亟需一种快速高效方便的数据处理方法，以提高传屏装置的使用体验。
发明内容
基于此，本申请提出了一种传屏数据的处理方法、装置、计算机可读存储介质和系统，实现了快速高效方便的数据处理方法。
为实现上述目的，本申请提供一种传屏数据的处理方法，包括：
检测发送端的显示画面数据类型；
若所述显示画面数据类型为第一画面数据类型，且检测第一预设时间段内发送端为无操作指令或仅存在第一类型指令时，则暂停发送传屏数据；
若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；
若是，则恢复发送传屏数据。
进一步地，所述检测发送端的显示画面数据类型包括：
检测当前显示画面的应用程序类型，以及当前显示数据；
根据所述应用程序类型及所述显示数据判断显示画面数据类型。
进一步地，所述根据所述应用程序类型及所述显示数据判断显示画面数据类型包括：
若所述应用程序类型为静态应用程序，且所述显示数据中不包含预设插件，则判断所述显示画面数据为第一画面数据类型；
或者，
若所述应用程序类型为静态应用程序，且所述显示数据中包含预设插件，则检测第二预设时间段内所述预设插件的数据是否相同，若相同，则判断所述显示画面数据为第一画面数据类型；
或者，
若所述应用程序类型为动态应用程序，且所述动态应用程序的运行状态符合第一条件，则判断所述显示画面数据为第一画面数据类型。
进一步地，所述动态应用程序的运行状态符合第一条件，则判断所述显示画面数据为第一画面数据类型，包括：
通过后台获取所述动态应用程序的资源占用情况，若所述动态应用程序的所述资源占用情况低于第一阈值，则所述动态应用程序的运行状态符合第一条件；
或，
调取系统或者显卡驱动的接口以获得所述预设插件的状态，若所述动态应用程序的所述预设插件的状态为暂停状态，则所述动态应用程序的运行状态符合第一条件。
进一步地，所述检测第二预设时间段内所述预设插件的数据是否相同，包括：
获取所述预设插件的坐标信息以及插件尺寸信息；
基于所述坐标信息以及所述插件尺寸信息以所述第二时间间隔进行区域截图得到第一区域截图数据和第二区域截图数据；
判断所述第一区域截图数据和所述第二区域截图数据是否与相同。
进一步地，所述若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；若是，则恢复发送传屏数据，包括：
当检测到第二类型指令，则恢复发送传屏数据中的指令信息；
或，
当检测到第三类型指令，则启动截屏并发送截屏数据。
进一步的，所述当检测到第二类型指令，则恢复发送传屏数据中的指令信息包括：
所述第二类型指令为移动鼠标指令；
若检测到第二类型指令，则将鼠标移动对应的坐标数据发送至接收端；使得接收端根据所述坐标数据进行相应的显示。
为实现上述目的，本申请还提供一种传屏装置，所述装置包括：
显示画面数据类型检测模块，用于检测发送端的显示画面数据类型；
指令检测模块，用于检测发送端的指令；
暂停传屏模块，用于当所述显示画面数据类型检测模块检测所述显示画面数据类型为第一画面数据类型，且指令检测模块检测当前所述发送端无指令或仅存在第一类型指令时，暂停发送传屏数据；
恢复传屏模块，用于当指令检测模块检测接收到第二类型指令或第三类型指令时，恢复发送传屏数据。
为实现上述目的，本申请还提供一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述方法。
为实现上述目的，本申请还提供一种传屏系统，包括传屏装置和终端，所述传屏装置和终端包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述系统执行上述方法。
本申请的传屏数据的处理方法，通过检测发送端的显示画面数据类型，并且检测一定时间段内发送端为无操作指令或仅存在第一类型指令时，则暂停发送传屏数据；若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令，若是，则恢复发送传屏数据。通过该方法，使得传屏装置在需要进行传屏时正常传屏，当显示画面数据类型为第一画面数据类型时，且在预设时间段内无操作或者仅存在预设操作，则暂停发送传屏数据，使得传屏装置无需时刻都进行高负荷的运行，避免由于传屏装置长时间工作造成温度过高、性能下降所造成的卡顿。并且，通过检测到当前画面与未来一段时间内的画面一致时，暂停发送传屏数据，当检测画面会发生变化时，则恢复发送传屏数据，使得传屏过程更加流程，并且无需牺牲画质，即可达到流畅的传输，极大地提升了用户体验。此外，本方法在检测当前画面与未来一段时间内的画面一致时，结合传屏的特点，通过结合应用程序类型以及操作指令，综合判断画面信息，使得判断更加准确，暂停传屏和恢复传屏更加合理，节约传输资源，避免传屏过程出现卡顿，进一步提升用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
其中：
图1为一个实施例中传屏数据处理方法的流程图；
图2为一个实施例中的传屏装置示意图；
图3为一个实施例中传屏数据处理方法的系统示意图；
图4为一个实施例中计算机设备的结构框图。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
下面将结合本申请的实施例中的附图，对本申请的实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“包括”、“包含”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本申请的权利要求书、说明书以及说明书附图中的术语，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来，而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实际的关系或者顺序。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其他实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其他实施例相结合。
在本文中提及的“终端”，是指各种具有摄像头装置的终端，可以为各种可移动终端，例如：手机、平板或者笔记本电脑等，或者其他可以用于扫描识别二维码的智能终端。
在本文中提及的“传屏装置”，是指具有传屏功能的装置，该传屏装置可以将一个电子设备中显示的画面信息显示在目标显示设备的屏幕上；该传屏装置可以集成在显示设备中，或者独立存在，通过无线或者USB、TYPE-C、HDMI等各种接口与显示设备进行连接。
在本文中提及的“传屏数据”，包括了传屏过程中需要发送的画面信息，以及传屏过程中需要发送的指令信息；该指令信息可以是用户的各种操作指令信息，也可以是显示设备或系统生成的各种指令。
下面再结合附图1对本发明实施例提供的一种传屏数据处理方法进行示例性的说明。
如图1所示，提出了一种传屏数据处理方法，所述方法包括如下步骤：
S101检测发送端的显示画面数据类型；
其中，该检测步骤可以由相应的检测程序进行，该检测程序可以预先安装在显示设备中，也可以内置于传屏装置中，在此不做具体限定。当传屏装置插入显示设备中时，或者，当传屏装置启动时，检测装置自动运行，获取显示设备的相应接口，对当前发送端需要发送的显示画面的数据类型进行检测。
S103若所述显示画面数据类型为第一画面数据类型，且检测第一预设时间段内发送端为无操作指令或仅存在第一类型指令时，则暂停发送传屏数据；
其中，所述显示画面数据类型可以通过检测显示画面对应的应用程序类型以及显示数据综合判断。具体地，应用程序类型可以通过直接获取显示设备当前正在前端显示的画面对应的应用程序类型，或者是通过对当前显示设备正在显示的画面进行识别，以获得对应的应用程序类型。
其中，第一画面数据类型可以指在第一预设时间段内的画面未产生变化，为静止的画面；当判断所述显示画面数据类型为第一画面数据类型时，进一步检测在第一预设时间段内是否为无操作指令或仅存在第一类型指令，若结果为是时，则暂停发送传屏数据。其中，无操作指令为用户未对显示设备进行任何操作，第一类型指令为不会对显示画面数据产生实质性影响的指令。
在本实施例中，暂停发送传屏数据，可以为暂停发送传屏数据中的画面数据，具体地，可以为暂停发送画面数据，但是传屏装置依旧在运行截屏程序；或者直接暂停传屏装置的截屏程序，使其不再继续截屏，更加节约传屏装置的处理资源，此实施例并不做进一步限定。当然，本实施例中的暂停发送传屏数据，也可以为暂停发送传屏数据中的画面数据以及指令信息。
在本实施例中，该第一类型指令为不会对显示画面数据产生实质性影响的指令。具体地，可以结合应用程序类型，以及目前鼠标或光标位置以及使用者的输入操作进行检测。当判断显示画面数据为第一画面数据类型时，例如，当前显示画面数据为PDF的画面数据，或者为视频播放软件暂停的画面时，对其鼠标或光标位置进行检测；当其鼠标或者光标位置处于不可编辑区域或者不可操作性的控件上时，即便是使用者输入了鼠标点击操作指令、或者键盘的字符输入操作指令、或者系统触发了其他指令，该些输入操作指令以及系统的其他指令也不会产生实质性的画面变化，因此，可以理解的是，即便是进行了第一类型指令的输入，画面依旧保持不变。具体地，上述不可编辑区域或者不可操作性的控件可以根据应用程序预先进行设定，也可以即时的对当前前端运行应用程序的控件类型以及对应指针或函数进行识别，在此不做具体限定。
S105若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；
其中，第二类型指令为不会对显示画面数据产生实质性影响、但是会对除显示画面所在层的其他层产生影响的指令；第三类型指令为会对显示画面数据产生实质性影响的指令。
S107若是，则恢复发送传屏数据。
具体地，发送端处于暂停发送传屏数据状态时，且检测到第二类型指令或第三类型指令，则恢复发送传屏数据。可以理解的是，由于传屏数据包括传屏过程中需要发送的画面信息，以及传屏过程中需要发送的指令信息，此处恢复发送传屏数据，可以为完全恢复发送传屏数据，即恢复发送画面信息以及指令信息；也可以是部分恢复发送传屏数据，即恢复发送画面信息或指令信息。具体为完全恢复或者部分恢复，可以根据需要进行选择，在此不作具体限定。并且，根据其暂停发送传屏数据的不同，其恢复的方式也不同。若暂停发送传屏数据是通过暂停发送画面数据，但是传屏装置依旧在运行截屏程序，那么恢复发送传屏数据时，直接恢复发送画面数据即可；若暂停发送传屏数据是通过暂停传屏装置的截屏程序，那么在恢复发送传屏数据的画面信息时，需要相应的恢复截屏程序。
在本实施例中，通过对显示画面数据类型进行检测，并且对输入指令进行检测，以判断当前是否需要持续发送传屏数据，当接下来即将发送的传屏数据与当前发送的传屏数据一致，接收端在接收到发送过来的传屏数据时，在接收端显示的画面并不会发生实质性的变化；因此若持续发送，会导致资源浪费，传屏装置一直处于工作状态，容易造成卡顿；使用本实施例的方法，可以使传屏装置在适当的时候暂停发送，使其处于低负荷状态，可以降低其产生的热量，使其运行在最佳性能，避免传屏时候出现卡顿，提高用户体验。
在另一个实施例中，所述检测发送端的显示画面数据类型包括：检测当前显示画面的应用程序类型，以及当前显示数据；根据所述应用程序类型及所述显示数据判断显示画面数据类型。
具体地，当需要判断显示画面数据类型时，本实施例采用的是通过结合当前显示画面的应用程序类型以及当前显示数据进行判断。应用程序类型已经在前一实施例中记载，在此不做赘述。
具体地，根据所述应用程序类型及所述显示数据判断显示画面数据类型可以包括：若所述应用程序类型为静态应用程序，且所述显示数据中不包含预设插件，则判断所述显示画面数据为第一画面数据类型；或者，若所述应用程序类型为静态应用程序，且所述显示数据中包含预设插件，则检测第二预设时间段内所述预设插件的数据是否相同，若相同，则判断所述显示画面数据为第一画面数据类型；或者，若所述应用程序类型为动态应用程序，且所述动态应用程序的运行状态符合第一条件，则判断所述显示画面数据为第一画面数据类型。
在本实施例一个示例中，根据所述应用程序类型及所述显示数据判断显示画面数据类型可以包括：首先，判断应用程序类型；若应用程序类型为静态应用程序，所述静态应用程序是指，主要显示文字类、静态图像类等静态画面的应用程序，如：WORD、EXCEL、PPT等OFFICE软件，或者是PDF、文本文档、画图工具等其他类型的软件。虽然为静态应用程序，然而，在极少数的情况下，该些软件中也可能会嵌入一些动态的插件，因此，当判断应用程序类型为静态应用程序后，需要对预设插件进行检测。具体地，该插件可以为一些动态的控件，或者是一些嵌入的动态对象，例如：嵌入的视频窗口、或者是嵌入的动态图像等。当检测该静态应用程序中不包含预设插件时，可以判定该显示画面数据为第一画面数据类型。
在本实施例另一个示例中，若检测到该静态应用程序中包含预设插件时，则需要对其进行进一步地判断；通过检测第二预设时间段内所述预设插件的数据是否相同来判断该显示画面数据是否为第一画面数据类型。具体地，通过检测第二预设时间段内该预设插件的数据是否前后一致，若一致，则证明该预设插件的数据没有变化，其所对应的画面同样不会有变化，则可以判定该显示画面数据为第一画面数据类型。反之，若第二预设时间段内该预设插件的数据前后不一致，则证明该插件正在运行，其所对应的画面在变化，此时需要不停的进行传屏，才能保证信息完整的传送至接收端。
在本实施例另一个示例中，若应用程序类型为动态应用程序，所述动态应用程序是指，主要显示视频类等动态画面的应用程序，如：各种视频播放软件等。虽然动态应用程序，是用于展示视频类信息的，但是经常会由于种种原因而暂停播放，比如：需要对当前画面进行讲解、或者临时有事等。当期暂停播放时，其显示画面也会随之暂停，若此时继续传输传屏数据，会造成传输资源的浪费。因此，当判定为动态应用程序，且符合第一条件时，则将显示画面数据判断为第一画面数据类型。
进一步地，上述第一条件，为该动态应用程序处于静止的状态。具体判断方式可以为：通过后台获取所述动态应用程序的资源占用情况，若所述动态应用程序的所述资源占用情况低于第一阈值，则所述动态应用程序的运行状态符合第一条件。其中，第一阈值可以根据该动态应用程序正常运行状态下的资源占用情况。例如：通常一个普通的视频播放软件在仅打开软件未播放具体视频文件时，以常用的视频播放软件XX影音为例，其需要占用40MB左右的内存，而若其正在播放视频文件时，其占用的内存资源至少在80MB或者是更多(具体与其打开的视频文件的大小有关)；可以将常规的视频播放软件的第一条件设置为内存≤50MB，当然，可以理解的是，不同的动态应用程序可以拥有不同的第一条件，当识别到动态应用程序时，获取对应的应用程序标识，并且与对应的第一阈值比较以判断其是否符合第一条件。因此，通过判断该动态应用程序是否符合第一条件，来判断该显示画面数据是否属于第一画面数据类型。
除此之外，还可以通过调取系统或者显卡驱动的接口以获得所述预设插件的状态，若所述动态应用程序的所述预设插件的状态为暂停状态，则可以判断该动态应用程序符合第一条件。
由于日常的传屏场景中，常见的为办公场景或者是娱乐场景，在这两个场景中，将展示的画面传送到目标显示设备，以获得更加的视听体验。本实施例中，通过对传屏过程中的发送端画面进行分析，将其根据应用程序进行分类，并且结合在第一预设时间段内的之内，进一步判断其画面是否处于静止来判断是否要暂停发送传屏数据，可以实现更加准确的判断。通常，当需要判断两个画面是否相同时，往往采用简单地画面比对的方式，然而，该方式会存在较大概率的误判，尤其是对于文档类的画面。众所周知，文档类的画面通常都会存在光标，光标是以闪烁的方式存在；而在传屏领域，当展示文档时，光标并没有存在意义。当使用常规的画面比对的方式来判断画面是否静止时，其结果可能会受光标闪烁的影响。具体地，当两幅画面分别为光标存在和光标不存在的图像，若直接采用画面比对的方式，会判定为两个画面不相同，而对于用户而言，两个画面实质上是相同的；或者，通过对画面比对的算法进行优化，然而，该方式需要改进算法，投入成本高；又或者，设置判断的阈值，当画面99％以上相同就判定为静止画面，以忽略光标闪烁的影响，但是该方式误判几率大，当原始画面更改一个错别字时，可能导致被判定为静止画面，导致目标设备不会同步更改。并且当在传屏过程中，目标显示设备上有没有光标的闪烁并不会影响其要传送的画面实际要表达的内容。因此，本申请结合传屏领域的实际问题，通过对应用程序类型进行判断，并进一步检测其是否包含预设插件，来判断显示画面数据是否为第一画面数据类型。通过上述方式，可以避免光标带来的影响，并且可以更准确的对显示画面数据类型进行判断，进而更准确的对传屏装置进行操作，使其能够准确的暂停和恢复传屏。
进一步地，所述检测第二预设时间段内所述预设插件的数据是否相同，包括：获取所述预设插件的坐标信息以及插件尺寸信息；基于所述坐标信息以及所述插件尺寸信息以所述第二时间间隔进行区域截图得到第一区域截图数据和第二区域截图数据；判断所述第一区域截图数据和所述第二区域截图数据是否与相同。当所述应用程序类型为静态应用程序，且所述显示数据中包含预设插件时，需要检查第二预设时间段内所述预设插件的数据是否相同；可以通过上述区域性截图来进行判断。通过上述区域性截图，可以节省判断时所占用的资源，提高判断速度。
在另一实施例中，若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；若是，则恢复发送传屏数据，包括：当检测到第二类型指令，则恢复发送传屏数据中的指令信息；或，当检测到第三类型指令，则启动截屏并发送截屏数据。
具体地，该第二类型指令为不会对显示画面数据产生实质性影响、但是会对除显示画面所在层的其他层产生影响的指令，例如：移动鼠标指令等。若检测到第二类型指令时，说明使用者在展示过程中移动了鼠标，此时恢复发送传屏数据中的指令信息，即将鼠标移动对应的坐标数据发送至接收端；使得接收端根据所述坐标数据进行相应的显示。可以理解的是，在传屏过程中展示静止画面时，用户可以通过鼠标来指示画面的重点。当使用者移动鼠标时，则获取鼠标移动对应的坐标数据，将其发送至接收端，接收端接收到上述坐标数据后，在目标显示设备上显示画面的上层的对应的位置显示鼠标指针或者其他可用于指示的图案，以达到使用者用鼠标指针指示画面重点的目的。
具体地，该第三类型指令为会对显示画面数据产生实质性影响的指令，例如：对鼠标的单击、双击、键盘在可编辑区域进行输入、切换窗口等操作。当检测到使用者或者系统发送、输入或产生第三类型指令时，显示画面数据会发生变化；此时，恢复发送传屏数据，使传屏装置恢复到正常的传屏状态，其恢复截屏并不停的传输截屏信息，使得发送端的显示画面可以发送到接收端并进行显示。
本实施例中，通过检测使用者或者系统的指令，判断画面是否会发生变化，以实现在传屏暂停时，恢复发送传屏数据，使得传屏装置能够无感的进行暂停和恢复传屏，既节约了传输资源，使得传屏装置不需要持续发送传屏数据，又提高了用户体验，传屏过程中不会出现卡顿现象。
如图2所示，在一个实施例中，提供了一种传屏装置，所述装置包括：存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行；所述装置还包括：
显示画面数据类型检测模块202，用于检测发送端的显示画面数据类型；
指令检测模块204，用于检测发送端的指令；
暂停传屏模块206，用于当所述检测模块检测所述显示画面数据类型为第一画面数据类型，且指令检测模块检测当前所述发送端无指令或仅存在第一类型指令时，暂停发送传屏数据；
恢复传屏模块208，用于当指令检测模块检测接收到第二类型指令或第三类型指令时，恢复发送传屏数据。
在一个实施例中，提出了一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述传屏数据的处理方法。
如图3所示，在一个实施例中，提供了一种实现传屏的数据处理方法的系统，包括传屏装置和终端，所述传屏装置和终端包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述传屏数据的处理方法。
图4示出了一个实施例中计算机设备的内部结构图。该计算机设备具体可以是终端，也可以是服务器。如图4所示，该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，存储器包括非易失性存储介质和内存储器。该计算机设备的非易失性存储介质存储有操作系统，还可存储有计算机程序，该计算机程序被处理器执行时，可使得处理器实现传屏数据的处理方法。该内存储器中也可储存有计算机程序，该计算机程序被处理器执行时，可使得处理器执行传屏数据的处理方法。本领域技术人员可以理解，图4中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
可以理解的是，上述传屏数据的处理方法、传屏装置以及传屏系统属于一个总的发明构思，实施例可相互适用。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种传屏数据的处理方法，其特征在于，所述方法包括：
检测发送端的显示画面数据类型；
若所述显示画面数据类型为第一画面数据类型，且检测第一预设时间段内发送端为无操作指令或仅存在第一类型指令时，则暂停发送传屏数据；
若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；
若是，则恢复发送传屏数据。
2.根据权利要求1所述的方法，其特征在于，所述检测发送端的显示画面数据类型包括：
检测当前显示画面的应用程序类型，以及当前显示数据；
根据所述应用程序类型及所述显示数据判断显示画面数据类型。
3.根据权利要求2所述的方法，其特征在于，所述根据所述应用程序类型及所述显示数据判断显示画面数据类型包括：
若所述应用程序类型为静态应用程序，且所述显示数据中不包含预设插件，则判断所述显示画面数据为第一画面数据类型；
或者，
若所述应用程序类型为静态应用程序，且所述显示数据中包含预设插件，则检测第二预设时间段内所述预设插件的数据是否相同，若相同，则判断所述显示画面数据为第一画面数据类型；
或者，
若所述应用程序类型为动态应用程序，且所述动态应用程序的运行状态符合第一条件，则判断所述显示画面数据为第一画面数据类型。
4.根据权利要求3所述的方法，其特征在于，所述动态应用程序的运行状态符合第一条件，则判断所述显示画面数据为第一画面数据类型，包括：
通过后台获取所述动态应用程序的资源占用情况，若所述动态应用程序的所述资源占用情况低于第一阈值，则所述动态应用程序的运行状态符合第一条件；
或，
调取系统或者显卡驱动的接口以获得所述预设插件的状态，若所述动态应用程序的所述预设插件的状态为暂停状态，则所述动态应用程序的运行状态符合第一条件。
5.根据权利要求3所述的方法，其特征在于，所述检测第二预设时间段内所述预设插件的数据是否相同，包括：
获取所述预设插件的坐标信息以及插件尺寸信息；
基于所述坐标信息以及所述插件尺寸信息以所述第二时间间隔进行区域截图得到第一区域截图数据和第二区域截图数据；
判断所述第一区域截图数据和所述第二区域截图数据是否与相同。
6.根据权利要求1所述的方法，其特征在于，所述若所述发送端处于暂停发送传屏数据状态，则检测是否接收到第二类型指令或第三类型指令；若是，则恢复发送传屏数据，包括：
当检测到第二类型指令，则恢复发送传屏数据中的指令信息；
或，
当检测到第三类型指令，则启动截屏并发送截屏数据。
7.根据权利要求6所述的方法，其特征在于，所述当检测到第二类型指令，则恢复发送传屏数据中的指令信息包括：
所述第二类型指令为移动鼠标指令；
若检测到第二类型指令，则将鼠标移动对应的坐标数据发送至接收端；使得接收端根据所述坐标数据进行相应的显示。
8.一种传屏装置，其特征在于，所述装置包括：
显示画面数据类型检测模块，用于检测发送端的显示画面数据类型；
指令检测模块，用于检测发送端的指令；
暂停传屏模块，用于当所述显示画面数据类型检测模块检测所述显示画面数据类型为第一画面数据类型，且指令检测模块检测当前所述发送端无指令或仅存在第一类型指令时，暂停发送传屏数据；
恢复传屏模块，用于当指令检测模块检测接收到第二类型指令或第三类型指令时，恢复发送传屏数据。
9.一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至7所述方法的步骤。
10.一种传屏系统，包括传屏装置和终端，所述传屏装置和终端包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述系统执行如权利要求1至7中任一项所述的方法的步骤。
CN202211032198.2A 2022-08-26 2022-08-26 一种传屏数据的处理方法、装置、计算机可读存储介质及系统 Active CN115495307B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211032198.2A CN115495307B (zh) 2022-08-26 2022-08-26 一种传屏数据的处理方法、装置、计算机可读存储介质及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211032198.2A CN115495307B (zh) 2022-08-26 2022-08-26 一种传屏数据的处理方法、装置、计算机可读存储介质及系统

Publications (2)

Publication Number Publication Date
CN115495307A true CN115495307A (zh) 2022-12-20
CN115495307B CN115495307B (zh) 2023-05-30

Family

ID=84466107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211032198.2A Active CN115495307B (zh) 2022-08-26 2022-08-26 一种传屏数据的处理方法、装置、计算机可读存储介质及系统

Country Status (1)

Country Link
CN (1) CN115495307B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117234448A (zh) * 2023-09-04 2023-12-15 广州力加贺电子科技有限公司 一种传屏方法、计算机设备和介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107291412A (zh) * 2017-05-19 2017-10-24 广州视源电子科技股份有限公司 无线传屏方法及系统
WO2018090723A1 (zh) * 2016-10-12 2018-05-24 广州视源电子科技股份有限公司 实现有线传屏的方法及装置
CN108282677A (zh) * 2018-01-24 2018-07-13 上海哇嗨网络科技有限公司 通过客户端实现内容投屏的方法、投屏装置及系统
CN110442366A (zh) * 2019-08-09 2019-11-12 广州视源电子科技股份有限公司 一种传屏处理方法、装置、设备和存储介质
CN112653913A (zh) * 2020-12-25 2021-04-13 深圳市网旭科技有限公司 投屏方法、装置、客户端设备及可读存储介质
CN114428598A (zh) * 2022-01-30 2022-05-03 深圳创维－Rgb电子有限公司 投屏方法、装置、电子设备及存储介质
CN114816287A (zh) * 2021-01-27 2022-07-29 广州视源电子科技股份有限公司 传屏控制方法、装置、存储介质及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018090723A1 (zh) * 2016-10-12 2018-05-24 广州视源电子科技股份有限公司 实现有线传屏的方法及装置
CN107291412A (zh) * 2017-05-19 2017-10-24 广州视源电子科技股份有限公司 无线传屏方法及系统
CN108282677A (zh) * 2018-01-24 2018-07-13 上海哇嗨网络科技有限公司 通过客户端实现内容投屏的方法、投屏装置及系统
CN110442366A (zh) * 2019-08-09 2019-11-12 广州视源电子科技股份有限公司 一种传屏处理方法、装置、设备和存储介质
CN112653913A (zh) * 2020-12-25 2021-04-13 深圳市网旭科技有限公司 投屏方法、装置、客户端设备及可读存储介质
CN114816287A (zh) * 2021-01-27 2022-07-29 广州视源电子科技股份有限公司 传屏控制方法、装置、存储介质及电子设备
CN114428598A (zh) * 2022-01-30 2022-05-03 深圳创维－Rgb电子有限公司 投屏方法、装置、电子设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117234448A (zh) * 2023-09-04 2023-12-15 广州力加贺电子科技有限公司 一种传屏方法、计算机设备和介质

Also Published As

Publication number Publication date
CN115495307B (zh) 2023-05-30

Similar Documents

Publication Publication Date Title
CN112269516B (zh) 桌面元数据的显示方法、访问方法及相关装置
WO2021169236A1 (zh) 渲染的方法、装置
CN110692251B (zh) 组合数字视频内容的方法及系统
US20220058772A1 (en) Image Processing Method and Device
US11889135B2 (en) Video stream playing control method and apparatus, and storage medium
WO2021169616A1 (zh) 非活体人脸的检测方法、装置、计算机设备及存储介质
CN109298806B (zh) 一种基于对象识别的远程快速界面交互方法及装置
CN111638937A (zh) 虚拟机的迁移方法、装置、电子设备及存储介质
WO2023024791A1 (zh) 帧率调整方法、装置、电子设备、存储介质及程序
CN115495307B (zh) 一种传屏数据的处理方法、装置、计算机可读存储介质及系统
JP7465370B2 (ja) 情報共有方法、装置、電子機器及び記憶媒体
US20220303621A1 (en) Method and Apparatus for Providing Video Stream Based on Machine Learning
CN111638938A (zh) 虚拟机的迁移方法、装置、电子设备及存储介质
EP2661083A2 (en) Video encoding system, method and computer readable medium thereof
CN110543384B (zh) 内存的回写方法、装置、终端及存储介质
CN111580980A (zh) 内存管理方法和装置
CN111752722A (zh) 数据传输方法及设备
CN113780163B (zh) 一种页面加载时间的检测方法、装置、电子设备及介质
WO2020253058A1 (zh) 图片悬浮显示方法、装置、终端和存储介质
CN111399735B (zh) 一种截屏方法、截屏装置、电子设备和存储介质
CN114356568A (zh) 信息处理方法、装置、电子设备及存储介质
CN114740975A (zh) 目标内容的获取方法及相关设备
CN108228307B (zh) 应用的显示方法、装置、存储介质及电子设备
US12069320B1 (en) Systems and methods for managing sharing of a video in a collaboration session
CN118113206B (zh) 一种平板电脑分屏智能控制方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant