CN112291588A - 显示内容的共享方法及装置、设备、可读存储介质 - Google Patents

显示内容的共享方法及装置、设备、可读存储介质 Download PDF

Info

Publication number
CN112291588A
CN112291588A CN202011083956.4A CN202011083956A CN112291588A CN 112291588 A CN112291588 A CN 112291588A CN 202011083956 A CN202011083956 A CN 202011083956A CN 112291588 A CN112291588 A CN 112291588A
Authority
CN
China
Prior art keywords
information
changed pixels
change
image frame
receiving end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011083956.4A
Other languages
English (en)
Inventor
朱玉荣
彭泽波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Wenxiang Information Technology Co ltd
Original Assignee
Beijing Wenxiang Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Wenxiang Information Technology Co ltd filed Critical Beijing Wenxiang Information Technology Co ltd
Priority to CN202011083956.4A priority Critical patent/CN112291588A/zh
Publication of CN112291588A publication Critical patent/CN112291588A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/223—Analysis of motion using block-matching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供的显示内容的共享方法及装置、设备、可读存储介质，检测相邻图像帧中显示的对象的变化，并响应于第一对象的变化，采集第一对象对应的分块中，发生变化的像素的信息，传输所述发生变化的像素的信息至接收端。因为任意一个对象对应的分块为图像帧中包括该对像的预设区域，所以可见，向接收端发送的仅为对象的变化导致的变化的像素的信息，这种传输增量的方式，能够降低传输数据量，从而减少显示内容共享的时延。并且因为对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项，可见检测的是容易发生变化的内容，而非图像帧中的全部内容，所以，能够进一步减小检测的时间，从而进一步减少显示内容共享的时延。

Description

显示内容的共享方法及装置、设备、可读存储介质
技术领域
本申请涉及电子信息领域，尤其涉及一种显示内容的共享方法及装置、设备、可读存储介质。
背景技术
显示内容共享被普遍应用于各个领域中，例如，现有视频会议或者远程控制中，抓取显示桌面至共享桌面或者远程控制。传输桌面画面时先抓取整个桌面图像，编码为jpg、mpeg或者h264格式，网络传输到对端进行解码显示。
在业务的实时性要求较高的情况下，例如，视频会议需要较高的实时性，如何减少显示内容共享的时延，成为亟待解决的问题。
发明内容
本申请提供了一种显示内容的共享方法及装置、设备、可读存储介质，目的在于解决如何减少显示内容共享的时延的问题。
为了实现上述目的，本申请提供了以下技术方案：
一种显示内容的共享方法，包括：
检测相邻图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述图像帧中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输所述发生变化的像素的信息至接收端，其中，所述信息用于所述接收端显示所述图像帧。
可选的，所述光标对应的所述分块包括：
以所述光标的位置为中心区域，具有预设半径的区域；
所述虚拟键盘对应的所述分块包括：所述虚拟键盘所占的区域；
所述软件窗体对应的所述分块包括：所述软件窗体所占的区域。
可选的，所述对象还包括：
所述图像帧中的预设行，所述预设行至少包括第一行和最后一行。
可选的，所述图像帧的预设行对应的所述分块包括：
所述图像帧，所述图像帧中的显示内容为全屏播放的视频。
可选的，采集所述虚拟键盘所占的区域中，发生变化的像素的信息的过程包括：
采集在所述虚拟键盘中输入的字符的信息，作为变化的像素的信息。
可选的，所述采集所述第一对象对应的所述分块中，发生变化的像素的信息，包括：
将所述第一对象对应的所述分块中，发生变化的像素的位置和像素值，记录在所述第一对象被预先配置对应的矩阵中；
所述传输所述发生变化的像素的信息至接收端，包括：
传输所述矩阵至所述接收端。
可选的，在所述传输所述发生变化的像素的信息至接收端之前，还包括：
响应于所述第一对象的变化，采集所述第一对象对应的所述分块的相邻区域中，发生变化的像素的信息。
一种显示内容的共享装置，包括：
检测模块，用于检测图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述桌面中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
采集模块，用于响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输模块，用于传输所述发生变化的像素的信息至接收端，所述信息用于所述接收端显示所述图像帧的后续图像帧。
一种显示内容的共享设备，包括：
存储器和处理器；
所述存储器用于存储程序，所述处理器用于运行所述程序，以实现上述的显示内容的共享方法。
一种计算机可读存储介质，其上存储有程序，所述程序可被计算设备读取并运行，以实现上述的显示内容的共享方法。
本申请所述的技术方案，检测相邻图像帧中显示的对象的变化，并响应于第一对象的变化，采集第一对象对应的分块中，发生变化的像素的信息，传输所述发生变化的像素的信息至接收端。因为任意一个对象对应的分块为图像帧中包括该对像的预设区域，所以可见，向接收端发送的仅为对象的变化导致的变化的像素的信息，这种传输增量的方式，能够降低传输数据量，从而减少显示内容共享的时延。并且因为对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项，可见检测的是容易发生变化的内容，而非图像帧中的全部内容，所以，能够进一步减小检测的时间，从而进一步减少显示内容共享的时延。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种显示内容的共享方法的流程图；
图2为本申请实施例公开的又一种显示内容的共享方法的流程图；
图3为本申请实施例公开的相邻图像帧中的对象的变化的示例图；
图4为本申请实施例公开的一种显示内容的共享装置的结构示意图；
图5为本申请实施例公开的一种显示内容的共享设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例提供的显示内容的共享方法，可以应用在共享服务器上，目的在于，只传输共享内容的增量内容，以减少传输的数据量和传输的实现，提高共享的实时性。
图1为本申请实施例公开的一种显示内容的共享方法，包括以下步骤：
S101：检测相邻图像帧中显示的对象的变化。
本实施例中，显示的对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项。
对象分别被预先配置对应各自的分块，与任意一个对象对应的分块为，图像帧中包括该对象的分块。分块的大小和形状可以预先由人为配置，这里不做限定。
可以理解的是，显示的对象的变化，包括相邻两帧图像中对象从无到有，或者从有到无，还包括相邻的两帧图像中都显示的对象的状态的变化。
具体的，对于指示鼠标的光标，状态的变化可以包括但不限于：光标的移动或触发状态变化，触发状态变化由单击或双击鼠标触发，例如，双击鼠标触发光标位置弹出菜单。
对于虚拟键盘，状态的变化可以包括但不限于输入字符、开启或关闭。
对于软件窗体，状态的变化可以包括但不限于：开启或关闭、软件窗体的大小、位置、以及显示内容的变化。
S102：响应于第一对象的变化，采集第一对象对应的分块中，发生变化的像素的信息。
其中，第一对象为任意一个对象。可以理解的是，在任意一个对象发生变化的情况下，即采集该对象对应的分块中发生变化的像素的信息。在有多个对象发生变化的情况下，可以并行采集多个对象对应的分块中发生变化的像素的信息，以提高效率，从而进一步减小共享的时延。
S103：传输发生变化的像素的信息至接收端。
可以理解的是，在S101之前，需要先向接收端传输图像帧i，S101中的图像帧中显示的对象的变化，则为图像帧i+1与图像帧i相比，对象的变化。接收端依据图像帧i和S103中的发生变化的像素的信息，显示图像帧i+1。
可见，本实施例所述的显示内容的共享方法，采集发送变化的像素的信息并传输至接收端，所以能够降低传输量。并且，将常见显示对象作为检测和采集单位，能够降低检测和采集量，而进一步降低传输量和时延，有利于提高共享的实时性。
下面以桌面共享为例，对图1所示的方法进行更为详细的举例说明。
图2为本申请实施例公开的又一种显示内容的共享方法，应用在以下场景，第一设备与第二设备共享桌面。
图2中包括以下流程：
S201：第一设备与第二设备建立连接后，向第二设备发送第一帧桌面图像。
本实施例中，假设第一帧桌面图像中包括指示鼠标的光标、虚拟键盘、和软件窗体。
具体的，光标对应的分块为以所述光标的位置为中心区域，具有预设半径的区域，如图3中的分块1。其中，预设半径的大小，决定了分块中的像素量的大小，即后续需要检测的数据量的大小。
虚拟键盘对应的分块为虚拟键盘所占的区域，如图3中的分块2。
软件窗体对应的分块为软件窗体所占的区域，如图3中的分块3。
S202：第一设备检测第二帧桌面图像与第一帧桌面图像相比，显示的对象的变化。
检测对象的变化的方式可以参见现有技术，例如：将内存中存储的光标对应的分块中的像素信息进行对比。又例如，通过HOOK虚拟键盘，检测虚拟键盘对应的分块中的像素的变化。
需要说明的是，因为软件窗体大都是矩形的，并且，因为软件窗体的变化可以包括但不限于软件窗体的大小、位置、以及显示内容的变化，所以，可以先检测软件窗体对应的分块的顶点坐标以及分块的大小，如果发生变化，则说明检测软件窗体的大小、位置发生了变化，则可以直接将分块中的全部像素作为发生变化的像素，如果没有发生变化，则再对比分块中的各个像素点，以提高对比的效率。
本实施例中，如图3所示，假设第一帧桌面图像与第二帧桌面图像相比，鼠标从第一位置滑动到第二位置，虚拟键盘输入字符k，软件窗体从开启变化为关闭。
S203：第一设备响应于第一对象的变化，采集第一对象对应的分块中，发生变化的像素的信息。
接上例，鼠标从第一位置滑动到第二位置，则分块1变更为分块a，所以光标对应的分块中发生变化的像素为，分块a与分块1相比，发生变化的像素。
虚拟键盘输入字符k(图3中未画出)，则分块2中新增了字符k(图3中未画出)。
软件窗体从开启变化为关闭，则按照软件窗体对应的分块的定义，分块3在第二帧图像中不存在，所以软件窗体对应的分块的变化为从有到无，因此，发生变化的像素为分块2中的全部像素。
S204：第一设备响应于第一对象的变化，采集第一对象对应的分块的相邻区域中，发生变化的像素的信息。
由于变化的分块可能会导致相邻区域的变化，所以S204的目的在于，使得采集的变化的像素的信息更为精准，从而提升第一设备和第二设备两端显示的桌面的同步性。
具体的，可以使用预设的步进值，按照从上至下、从左至右的顺序检测变化的分块的向量区域中的像素点。
S205：第一设备将发生变化的像素的位置和像素值，记录在被预先配置对应的矩阵中。
本实施例中，具体的，可以预先配置8个矩阵，矩阵中的元素的初始值均为零或1。
光标对应的分块中的发生变化的像素的信息记录在第1个矩阵中，虚拟键盘对应的分块中的发生变化的像素的信息记录在第2个矩阵中，软件窗体对应的分块中的发生变化的像素的信息记录在第3个矩阵中。由于变化的分块的相邻区域中发生变化的像素的数量可能较多，所以，变化的分块的相邻区域中发生变化的像素的信息记录在第3-6个矩阵中。
具体的，发生变化的像素的位置记录为矩阵中的元素的位置属性值，发生变化的像素的像素值记录为矩阵中的元素的值。
S205：第一设备传输矩阵至接收端(即第二设备)。
将发生变化的像素的信息记录在矩阵中的目的在于，可以以分块为维度，传输变化的像素的信息，从而实现并行传输变化的像素的信息，提高传输效率。
S206：第二设备依据接收到的矩阵和第一帧图像，显示第二帧图像。
可以理解的是，第二设备将矩阵中的像素位置的像素值，替换至第一帧图像中的对应位置，得到第二帧图像。
可以理解的是，执行上述流程后，第一设备对比第三帧图像与第二帧图像，得到变化的像素的信息，依次类推，分别得到任意一帧图像与上一帧图像相比，变化的像素的信息，并发给第二设备，第二设备依据接收到的矩阵和上一帧图像，显示当前帧图像。
从上述流程可以看出，本实施例所述的显示内容的共享方法，能够降低桌面的传输数据量和传输时延，从而提高桌面共享的实时性。同时，因为降低了桌面的传输数据量，所以，能够节省网络资源。
下面对显示内容共享的场景下的一些特殊情况进行说明。
1、显示的内容为全屏播放的视频，为了使得本申请公开的方法也适用于此情况，且具有较高的效率，可选的，对象还包括：图像帧中的预设行，至少包括第一行和最后一行，可选的，还可以包括其它行，例如最中间的行，包括的行数越多，则对变化的预测越准确，但也越耗费计算资源，因此实际中，可以按需设置预设行。预设行对应的分块为图像帧。
即，检测相邻图像帧在内存中存储的第一行和最后一行，如果发生变化，则将图像帧的像素作为发生变化的像素。
2、共享桌面的情况下，有可能第一设备和第二设备使用的输入法不同，因此，除了使用上述方式采集虚拟键盘的分块的变化的像素的信息外，还可以，采集在虚拟键盘中输入的字符的信息，作为变化的像素的信息。第二设备则可以将第一设备显示的虚拟键盘输入的字符，转换为本地输入法的匹配的方式显示。具体的转换方式可以参见现有技术。
3、共享桌面的情况下，有可能共享的是多个桌面，在此情况下，可以为各个桌面分配标识，并且，任意一个桌面的矩阵，对应该桌面的标识，因此，接收端可以区分不同桌面使用的矩阵，从而实现多个桌面共享情况下，也能够降低桌面共享的时延。
图4为本申请实施例公开的一种显示内容的共享装置，包括：检测模块、采集模块和传输模块。
其中，检测模块，用于检测图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述桌面中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项。
采集模块，用于响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象。
传输模块，用于传输所述发生变化的像素的信息至接收端，所述信息用于所述接收端显示所述图像帧的后续图像帧。
在上述装置实现的功能中，可选的，所述光标对应的分块包括：以所述光标的位置为中心区域，具有预设半径的区域；所述虚拟键盘对应的分块包括：所述虚拟键盘所占的区域；所述软件窗体对应的分块包括：所述软件窗体所占的区域。
可选的，所述对象还包括：所述图像帧中的预设行。所述图像帧的预设行对应的所述分块包括：所述图像帧。
可选的，采集模块采集所述虚拟键盘所占的区域中，发生变化的像素的信息的过程包括：采集在所述虚拟键盘中输入的字符的信息，作为变化的像素的信息。
所述采集模块采集所述第一对象对应的所述分块中，发生变化的像素的信息的具体实现方式，包括：将所述第一对象对应的所述分块中，发生变化的像素的位置和像素值，记录在所述第一对象被预先配置对应的矩阵中。
传输模块传输所述发生变化的像素的信息至接收端的具体实现方式，包括：传输所述矩阵至所述接收端。
可选的，采集模块还用于：在所述传输所述发生变化的像素的信息至接收端之前，响应于所述第一对象的变化，采集所述第一对象对应的所述分块的相邻区域中，发生变化的像素的信息。
本实施例中所述的显示内容的共享装置，具有较低的共享时延。
图5示出了一种显示内容的共享设备的结构示意图，该设备可以包括：至少一个处理器，至少一个通信接口，至少一个存储器和至少一个通信总线。
在本申请实施例中，处理器、通信接口、存储器、通信总线的数量为至少一个，且处理器、通信接口、存储器通过通信总线完成相互间的通信；
处理器可能是一个中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路等；
存储器可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatilememory)等，例如至少一个磁盘存储器；
其中，存储器存储有程序，处理器可执行存储器存储的程序，实现本申请实施例提供的一种显示内容的共享方法的各个步骤，如下：
一种显示内容的共享方法，包括：
检测相邻图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述图像帧中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输所述发生变化的像素的信息至接收端，其中，所述信息用于所述接收端显示所述图像帧。
可选的，所述光标对应的所述分块包括：
以所述光标的位置为中心区域，具有预设半径的区域；
所述虚拟键盘对应的所述分块包括：所述虚拟键盘所占的区域；
所述软件窗体对应的所述分块包括：所述软件窗体所占的区域。
可选的，所述对象还包括：
所述图像帧中的预设行，所述预设行至少包括第一行和最后一行。
可选的，所述图像帧的预设行对应的所述分块包括：
所述图像帧，所述图像帧中的显示内容为全屏播放的视频。
可选的，采集所述虚拟键盘所占的区域中，发生变化的像素的信息的过程包括：
采集在所述虚拟键盘中输入的字符的信息，作为变化的像素的信息。
可选的，所述采集所述第一对象对应的所述分块中，发生变化的像素的信息，包括：
将所述第一对象对应的所述分块中，发生变化的像素的位置和像素值，记录在所述第一对象被预先配置对应的矩阵中；
所述传输所述发生变化的像素的信息至接收端，包括：
传输所述矩阵至所述接收端。
可选的，在所述传输所述发生变化的像素的信息至接收端之前，还包括：
响应于所述第一对象的变化，采集所述第一对象对应的所述分块的相邻区域中，发生变化的像素的信息。
本申请实施例还公开了显示内容的共享系统，包括发送端和接收端。
其中，发送端为图4为本申请实施例公开的一种显示内容的共享装置。接收端包括：
接收模块，用于接收发送端发送的第一帧图像和发生变化的像素的信息。
显示模块，用于依据发生变化的像素的信息和第一帧图像，显示第二帧图像。
本申请实施例还公开了另一种显示内容的共享系统，包括第一设备和第二设备。
其中，第一设备为图5示出的显示内容的共享设备。第二设备为图2所示的方法中所述的“第二设备”。
具体的，本实施例中，第二设备的硬件结构可以参见图5所示的结构，包括存储器和处理器，其中，存储器上存储有应用程序，处理器用于执行应用程序，以实现以下功能：第二设备依据接收到的发生变化的像素的信息和第一帧图像，显示第二帧图像。具体实现方式可以参见图2所示的流程。
以上实施例中所述的显示内容的共享系统，具有较低的共享时延。
本申请实施例还公开了一种计算机可读存储介质，其上存储有程序，所述程序可被计算设备读取并运行，以实现本申请实施例提供的一种显示内容的共享方法的各个步骤，如下：
一种显示内容的共享方法，包括：
检测相邻图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述图像帧中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输所述发生变化的像素的信息至接收端，其中，所述信息用于所述接收端显示所述图像帧。
可选的，所述光标对应的所述分块包括：
以所述光标的位置为中心区域，具有预设半径的区域；
所述虚拟键盘对应的所述分块包括：所述虚拟键盘所占的区域；
所述软件窗体对应的所述分块包括：所述软件窗体所占的区域。
可选的，所述对象还包括：
所述图像帧中的预设行，所述预设行至少包括第一行和最后一行。
可选的，所述图像帧的预设行对应的所述分块包括：
所述图像帧，所述图像帧中的显示内容为全屏播放的视频。
可选的，采集所述虚拟键盘所占的区域中，发生变化的像素的信息的过程包括：
采集在所述虚拟键盘中输入的字符的信息，作为变化的像素的信息。
可选的，所述采集所述第一对象对应的所述分块中，发生变化的像素的信息，包括：
将所述第一对象对应的所述分块中，发生变化的像素的位置和像素值，记录在所述第一对象被预先配置对应的矩阵中；
所述传输所述发生变化的像素的信息至接收端，包括：
传输所述矩阵至所述接收端。
可选的，在所述传输所述发生变化的像素的信息至接收端之前，还包括：
响应于所述第一对象的变化，采集所述第一对象对应的所述分块的相邻区域中，发生变化的像素的信息。
本申请实施例方法所述的功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算设备可读取存储介质中。基于这样的理解，本申请实施例对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该软件产品存储在一个存储介质中，包括若干指令用以使得一台计算设备(可以是个人计算机，服务器，移动计算设备或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种显示内容的共享方法，其特征在于，包括：
检测相邻图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述图像帧中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输所述发生变化的像素的信息至接收端，其中，所述信息用于所述接收端显示所述图像帧。
2.根据权利要求1所述的方法，其特征在于，所述光标对应的所述分块包括：
以所述光标的位置为中心区域，具有预设半径的区域；
所述虚拟键盘对应的所述分块包括：所述虚拟键盘所占的区域；
所述软件窗体对应的所述分块包括：所述软件窗体所占的区域。
3.根据权利要求1或2所述的方法，其特征在于，所述对象还包括：
所述图像帧中的预设行，所述预设行至少包括第一行和最后一行。
4.根据权利要求3所述的方法，其特征在于，所述图像帧的预设行对应的所述分块包括：
所述图像帧，所述图像帧中的显示内容为全屏播放的视频。
5.根据权利要求1或2所述的方法，其特征在于，采集所述虚拟键盘所占的区域中，发生变化的像素的信息的过程包括：
采集在所述虚拟键盘中输入的字符的信息，作为变化的像素的信息。
6.根据权利要求1所述的方法，其特征在于，所述采集所述第一对象对应的所述分块中，发生变化的像素的信息，包括：
将所述第一对象对应的所述分块中，发生变化的像素的位置和像素值，记录在所述第一对象被预先配置对应的矩阵中；
所述传输所述发生变化的像素的信息至接收端，包括：
传输所述矩阵至所述接收端。
7.根据权利要求1所述的方法，其特征在于，在所述传输所述发生变化的像素的信息至接收端之前，还包括：
响应于所述第一对象的变化，采集所述第一对象对应的所述分块的相邻区域中，发生变化的像素的信息。
8.一种显示内容的共享装置，其特征在于，包括：
检测模块，用于检测图像帧中显示的对象的变化；所述对象分别被预先配置对应各自的分块，所述分块为所述桌面中包括所述对像的预设区域；所述对象包括：指示鼠标的光标、虚拟键盘、软件窗体的至少一项；
采集模块，用于响应于第一对象的变化，采集所述第一对象对应的所述分块中，发生变化的像素的信息；所述第一对象为任意一个所述对象；
传输模块，用于传输所述发生变化的像素的信息至接收端，所述信息用于所述接收端显示所述图像帧的后续图像帧。
9.一种显示内容的共享设备，其特征在于，包括：
存储器和处理器；
所述存储器用于存储程序，所述处理器用于运行所述程序，以实现权利要求1-7任一项所述的显示内容的共享方法。
10.一种计算机可读存储介质，其上存储有程序，其特征在于，所述程序可被计算设备读取并运行，以实现权利要求1-7任一项所述的显示内容的共享方法。
CN202011083956.4A 2020-10-12 2020-10-12 显示内容的共享方法及装置、设备、可读存储介质 Pending CN112291588A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011083956.4A CN112291588A (zh) 2020-10-12 2020-10-12 显示内容的共享方法及装置、设备、可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011083956.4A CN112291588A (zh) 2020-10-12 2020-10-12 显示内容的共享方法及装置、设备、可读存储介质

Publications (1)

Publication Number Publication Date
CN112291588A true CN112291588A (zh) 2021-01-29

Family

ID=74496800

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011083956.4A Pending CN112291588A (zh) 2020-10-12 2020-10-12 显示内容的共享方法及装置、设备、可读存储介质

Country Status (1)

Country Link
CN (1) CN112291588A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113176961A (zh) * 2021-05-14 2021-07-27 深圳前海微众银行股份有限公司 桌面帧处理方法、装置、设备及存储介质
CN115942002A (zh) * 2022-12-07 2023-04-07 北京四方通达科技有限公司 视频传输方法、装置、终端及存储介质
CN113176961B (zh) * 2021-05-14 2024-05-31 深圳前海微众银行股份有限公司 桌面帧处理方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080122847A1 (en) * 2006-11-28 2008-05-29 International Buisness Machines Corporation Method, program and apparatus for generating image data
CN102164168A (zh) * 2011-02-21 2011-08-24 北京奇虎科技有限公司 一种拖动图像的传输显示方法和系统
CN104254001A (zh) * 2013-06-28 2014-12-31 广州华多网络科技有限公司 远程分享方法、装置及终端
CN109254746A (zh) * 2018-09-30 2019-01-22 珠海格力电器股份有限公司 实现多屏通信的方法、装置和系统以及用电设备
CN109840598A (zh) * 2019-04-29 2019-06-04 深兰人工智能芯片研究院（江苏）有限公司 一种深度学习网络模型的建立方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080122847A1 (en) * 2006-11-28 2008-05-29 International Buisness Machines Corporation Method, program and apparatus for generating image data
CN102164168A (zh) * 2011-02-21 2011-08-24 北京奇虎科技有限公司 一种拖动图像的传输显示方法和系统
CN104254001A (zh) * 2013-06-28 2014-12-31 广州华多网络科技有限公司 远程分享方法、装置及终端
CN109254746A (zh) * 2018-09-30 2019-01-22 珠海格力电器股份有限公司 实现多屏通信的方法、装置和系统以及用电设备
CN109840598A (zh) * 2019-04-29 2019-06-04 深兰人工智能芯片研究院（江苏）有限公司 一种深度学习网络模型的建立方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113176961A (zh) * 2021-05-14 2021-07-27 深圳前海微众银行股份有限公司 桌面帧处理方法、装置、设备及存储介质
CN113176961B (zh) * 2021-05-14 2024-05-31 深圳前海微众银行股份有限公司 桌面帧处理方法、装置、设备及存储介质
CN115942002A (zh) * 2022-12-07 2023-04-07 北京四方通达科技有限公司 视频传输方法、装置、终端及存储介质

Similar Documents

Publication Publication Date Title
EP3968142A1 (en) Display control method and apparatus
US8648858B1 (en) Hybrid text and image based encoding
CN110392306B (zh) 一种数据处理方法以及设备
CN109388317B (zh) 一种图片加载方法、终端设备及存储介质
JP2004086550A (ja) 表示画面更新システム
CN111314646B (zh) 图像获取方法、图像获取装置、终端设备及可读存储介质
CN112596843B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN104780417A (zh) 一种预览视频文件的展示方法及移动终端和系统
US20230316529A1 (en) Image processing method and apparatus, device and storage medium
CN112367559B (zh) 视频展示方法、装置、电子设备、服务器及存储介质
WO2023160617A9 (zh) 视频插帧处理方法、视频插帧处理装置和可读存储介质
US20230007059A1 (en) Information switching and sharing method, device, electronic apparatus, and storage medium
WO2020119411A1 (zh) 一种图像的传输方法及终端、存储介质
CN112291588A (zh) 显示内容的共享方法及装置、设备、可读存储介质
CN113839998B (zh) 图像数据传输方法、装置、设备、存储介质及程序产品
CN113316018B (zh) 时间信息在视频画面显示的叠加方法、设备及存储介质
CN112565666B (zh) 一种快速查看桌面共享历史内容的方法与系统
US20170372681A1 (en) Method, apparatus, and storage medium
CN106775690B (zh) 一种基于gdi/gdi+窗口被覆盖的录制方法及装置
US20150186095A1 (en) Inter-terminal image sharing method, terminal device, and communications system
CN107506119B (zh) 一种图片显示方法、装置、设备和存储介质
CN106210665B (zh) 一种基于视频采集的远程主机控制方法及系统
CN113873158A (zh) 一种电子设备及其控制方法
CN107357906B (zh) 数据处理方法、装置及图像采集设备
JP2018013879A (ja) ダイジェスト映像取得装置、ダイジェスト映像取得方法、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 247100 workshop C2, science and Technology Incubation Park, Jiangnan industrial concentration zone, Chizhou City, Anhui Province

Applicant after: Anhui Wenxiang Technology Co.,Ltd.

Address before: 100176 room 1101, 11 / F, building 2, yard 15, Ronghua South Road, Beijing Economic and Technological Development Zone, Beijing

Applicant before: BEIJING WENXIANG INFORMATION TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20210129

RJ01 Rejection of invention patent application after publication