CN111787355A - 远程图像更新的方法及装置 - Google Patents

远程图像更新的方法及装置 Download PDF

Info

Publication number
CN111787355A
CN111787355A CN202010606289.7A CN202010606289A CN111787355A CN 111787355 A CN111787355 A CN 111787355A CN 202010606289 A CN202010606289 A CN 202010606289A CN 111787355 A CN111787355 A CN 111787355A
Authority
CN
China
Prior art keywords
area
image
image data
effective
refresh
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010606289.7A
Other languages
English (en)
Inventor
王成东
范志刚
卢涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Wanxiang Electronics Technology Co Ltd
Original Assignee
Xian Wanxiang Electronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Wanxiang Electronics Technology Co Ltd filed Critical Xian Wanxiang Electronics Technology Co Ltd
Priority to CN202010606289.7A priority Critical patent/CN111787355A/zh
Publication of CN111787355A publication Critical patent/CN111787355A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本公开提供一种远程图像更新的方法及装置，涉及图像处理领域，能够解决远程图像更新过程中处理工作量大，耗费资源多的问题。具体技术方案为：一种远程图像更新的方法，应用于图像传输系统的采集端设备，该方法包括：获取图像源设备中原始图像的至少一个初始刷新区域；根据所述至少一个初始刷新区域确定有效刷新区域；将所述有效刷新区域的图像进行格式转换后发送给客户端。本公开提供的远程图像更新的方法及装置可以降低远程图像更行过程中处理和传输的工作量，降低资源消耗。

Description

远程图像更新的方法及装置
技术领域
本公开涉及图像处理领域，尤其涉及远程图像更新的方法及装置。
背景技术
远程图像传输系统(简称图传系统)通常包括客户端设备、采集端设备和图像源设备。图像源设备用于提供原始图像(也可称为源图像或图像源)，采集端设备，简称采集端，用于从图像源设备中采集原始图像发送给客户端设备(简称客户端)，由客户端展示给用户。当图像源的图像发生变化时，需要通过采集端对图像源进行采集来实现客户端画面的刷新。现有的图像刷新过程，如果当图像源设备中的图像画面变化较为剧烈时，比如用户进行最大化或最小化窗口、拖动窗口、播放视频，或打开网页操作时，图像处理、传输和刷新的工作量较大，会耗费较多资源，造成计算资源的浪费。
发明内容
本公开实施例提供一种远程图像更新的方法及装置，能够解决远程图像更新过程中处理和传输工作量大、资源耗费多的问题。所述技术方案如下：
根据本公开实施例的第一方面，提供一种远程图像更新的方法，应用于采集端设备，该方法包括：获取图像源设备中原始图像的至少一个初始刷新区域；根据所述至少一个初始刷新区域确定有效刷新区域；将所述有效刷新区域的图像进行格式转换后发送给客户端设备。通过该方法的实施，采集端不需要再将图像源设备中原始图像当前帧的整屏图像数据进行格式转换后发送给客户端；而是仅将一个或多个有效刷新区域的图像进行格式转换后发送给客户端，这就大大减少了图像数据处理和传输的工作量，降低了采集端处理器的负荷，节约了计算资源。
在一个实施例中，根据至少一个初始刷新区域确定有效刷新区域，可以死：将至少一个初始刷新区域合并形成至少一个合并区域，并将所述至少一个合并区域作为所述有效刷新区域。
在一个实施例中，根据所述至少一个初始刷新区域确定有效刷新区域，可以是：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域作为所述有效刷新区域。
在一个实施例中，根据所述至少一个初始刷新区域确定有效刷新区域，可以是：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述合并区域中的变化区域；将所述变化区域合并形成所述有效刷新区域。
通过本公开提供的上述实施例，采集端可以根据初始刷新区域确定一个或多个有效刷新区域，该有效刷新区域的图像面积小于原始图像源当前帧的整屏图像的面积；采集只对有效刷新区域的图像进行格式转换，就降低了采集端处理的工作量，降低了CPU的负荷，在格式转换完成后传输给客户端的数据也只是有效刷新区域的图像进行格式转换后的数据，其传输的数据量小于原始图像源当前帧的整屏图像进行格式转换后的数据；即降低了需要传输的数据量，提高了传输效率，也节约了计算资源。
根据本公开实施例的第二方面，提供一种远程图像更新的方法，应用于客户端设备，该方法包括：保存当前帧的图像数据；接收采集端发送的有效刷新区域的图像数据；将所述有效刷新区域的图像数据叠加在所述当前帧的图像数据上，得到刷新后的图像数据；根据所述刷新后的图像数据显示图像。
在一个实施例中，保存当前帧的图像数据，可以包括：保存当前帧图像的YUV格式数据；接收采集端发送的有效刷新区域的图像数据，可以包括：接收所述采集端发送的有效刷新区域图像的YUV格式数据。在一些实施例中通过该方法的实施，客户端不需要接收客户端发送的图像源设备中原始图像当前帧的整屏图像进行格式转换后的数据；仅需要接收采集端发送的有效刷新区域的图像数据；并只需要将有效刷新区域的图像数据叠加在当前帧的图像数据上即可得到刷新后的图像数据，这就降低了接收和处理的数据量，提高了处理效率，提升了用户体验。
根据本公开实施例的第三方面，提供一种远程图像更新的装置，应用于采集端设备，该装置包括：获取模块，处理模块和发送模块；所述获取模块用于获取图像源设备中原始图像的至少一个初始刷新区域；所述处理模块用于根据所述至少一个初始刷新区域确定有效刷新区域；以及用于将所述有效刷新区域的图像进行格式转换；所述发送模块用于发送所述格式转换后的数据给客户端设备。
在一个实施例中，上述处理模块根据所述至少一个初始刷新区域确定一个或多个有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，并将所述合并区域作为所述有效刷新区域。
在一个实施例中，上述处理模块根据所述至少一个初始刷新区域确定一个或多个有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域作为所述有效刷新区域。
在一个实施例中，上述处理模块根据所述至少一个初始刷新区域确定一个或多个有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域合并形成所述有效刷新区域。
通过该远程图像更新的装置，采集端不需要再将图像源设备中原始图像当前帧的整屏图像数据进行格式转换后发送给客户端；而是仅将一个或多个有效刷新区域的图像进行格式转换后发送给客户端，这就大大减少了图像数据处理和传输的工作量，降低了采集端处理器的负荷，节约了计算资源。
根据本公开实施例的第四方面，提供一种远程图像更新的装置，应用于客户端设备，该装置包括：存储模块、接收模块、处理模块和显示模块；所述存储模块用于保存当前帧的图像数据；所述接收模块用于接收采集端发送的有效刷新区域的图像数据；所述处理模块用于将所述有效刷新区域的图像数据叠加在所述当前帧的图像数据上，得到刷新后的图像数据；所述显示模块用于根据所述刷新后的图像数据显示图像。
在一些实施例中，存储模块保存当前帧的图像数据，包括：保存当前帧图像的YUV格式数据；所述接收模块接收采集端发送的有效刷新区域的图像数据，包括：接收采集端发送的有效刷新区域图像的YUV格式的数据。
通过该远程图像更新的装置，客户端仅需要接收采集端发送的有效刷新区域的图像数据；并只需要将有效刷新区域的图像数据叠加在当前帧的图像数据上即可得到刷新后的图像数据，这就降低了接收和处理的数据量，提高了处理效率，提升了用户体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是一种远程图像传输系统的示意图；
图2是本公开实施例提供的一种远程图像更新的方法的流程图；
图3是本公开实施例提供的第一有效刷新区域的示意图；
图4是本公开实施例提供的第二有效刷新区域的示意图；
图5是本公开实施例提供的第三有效刷新区域的示意图；
图6是本公开实施例提供另一种远程图像更新方法的流程图；
图7是本公开实施例提供的一种远程图像更新装置的结构框图；
图8是本公开实施例提供的另一种远程图像更新装置的结构框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是一种远程图像传输系统的示意图。如图所示，图传系统100包括图像源设备101、采集端设备102和客户端设备103。在一些实施例中，图像源设备101可以是服务器，云端设备、个人电脑或手机等可以提供原始图像的设备。客户端设备103可以是电脑、电视、手机或其他可以为用户显示图像的设备。本公开实施例中，采集端设备也简称为采集端；客户端设备也简称为客户端。在一些实施例中，图像源设备和采集端设备可以部署或集成在一起，这种情况下图像源设备也可称为本地显示设备。
图2是本公开实施例提供一种远程图像更新的方法的流程图。可以应用于图1所述图像传输系统的采集端。如图1所示，该方法包括以下步骤：
201、采集端获取图像源设备中原始图像的至少一个初始刷新区域；
202、采集端根据初始刷新区域确定有效刷新区域；
203、采集端将所述有效刷新区域的图像进行格式转换后发送给客户端设备。
在一些实施例中，通过该方法的实施，采集端不需要再将图像源设备中原始图像当前帧的整屏图像数据进行格式转换后发送给客户端；而是仅将一个或多个有效刷新区域的图像进行格式转换后发送给客户端，这就大大减少了图像数据处理和传输的工作量，降低了采集端处理器的负荷。
在一些实施例中，采集端可以通过底层驱动获取图像源设备中原始图像的初始刷新区域。其中，初始刷新区是指图像源设备中的原始图像已经刷新的区域，此时，客户端显示图像尚未刷新。初始区域可以有一个或多个，在一些实施例中，多个初始刷新区域可能是互相叠加或者完全叠加的。
在一些实施例中，采集端根据多个初始刷新区域确定有效刷新区域可以是：采集端将多个初始刷新区域合并形成至少一个合并区域，并将该合并区域作为有效刷新区域。
图3是本公开实施例提供的第一有效刷新区域的示意图，如图3所示，原始图像300中，区域301、区域302和区域303为初始刷新区域。区域301和区域302互相叠加，区域303相对独立。为方便描述，图3中引入了以0为原点的XY轴坐标系，并以区域301、302和303都为矩形区域进行说明。区域301四个顶点的坐标分别为(x1，y1)、(x2，y1)、(x1，y2)、(x2，y2)；区域302的四个顶点的坐标分别为(x3，y3)、(x4，y3)、(x3，y4)、(x4，y4)；区域303的四个顶点的坐标分别为(x5，y5)、(x5，y6)、(x6，y5)、(x6，y6)。也就是说，在一些实施例中，初始刷新区域可以为定义为矩形区域，可以用该矩形区域的四个顶点的坐标来表示该区域的大小和位置，并且可以通过四个顶点坐标来判断多个初始刷新区域是否有重叠。例如：根据区域302的顶点(x3，y3)位于区域301内，可以判断出区域302与区域301之间有重叠；而区域303的四个顶点都不在区域301内，可以判断出区域303与区域301之间没有重叠。
在一些实施例中，采集端将多个初始刷新区域合并形成一个合并区域。该合并区域可以为矩形区域或其他形状的区域。例如，在图3所示的图像300中，将初始刷新区域301、302和303合并为一个合并区域304，合并区域304为矩形区域，其四个顶点的坐标为(x1，y1)、(x6，y1)、(x1，y6)、(x6，y6)。在本实施例中，采集端可以将合并区域304作为有效刷新区域。
在一些实施例中，采集端可以根据多个初始刷新区域之间是否有重叠，把多个初始刷新区域合并形成多个合并区域。一个合并区域至少包含一个初始刷新区域。例如，采集端可以把有重叠的初始刷新区域合并为一个区域，把与其他初始刷新区域没有重叠的初始刷新区域(可称为独立初始刷新区域)单独作为一个合并区域。例如，在图3所示的图像300中，采集端可以把有重叠的初始刷新区域301、302合并后形成合并区域305，该合并区域305为矩形区域，其四个顶点的坐标为(x1，y1)、(x4，y1)、(x1，y4)、(x4，y4)。同时，采集端可以把独立的初始刷新区域303单独形成一个合并区域306，该合并区域306和初始刷新区域303完全重合。在本实施例中，采集端可以将合并区域305和合并区域306作为有效刷新区域。
在一些实施例中，采集端也可以根据独立的初始刷新区域与其他初始刷新区域的距离来确定是否把该独立的初始刷新区域单独形成一个合并区域。例如：在图3所示的图像300中，如果区域303距离区域301或302较近，则把区域303与区域301、区域302一起合并形成一个合并区域304；如果区域303距离区域301或302较远，则把有重叠的初始刷新区域301、302合并形成合并区域305，将独立的初始刷新区域303单独形成一个合并区域306。
需要说明的是，在一些实施例中，一个合并区域通常包括至少一个互相叠加或连接的初始刷新区域，一个合并区域中的初始刷新区域可能是互相重叠的，也可能互相连接的。若一个初始刷新区域被另一个初始刷新区域完全或部分覆盖，那么，合并区域不再体现被完全或部分覆盖的区域，只体现最上层的区域。这样也可以减少工作量，不再关注被覆盖的区域。
在一些实施例中，采集端将多个初始刷新区域合并形成一个或多个合并区域可以是：采集端将多个初始刷新区域合并形成至少一个合并区域，然后根据当前帧的图像数据与前一帧的图像数据确定合并区域中一个或多个变化区域；采集端可以将该一个或多个变化区域作为有效刷新区域。
图4是本公开实施例提供的第二有效刷新区域的示意图。如图4所示，原始图像400中，区域401、区域402和区域403为初始刷新区域。区域401和区域402互相叠加，区域403相对独立。采集端将多个初始刷新区域合并形成至少一个合并区域的方式有多种，具体可以参考图3对应的实施例，不在赘述。在图4中仅示出了采集端将初始刷新区域401、402和403合并后形成合并区域405和406。在一些实施例中，采集端可以根据当前帧的RGB图像数据与前一帧的RGB格式的图像数据进行比较，确定当前帧与前一帧图像在合并区域中实际发生变化的最小区域，即为变化区域。在这些实施例中，采集端无需将原始图像当前帧全部转化为YUV格式的图像数据在进行比较，较少了处理的工作量。在一些实施例中，变化区域也可以用矩形区域或其他形状的区域。在图4所示的图像400中，采集端确定合并区域中的变化区域为407和408，变化区域407和408为矩形区域，其位置和大小可以用四个顶点的坐标来确定。在本实施例中，采集端可以将区域407和408作为有效刷新区域。
在一些实施例中，变化区域的数量可以为0，代表显示刷线但无变化，此时可以终止图像更新流程。
在一些实施例中，采集端将多个初始刷新区域合并形成一个或多个合并区域可以是：采集端将多个初始刷新区域合并形成至少一个合并区域，然后根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中变化区域；变化区域有多个时，再将多个变化区域进行合并形成一个或多个有效刷新区域。
在一些有效刷新区域可以为矩形区域，也可以为其他形状的区域。合并区域中的变化区域可以是相互重叠的，也可能是互相连接的，或者互相独立的。一个有效刷新区域可以包括一个变化区域，也可以包括多个互相重叠、互相连接或相互独立的变化区域。也就是说，变化区域进行合并有多种方式，可以参考采集端对初始刷新区域进行合并的方式，不再赘述。
图5是本公开实施例提供的第三有效刷新区域的示意图，如图5所示，原始图像500中，区域501、区域502和区域503为初始刷新区域。区域501和区域502互相叠加，区域503相对独立。采集端将初始刷新区域501、502和503合并后形成合并区域505和506。采集端确定的合并区域中的变化区域为507、508、509和510。变化区域507和508相互重叠；区域509和510相互连接。采集端将变化区域507、508、509和510进行合并得到511和512；即将区域507和508合并为区域511，将区域509和510合并为区域512。在本实施例中，采集端可以将511和512作为有效刷新区域。
在一些实施例中，若一个或多个变化区域X被另一个变化区域Y完全覆盖，那么，采集端将变化区域合并时，被完全覆盖的一个或多个变化区域X可以不再提现，最终的有效刷新区域只体现最上层的变化区域Y。这样被覆盖的变化区域不再关注，也可以减少图传系统数据处理的工作量。
确定有效刷新区域后采集端可以将一个或多个有效刷新区域的图像进行格式转换后发送给客户端。在一些实施例中，采集端将有效区域的图像由RGB格式转换给YUV格式，并将转换后的YUV格式的图像数据发送给客户端。
通过上述实施例的进一步说明，可以知道采用本发明实施例提供的远程图像更新的方法，采集端根据初始刷新区域确定一个或多个有效刷新区域，该有效刷新区域的图像面积小于原始图像源当前帧的整屏图像的面积；采集只对有效刷新区域的图像进行格式转换，就降低了采集端处理的工作量，降低了CPU的负荷，在格式转换完成后传输给客户端的数据也只是有效刷新区域的图像进行格式转换后的数据，其传输的数据量小于原始图像源当前帧的整屏图像进行格式转换后的数据；即降低了需要传输的数据量，提高了传输效率。
图6是本公开实施例提供另一种远程图像更新的方法的流程图。可以应用于图1所述图像传输系统的客户端。如图6所示，该方法包括以下步骤：
601、客户端保存当前帧的图像数据；
602、客户端接收采集端发送的有效刷新区域的图像数据；
603、客户端将所述有效刷新区域的图像数据叠加在当前帧的图像数据上，得到刷新后的图像数据；
604、根据刷新后的图像数据显示刷新后的图像。
在一些实施例中，客户端保存当前帧的图像数据包括保存当前帧图像的YUV格式数据。客户端接收采集端发送的有效刷新区域的图像数据也可以是YUV格式数据。
在一些实施例中通过该方法的实施，客户端不需要接收客户端发送的图像源设备中原始图像当前帧的整屏图像进行格式转换后的数据；仅需要接收采集端发送的有效刷新区域的图像数据；并只需要将有效刷新区域的图像数据叠加在当前帧的图像数据上即可得到刷新后的图像数据，这就降低了接收和处理的数据量，提高了处理效率，提升了用户体验。
基于上述图2对应的实施例中所描述的远程图像更新的方法，下述为本公开装置实施例，可以用于执行本公开方法实施例。
本公开实施例提供一种远程图像更新装置的结构框图，如图7所示，该远程图像更新装置700包括：获取模块701、处理模块702和发送模块303；其中，获取模块701用于获取图像源设备中原始图像的至少一个初始刷新区域；处理模块702用于根据所述至少一个初始刷新区域确定有效刷新区域；以及用于将所述有效刷新区域的图像进行格式转换；发送模块703用于发送所述格式转换后的数据给客户端设备。
在一个实施例中，处理模块702根据所述至少一个初始刷新区域确定一个或多个有效刷新区域，可以通过以下方式之一实现：
将所述至少一个初始刷新区域合并形成至少一个合并区域，并将所述合并区域作为所述有效刷新区域；
将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；采将所述变化区域作为所述有效刷新区域；或者
将所述至少一个所述初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域合并形成所述有效刷新区域。
通过该远程图像更新的装置700，采集端不需要再将图像源设备中原始图像当前帧的整屏图像数据进行格式转换后发送给客户端；而是仅将一个或多个有效刷新区域的图像进行格式转换后发送给客户端，这就大大减少了图像数据处理和传输的工作量，降低了采集端处理器的负荷，节约了计算资源。
基于上述图6对应的实施例中所描述的远程图像更新的方法，下述为本公开装置实施例，可以用于执行本公开方法实施例。
本公开实施例提供另一种远程图像更新装置的结构框图，如图8所示，该远程图像更新装置800包括：存储模块801、接收模块802、处理模块803和显示模块804；其中，存储模块801用于保存当前帧的图像数据；接收模块802用于接收采集端发送的有效刷新区域的图像数据；处理模块803用于将所述有效刷新区域的图像数据叠加在所述当前帧的图像数据上，得到刷新后的图像数据；显示模块804用于根据所述刷新后的图像数据显示图像。
在一些实施例中，存储模块801保存当前帧的图像数据，可以是保存当前帧图像的YUV格式数据；接收模块802接收采集端发送的有效刷新区域的图像数据，可以是接收采集端发送的有效刷新区域图像的YUV格式数据。
通过该远程图像更新装置800，客户端仅需要接收采集端发送的有效刷新区域的图像数据；并只需要将有效刷新区域的图像数据叠加在当前帧的图像数据上即可得到刷新后的图像数据，这就降低了接收和处理的数据量，提高了处理效率，提升了用户体验。
基于上述图2和图6对应的实施例中所描述的远程图像更新方法，本公开实施例还提供一种计算机可读存储介质，例如，非临时性计算机可读存储介质可以是只读存储器(英文：Read Only Memory，ROM)、随机存取存储器(英文：Random Access Memory，RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令，用于执行上述图2和图6对应的实施例中所描述的数据传输方法，此处不再赘述。
本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种远程图像更新的方法，应用于采集端设备，其特征在于，所述方法包括：获取图像源设备中原始图像的至少一个初始刷新区域；根据所述至少一个初始刷新区域确定有效刷新区域；将所述有效刷新区域的图像进行格式转换后发送给客户端设备。
2.根据权利要求1所述的方法，其特征在于，所述根据所述至少一个初始刷新区域确定有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，将所述至少一个合并区域作为所述有效刷新区域。
3.根据权利要求1所述的方法，其特征在于，所述根据所述至少一个初始刷新区域确定有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；采将所述变化区域作为所述有效刷新区域。
4.根据权利要求1所述的方法，其特征在于，所述根据所述至少一个初始刷新区域确定有效刷新区域，包括：将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述合并区域中的变化区域；将所述变化区域合并形成所述有效刷新区域。
5.一种远程图像更新的方法，应用于客户端设备，其特征在于，所述方法包括：保存当前帧的图像数据；接收采集端发送的有效刷新区域的图像数据；将所述有效刷新区域的图像数据叠加在所述当前帧的图像数据上，得到刷新后的图像数据；根据所述刷新后的图像数据显示图像。
6.根据权利要求5所述的方法，其特征在于，所述保存当前帧的图像数据，包括：保存当前帧图像的YUV格式数据；所述接收采集端发送的有效刷新区域的图像数据，包括：接收所述采集端发送的有效刷新区域图像的YUV格式数据。
7.一种远程图像更新的装置，应用于采集端设备，其特征在于，包括：获取模块，处理模块和发送模块；所述获取模块用于获取图像源设备中原始图像的至少一个初始刷新区域；所述处理模块用于根据所述至少一个初始刷新区域确定有效刷新区域；以及用于将所述有效刷新区域的图像进行格式转换；所述发送模块用于发送所述格式转换后的数据给客户端设备。
8.根据权利要求7所述的装置，其特征在于，所述处理模块根据所述至少一个初始刷新区域确定有效刷新区域，包括以下之一：
将所述至少一个初始刷新区域合并形成至少一个合并区域，将所述合并区域作为所述有效刷新区域；
将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域作为所述有效刷新区域；或者
将所述至少一个初始刷新区域合并形成至少一个合并区域，根据当前帧的图像数据与前一帧的图像数据确定所述至少一个合并区域中的变化区域；将所述变化区域合并形成所述有效刷新区域。
9.一种远程图像更新的装置，应用于客户端设备，其特征在于，包括：存储模块、接收模块、处理模块和显示模块；所述存储模块用于保存当前帧的图像数据；所述接收模块用于接收采集端发送的有效刷新区域的图像数据；所述处理模块用于将所述有效刷新区域的图像数据叠加在所述当前帧的图像数据上，得到刷新后的图像数据；所述显示模块用于根据所述刷新后的图像数据显示图像。
10.根据权利要求9所述的装置，其特征在于，所述存储模块保存当前帧的图像数据，包括：保存当前帧图像的YUV格式数据；所述接收模块接收采集端发送的有效刷新区域的图像数据，包括：接收采集端发送的有效刷新区域图像的YUV格式数据。
CN202010606289.7A 2020-06-29 2020-06-29 远程图像更新的方法及装置 Pending CN111787355A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010606289.7A CN111787355A (zh) 2020-06-29 2020-06-29 远程图像更新的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010606289.7A CN111787355A (zh) 2020-06-29 2020-06-29 远程图像更新的方法及装置

Publications (1)

Publication Number Publication Date
CN111787355A true CN111787355A (zh) 2020-10-16

Family

ID=72761598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010606289.7A Pending CN111787355A (zh) 2020-06-29 2020-06-29 远程图像更新的方法及装置

Country Status (1)

Country Link
CN (1) CN111787355A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073976A (zh) * 2010-11-25 2011-05-25 广东威创视讯科技股份有限公司 提高图像区域刷新速度的方法及装置
CN103281539A (zh) * 2013-06-07 2013-09-04 华为技术有限公司 一种图像编、解码处理的方法、装置及终端
CN103426419A (zh) * 2012-05-23 2013-12-04 腾讯科技（深圳）有限公司 一种刷新区域的方法及装置
CN104219474A (zh) * 2013-05-30 2014-12-17 佳能株式会社 图像处理设备及其控制方法
CN104994153A (zh) * 2015-06-30 2015-10-21 Tcl移动通信科技（宁波）有限公司 一种wifi display的图像传输方法及系统
CN105122346A (zh) * 2013-12-31 2015-12-02 华为终端有限公司 一种显示刷新方法和终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073976A (zh) * 2010-11-25 2011-05-25 广东威创视讯科技股份有限公司 提高图像区域刷新速度的方法及装置
CN103426419A (zh) * 2012-05-23 2013-12-04 腾讯科技（深圳）有限公司 一种刷新区域的方法及装置
CN104219474A (zh) * 2013-05-30 2014-12-17 佳能株式会社 图像处理设备及其控制方法
CN103281539A (zh) * 2013-06-07 2013-09-04 华为技术有限公司 一种图像编、解码处理的方法、装置及终端
CN105122346A (zh) * 2013-12-31 2015-12-02 华为终端有限公司 一种显示刷新方法和终端
CN104994153A (zh) * 2015-06-30 2015-10-21 Tcl移动通信科技（宁波）有限公司 一种wifi display的图像传输方法及系统

Similar Documents

Publication Publication Date Title
EP3779862A1 (en) Electronic apparatus and control method thereof
CN110288551B (zh) 视频美化方法、装置及电子设备
CN113126862B (zh) 截屏方法、装置、电子设备以及可读存储介质
CN108564551A (zh) 鱼眼图像处理方法及鱼眼图像处理装置
US20180040153A1 (en) Annotation method, annotation system, and recording medium storing program
US20230362328A1 (en) Video frame insertion method and apparatus, and electronic device
WO2024016930A1 (zh) 特效处理方法、装置、电子设备及存储介质
WO2024037556A1 (zh) 图像处理方法、装置、设备及存储介质
US20230179734A1 (en) Video image display method and apparatus, multimedia device and storage medium
US9456110B2 (en) Method for improving video output definition and terminal device
WO2024016923A1 (zh) 特效图的生成方法、装置、设备及存储介质
US20230284768A1 (en) Beauty makeup special effect generation method, device, and storage medium
CN111787355A (zh) 远程图像更新的方法及装置
CN114780197B (zh) 分屏渲染方法、装置、设备及存储介质
KR101169994B1 (ko) 알파 평면을 이용한 영상 데이터 처리 장치 및 방법
CN115761091A (zh) 游戏画面渲染方法、装置、电子设备和存储介质
CN114489546A (zh) 分屏展示方法、电子设备、存储介质及装置
CN108509112B (zh) 菜单的显示方法及装置、显示设备及存储介质
US8754908B2 (en) Optimized on-screen video composition for mobile device
EP4350605A1 (en) Image processing method and apparatus, device, and medium
CN113034367B (zh) 信息处理方法、装置、计算机系统及可读存储介质
WO2023020283A1 (zh) 图像处理方法、装置、设备、介质及程序产品
CN117714769A (zh) 图像显示方法、装置、电子设备以及存储介质
CN118227069A (zh) 显示控制方法和电子设备
CN114820878A (zh) 图像编辑方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination