CN113365065B - 用于rpa机器人屏幕录制的无损视频编码方法和解码方法 - Google Patents

用于rpa机器人屏幕录制的无损视频编码方法和解码方法 Download PDF

Info

Publication number
CN113365065B
CN113365065B CN202110641088.5A CN202110641088A CN113365065B CN 113365065 B CN113365065 B CN 113365065B CN 202110641088 A CN202110641088 A CN 202110641088A CN 113365065 B CN113365065 B CN 113365065B
Authority
CN
China
Prior art keywords
video
image
hash
frame image
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110641088.5A
Other languages
English (en)
Other versions
CN113365065A (zh
Inventor
李肯立
杨圣洪
张晋
刘双翼
蔡宇辉
秦云川
吴帆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan University
Zhongdian Jinxin Software Co Ltd
Original Assignee
Hunan University
Zhongdian Jinxin Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan University, Zhongdian Jinxin Software Co Ltd filed Critical Hunan University
Priority to CN202110641088.5A priority Critical patent/CN113365065B/zh
Publication of CN113365065A publication Critical patent/CN113365065A/zh
Application granted granted Critical
Publication of CN113365065B publication Critical patent/CN113365065B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种用于RPA机器人屏幕录制的无损视频编码方法，包括：调用操作系统截屏接口对待录制视频进行屏幕截图，以得到与待录制视频中第k帧图像的分辨率相同的截图，对获取的截图的分辨率进行处理，使截图中每个像素的宽和高为n的整数倍，以得到处理后的第k张截图，对处理后的第k张截图先后进行分割和编码处理，并将处理后得到的多个图像及每个图像对应的哈希签名结果以结构体形式存储在第k帧图像对应的二维结构体数组中，根据第k帧图像对应的二维结构体数组中的所有哈希签名结果对视频对应的哈希字典进行更新。本发明能够解决现有帧内图像数据压缩技术由于压缩率不够高而导致视频体积过大的技术问题。

Description

用于RPA机器人屏幕录制的无损视频编码方法和解码方法
技术领域
本发明属于视频编码技术领域，更具体地，涉及一种用于RPA机器人屏幕录制的无损视频编码方法和解码方法。
背景技术
视频编码是指通过压缩技术，将原始视频格式的文件转换成另一种视频格式文件的方法。视频流传输中最为重要的编解码标准有国际电联的H.261、H.263、H.264，运动静止图像专家组的M-JPEG和国际标准化组织运动图像专家组的MPEG系列标准，此外，在互联网上被广泛应用的还有Real-Networks的RealVideo、微软公司的WMV以及Apple公司的QuickTime等。
视频图像数据有很强的相关性，即存在大量的冗余信息，其中冗余信息可分为空域冗余信息和时域冗余信息。为了去除数据中的冗余信息(即去除数据之间的相关性)，需要使用压缩技术，现有的主流压缩技术包括帧内图像数据压缩技术、帧间图像数据压缩技术、以及熵编码压缩技术。其中帧内图像数据压缩技术是当压缩一帧图像时，仅考虑本帧的数据而不考虑相邻帧之间的冗余信息，这实际上与静态图像压缩类似，帧内一般采用有损压缩算法，达不到很高的压缩比；帧间图像数据压缩技术是基于许多视频或动画的连续前后两帧具有很大的相关性(即连续的视频其相邻帧之间具有冗余信息)的特点来实现的.通过比较时间轴上不同帧之间的数据实施压缩,进一步提高压缩比；熵编码压缩技术是根据数据出现的频率进行不等长编码。
然而，上述现有的三种压缩技术均存在一些不可忽略的缺陷：第一、对帧内图像数据压缩技术而言，其压缩率不够高，会导致视频体积过大；第二、对帧间图像数据压缩技术而言，其无法完整考虑整个视频所有帧之间出现的重复情况，只针对邻近帧进行压缩编码，因此造成压缩效果差；第三、对熵编码压缩技术而言，其适用于对完成的视频进行压缩和处理，实时录制时进行压缩会导致计算量过大，不适用于实时录制并编码视频。
发明内容
针对现有技术的以上缺陷或改进需求，本发明提供了一种用于RPA机器人屏幕录制的无损视频编码方法和解码方法，其目的在于，解决现有帧内图像数据压缩技术由于压缩率不够高而导致视频体积过大的技术问题，以及现有帧间图像数据压缩技术由于没有完整考虑整个视频所有帧之间出现的重复情况，而只针对邻近帧进行压缩编码，导致压缩效果差的技术问题，以及现有熵编码压缩技术在实时录制时进行压缩会导致计算量过大，不适用于实时录制并编码视频的技术问题。
为实现上述目的，按照本发明的一个方面，提供了一种用于RPA机器人屏幕录制的无损视频编码方法，包括以下步骤：
(1)设置计数器k＝0。
(2)判断k是否大于待录制视频中的帧总数，如果是则过程结束，否则进入步骤(3)。
(3)调用操作系统截屏接口对待录制视频进行屏幕截图，以得到与待录制视频中第k帧图像的分辨率相同的截图。
(4)对步骤(3)获取的截图的分辨率进行处理，使截图中每个像素的宽和高为n的整数倍，以得到处理后的第k张截图，其中n表示后续分割过程得到的每帧图像的边长；
(5)对步骤(4)处理后的第k张截图先后进行分割和编码处理，并将处理后得到的多个图像及每个图像对应的哈希签名结果以结构体形式存储在第k帧图像对应的二维结构体数组中。
(6)根据步骤(5)获取的第k帧图像对应的二维结构体数组中的所有哈希签名结果对视频对应的哈希字典进行更新，以得到更新后的哈希字典和第k帧图像对应的二维结构体数组。
(7)设置k＝k+1，并返回步骤(2)。
优选地，步骤(4)中n的取值为32或者64，步骤(4)是采取最邻近插值法，或者直接填充空白像素块的方式对截图进行处理，以得到一个根据分割需求调整好分辨率的截图。
优选地，步骤(5)具体包括以下子步骤：
(5-1)对步骤(4)处理后的第k张截图分割成大小为n*n的多帧图像。
(5-2)对步骤(5-1)获取的每个n*n大小的图像进行图像编码，以得到编码后的图像。
(5-3)利用哈希算法计算步骤(5-2)得到的每个编码后的图像的哈希签名结果，并将每个图像及其对应的哈希签名结果以结构体的方式保存在预设的第k帧图像对应的二维结构体数组中；
优选地，步骤(5-2)中对图像进行编码，是采用的图像无损压缩算法，优选为JPEG算法。
优选地，步骤(6)包括以下子步骤：
(6-1)设置计数器i＝0；
(6-2)判断i是否大于步骤(5)得到的第k帧图像对应的二维结构体数组中哈希签名结果的总数，如果是则过程结束，否则进入步骤(6-3)；
(6-3)判断第k帧图像对应的二维结构体数组中的第i个哈希签名结果是否位于待录制视频对应的哈希字典中，如果是则进入步骤(6-4)，否则进入步骤(6-5)
(6-4)判断待录制视频对应的哈希字典中是否存在该第i个哈希签名结果对应的键值，如果是则进入步骤(6-6)，否则进入步骤(6-5)；
(6-5)为该第i个哈希签名结果生成唯一的文件名，并将该第i个哈希签名结果和文件名作为键值添加到待录制视频对应的哈希字典中；
(6-6)从步骤(5)得到的第k帧图像对应的二维结构体数组中删除该第i个哈希签名结果对应的图像；
(6-7)设置i＝i+1，并返回步骤(6-2)。
按照本发明的另一方面，提供了一种用于RPA机器人屏幕录制的无损视频解码方法，其是和上述用于RPA机器人屏幕录制的高压缩率无损视频编码方法对应，所述无损视频解码方法包括以下步骤：
(1)设置计数器j＝0；
(2)判断j是否大于二维结构体数组的总数，如果是则过程结束，否则进入步骤(3)；
(3)将第j个二维结构体数组中的哈希签名结果和待录制视频对应的哈希字典进行匹配，并将匹配得到的图像拼接成待录制视频中的第j帧图像；
(4)设置j＝j+1，并返回步骤(2)。
优选地，步骤(3)包括以下子步骤：
(3-1)设置计数器t＝0；
(3-2)判断t是否大于第j个二维结构体数组中的哈希签名结果总数，如果是则过程结束，否则进入步骤(3-3)；
(3-3)在待录制视频中获取第j个二维结构体数组中的第t个哈希签名结果对应的文件名，并根据该文件名从视频同级目录获取对应的图像。
(3-4)将步骤(3-3)得到的图像拼接在待录制视频的第j帧图像中；
(3-5)设置t＝t+1，并返回步骤(3-2)。
总体而言，通过本发明所构思的以上技术方案与现有技术相比，能够取得下列有益效果：
(1)本发明由于采用了步骤(5)，其根据图像的哈希签名结果进行搜索匹配，实现了重复图像不重复编码的功能，因此能够解决现有帧内图像数据压缩技术存在的压缩率不高的技术问题；
(2)本发明由于采用了步骤(5)，其通过哈希签名结果建立了整个视频所有帧间的联系，因此能够解决现有帧间图像数据压缩技术存在的无法考虑整个视频，只针对邻近帧进行压缩编码，导致压缩效果差的技术问题；
(3)本发明由于采用了步骤(4)和步骤(5)，其可以实现在录制视频的同时进行编码和处理并保证视频压缩所需的计算量适中，因此能够解决现有帧间图像数据压缩技术存在的不适用于实时录制并编码视频的技术问题；
(4)本发明针对RPA流程录制场景重复率高的特点，通过哈希签名结果代替相同的图像，实现大幅度减少录制视频所占的空间。
(5)本发明的视频编码方案，可以保证每帧视频都具有和传统视频编码方案中关键帧同等的图像质量，在占用空间更少的前提下实现了解码后的视频质量优于传统编码方案。
附图说明
图1是本发明用于RPA机器人屏幕录制的无损视频编码方法的流程图。
图2是本发明用于RPA机器人屏幕录制的无损视频解码方法的流程图图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明的基本思路在于，利用屏幕截图和分割，计算每部分图像的哈希签名结果，并将图像存入文件，最后通过文件的哈希签名来还原录制的视频。一方面，通过哈希签名去除帧内的时域冗余可以大幅降低视频的空间占用，另一方面，由于截图存储的都是完整的编码图像，因此可以保证视频的清晰度远高于传统的视频编码方式。
本发明将图像编码技术、图像分割技术和哈希签名技术进行了整合，对视频的大量重复部分使用相同的图像内容，最终实现了一种具有占用空间更小、视频清晰度更高特点的一种针对RPA机器人流程录制的视频编码方案。
如图1所示，本发明提供了一种用于RPA机器人屏幕录制的无损视频编码方法，包括以下步骤：
(1)设置计数器k＝0。
(2)判断k是否大于待录制视频中的帧总数，如果是则过程结束，否则进入步骤(3)。
(3)调用操作系统截屏接口对待录制视频进行屏幕截图，以得到与待录制视频中第k帧图像的分辨率相同的截图。
(4)对步骤(3)获取的截图的分辨率进行处理，使截图中每个像素的宽和高为n的整数倍，以得到处理后的第k张截图，其中n表示后续分割过程得到的每帧图像的边长，单位是像素，取值推荐为32或者64。
具体而言，本步骤是采取最邻近插值法，或者直接填充空白像素块的方式对截图进行处理，以得到一个根据分割需求调整好分辨率的截图。
上述步骤(4)的优点在于，可以在录制视频的同时进行编码，并且最邻近插值法和简单的图像分割可以保证对每帧的计算量适中，不对性能产生过多的影响。
(5)对步骤(4)处理后的第k张截图先后进行分割和编码处理，并将处理后得到的多个图像及每个图像对应的哈希签名结果以结构体形式存储在第k帧图像对应的二维结构体数组中。
本步骤具体包括以下子步骤：
(5-1)对步骤(4)处理后的第k张截图分割成大小为n*n的多帧图像。
(5-2)对步骤(5-1)获取的每个n*n大小的图像进行图像编码，以得到编码后的图像。
具体而言，本步骤中对图像进行编码，是采用的图像无损压缩算法，优选为联合图像专家组(Joint Photographic Experts Group，简称JPEG)算法。
本步骤的目的在于，减少每个子图像的大小，进而减少编码后视频所占的体积。
(5-3)利用哈希算法计算步骤(5-2)得到的每个编码后的图像的哈希签名结果，并将每个图像及其对应的哈希签名结果以结构体的方式保存在预设的第k帧图像对应的二维结构体数组(其初始状态为空)中；
具体而言，本步骤最终得到第k个完整的保存了第k帧图像中所有图像及其对应哈希签名结果的二维结构体数组。
上述步骤(5)的优点在于，每张图像通过哈希值确定其唯一性，对于相同的图像只保留一个图像文件即可，通过这种方式将整个视频的所有帧关联起来进行编码，可以有效的减少视频的空域冗余度。
(6)根据步骤(5)获取的第k帧图像对应的二维结构体数组中的所有哈希签名结果对视频对应的哈希字典进行更新，以得到更新后的哈希字典和第k帧图像对应的二维结构体数组。
本步骤包括以下子步骤：
(6-1)设置计数器i＝0；
(6-2)判断i是否大于步骤(5)得到的第k帧图像对应的二维结构体数组中哈希签名结果的总数，如果是则过程结束，否则进入步骤(6-3)；
(6-3)判断第k帧图像对应的二维结构体数组中的第i个哈希签名结果是否位于待录制视频对应的哈希字典中，如果是则进入步骤(6-4)，否则进入步骤(6-5)
(6-4)判断待录制视频对应的哈希字典中是否存在该第i个哈希签名结果对应的键值，如果是则进入步骤(6-6)，否则进入步骤(6-5)；
(6-5)为该第i个哈希签名结果生成唯一的文件名，并将该第i个哈希签名结果和文件名作为键值添加到待录制视频对应的哈希字典中；
(6-6)从步骤(5)得到的第k帧图像对应的二维结构体数组中删除该第i个哈希签名结果对应的图像；
(6-7)设置i＝i+1，并返回步骤(6-2)。
(7)设置k＝k+1，并返回步骤(2)。
如图2所示，本发明还提供了一种用于RPA机器人屏幕录制的无损视频解码方法，其是和上述用于RPA机器人屏幕录制的高压缩率无损视频编码方法对应，包括以下步骤：
(8)设置计数器j＝0。
(9)判断j是否大于步骤(1)-(7)所得到的二维结构体数组的总数，如果是则过程结束，否则进入步骤(10)；
(10)将第j个二维结构体数组中的哈希签名结果和待录制视频对应的哈希字典进行匹配，并将匹配得到的图像拼接成待录制视频中的第j帧图像。
本步骤包括以下子步骤：
(10-1)设置计数器t＝0；
(10-2)判断t是否大于第j个二维结构体数组中的哈希签名结果总数，如果是则过程结束，否则进入步骤(10-3)。
(10-3)在待录制视频中获取第j个二维结构体数组中的第t个哈希签名结果对应的文件名，并根据该文件名从视频同级目录获取对应的图像。
(10-4)将步骤(10-3)得到的图像拼接在待录制视频的第j帧图像中；
(10-5)设置t＝t+1，并返回步骤(10-2)。
(11)设置j＝j+1，并返回步骤(9)。
实验结果
基于上述的视频编码方案，对编码后的视频大小进行计算：
视频参数：帧率设置为2截图分辨率设置为1280*720哈希签名结果设置为MD5图像格式设置为jpg录制时长设置为10小时。
MD5值占用空间大小：根据S2的图像分割方式，每帧视频需要220个64*64的图像，即220个MD5值，而每个MD5值需要占用四个字节空间，所以十小时共占用空间3600*10*2*220*4＝63360000Byte＝60.42MB，进一步地，通过zip进行文件压缩可以将占用空间缩小到25MB，因此所有MD5共占用空间25MB。
固定场景产生的图像占用空间大小：通过场景随机截图测试计算出每张64*64的jpg图像占用为1KB假设RPA机器人十小时共需要在20个场景进行切换，场景图像所需的空间大小为220*20＝4400张，占用空间4.30MB，因此固定场景图像共占用空间4.30MB。
动态场景产生的图像占用空间大小：按照RPA机器人的流程进行速度，在流程录制开始时每秒会产生30-50个不同于场景的64*64图像，随着流程的录制，只有一小部分的图像是未记录过的，按照十个小时的长度平均计算，每秒有3个全新的64*64大小jpg图像需要存储，共产生108000个全新jpg图像，占用空间105.47MB，因此动态场景图像共占用空间105.47MB。
统计得到RPA流程录制10小时视频文件共占用存储空间134.77MB，而利用传统编码方案在相同时长相同分辨率下录制，视频大小会在3GB以上。因此，根据实验结果，本发明所阐述的视频编码方案可以大幅度减少视频的体积。
另外，由于每帧视频图像都是完整的jpg图像拼接而成，相当于每帧图像都是传统编码方式视频中的关键帧，因此清晰度也会比传统方案编码的视频更高。
可以理解的是，本发明针对RPA机器人工作流程中画面重复性高的特点，实现了一种针对相同图像采取哈希签名结果的特殊视频编码方法，使RPA机器人流程录制所需要的存储空间利用效率得到提高，减少了企业物力财力的消耗，也节约了RPA机器人流程维护中的成本。
本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种用于RPA机器人屏幕录制的无损视频编码方法，其特征在于，包括以下步骤：
(1)设置计数器k＝0；
(2)判断k是否大于待录制视频中的帧总数，如果是则过程结束，否则进入步骤(3)；
(3)调用操作系统截屏接口对待录制视频进行屏幕截图，以得到与待录制视频中第k帧图像的分辨率相同的截图；
(4)对步骤(3)获取的截图的分辨率进行处理，使截图的宽和高为n的整数倍，以得到处理后的第k张截图，其中n表示后续分割过程得到的每帧图像的边长；
(5)对步骤(4)处理后的第k张截图先后进行分割和编码处理，并将处理后得到的多个图像及每个图像对应的哈希签名结果以结构体形式存储在第k帧图像对应的二维结构体数组中；步骤(5)具体包括以下子步骤：
(5-1)对步骤(4)处理后的第k张截图分割成大小为n*n的多帧图像；
(5-2)对步骤(5-1)获取的每个n*n大小的图像进行图像编码，以得到编码后的图像；
(5-3)利用哈希算法计算步骤(5-2)得到的每个编码后的图像的哈希签名结果，并将每个图像及其对应的哈希签名结果以结构体的方式保存在预设的第k帧图像对应的二维结构体数组中；
(6)根据步骤(5)获取的第k帧图像对应的二维结构体数组中的所有哈希签名结果对视频对应的哈希字典进行更新，以得到更新后的哈希字典和第k帧图像对应的二维结构体数组；步骤(6)包括以下子步骤：
(6-1)设置计数器i＝0；
(6-2)判断i是否大于步骤(5)得到的第k帧图像对应的二维结构体数组中哈希签名结果的总数，如果是则过程结束，否则进入步骤(6-3)；
(6-3)判断第k帧图像对应的二维结构体数组中的第i个哈希签名结果是否位于待录制视频对应的哈希字典中，如果是则进入步骤(6-4)，否则进入步骤(6-5)
(6-4)判断待录制视频对应的哈希字典中是否存在该第i个哈希签名结果对应的键值，如果是则进入步骤(6-6)，否则进入步骤(6-5)；
(6-5)为该第i个哈希签名结果生成唯一的文件名，并将该第i个哈希签名结果和文件名作为键值添加到待录制视频对应的哈希字典中；
(6-6)从步骤(5)得到的第k帧图像对应的二维结构体数组中删除该第i个哈希签名结果对应的图像；
(6-7)设置i＝i+1，并返回步骤(6-2)；
(7)设置k＝k+1，并返回步骤(2)。
2.根据权利要求1所述的用于RPA机器人屏幕录制的无损视频编码方法，其特征在于，
步骤(4)中n的取值为32或者64；
步骤(4)是采取最邻近插值法，或者直接填充空白像素块的方式对截图进行处理，以得到一个根据分割需求调整好分辨率的截图。
3.根据权利要求2所述的用于RPA机器人屏幕录制的无损视频编码方法，其特征在于，步骤(5-2)中对图像进行编码，是采用的图像无损压缩算法。
4.一种用于RPA机器人屏幕录制的无损视频解码方法，其是和根据权利要求1至3中任意一项所述的用于RPA机器人屏幕录制的高压缩率无损视频编码方法对应，其特征在于，所述无损视频解码方法包括以下步骤：
(1)设置计数器j＝0；
(2)判断j是否大于二维结构体数组的总数，如果是则过程结束，否则进入步骤(3)；
(3)将第j个二维结构体数组中的哈希签名结果和待录制视频对应的哈希字典进行匹配，并将匹配得到的图像拼接成待录制视频中的第j帧图像；
(4)设置j＝j+1，并返回步骤(2)。
5.根据权利要求4所述的用于RPA机器人屏幕录制的无损视频解码方法，其特征在于，步骤(3)包括以下子步骤：
(3-1)设置计数器t＝0；
(3-2)判断t是否大于第j个二维结构体数组中的哈希签名结果总数，如果是则过程结束，否则进入步骤(3-3)；
(3-3)在待录制视频中获取第j个二维结构体数组中的第t个哈希签名结果对应的文件名，并根据该文件名从视频同级目录获取对应的图像；
(3-4)将步骤(3-3)得到的图像拼接在待录制视频的第j帧图像中；
(3-5)设置t＝t+1，并返回步骤(3-2)。
CN202110641088.5A 2021-06-09 2021-06-09 用于rpa机器人屏幕录制的无损视频编码方法和解码方法 Active CN113365065B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110641088.5A CN113365065B (zh) 2021-06-09 2021-06-09 用于rpa机器人屏幕录制的无损视频编码方法和解码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110641088.5A CN113365065B (zh) 2021-06-09 2021-06-09 用于rpa机器人屏幕录制的无损视频编码方法和解码方法

Publications (2)

Publication Number Publication Date
CN113365065A CN113365065A (zh) 2021-09-07
CN113365065B true CN113365065B (zh) 2024-04-26

Family

ID=77533402

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110641088.5A Active CN113365065B (zh) 2021-06-09 2021-06-09 用于rpa机器人屏幕录制的无损视频编码方法和解码方法

Country Status (1)

Country Link
CN (1) CN113365065B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420614A (zh) * 2008-11-28 2009-04-29 同济大学 一种混合编码与字典编码整合的图像压缩方法及装置
CN103596010A (zh) * 2013-11-20 2014-02-19 天津大学 基于字典学习的压缩感知视频编解码系统
WO2015131304A1 (en) * 2014-03-04 2015-09-11 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
CN107145340A (zh) * 2017-03-22 2017-09-08 深信服科技股份有限公司 虚拟桌面图像传输方法及装置
CN108495139A (zh) * 2018-04-18 2018-09-04 北方工业大学 屏幕内容编码的哈希块匹配
WO2019015543A1 (zh) * 2017-07-17 2019-01-24 中兴通讯股份有限公司 一种虚拟桌面数据显示的方法及系统
CN110289861A (zh) * 2019-05-20 2019-09-27 湖南大学 半精度压缩感知采样方法
CN110297680A (zh) * 2019-06-03 2019-10-01 北京星网锐捷网络技术有限公司 一种传输虚拟桌面图像的方法及装置
CN110392262A (zh) * 2019-07-03 2019-10-29 锐捷网络股份有限公司 一种压缩虚拟桌面图像的方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8355585B2 (en) * 2009-05-12 2013-01-15 Red Hat Israel, Ltd. Data compression of images using a shared dictionary
US10931948B2 (en) * 2018-05-21 2021-02-23 Google Llc Enhanced image compression with clustering and lookup procedures

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420614A (zh) * 2008-11-28 2009-04-29 同济大学 一种混合编码与字典编码整合的图像压缩方法及装置
CN103596010A (zh) * 2013-11-20 2014-02-19 天津大学 基于字典学习的压缩感知视频编解码系统
WO2015131304A1 (en) * 2014-03-04 2015-09-11 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
CN107145340A (zh) * 2017-03-22 2017-09-08 深信服科技股份有限公司 虚拟桌面图像传输方法及装置
WO2019015543A1 (zh) * 2017-07-17 2019-01-24 中兴通讯股份有限公司 一种虚拟桌面数据显示的方法及系统
CN108495139A (zh) * 2018-04-18 2018-09-04 北方工业大学 屏幕内容编码的哈希块匹配
CN110289861A (zh) * 2019-05-20 2019-09-27 湖南大学 半精度压缩感知采样方法
CN110297680A (zh) * 2019-06-03 2019-10-01 北京星网锐捷网络技术有限公司 一种传输虚拟桌面图像的方法及装置
CN110392262A (zh) * 2019-07-03 2019-10-29 锐捷网络股份有限公司 一种压缩虚拟桌面图像的方法及装置

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
JVET AHG report: Screen Content Coding (AHG11);Shan Liu等;《Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 19th Meeting: by teleconference, 22 June – 1 July 2020, JVET-S0011-v1》;20200701;全文 *
Li,Yangfan等.Attention-Aware Encoder-Decoder Neural Networks for Heterogeneous Graphs of Things.《IEEE TRANSACTIONS ON INDUSTRIAL INFORMATICS》.2021,全文. *
低熵图像序列无损压缩;汤颖;刘晓哲;张宏鑫;;计算机科学;20141215(第12期);全文 *
面向人工智能和大数据的高效能计算;李肯立;《数据与计算发展前沿》;20200215;全文 *

Also Published As

Publication number Publication date
CN113365065A (zh) 2021-09-07

Similar Documents

Publication Publication Date Title
RU2119727C1 (ru) Способы и устройства обработки набора коэффициентов преобразования, способы и устройства обратного ортогонального преобразования набора коэффициентов преобразования, способы и устройства для уплотнения и расширения сигнала движущегося изображения, носитель записи уплотненного сигнала, представляющего движущееся изображение
CN1203667C (zh) 从经压缩的正常播放图像比特流中建立特技播放图像流的系统和方法
JP5606591B2 (ja) ビデオ圧縮方法
CN102104764B (zh) 一种图像序列的压缩存储处理方法
JP3787398B2 (ja) 画像処理装置及びその方法
US7227900B2 (en) Differential encoding
US5831677A (en) Comparison of binary coded representations of images for compression
CN111901603B (zh) 一种用于静态背景视频的编码方法及解码方法
CN101656878B (zh) 一种改进的帧间压缩的方法
CN103109535B (zh) 图像再生方法、图像再生装置、摄像系统及再生系统
US20050089232A1 (en) Method of video compression that accommodates scene changes
JP2011518527A (ja) 映像の復号化
CN1224310A (zh) 消除像素色彩分量的图像编码解码
JP2012085001A5 (zh)
CN113365065B (zh) 用于rpa机器人屏幕录制的无损视频编码方法和解码方法
US20110249959A1 (en) Video storing method and device based on variable bit allocation and related video encoding and decoding apparatuses
WO2023193701A1 (zh) 图像编码方法及装置
CN1574929A (zh) 移动图像处理装置
GB2408871A (en) Data and digital video data compression
KR100860661B1 (ko) 화상 재생 방법과 화상 처리 방법, 및 이들 방법을 이용가능한 화상 재생 장치, 화상 처리 장치, 텔레비전 수상기
EP4354868A1 (en) Media data processing method and related device
CN111212288B (zh) 视频数据的编解码方法、装置、计算机设备和存储介质
KR101602871B1 (ko) 데이터 부호화 방법 및 장치와 데이터 복호화 방법 및 장치
JPH0795536A (ja) 動画像逆再生装置及び方法
US20230164358A1 (en) Video Encoder With Motion Compensated Temporal Filtering

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant