CN107431809B - 图像处理的方法和装置 - Google Patents

图像处理的方法和装置 Download PDF

Info

Publication number
CN107431809B
CN107431809B CN201580078348.5A CN201580078348A CN107431809B CN 107431809 B CN107431809 B CN 107431809B CN 201580078348 A CN201580078348 A CN 201580078348A CN 107431809 B CN107431809 B CN 107431809B
Authority
CN
China
Prior art keywords
image
geometric shape
indication information
unit
image unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580078348.5A
Other languages
English (en)
Other versions
CN107431809A (zh
Inventor
宋锦
赵寅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN107431809A publication Critical patent/CN107431809A/zh
Application granted granted Critical
Publication of CN107431809B publication Critical patent/CN107431809B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel

Abstract

提供一种图像处理的方法和装置,能够降低对存储资源的消耗,该方法包括:服务器根据来自编码端设备的第一图像中的第一图像单元,确定第一几何形状,其中,该第一图像单元与该第一几何形状之间的相似度处于预设范围内;向解码端设备发送该第一图像的编码信息,其中,该第一图像的编码信息包括该第一几何形状的指示信息以及该第一图像单元在该第一图像中的位置的指示信息。

Description

图像处理的方法和装置
技术领域
本发明涉及通信领域,并且更具体地,涉及一种图像处理的方法和装置。
背景技术
目前,已知一种图像处理的技术,在给定图像信息正确性的要求下,编码端设备压缩图像的信息量,使适应信道的带宽和速率,并传输至解码端设备。模拟处理通过一定的速率对图像扫描或进一步减少空间样点数,降低样点的灰度级(例如,黑白二值图像),用压缩亮度信号和色度信号带宽及频谱交错等方法压缩信号频带。数字处理把经过一定模拟处理的图像信号数字化。
随着通信技术的普及,用户对图像类业务的需求也不断增加,并且,对图像质量的要求也越来越高,上述图像处理技术的处理复杂度以及对编码端设备的处理性能的要求也随之提高。
希望提供一种图像处理技术,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
发明内容
本发明实施例提供一种图像处理的方法和装置,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
第一方面,提供了一种图像处理的方法,该方法包括:服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定至少一个第一几何形状,并从该第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;生成用于指示该第一几何形状的第一指示信息;向解码端设备发送该第一指示信息。
结合第一方面,在第一方面的第一种实现方式中,该方法还包括:向编码端设备发送该第一指示信息,以便于该编码端设备根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,生成用于指示该目标第一几何形状的第二指示信息,向该解码端设备发送该第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限。
结合第一方面及其上述实现方式,在第一方面的第二种实现方式中,该方法还包括:服务器根据该第一图像、该几何形状集合和该相似度门限,从该第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;根据该第三图像单元,生成至少一个第二几何图形,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限;生成用于指示该第二几何形状的第三指示信息;向该解码端设备发送该第三指示信息。
结合第一方面及其上述实现方式,在第一方面的第三种实现方式中,该方法还包括:向该编码端设备发送该第三指示信息,以便于该编码端设备根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限。
第二方面,提供了一种图像处理的方法,该方法包括:解码端设备接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;根据该第一指示信息,确定该第一几何形状;根据该第一几何形状,重构该第一图像。
结合第二方面,在第二方面的第一种实现方式中,该方法还包括:接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;根据该第三指示信息,确定该第二几何形状;以及该根据该第一几何形状,重构该第一图像,包括:根据该第一几何形状和该第二几何形状,重构该第一图像。
第三方面,提供了一种图像处理的方法,该方法包括:编码端设备接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;根据该第一指示信息,确定该第一几何形状;根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限;生成用于指示该目标第一几何形状的第二指示信息;向该解码端设备发送该第二指示信息。
结合第三方面,在第三方面的第一种实现方式中,接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;根据该第三指示信息,确定该第二几何形状;根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限;生成用于指示该目标第二几何形状的第四指示信息;向该解码端设备发送该第四指示信息。
第四方面,提供了一种图像处理的装置,该装置包括:确定单元,用于根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定至少一个第一几何形状,并从该第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;生成单元,用于生成用于指示该第一几何形状的第一指示信息;发送单元,用于向解码端设备发送该第一指示信息。
结合第四方面,在第四方面的第一种实现方式中,该发送单元还用于向编码端设备发送该第一指示信息,以便于该编码端设备根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,生成用于指示该目标第一几何形状的第二指示信息,向该解码端设备发送该第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限。
结合第四方面及其上述实现方式,在第四方面的第二种实现方式中,该确定单元还用于根据该第一图像、该几何形状集合和该相似度门限,从该第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;该生成单元还用于根据该第三图像单元,生成至少一个第二几何图形,并生成用于指示该第二几何形状的第三指示信息,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限;该发送单元还用于向该解码端设备发送该第三指示信息。
结合第四方面及其上述实现方式,在第四方面的第三种实现方式中,该发送单元还用于向该编码端设备发送该第三指示信息,以便于该编码端设备根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限。
第五方面,提供了一种图像处理的装置,该装置包括:接收单元,用于接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;确定单元,用于根据该第一指示信息,确定该第一几何形状;处理单元,用于根据该第一几何形状,重构该第一图像。
结合第五方面,在第五方面的第一种实现方式中,该接收单元还用于接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;该确定单元还用于根据该第三指示信息,确定该第二几何形状;该处理单元具体根据该第一几何形状和该第二几何形状,重构该第一图像。
第六方面,提供了一种图像处理的装置,该装置包括:接收单元,用于接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;确定单元,用于根据该第一指示信息,确定该第一几何形状;处理单元,用于根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限;生成单元,用于生成用于指示该目标第一几何形状的第二指示信息;发送单元,用于向该解码端设备发送该第二指示信息。
结合第六方面,在第六方面的第一种实现方式中,该接收单元还用于接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;该确定单元还用于根据该第三指示信息,确定该第二几何形状;该处理单元还用于根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限;该生成单元还用于生成用于指示该目标第二几何形状的第四指示信息;该发送单元还用于向该解码端设备发送该第四指示信息。
根据本发明实施例的图像处理的方法和装置,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
附图说明
图1是使用本发明的图像处理的方法的通信系统的示意性架构。
图2是根据本发明一实施例的图像处理的方法的示意性流程图。
图3是根据本发明另一实施例的图像处理的方法的示意性流程图。
图4是根据本发明再一实施例的图像处理的方法的示意性流程图。
图5是根据本发明一实施例的图像处理的装置的示意性框图。
图6是根据本发明另一实施例的图像处理的装置的示意性框图。
图7是根据本发明再一实施例的图像处理的装置的示意性框图。
图8是根据本发明一实施例的图像处理的设备的示意性结构图。
图9是根据本发明另一实施例的图像处理的设备的示意性结构图。
图10是根据本发明再一实施例的图像处理的设备的示意性结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本说明书中使用的术语“单元”等用于表示计算机相关的实体、硬件、固件、硬件和软件的组合、软件、或执行中的软件。例如,部件可以是但不限于,在处理器上运行的进程、处理器、对象、可执行文件、执行线程、程序和/或计算机。通过图示,在计算设备上运行的应用和计算设备都可以是部件。一个或多个部件可驻留在进程和/或执行线程中,部件可位于一个计算机上和/或分布在2个或更多个计算机之间。此外,这些部件可从在上面存储有各种数据结构的各种计算机可读介质执行。部件可例如根据具有一个或多个数据分组(例如来自与本地系统、分布式系统和/或网络间的另一部件交互的二个部件的数据,例如通过信号与其它系统交互的互联网)的信号通过本地和/或远程进程来通信。
图1是使用本发明的图像处理的方法的通信系统100的示意性架构,如图1所示,该系统包括编码端设备110、服务器120和解码端设备130,其中,在编码端设备110和解码端设备130分别与服务器120通信连接,即,编码端设备110和解码端设备130均能够与服务器120传输数据或信息。
应理解,以上列举的通信系统100中所包括的各设备仅为示例性说明,本发明并未限定于此,还可以根据需要配置其他设备,例如,高层管理设备等。
可选地,编码端设备110和解码端设备130也可以通信连接(即,图1中虚线所示通信连接),以传输数据或信息。
这里,通信系统100中的各设备之间的通信方式可以是现有技术中的任意通信方式,本发明并未特别限定,例如,可以通过现有的蜂窝通信系统,如全球移动通讯(英文全称可以为:Global System for Mobile Communication,英文简称可以为:GSM),宽带码分多址(英文全称可以为:Wideband Code Division Multiple Access,英文简称可以为:WCDMA),长期演进(英文全称可以为:Long Term Evolution,英文简称可以为:LTE)等系统;或者,可以通过光纤通信系统或以太网通信系统等。
需要说明的是,通信系统100所包括的编码端设备110、服务器120和解码端设备130的数量可以任意设定,本发明并未特别限定,例如,服务器120可以是由多个服务器构成的服务器集群。
另外,在本发明实施例中,服务器120、编码端设备110和解码端设备具有独立的运算处理模块单元,能够独立完成后述图像处理过程,并且,服务器120可以与编码端设备110或解码端设备130独立配置,例如,地理地址相异;或者,服务器120也可以与编码端设备110或解码端设备130联合配置,例如,地理地址相同,从而能够有利于服务器120也可以与编码端设备110或解码端设备130之间通过高速传输线缆等实现高速传输。
在本发明实施例中,编码端设备和解码端设备可以是终端设备,终端设备也可以称为用户设备(UE,User Equipment)用户设备、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、用户终端、终端、无线通信设备、用户代理或用户装置。终端设备可以是WLAN(Wireless Local Area Networks,无线局域网)中的ST(STAION,站点),可以是蜂窝电话、无绳电话、SIP(Session Initiation Protocol,会话启动协议)电话、WLL(Wireless Local Loop,无线本地环路)站、PDA(Personal Digital Assistant,个人数字处理)、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备、可穿戴设备以及未来5G网络中的终端设备或者未来演进的公共陆地移动网络(PLMN,Public Land Mobile Network)网络中的终端设备等。
此外,本发明的各个方面或特征可以实现成方法、装置或使用标准编程和/或工程技术的制品。本申请中使用的术语“制品”涵盖可从任何计算机可读器件、载体或介质访问的计算机程序。例如,计算机可读介质可以包括,但不限于:磁存储器件(例如,硬盘、软盘或磁带等),光盘(例如,CD(Compact Disk,压缩盘)、DVD(Digital Versatile Disk,数字通用盘)等),智能卡和闪存器件(例如,EPROM(Erasable Programmable Read-Only Memory,可擦写可编程只读存储器)、卡、棒或钥匙驱动器等)。另外,本文描述的各种存储介质可代表用于存储信息的一个或多个设备和/或其它机器可读介质。术语“机器可读介质”可包括但不限于,无线信道和能够存储、包含和/或承载指令和/或数据的各种其它介质。
图2是从服务器角度描述的根据本发明一实施例的图像处理的方法200的示意性流程图,如图2所示,该方法200包括:
S210,服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定至少一个第一几何形状,并从该第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
S220,生成用于指示该第一几何形状的第一指示信息。
S230,向解码端设备发送该第一指示信息。
在本发明实施例中,在服务器中可以预先存储由多个几何形状构成的几何形状几何,其中,几何形状也可以被称为特征单词,几何形状集合也可以被称为(由多个特征单词构成的)特征词典。
并且,在本发明实施例中,几何形状可以是由线条构成的,例如,可以是三角形、圆形矩形、梯形或其他多边等;或者,也可以是不规则的图形,例如,由线条构成的实物的轮廓等。
此外,几何形状还可以是通过计算机视觉等技术提取出的特征形状,例如,哈尔特征(Haar-Link Features)。
并且,在本发明实施例中,几何形状可以是以上列举的单独的各形状,也可以是多个形状的组合,本发明并未特别限定,例如,该几何形状可以是由三角形和圆形组成的自行车的轮廓。
当编码端设备需要将图像A发送至解码端设备时,编码端设备可以对该图像A的内容(例如,图像A本身)相关数据传输至服务器,作为实例而非限定,该图像A的内容相关数据可以是编码端设备采用无损压缩编码、有损压缩编码(例如,降低分辨率的编码、降低帧率的编码)或者其他任何已知编码方式对该图像A进行编码处理后生成的数据。
需要说明的是,在本发明实施例中,该图像A可以是照片等独立的图像,也可以是视频中的一帧图像,本发明并未特别限定。
另外,在目前的图像处理领域,图像可以被进一步划分为条带(也称为,切片)slice,slice再被划分为块block。图像编码以块为单位从图像的左上角位置开始从左到右从上到下一行一行进行编码处理。相对应的,在本发明实施例中,上述图像A也可以是一个完整的图像中的一个图像条带或图像块,本发明并未特别限定。
从而,在S110,服务器可以获取图像A,并从该图像A中确定可以通过上述几何形状表达的部分。
例如,服务器可以根据预设的滑动窗口的大小对图像A的各个部分进行搜索检测,即,检测滑窗内的图像块与上述预设的(几何形状集合中的)多个几何形状之间的相似度。需要说明的是,在本发明实施例中,滑窗内的图像块的形状是滑窗的形状确定的,滑窗的形状可以根据需要任意设定,本发明并未特别限定,例如,在所处理的图像为自行车的照片时,该图像块可以为圆形或三角形等。
作为实例而非限定,在本发明实施例中,上述“相似度”可以为结构相似度(SSIM,structural similarity)。作为结构相似性理论的实现,结构相似度指数从图像组成的角度将结构信息定义为独立于亮度、对比度的,反映场景中物体结构的属性,并将失真建模为亮度、对比度和结构三个不同因素的组合。用均值作为亮度的估计,标准差作为对比度的估计,协方差作为结构相似程度的度量。
不失一般性,以针对图像块#1的处理为例进行说明。
首先,服务器可以对图像块#1进行预处理,例如,缩放处理,能够与几何形状#α进行比拟的图像块#2,例如,使几何形状#α与图像块#2的面积相同,或者使几何形状#α与图像块#2的面积之差在预设范围(例如,占几何形状#α或图像块#2的面积的例如,10%)内。
其后,服务器可以计算几何形状#α和图像块#2的图像结构相似度,例如,服务器可以将几何形状#α和图像块#2作为两幅图像,使用现有技术中计算图像间SSIM的计算公式,得到几何形状#α和图像块#2之间的SSIM,取值范围为[0,1];
当该相似度大于或等于预设的相似度门限(例如,0.9)时,即,几何形状#α和图像块#2相似度大于或等于0.9,则服务器可以确定图像块#1与几何形状#α之间的相似度大于或等于预设的相似度门限,即,可以将图像块#1作为能够利用几何形状#α(第一几何形状的一例)表达的图像单元#1(即,第一图像单元的一例)。
需要说明的是,例如,当对于图像单元#1,存在多个相似度大于预设的相似度门限的几何形状时,可以任意选择一个几何形状作为图像单元#1所对应的几何形状,也可以选择相似度最大的几何形状作为图像单元#1所对应的几何形状,本发明并未特别限定。
通过相似的步骤,服务器通过变更滑窗的大小或形状,对图像A进行多次搜索检测,能够确定图像A中的各第一图像单元(即,与几何形状集合中某一几何形状之间的相似度大于或等于预设的相似度门限的图像单元)以及各第一图像单元所对应的几何形状。
应理解,以上列举的相似度的判定方法仅为实例性说明,本发明并未限定于此,现有技术中的其他相似性理论获得的相似度均落入本发明的保护范围内。
需要说明的是,在本发明实施例中,该图像单元可以是呈现一个完整的实物,也可以是实物的一部分,可以通过调整例如上述滑窗的形状来确定,例如,如果图像A中呈现有自行车,则该图像单元#1可以是该自行车整体,相应地,几何形状#α可以是由线条构成的自行车的轮廓(例如,由多个三角形和圆形组合而成);或者,则该图像单元#1也可以是该自行车的一部分,例如,车轮,相应地,几何形状#α可以是由线条构成的车轮的轮廓(例如,由圆形构成)。
以下,为了避免赘述,省略对相同或相似情况的说明。
通过上述方式,服务器能够确定图像A中能够通过特征单词表达的部分(以下,为了便于理解和区分,记做“可表达部分”)。
在S220,服务器可以生成用于指示包括上述几何形状#α在内的图像A中的各第一图像单元所对应的第一几何形状的指示信息(即,第一指示信息的一例)。
并将该第一指示信息发送给解码端设备,从而,解码端设备能够根据该第一指示信息(例如,几何形状#α的指示信息),基于第一几何形状(例如,几何形状#α)重构图像A中的第一图像单元(例如,图像单元#1)。
可选地,该方法还包括:
确定各该第一图像单元在所述第一图像中的位置;
生成用于指示各第一图像单元在该第一图像中的位置的第五指示信息;
向该解码端设备发送该第五指示信息。
不失一般性,服务器可以确定与几何形状#α相对应的图像单元#1在内的图像A内的位置,并将图像单元#1在内的图像A内的位置的指示信息(即,第五指示信息的一例)发送给解码端设备,从而,解码端设备可以根据上述几何形状#α的指示信息,确定该图像A包括几何形状#α所对应的图像单元#1,并根据图像单元#1在内的图像A内的位置的指示信息,确定图像单元#1在内的图像A内的位置,从而能够实现对图像A中的图像单元#1的重构。
类似地,服务器可以将上述图像A中的各可表达部分所对应的特征单词(或者说,几何形状)的指示信息以及图像A中的各可表达部分在图像A中的位置的指示信息发送给解码端设备。
例如,当图像A中的各图像单元均能够通过上述特征单词表达的情况下,解码端设备可以根据图像A中的各可表达部分所对应的特征单词的指示信息,确定图像A中的各图像单元,并且,解码端设备可以根据图像A中的各可表达部分在图像A中的位置的指示信息,确定图像A中的各图像单元的位置,从而,能够对图像A进行重构,由此,完成图像A从编码端设备到解码端设备的传输。
可选地,该方法还包括:
确定该第一图像单元与所对应的第一几何形状之间的差异;
生成用于指示该第一图像单元与所对应的第一几何形状之间的差异的第六指示信息;
向解码端设备发送所述第六指示信息。
具体地说,服务器还可以确定各图像单元与所对应的特征单词之间的差异,并将该差异的指示信息发送给解码端设备,从而,解码端设备可以根据该差异的指示信息,在确定图像A中的各图像单元时,进行补偿,从而能够提高所确定的图像A中的各图像单元的精度和准确性。
不失一般性,该第一图像的编码信息可以包括几何形状#α与图像单元#1之间的差异的指示信息(即,第一图像单元与该第一几何形状之间的差异的指示信息的一例),从而,解码端设备确定几何形状#α与图像单元#1之间的差异,并基于该差异和所几何形状#α,确定(或者说,重构)图像单元#1。
需要说明的是,以上列举的基于各图像单元与所对应的特征单词之间的差异确定各图像单元的方式仅为实例性说明,本发明并未限定于此,例如,如果上述“相似度门限”足够小,则表明各特征单词与所对应的图像单元足够相似,解码端设备能够直接根据各特征单词确定各图像单元。
另外,受特征词典的规模的限制,可能存在图像A中的部分图像单元无法通过特征单词表达的情况(以下,为了便于理解和区分,将该部分图像单元称为“不可表达部分”)。
此情况下,服务器可以基于现有技术对该不可表达部分进行编码处理,并将编码处理后的数据发送给解码端设备,相应地,解码端设备可以基于现有技术对该数据进行解码处理,以恢复出不可表达部分,并基于不可表达部分和可表达部分重构图像A。
或者,可选地,该方法还包括:
服务器根据该第一图像、该几何形状集合和该相似度门限,从该第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
根据该第三图像单元,生成至少一个第二几何图形,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限;
生成用于指示该第二几何形状的第三指示信息;
向该解码端设备发送该第三指示信息。
不失一般性,以针对图像A中的图像块#3的处理为例进行说明。
首先,服务器可以对图像块#3进行预处理,例如,缩放处理,能够与几何形状#β进行比拟的图像块#4,例如,使几何形状#β与图像块#4的面积相同,或者使几何形状#β与图像块#4的面积之差在预设范围(例如,占几何形状#β或图像块#4的面积的例如,10%)内。
其后,服务器可以计算几何形状#β和图像块#4的图像结构相似度,例如,服务器可以将几何形状#β和图像块#4作为两幅图像,使用现有技术中计算图像间SSIM的计算公式,得到几何形状#β和图像块#4之间的SSIM,取值范围为[0,1];
当该相似度小于预设的相似度门限(例如,0.9)时,即,几何形状#β和图像块#4相似度小于0.9,则服务器可以确定图像块#3与几何形状#β之间的相似度小于预设的相似度门限,即,可以将图像块#3不能够利用几何形状#β表达。
类似地,当服务确定预设的几何形状集合中的各几何图像与该图像块#3之间的相似度(例如,SSIM)均小于上述预设的相似度门限时,则可以将该图像块#3作为不能够利用预设的特征词典表达的图像单元#3(即,第三图像单元的一例)。
通过相似的步骤,服务器通过变更滑窗的大小或形状,对图像A进行多次搜索检测,能够确定图像A中的各第三图像单元(即,与几何形状集合中任一几何形状之间的相似度均小于预设的相似度门限的图像单元)。
其后,服务器可以利用计算机视觉等技术提取出各第三图像单元的特征形状,例如,哈尔特征(Haar-Link Features),作为各第三图像单元所对应的几何形状(即,第二几何形状)。
通过相似的步骤,服务器通过变更滑窗的大小或形状,对图像A进行多次搜索检测,能够确定图像A中的各第三图像单元以及各第三图像单元所对应的第二几何形状。
其后,服务器可以生成用于指示包括上述几何形状#β在内的图像A中的各第三图像单元所对应的第二几何形状的指示信息(即,第三指示信息的一例)。
并将该第三指示信息发送给解码端设备,从而,解码端设备能够根据该第三指示信息(例如,几何形状#β的指示信息),基于第二几何形状(例如,几何形状#β)重构图像A中的第三图像单元(例如,图像单元#3)。
可选地,该方法还包括:
确定各该第三图像单元在所述第一图像中的位置;
生成用于指示各第三图像单元在该第一图像中的位置的第七指示信息;
向该解码端设备发送该第七指示信息。
不失一般性,服务器可以确定与几何形状#β相对应的图像单元#3在内的图像A内的位置,并将图像单元#3在内的图像A内的位置的指示信息(即,第五指示信息的一例)发送给解码端设备,从而,解码端设备可以根据上述几何形状#β的指示信息,确定该图像A包括几何形状#β所对应的图像单元#3,并根据图像单元#3在内的图像A内的位置的指示信息,确定图像单元#3在内的图像A内的位置,从而能够实现对图像A中的图像单元#3的重构。
类似地,服务器可以将上述图像A中的各不可表达部分所对应的特征单词(或者说,几何形状)的指示信息以及图像A中的各不可表达部分在图像A中的位置的指示信息发送给解码端设备。
可选地,该方法还包括:
确定该第三图像单元与所对应的第二几何形状之间的差异;
生成用于指示该第三图像单元与所对应的第二几何形状之间的差异的第八指示信息;
向解码端设备发送所述第八指示信息。
具体地说,服务器还可以确定各图像单元与所对应的几何形状之间的差异,并将该差异的指示信息发送给解码端设备,从而,解码端设备可以根据该差异的指示信息,在确定图像A中的各图像单元时,进行补偿,从而能够提高所确定的图像A中的各图像单元的精度和准确性。
需要说明的是,在本发明实施例中,该第一图像的编码信息(例如,可以包括上述第一指示信息、第三指示信息、第五指示信息、第六指示信息、第七指示信息和第八指示信息)可以是由服务器直接发送给解码端设备,或者,该第一图像的编码信息也可以是由服务器发送给编码端设备,并由编码端设备转发给解码端设备,本发明并未特别限定。
可选地,该方法还包括:
向编码端设备发送该第一指示信息,以便于该编码端设备根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,生成用于指示该目标第一几何形状的第二指示信息,向该解码端设备发送该第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限。
具体地说,在本发明实施例中,服务器还可以将图像A中的各可表达部分所对应的几何形状(或者说,特征单词)的指示信息(例如,第一几何形状的指示信息)和/或图像A中的各不可表达部分所对应的几何形状(或者说,特征单词)的指示信息(例如,第二几何形状的指示信息)发送给编码端设备。并且,编码端设备可以存储所接收到的各几何形状,作为特征单词。
从而,当编码端设备需要向解码端设备发送图像B(即,第二图像或第四图像的一例)时,编码端设备可以从该图像B中确定可以通过上述所接收到的几何形状(例如,几何形状#α或几何形状#β)表达的部分,具体地说,服务器可以确定图像B中的各呈现对象(即,各图像B的各图像单元)与第一几何形状的指示信息所指示的几何形状(或者说,特征单词)之间的相似度。
并将相似度大于或等于预设门限的图像B中的图像单元作为能够利用特征单词表达的图像单元(即,第三图像单元或第四图像单元)。
其中,编码端设备从图像B中确定各可表达部分及各可表达部分对应的几何形状的方法和过程,与服务器从图像A中确定各第一图像单元及各第一图像单元对应的几何形状的方法和过程相似,这里,为了避免赘述,省略其详细说明。
通过上述方式,编码端设备能够确定图像B中能够通过特征单词表达的部分(即,可表达部分)。
并且,编码端设备可以确定图像B中的各可表达部分在图像B中的位置,并且,该过程可以与现有技术相似,为了避免赘述,省略其详细说明。
编码端设备可以将包括上述图像B中的各可表达部分(即,第三图像单元或第四图像单元)所对应的特征单词(或者说,几何形状)的指示信息(即,第二指示信息或第四指示信息的一例)以及图像B中的各可表达部分在图像B中的位置的指示信息发送给解码端设备。
例如,当图像B中的各图像单元均能够通过上述特征单词表达的情况下,解码端设备可以根据图像B中的各可表达部分所对应的特征单词的指示信息,确定图像B中的各图像单元,并且,解码端设备可以根据图像B中的各可表达部分在图像B中的位置的指示信息,确定图像B中的各图像单元的位置,从而,能够对图像B进行重构,由此,完成图像B从编码端设备到解码端设备的传输。
此外,编码端设备还可以确定图像B中各可表达部分与所对应的特征单词之间的差异,并将该差异的指示信息发送给解码端设备,从而,解码端设备可以根据该差异的指示信息,在确定图像B中的各图像单元时,进行补偿,从而能够提高所确定的图像B中的各图像单元的精度和准确性。
另外,受特征词典的规模的限制,可能存在图像B中的部分图像单元无法通过特征单词表达的情况(以下,为了便于理解和区分,将该部分图像单元称为“不可表达部分”)。
此情况下,编码端设备可以基于现有技术对该不可表达部分进行编码处理,并将编码处理后的数据发送给解码端设备,相应地,解码端设备可以基于现有技术对该数据进行解码处理,以恢复出不可表达部分,并基于不可表达部分和可表达部分重构图像B。
需要说明的是,在本发明实施例中,该图像B的编码信息(例如,可以包括第二指示信息或第四指示信息)可以是由编码端设备直接发送给解码端设备,或者,该图像B的编码信息也可以是由编码端设备发送给服务器,并由服务器转发给解码端设备,本发明并未特别限定。
可选地,该第二图像与该第一图像属于同一视频;或
该第四图像与该第一图像属于同一视频。
具体地说,当上述图像B与图像A属于同一视频时,图像B与图像A可能具有较高的相似度,例如,呈现的内容相同,此情况下,图像B中的图像单元能够由图像A中的图像单元所对应的几何形状表达的可能性也较高,从而,能够进一步提高方法100的处理效率。
需要说明的是,在本发明实施例中,第二图像与第四图像可以为同一图像也可以为不同图像,相应地,第二指示信息与第四指示信息可以为相同的信息也可以为不同的信息,第二图像单元与第四图像单元可以为相同的图像单元也可以为不同的图像单元,本发明并未特别限定。
下面,对本发明实施例中几何形状的指示信息(或者说,特征单词的指示信息,例如,第一指示信息、第二指示信息、第三指示信息或第四指示信息)的形式进行详细说明。
例如,可选地,在本发明实施例中,该几何形状的指示信息可以为服务器对该几何形状进行编码处理后得到的数据,从而解码端设备可以根据该数据,直接重构出几何形状。
再例如,可选地,在该服务器和该解码端设备中存储有第一映射关系信息,该第一映射关系信息用于指示该多个第一几何形状与多个第一索引值之间的一一对应关系,以及
该生成用于指示该目标第一几何形状的第一指示信息,包括:
将该目标第一几何形状所对应的第一索引值作为该第一指示信息。
可选地,该方法还包括:
生成第二映射关系信息,该第二映射关系信息用于指示该至少一个第二几何形状与至少一个第二索引值之间的一一对应关系;
向该解码端设备发送该第二映射关系信息;以及
该生成用于指示该第二几何形状的第二指示信息,包括:
将各该第二几何形状所对应的第二索引值作为该第二指示信息。
可选地,在服务器、解码端设备和编码端设备中存储有映射关系信息,该映射关系信息用于指示多个几何形状与多个索引值的一一对应关系,该第一几何形状属于该多个几何形状,以及
该第一几何形状的指示信息具体为该第一几何形状所对应的索引值。
具体地说,如上所述,在服务器、解码端设备和编码端设备可以预先存储同样的多个几何形状,并采用相同的对应关系对各几何形状进行索引,即,在服务器、解码端设备和编码端设备,一个索引值能够唯一地确定同一个几何形状。
从而,可以将第一几何形状所对应的索引值作为第一几何形状的指示信息。
另外,在本发明实施例中,上述多个几何形状可以由网络管理员或者运营商预先存储在服务器中,并由服务器生成各几何形状与各索引值的映射关系信息(例如,映射表项),并将各几何形状以及映射关系信息传输至解码端设备和编码端设备。
另外,当在服务器、解码端设备和编码端设备中存储的几何图形的数量较大的情况下,解码端设备或编码端设备可能需要基于该第一几何形状所对应的索引值遍历所存储的几何图形,在极端情况下,可能需要遍历所有的几何图形,才能获得第一几何形状。
并且,例如,当所传输的图像包括多个可表达部分时,进一步增加了整体处理的时间,即,确定各可表达部分所对应的几何形状的总时间。
此情况下,服务器可以将为该多个可表达部分重新分配索引值,并将重新分配索引值后的映射关系信息以及该多个可表达部分所对应的几何形状发送至编码端设备或解码端设备,并且,编码端设备或解码端设备,对该图像的可表达部分所对应的几何形状的存储和索引可以独立于预先存储的海量的几何形状,从而,解码端设备或编码端设备在处理同一图像时,能够基于该独立存储的该图像的可表达部分所对应的几何形状的存储和索引,快速查找到图像的各可表达部分所对应的几何形状。
根据本发明实施例的图像处理的方法,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图3是从解码端设备角度描述的根据本发明另一实施例的图像处理的方法300的示意性流程图,如图3所示,该方法300包括:
S310,解码端设备接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
S320,根据该第一指示信息,确定该第一几何形状;
S330,根据该第一几何形状,重构该第一图像
可选地,该方法还包括:
接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
根据该第三指示信息,确定该第二几何形状;以及
该根据该第一几何形状,重构该第一图像,包括:
根据该第一几何形状和该第二几何形状,重构该第一图像。
可选地,在该服务器和该解码端设备存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该解码端设备的。
可选地,该第二图像与该第一图像属于同一视频。
上述方法300中解码端设备的动作与上述方法200中解码端设备的动作相似,上述方法300中服务器的动作与上述方法200中服务器的动作相似,这里,上述方法300中编码端设备的动作与上述方法200中编码端设备的动作相似,这里为了避免赘述,省略其详细说明。
根据本发明实施例的图像处理的方法,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图4是从编码端设备角度描述的根据本发明另一实施例的图像处理的方法400的示意性流程图,如图4所示,该方法400包括:
S410,编码端设备接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
S420,根据该第一指示信息,确定该第一几何形状;
S430,根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限;
S440,生成用于指示该目标第一几何形状的第二指示信息;
S450,向该解码端设备发送该第二指示信息。
可选地,该方法还包括:
接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
根据该第三指示信息,确定该第二几何形状;
根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限;
生成用于指示该目标第二几何形状的第四指示信息;
向该解码端设备发送该第四指示信息
可选地,在该服务器和该编码端设备存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该编码端设备的。
可选地,该第二图像与该第一图像属于同一视频。
上述方法400中解码端设备的动作与上述方法200中解码端设备的动作相似,上述方法400中服务器的动作与上述方法200中服务器的动作相似,这里,上述方法400中编码端设备的动作与上述方法200中编码端设备的动作相似,这里为了避免赘述,省略其详细说明。
根据本发明实施例的图像处理的方法,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给编码端设备,能够使编码端设备根据该第一几何形状,将第二图像分解为多个图像单元,并将于第二图像单元的相似度大于或等于预设的相似度门限的目标第一几何形状的指示信息发送给解码端设备,能够使解码端设备基于目标第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
以上,结合图1至图4详细说明了根据本发明实施例的图像处理的方法,下面,结合图5至图7详细说明根据本发明实施例的图像处理的装置。
图5是根据本发明一实施例的图像处理的装置500的示意性框图,如图5所示,该装置500包括:
确定单元510,用于根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定至少一个第一几何形状,并从该第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
生成单元520,用于生成用于指示该第一几何形状的第一指示信息;
发送单元530,用于向解码端设备发送该第一指示信息。
可选地,该发送单元还用于向编码端设备发送该第一指示信息,以便于该编码端设备根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,生成用于指示该目标第一几何形状的第二指示信息,向该解码端设备发送该第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限。
可选地,该确定单元还用于根据该第一图像、该几何形状集合和该相似度门限,从该第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
该生成单元还用于根据该第三图像单元,生成至少一个第二几何图形,并生成用于指示该第二几何形状的第三指示信息,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限;
该发送单元还用于向该解码端设备发送该第三指示信息。
可选地,该发送单元还用于向该编码端设备发送该第三指示信息,以便于该编码端设备根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限。
根据本发明实施例的图像处理的装置500可对应于本发明实施例的方法中的服务器,并且,图像处理的装置500中的各单元即模块和上述其他操作和/或功能分别为了实现图2中的方法200的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的装置,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图6是根据本发明一实施例的图像处理的装置600的示意性框图,如图6所示,该装置600包括:
接收单元610,用于接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
确定单元620,用于根据该第一指示信息,确定该第一几何形状;
处理单元630,用于根据该第一几何形状,重构该第一图像。
可选地,该接收单元还用于接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
该确定单元还用于根据该第三指示信息,确定该第二几何形状;
该处理单元具体根据该第一几何形状和该第二几何形状,重构该第一图像。
可选地,在该服务器和该装置存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该装置的。
根据本发明实施例的图像处理的装置600可对应于本发明实施例的方法中的解码端设备,并且,图像处理的装置600中的各单元即模块和上述其他操作和/或功能分别为了实现图3中的方法300的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的装置,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图7是根据本发明一实施例的图像处理的装置700的示意性框图,如图7所示,该装置700包括:
接收单元710,用于接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
确定单元720,用于根据该第一指示信息,确定该第一几何形状;
处理单元730,用于根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限;
生成单元740,用于生成用于指示该目标第一几何形状的第二指示信息;
发送单元750,用于向该解码端设备发送该第二指示信息。
可选地,该接收单元还用于接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
该确定单元还用于根据该第三指示信息,确定该第二几何形状;
该处理单元还用于根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限;
该生成单元还用于生成用于指示该目标第二几何形状的第四指示信息;
该发送单元还用于向该解码端设备发送该第四指示信息。
可选地,在该服务器和该装置存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该装置的。
可选地,该第二图像与该第一图像属于同一视频。
根据本发明实施例的图像处理的装置700可对应于本发明实施例的方法中的编码端设备,并且,图像处理的装置700中的各单元即模块和上述其他操作和/或功能分别为了实现图4中的方法400的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的装置,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给编码端设备,能够使编码端设备根据该第一几何形状,将第二图像分解为多个图像单元,并将于第二图像单元的相似度大于或等于预设的相似度门限的目标第一几何形状的指示信息发送给解码端设备,能够使解码端设备基于目标第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
以上,结合图1至图4详细说明了根据本发明实施例的图像处理的方法,下面,结合图8至图10详细说明根据本发明实施例的图像处理的设备。
图8是根据本发明一实施例的图像处理的设备800的示意性框图,如图8所示,该设备800包括:
总线810;
与所述总线相连的处理器820;
与所述总线相连的存储器830;
与所述总线相连的发射机840;
其中,所述处理器820通过所述总线810,调用所述存储器830中存储的程序,以用于根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定至少一个第一几何形状,并从该第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
用于生成用于指示该第一几何形状的第一指示信息;
用于控制发射机840向解码端设备发送该第一指示信息。
可选地,该处理器还用于向编码端设备发送该第一指示信息,以便于该编码端设备根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,生成用于指示该目标第一几何形状的第二指示信息,向该解码端设备发送该第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限。
可选地,该处理器还用于根据该第一图像、该几何形状集合和该相似度门限,从该第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
用于根据该第三图像单元,生成至少一个第二几何图形,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限;
用于生成用于指示该第二几何形状的第三指示信息;
用于控制该发射机向该解码端设备发送该第三指示信息。
可选地,该处理器还用于控制该发射机向该编码端设备发送该第三指示信息,以便于该编码端设备根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限。
可选地,该第二图像与该第一图像属于同一视频。
可选地,在设备800、解码端设备和编码端设备中存储有映射关系信息,该映射关系信息用于指示多个几何形状与多个索引值的一一对应关系,该第一几何形状属于该多个几何形状,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
本发明实施例可应用于各种通信设备。
设备800的发射机840可以包括发射电路、功率控制器、编码器及天线,并且,设备800还可以包括接收机,接收机可以包括接收电路、功率控制器、解码器及天线。
处理器还可以称为CPU。存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失行随机存取存储器(NVRAM)。具体的应用中,设备800可以嵌入或者本身可以就是例如服务器等通信设备,还可以包括容纳发射电路和接收电路的载体,以允许设备800和远程位置之间进行数据发射和接收。发射电路和接收电路可以耦合到天线。设备800的各个组件通过总线耦合在一起,其中,总线除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚明起见,在图中将各种总线都标为总线。具体的不同产品中解码器可能与处理单元集成为一体。
处理器可以实现或者执行本发明方法实施例中的公开的各步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器,解码器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用解码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。
应理解,在本发明实施例中,该处理器可以是中央处理单元(Central ProcessingUnit,简称为“CPU”),该处理器还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
该总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统。
在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
根据本发明实施例的图像处理的设备800可对应于本发明实施例的方法中的服务器,并且,图像处理的设备800中的各单元即模块和上述其他操作和/或功能分别为了实现图2中的方法200的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的设备,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图9是根据本发明一实施例的图像处理的设备900的示意性框图,如图9所示,该设备900包括:
总线910;
与所述总线相连的处理器920;
与所述总线相连的存储器930;
与所述总线相连的接收机940;
其中,所述处理器通过所述总线,调用所述存储器中存储的程序,以用于控制该接收机940接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
用于根据该第一指示信息,确定该第一几何形状;
用于根据该第一几何形状,重构该第一图像。
可选地,在该服务器和该设备900存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该设备900的。
可选地,该处理器还用于控制接收机接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
用于根据该第三指示信息,确定该第二几何形状;以及
用于该根据该第一几何形状,重构该第一图像,包括:
用于根据该第一几何形状和该第二几何形状,重构该第一图像。
本发明实施例可应用于各种通信设备。
设备900的接收机可以包括接收电路、功率控制器、解码器及天线,并且,设备900还可以包括发射机,发射机可以包括接收电路、功率控制器、编码器及天线。
处理器还可以称为CPU。存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失行随机存取存储器(NVRAM)。具体的应用中,设备900可以嵌入或者本身可以就是例如终端设备等通信设备,还可以包括容纳发射电路和接收电路的载体,以允许设备900和远程位置之间进行数据发射和接收。发射电路和接收电路可以耦合到天线。设备900的各个组件通过总线耦合在一起,其中,总线除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚明起见,在图中将各种总线都标为总线。具体的不同产品中解码器可能与处理单元集成为一体。
处理器可以实现或者执行本发明方法实施例中的公开的各步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器,解码器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用解码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。
应理解,在本发明实施例中,该处理器可以是中央处理单元(Central ProcessingUnit,简称为“CPU”),该处理器还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
该总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统。
在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
根据本发明实施例的图像处理的设备900可对应于本发明实施例的方法中的解码端设备,并且,图像处理的设备900中的各单元即模块和上述其他操作和/或功能分别为了实现图3中的方法300的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的设备,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给解码端设备,能够使解码端设备根据该第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
图10是根据本发明一实施例的图像处理的设备1000的示意性框图,如图5所示,该设备1000包括:
总线1010;
与所述总线相连的处理器1020;
与所述总线相连的存储器1030;
与所述总线相连的接收机1040;
与所述总线相连的发射机1050;
其中,所述处理器通过所述总线,调用所述存储器中存储的程序,以用于控制该接收机1040接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,该第一几何形状是该服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从该几何形状集合中确定的,该第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于该相似度门限;
用于根据该第一指示信息,确定该第一几何形状;
用于根据该第一几何形状、第二图像和该相似度门限,从该第一几何形状中确定至少一个目标第一几何形状,并从该第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于该相似度门限;
用于生成用于指示该目标第一几何形状的第二指示信息;
用于控制该发射机150向该解码端设备发送该第二指示信息。
可选地,在该服务器和该设备1000存储有映射关系信息,该映射关系信息用于指示该多个几何形状与多个索引值的一一对应关系,以及
该第一指示信息具体为该第一几何形状所对应的索引值。
可选地,该映射关系信息是该服务器发送给该设备1000的。
可选地,该处理器还用于控制该接收机接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,该第二几何形状是该服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于该相似度门限,该第三图像单元是该服务器根据该第一图像、该几何形状集合和该相似度门限确定的,其中,一个第三图像单元与该几何形状集合中的各几何形状之间的相似度均小于该相似度门限;
用于根据该第三指示信息,确定该第二几何形状;
用于根据该第二几何形状、第四图像和该相似度门限,从该第二几何形状几何中确定至少一个目标第二几何形状,并从该第四图像中确定至少一个第四图像单元,生成用于指示该目标第二几何形状的第四指示信息,向该解码端设备发送该第四指示信息,其中,一个第四图像单元对应一个目标第四几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于该相似度门限;
用于生成用于指示该目标第二几何形状的第四指示信息;
用于控制该发射机向该解码端设备发送该第四指示信息。
可选地,该第二图像与该第一图像属于同一视频。
本发明实施例可应用于各种通信设备。
设备1000的发射机可以包括发射电路、功率控制器、编码器及天线,并且,设备1000的接收机可以包括接收电路、功率控制器、解码器及天线。
处理器还可以称为CPU。存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失行随机存取存储器(NVRAM)。具体的应用中,设备1000可以嵌入或者本身可以就是例如终端设备等通信设备,还可以包括容纳发射电路和接收电路的载体,以允许设备1000和远程位置之间进行数据发射和接收。发射电路和接收电路可以耦合到天线。设备1000的各个组件通过总线耦合在一起,其中,总线除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚明起见,在图中将各种总线都标为总线。具体的不同产品中解码器可能与处理单元集成为一体。
处理器可以实现或者执行本发明方法实施例中的公开的各步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器,解码器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用解码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。
应理解,在本发明实施例中,该处理器可以是中央处理单元(Central ProcessingUnit,简称为“CPU”),该处理器还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
该总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统。
在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
根据本发明实施例的图像处理的设备1000可对应于本发明实施例的方法中的编码端设备,并且,图像处理的设备1000中的各单元即模块和上述其他操作和/或功能分别为了实现图4中的方法400的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的图像处理的设备,通过使服务器将从编码端设备获取的第一图像分解为多个图像单元,并将与第一图像单元的相似度大于或等于预设的相似度门限的第一几何形状的指示信息发送给编码端设备,能够使编码端设备根据该第一几何形状,将第二图像分解为多个图像单元,并将于第二图像单元的相似度大于或等于预设的相似度门限的目标第一几何形状的指示信息发送给解码端设备,能够使解码端设备基于目标第一几何形状,实现对第一图像的重构,无需在编码端设备进行复杂的图像压缩等处理,能够降低编码端设备的处理复杂度降低编码端设备的处理性能要求。
应理解,在本发明的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
本领普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种图像处理的方法,其特征在于,所述方法包括:
服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从所述几何形状集合中确定至少一个第一几何形状,并从所述第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于所述相似度门限;
生成用于指示所述第一几何形状的第一指示信息;
向解码端设备发送所述第一指示信息;
所述方法还包括:
向编码端设备发送所述第一指示信息,以便于所述编码端设备根据所述第一几何形状、第二图像和所述相似度门限,从所述第一几何形状中确定至少一个目标第一几何形状,并从所述第二图像中确定至少一个第二图像单元,生成用于指示所述目标第一几何形状的第二指示信息,向所述解码端设备发送所述第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于所述相似度门限。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
服务器根据所述第一图像、所述几何形状集合和所述相似度门限,从所述第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与所述几何形状集合中的各几何形状之间的相似度均小于所述相似度门限;
根据所述第三图像单元,生成至少一个第二几何形状,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于所述相似度门限;
生成用于指示所述第二几何形状的第三指示信息;
向所述解码端设备发送所述第三指示信息。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
向所述编码端设备发送所述第三指示信息,以便于所述编码端设备根据所述第二几何形状、第四图像和所述相似度门限,从所述第二几何形状中确定至少一个目标第二几何形状,并从所述第四图像中确定至少一个第四图像单元,生成用于指示所述目标第二几何形状的第四指示信息,向所述解码端设备发送所述第四指示信息,其中,一个第四图像单元对应一个目标第二几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于所述相似度门限。
4.一种图像处理的方法,其特征在于,所述方法包括:
编码端设备接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,所述第一几何形状是所述服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从所述几何形状集合中确定的,所述第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于所述相似度门限;
根据所述第一指示信息,确定所述第一几何形状;
根据所述第一几何形状、第二图像和所述相似度门限,从所述第一几何形状中确定至少一个目标第一几何形状,并从所述第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于所述相似度门限;
生成用于指示所述目标第一几何形状的第二指示信息;
向解码端设备发送所述第二指示信息。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,所述第二几何形状是所述服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于所述相似度门限,所述第三图像单元是所述服务器根据所述第一图像、所述几何形状集合和所述相似度门限确定的,其中,一个第三图像单元与所述几何形状集合中的各几何形状之间的相似度均小于所述相似度门限;
根据所述第三指示信息,确定所述第二几何形状;
根据所述第二几何形状、第四图像和所述相似度门限,从所述第二几何形状中确定至少一个目标第二几何形状,并从所述第四图像中确定至少一个第四图像单元,生成用于指示所述目标第二几何形状的第四指示信息,向所述解码端设备发送所述第四指示信息,其中,一个第四图像单元对应一个目标第二几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于所述相似度门限;
生成用于指示所述目标第二几何形状的第四指示信息;
向所述解码端设备发送所述第四指示信息。
6.一种图像处理的装置,其特征在于,所述装置包括:
确定单元,用于根据第一图像、预设的几何形状集合和预设的相似度门限,从所述几何形状集合中确定至少一个第一几何形状,并从所述第一图像中确定至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于所述相似度门限;
生成单元,用于生成用于指示所述第一几何形状的第一指示信息;
发送单元,用于向解码端设备发送所述第一指示信息;所述发送单元还用于向编码端设备发送所述第一指示信息,以便于所述编码端设备根据所述第一几何形状、第二图像和所述相似度门限,从所述第一几何形状中确定至少一个目标第一几何形状,并从所述第二图像中确定至少一个第二图像单元,生成用于指示所述目标第一几何形状的第二指示信息,向所述解码端设备发送所述第二指示信息,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于所述相似度门限。
7.根据权利要求6所述的装置,其特征在于,所述确定单元还用于根据所述第一图像、所述几何形状集合和所述相似度门限,从所述第一图像中确定至少一个第三图像单元,其中,一个第三图像单元与所述几何形状集合中的各几何形状之间的相似度均小于所述相似度门限;
所述生成单元还用于根据所述第三图像单元,生成至少一个第二几何形状,并生成用于指示所述第二几何形状的第三指示信息,其中,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于所述相似度门限;
所述发送单元还用于向所述解码端设备发送所述第三指示信息。
8.根据权利要求7所述的装置,其特征在于,所述发送单元还用于向所述编码端设备发送所述第三指示信息,以便于所述编码端设备根据所述第二几何形状、第四图像和所述相似度门限,从所述第二几何形状中确定至少一个目标第二几何形状,并从所述第四图像中确定至少一个第四图像单元,生成用于指示所述目标第二几何形状的第四指示信息,向所述解码端设备发送所述第四指示信息,其中,一个第四图像单元对应一个目标第二几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于所述相似度门限。
9.一种图像处理的装置,其特征在于,所述装置包括:
接收单元,用于接收服务器发送的用于指示至少一个第一几何形状的第一指示信息,所述第一几何形状是所述服务器根据第一图像、预设的几何形状集合和预设的相似度门限,从所述几何形状集合中确定的,所述第一图像包括至少一个第一图像单元,其中,一个第一图像单元对应一个第一几何形状,一个第一图像单元与所对应的第一几何形状之间的相似度大于或等于所述相似度门限;
确定单元,用于根据所述第一指示信息,确定所述第一几何形状;
处理单元,用于根据所述第一几何形状、第二图像和所述相似度门限,从所述第一几何形状中确定至少一个目标第一几何形状,并从所述第二图像中确定至少一个第二图像单元,其中,一个第二图像单元对应一个目标第一几何形状,一个第二图像单元与所对应的目标第一几何形状之间的相似度大于或等于所述相似度门限;
生成单元,用于生成用于指示所述目标第一几何形状的第二指示信息;
发送单元,用于向解码端设备发送所述第二指示信息。
10.根据权利要求9所述的装置,其特征在于,所述接收单元还用于接收服务器发送的用于指示至少一个第二几何形状的第三指示信息,所述第二几何形状是所述服务器根据至少一个第三图像单元生成的,一个第三图像单元对应一个第二几何形状,一个第三图像单元与所对应的第二几何形状之间的相似度大于或等于所述相似度门限,所述第三图像单元是所述服务器根据所述第一图像、所述几何形状集合和所述相似度门限确定的,其中,一个第三图像单元与所述几何形状集合中的各几何形状之间的相似度均小于所述相似度门限;
所述确定单元还用于根据所述第三指示信息,确定所述第二几何形状;
所述处理单元还用于根据所述第二几何形状、第四图像和所述相似度门限,从所述第二几何形状中确定至少一个目标第二几何形状,并从所述第四图像中确定至少一个第四图像单元,生成用于指示所述目标第二几何形状的第四指示信息,向所述解码端设备发送所述第四指示信息,其中,一个第四图像单元对应一个目标第二几何形状,一个第四图像单元与所对应的目标第二几何形状之间的相似度大于或等于所述相似度门限;
所述生成单元还用于生成用于指示所述目标第二几何形状的第四指示信息;
所述发送单元还用于向所述解码端设备发送所述第四指示信息。
CN201580078348.5A 2015-07-27 2015-07-27 图像处理的方法和装置 Active CN107431809B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2015/085142 WO2017015810A1 (zh) 2015-07-27 2015-07-27 图像处理的方法和装置

Publications (2)

Publication Number Publication Date
CN107431809A CN107431809A (zh) 2017-12-01
CN107431809B true CN107431809B (zh) 2020-02-14

Family

ID=57884038

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580078348.5A Active CN107431809B (zh) 2015-07-27 2015-07-27 图像处理的方法和装置

Country Status (3)

Country Link
US (1) US10484683B2 (zh)
CN (1) CN107431809B (zh)
WO (1) WO2017015810A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018208698A1 (en) * 2017-05-06 2018-11-15 Owlii Inc. Processing 3d video content
KR102230776B1 (ko) 2018-02-28 2021-03-22 돌비 레버러토리즈 라이쎈싱 코오포레이션 이미지/비디오 처리를 위한 선형 인코더
US11212520B2 (en) * 2018-12-04 2021-12-28 Ati Technologies Ulc Region-based reference frame management
US11501470B2 (en) * 2020-05-27 2022-11-15 Microsoft Technology Licensing, Llc Geometric encoding of data

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306393A (zh) * 2011-08-02 2012-01-04 清华大学 一种基于轮廓匹配的深度扩散方法及装置
CN103873863A (zh) * 2012-12-11 2014-06-18 古如罗技微系统公司 编码器、解码器以及编码方法、解码方法
CN104244007A (zh) * 2013-06-13 2014-12-24 上海天荷电子信息有限公司 基于任意形状匹配的图像压缩方法和装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7171048B2 (en) * 2002-04-10 2007-01-30 National Instruments Corporation Pattern matching system utilizing discrete curve matching with a mapping operator
US7639890B2 (en) * 2005-10-25 2009-12-29 General Electric Company Automatic significant image generation based on image characteristics
AU2006252025B2 (en) * 2006-12-13 2012-10-04 Canon Kabushiki Kaisha Recognition of parameterised shapes from document images
US20130294707A1 (en) * 2010-07-08 2013-11-07 Yeda Research And Development Ltd Geometric modelization of images and applications
US20120063678A1 (en) * 2010-09-14 2012-03-15 Rovi Technologies Corporation Geometric image compression
US10255315B2 (en) 2012-12-11 2019-04-09 Gurulogic Microsystems Oy Encoder, decoder and method
CN103873868A (zh) * 2012-12-13 2014-06-18 比亚迪股份有限公司 一种位图数据的压缩方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306393A (zh) * 2011-08-02 2012-01-04 清华大学 一种基于轮廓匹配的深度扩散方法及装置
CN103873863A (zh) * 2012-12-11 2014-06-18 古如罗技微系统公司 编码器、解码器以及编码方法、解码方法
CN104244007A (zh) * 2013-06-13 2014-12-24 上海天荷电子信息有限公司 基于任意形状匹配的图像压缩方法和装置

Also Published As

Publication number Publication date
US10484683B2 (en) 2019-11-19
WO2017015810A1 (zh) 2017-02-02
US20180109792A1 (en) 2018-04-19
CN107431809A (zh) 2017-12-01

Similar Documents

Publication Publication Date Title
US20200260117A1 (en) Methods and Apparatuses for Coding and Decoding Depth Map
US20230056351A1 (en) Coded-block-flag coding and derivation
US9351001B2 (en) Encoding or decoding method and apparatus
CN107431809B (zh) 图像处理的方法和装置
CA2831967C (en) Image compression using sub-resolution images
US20220130074A1 (en) Method, device, and storage medium for data encoding/decoding
CN106716997A (zh) 使用环路内滤波器参数预测的视频编码方法和设备以及相应视频解码方法和设备
CN110971898B (zh) 点云编解码方法和编解码器
CN109151477B (zh) 一种图像数据的编码、解码方法及装置
US20230232004A1 (en) Point cloud encoding and decoding method and system, and point cloud encoder and point cloud decoder
CN111131828B (zh) 一种图像压缩方法、装置、电子设备和存储介质
CN111435551A (zh) 点云滤波方法、装置及存储介质
EP4270955A1 (en) Point cloud encoding and decoding methods and systems, point cloud encoder, and point cloud decoder
US20230232002A1 (en) Point cloud coding method, point cloud decoding method, and relevant apparatuses
CN107103632B (zh) 图像压缩方法及装置
CN112601029B (zh) 一种已知背景先验信息的视频分割方法、终端和存储介质
CN111405293B (zh) 一种视频传输方法及装置
WO2022136065A1 (en) Compression of temporal data by using geometry-based point cloud compression
WO2024008019A1 (en) Method, apparatus, and medium for point cloud coding
WO2023131126A1 (en) Method, apparatus, and medium for point cloud coding
WO2024051645A1 (zh) 一种解码方法、编码方法及相关设备
EP4354864A1 (en) Entropy encoding/decoding methods and apparatuses
US20230306687A1 (en) Mesh zippering
EP3568983B1 (en) Encoder and decoder and methods thereof
CN115474046A (zh) 点云属性信息编码方法、解码方法、装置及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant