CN118042291A - 图像终端管理方法及装置 - Google Patents
图像终端管理方法及装置 Download PDFInfo
- Publication number
- CN118042291A CN118042291A CN202410445558.4A CN202410445558A CN118042291A CN 118042291 A CN118042291 A CN 118042291A CN 202410445558 A CN202410445558 A CN 202410445558A CN 118042291 A CN118042291 A CN 118042291A
- Authority
- CN
- China
- Prior art keywords
- image
- attribute
- processing unit
- output channel
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007726 management method Methods 0.000 title claims description 44
- 238000000034 method Methods 0.000 claims abstract description 22
- 238000013507 mapping Methods 0.000 claims abstract description 16
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
本申请提供一种图像终端管理方法及装置,图像终端管理装置包括:第一管理器,用于基于多个图像终端对应的图像属性获取图像序列;第二管理器,用于遍历图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到目标输出通道,且目标输出通道支持的通道属性与该图像属性匹配;图像处理单元,用于针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为输出图像;第一管理器,用于基于输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。通过本申请方案,支持多个图像终端的图像输出。
Description
技术领域
本申请涉及图像处理技术领域,尤其涉及一种图像终端管理方法及装置。
背景技术
在摄像机系统中,需要将图像输入给多个图像终端。比如说,将图像输入给图像终端1,图像终端1对图像进行编码(如采用H.264/H.265等方式编码),基于编码后图像进行网络传输和预览等操作。将图像输入给图像终端2,图像终端2将图像压缩为JPEG图像,基于JPEG图像进行图片存储或上传数据中心。将图像输入给图像终端3,图像终端3采用人工智能算法对图像进行智能分析。将图像输入给图像终端4,图像终端4将图像输出到屏幕进行显示。
由于不同图像终端所需的图像分辨率、图像格式各不相同,因此,在将图像输入给多个图像终端时,图像无法同时满足多个图像终端的需求,导致图像终端无法基于图像进行处理。比如说,在将图像输入给图像终端1、图像终端2、图像终端3、图像终端4时,图像满足图像终端1的图像分辨率和图像格式,图像终端1能够基于图像进行处理。然而,若图像不满足图像终端2的图像分辨率需求,则图像终端2无法基于图像进行处理。若图像不满足图像终端3的图像格式需求,则图像终端3无法基于图像进行处理。若图像不满足图像终端4的图像分辨率需求和图像格式需求,则图像终端4无法基于图像进行处理。
发明内容
本申请提供一种图像终端管理装置,所述图像终端管理装置包括:第一管理器、第二管理器和K个图像处理单元,K为正整数;
所述第一管理器,用于获取多个图像终端分别对应的图像属性,基于所述多个图像终端对应的图像属性获取图像序列;其中,所述图像序列包括不重复的多个图像属性,且所述多个图像属性按照顺序排列;
所述第二管理器,用于遍历所述图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到所述目标输出通道,且所述目标输出通道支持的通道属性与该图像属性匹配;
所述图像处理单元,用于在得到输入图像后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将所述输入图像转换为输出图像;
所述第一管理器,用于在得到输出图像后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
本申请提供一种图像终端管理方法,应用于图像终端管理装置,所述图像终端管理装置包括:第一管理器、第二管理器和K个图像处理单元,包括:
所述第一管理器获取多个图像终端分别对应的图像属性,基于所述多个图像终端对应的图像属性获取图像序列;其中,所述图像序列包括不重复的多个图像属性,且所述多个图像属性按照顺序排列;
所述第二管理器遍历所述图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到所述目标输出通道,且所述目标输出通道支持的通道属性与该图像属性匹配;
所述图像处理单元在得到输入图像后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将所述输入图像转换为输出图像;
所述第一管理器在得到输出图像后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
由以上技术方案可见,本申请实施例中,可以将多个图像终端对应图像处理单元的多个输出通道,针对图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为该图像属性对应的输出图像,使得输出图像与图像终端匹配,能够支持多个图像终端的图像输出,实现高效、通用的图像终端管理方案。针对多个图像终端,将采集的图像进行一进多出的图像缩放和管理,输出对应图像给图像终端,实现图像编码、智能分析、屏幕输出等功能。
比如说,在将图像输入给图像终端1、图像终端2、图像终端3、图像终端4时,将图像转换为与图像终端1匹配的输出图像1,输出图像1满足图像终端1的图像分辨率和图像格式,图像终端1能够基于输出图像1进行处理。将图像转换为与图像终端2匹配的输出图像2,输出图像2满足图像终端2的图像分辨率和图像格式,图像终端2能够基于输出图像2进行处理。将图像转换为与图像终端3匹配的输出图像3,输出图像3满足图像终端3的图像分辨率和图像格式,图像终端3能够基于输出图像3进行处理。将图像转换为与图像终端4匹配的输出图像4,输出图像4满足图像终端4的图像分辨率和图像格式,图像终端4能够基于输出图像4进行处理。
附图说明
为了更加清楚地说明本申请实施例或者现有技术中的技术方案,下面将对本申请实施例或者现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据本申请实施例的这些附图获得其他的附图。
图1是本申请一种实施方式中的图像终端管理装置的结构示意图;
图2是本申请一种实施方式中的图像终端管理装置的结构示意图;
图3是本申请一种实施方式中的管理器1的处理流程示意图;
图4是本申请一种实施方式中的图像处理单元的结构示意图;
图5是本申请一种实施方式中的管理器2的处理流程示意图;
图6是本申请一种实施方式中的图像终端管理方法的流程示意图。
具体实施方式
在本申请实施例使用的术语仅仅是出于描述特定实施例的目的,而非限制本申请。本申请和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其它含义。还应当理解,本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,此外,所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请实施例中提出一种图像终端管理装置,参见图1所示,为该图像终端管理装置的结构示意图,该图像终端管理装置可以包括:第一管理器11、第二管理器12和K个图像处理单元13,K可以为正整数。
第一管理器11,用于获取多个图像终端分别对应的图像属性,基于多个图像终端对应的图像属性获取图像序列;其中,该图像序列可以包括不重复的多个图像属性,且该图像序列内的多个图像属性按照顺序排列。
第二管理器12,用于遍历该图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到目标输出通道,且目标输出通道支持的通道属性与该图像属性匹配。
图像处理单元13,用于在得到输入图像之后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为输出图像。
第一管理器11,用于在得到输出图像之后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
示例性的,图像属性可以包括图像宽度值、图像高度值、图像格式值和图像独占性,其中:图像序列内的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
或者,图像序列内的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
示例性的,第一管理器基于多个图像终端对应的图像属性获取图像序列时具体用于:依次获取每个图像终端对应的图像属性,针对当前获取的第一图像属性(即将当前遍历到的图像属性记为第一图像属性):
若第一图像属性的图像宽度值大于图像序列内的第二图像属性的图像宽度值,则在图像序列中第二图像属性的前面添加第一图像属性。比如说,比较第一图像属性的图像宽度值是否大于图像序列内的第一个图像属性的图像宽度值,若是,则将图像序列内的第一个图像属性作为第二图像属性,若否,则比较第一图像属性的图像宽度值是否大于图像序列内的第二个图像属性的图像宽度值,若是,则将图像序列内的第二个图像属性作为第二图像属性,以此类推,一直到找到第二图像属性,在图像序列中第二图像属性的前面添加第一图像属性,或,第一图像属性的图像宽度值小于图像序列内的所有图像属性的图像宽度值。
若第一图像属性的图像宽度值小于图像序列内的所有图像属性的图像宽度值,则在图像序列的最后面(即最后一个图像属性后面)添加第一图像属性。
若第一图像属性的图像宽度值等于图像序列内的第三图像属性的图像宽度值,则:若第一图像属性的图像高度值大于第三图像属性的图像高度值,则在图像序列中第三图像属性的前面添加第一图像属性(当存在多个第三图像属性时,先比较第一图像属性的图像高度值与第一个第三图像属性的图像高度值,若大于,则在第一个第三图像属性的前面添加第一图像属性,若小于,则继续比较第一图像属性的图像高度值与第二个第三图像属性的图像高度值,以此类推)。若第一图像属性的图像高度值小于第三图像属性(即所有第三图像属性)的图像高度值,则在图像序列中第三图像属性的后面添加第一图像属性。
若第一图像属性的图像高度值等于第三图像属性的图像高度值,则:若第一图像属性的图像格式值大于第三图像属性的图像格式值,则在图像序列中第三图像属性的前面添加第一图像属性(当存在多个具有相同图像高度值的第三图像属性时,先比较第一图像属性的图像格式值与第一个第三图像属性的图像格式值,若大于,则在第一个第三图像属性的前面添加第一图像属性,若小于,则继续比较第一图像属性的图像格式值与第二个第三图像属性的图像格式值,以此类推)。若第一图像属性的图像格式值小于第三图像属性(所有第三图像属性)的图像格式值,则在图像序列中第三图像属性的后面添加第一图像属性。
若第一图像属性的图像格式值等于第三图像属性的图像格式值,则:若第一图像属性的图像独占性为独占、且第三图像属性的图像独占性为非独占,则在图像序列中第三图像属性的前面添加第一图像属性。若第一图像属性的图像独占性为非独占、且第三图像属性的图像独占性为独占,则在图像序列中第三图像属性的后面添加第一图像属性。若第一图像属性的图像独占性与第三图像属性的图像独占性相同,则禁止在图像序列中添加第一图像属性。
综上可以看出,针对当前获取的图像属性(即第一图像属性),依次与图像序列的图像属性进行比较,具体过程为:先和图像序列的第一个图像属性比较宽度。如果大于,则将当前获取的图像属性放在图像序列的最前面,图像序列中的其它图像属性均后移一个。如果小于图像序列的第一个图像属性,则再与图像序列的第二个图像属性进行宽度比较,如果大于图像序列的第二个图像属性,则将当前获取的图像属性放在图像序列的第二个位置,将图像序列中的第二个及以后的图像属性依次后移一个。如果小于图像序列的第二个图像属性,则继续和图像序列中的第三个图像属性比较宽度,如此比较下去,如果当前获取的图像属性比图像序列的最后一个图像属性的宽度小,则放在图像序列末尾。
如果当前获取的图像属性在比较过程中,出现和图像序列中图像属性宽度相同的情况,则继续和图像序列中宽度相同的图像属性集合依次比较高度,逻辑与宽度处理一致,如果高度也相等,继续进行格式和独占比较,以此类推。
示例性的,第一管理器基于多个图像终端对应的图像属性获取图像序列时具体用于:依次获取每个图像终端对应的图像属性,针对当前获取的第一图像属性(即将当前遍历到的图像属性记为第一图像属性):若第一图像属性的图像高度值大于图像序列内的第二图像属性的图像高度值,则在图像序列中第二图像属性的前面添加第一图像属性。若第一图像属性的图像高度值小于图像序列内的所有图像属性的图像高度值,则在图像序列的最后面添加第一图像属性。若第一图像属性的图像高度值等于图像序列内的第三图像属性的图像高度值,则:若第一图像属性的图像宽度值大于第三图像属性的图像宽度值,则在图像序列中第三图像属性的前面添加第一图像属性。若第一图像属性的图像宽度值小于第三图像属性的图像宽度值,则在图像序列中第三图像属性的后面添加第一图像属性。若第一图像属性的图像宽度值等于第三图像属性的图像宽度值,则:若第一图像属性的图像格式值大于第三图像属性的图像格式值,则在图像序列中第三图像属性的前面添加第一图像属性。若第一图像属性的图像格式值小于第三图像属性的图像格式值,则在图像序列中第三图像属性的后面添加第一图像属性。若第一图像属性的图像格式值等于第三图像属性的图像格式值,则:若第一图像属性的图像独占性为独占、且第三图像属性的图像独占性为非独占,则在图像序列中第三图像属性的前面添加第一图像属性。若第一图像属性的图像独占性为非独占、且第三图像属性的图像独占性为独占,则在图像序列中第三图像属性的后面添加第一图像属性。若第一图像属性的图像独占性与第三图像属性的图像独占性相同,则禁止在图像序列中添加第一图像属性。
示例性的,第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道时具体用于:若图像处理单元的空闲输出通道支持的通道属性与当前遍历的图像属性匹配,则将空闲输出通道选取为该图像属性的目标输出通道。
比如说,空闲输出通道支持的通道属性可以包括但不限于:图像处理单元支持的宽度输入分辨率和高度输入分辨率、空闲输出通道支持的宽度缩放倍率区间和高度缩放倍率区间、空闲输出通道支持的图像格式集合;
比如说,若该图像属性的图像宽度值与宽度输入分辨率的比值位于宽度缩放倍率区间,且该图像属性的图像高度值与高度输入分辨率的比值位于高度缩放倍率区间,且该图像属性的图像格式值位于图像格式集合,则图像处理单元的空闲输出通道支持的通道属性与当前遍历的该图像属性匹配。
示例性的,第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道时具体用于:基于按照顺序排列的K个图像处理单元,遍历第一个图像处理单元作为当前图像处理单元,当前图像处理单元包括多个输出通道。判断当前图像处理单元的多个输出通道是否存在空闲输出通道。若否,则遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道的操作。
若是,则判断空闲输出通道支持的通道属性与该图像属性是否匹配;若匹配,则可以将空闲输出通道选取为该图像属性的目标输出通道;若不匹配,则可以将模拟图像属性映射到空闲输出通道,并遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道的操作。需要注意的是,针对与模拟图像属性对应的输出通道,图像处理单元也可以为该输出通道生成输出图像,只是这个输出图像不会发送给图像终端。在该输出通道的输出图像作为后一个图像处理单元的输入图像时,该输出通道的输出图像提供给下一个图像处理单元使用。
示例性的,若该图像属性的图像宽度值与宽度输入分辨率的比值大于宽度缩放倍率区间的上限值,则模拟图像属性的图像宽度值基于该上限值确定。
若该图像属性的图像宽度值与宽度输入分辨率的比值小于宽度缩放倍率区间的下限值,则模拟图像属性的图像宽度值基于该下限值确定。
若该图像属性的图像高度值与高度输入分辨率的比值大于高度缩放倍率区间的上限值,则模拟图像属性的图像高度值基于该上限值确定。
若该图像属性的图像高度值与高度输入分辨率的比值小于高度缩放倍率区间的下限值,则模拟图像属性的图像高度值基于该下限值确定。
示例性的,模拟图像属性的格式还可以满足:属于下一个图像处理单元的输入图像格式集合,且属于要将其映射到的空闲输出通道的格式集合。比如说,模拟图像属性的格式需要图像处理单元的输入通道支持,且模拟图像属性的格式需要其映射的输出通道(即将模拟图像属性映射到该输出通道)支持。
示例性的,图像终端管理装置还可以包括K-1个选择器,相邻两个图像处理单元之间通过一个选择器连接。其中:选择器,用于从前一个图像处理单元的所有输出通道中选取参考输出通道,将参考输出通道的输出图像作为后一个图像处理单元的输入图像。其中,该输入图像的宽度值作为后一个图像处理单元支持的宽度输入分辨率,该输入图像的高度值作为后一个图像处理单元支持的高度输入分辨率。其中,参考输出通道是候选输出通道集合中占用内存资源最小的输出通道;针对候选输出通道集合中的每个输出通道,该输出通道是非独占通道,且该输出通道的图像格式属于后一个图像处理单元支持的图像格式。
由以上技术方案可见,本申请实施例中,可以将多个图像终端对应图像处理单元的多个输出通道,针对图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为该图像属性对应的输出图像,使得输出图像与图像终端匹配,能够支持多个图像终端的图像输出,实现高效、通用的图像终端管理方案。针对多个图像终端,将采集的图像进行一进多出的图像缩放和管理,输出对应图像给图像终端,实现图像编码、智能分析、屏幕输出等功能。
以下结合具体应用场景,对本申请实施例的图像终端管理装置进行说明。
在摄像机系统中,需要将图像输入给多个图像终端。由于不同图像终端所需的图像分辨率、图像格式各不相同,因此,输入图像无法同时满足多个图像终端的需求,图像终端无法基于输入图像进行处理。
针对上述发现,本申请实施例中提出一种图像终端管理装置,能够支持多个图像终端的图像输出,实现高效、通用的图像终端管理方案。针对多个图像终端请求的信息,将采集的图像进行一进多出的图像缩放和管理,输出对应图像给图像终端,实现图像编码、智能分析、屏幕输出等多种功能。
参见图2所示,为图像终端管理装置的结构示意图,图像终端管理装置可以包括多个图像终端(图像终端也可以称为图像用户,图2中以n个图像终端为例)、第一管理器(即管理器1)、图像序列、第二管理器(即管理器2)、多个图像处理单元(以K个图像处理单元为例)和(K-1)个选择器。
第一、图像终端。
图像终端是图像的消费者,用于从图像处理单元请求图像,是需要对图像进行处理的用户,包括但不限于编码、智能处理、输出显示等处理。图像终端可以包括编码器、输出、各类人工智能算法等。比如说,图像终端1用于对图像进行编码(如采用H.264/H.265等方式编码),基于编码后图像进行网络传输和预览等操作。图像终端2用于将图像压缩为JPEG图像,基于JPEG图像进行图片存储或上传数据中心。图像终端3用于采用人工智能算法对图像进行智能分析。图像终端4用于将图像输出到屏幕进行显示。
针对每个图像终端,图像终端可以将本图像终端对应的图像属性发送给管理器1,以请求该图像属性对应的图像。其中,本图像终端对应的图像属性可以包括但不限于以下至少一种:图像宽度值(记为宽度W)、图像高度值(记为高度H)、图像格式值(记为格式F)和图像独占性(记为是否独占M)。
示例性的,不同图像终端对应的图像属性可能相同,也可能不同,比如说,图像终端1对应的图像属性与图像终端2对应的图像属性不同,图像终端1对应的图像属性与图像终端3对应的图像属性相同,对此不做限制。
示例性的,分辨率是指图像的宽高,单位为像素,如1080p表示宽度为1920像素、高度为1080像素,分辨率就对应图像宽度值和图像高度值。像素格式是指图像的存储格式,如YUV420、YUV422、RGB888、RGB565等像素格式,不同像素格式可以对应不同的图像格式值。图像独占性表示图像只能被一个图像终端使用,因此,若图像独占性表示独占,则只能被一个图像终端使用,若图像独占性表示不独占,则能够被多个图像终端使用。
第二、管理器1(即第一管理器)。
管理器1、管理器2和选择器(即(K-1)个选择器)是图像终端管理装置的控制机构,用于将图像终端和图像处理单元进行关联,实现自动映射。
针对n个图像终端中的每个图像终端,该图像终端可以向管理器1发送图像请求,该图像请求可以包括该图像终端对应的图像属性,该图像属性可以包括图像宽度值、图像高度值、图像格式值和图像独占性。
管理器1可以获取多个图像终端(n个图像终端)分别对应的图像属性,基于多个图像终端对应的图像属性获取图像序列(也称为图像属性序列),该图像序列可以包括不重复的多个图像属性,且该图像序列内的多个图像属性按照顺序排列。比如说,图像序列内的图像属性的数量可以小于或者等于n,若所有图像终端对应的图像属性各不相同,则图像序列内的图像属性的数量为n,若部分图像终端对应的图像属性相同,则图像序列内的图像属性的数量小于n。
比如说,在得到图像终端1的图像属性之后,将该图像属性存储到图像序列内。在得到图像终端2的图像属性之后,若该图像属性与图像序列内每个图像属性均不相同,则在图像序列内新增一个图像属性(即图像终端2的图像属性),若该图像属性与图像序列内任一图像属性A相同,则将该图像属性与图像属性A合并(即二者相同),不在图像序列内新增一个图像属性,以此类推。
示例性的,图像序列内的多个图像属性按照顺序排列时,排列顺序包括:
第一种排列顺序:图像序列内的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
第二种排列顺序:图像序列内的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
第三种排列顺序:图像序列内的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像独占和图像非独占的顺序排序。
第四种排列顺序:图像序列内的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像独占和图像非独占的顺序排序。
当然,上述只是几个示例,对此不做限制,图像宽度值、图像高度值、图像格式值和图像独占性等参数的优先级可以任意设置,基于这些参数的优先级可以设置排列顺序,为了方便描述,后续以第一种排列顺序为例进行说明。
在一种可能的实施方式中,参见图3所示,管理器1基于多个图像终端对应的图像属性获取图像序列时,管理器1可以采用如下步骤实现:
步骤301、判断当前图像终端的宽度(即图像宽度值)是否大于已有图像终端(即图像序列内已存储该图像终端的图像属性)的宽度。
若是,则可以执行步骤302,若否,则可以执行步骤303。
步骤302、当前图像终端与已有图像终端交换位置,并新增图像终端,宽度较大的排在前面。比如说,在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的前面。
步骤303、判断当前图像终端的宽度是否等于已有图像终端的宽度。若是,则执行步骤304,若否,则新增图像终端,如在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的后面。
步骤304、判断当前图像终端的高度是否大于已有图像终端的高度。
若是,则可以执行步骤305,若否,则可以执行步骤306。
步骤305、当前图像终端与已有图像终端交换位置,并新增图像终端,高度较大的排在前面。比如说,在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的前面。
步骤306、判断当前图像终端的高度是否等于已有图像终端的高度。若是,则执行步骤307,若否,则新增图像终端,如在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的后面。
步骤307、判断当前图像终端的像素格式(即图像格式值)是否大于已有图像终端的像素格式。若是,则可以执行步骤308,若否,则可以执行步骤309。
步骤308、当前图像终端与已有图像终端交换位置,并新增图像终端,图像格式值较大的排在前面。比如说,在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的前面。
步骤309、判断当前图像终端的像素格式是否等于已有图像终端的像素格式。若是,执行步骤310,若否,新增图像终端,如在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在已有图像终端的图像属性的后面。
步骤310、判断当前图像终端是否要求独占,即当前图像终端的图像独占性表示独占。若是,则执行步骤311,若否,则执行步骤312。
步骤311、新增一个图像终端,独占的排在非独占的前面。比如说,在图像序列内新增当前图像终端的图像属性,且当前图像终端的图像属性排在非独占的已有图像终端的图像属性(即该已有图像终端为非独占)的前面。
步骤312、复用之前的图像终端,即,当前图像终端与已有图像终端的图像属性相同(宽度相同、高度相同、像素格式相同、独占性相同),因此,不需要在图像序列内新增当前图像终端的图像属性,而是复用已存储的图像属性。
步骤313、判断所有图像终端是否全部排完。若是,则结束流程,得到图像序列,图像序列包括多个图像属性。若否,遍历下一个图像终端,返回步骤301。
示例性的,针对图3所示的流程,还可以表示为如下过程:
(1)、先按照宽度进行排序。比较当前图像终端的宽度是否大于之前排好的,如果大于,则交换位置,将宽度比较大的图像终端排在前面;如果小于,则直接在图像序列的后面新增一个图像终端;如果等于,则执行第(2)步。
(2)、宽度相等的情况下,基于宽度相等的所有图像终端,再按照高度进行排序。比较当前图像终端的高度是否大于之前排好的(需要宽度相等),如果大于,则交换位置,将高度比较大的图像终端排在前面;如果小于,则直接在图像序列的后面新增一个图像终端;如果等于,则执行第(3)步。
(3)、宽度相等且高度相等的情况下,基于宽度相等且高度相等的所有图像终端,再按照图像格式进行排序。比较当前图像终端的图像格式值是否大于之前排好的(需要宽度相等且高度相等的图像终端的图像格式值),如果大于,则交换位置,将图像格式值较大的图像终端排在前面;如果小于,则直接在图像序列的后面新增一个图像终端;如果等于,则执行第(4)步。
(4)、宽度相等、高度相等且图像格式值相等的情况下,基于宽度相等、高度相等且图像格式值相等的所有图像终端,再按照是否独占进行排序。比如说,如果当前图像终端需要独占,则将其排在非独占的图像终端(需要宽度相等、高度相等、且图像格式值相等、且图像终端非独占)前面。
(5)、宽度相等、高度相等、图像格式值相等、且不独占的情况下,则当前图像终端复用与其相同的图像终端,即复用图像属性完全相同的图像终端。
(6)、重复第(1)-(5)步,直至所有图像终端全部排完。
示例性的,经过管理器1的运算处理后,图像序列具备如下特性:
表示第i个图像终端的图像宽度值,m表示图像序列内存在m个图像终端的图像属性。/>表示第i个图像终端的图像高度值。/>表示第i个图像终端的图像格式值。/>表示第i个图像终端的图像独占性,/>为0时表示独占,/>为1时表示非独占,或者,/>为1时表示独占,/>为0时表示非独占。
比如说,对于图像终端请求的图像集合 ,管理器1依次接收上述图像集合中的图像请求的处理过程可以为:
;
;
;
;
;
;
;
综上所述,管理器1可以生成图像序列,该图像序列可以包括不重复的多个图像属性,且该图像序列内的多个图像属性按照顺序排列。
第三、管理器2(即第二管理器)。
基于图像处理单元的特性(数量K、输出通道数S、缩放倍率R、格式支持F),管理器2可以将n个图像属性(宽度W、高度H、格式F、是否独占M)映射关联到K个图像处理单元的输出通道(宽度W、高度H、格式F)上,最小性能消耗地实现多级一进多出的缩放和格式转换,为图像终端输出所需图像。
示例性的,管理器2依次遍历图像序列内每个图像属性,例如,管理器2从图像序列内的第一个图像属性开始依次遍历每个图像属性。从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到目标输出通道,且目标输出通道支持的通道属性与当前遍历的该图像属性匹配。
若图像处理单元的空闲输出通道(即未被图像属性映射的输出通道)支持的通道属性与当前遍历的图像属性匹配,则将该空闲输出通道选取为该图像属性的目标输出通道,且目标输出通道已经被图像属性映射不再是空闲输出通道。
示例性的,图像处理单元是图像生产者,能够生成图像。图像处理单元可以有一个输入通道和多个输出通道,参见图4所示,为单个图像处理单元的结构示意图,以一进四出(一个输入通道和4个输出通道)的图像处理单元为例,每个输出通道可以进行不同倍率的缩放,且输出通道支持图像格式转换。
在4个输出通道中,输出通道0支持缩放1/16X-16X,表示最小缩放到输入图像的1/16,最大缩放到输入图像的16倍。输出通道1、2、3支持缩放1/16X-1X,表示最小缩放到输入图像的1/16,最大缩放到输入图像的1倍。
示例性的,图像处理单元可以包括多个输出通道,针对图像处理单元的每个输出通道,该输出通道支持的通道属性可以包括但不限于以下至少一种:图像处理单元支持的宽度输入分辨率和高度输入分辨率、该输出通道支持的宽度缩放倍率区间和高度缩放倍率区间、该输出通道支持的图像格式集合。上述只是几个示例,对此通道属性不做限制,比如说,该输出通道支持的通道属性还可以包括图像处理单元的总数量K,图像处理单元的输出通道数量S。
图像处理单元支持的宽度输入分辨率(宽度输入分辨率记为)是指,在将输入图像提供给图像处理单元时,输入图像的宽度需要满足/>。也就是说,若输入图像的宽度满足/>,图像处理单元能够对输入图像进行处理,若输入图像的宽度不满足/>,图像处理单元无法对输入图像进行处理。
图像处理单元支持的高度输入分辨率(高度输入分辨率记为)是指,在将输入图像提供给图像处理单元时,输入图像的高度需要满足/>。也就是说,若输入图像的高度满足/>,图像处理单元能够对输入图像进行处理,若输入图像的高度不满足/>,图像处理单元无法对输入图像进行处理。
输出通道支持的宽度缩放倍率区间包括宽度缩放倍率最小值和宽度缩放倍率最大值/>。宽度缩放倍率最小值/>表示该输出通道的最小宽度与宽度输入分辨率的比值,该输出通道的最小宽度表示该输出通道的输出图像的最小宽度,是针对该输出通道已配置的宽度值。宽度缩放倍率最大值/>表示该输出通道的最大宽度与宽度输入分辨率/>的比值,该输出通道的最大宽度表示该输出通道的输出图像的最大宽度,是针对该输出通道已配置的宽度值。
基于宽度缩放倍率最小值和宽度缩放倍率最大值/>,可以得到输出通道支持的宽度缩放倍率区间,宽度缩放倍率区间表示为[/>,/>]。
针对宽度缩放倍率最小值和宽度缩放倍率最大值/>,可以通过如下公式表示:/>,/>表示第j个输出通道的宽度缩放倍率最小值或宽度缩放倍率最大值,/>表示第j个输出通道的最小宽度或最大宽度。
输出通道支持的高度缩放倍率区间包括高度缩放倍率最小值和高度缩放倍率最大值/>。高度缩放倍率最小值/>表示该输出通道的最小高度与高度输入分辨率的比值,该输出通道的最小高度表示该输出通道的输出图像的最小高度,是针对该输出通道已配置的高度值。高度缩放倍率最大值/>表示该输出通道的最大高度与高度输入分辨率/>的比值,该输出通道的最大高度表示该输出通道的输出图像的最大高度,是针对该输出通道已配置的高度值。
基于高度缩放倍率最小值和高度缩放倍率最大值/>,可以得到输出通道支持的高度缩放倍率区间,高度缩放倍率区间表示为[/>,/>]。
针对高度缩放倍率最小值和高度缩放倍率最大值/>,可以通过如下公式表示:/>,/>表示第j个输出通道的高度缩放倍率最小值或高度缩放倍率最大值,/>表示第j个输出通道的最小高度或最大高度。
输出通道支持的图像格式集合可以包括至少一个图像格式,表示该输出通道的输出图像,可以采用该图像格式集合/>内的图像格式。
示例性的,管理器2从图像序列内遍历到某个图像属性之后,从图像处理单元的所有空闲输出通道中选取目标输出通道,将该图像属性映射到目标输出通道,即该图像属性与该目标输出通道对应。假设输出通道0已经被占用,输出通道1、2、3未被占用,则空闲输出通道为输出通道1、2、3。判断输出通道1支持的通道属性与当前遍历的图像属性是否匹配,若是,则将输出通道1选取为目标输出通道,输出通道1已经被占用,后续不再作为空闲输出通道。若否,则判断输出通道2支持的通道属性与当前遍历的图像属性是否匹配,以此类推。
以空闲输出通道为输出通道1为例,若该图像属性(即当前遍历的图像属性)的图像宽度值与宽度输入分辨率的比值,位于输出通道1支持的宽度缩放倍率区间[/>,],且该图像属性的图像高度值与高度输入分辨率/>的比值,位于输出通道1支持的高度缩放倍率区间[/>,/>],且该图像属性的图像格式值位于输出通道1支持的图像格式集合/>,则表示输出通道1支持的通道属性与当前遍历的图像属性匹配,输出通道1可以作为该图像属性的目标输出通道,将该图像属性与输出通道1进行映射。
此外,若该图像属性的图像宽度值与宽度输入分辨率的比值,不位于输出通道1支持的宽度缩放倍率区间[/>,/>],和/或,该图像属性的图像高度值与高度输入分辨率/>的比值,不位于输出通道1支持的高度缩放倍率区间[/>,/>],和/或,该图像属性的图像格式值不位于输出通道1支持的图像格式集合/>,则表示输出通道1支持的通道属性与当前遍历的图像属性不匹配,输出通道1不可以作为该图像属性的目标输出通道。
示例性的,管理器2用于将图像序列内的图像属性映射到图像处理单元的输出通道上,管理器2的控制逻辑因不同元件的图像处理单元的特性不同而存在差异,在图像属性映射至输出通道的过程中,管理器2的通用策略为:
(1)当图像属性i的与图像处理单元的输入分辨率/>的比值在某个输出通道j的缩放倍率之内(即/>),且图像属性i的图像格式/>该输出通道支持时(即/>),则可以将图像属性i映射在该输出通道上,该输出通道之后不能再被映射。
(2)若图像属性i的与图像处理单元的输入分辨率/>的比值不在所有输出通道的缩放倍率之内,如大于所有输出通道的最大缩放倍率(如/>大于/>,和/或,/>大于/>),或者,小于所有输出通道的最小缩放倍率(如/>小于/>,和/或,小于/>),则在该图像处理单元添加一个和缩放倍率相等的模拟图像属性,然后新增一个图像处理单元进行级联,而后在这个图像处理单元上继续进行图像属性i及后续图像属性的排布映射。
(3)当图像处理单元的所有输出通道都被映射过或满足条件(2)时,新增一个图像处理单元进行级联,在该图像处理单元上进行图像序列的排布映射。
(4)图像序列中的图像属性按照顺序依次进行映射关联(即从图像序列中的第一个图像属性开始,依次遍历每个图像属性),前一图像图像i映射成功后进行下一图像属性i+1的映射,重复上述步骤直至所有图像属性全部映射完毕。
在一种可能的实施方式中,基于上述通用策略,管理器2的处理过程包括:
步骤S1、基于按照顺序排列的K个图像处理单元,遍历第一个图像处理单元作为当前图像处理单元,当前图像处理单元可以包括多个输出通道。
步骤S2、基于图像序列内按照顺序排列的多个图像属性,先遍历第一个图像属性,采用后续步骤为第一个图像属性选取目标输出通道。然后遍历第二个图像属性,采用后续步骤为第二个图像属性选取目标输出通道。以此类推,需要为图像序列内的每个图像属性选取目标输出通道,后续以一个图像属性为例。
步骤S3、判断当前图像处理单元的多个输出通道是否存在空闲输出通道。若否,则遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道的操作。
步骤S3对应上述通用策略(3),即,当图像处理单元的所有输出通道都被映射过(即不存在空闲输出通道),新增一个图像处理单元进行级联。
步骤S4、若是,则判断当前图像处理单元的空闲输出通道支持的通道属性与当前遍历的图像属性是否匹配。比如说,若该图像属性的图像宽度值与宽度输入分辨率的比值位于空闲输出通道支持的宽度缩放倍率区间,且该图像属性的图像高度值与高度输入分辨率的比值位于空闲输出通道支持的高度缩放倍率区间,且该图像属性的图像格式值位于空闲输出通道支持的图像格式集合,则空闲输出通道支持的通道属性与该图像属性匹配。否则,二者不匹配。
步骤S5、若匹配,则将当前图像处理单元的空闲输出通道选取为该图像属性的目标输出通道,该空闲输出通道之后不能再被其它图像属性映射。
步骤S5对应上述通用策略(1),即,在图像属性与当前图像处理单元的空闲输出通道匹配时,将该图像属性映射在该空闲输出通道上。
步骤S6、若不匹配,则将模拟图像属性映射到当前图像处理单元的空闲输出通道(针对多个空闲输出通道,每个空闲输出通道对应一个模拟图像属性),并遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道的操作。
步骤S6对应上述通用策略(2),即,在图像属性与当前图像处理单元的空闲输出通道不匹配时,为空闲输出通道添加模拟图像属性,然后新增一个图像处理单元进行级联,当前遍历的图像属性在新增图像处理单元进行排布映射。
在一种可能的实施方式中,在为当前图像处理单元的空闲输出通道映射模拟图像属性时,若该图像属性(当前遍历的图像属性)的图像宽度值与宽度输入分辨率的比值大于宽度缩放倍率区间的上限值,则模拟图像属性的图像宽度值基于该上限值确定,如模拟图像属性的图像宽度值小于或等于该上限值。或者,若该图像属性的图像宽度值与宽度输入分辨率的比值小于宽度缩放倍率区间的下限值,则模拟图像属性的图像宽度值基于该下限值确定,如模拟图像属性的图像宽度值大于或等于该下限值。在此基础上,若该图像属性的图像高度值与高度输入分辨率的比值位于高度缩放倍率区间,则模拟图像属性的图像高度值基于该图像属性的图像高度值确定,如二者可以相同。
在一种可能的实施方式中,若该图像属性的图像高度值与高度输入分辨率的比值大于高度缩放倍率区间的上限值,则模拟图像属性的图像高度值基于该上限值确定,如模拟图像属性的图像高度值小于或等于该上限值。或者,若该图像属性的图像高度值与高度输入分辨率的比值小于高度缩放倍率区间的下限值,则模拟图像属性的图像高度值基于该下限值确定,如模拟图像属性的图像高度值大于或等于该下限值。在此基础上,若该图像属性的图像宽度值与宽度输入分辨率的比值位于宽度缩放倍率区间,则模拟图像属性的图像宽度值可以基于该图像属性的图像宽度值确定,如二者可以相同。
在一种可能的实施方式中,模拟图像属性的格式还满足:属于下一个图像处理单元的输入图像格式集合,且属于将其映射到的空闲输出通道的格式集合。
在一种可能的实施方式中,参见图5所示,管理器2将图像序列内的图像属性与图像处理单元的输出通道进行映射时,管理器2可以采用如下步骤实现:
步骤501、遍历所有图像属性,查询是否存在压缩格式的图像属性(即图像属性中的图像格式为压缩格式)。如果是,则将压缩格式的图像属性映射至输出通道1上。如果否,则不处理,在所有图像属性查询完成之后执行步骤502。
步骤502、依次遍历所有图像属性,依次排布放置所有的图像属性到图像处理单元。针对步骤501中已经排放的图像属性不需要重复排布。
步骤502中,为了将图像属性映射到图像处理单元,可以采用以下步骤:
步骤502-1、判断当前图像处理单元的所有输出通道(如4个输出通道)是否全部用完,若4个输出通道全部用完,则新增一个图像处理单元级联来排图像属性,即,级联跳到下一个图像处理单元,然后执行步骤502-2。
示例性的,在级联跳到下一个图像处理单元时,下一个图像处理单元的绑定源需要进行查询,查询方式为:倒着查询当前图像处理单元的所有输出通道,选择非独占的第一个输出通道作为下一个图像处理单元的输入源,这样,可以保证新增图像处理单元的输入分辨率尽可能小,减少性能开销。
步骤502-2、判断当前图像属性的分辨率和当前图像处理单元的输入分辨率的比值(宽和高分别计算),是否超过1/16的缩小限制。如果当前图像属性的分辨率的缩放倍率小于1/16,则当前图像属性不能放在当前图像处理单元上,需要新增一个图像处理单元进行级联,将当前图像属性排布到下一个图像处理单元上。如果当前图像属性的分辨率的缩放倍率不小于1/16,则执行步骤502-3。
在级联跳到下一个图像处理单元时,下一个图像处理单元需要设置一个绑定源,因此,当超过1/16缩小限制时,插入一个接近1/16X范围内的图像属性(即模拟图像属性),模拟图像属性作为新增图像处理单元的绑定源,即新增级联图像处理单元的输入分辨率为插入的这个图像分辨率。
步骤502-3、若同一图像处理单元同一时刻仅输出通道0支持放大,则需要判断当前图像属性是否为第2个大于当前图像处理单元的输入分辨率的图像属性(1X-16X),即,当前图像属性是否为第2个放大的图像属性(1X-16X)。
如果是,则需要新增一个图像处理单元来放置当前图像属性,即,级联跳到下一个图像处理单元。在新增一个图像处理单元时,还需要构造一个图像属性(模拟图像属性),模拟图像属性的分辨率和当前图像处理单元的输入分辨率相等,模拟图像属性的分辨率作为级联的下一个图像处理单元的输入分辨率。
如果是,即,当前图像属性不为第2个放大的图像属性,则执行步骤502-4。
步骤502-4、如果当前图像属性的分辨率和当前图像处理单元的输入分辨率的缩放比不满足步骤502-2和步骤502-3,则将当前图像属性映射到输出通道上(依次按照输出通道1、输出通道0、输出通道2、输出通道3的顺序排放),同时将输出通道数加1,同一图像处理单元已经用过的输出通道不能被重复使用。
步骤502-5、判断当前图像属性是否是最后一个图像属性。如果是,则结束流程,如果否,则跳到下一个图像属性,返回执行步骤502-1。
第四、选择器。
若图像终端管理装置包括K个图像处理单元,则图像终端管理装置可以包括K-1个选择器,相邻两个图像处理单元之间通过一个选择器连接。
每个选择器的内部处理逻辑一致,为了方便描述,后续以一个选择器的处理过程为例。选择器可以从前一个图像处理单元(选择器1的前一个图像处理单元为图像处理单元1,选择器2的前一个图像处理单元为图像处理单元2,以此类推)的所有输出通道中选取参考输出通道,将参考输出通道的输出图像作为后一个图像处理单元(选择器1的后一个图像处理单元为图像处理单元2,选择器2的后一个图像处理单元为图像处理单元3,以此类推)的输入图像。
示例性的,在将参考输出通道的输出图像作为后一个图像处理单元的输入图像时,该输入图像的宽度值作为后一个图像处理单元支持的宽度输入分辨率,该输入图像的高度值作为后一个图像处理单元支持的高度输入分辨率。
示例性的,选择器基于前一个图像处理单元的所有输出通道获取候选输出通道集合。比如说,若输出通道是非独占通道,且该输出通道的图像格式属于后一个图像处理单元支持的图像格式,则将该输出通道添加到候选输出通道集合。若输出通道不是非独占通道,和/或,该输出通道的图像格式不属于后一个图像处理单元支持的图像格式,则不将该输出通道添加到候选输出通道集合。
选择器从候选输出通道集合中选取占用内存资源最小的输出通道,并将占用内存资源最小的输出通道作为参考输出通道。其中,占用内存资源最小的输出通道是宽高面积最小的输出通道。输出通道的分辨率包括宽度和高度,计算输出通道的宽度与高度的面积,将宽高面积最小的输出通道作为参考输出通道。
综上可以看出,由于图像序列已经将图像属性从大到小排好,是个有序集合,为了最大效率节省系统性能,选择器的策略为:排除当前图像处理单元独占的通道(即输出通道是非独占通道)以及下一个图像处理单元的输入不支持格式的通道(即输出通道的图像格式属于后一个图像处理单元支持的图像格式),在剩余输出通道中选择宽高面积最小的输出通道作为下一个图像处理单元的输入,上述关系表示为:。
综上所述,通过管理器1、管理器2以及选择器的处理,则可以实现最小性能消耗的图像终端管理,实现图像终端和图像处理单元的映射关联。
第五、图像处理单元。
图像处理单元在得到输入图像之后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为输出图像,该输出图像被发送给管理器1。管理器1在得到输出图像之后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端(可能为多个图像终端)。
比如说,图像处理单元1在得到外部的输入图像之后,基于输出通道0映射的图像属性将输入图像转换为输出图像11,并将输出图像11发送给管理器1,管理器1将输出图像11发送给输出通道0映射的图像属性对应的图像终端。
图像处理单元2在得到图像处理单元1的输入图像(即图像处理单元1的参考输出通道的输出图像)之后,基于输出通道0映射的图像属性将输入图像转换为输出图像21,并将输出图像21发送给管理器1,管理器1将输出图像21发送给输出通道0映射的图像属性对应的图像终端,以此类推。
基于与上述图像终端管理装置同样的申请构思,本申请实施例中还提出一种图像终端管理方法,该图像终端管理方法可以应用于图像终端管理装置,图像终端管理装置包括:第一管理器、第二管理器和K个图像处理单元,参见图6所示,为图像终端管理方法的流程示意图,该方法可以包括:
步骤601、第一管理器获取多个图像终端分别对应的图像属性,并基于多个图像终端对应的图像属性获取图像序列;其中,该图像序列可以包括不重复的多个图像属性,且多个图像属性可以按照顺序排列。
步骤602、第二管理器遍历图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到目标输出通道,且目标输出通道支持的通道属性与该图像属性匹配。
步骤603、图像处理单元在得到输入图像后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将输入图像转换为输出图像。
步骤604、第一管理器在得到输出图像后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
示例性的,图像属性包括图像宽度值、图像高度值、图像格式值和图像独占性,其中:图像序列内的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序;或,
图像序列内的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
示例性的,第一管理器基于多个图像终端对应的图像属性获取图像序列,可以包括:依次获取每个图像终端对应的图像属性,针对当前获取的第一图像属性:若第一图像属性的图像宽度值大于图像序列内的第二图像属性的图像宽度值,在图像序列中第二图像属性的前面添加第一图像属性;若第一图像属性的图像宽度值小于图像序列内的所有图像属性的图像宽度值,在图像序列的最后面添加第一图像属性;若第一图像属性的图像宽度值等于图像序列内的第三图像属性的图像宽度值,则:若第一图像属性的图像高度值大于第三图像属性的图像高度值,在图像序列中第三图像属性的前面添加第一图像属性;若第一图像属性的图像高度值小于第三图像属性的图像高度值,在图像序列中第三图像属性的后面添加第一图像属性;若第一图像属性的图像高度值等于第三图像属性的图像高度值,则:若第一图像属性的图像格式值大于第三图像属性的图像格式值,在图像序列中第三图像属性的前面添加第一图像属性;若第一图像属性的图像格式值小于第三图像属性的图像格式值,在图像序列中第三图像属性的后面添加第一图像属性;若第一图像属性的图像格式值等于第三图像属性的图像格式值,则:若第一图像属性的图像独占性为独占、且第三图像属性的图像独占性为非独占,在图像序列中第三图像属性的前面添加第一图像属性;若第一图像属性的图像独占性为非独占、且第三图像属性的图像独占性为独占,在图像序列中第三图像属性的后面添加第一图像属性;若第一图像属性的图像独占性与第三图像属性的图像独占性相同,禁止在图像序列添加第一图像属性。
示例性的,第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道,可以包括:若图像处理单元的空闲输出通道支持的通道属性与当前遍历的图像属性匹配,则将空闲输出通道选取为该图像属性的目标输出通道;其中,空闲输出通道支持的通道属性包括图像处理单元支持的宽度输入分辨率和高度输入分辨率、空闲输出通道支持的宽度缩放倍率区间和高度缩放倍率区间、空闲输出通道支持的图像格式集合;其中,若该图像属性的图像宽度值与宽度输入分辨率的比值位于宽度缩放倍率区间,且该图像属性的图像高度值与高度输入分辨率的比值位于高度缩放倍率区间,且该图像属性的图像格式值位于图像格式集合,则空闲输出通道支持的通道属性与该图像属性匹配。
示例性的,第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道,包括:基于按照顺序排列的K个图像处理单元,遍历第一个图像处理单元作为当前图像处理单元,当前图像处理单元包括多个输出通道;判断当前图像处理单元的多个输出通道是否存在空闲输出通道;若否,遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道;若是,判断空闲输出通道支持的通道属性与该图像属性是否匹配;若匹配,将空闲输出通道选取为该图像属性的目标输出通道;若不匹配,将模拟图像属性映射到空闲输出通道,遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道。
示例性的,图像终端管理装置还包括K-1个选择器,相邻两个图像处理单元之间通过一个选择器连接。该方法还包括:选择器从前一个图像处理单元的所有输出通道中选取参考输出通道,将参考输出通道的输出图像作为后一个图像处理单元的输入图像;其中,该输入图像的宽度值作为后一个图像处理单元支持的宽度输入分辨率,该输入图像的高度值作为后一个图像处理单元支持的高度输入分辨率;其中,参考输出通道是候选输出通道集合中占用内存资源最小的输出通道;针对候选输出通道集合中的每个输出通道,该输出通道是非独占通道,且该输出通道的图像格式属于后一个图像处理单元支持的图像格式。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种图像终端管理装置,其特征在于,所述图像终端管理装置包括:第一管理器、第二管理器和K个图像处理单元,K为正整数;
所述第一管理器,用于获取多个图像终端分别对应的图像属性,基于所述多个图像终端对应的图像属性获取图像序列;其中,所述图像序列包括不重复的多个图像属性,且所述多个图像属性按照顺序排列;
所述第二管理器,用于遍历所述图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到所述目标输出通道,且所述目标输出通道支持的通道属性与该图像属性匹配;
所述图像处理单元,用于在得到输入图像后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将所述输入图像转换为输出图像;
所述第一管理器,用于在得到输出图像后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
2.根据权利要求1所述的图像终端管理装置,其特征在于,图像属性包括图像宽度值、图像高度值、图像格式值和图像独占性,其中:
所述图像序列内的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序;或,
所述图像序列内的多个图像属性按照图像高度值从大到小的顺序排序;同一图像高度值的多个图像属性按照图像宽度值从大到小的顺序排序;同一图像宽度值的多个图像属性按照图像格式值从大到小的顺序排序;同一图像格式值的多个图像属性按照图像独占和图像非独占的顺序排序。
3.根据权利要求1或2所述的图像终端管理装置,其特征在于,所述第一管理器基于所述多个图像终端对应的图像属性获取图像序列时具体用于:
依次获取每个图像终端对应的图像属性,针对当前获取的第一图像属性:
若所述第一图像属性的图像宽度值大于图像序列内的第二图像属性的图像宽度值,则在所述图像序列中所述第二图像属性的前面添加所述第一图像属性;若所述第一图像属性的图像宽度值小于图像序列内的所有图像属性的图像宽度值,则在所述图像序列的最后面添加所述第一图像属性;若所述第一图像属性的图像宽度值等于图像序列内的第三图像属性的图像宽度值,则:
若所述第一图像属性的图像高度值大于所述第三图像属性的图像高度值,则在所述图像序列中所述第三图像属性的前面添加所述第一图像属性;若所述第一图像属性的图像高度值小于所述第三图像属性的图像高度值,则在所述图像序列中所述第三图像属性的后面添加所述第一图像属性;若所述第一图像属性的图像高度值等于所述第三图像属性的图像高度值,则:
若所述第一图像属性的图像格式值大于所述第三图像属性的图像格式值,则在所述图像序列中所述第三图像属性的前面添加所述第一图像属性;若所述第一图像属性的图像格式值小于所述第三图像属性的图像格式值,则在所述图像序列中所述第三图像属性的后面添加所述第一图像属性;若所述第一图像属性的图像格式值等于所述第三图像属性的图像格式值,则:
若所述第一图像属性的图像独占性为独占、且所述第三图像属性的图像独占性为非独占,则在所述图像序列中所述第三图像属性的前面添加所述第一图像属性;若所述第一图像属性的图像独占性为非独占、且所述第三图像属性的图像独占性为独占,则在所述图像序列中所述第三图像属性的后面添加所述第一图像属性;若所述第一图像属性的图像独占性与所述第三图像属性的图像独占性相同,则禁止在所述图像序列中添加所述第一图像属性。
4.根据权利要求1所述的图像终端管理装置,其特征在于,所述第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道时具体用于:
若所述图像处理单元的空闲输出通道支持的通道属性与当前遍历的图像属性匹配,则将所述空闲输出通道选取为该图像属性的目标输出通道;
其中,空闲输出通道支持的通道属性包括所述图像处理单元支持的宽度输入分辨率和高度输入分辨率、所述空闲输出通道支持的宽度缩放倍率区间和高度缩放倍率区间、所述空闲输出通道支持的图像格式集合;
其中,若该图像属性的图像宽度值与所述宽度输入分辨率的比值位于所述宽度缩放倍率区间,且该图像属性的图像高度值与所述高度输入分辨率的比值位于所述高度缩放倍率区间,且该图像属性的图像格式值位于所述图像格式集合,则所述空闲输出通道支持的通道属性与该图像属性匹配。
5.根据权利要求1或4所述的图像终端管理装置,其特征在于,所述第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道时具体用于:
基于按照顺序排列的K个图像处理单元,遍历第一个图像处理单元作为当前图像处理单元,当前图像处理单元包括多个输出通道;
判断当前图像处理单元的多个输出通道是否存在空闲输出通道;
若否,则遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道;
若是,则判断空闲输出通道支持的通道属性与该图像属性是否匹配;
若匹配,则将所述空闲输出通道选取为该图像属性的目标输出通道;
若不匹配,则将模拟图像属性映射到所述空闲输出通道,遍历当前图像处理单元的后一个图像处理单元作为当前图像处理单元,返回执行判断当前图像处理单元的多个输出通道是否存在空闲输出通道。
6.根据权利要求5所述的图像终端管理装置,其特征在于,
若该图像属性的图像宽度值与所述宽度输入分辨率的比值大于所述宽度缩放倍率区间的上限值,则所述模拟图像属性的图像宽度值基于该上限值确定;
若该图像属性的图像宽度值与所述宽度输入分辨率的比值小于所述宽度缩放倍率区间的下限值,则所述模拟图像属性的图像宽度值基于该下限值确定;
若该图像属性的图像高度值与所述高度输入分辨率的比值大于所述高度缩放倍率区间的上限值,则所述模拟图像属性的图像高度值基于该上限值确定;
若该图像属性的图像高度值与所述高度输入分辨率的比值小于所述高度缩放倍率区间的下限值,则所述模拟图像属性的图像高度值基于该下限值确定。
7.根据权利要求1或4所述的图像终端管理装置,其特征在于,还包括K-1个选择器,相邻两个图像处理单元之间通过一个选择器连接,其中:
所述选择器,用于从前一个图像处理单元的所有输出通道中选取参考输出通道,将所述参考输出通道的输出图像作为后一个图像处理单元的输入图像;其中,该输入图像的宽度值作为后一个图像处理单元支持的宽度输入分辨率,该输入图像的高度值作为后一个图像处理单元支持的高度输入分辨率;
其中,所述参考输出通道是候选输出通道集合中占用内存资源最小的输出通道;针对所述候选输出通道集合中的每个输出通道,该输出通道是非独占通道,且该输出通道的图像格式属于所述后一个图像处理单元支持的图像格式。
8.一种图像终端管理方法,其特征在于,应用于图像终端管理装置,所述图像终端管理装置包括:第一管理器、第二管理器和K个图像处理单元,包括:
所述第一管理器获取多个图像终端分别对应的图像属性,基于所述多个图像终端对应的图像属性获取图像序列;其中,所述图像序列包括不重复的多个图像属性,且所述多个图像属性按照顺序排列;
所述第二管理器遍历所述图像序列内每个图像属性,从图像处理单元的所有空闲输出通道中选取目标输出通道,将当前遍历的图像属性映射到所述目标输出通道,且所述目标输出通道支持的通道属性与该图像属性匹配;
所述图像处理单元在得到输入图像后,针对本图像处理单元的每个输出通道,基于该输出通道映射的图像属性将所述输入图像转换为输出图像;
所述第一管理器在得到输出图像后,基于该输出图像对应的图像属性,将该输出图像发送给该图像属性对应的图像终端。
9.根据权利要求8所述的方法,其特征在于,所述第二管理器从图像处理单元的所有空闲输出通道中选取目标输出通道,包括:
若所述图像处理单元的空闲输出通道支持的通道属性与当前遍历的图像属性匹配,则将所述空闲输出通道选取为该图像属性的目标输出通道;
其中,空闲输出通道支持的通道属性包括所述图像处理单元支持的宽度输入分辨率和高度输入分辨率、所述空闲输出通道支持的宽度缩放倍率区间和高度缩放倍率区间、所述空闲输出通道支持的图像格式集合;
其中,若该图像属性的图像宽度值与所述宽度输入分辨率的比值位于所述宽度缩放倍率区间,且该图像属性的图像高度值与所述高度输入分辨率的比值位于所述高度缩放倍率区间,且该图像属性的图像格式值位于所述图像格式集合,则所述空闲输出通道支持的通道属性与该图像属性匹配。
10.根据权利要求8或9所述的方法,其特征在于,所述图像终端管理装置还包括K-1个选择器,相邻两个图像处理单元之间通过一个选择器连接;
所述方法还包括:所述选择器从前一个图像处理单元的所有输出通道中选取参考输出通道,将所述参考输出通道的输出图像作为后一个图像处理单元的输入图像;其中,该输入图像的宽度值作为后一个图像处理单元支持的宽度输入分辨率,该输入图像的高度值作为后一个图像处理单元支持的高度输入分辨率;其中,所述参考输出通道是候选输出通道集合中占用内存资源最小的输出通道;针对所述候选输出通道集合中的每个输出通道,该输出通道是非独占通道,且该输出通道的图像格式属于所述后一个图像处理单元支持的图像格式。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410445558.4A CN118042291B (zh) | 2024-04-12 | 2024-04-12 | 图像终端管理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410445558.4A CN118042291B (zh) | 2024-04-12 | 2024-04-12 | 图像终端管理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN118042291A true CN118042291A (zh) | 2024-05-14 |
CN118042291B CN118042291B (zh) | 2024-06-21 |
Family
ID=91000996
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410445558.4A Active CN118042291B (zh) | 2024-04-12 | 2024-04-12 | 图像终端管理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118042291B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002125200A (ja) * | 2000-10-16 | 2002-04-26 | Hitachi Ltd | 動画像フォーマット変換装置 |
US20030044088A1 (en) * | 2001-08-30 | 2003-03-06 | Micron Technology, Inc. | Apparatus, method, and product for downscaling an image |
CN1852388A (zh) * | 2006-05-12 | 2006-10-25 | 北京中星微电子有限公司 | 一种图像缩放装置 |
CN1942897A (zh) * | 2004-04-29 | 2007-04-04 | 诺基亚公司 | 缩减数字彩色矩阵图像的方法和装置 |
CN101512595A (zh) * | 2006-09-08 | 2009-08-19 | 艾利森电话股份有限公司 | 图像缩放方法 |
CN102246223A (zh) * | 2009-03-17 | 2011-11-16 | 华为技术有限公司 | 一种图像的缩放方法和装置 |
CN105430236A (zh) * | 2015-12-22 | 2016-03-23 | 北京天诚盛业科技有限公司 | 图像输出格式快速转换的方法 |
KR20180085953A (ko) * | 2017-01-20 | 2018-07-30 | 전자부품연구원 | 멀티 채널 초고해상도 영상 데이터의 동시 획득 시 채널 간 동기를 위한 하드웨어 장치 |
CN110381331A (zh) * | 2019-07-23 | 2019-10-25 | 深圳市道通智能航空技术有限公司 | 一种图像处理方法、装置、航拍设备及存储介质 |
CN111369444A (zh) * | 2020-03-31 | 2020-07-03 | 浙江大华技术股份有限公司 | 一种图像缩放处理方法及装置 |
CN112887608A (zh) * | 2021-01-27 | 2021-06-01 | 维沃移动通信有限公司 | 图像处理方法、装置、图像处理芯片和电子设备 |
-
2024
- 2024-04-12 CN CN202410445558.4A patent/CN118042291B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002125200A (ja) * | 2000-10-16 | 2002-04-26 | Hitachi Ltd | 動画像フォーマット変換装置 |
US20030044088A1 (en) * | 2001-08-30 | 2003-03-06 | Micron Technology, Inc. | Apparatus, method, and product for downscaling an image |
CN1942897A (zh) * | 2004-04-29 | 2007-04-04 | 诺基亚公司 | 缩减数字彩色矩阵图像的方法和装置 |
CN1852388A (zh) * | 2006-05-12 | 2006-10-25 | 北京中星微电子有限公司 | 一种图像缩放装置 |
CN101512595A (zh) * | 2006-09-08 | 2009-08-19 | 艾利森电话股份有限公司 | 图像缩放方法 |
CN102246223A (zh) * | 2009-03-17 | 2011-11-16 | 华为技术有限公司 | 一种图像的缩放方法和装置 |
CN105430236A (zh) * | 2015-12-22 | 2016-03-23 | 北京天诚盛业科技有限公司 | 图像输出格式快速转换的方法 |
KR20180085953A (ko) * | 2017-01-20 | 2018-07-30 | 전자부품연구원 | 멀티 채널 초고해상도 영상 데이터의 동시 획득 시 채널 간 동기를 위한 하드웨어 장치 |
CN110381331A (zh) * | 2019-07-23 | 2019-10-25 | 深圳市道通智能航空技术有限公司 | 一种图像处理方法、装置、航拍设备及存储介质 |
CN111369444A (zh) * | 2020-03-31 | 2020-07-03 | 浙江大华技术股份有限公司 | 一种图像缩放处理方法及装置 |
CN112887608A (zh) * | 2021-01-27 | 2021-06-01 | 维沃移动通信有限公司 | 图像处理方法、装置、图像处理芯片和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN118042291B (zh) | 2024-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20080292212A1 (en) | Image Display Apparatus, Image Display Method, and Computer Program | |
CN115086668B (zh) | 一种视频压缩方法、系统、设备及计算机可读存储介质 | |
US20080062272A1 (en) | Electronic camera that reduces processing time by performing different processes in parallel | |
JP2012110016A (ja) | ディジタル画像を処理するための方法および画像表現形式 | |
US20120162228A1 (en) | Information processor, image data optimization method and program | |
CN118042291B (zh) | 图像终端管理方法及装置 | |
EP1763238A2 (en) | Image processor, imaging device, and image processing system | |
US20020106127A1 (en) | Method of and apparatus for retrieving movie image | |
US20090189999A1 (en) | Image processing device for providing image quality information and method thereof | |
JP2011043872A (ja) | カラーヒストグラム生成装置、カラーヒストグラム生成方法及びプログラム | |
CN205622770U (zh) | 图像传输系统 | |
US7515757B2 (en) | Method for managing storage space in a storage medium of a digital terminal for data storage according to a prioritized pixel transfer method | |
CN104462422A (zh) | 对象的处理方法及装置 | |
CN103678862A (zh) | 信息处理装置、信息处理方法和信息处理程序 | |
JP2002527013A (ja) | データ圧縮エンコーダを構築するシステム | |
KR100775217B1 (ko) | 휴대형 카메라의 유사성 기반 사진압축방법 | |
JP2002527011A (ja) | データ圧縮符号化システム | |
JP4083670B2 (ja) | 画像符号化装置及び画像符号化方法 | |
CN113365016A (zh) | 一种地图影像数据实时获取系统及方法 | |
JP5479274B2 (ja) | 画像分類装置、画像分類プログラム、プリンタ、撮像装置及び携帯電話機 | |
KR20210113681A (ko) | 다중 이미지에 대한 압축 | |
KR100474769B1 (ko) | 영상 저장 장치 및 그 관리방법 | |
JP2021087198A (ja) | エンコーダを有するストレージシステム | |
JP3775365B2 (ja) | データ圧縮装置 | |
JPS63260271A (ja) | 画像デ−タ圧縮装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |