CN111857478A - 一种图像布局方法、装置、电子设备及存储介质 - Google Patents

一种图像布局方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111857478A
CN111857478A CN202010693433.5A CN202010693433A CN111857478A CN 111857478 A CN111857478 A CN 111857478A CN 202010693433 A CN202010693433 A CN 202010693433A CN 111857478 A CN111857478 A CN 111857478A
Authority
CN
China
Prior art keywords
image
frame
layout
image layout
continuous
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010693433.5A
Other languages
English (en)
Other versions
CN111857478B (zh
Inventor
杨雪
于谷峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202010693433.5A priority Critical patent/CN111857478B/zh
Publication of CN111857478A publication Critical patent/CN111857478A/zh
Application granted granted Critical
Publication of CN111857478B publication Critical patent/CN111857478B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9566URL specific, e.g. using aliases, detecting broken or misspelled links
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了一种图像布局方法、装置、电子设备及存储介质,涉及图像处理技术领域,具体涉及人工智能、计算机视觉及自动驾驶等领域,包括:获取图像布局参数;根据图像布局应用场景类型对所述图像布局参数进行赋值;根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。本申请实施例能够扩展图像布局功能,提高图像处理工具的通用性,从而满足多种图像处理场景的应用需求。

Description

一种图像布局方法、装置、电子设备及存储介质
技术领域
本申请涉及图像处理领域,具体涉及人工智能、计算机视觉及自动驾驶等领域。
背景技术
随着人工智能算法的逐渐成熟,人脸识别、计算机视觉及自动驾驶等技术已经成为主要的热门技术。对于这类技术来说,图像处理是必不可少的环节。为了训练相关的图像处理算法,往往需要预先构建处理过的图像数据作为样本数据,例如,将带有标注结果的图像数据作为样本数据。为了满足各种应用场景的图像处理需求,如满足不同场景的图像标注需求或图像预处理需求,往往需要有不同类型的图像处理工具来支持。
发明内容
本申请实施例提供了一种图像布局方法、装置、电子设备及存储介质,以扩展图像布局功能,提高图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
第一方面,本申请实施例提供了一种图像布局方法,包括:
获取图像布局参数;
根据图像布局应用场景类型对所述图像布局参数进行赋值;
根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
第二方面,本申请实施例提供了一种图像布局装置,包括:
参数获取模块,用于获取图像布局参数;
参数赋值模块,用于根据图像布局应用场景类型对所述图像布局参数进行赋值;
布局方式确定模块,用于根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
第三方面,本申请实施例提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行第一方面实施例所提供的图像布局方法。
第四方面,本申请实施例还提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行第一方面实施例所提供的图像布局方法。
本申请实施例通过根据图像布局应用场景类型,对获取的图像布局参数进行赋值,以根据图像布局参数的赋值结果,在图像布局界面中确定图像布局应用场景类型匹配的图像布局方式,解决现有图像处理工具存在的只能满足单一应用场景需求的问题,扩展了图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请实施例提供的一种图像布局方法的流程图;
图2是本申请实施例提供的一种图像布局方法的流程图;
图3是本申请实施例提供的一种对图像布局参数进行赋值的界面效果示意图;
图4是本申请实施例提供的一种图像布局方式的效果示意图;
图5是本申请实施例提供的一种图像布局装置的结构图;
图6是用来实现本申请实施例的图像布局方法的电子设备的结构示意图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明,其中包括本申请实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本申请的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
在一个示例中,图1是本申请实施例提供的一种图像布局方法的流程图,本实施例可适用于根据不同图像处理应用场景的布局需求进行图像布局的情况,该方法可以由图像布局装置来执行,该装置可以由软件和/或硬件的方式来实现,并一般可集成在电子设备中。该电子设备可以是计算机设备。相应的,如图1所示,该方法包括如下操作:
S110、获取图像布局参数。
其中,图像布局参数可以用于对图像处理工具的图像布局界面对待处理图像的图像布局区域进行布局。其中,图像布局界面也即图像处理工具中用于显示待处理图像的界面。图像布局区域可以是待处理图像的分布区域。示例性的,图像布局区域可以是一个矩形区域,也可以是多个矩形区域等,每个矩形区域可以分布一张待处理图像。待处理图像也即需要利用图像处理工具进行处理的图像。在本申请实施例中,可选的,图像处理工具可以用于对待处理图像进行图像标注或图像预处理等图像处理操作。可选的,图像预处理包括但不限于图像清洗等预处理操作。
在本申请实施例中,在对图像处理工具的图像布局界面设置图像布局区域时,可以首先从图像处理工具的后台配置文件中获取相关的图像布局参数。
S120、根据图像布局应用场景类型对所述图像布局参数进行赋值。
其中,图像布局应用场景类型可以是图像处理环节所对应的应用场景,对图像布局的具体应用类型。可选的,图像布局应用场景类型可以包括但不限于单帧图像场景、单帧连续图像场景、双帧连续图像场景、四帧连续图像场景、十帧连续图像场景及多帧图像清洗处理场景等。
相应的,在获取到图像布局参数后,即可根据图像处理环节对应的具体的应用场景对图像布局的具体应用需求,确定图像布局应用场景类型,并根据确定的图像布局应用场景类型对图像布局参数进行赋值。
S130、根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
相应的,在根据图像布局应用场景类型对图像处理工具的图像布局参数进行赋值后,图像处理工具即可根据图像布局参数的赋值结果,在图像布局界面中确定与图像布局应用场景类型匹配的图像布局方式。
示例性的,假设图像布局应用场景类型为单帧图像场景,也即需要对单帧图像进行处理。根据单帧图像场景对图像处理工具的图像布局参数进行赋值后,图像处理工具即可根据单帧图像场景的图像布局参数的赋值结果,在图像布局界面中确定与单帧图像场景匹配的图像布局方式,如在图像布局界面的中心区域显示矩形区域,作为单帧图像的图像布局方式。同理,针对不同的图像布局应用场景类型,可以对图像布局参数赋予不同的取值,从而使得图像处理工具在图像布局界面中确定多种形式的图像布局方式,以供对待处理图像进行图像处理。当图像布局应用场景类型中涉及到的数据采集设备(用于获取待处理图像)有多个时,在图像布局界面中确定与图像布局应用场景类型匹配的图像布局方式,还可以实现对不同图像处理场景的高度还原。
在图像处理领域,图像标注工具是一种重要的图像处理工具,可以用于对图像中的标注对象进行标注,从而得到用于训练相关图像处理算法的样本数据。现有的各类图像标注工具多为满足单一场景开发,比如单帧离散场景标注工具、连续帧场景标注工具或双摄连续场景标注工具等。也即,一种图像标注工具只能满足一种图像标注应用场景类型。
现有的各类图像标注工具多为满足单一场景设置,通用性差,导致开发、维护以及使用的成本都很高。对于稍微复杂的应用场景来说,如四摄或十摄连续场景等,不能做到对图像采集场景的最大程度还原,无法有效的支持标注员对标注对象进行正确判断,从而影响图像标注的标注质量和标注效率。
将本申请实施例所提供的图像布局方法应用在图像标注工具中,可以满足不同图像标注应用场景的需求,例如,根据单帧离散场景、连续帧场景及双摄连续场景等场景类型对图像布局的需求,对图像布局参数分别进行赋值,使得图像处理工具可以根据图像布局参数的赋值结果,在图像布局界面中确定各图像标注应用场景类型匹配的图像布局方式。也即,仅需要一种图像处理工具即可对所有图像标注应用场景获取的图像进行标注。
由此可见,在本申请实施例中,仅需要一种图像处理工具即可对所有场景类型的获取的待处理图像进行处理,扩展了图像处理工具的图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
本申请实施例通过根据图像布局应用场景类型,对获取的图像布局参数进行赋值,以根据图像布局参数的赋值结果,在图像布局界面中确定图像布局应用场景类型匹配的图像布局方式,解决现有图像处理工具存在的只能满足单一应用场景需求的问题,扩展了图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
在一个示例中,图2是本申请实施例提供的一种图像布局方法的流程图,本申请实施例在上述各实施例的技术方案的基础上,进行了优化改进,给出了根据图像布局应用场景类型对所述图像布局参数进行赋值,以及根据赋值结果确定图像布局方式的多种具体可选的实现方式。在本实施例中,主要以图像标注处理和图像清洗处理相关的应用场景为例进行说明,但可以理解的是,本申请实施例所提供的图像布局方法不仅限于适用上述应用场景。
如图2所示的一种图像布局方法,包括:
S210、获取图像布局参数。
在本申请的一个可选实施例中,所述图像布局参数可以为目标三维矩阵;所述目标三维矩阵可以包括第一矩阵元素、第二矩阵元素以及第三矩阵元素。
其中,目标三维矩阵可以是图像布局参数的一种类型,可选的,目标三维矩阵可以包括第一矩阵元素、第二矩阵元素以及第三矩阵元素。也即,目标三维矩阵可以是一行三列的矩阵形式。
示例性的,目标三维矩阵可以是N*M*Q的形式。其中,N可以是第一矩阵元素,M可以是第二矩阵元素,Q可以是第三矩阵元素。其中,N*M可以用来还原图像的空间布局,即还原采集图片的数据采集设备的相对位置;Q可以用来定义图像序列的聚合帧数,即图像采集的时候是单帧采集还是视频连续帧采集。其中,数据采集设备可以是摄像头或红外成像设备等,本申请实施例并不对数据采集设备的具体设备类型进行限定。通过N*M*Q的目标三维矩阵的配置,可以满足绝大多数图像处理的应用场景的图像布局需求。
需要说明的是,图像布局参数除了可以考虑图像的空间布局以及图像序列的聚合帧数等影响因素构建目标三维矩阵,还可以额外考虑其他的影响构建目标四维矩阵或目标五维矩阵等,本申请实施例对此并不进行限制。
采用上述技术方案,通过利用目标三维矩阵作为图像布局参数,可以考虑图像的空间布局以及图像序列的聚合帧数等影响因素,满足不同图像布局应用场景类型对图像的空间布局以及图像序列的聚合帧数的需求。
S220、根据图像布局应用场景类型对所述图像布局参数进行赋值。
S230、根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
图3是本申请实施例提供的一种对图像布局参数进行赋值的界面效果示意图,图4是本申请实施例提供的一种图像布局方式的效果示意图。下面结合图3和图4具体说明如何根据图像布局应用场景类型对图像布局参数进行赋值,以及根据图像布局参数的赋值结果,在图像布局界面中确定图像布局应用场景类型匹配的图像布局方式。
相应的,S220具体可以包括下述操作:
可选的,当所述图像布局应用场景类型为单帧图像场景时,S220可以包括:
S221a、根据所述单帧图像场景,将所述目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为第一常数。
其中,单帧图像场景可以是仅对单帧图像进行图像处理的应用场景类型。第一常数可以是1。
可选的,当图像布局应用场景类型为单帧图像场景时,说明仅需要对单一数据采集设备采集的单帧图像进行图像处理。此时,可以将目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为1,也即,目标三维矩阵可以是1*1*1。
相应的,S230可以包括:
S231a、在所述图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定所述单帧图像的图像布局方式。
其中,单四边形离散帧布局区域可以是图像布局界面中单一的四边形区域,该区域仅允许放置单帧图像。
相应的,在目标三维矩阵可以赋值为1*1*1后,图像处理工具可以在图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定单帧图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“1”行、“1”列及“1”帧,得到1*1*1的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方只显示一个URL(UniformResource Locator,统一资源定位符),如URL1,表示在图像布局界面中一个四边形区域对应一个数据源,该数据源可以是一个数据采集设备的图像帧数据来源,还可以是不同数据采集设备的图像帧数据来源,只要可以提供单帧图像即可。相应的,参考图4中标号为(1)的子图,在目标三维矩阵赋值为1*1*1后,图像布局界面可以在中央区域显示单四边形离散帧布局区域,该区域仅允许放置单帧图像。
上述方案中,通过对目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为第一常数,从而在图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定单帧图像的图像布局方式,适用于单一数据采集设备采集图片后进行标注或图片清洗等图片处理场景,即离散帧场景,如离散障碍物视觉需求场景、离散语义视觉需求场景及单帧图片清洗需求场景等。
可选的,当所述图像布局应用场景类型为单帧连续图像场景时,S220可以包括:
S221b、根据所述单帧连续图像场景,将所述目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数。
其中,单帧连续图像场景可以是对连续的单帧图像进行图像处理的应用场景类型,也即对一段连续帧图像进行图像处理的应用场景类型。第二常数可以是20、50或100等,具体可以根据实际需求设定,本申请实施例并不对第二常数的具体数值进行限定。
可选的,当图像布局应用场景类型为单帧连续图像场景时,说明仅需要对单一数据采集设备采集的连续帧图像进行图像处理。此时,可以将目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为1,并将目标三维矩阵的第三矩阵元素赋值为第二常数,如20或50等,表明连续帧图像的图像数量为20或50。也即,目标三维矩阵可以是1*1*q。其中,q表示第二常数,可以随意赋值(正整数)。需要说明的是,如果不指定连续帧图像中包括的图像数量,还可以设置第三矩阵元素为空,或者设置为指定的字符,如“q”,表示不限定图像数量,可以放置任意长度的连续帧图像进行图像处理。
相应的,S230可以包括:
S231b、在所述图像布局界面确定连续单帧图像的单四边形连续帧布局区域,以确定所述连续单帧图像的图像布局方式。
其中,单四边形连续帧布局区域可以是图像布局界面中单一的四边形区域,该区域允许放置连续的单帧图像。连续单帧图像也即连续的单帧图像,适用于单帧连续图像场景。
相应的,在目标三维矩阵可以赋值为1*1*q后,图像处理工具可以在图像布局界面确定单帧图像的单四边形连续帧布局区域,以确定连续单帧图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“1”行、“1”列及“20”帧,或填写“1”行、“1”列及“q”帧,得到1*1*q的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方只显示一个URL,如URL1,表示在图像布局界面中一个四边形区域对应一个数据源,该数据源也即一个数据采集设备的图像帧数据来源,可以提供连续的单帧图像。相应的,参考图4中标号为(2)的子图,在目标三维矩阵赋值为1*1*q后,图像布局界面可以在中央区域显示单四边形连续帧布局区域,该区域允许放置连续的单帧图像。其中,四边形区域中的“1、2、3”表示图像帧的编号。需要说明的是,图4仅是一种实现方式的示意图,单四边形连续帧布局区域可以是如图4标号为(2)所示的子图中多张四边形层级显示方式,如2个或3个四边形层级显示,也还可以是如图4标号为(1)所示的子图中单张四边形单级显示方式。当单四边形连续帧布局区域采用如图4标号为(1)所示的子图中单张四边形单级显示方式时,还可以在图像布局界面中显示“下一张”等类似的虚拟功能键,用于在当前单帧图像处理完成后,跳转至下一帧单帧图像继续处理。
上述方案中,通过对目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为第一常数,并将第三矩阵元素赋值为第二常数,从而在图像布局界面确定连续单帧图像的单四边形连续帧布局区域,以确定连续单帧图像的图像布局方式,适用于单一数据采集设备采集视频后进行连续帧或连续抽帧(对连续帧抽帧得到的图像帧)的图像标注场景,如无人驾驶类的连续障碍物/定位元素标注场景或流量统计类需求场景等。
可选的,当所述图像布局应用场景类型为双帧连续图像场景时,S220可以包括:
S221c、根据所述双帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第三常数,将所述目标三维矩阵的第二矩阵元素赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数。
其中,双帧连续图像场景可以是对连续的双帧图像进行图像处理的应用场景类型,也即对两段连续帧图像的两个同步帧图像,或对一段连续帧图像的两个连续帧图像进行图像处理的应用场景类型。第三常数可以是2。
可选的,当图像布局应用场景类型为双帧连续图像场景时,说明需要对两个不同的数据采集设备分别同步采集的连续帧图像进行图像处理,或者对同一数据采集设备采集的连续两帧图像进行图像处理。此时,可以将目标三维矩阵的第一矩阵元素赋值为2,将第二矩阵元素赋值为1,并将第三矩阵元素赋值为第二常数,如20或50等,表明两段连续帧图像的图像数量为20或50。也即,目标三维矩阵可以是2*1*q。其中,q表示第二常数,可以随意赋值(正整数)。需要说明的是,如果不指定连续帧图像中包括的图像数量,还可以设置第三矩阵元素为空,或者设置为指定的字符,如“q”,表示不限定图像数量,可以放置任意长度的连续帧图像进行图像处理。
可以理解的是,当连续帧图像为两个不同的数据采集设备分别同步采集的连续帧图像时,两段连续帧图像的图像数量可以相同,也可以不同。通常情况下,受到控制系统对数据采集设备的控制误差以及数据采集设备本身的设备故障等影响,各数据采集设备之间同步采集的连续帧图像之间可能存在细微差异,如图像数量相差几帧或图像对应的拍摄时间相差几微秒等,但这些细微差异可以忽略不计。例如,控制系统控制两个数据采集设备在同一时间段内采集两段视频。视频采集结束后,第一段连续帧图像的图像数量为29,第二段连续帧图像的图像数量为30,则可以认为两段连续帧图像为同步采集的连续帧图像。
相应的,S230可以包括:
S231c、在所述图像布局界面确定连续双帧图像的双四边形连续帧布局区域,以确定所述连续双帧图像的图像布局方式。
其中,双四边形连续帧布局区域可以是图像布局界面中两种四边形区域,该区域允许放置连续的双帧图像。连续双帧图像可以是不同数据采集设备获取的两帧同步帧图像,如摄像头1和摄像头2同时采集的第2帧图像等,适用于双帧连续图像场景。连续双帧图像还可以是同一数据采集设备获取的连续两帧图像,如摄像头1采集的第2帧图像和第3帧图像等。
相应的,在目标三维矩阵可以赋值为2*1*q后,图像处理工具可以在图像布局界面确定双帧图像的双四边形连续帧布局区域,以确定连续双帧图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“2”行、“1”列及“20”帧,或填写“2”行、“1”列及“q”帧,得到2*1*q的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方可以显示两个URL,如URL1和URL2,表示在图像布局界面中每个四边形区域可以对应一个数据源,该数据源也即一个数据采集设备的图像帧数据来源,每个数据源可以分别提供连续的单帧图像,各数据源同步提供的图像也即同步采集的图像。如果图3中“*图像布局”数据栏的下方显示两个相同的URL,如均显示URL1,则表示在图像布局界面中两个四边形区域均对应一个相同的数据源。相应的,两个四边形区域可以显示URL1对应的数据源的连续两帧图像。
相应的,参考图4中标号为(3)的子图,在目标三维矩阵赋值为2*1*q后,图像布局界面可以在中央区域显示双四边形连续帧布局区域,该区域允许放置连续的双帧图像。其中,四边形区域中的“1-1、1-2、2-1和2-2”表示图像帧的编号,例如,“1-1”表示第一段连续帧图像中的第一帧图像。需要说明的是,图4仅是一种实现方式的示意图,双四边形连续帧布局区域可以是如图4标号为(3)所示的子图中多张四边形层级显示方式,如每个四边形显示的区域中有2个或3个四边形层级显示,也还可以是两张四边形的单级显示方式,也即只有上下两个四边形区域。当双四边形连续帧布局区域采用两张四边形的单级显示方式时,还可以在图像布局界面中针对不同的四边形区域分别显示“下一张”等类似的虚拟功能键,用于在各四边形区域的当前单帧图像处理完成后,跳转至下一帧单帧图像继续处理。
采用上述技术方案,通过对目标三维矩阵的第一矩阵元素赋值为第三常数,将第二矩阵元素赋值为第一常数,并将第三矩阵元素赋值为第二常数,从而在图像布局界面确定连续双帧图像的双四边形连续帧布局区域,以确定连续双帧图像的图像布局方式,适用于两个数据采集设备同步采集两段视频后进行连续帧或连续抽帧(对连续帧抽帧得到的图像帧)的图像标注场景,如无人驾驶环视数据中的双摄对标需求场景等。
可选的,当所述图像布局应用场景类型为四帧连续图像场景时,S220可以包括:
S221d、根据所述四帧连续图像场景,将所述目标三维矩阵的第一矩阵元素和第二矩阵元素赋值为第三常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数。
其中,四帧连续图像场景可以是对连续的四帧图像进行图像处理的应用场景类型,也即对四段连续帧图像的四个同步帧图像,或对一段连续帧图像的四个连续帧图像进行图像处理的应用场景类型。
可选的,当图像布局应用场景类型为四帧连续图像场景时,说明需要对四个不同的数据采集设备分别同步采集的连续帧图像进行图像处理,或者对同一数据采集设备采集的连续四帧图像进行图像处理。此时,可以将目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为2,并将目标三维矩阵的第三矩阵元素赋值为第二常数,如20或50等,表明连续帧图像的图像数量为20或50。也即,目标三维矩阵可以是2*2*q。其中,q表示第二常数,可以随意赋值(正整数)。需要说明的是,如果不指定连续帧图像中包括的图像数量,还可以设置第三矩阵元素为空,或者设置为指定的字符,如“q”,表示不限定图像数量,可以放置任意长度的连续帧图像进行图像处理。
可以理解的是,当连续帧图像为四个不同的数据采集设备分别同步采集的连续帧图像时,四段连续帧图像的图像数量可以相同,也可以不同。
相应的,S230可以包括:
S231d、在所述图像布局界面确定连续四帧图像的多四边形连续帧布局区域,以确定所述连续四帧图像的图像布局方式。
其中,多四边形连续帧布局区域可以是图像布局界面中四种四边形区域,该区域允许放置连续的四帧图像。连续四帧图像可以是不同数据采集设备获取的四帧同步帧图像,如摄像头1、摄像头2、摄像头3及摄像头4同时采集的第2帧图像等,适用于四帧连续图像场景。连续四帧图像还可以是同一数据采集设备获取的连续四帧图像,如摄像头1采集的第2-5帧图像等。
相应的,在目标三维矩阵可以赋值为2*2*q后,图像处理工具可以在图像布局界面确定四帧图像的多四边形连续帧布局区域,以确定连续四帧图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“2”行、“2”列及“20”帧,或填写“2”行、“2”列及“q”帧,得到2*2*q的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方可以显示四个URL,如URL1、URL2、URL3和URL4,表示在图像布局界面中每个四边形区域可以对应一个数据源,该数据源也即一个数据采集设备的图像帧数据来源,每个数据源可以分别提供连续的单帧图像,各数据源同步提供的图像也即同步采集的图像。如果图3中“*图像布局”数据栏的下方显示四个相同的URL,如均显示URL1,则表示在图像布局界面中四个四边形区域均对应一个相同的数据源。相应的,四个四边形区域可以显示URL1对应的数据源的连续四帧图像。
相应的,参考图4中标号为(4)的子图,在目标三维矩阵赋值为2*2*q后,图像布局界面可以在中央区域显示多四边形连续帧布局区域,也即显示四个四边形区域,该区域允许放置连续的四帧图像。需要说明的是,图4仅是一种实现方式的示意图,双四边形连续帧布局区域可以是如图4标号为(4)所示的子图中四张四边形的单级显示方式,也即只有上、下、左及右的两个四边形区域。也还可以是四张四边形层级显示方式,如每个四边形显示的区域中有2个或3个四边形层级显示。当多四边形连续帧布局区域采用四张四边形的单级显示方式时,还可以在图像布局界面中针对不同的四边形区域分别显示“下一张”等类似的虚拟功能键,用于在各四边形区域的当前单帧图像处理完成后,跳转至下一帧单帧图像继续处理。
采用上述技术方案,通过对目标三维矩阵的第一矩阵元素和第二矩阵元素赋值为第三常数,并将第三矩阵元素赋值为第二常数,从而在图像布局界面确定连续四帧图像的多四边形连续帧布局区域,以确定连续四帧图像的图像布局方式,适用于多数据采集设备同步采集四段视频后进行连续帧或连续抽帧(对连续帧抽帧得到的图像帧)的图像标注场景,典型的场景是路口四摄(四个摄像头)车流量统计需求场景和自动驾驶的四摄环视方案(车辆安装四个摄像头实时获取图像并判断周围障碍物等情况)。
可选的,当所述图像布局应用场景类型为十帧连续图像场景时,S220可以包括:
S221e、根据所述十帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第四常数,将所述目标三维矩阵的第二矩阵元素赋值为第五常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数。
其中,十帧连续图像场景可以是对连续的十帧图像进行图像处理的应用场景类型,也即对十段连续帧图像的十个同步帧图像,或对一段连续帧图像的十个连续帧图像进行图像处理的应用场景类型。第四常数可以是4,第五常数可以是3。
可选的,当图像布局应用场景类型为十帧连续图像场景时,说明需要对十个不同的数据采集设备分别同步采集的连续帧图像进行图像处理,或者对同一数据采集设备采集的连续十帧图像进行图像处理。此时,可以将目标三维矩阵的第一矩阵元素赋值为4,将目标三维矩阵的第二矩阵元素赋值为3,并将目标三维矩阵的第三矩阵元素赋值为第二常数,如20或50等,表明连续帧图像的图像数量为20或50。也即,目标三维矩阵可以是4*3*q。其中,q表示第二常数,可以随意赋值(正整数)。需要说明的是,如果不指定连续帧图像中包括的图像数量,还可以设置第三矩阵元素为空,或者设置为指定的字符,如“q”,表示不限定图像数量,可以放置任意长度的连续帧图像进行图像处理。
可以理解的是,当连续帧图像为十个不同的数据采集设备分别同步采集的连续帧图像时,十段连续帧图像的图像数量可以相同,也可以不同。
相应的,S230可以包括:
S231e、在所述图像布局界面确定连续十帧图像的环四边形连续帧布局区域,以确定所述连续十帧图像的图像布局方式。
其中,环四边形连续帧布局区域可以是图像布局界面中十种四边形区域,该区域允许放置连续的十帧图像。连续十帧图像可以是不同数据采集设备获取的十帧同步帧图像,如摄像头1-10同时采集的第2帧图像等,适用于十帧连续图像场景。连续十帧图像还可以是同一数据采集设备获取的连续十帧图像,如摄像头1采集的第1-10帧图像等。
相应的,在目标三维矩阵可以赋值为4*3*q后,图像处理工具可以在图像布局界面确定十帧图像的环四边形连续帧布局区域,以确定连续十帧图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“4”行、“3”列及“20”帧,或填写“4”行、“3”列及“q”帧,得到4*3*q的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方可以显示十个URL,即URL1-URL10,表示在图像布局界面中每个四边形区域可以对应一个数据源,该数据源也即一个数据采集设备的图像帧数据来源,每个数据源可以分别提供连续的单帧图像,各数据源同步提供的图像也即同步采集的图像。如果图3中“*图像布局”数据栏的下方显示十个相同的URL,如均显示URL1,则表示在图像布局界面中十个四边形区域均对应一个相同的数据源。相应的,十个四边形区域可以显示URL1对应的数据源的连续十帧图像。
相应的,参考图4中标号为(5)的子图,在目标三维矩阵赋值为4*3*q后,图像布局界面可以在中央区域显示环四边形连续帧布局区域,也即显示十个可放置图像帧的四边形区域,该区域允许放置连续的十帧图像。图4中标号为(5)的子图中,中间两个空白四边形区域可以代表承载设备。其中,承载设备可以用于承载数据采集设备。示例性的,自动驾驶车辆作为承载设备,其上分布10个摄像头作为数据采集设备,各个摄像头相对自动驾驶车辆的位置可以是:前方3个,左前方一个,左后方一个,左鱼眼一个,正后方一个,右后方一个,右鱼眼一个,右前方一个。其中,1-2、2-2及3-2所在的四边形区域分别是车辆前方的三个摄像头位置,4-2所在的四边形区域是右前方的摄像头位置,10-2所在的四边形区域是左前的方摄像头的位置,5-2所在的四边形区域是右侧的摄像头的位置,9-2所在的四边形区域是左侧摄像头的位置,6-2所在的四边形区域是右后的摄像头的位置,7-2所在的四边形区域是后方的摄像头的位置,8-2所在的四边形区域是左后方摄像头的位置。也即如图中标号为(5)的子图一样,各个放置图像的四边形区域相对于承载设备是一个环形结构。
需要说明的是,图4仅是一种实现方式的示意图,环四边形连续帧布局区域可以是如图4标号为(5)所示的子图中十张四边形的单级显示方式,也即只有周边环形布置的四边形区域(包括中间两个空白四边形区域)。也还可以是十张四边形层级显示方式(包括中间两个空白四边形区域,中间的空白四边形区域可以是单级显示方式),如每个四边形显示的区域中有2个或3个四边形层级显示。当环四边形连续帧布局区域采用十张四边形的单级显示方式时,还可以在图像布局界面中针对不同的四边形区域分别显示“下一张”等类似的虚拟功能键,用于在各四边形区域的当前单帧图像处理完成后,跳转至下一帧单帧图像继续处理。
上述方案中,通过对目标三维矩阵的第一矩阵元素赋值为第四常数,将第二矩阵元素赋值为第五常数,并将第三矩阵元素赋值为第二常数,从而在图像布局界面确定连续十帧图像的环四边形连续帧布局区域,以确定连续十帧图像的图像布局方式,适用于多数据采集设备同步采集十段视频后进行连续帧或连续抽帧(对连续帧抽帧得到的图像帧)的图像标注场景,如十摄环视障碍物标注需求场景。
同时,上述图像布局方式能够高度还原数据采集设备的采集场景,可以更直观展示出来所有数据采集设备位置以及每个数据采集设备之间的关联关系,在应用于图像标注场景时,有助于辅助标注员对图像内的标注对象进行判断,从而降低标注难度,并减少标注出错概率,实现更精准、更快速的标注,能够有效提升标注效率和标注质量。
可选的,当所述图像布局应用场景类型为多帧图像清洗处理场景时,S220可以包括:
S221f、根据所述多帧图像清洗处理场景,将所述目标三维矩阵的第一矩阵元素赋值为第六常数,将所述目标三维矩阵的第二矩阵元素赋值为第七常数,并将所述目标三维矩阵的第三矩阵元素赋值为第一常数。
其中,多帧图像清洗处理场景可以是对多帧图像进行图像清洗处理的应用场景类型,所谓图像清洗也即将模糊、不清晰的图片进行删除等。第六常数可以是3、4、5、6或7等,第七常数可以是3、4、5或6等。第六常数和第七常数的具体数值可以根据实际需求设定,本申请实施例并不对第六常数和第七常数的具体数值进行限定。或者,也还可以将第六常数设置为n,将第七常数设置为m,其中,n和m可以代表固定的数值,如n代表4,m代表4,或n代表4,m代表5等。
可选的,当图像布局应用场景类型为多帧图像清洗处理场景时,说明需要对多帧图像进行图像清洗处理。此时,可以将目标三维矩阵的第一矩阵元素赋值为n,如3、4或5等,将目标三维矩阵的第二矩阵元素赋值为m,如3、4或5等,并将目标三维矩阵的第三矩阵元素赋值为1。也即,目标三维矩阵可以是n*m*1。其中,n表示第六常数,m表示第七常数,n和m可以随意赋值(正整数)。需要说明的是,n代表在图像布局界面中显示图像布局区域的行数,m代表在图像布局界面中显示图像布局区域的列数。因此,n和m的取值需要考虑图像布局界面以及各单位图像布局区域(也即一个四边形区域)的大小合理设置。
相应的,S230可以包括:
S231f、在所述图像布局界面确定多帧待清洗图像的多四边形布局区域,以确定所述多帧待清洗图像的图像布局方式。
其中,多四边形布局区域中包括的四边形区域的数量需要根据第六常数和第七常数的具体取值确定。待清洗图像也即需要进行清洗处理的图像。
相应的,在目标三维矩阵可以赋值为n*m*1后,图像处理工具可以在图像布局界面确定多帧图像的多四边形布局区域,以确定多帧待清洗图像的图像布局方式。
示例性的,如图3所示,可以在“*图像布局”数据栏,填写“4”行、“4”列及“1”帧,或填写“n”行、“m”列及“1”帧,得到n*m*1的目标三维矩阵。此时,图3中“*图像布局”数据栏的下方可以显示n*m个URL,即URL1-URLn*m(第n*m个URL),表示在图像布局界面中每个四边形区域可以对应一个数据源,该数据源也即一个数据采集设备的图像帧数据来源,每个数据源可以分别提供连续的单帧图像,各数据源同步提供的图像也即同步采集的图像。如果图3中“*图像布局”数据栏的下方显示n*m个相同的URL,如均显示URL1,则表示在图像布局界面中n*m个四边形区域均对应一个相同的数据源。相应的,n*m个四边形区域可以显示URL1对应的数据源的连续n*m帧图像。
相应的,参考图4中标号为(6)的子图,在目标三维矩阵赋值为n*m*1(假设n为4,m为4)后,图像布局界面可以在中央区域显示16个四边形区域组成的多四边形布局区域,该区域允许放置十六帧图像。也即,可以通过图像处理工具的图像布局界面一次性对16张待清洗图像进行清晰度对比和清洗处理,删除其中模糊不清的图像。需要说明的是,多四边形布局区域中的各四边形区域的大小还可以单独配置。
采用上述技术方案,通过对目标三维矩阵的第一矩阵元素赋值为第六常数,将第二矩阵元素赋值为第七常数,并将第三矩阵元素赋值为第一常数,从而在图像布局界面确定多帧待清洗图像的多四边形布局区域,以确定多帧待清洗图像的图像布局方式,适用于图像对比及清洗的场景需求。
上述技术方案,通过根据不同的图像布局应用场景类型,对获取的图像布局参数进行赋值,以根据图像布局参数的赋值结果,在图像布局界面中确定相应图像布局应用场景类型匹配的图像布局方式,扩展了图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
在一个示例中,图5是本申请实施例提供的一种图像布局装置的结构图,本实施例可适用于根据不同图像处理应用场景的布局需求进行图像布局的情况,该装置通过软件和/或硬件实现,并具体配置于电子设备中。该电子设备可以是计算机设备。
如图5所示的一种图像布局装置300,包括:参数获取模块310、参数赋值模块320和布局方式确定模块330。其中,
参数获取模块310,用于获取图像布局参数;
参数赋值模块320,用于根据图像布局应用场景类型对所述图像布局参数进行赋值;
布局方式确定模块330,用于根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
本申请实施例通过根据图像布局应用场景类型,对获取的图像布局参数进行赋值,以根据图像布局参数的赋值结果,在图像布局界面中确定图像布局应用场景类型匹配的图像布局方式,解决现有图像处理工具存在的只能满足单一应用场景需求的问题,扩展了图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
可选的,所述图像布局参数为目标三维矩阵;所述目标三维矩阵包括第一矩阵元素、第二矩阵元素以及第三矩阵元素。
可选的,所述图像布局应用场景类型为单帧图像场景;参数赋值模块320具体用于:根据所述单帧图像场景,将所述目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为第一常数;布局方式确定模块330具体用于:在所述图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定所述单帧图像的图像布局方式;所述单四边形离散帧布局区域仅允许放置单帧图像。
可选的,所述图像布局应用场景类型为单帧连续图像场景;参数赋值模块320具体用于:根据所述单帧连续图像场景,将所述目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;布局方式确定模块330具体用于:在所述图像布局界面确定连续单帧图像的单四边形连续帧布局区域,以确定所述连续单帧图像的图像布局方式;所述单四边形连续帧布局区域允许放置连续的单帧图像。
可选的,所述图像布局应用场景类型为双帧连续图像场景;参数赋值模块320具体用于:根据所述双帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第三常数,将所述目标三维矩阵的第二矩阵元素赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;布局方式确定模块330具体用于:在所述图像布局界面确定连续双帧图像的双四边形连续帧布局区域,以确定所述连续双帧图像的图像布局方式;所述双四边形连续帧布局区域允许放置连续的双帧图像;其中,所述双帧图像为不同数据采集设备获取的同步帧图像。
可选的,所述图像布局应用场景类型为四帧连续图像场景;参数赋值模块320具体用于:根据所述四帧连续图像场景,将所述目标三维矩阵的第一矩阵元素和第二矩阵元素赋值为第三常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;布局方式确定模块330具体用于:在所述图像布局界面确定连续四帧图像的多四边形连续帧布局区域,以确定所述连续四帧图像的图像布局方式;所述多四边形连续帧布局区域允许放置连续的四帧图像;其中,所述四帧图像为不同数据采集设备获取的同步帧图像。
可选的,所述图像布局应用场景类型为十帧连续图像场景;参数赋值模块320具体用于:根据所述十帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第四常数,将所述目标三维矩阵的第二矩阵元素赋值为第五常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;布局方式确定模块330具体用于:在所述图像布局界面确定连续十帧图像的环四边形连续帧布局区域,以确定所述连续十帧图像的图像布局方式;所述环四边形连续帧布局区域允许放置连续的十帧图像;其中,所述十帧图像为不同数据采集设备获取的同步帧图像。
可选的,所述图像布局应用场景类型为多帧图像清洗处理场景;参数赋值模块320具体用于:根据所述多帧图像清洗处理场景,将所述目标三维矩阵的第一矩阵元素赋值为第六常数,将所述目标三维矩阵的第二矩阵元素赋值为第七常数,并将所述目标三维矩阵的第三矩阵元素赋值为第一常数;布局方式确定模块330具体用于:在所述图像布局界面确定多帧待清洗图像的多四边形布局区域,以确定所述多帧待清洗图像的图像布局方式。
上述图像布局装置可执行本申请任意实施例所提供的图像布局方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请任意实施例提供的图像布局方法。
由于上述所介绍的图像布局装置为可以执行本申请实施例中的图像布局方法的装置,故而基于本申请实施例中所介绍的图像布局方法,本领域所属技术人员能够了解本实施例的图像布局装置的具体实施方式以及其各种变化形式,所以在此对于该图像布局装置如何实现本申请实施例中的图像布局方法不再详细介绍。只要本领域所属技术人员实施本申请实施例中图像布局方法所采用的装置,都属于本申请所欲保护的范围。
在一个示例中,本申请还提供了一种电子设备和一种可读存储介质。
图6是用来实现本申请实施例的图像布局方法的电子设备的结构示意图。如图6所示,是根据本申请实施例的图像布局方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本申请的实现。
如图6所示,该电子设备包括:一个或多个处理器401、存储器402,以及用于连接各部件的接口,包括高速接口和低速接口。各个部件利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个电子设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图6中以一个处理器401为例。
存储器402即为本申请所提供的非瞬时计算机可读存储介质。其中,所述存储器存储有可由至少一个处理器执行的指令,以使所述至少一个处理器执行本申请所提供的图像布局方法。本申请的非瞬时计算机可读存储介质存储计算机指令,该计算机指令用于使计算机执行本申请所提供的图像布局方法。
存储器402作为一种非瞬时计算机可读存储介质,可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块,如本申请实施例中的图像布局方法对应的程序指令/模块(例如,附图5所示的参数获取模块310、参数赋值模块320和布局方式确定模块330)。处理器401通过运行存储在存储器402中的非瞬时软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例中的图像布局方法。
存储器402可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储实现图像布局方法的电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中,存储器402可选包括相对于处理器401远程设置的存储器,这些远程存储器可以通过网络连接至实现图像布局方法的电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
实现图像布局方法的电子设备还可以包括:输入装置403和输出装置404。处理器401、存储器402、输入装置403和输出装置404可以通过总线或者其他方式连接,图6中以通过总线连接为例。
输入装置403可接收输入的数字或字符信息,以及产生与实现图像布局方法的电子设备的用户设置以及功能控制有关的键信号输入,例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置404可以包括显示设备、辅助照明装置(例如,LED)和触觉反馈装置(例如,振动电机)等。该显示设备可以包括但不限于,液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中,显示设备可以是触摸屏。
此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令,并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的,术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如,磁盘、光盘、存储器、可编程逻辑装置(PLD)),包括,接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端可以是智能手机、笔记本电脑、台式计算机、平板电脑、智能音箱等,但并不局限于此。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云计算、云服务、云数据库、云存储等基础云计算服务的云服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
本申请实施例通过根据图像布局应用场景类型,对获取的图像布局参数进行赋值,以根据图像布局参数的赋值结果,在图像布局界面中确定图像布局应用场景类型匹配的图像布局方式,解决现有图像处理工具存在的只能满足单一应用场景需求的问题,扩展了图像布局功能,提高了图像处理工具的通用性,从而满足多种图像处理场景的应用需求。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本申请公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本申请保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等,均应包含在本申请保护范围之内。

Claims (18)

1.一种图像布局方法,包括:
获取图像布局参数;
根据图像布局应用场景类型对所述图像布局参数进行赋值;
根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
2.根据权利要求1所述的方法,其中,所述图像布局参数为目标三维矩阵;
所述目标三维矩阵包括第一矩阵元素、第二矩阵元素以及第三矩阵元素。
3.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为单帧图像场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述单帧图像场景,将所述目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为第一常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定所述单帧图像的图像布局方式;
所述单四边形离散帧布局区域仅允许放置单帧图像。
4.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为单帧连续图像场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述单帧连续图像场景,将所述目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定连续单帧图像的单四边形连续帧布局区域,以确定所述连续单帧图像的图像布局方式;
所述单四边形连续帧布局区域允许放置连续的单帧图像。
5.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为双帧连续图像场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述双帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第三常数,将所述目标三维矩阵的第二矩阵元素赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定连续双帧图像的双四边形连续帧布局区域,以确定所述连续双帧图像的图像布局方式;
所述双四边形连续帧布局区域允许放置连续的双帧图像;其中,所述双帧图像为不同数据采集设备获取的同步帧图像。
6.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为四帧连续图像场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述四帧连续图像场景,将所述目标三维矩阵的第一矩阵元素和第二矩阵元素赋值为第三常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定连续四帧图像的多四边形连续帧布局区域,以确定所述连续四帧图像的图像布局方式;
所述多四边形连续帧布局区域允许放置连续的四帧图像;其中,所述四帧图像为不同数据采集设备获取的同步帧图像。
7.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为十帧连续图像场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述十帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第四常数,将所述目标三维矩阵的第二矩阵元素赋值为第五常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定连续十帧图像的环四边形连续帧布局区域,以确定所述连续十帧图像的图像布局方式;
所述环四边形连续帧布局区域允许放置连续的十帧图像;其中,所述十帧图像为不同数据采集设备获取的同步帧图像。
8.根据权利要求2所述的方法,其中,所述图像布局应用场景类型为多帧图像清洗处理场景;
根据图像布局应用场景类型对所述图像布局参数进行赋值,包括:
根据所述多帧图像清洗处理场景,将所述目标三维矩阵的第一矩阵元素赋值为第六常数,将所述目标三维矩阵的第二矩阵元素赋值为第七常数,并将所述目标三维矩阵的第三矩阵元素赋值为第一常数;
所述根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式,包括:
在所述图像布局界面确定多帧待清洗图像的多四边形布局区域,以确定所述多帧待清洗图像的图像布局方式。
9.一种图像布局装置,包括:
参数获取模块,用于获取图像布局参数;
参数赋值模块,用于根据图像布局应用场景类型对所述图像布局参数进行赋值;
布局方式确定模块,用于根据所述图像布局参数的赋值结果,在图像布局界面中确定所述图像布局应用场景类型匹配的图像布局方式。
10.根据权利要求9所述的装置,其中,所述图像布局参数为目标三维矩阵;
所述目标三维矩阵包括第一矩阵元素、第二矩阵元素以及第三矩阵元素。
11.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为单帧图像场景;
所述参数赋值模块具体用于:根据所述单帧图像场景,将所述目标三维矩阵的第一矩阵元素、第二矩阵元素以及第三矩阵元素均赋值为第一常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定单帧图像的单四边形离散帧布局区域,以确定所述单帧图像的图像布局方式;
所述单四边形离散帧布局区域仅允许放置单帧图像。
12.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为单帧连续图像场景;
所述参数赋值模块具体用于:根据所述单帧连续图像场景,将所述目标三维矩阵的第一矩阵元素以及第二矩阵元素均赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定连续单帧图像的单四边形连续帧布局区域,以确定所述连续单帧图像的图像布局方式;
所述单四边形连续帧布局区域允许放置连续的单帧图像。
13.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为双帧连续图像场景;
所述参数赋值模块具体用于:根据所述双帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第三常数,将所述目标三维矩阵的第二矩阵元素赋值为第一常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定连续双帧图像的双四边形连续帧布局区域,以确定所述连续双帧图像的图像布局方式;
所述双四边形连续帧布局区域允许放置连续的双帧图像;其中,所述双帧图像为不同数据采集设备获取的同步帧图像。
14.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为四帧连续图像场景;
所述参数赋值模块具体用于:根据所述四帧连续图像场景,将所述目标三维矩阵的第一矩阵元素和第二矩阵元素赋值为第三常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定连续四帧图像的多四边形连续帧布局区域,以确定所述连续四帧图像的图像布局方式;
所述多四边形连续帧布局区域允许放置连续的四帧图像;其中,所述四帧图像为不同数据采集设备获取的同步帧图像。
15.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为十帧连续图像场景;
所述参数赋值模块具体用于:根据所述十帧连续图像场景,将所述目标三维矩阵的第一矩阵元素赋值为第四常数,将所述目标三维矩阵的第二矩阵元素赋值为第五常数,并将所述目标三维矩阵的第三矩阵元素赋值为第二常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定连续十帧图像的环四边形连续帧布局区域,以确定所述连续十帧图像的图像布局方式;
所述环四边形连续帧布局区域允许放置连续的十帧图像;其中,所述十帧图像为不同数据采集设备获取的同步帧图像。
16.根据权利要求10所述的装置,其中,所述图像布局应用场景类型为多帧图像清洗处理场景;
所述参数赋值模块具体用于:根据所述多帧图像清洗处理场景,将所述目标三维矩阵的第一矩阵元素赋值为第六常数,将所述目标三维矩阵的第二矩阵元素赋值为第七常数,并将所述目标三维矩阵的第三矩阵元素赋值为第一常数;
所述布局方式确定模块具体用于:在所述图像布局界面确定多帧待清洗图像的多四边形布局区域,以确定所述多帧待清洗图像的图像布局方式。
17.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-8中任一项所述的图像布局方法。
18.一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行权利要求1-8中任一项所述的图像布局方法。
CN202010693433.5A 2020-07-17 2020-07-17 一种图像布局方法、装置、电子设备及存储介质 Active CN111857478B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010693433.5A CN111857478B (zh) 2020-07-17 2020-07-17 一种图像布局方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010693433.5A CN111857478B (zh) 2020-07-17 2020-07-17 一种图像布局方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111857478A true CN111857478A (zh) 2020-10-30
CN111857478B CN111857478B (zh) 2022-02-11

Family

ID=73001053

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010693433.5A Active CN111857478B (zh) 2020-07-17 2020-07-17 一种图像布局方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111857478B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060265671A1 (en) * 2005-05-20 2006-11-23 Sharp Kabushiki Kaisha Data processing setting apparatus, data processing setting method, data processing setting program, and computer readable recording medium recording the program
CN101699394A (zh) * 2009-10-28 2010-04-28 金蝶软件(中国)有限公司 一种自动生成用户界面的方法及装置
US20110176710A1 (en) * 2005-10-25 2011-07-21 Bracco Imaging S.P.A. Method and system for automatic processing and evaluation of images, particularly diagnostic images
CN103207870A (zh) * 2012-01-17 2013-07-17 华为技术有限公司 一种照片分类管理方法、服务器、装置及系统
CN104615769A (zh) * 2015-02-15 2015-05-13 小米科技有限责任公司 图片分类方法及装置
US20170039746A1 (en) * 2015-08-07 2017-02-09 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium storing program
CN106886418A (zh) * 2017-03-27 2017-06-23 湛江市霞山区新软佳科技有限公司 Html界面控件贴
CN109916300A (zh) * 2019-03-20 2019-06-21 天远三维(天津)科技有限公司 基于在线图像处理的面向三维扫描的标志点粘贴指示方法
CN110162248A (zh) * 2019-04-22 2019-08-23 西安万像电子科技有限公司 显示处理方法、装置及系统
CN110209366A (zh) * 2019-06-08 2019-09-06 森大(深圳)技术有限公司 可实时调整图像布局的打印控制方法、装置、设备及介质
CN111402364A (zh) * 2018-12-27 2020-07-10 北京字节跳动网络技术有限公司 一种图像生成方法、装置、终端设备及存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060265671A1 (en) * 2005-05-20 2006-11-23 Sharp Kabushiki Kaisha Data processing setting apparatus, data processing setting method, data processing setting program, and computer readable recording medium recording the program
US20110176710A1 (en) * 2005-10-25 2011-07-21 Bracco Imaging S.P.A. Method and system for automatic processing and evaluation of images, particularly diagnostic images
CN101699394A (zh) * 2009-10-28 2010-04-28 金蝶软件(中国)有限公司 一种自动生成用户界面的方法及装置
CN103207870A (zh) * 2012-01-17 2013-07-17 华为技术有限公司 一种照片分类管理方法、服务器、装置及系统
CN104615769A (zh) * 2015-02-15 2015-05-13 小米科技有限责任公司 图片分类方法及装置
US20170039746A1 (en) * 2015-08-07 2017-02-09 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium storing program
CN106886418A (zh) * 2017-03-27 2017-06-23 湛江市霞山区新软佳科技有限公司 Html界面控件贴
CN111402364A (zh) * 2018-12-27 2020-07-10 北京字节跳动网络技术有限公司 一种图像生成方法、装置、终端设备及存储介质
CN109916300A (zh) * 2019-03-20 2019-06-21 天远三维(天津)科技有限公司 基于在线图像处理的面向三维扫描的标志点粘贴指示方法
CN110162248A (zh) * 2019-04-22 2019-08-23 西安万像电子科技有限公司 显示处理方法、装置及系统
CN110209366A (zh) * 2019-06-08 2019-09-06 森大(深圳)技术有限公司 可实时调整图像布局的打印控制方法、装置、设备及介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
YAN TIAN ET AL.: "Image Zooming Method Using 2D EMD Technique", 《2006 6TH WORLD CONGRESS ON INTELLIGENT CONTROL AND AUTOMATION》 *
李一清: "基于虚拟视觉的室内空间布局三维模拟系统设计", 《电子设计工程》 *

Also Published As

Publication number Publication date
CN111857478B (zh) 2022-02-11

Similar Documents

Publication Publication Date Title
KR102463304B1 (ko) 비디오 처리 방법 및 장치, 전자기기, 컴퓨터 판독 가능한 저장 매체 및 컴퓨터 프로그램
EP3989116A1 (en) Method and apparatus for detecting target object, electronic device and storage medium
CN111753961A (zh) 模型训练方法和装置、预测方法和装置
US20220036731A1 (en) Method for detecting vehicle lane change, roadside device, and cloud control platform
CN112330815B (zh) 基于障碍物融合的三维点云数据处理方法、装置和设备
CN111722245A (zh) 定位方法、定位装置和电子设备
CN111524166A (zh) 视频帧的处理方法和装置
CN111860305B (zh) 一种图像标注方法、装置、电子设备及存储介质
CN112102417B (zh) 确定世界坐标的方法和装置
CN111783952A (zh) 配置方法、装置、系统、电子设备以及存储介质
US11694405B2 (en) Method for displaying annotation information, electronic device and storage medium
CN111601013B (zh) 用于处理视频帧的方法和装置
US20210264155A1 (en) Visual positioning method and apparatus, and computer-readable storage medium
US11330030B2 (en) Network resource oriented data communication
KR102056417B1 (ko) 클러스터 기반의 포토 네비게이션
CN111862305A (zh) 处理图像的方法、装置和计算机存储介质
CN111524165A (zh) 目标跟踪方法和装置
CN110798681B (zh) 成像设备的监测方法、装置和计算机设备
US20210407184A1 (en) Method and apparatus for processing image, electronic device, and storage medium
CN111696134B (zh) 一种目标检测方法、装置以及电子设备
CN111857478B (zh) 一种图像布局方法、装置、电子设备及存储介质
CN111967481A (zh) 视觉定位方法、装置、电子设备及存储介质
CN109145681B (zh) 用于判断目标旋转方向的方法及装置
Singh et al. Real‐Time Implementation of Change Detection for Automated Video Surveillance System
CN111339852B (zh) 追踪方法、装置、电子设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant