CN112905821A - 图像显示方法、装置、设备及存储介质 - Google Patents
图像显示方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN112905821A CN112905821A CN201911222273.XA CN201911222273A CN112905821A CN 112905821 A CN112905821 A CN 112905821A CN 201911222273 A CN201911222273 A CN 201911222273A CN 112905821 A CN112905821 A CN 112905821A
- Authority
- CN
- China
- Prior art keywords
- image
- data
- target
- target image
- key data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000005856 abnormality Effects 0.000 claims description 24
- 238000007405 data analysis Methods 0.000 claims description 12
- 230000008569 process Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 7
- 230000002159 abnormal effect Effects 0.000 description 4
- 235000019504 cigarettes Nutrition 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 239000013056 hazardous product Substances 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000000391 smoking effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000013024 troubleshooting Methods 0.000 description 2
- 101100055496 Arabidopsis thaliana APP2 gene Proteins 0.000 description 1
- 101100016250 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) GYL1 gene Proteins 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/54—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请提供一种图像显示方法、装置、设备及存储介质，包括：获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；对所述第一编码数据进行解码得到所述目标图像；对所述第二编码数据进行解码得到所述关键数据；在同一显示窗口显示所述目标图像和所述关键数据。使用本申请提供的方法，图片查看器可以在同一窗口显示图像以及图像关联的关键数据。
Description
技术领域
本申请涉及计算机通信领域，尤其涉及一种图像显示方法、装置、设备及存储介质。
背景技术
图片查看器是用于查看图像的工具。现有的图片查看器包括：windows图片查看器，JPEG图片查看器等等。
然而，现有的图片查看器仅能显示图像数据包中的图像，而无法显示与图像关联的关键数据(比如图像中的目标对象数据等等)。
发明内容
有鉴于此，本申请提供一种图像显示方法、装置、设备及存储介质，用以实现图像以及与该图像关联的关键数据的显示。
具体地，本申请是通过如下技术方案实现的：
根据本申请的第一方面，提供一种图像显示方法，所述方法应用于电子设备上的图片查看器，所述方法包括：
获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；
对所述第一编码数据进行解码得到所述目标图像；
对所述第二编码数据进行解码得到所述关键数据；
在同一显示窗口显示所述目标图像和所述关键数据。
可选的，所述在同一显示窗口显示所述目标图像和所述关键数据，包括：
将所述关键数据叠加至所述目标图像中的第一指定位置，通过同一显示窗口显示叠加了所述关键数据的目标图像；
或者，
将所述关键数据配置在所述目标图像周围的第二指定位置，通过同一显示窗口显示配置了关键数据的目标图像。
可选的，所述关键数据包括：从所述目标图像中识别出的目标对象数据、从N帧图像中分别识别出的目标对象数据、和/或N帧图像分别对应的上传数据；所述N帧图像为所述图像采集设备在采集该目标图像之前采集的、且需要上传至所述电子设备的N帧图像；N帧图像中每帧图像对应的上传数据用于表征该帧图像的上传情况；
所述方法还包括：
对所述关键数据进行数据分析，基于数据分析结果，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常；
若出现图像识别异常、和/或图像上传异常，则基于数据分析结果，确定异常原因。
根据本申请的第二方面，提供一种图像显示方法，所述方法应用于图像采集设备，所述方法包括：
采集目标图像；
依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据；
对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包；
将所述图像数据包发送至电子设备，以使得所述电子设备上的图片查看器对所述第一编码数据进行解码得到所述目标图像，对所述第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
可选的，基于第一编码数据和第二编码数据生成所述目标图像的图像数据包包括：在所述图像数据包的保留字段中记录所述第二编码数据。
可选的，所述设定的数据添加策略包括：
对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据；
在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像分别对应的上传数据、以及从N帧图像中分别识别出的目标对象数据；每帧图像对应的上传数据用于表征该帧图像的上传情况；
将所述目标对象数据、N帧图像的上传数据、以及从N帧图像中分别识别出的目标对象数据作为所述关键数据。
根据本申请的第三方面，提供一种图像显示装置，所述装置应用于电子设备上的图片查看器，所述装置包括：
获取单元，用于获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；
解码单元，用于对所述第一编码数据进行解码得到所述目标图像；对所述第二编码数据进行解码得到所述关键数据；
显示单元，用于在同一显示窗口显示所述目标图像和所述关键数据。
根据本申请的第四方面，本申请还提供了一种图像显示装置，所述装置应用于图像采集设备，所述装置包括：
采集单元，用于采集目标图像；
确定单元，用于依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据；
编码单元，用于对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包；
发送单元，用于将所述图像数据包发送至电子设备，以使得所述电子设备上的图片查看器对所述第一编码数据进行解码得到所述目标图像，对所述第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
可选的，所述设定的数据添加策略包括：
对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据；
在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像分别对应的上传数据、以及从N帧图像中分别识别出的目标对象数据；每帧图像对应的上传数据用于表征该帧图像的上传情况；
将所述目标对象数据、N帧图像的上传数据、以及从N帧图像中分别识别出的目标对象数据作为所述关键数据。
根据本申请的第五方面，提供一种电子设备，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器被所述机器可执行指令促使执行第一方面所述方法。
根据本申请的第六方面，提供一种机器可读存储介质，所述机器可读存储介质存储有机器可执行指令，在被处理器调用和执行时，所述机器可执行指令促使所述处理器执行第一方面所述方法。
根据本申请的第七方面，提供一种图像采集设备，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器被所述机器可执行指令促使执行第二方面所述方法。
根据本申请的第八方面，提供一种机器可读存储介质，所述机器可读存储介质存储有机器可执行指令，在被处理器调用和执行时，所述机器可执行指令促使所述处理器执行第二方面所述方法。
由上述描述可知，一方面，由于电子设备在接收到图像采集设备发送的图像数据包时，不仅可以对该图像数据包携带的第一编码数据进行解码得到目标图像，还可以对图像数据包携带的第二编码数据进行解码得到关键数据。然后，图片查看器可在同一显示窗口显示该目标图像和关键数据，使得用户在查看目标图像的同时还可以看到目标图像上的关键数据，使得用户更为直观从目标图像上看到与目标图像关联的关键数据。
另一方面，图片查看器还对关键数据进行数据分析，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常以及异常原因，从而实现了故障的自动排查。
附图说明
图1是本申请一示例性实施例示出的图像显示的组网示意图；
图2是本申请一示例性实施例示出的一种图像显示方法的流程图；
图3a是本申请一示例性实施例示出的一种图像显示的示意图；
图3b是本申请一示例性实施例示出的一种图像显示的示意图；
图4是本申请一示例性实施例示出的一种图像显示方法的流程图；
图5是本申请一示例性实施例示出的一种电子设备的硬件结构图；
图6是本申请一示例性实施例示出的一种图像显示装置的框图；
图7是本申请一示例性实施例示出的一种图像采集设备的硬件结构图；
图8是本申请一示例性实施例示出的另一种图像显示装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请旨在提出一种图像显示方法，由于电子设备在接收到图像采集设备发送的图像数据包时，不仅可以对该图像数据包携带的第一编码数据进行解码得到目标图像，还可以对图像数据包携带的第二编码数据进行解码得到关键数据。然后，图片查看器可在同一显示窗口显示该目标图像和关键数据，使得用户在查看目标图像的同时还可以看到目标图像上的关键数据。
与现有的图片查看器只能显示图像相比，由于本申请提供的图片查看器既可以显示目标图像，还可以在显示目标图像的同时显示与该目标图像关联的关键数据，使得用户更为直观从目标图像上看到与目标图像关联的关键数据。
参见图1，图1是本申请一示例性实施例示出的图像显示的组网示意图。
该组网包括：图像采集设备和电子设备。
其中，上述图像采集设备是指用于图像采集的设备，比如摄像头、摄像机等，这里只是对图像采集设备进行示例性地说明，不进行具体地限定。
上述电子设备，用于接收图像采集设备上传的图像，并对图像进行处理。该电子设备可以是服务器，也可以是计算机等，这里只是对电子设备进行示例性地说明，不进行具体地限定。
该电子设备上配置有图片查看器，图片查看器可以获取图像采集设备上传的图像的图像数据包，并显示图像数据包携带的图像以及与该图像关联的关键数据。
参见图2，图2是本申请一示例性实施例示出的一种图像显示方法的流程图，该方法可应用在电子设备的图片查看器上，可包括如下所示步骤。
步骤201：电子设备的图片查看器获取图像采集设备发送的图像数据包。
其中，所述图像数据包包括：第一编码数据和第二编码数据。
上述第一编码数据，是所述图像采集设备对采集的目标图像进行编码得到的数据。
上述第二编码数据，是所述图像采集设备对关键数据进行编码得到的数据。
上述关键数据，是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据。
在一种可选的实现方式中，该关键数据可包括：从所述目标图像中识别出的目标对象数据、从N帧图像中分别识别出的目标对象数据、和/或N帧图像分别对应的上传数据等。当然，根据实际需求，该关键数据还可包括其他内容，这里只是对关键数据所包含的内容进行示例性地说明，不进行具体地限定。
1)从目标图像中识别出的目标对象数据
从目标图像中识别出的目标对象数据，是指与目标图像中所包含目标对象相关的数据。
例如，假设目标图像包含的目标对象为车辆，则从目标图像中识别出的目标对象数据可包括：
A、目标车辆的标识信息，如目标车辆的ID、目标车辆在图像中的位置信息、目标车辆所在图像的帧号等。
B、2、图像中的目标车辆的车牌识别信息，比如车牌号、车牌类型(如民用车牌等)、车牌识别结果的置信度、识别出车牌中的每个字符的置信度、识别出的车牌中字符个数、字符编码、识别出的车牌是否越界、车牌识别是否成功，车牌定位是否成功、车牌倾斜角度、斜率和截距、车牌字符分割位置、车牌识别耗时、车牌在图片中的位置、车牌亮度、网络常量等等。
C、图像中的目标车辆的特征信息。如车身颜色、车辆类型、车辆品牌等。
D、图像中的车窗特征信息。如驾驶员是否佩戴安全带、遮阳板使用情况、驾驶员是否使用危险品、驾驶员是否打电话、驾驶员是否抽烟、以及驾驶员的姿态等等。
E、其他信息。如车速、图像中的道路限速、对目标车辆进行识别的程序的版本号、图像宽高、车牌识别模式、默认车牌识别省份(如浙江省等)、检测区域、初始区域、参数输入是否正常，车牌识别是否超时等。
这里只是对目标对象数据进行示例性第说明，不进行具体地限定。
2)从N帧图像中分别识别出的目标对象数据
N帧图像是指本图像采集设备在采集该目标图像之前采集的、且需要上传至所述电子设备的N帧图像。其中，N为大于0的整数。
例如，假设图像采集设备当前采集的图像为第4帧图像，则该第4帧图像为上述目标图像。
假设N为3，则第1帧图像、第2帧图像、第3帧图像即为N帧图像。
从N帧图像中分别识别出的目标对象数据，是指N帧图像中的与每一帧图像所包含的目标对象关联的数据。
例如，假设N帧图像为上述第1帧至第3帧图像。
假设，从第1帧图像中识别出目标对象1的数据，从第2帧图像中识别出目标对象2的数据，从第3帧图像中识别出目标对象3的数据。
从N帧图像中分别识别出的目标对象数据为目标对象1的数据、目标对象2的数据和目标对象3的数据。
3)N帧图像分别对应的上传数据
N帧图像中的每一帧图像的上传数据用于记录该帧图像的上传情况。
例如，每一帧图像的上传数据包括：该帧图像是否被上传。若该帧图像未被上传，该上传数据中还包括：该帧图像未被上传的原因(比如由于图像采集设备存储空间满了，将该帧图像删除了)。若该帧图像被上传，则该上传数据中还包括：上传时间等等。
当然，在实际应用中，该每帧图像对应的上传数据还可包括其他内容，这里只是对上传数据进行示例性地说明，不进行具体地限定。
以上是对本申请所涉及的几个概念进行介绍，下面介绍“步骤201：图片查看器获取图像采集设备发送的图像数据包”的实现方式。
在实现步骤201的一种可选的实现方式中，电子设备可将图像采集设备发送的图像数据包进行记录。用户可在图片查看器中选择图像数据包，以由图片查看器从电子设备记录的图像数据包，获取用户选择出的图像数据包。
在实现时，图片查看器可接收用户输入的图片显示指令。该图片显示指令携带了用户所选择的图像数据包标识。
图片查看器基于该图像数据包标识在电子设备已记录的图像数据包中，获取与该图像数据包标识对应的图像数据包。
在实现步骤201的另一种可选的实现方式中，电子设备每接收到一个图像数据包，就将该图像数据包发送给图片查看器。图片查看器可接收电子设备发送的图像数据包。
当然，这里只是对“图片查看器获取图像采集设备发送的图像数据包”进行示例性地说明，不对其进行具体地限定。
步骤202：图片查看器对所述第一编码数据进行解码得到所述目标图像。
步骤203：图片查看器对所述第二编码数据进行解码得到所述关键数据。
在传统的图像数据包中，通常只包括用于表征目标图像的第一编码数据。
在本申请中，为了使得图像数据包可以携带用于表征关键数据的第二编码数据。本申请可以利用图像数据包中的保留字段来携带第二编码数据。或者本申请对图像数据包中进行了扩展，得到扩展字段，通过扩展字段携带该第二编码数据。
例如，假设编码方式为JPEG(Joint Photographic Experts Group，联合图像专家小组，是一种压缩编码方式)方式，以图像数据包为JPEG图像数据包为例。
JPEG数据包中包含APPn(应用程序保留标记n)保留字段。图像采集设备可将第二编码数据携带在APPn字段中。比如将第二编码数据携带在图像数据包中的APP2字段中。
在实现时，图片查看器可以从图像数据包中提取第一编码数据，并对第一编码数据进行解码得到目标图像。图片查看器还可从预设的保留字段或者扩展字段中读取第二编码数据，并对第二编码数据进行解码得到关键数据。
还需要说明的是，传统的图片查看器通常不会读取图像数据包的保留字段或者扩展字段携带的数据。或者传统的图片查看器在读取到保留字段或者扩展字段中携带的数据后，并不对数据进行解码。
而本申请的提供的图片查看器可以从图像数据包的保留字段或者扩展字段中读取第二编码数据，并对第二编码数据进行解码得到关键数据。所以本申请提供的图片查看器与现有的图片查看器是不同的。
步骤204：图片查看器在同一显示窗口显示所述目标图像和所述关键数据。
方式一：图片查看器将所述关键数据叠加至所述目标图像中的第一指定位置，通过同一显示窗口显示叠加了所述关键数据的目标图像。
例如，如图3a所示，图3a中文字即为关键数据，图3a中的图片即为目标图像。由图3a可以看出，关键数据叠加在了目标图像上，图片查看器通过同一显示窗口显示叠加了所述关键数据的目标图像。
方式二：图片查看器可将所述关键数据配置在所述目标图像周围的第二指定位置，通过同一显示窗口显示配置了关键数据的目标图像。
例如，如图3b所示，图3b中文即为关键数据，图3b中的图片即为目标图像。由图3b可以看出，关键数据被配置在了目标图像的周围，图片查看器通过同一显示窗口显示配置了所述关键数据的目标图像。
这里只是对“在同一显示窗口显示所述目标图像和所述关键数据”进行示例性地说明，不进行具体地限定。
还需要说明的是，该关键数据可以是文本信息，也可以是其他类型的信息，比如图像信息、音频信息等，这里只是对图像信息的类型进行示例性地说明，不进行具体地限定。
此外，图3a和图3b显示的关键数据可包括：
1、目标车辆的标识信息，如目标车辆的ID、目标车辆在图像中的位置信息、目标车辆所在图像的帧号等。
2、图像中的目标车辆的车牌识别信息，比如车牌号、车牌类型(如民用车牌等)、车牌识别结果的置信度、识别出车牌中的每个字符的置信度、识别出的车牌中字符个数、字符编码、识别出的车牌是否越界、车牌识别是否成功，车牌定位是否成功、车牌倾斜角度、斜率和截距、车牌字符分割位置、车牌识别耗时、车牌在图片中的位置、车牌亮度、网络常量等等。
3、图像中的目标车辆的特征信息。如车身颜色、车辆类型、车辆品牌等。
4、图像中的目标车辆车窗特征信息。如驾驶员是否佩戴安全带、遮阳板使用情况、驾驶员是否使用危险品、驾驶员是否打电话、驾驶员是否抽烟、以及驾驶员的姿态等等。
5、其他信息。如车速、图像中的道路限速、对目标车辆进行识别的程序的版本号、图像宽高、车牌识别模式、默认车牌识别省份(如浙江省等)、检测区域、初始区域、参数输入是否正常，车牌识别是否超时等。
6、该图像的前N帧历史图像中的目标车辆相关信息(前N帧历史图像中的目标车辆相关信息包括上述1-5所包含的信息，这里不再赘述)。
7、该图像的前N帧历史图像的上传情况。
比如，N帧图像中被上传的图像的数量，N帧图像的帧号。
针对每一个帧图像，该帧图像是否被上传。若该帧图像未被上传，该上传数据中还包括：该帧图像未被上传的原因(比如由于图像采集设备存储空间满了，将该帧图像删除了；再如存图异常信息等)。若该帧图像被上传，则该上传数据中还包括：上传时间等等。
这里只是示例性地说明了关键数据，在实际应用中，该关键数据还可包括其他内容，这里不进行具体地限定。
需要说明的是，图3a和图3b只画出了所要显示的关键数据的一部分，在实际应用中，图3a和图3b可显示上述所描述的所有关键数据。
此外，在本申请实施例中，图片查看器还对所述关键数据进行数据分析，基于数据分析结果，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常；
若出现图像识别异常、和/或图像上传异常，图片查看器则可基于数据分析结果，确定异常原因。
例如，假设关键数据包括：图像采集设备采集并上传了图像帧1，以及图像帧1的目标对象数据；图像采集设备采集了图像帧2，但并未上传图像帧2，图像采集设备存储空间满了将图像帧2删除；图像采集设备采集并上传了图像帧3，以及图像帧3的目标对象数据、图像帧4(当前上传的目标图像)的目标对象数据。
图片查看器基于该关键数据可确定上传过程中丢失了图像帧2,(图像上传异常)，而丢包原因是图像采集设备存储空间满了，将图像帧2主动删除。
又例如，假设关键数据包括：图像采集设备采集并上传了图像帧1，以及图像帧1的目标对象数据；图像采集设备采集并上传了图像帧2；图像采集设备采集并上传了图像帧3，以及图像帧3的目标对象数据、图像帧4(当前上传的目标图像)的目标对象数据。
假设图片查看器只收到了图像帧1和图像帧3。图片查看器基于该关键数据和本地收到的图像帧1和图像帧3，确定图像帧2丢失。并且基于关键数据确定图像采集设备上传了图像帧2，但图片查看器并未收到图像帧2，因此可以确定图像帧2丢失的原因是图像采集设备和电子设备之间的网络问题造成的丢包。
再例如，假设关键数据包括：图像采集设备采集并上传了图像帧1，以及图像帧1的目标对象数据；图像采集设备采集并上传了图像帧2；图像采集设备采集并上传了图像帧3，以及图像帧3的目标对象数据、图像帧4(当前上传的目标图像)的目标对象数据。
假设图像帧4中的目标对象数据为车牌为浙A12345的车辆。图片查看器可对图像帧4进行图像识别，得到目标对象数据，假设得到了浙A12845的车辆。由于图片查看器从目标图像中识别出的目标对象数据与关键数据中包括的目标图像的目标对象数据不同，所以则确定图像采集设备出现识别异常的问题。
这里只是对基于关键数据进行异常排查的示例性说明，不对其进行具体地限定。
由上述描述可知，一方面，由于电子设备在接收到图像采集设备发送的图像数据包时，不仅可以对该图像数据包携带的第一编码数据进行解码得到目标图像，还可以对图像数据包携带的第二编码数据进行解码得到关键数据。然后，图片查看器可在同一显示窗口显示该目标图像和关键数据，使得用户在查看目标图像的同时还可以看到目标图像上的关键数据，使得用户更为直观从目标图像上看到与目标图像关联的关键数据。
另一方面，图片查看器还对关键数据进行数据分析，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常以及异常原因，从而实现了故障的自动排查。
参见图4，图4是本申请一示例性实施例示出的一种图像显示方法的流程图，该方法可应用在图1所示的图像采集设备上，可包括如下所示步骤。
步骤401：图像采集设备采集目标图像；
在实现时，图像采集设备可按照预设算法采集图像作为目标图像。
例如，图像采集设备可周期性地采集图像，并将采集到的图像作为目标图像。
当然，图像采集设备还可以在检测到有目标对象经过时，采集该目标对象的图像作为目标图像。这里只是对“图像采集设备可按照预设算法采集图像作为目标图像”的示例性说明，不对其进行具体地限定。
需要说明的是，上述目标对象可以是人，也可以是交通工具等，这里不对目标对象进行具体地限定。
步骤402：图像采集设备依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据。
在一种可选的实现方式中，该设定的数据添加策略可包括：
1)获取从目标图像中识别出的目标对象数据。
在实现时，对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据。
例如，图像采集设备可依据CNN(Convolutional Neural Networks，卷积神经网络)网络等神经网络目标图像中的目标对象进行识别，得到目标对象数据。
这里不对图像识别算法进行具体地限定。
2)获取从N帧图像中分别识别出的目标对象数据、以及N帧图像分别对应的上传数据。
在本申请实施例中，配置了历史图像库，该历史图像库记录了多条图像记录。
每一条图像记录中包括：图像采集设备在当前时刻之前采集的、且需要上传的每一帧图像、以及每一帧图像中的目标对象数据、上传数据、该图像记录添加至历史图像库中的添加时刻。当然，根据实际情况，该每一条图像记录中还可包括其他内容，这里不进行具体地限定。
在实现时，在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像对应的上传数据、以及从N帧图像中分别识别出的目标对象数据。
例如，图像采集设备可在历史图像库中选择添加时刻距离当前时刻最近的前N个图像记录。
图像采集设备可分别获取N个图像记录中记录的目标对象数据和上传数据，作为从N帧图像中分别识别出的目标对象数据、以及N帧图像分别对应的上传数据。
步骤403：图像采集设备对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包。
在本申请实施例中，图像采集设备可以按照预设的编码方式对目标图像进行编码，得到第一编码数据，以及关键数据进行压缩编码，得到第二编码数据。
其中，该预设的编码方式可以是JPEG，也可以是PGN(Portable Network GraphicFormat，图像文件存储格式)等，这里只是对预设的编码方法进行示例性地说明，不进行具体地限定。
然后，图像采集设备可以基于第一编码数据和第二编码数据，生成该目标图像的图像数据包。比如，图像采集设备可在所述图像数据包的保留字段中记录所述第二编码数据。
例如，当编码方式为JPEG编码时，该目标图像的图像数据包的APPn字段携带了第二编码数据。
步骤404：图像采集设备将所述目标图像的图像数据包发送至电子设备，以由电子设备上的图片查看器对第一编码数据进行解码得到所述目标图像，对第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
具体可参见上述步骤201至步骤204，这里不再赘述。
由上述描述可知，由于电子设备在接收到图像采集设备发送的图像数据包时，不仅可以对该图像数据包携带的第一编码数据进行解码得到目标图像，还可以对图像数据包携带的第二编码数据进行解码得到关键数据。然后，图片查看器可在同一显示窗口显示该目标图像和关键数据，使得用户在查看目标图像的同时还可以看到目标图像上的关键数据，使得用户更为直观从目标图像上看到与目标图像关联的关键数据。
此外，本申请还提供了上述电子设备。
参见图5，图5是本申请一示例性实施例示出的一种电子设备的硬件结构图。
该电子设备包括：通信接口501、处理器502、机器可读存储介质503和总线504；其中，通信接口501、处理器502和机器可读存储介质503通过总线504完成相互间的通信。处理器502通过读取并执行机器可读存储介质503中与图像显示控制逻辑对应的机器可执行指令，可执行上文描述的图像显示方法。
本文中提到的机器可读存储介质503可以是任何电子、磁性、光学或其它物理存储装置，可以包含或存储信息，如可执行指令、数据，等等。例如，机器可读存储介质可以是：易失存储器、非易失性存储器或者类似的存储介质。具体地，机器可读存储介质503可以是RAM(Radom Access Memory，随机存取存储器)、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、DVD等)，或者类似的存储介质，或者它们的组合。
参见图6，图6是本申请一示例性实施例示出的一种图像显示装置的框图。该装置可应用在该电子设备的图片查看器上，可包括如下所示单元。
获取单元601，用于获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；
解码单元602，用于对所述第一编码数据进行解码得到所述目标图像；对所述第二编码数据进行解码得到所述关键数据；
显示单元603，用于在同一显示窗口显示所述目标图像和所述关键数据。
可选的，所述显示单元603，具体用于将所述关键数据叠加至所述目标图像中的第一指定位置，通过同一显示窗口显示叠加了所述关键数据的目标图像；或者，将所述关键数据配置在所述目标图像周围的第二指定位置，通过同一显示窗口显示配置了关键数据的目标图像。
可选的，所述关键数据包括：从所述目标图像中识别出的目标对象数据、从N帧图像中分别识别出的目标对象数据、和/或N帧图像分别对应的上传数据；所述N帧图像为所述图像采集设备在采集该目标图像之前采集的、且需要上传至所述电子设备的N帧图像；N帧图像中每帧图像对应的上传数据用于表征该帧图像的上传情况；
所述装置还包括：
异常识别单元604，用于对所述关键数据进行数据分析，基于数据分析结果，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常；若出现图像识别异常、和/或图像上传异常，则基于数据分析结果，确定异常原因。
此外，本申请还提供了一种图像采集设备。
参见图7，图7是本申请一示例性实施例示出的一种图像采集设备的硬件结构图。
该图像采集设备包括：通信接口701、处理器702、机器可读存储介质703和总线704；其中，通信接口701、处理器702和机器可读存储介质703通过总线704完成相互间的通信。处理器702通过读取并执行机器可读存储介质703中与图像显示控制逻辑对应的机器可执行指令，可执行上文描述的图像显示方法。
本文中提到的机器可读存储介质703可以是任何电子、磁性、光学或其它物理存储装置，可以包含或存储信息，如可执行指令、数据，等等。例如，机器可读存储介质可以是：易失存储器、非易失性存储器或者类似的存储介质。具体地，机器可读存储介质703可以是RAM(Radom Access Memory，随机存取存储器)、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、DVD等)，或者类似的存储介质，或者它们的组合。
参见图8，图8是本申请一示例性实施例示出的另一种图像显示装置的框图。该装置可应用在图像采集设备上，可包括如下所示单元。
采集单元801，用于采集目标图像；
确定单元802，用于依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据；
编码单元803，用于对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包；
发送单元804，用于将所述图像数据包发送至电子设备，以使得所述电子设备上的图片查看器对所述第一编码数据进行解码得到所述目标图像，对所述第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
可选的，所述编码单元803，在基于第一编码数据和第二编码数据生成所述目标图像的图像数据包时，具体用于在所述图像数据包的保留字段中记录所述第二编码数据。
可选的，所述设定的数据添加策略包括：
对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据；
在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像分别对应的上传数据、以及从N帧图像中分别识别出的目标对象数据；每帧图像对应的上传数据用于表征该帧图像的上传情况；
将所述目标对象数据、N帧图像的上传数据、以及从N帧图像中分别识别出的目标对象数据作为所述关键数据。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。
Claims (13)
1.一种图像显示方法，其特征在于，所述方法应用于电子设备上的图片查看器，所述方法包括：
获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；
对所述第一编码数据进行解码得到所述目标图像；
对所述第二编码数据进行解码得到所述关键数据；
在同一显示窗口显示所述目标图像和所述关键数据。
2.根据权利要求1所述的方法，其特征在于，所述在同一显示窗口显示所述目标图像和所述关键数据，包括：
将所述关键数据叠加至所述目标图像中的第一指定位置，通过同一显示窗口显示叠加了所述关键数据的目标图像；
或者，
将所述关键数据配置在所述目标图像周围的第二指定位置，通过同一显示窗口显示配置了关键数据的目标图像。
3.根据权利要求1所述的方法，其特征在于，所述关键数据包括：从所述目标图像中识别出的目标对象数据、从N帧图像中分别识别出的目标对象数据、和/或N帧图像分别对应的上传数据；所述N帧图像为所述图像采集设备在采集该目标图像之前采集的、且需要上传至所述电子设备的N帧图像；N帧图像中每帧图像对应的上传数据用于表征该帧图像的上传情况；
所述方法还包括：
对所述关键数据进行数据分析，基于数据分析结果，确定图像采集设备在识别并上传图像过程中是否出现图像识别异常、和/或图像上传异常；
若出现图像识别异常、和/或图像上传异常，则基于数据分析结果，确定异常原因。
4.一种图像显示方法，其特征在于，所述方法应用于图像采集设备，所述方法包括：
采集目标图像；
依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据；
对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包；
将所述图像数据包发送至电子设备，以使得所述电子设备上的图片查看器对所述第一编码数据进行解码得到所述目标图像，对所述第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
5.根据权利要求4所述的方法，其特征在于，基于第一编码数据和第二编码数据生成所述目标图像的图像数据包包括：在所述图像数据包的保留字段中记录所述第二编码数据。
6.根据权利要求4所述的方法，其特征在于，所述设定的数据添加策略包括：
对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据；
在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像分别对应的上传数据、以及从N帧图像中分别识别出的目标对象数据；每帧图像对应的上传数据用于表征该帧图像的上传情况；
将所述目标对象数据、N帧图像的上传数据、以及从N帧图像中分别识别出的目标对象数据作为所述关键数据。
7.一种图像显示装置，其特征在于，所述装置应用于电子设备上的图片查看器，所述装置包括：
获取单元，用于获取图像采集设备发送的图像数据包；所述图像数据包包括：第一编码数据和第二编码数据，所述第一编码数据是所述图像采集设备对采集的目标图像进行编码得到的，所述第二编码数据是所述图像采集设备对关键数据进行编码得到的，所述关键数据是所述图像采集设备依据设定的数据添加策略确定出的需添加至所述目标图像的数据；
解码单元，用于对所述第一编码数据进行解码得到所述目标图像；对所述第二编码数据进行解码得到所述关键数据；
显示单元，用于在同一显示窗口显示所述目标图像和所述关键数据。
8.一种图像显示装置，其特征在于，所述装置应用于图像采集设备，所述装置包括：
采集单元，用于采集目标图像；
确定单元，用于依据设定的数据添加策略确定出需要添加至所述目标图像的关键数据；
编码单元，用于对所述目标图像进行编码生成第一编码数据，对所述关键数据进行编码生成第二编码数据，并基于第一编码数据和第二编码数据生成所述目标图像的图像数据包；
发送单元，用于将所述图像数据包发送至电子设备，以使得所述电子设备上的图片查看器对所述第一编码数据进行解码得到所述目标图像，对所述第二编码数据进行解码得到所述关键数据，并在同一显示窗口显示所述目标图像和所述关键数据。
9.根据权利要求8所述的装置，其特征在于，
所述设定的数据添加策略包括：
对所述目标图像进行图像识别，得到所述目标图像中的目标对象数据；
在预设的历史图像库中，确定最近添加至该历史图像库中的N帧图像分别对应的上传数据、以及从N帧图像中分别识别出的目标对象数据；每帧图像对应的上传数据用于表征该帧图像的上传情况；
将所述目标对象数据、N帧图像的上传数据、以及从N帧图像中分别识别出的目标对象数据作为所述关键数据。
10.一种电子设备，其特征在于，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器被所述机器可执行指令促使执行如权利要求1至3任一项所述方法。
11.一种机器可读存储介质，其特征在于，所述机器可读存储介质存储有机器可执行指令，在被处理器调用和执行时，所述机器可执行指令促使所述处理器执行如权利要求1至3任一项所述方法。
12.一种图像采集设备，其特征在于，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器被所述机器可执行指令促使执行如权利要求4至6任一项所述方法。
13.一种机器可读存储介质，其特征在于，所述机器可读存储介质存储有机器可执行指令，在被处理器调用和执行时，所述机器可执行指令促使所述处理器执行如权利要求4至6任一项所述方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911222273.XA CN112905821B (zh) | 2019-12-03 | 2019-12-03 | 图像显示方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911222273.XA CN112905821B (zh) | 2019-12-03 | 2019-12-03 | 图像显示方法、装置、设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112905821A true CN112905821A (zh) | 2021-06-04 |
| CN112905821B CN112905821B (zh) | 2023-03-28 |
Family
ID=76104111
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911222273.XA Active CN112905821B (zh) | 2019-12-03 | 2019-12-03 | 图像显示方法、装置、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112905821B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105190688A (zh) * | 2013-02-14 | 2015-12-23 | 快图有限公司 | 用于查看图像的方法和装置 |
| CN106375825A (zh) * | 2016-08-23 | 2017-02-01 | 乐视控股（北京）有限公司 | 一种图片生成处理方法、图片显示处理方法和装置 |
| CN106469309A (zh) * | 2015-08-14 | 2017-03-01 | 杭州海康威视数字技术股份有限公司 | 车辆监控的方法和装置、处理器、图像采集设备 |
| WO2018015764A1 (en) * | 2016-07-20 | 2018-01-25 | V-Nova Ltd | Decoder devices, methods and computer programs |
| CN108416301A (zh) * | 2018-03-09 | 2018-08-17 | 司马大大（北京）智能系统有限公司 | 视频分析处理方法及装置 |
-
2019
- 2019-12-03 CN CN201911222273.XA patent/CN112905821B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105190688A (zh) * | 2013-02-14 | 2015-12-23 | 快图有限公司 | 用于查看图像的方法和装置 |
| CN106469309A (zh) * | 2015-08-14 | 2017-03-01 | 杭州海康威视数字技术股份有限公司 | 车辆监控的方法和装置、处理器、图像采集设备 |
| WO2018015764A1 (en) * | 2016-07-20 | 2018-01-25 | V-Nova Ltd | Decoder devices, methods and computer programs |
| CN106375825A (zh) * | 2016-08-23 | 2017-02-01 | 乐视控股（北京）有限公司 | 一种图片生成处理方法、图片显示处理方法和装置 |
| CN108416301A (zh) * | 2018-03-09 | 2018-08-17 | 司马大大（北京）智能系统有限公司 | 视频分析处理方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112905821B (zh) | 2023-03-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8576107B2 (en) | Data transmission apparatus and method thereof and data reception apparatus and method thereof | |
| US9607236B1 (en) | Method and apparatus for providing loan verification from an image | |
| US20180300578A1 (en) | Method and apparatus for identifying vehicle information from an image | |
| US9860536B2 (en) | System and method for high-resolution storage of images | |
| US9454675B2 (en) | Apparatus and method for protecting personal information of recorded image, and computer-readable recording medium having computer program recorded therein | |
| WO2015072631A1 (ko) | 영상 처리 장치 및 방법 | |
| KR20190130478A (ko) | 인공지능 기반 해상도 개선 시스템 | |
| CN111898416A (zh) | 视频流处理方法、装置、计算机设备和存储介质 | |
| CN105100748B (zh) | 一种视频监控系统及方法 | |
| WO2018086527A1 (zh) | 一种视频处理方法及装置 | |
| US10242284B2 (en) | Method and apparatus for providing loan verification from an image | |
| JP2007158421A (ja) | 監視カメラシステム及び顔画像追跡記録方法 | |
| CN108668096B (zh) | 视频数据的管理方法、装置及录像设备 | |
| CN103826109A (zh) | 一种视频监控图像数据处理方法及系统 | |
| US20170270384A1 (en) | Method and apparatus for blocking information from an image | |
| JP2008011056A (ja) | 保存動画選択装置、そのプログラムおよび該プログラムを記録したコンピュータ読取り可能な記録媒体、保存動画選択システムならびに保存動画選択方法 | |
| US20110069146A1 (en) | System and method for processing images | |
| US10210416B2 (en) | Method and apparatus for receiving a broadcast radio service offer from an image | |
| CN112905821B (zh) | 图像显示方法、装置、设备及存储介质 | |
| KR101035489B1 (ko) | 다중 카메라를 이용하는 차량용 블랙박스 장치 | |
| CN111104080B (zh) | 一种文本远程预览方法及装置 | |
| CN101360228A (zh) | 一种视频监控系统的图像压缩方法及视频监控系统 | |
| JP6747603B2 (ja) | 監視支援装置および監視支援システム | |
| JP6210634B2 (ja) | 画像検索システム | |
| US11398091B1 (en) | Repairing missing frames in recorded video with machine learning |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |