CN103313032A - 用于分析多通道图像的方法和系统 - Google Patents
用于分析多通道图像的方法和系统 Download PDFInfo
- Publication number
- CN103313032A CN103313032A CN2013100777684A CN201310077768A CN103313032A CN 103313032 A CN103313032 A CN 103313032A CN 2013100777684 A CN2013100777684 A CN 2013100777684A CN 201310077768 A CN201310077768 A CN 201310077768A CN 103313032 A CN103313032 A CN 103313032A
- Authority
- CN
- China
- Prior art keywords
- image
- combination
- selection
- carries out
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000010191 image analysis Methods 0.000 claims abstract description 40
- 238000004458 analytical method Methods 0.000 claims description 44
- 238000003703 image analysis method Methods 0.000 claims description 40
- 238000001514 detection method Methods 0.000 claims description 32
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 238000012544 monitoring process Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19645—Multiple cameras, each having view on one of a plurality of scenes, e.g. multiple cameras for multi-room surveillance or for tracking an object by view hand-over
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Abstract
提供一种用于分析多通道图像的方法和系统。所述方法包括：分别通过多个通道接收多个图像；将所述多个图像之中的选择的图像组合为单个图像；针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析或针对组合的图像中的选择的图像中的每个图像执行图像分析。
Description
本申请要求于2012年3月12日提交到韩国知识产权局的第10-2012-0025225号韩国专利申请的优先权，该申请的公开通过引用全部包含于此。
技术领域
与本发明构思的示例性实施例一致的方法和系统涉及分析多通道图像，更具体地讲，涉及分析通过多个通道接收的多通道图像，将多通道图像组合为单个图像，并基于组合的单个图像执行单个微处理器图像分析。
背景技术
图像监控系统是通过在多个位置上安装多个相机来监视一个区域或多个区域而构成的用于实时监控或事后检查的系统。相机被配置为发送通过监视位置获得的图像。图像监控系统还可在存储装置中存储图像。
为了管理方便，通过多个相机获得的图像信号被发送到诸如数字视频录像机(DVR)或网络视频录像机(NVR)的装置，用户可管理多个通道，其中，所述图像信号通过所述多个通道被同时发送。
第0338421号韩国专利公开了一种通过将多个视频相机分别通过多个通道获得的多个运动图像进行组合和合成来提供广角运动图像的方法。
然而，采用在第0338421号韩国专利中公开的方法的监控系统应具有与用于分析多个图像的通道的数量相同的微处理器。然而，在微处理器的数量不足以分析多个图像的情况下，已使用了通过使用时分技术连续地分析并显示多个图像的可选的方法。
随着图像数量的增加，在监控系统中具有与多个通道相同数量的微处理器使安装和维持费用增加，而使用时分技术可能会由于系统资源的有效使用的限制而使分析性能恶化。
另外，随着监控相机通道的数量的增加，用于通过使用图像处理技术检测事件的技术被开发以解决人力的不足。例如，用于检测图像中的动作、跟踪图像中的对象、检测脸部的智能图像分析技术正被开发。
发明内容
一个或多个示例性实施例提供一种用于分析多通道图像的方法和系统，以通过基于组合的图像处理和分析图像来提高监控系统的性能和效率。
根据示例性实施例的一方面，提供一种分析多通道图像的方法，所述方法包括：分别通过多个通道接收多个图像；将所述多个图像之中的选择的图像组合为单个图像；针对通过选择的图像视为单个图像的整个组合的图像执行图像分析或针对组合的图像中的选择的图像中的每个图像执行图像分析。
在针对选择的图像中的每个图像执行图像分析的情况下，不同的图像分析方法可分别被应用于选择的图像中的至少两个图像。
所述方法还可包括：获得关于选择的图像中的每个图像的信息；基于获得的信息，确定针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析还是针对组合的图像中的选择的图像中的每个图像执行图像分析。
如果组合的图像中的选择的图像全部大于参考尺寸，则针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析，如果在组合的图像中的选择的图像中的至少一个图像不大于参考尺寸，则针对组合的图像中的选择的图像中的每个图像执行图像分析。
如果结合的图像中的选择的图像全部由大于参考数量的像素的像素来构成，则针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析，如果组合的图像中的选择的图像中的至少一个图像由不大于参考数量的像素的像素来构成，则针对组合的图像中的选择的图像中的每个图像执行图像分析。
分析多通道图像的方法可包括：在执行图像分析之前对组合的图像进行预处理，其中，所述预处理包括图像尺寸转换、颜色空间转换和颜色维度转换中的至少一个。
分析多通道图像的方法可包括：通过预处理通过将选择的图像视为单个图像的整个组合的图像，在组合的图像中检测前景区域，其中，执行图像分析的步骤包括：针对多个通道中的每个通道，检测篡改多个相机中的至少一个相机的相机的出现，其中，从所述多个相机获得多个图像。
可选择地，分析多通道图像的方法可包括：通过对将选择的图像视为单个图像的整个组合的图像进行处理来检测组合的图像中的运动区域；获得关于所述运动区域的位置信息；确定多个通道中的选择的通道中与所述运动区域相应的通道。
分析多通道图像的方法可包括：在针对组合的图像中的选择的图像中的每个图像执行图像分析之后，将用于图像分析的选择的图像组合为另一单个图像；使用图像分析的结果输出所述另一单个图像。
根据另一示例性实施例的一方面，提供了一种多通道图像分析系统，包括：图像接收单元，分别通过多个通道接收多个图像；图像组合单元，将所述多个图像之中的选择的图像组合为单个图像；图像分析单元，通过针对将选择的图像视为单个图像的整个组合的图像执行图像分析或针对组合的图像中的选择的图像中的每个图像执行图像分析。
图像组合单元可被配置为组合用户选择的数量的图像。
图像分析单元可通过将不同的图像分析方法分别应用于所述选择的图像中的至少两个图像来针对组合的图像中的选择的图像中的每个图像执行图像分析。
多通道图像分析系统还可包括：图像分析方法选择单元，获得关于选择的图像中的每个图像的信息，并基于获得的信息确定针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析还是针对组合的图像中的选择的图像中的每个图像执行图像分析。
如果图像分析方法选择单元确定组合的图像中的选择的图像全部大于参考尺寸，则针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析，如果图像分析方法选择单元确定组合的图像中的选择的图像中的至少一个图像不大于参考尺寸，则图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析。
如果图像分析方法选择单元确定组合的图像中的选择的图像全部由大于参考数量的像素的像素来构成，则图像分析单元针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析，其中，如果图像分析方法选择单元确定组合的图像中的选择的图像中的至少一个图像由不大于参考数量的像素的像素来构成，则图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析。
多通道图像分析系统还可包括：图像预处理单元，在图像分析单元执行图像分析之前对组合的图像执行预处理，其中，预处理包括图像尺寸转换、颜色空间转换和颜色维度转换中的至少一个。
图像分析单元可包括：前景检测单元，通过对将选择的图像视为单个图像的整个组合的图像进行处理，检测组合的图像中的前景区域；事件检测单元，针对多个通道中的每个通道，检测篡改多个相机中的至少一个相机的相机的出现，其中，从所述多个相机获得多个图像。
可选择地，图像分析单元可包括：前景检测单元，通过对将选择的图像视为单个图像的整个组合的图像进行处理，检测组合的图像中的运动区域；事件检测单元，获得关于所述运动区域的位置信息，并确定在多个通道中的选择的通道之中与运动区域相应的通道。
多通道图像分析系统还可包括图像输出单元：在图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析之后，将用于图像分析的选择的图像组合为另一单个图像；使用图像分析的结果，输出另一单个图像。
附图说明
从下面组合附图对示例性实施例的描述，这些和/或其他方面将会变得清楚并更易于理解，其中：
图1A和图1B示出根据示例性实施例的监控相机系统的系统配置；
图2是示出根据示例性实施例的用于处理多通道图像的时分技术的示图；
图3是示出根据示例性实施例的多通道图像分析系统的配置的示意图；
图4A至图4D示出根据示例性实施例的将多通道图像组合为单个图像的方法；
图5A和图5B是示出根据示例性实施例的鉴于图3的多通道图像分析系统的各个组件的多通道图像的组合和分析的状态的示图；
图6是示出根据示例性实施例的检测图像中的事件的图像分析单元的内部配置的示图；
图7是根据示例性实施例的由图3的多通道图像分析系统进行的图像分析的操作的流程图；
图8是示出根据示例性实施例的由图3的多通道图像分析系统进行的图像分析的操作的流程图。
具体实施方式
现在将详细描述在附图中示出的示例性实施例，其中，相同的标号始终表示相同的元件。在此方面，示例性实施例可具有不同的形式，而不应该被解释为限于在此阐述的描述。因此，下面通过参照附图仅描述实施例，以解释本描述的各个方面。诸如“…的至少一个”的表达在一些元素之后时，修饰整列元素，而不修饰该列表中的单个元素。
现在，参照附图更充分地描述本发明构思，其中，在附图中示出本发明构思的示例性实施例。然而，本发明构思可以以许多不同形式被实现，而不应该被解释为限于在此阐述的实施例；相反，这些实施例被提供以使本公开将是彻底和完整的，并将本发明构思充分转达给本领域的技术人员。在附图中，相同的标号表示相同元件，因此将省略其描述。
在下文中，将通过参照附图解释示例性实施例来详细描述本发明构思。
图1A是示出根据示例性实施例的通过显示监控区域的图像来监控区域的监控相机系统的系统配置的示图。
参照图1A，可解释获得监控区域的图像并处理和显示所述图像的处理。首先，在如图1A所示的监控相机系统中，监控区域的图像通过图像检测装置(例如，包括在相机1中的图像传感器)被转换为电子图像信号，所述电子图像信号被输出。接下来，如果通过相机1获得的电子图像信号已在相机1中被编码，则所述电子图像信号通过视频解码器2被解码为图像，微处理器3分析并处理解码的图像信号。接下来，所述图像信号通过视频编码器4被重新编码以被发送，并被发送到图像输出单元5(例如，显示器)。
根据另一示例性实施例的图1B中所示的监控相机系统中，至少一个监控的区域的多通道图像通过包括相机1a、1b和1c的多个监控相机被捕获并被转换为各个电子图像信号，其中，相机1a、1b和1c包括各自的图像传感器。如果在多个相机已分别对电子图像信号进行编码，则由视频解码器2对所述电子图像信号进行解码。接下来，包括微处理器3a、3b和3c的多个微处理器分析各个通道的解码的图像信号。
为了使多个处理器分析并处理多通道图像信号，需要将多个微处理器分配给各个通道，以分析并处理各个通道的图像，或需要使用能够分析多通道图像的高性能微处理器(未示出)。接下来，视频编码器4将对分析并处理的图像信号进行重新编码，以发送给图像输出单元5。
在单个微处理器(未示出)分析并处理多通道图像的情况下，时分技术被用于有效地使用系统资源。
图2是示出用于由单个微处理器处理多通道图像的时分技术的示图。
参照图2，为了处理多通道图像，单个微处理器在每时钟周期处理单个通道，并且在时钟周期结束之后处理另一通道。
在通过使用这样的时分技术来处理多通道图像的情况下，单个微处理器的性能会恶化，并由于有限的资源而难以增加通道的数量。
在如图1A和图1B所示的系统中，由一个微处理器处理一个通道图像信号。因此，随着通道的数量增加，微处理器的数量也增加。因此，根据示例性实施例的分析图像的方法提供这样的系统，在该系统中，多通道图像被组合以被单个微处理器处理。
图3是示出根据示例性实施例的多通道图像分析系统的配置的示意图。
参照图3，多通道图像分析系统包括多个相机(包括相机10a、10b和10c)，其中，所述多个相机包括各自的图像传感器。所述系统还包括图像输入单元100、图像组合单元200、图像处理单元300和图像输出单元400。
首先，所述多个相机是用于获得至少一个监控的区域的图像的图像捕获装置。根据当前实施例，相机可被布置为提供监控的区域的多通道图像。根据示例性实施例，相机可以是安装在至少一个监控的区域以进行监控的图像捕获装置(例如，CCTV、摄像机等)。另外，相机分别包括各自的图像传感器，其中图像传感器包括用于将捕获的图像转换为电子图像信号的图像传感器11a、11b和11c。
接下来，图像输入单元100将从所述多个相机输入的模拟图像信号转换为数字信号。尽管图3示出与各个通道相应的图像输入单元100布置在相机的外部，但是图像输入单元100也可被布置在具有图像传感器的各个相机中。另外，图像输入单元100可包括用于将输入的模拟图像信号转换为数字图像信号的视频解码器100a。
接下来，图像组合单元200可将从图像输入单元100发送的多通道图像组合为单个图像。
图像组合单元200根据通道的数量和输出多通道图像的用户选择的方法，将多通道图像组合为单个图像。
图4A至图4D示出根据示例性实施例的将多通道图像组合为单个图像的方法。
图4A示出接收具有相同尺寸的16个图像并将所述16个图像组合为单个图像的结果。图4B示出接收具有不同尺寸的八个图像并将所述八个图像组合为单个图像的结果。在图4B中，右上方图像是其他图像的九倍，图像组合单元200可通过组合具有不同尺寸的八个图像来产生单个图像。相似地，参照图4C，图像组合单元200通过组合13个图像来产生单个图像，其中，中心图像比其他通道的图像大。另外，参照图4D，图像组合单元200可通过组合八个通道的图像来产生单个图像。
如图4A至4D中所示的实施例中，图像组合单元200可基于由用户设置的输出多通道图像的方法的设置，通过使用各种方法组合多个图像来产生单个图像，并且可组合具有不同尺寸的图像。
接下来，图像处理单元300基于组合的图像，处理并分析单个组合的图像或各个通道的图像。为此，图像处理单元300可被实施为可执行存储、计算和控制功能的单个芯片。
在由图像组合单元200输入组合图像的情况下(如图4A至图4D所示)，图像处理单元300可处理并分析整个组合的图像。换句话讲，如图4B中所示的情况下，八个通道的图像被处理为单个图像并被分析。
可选择地，即使图像组合单元200输入单个组合的图像，图像处理单元300也可分析各个通道的各个图像。换句话讲，在如图4A中所示的情况下，图像处理单元300可单独分析各个通道的16个图像。
换句话讲，在如图4B中所示的情况下，图像处理单元300分别地处理最大的图像(即，右上方图像)和七个其他图像。同样，图像处理单元300在如图4C中所示的情况下处理13个图像，在如图4D中所示的情况下处理八个图像。
因此，由于图像处理单元300可处理并分析单个组合的图像，因此不同于图1B中所示的监控相机系统，图像处理单元300可被实现为单个微处理器。以下将给出图像处理单元300的操作的详细描述。
参照图3，图像处理单元300包括图像预处理单元310、分析方法选择单元320和图像分析单元330。
图像处理单元300的图像预处理单元310在分析多通道图像之前执行必要的图像预处理。图像预处理可包括重新调整图像的尺寸、转换图像的颜色空间，转换图像的颜色维度等。如上所述，图像预处理单元310对单个组合的图像执行图像预处理，因此，当与处理多通道图像的每个图像相比，可提高整体处理速度。
接下来，分析方法选择单元320选择使用单个组合的图像还是多通道图像(即，各个通道的图像)，来进行图像分析。如上所述，如果对通过图像组合单元200组合多通道图像产生的单个图像执行图像分析，则可有效地使用图像处理单元300的资源。然而，可应用于具有等于或大于预定尺寸的尺寸的图像的一些图像分析方法可不应用于单个组合的图像。因此，分析方法选择单元320基于将被采用的图像分析方法，选择图像分析单元330分析单个组合的图像还是各个通道的图像。
换句话讲，基于分析图像所需的信息的细节，可选择性地应用图像分析方法。还可基于输入图像的尺寸来决定图像分析所需的多少数据可被提取。因此，图像分析方法根据从单个组合的图像提取的各个通道图像的尺寸而不同。因此，对具有百万像素大小的单个组合的图像的分析存在一些限制，而对于更小的图像的组合，可应用的功能可受限。
在图4A中所示的情况下，如果假设16个输入图像中的每个图像的尺寸是720×480个像素，并且可通过包括图像处理器300的硬件处理的图像的最大尺寸也是720×480个像素，则图像组合单元200需要产生具有720×480个像素的尺寸的组合图像。因此，在单个组合的图像中，各个通道的每个图像的尺寸应变成180×120个像素。由于一些图像分析方法可不应用于具有180×120个像素的尺寸的图像，因此分析方法选择单元320可选择对各个通道的各个图像(而不是单个组合的图像)执行图像分析。
因此，分析方法选择单元320确定详细的图像分析是否是必要的，并将相关信息提供给图像组合单元200，从而图像组合单元200调整将被组合为单个图像的多通道图像的数量。
例如，在确定图像的整体变化(例如，确定相机篡改)的情况下，可使用小的输入图像来执行图像分析，因此，分析方法选择单元320选择对通过组合一个或多个通道的图像产生的整个单个图像执行图像分析。然而，由于需要详细信息的图像分析方法(例如，脸部检测或车牌号码检测)可被应用于与具有等于或大于预定尺寸的尺寸的输入图像相应的通道，因此分析方法选择单元320针对各个通道选择不同的图像分析方法。
图像分析单元330基于预处理的单个组合的图像，对各个通道的图像或单个组合的图像执行图像分析。图像分析单元330可应用诸如检测背景区域、检测并跟踪前景区域和对象、检测特定事件、对对象计数、检测相机篡改、检测脸部等的图像分析方法，而没有限制。图像分析单元330可针对各个通道应用不同的图像分析方法。
如上所述，当图像分析单元330应用图像分析方法时，可根据应用的图像分析方法单独分析各个通道的图像。换句话讲，图像分析单元330对用于可应用于小的输入图像的图像分析方法(例如，检测相机篡改)的组合的单个图像执行图像分析，而可对用于可应用于相对大的输入图像的图像分析方法(例如，检测脸部)的各个通道的各个图像执行图像分析。
最后，图像输出单元400在单个组合的图像中输出针对各个通道的图像分析的结果。图像输出单元400可不仅输出图像，而且在通过图像分析单元330检测到有意义的事件的情况下还提供警报。
另外，图像输出单元400包括视频编码器410和发送单元420。视频编码器410对分析图像的结果进行重新编码，以输出图像，而发送单元420产生并发送输出信号，从而用户可通过外部装置查看编码的图像。
图5A和图5B是示出根据示例性实施例的鉴于图3的多通道图像分析系统的各个组件的多通道图像的组合和分析的状态的示图。
图5A和图5B分别示出根据示例性实施例的六个多通道图像被输入到图3的多通道图像分析系统的情况和九个多通道图像被输入到图3的多通道图像分析系统的情况。首先，参照图5A，六个单独的图像被输入到图像输入单元100。可由六个相机分别获得图像，其中由一个相机获得的图像可占用一个通道。图像输入单元100接收各个图像，并对所述各个图像进行解码。
接下来，图像组合单元200组合通过图像输入单元100接收的图像当中的一个或多个通道的图像。参照图5A，具有不同尺寸的六个图像根据由用户预设的规则被组合为单个图像。随着将被组合的图像的数量增加，微处理器的数量或用于分析图像的微处理器使用的资源减小，因此，可有效地执行图像分析。
接下来，通过图像组合单元200组合的图像被发送到图像处理单元300，以进行图像分析。首先，图像预处理单元310执行用于分析通过图像组合单元300组合的图像的预处理。此时，图像预处理单元310可将多通道图像视为单个图像，并可对作为单个图像的多通道图像执行预处理。换句话讲，图像预处理单元310将六个图像的组合视为单个图像，并对所述单个图像执行预处理。在图像预处理单元310基于通过图像组合单元200组合的图像执行预处理的情况下，当与单独地对第一图像至第六图像执行预处理的情况相比时，可占用图像处理单元300的更少的资源。
接下来，图像分析单元330基于预处理的组合的图像执行图像分析。参照图5A，图像分析单元330将通过组合第一图像至第六图像产生的图像视为单个图像，并分析组合的图像。在此情况下，图像分析单元330可应用图像分析方法，该图像分析方法可被应用于甚至小的图像。
例如，在执行用于检测图像中的运动的图像分析的情况下，图像分析单元330对整个单个组合的图像执行运动检测，并获得关于检测到运动的区域的位置信息。接下来，基于由图像组合单元200组合图像的结果，图像分析单元330确定与检测到运动的区域相应的通道。
接下来，图像输出单元400再次对组合的图像进行编码，并通过发送单元将编码的图像发送到外部装置。可针对组合的图像(而不是六个图像中的每个图像)执行编码和发送。
图5B示出基于分析方法选择单元320的选择，在对各个图像执行图像分析时，九个通道图像被组合为单个图像，并针对单个组合的图像执行图像的预处理。
参照图5B，图像输入单元100通过各个通道从各个相机接收第一图像至第九图像。接下来，图像组合单元200可基于设置通过组合九个图像来产生单个图像。
接下来，图像预处理单元310对组合的单个图像执行预处理，因此，当与对各个图像执行预处理的情况相比时，可提高利用图像处理单元300的资源的效率。
参照图5B，基于分析方法选择单元320的选择，图像分析单元330可将单个组合的图像分为各个图像，并对所述各个图像执行图像分析。尽管在图5A中，图像分析单元330将组合的图像视为单个图像，并对其执行图像分析，但是如图5B中所示，图像分析单元330将组合的图像分为第一图像至第九图像，并对所述各个图像分别执行图像分析。相比于图5A的方法，选择此方法的原因是可基于图像的尺寸应用不同的图像分析方法。
换句话讲，在检测到组合的图像中的整体改变并使用可被应用于甚至小的图像的图像分析方法的情况下，图像分析单元330可对如图5A中所示的组合的图像执行图像分析。相反地，在使用可被应用于等于或大于预定尺寸的图像的图像分析方法的情况下，图像分析单元330可将组合的图像分为各个图像，并分别对如图5B中所示的各个图像执行图像分析。
如上所述，图像分析单元330可通过应用各种图像分析方法分析组合的图像。下面将给出图像分析单元330使用通过分离前景和背景来检测事件的图像分析方法的情况的详细描述。
图6是示出根据示例性实施例的检测图像中的事件的图像分析单元330的内部配置的示图。
参照图6，图像分析单元330包括背景产生单元331、前景和对象检测单元332和事件检测单元333。
背景产生单元331产生与确定为背景的区域相应的值，所述确定为背景的区域是通过图像组合单元200产生并通过图像预处理单元310预处理的组合图像中没有运动的区域。背景产生单元331可通过使用已知的方法(诸如，图像帧之间的差、局部二元模式(LBP)直方图、高斯混合模型等)来检测背景区域。
前景和对象检测单元332基于通过背景产生单元331产生的背景图像，在组合的图像中检测移动区域，并获得确定为实际移动对象的区域的区域。在个人监视监控系统中的所有图像是成本高的情况下，用于自动检测移动对象的系统可能是有用的。
即使分析方法选择单元320选择对各个通道执行图像分析，背景产生单元331与前景和对象检测单元332可对单个组合的图像执行相应的操作。这是因为对于检测背景和对象不需要详细的信息。换句话讲，根据情况所需，图像分析单元330可对整个组合的图像或各个图像执行图像分析。
接下来，事件检测单元333根据每个各个通道中的图像的变化跟踪移动对象区域的运动。如果事件检测单元333检测到任何有意义的运动，则根据本实施例的多通道图像分析系统可自动地通知用户。
另外，事件检测单元333可分析跟踪的运动值并可检测和通知未授权的运动或特定事件。具体地讲，事件检测单元333可设置视为事件的运动的阈值。基于阈值，事件检测单元333可不通知细微的运动(例如，由于风而引起的树枝的抖动)，并可通知等于或超过阈值的运动(例如，人经过)。
图7是根据示例性实施例的由图3的多通道图像分析系统进行的图像分析的操作的流程图。
参照图7，图像输入单元100分别通过多个通道接收由多个相机捕获的多个图像(S1)。
接下来，图像组合单元200根据用户设置将从多个通道图像中选择的通道图像组合为单个图像，并将所述单个组合的图像发送到图像处理单元300(S2)。
接下来，图像处理单元300的图像预处理单元310在图像分析之前执行预处理(S3)。
接下来，分析方法选择单元320确定将被应用的图像分析方法是否需要关于将被分析的图像的详细信息(S4)。
如果在操作S4中确定不需要关于图像的详细信息，则图像分析单元330对组合的图像执行图像分析(S5)。
在分析组合的图像之后，如果作为分析的结果检测到特定事件，则图像分析单元330确定组合的图像的区域，在该组合的图像中检测到特定事件(S6)。
如果在操作S4中确定不需要关于图像的详细信息，则图像分析单元330对各个图像执行图像分析(S7)。
最后，图像输出单元400在单个组合的图像中输出图像分析的结果(S8)。
图8是示出根据另一示例性实施例的由图3的多通道图像分析系统进行的图像分析的操作的流程图。
首先，分析方法选择单元320获得关于用于将期望的图像分析方法应用到通过组合多个通道图像之中的选择的通道图像而产生的单个组合的图像的参考图像尺寸的信息(操作S11)。
接下来，确定在单个组合的图像中每个单独的通道图像的尺寸是否大于参考图像尺寸(操作S12)。
如果组合图像中的所有单独的通道图像的尺寸大于参考图像尺寸，则图像分析单元使用相应的图像分析方法通过将选择的通道图像视作单个图像来针对整个组合的图像执行图像分析(操作S13)。
接下来，基于单个组合的图像中的各个通道图像的位置，确定选择的图像通道之中应用了相应的图像分析方法的结果的通道(操作S14)。
另一方面，如果确定各个通道图像的至少一个图像不大于参考图像尺寸，则图像分析单元通过使用相应的图像分析方法来针对各个通道图像中的每个图像执行图像分析(操作S15)。
可选择地，为了通过减小将被组合的通道的数量来确保一个通道图像的空间，图像分析单元330通过使用相应的图像分析方法仅对具有小于参考图像尺寸的尺寸的一些各个通道图像逐通道地执行图像分析(操作S16)。
最终，图像分析单元330使用图像输出单元发送应用相应的图像分析方法的结果(操作S17)。
如上所述，根据一个或多个示例性实施例，多通道监控系统可基于组合的图像处理并分析图像，因此，可提高监控系统的性能。
应该理解，上述的示例性实施例应仅以描述性意义来考虑，而不是为了限制的目的。每个实施例中的特征或方面的描述通常应被视为可用于其他实施例中其他相似的特征或方面。
Claims (20)
1.一种分析多通道图像的方法，所述方法包括：
分别通过多个通道接收多个图像；
将所述多个图像之中的选择的图像组合为单个图像；
针对通过将选择的图像视作单个图像的整个组合的图像执行图像分析或针对组合的图像中的选择的图像中的每个图像执行图像分析。
2.如权利要求1所述的方法，其中，在针对选择的图像中的每个图像执行图像分析的情况下，不同的图像分析方法分别被应用于选择的图像中的至少两个图像。
3.如权利要求1所述的方法，还包括：
获得关于选择的图像中的每个图像的信息；
基于获得的信息，确定针对通过将选择的图像视作单个图像的整个组合的图像执行图像分析还是针对组合的图像中的选择的图像中的每个图像执行图像分析。
4.如权利要求3所述的方法，其中，如果组合的图像中的选择的图像全部大于参考尺寸，则针对通过将选择的图像视作单个图像来整个组合的图像执行图像分析，
其中，如果在组合的图像中的选择的图像中的至少一个图像不大于参考尺寸，则针对组合的图像中的选择的图像中的每个图像执行图像分析。
5.如权利要求3所述的方法，其中，关于选择的图像中的每个图像的信息包括构成所述选择的图像中的每个图像的像素的数量。
6.如权利要求3所述的方法，其中，如果组合的图像中的选择的图像全部由大于参考数量的像素的像素来构成，则通过将选择的图像视为单个图像来针对整个组合的图像执行图像分析，
其中，组合的图像中的选择的图像中的至少一个图像由不大于参考数量的像素的像素来构成，则针对组合的图像中的选择的图像中的每个图像执行图像分析。
7.如权利要求1所述的方法，还包括：在执行图像分析之前对组合的图像进行预处理，
其中，所述预处理包括图像尺寸转换、颜色空间转换和颜色维度转换中的至少一个。
8.如权利要求1所述的方法，还包括：通过对通过将选择的图像视为单个图像的整个组合的图像进行处理来检测组合的图像中的前景区域，
其中，执行图像分析的步骤包括：针对多个通道中的每个通道，检测篡改多个相机中的至少一个相机的相机的出现，其中，从所述多个相机获得多个图像。
9.如权利要求1所述的方法，还包括：
通过对将选择的图像视为单个图像的整个组合的图像进行处理来检测组合的图像中的运动区域；
获得关于所述运动区域的位置信息；
确定多个通道中的选择的通道中与所述运动区域相应的通道。
10.如权利要求1所述的方法，还包括：
在针对组合的图像中的选择的图像中的每个图像执行图像分析之后，将用于图像分析的选择的图像组合为另一单个图像；
使用图像分析的结果输出所述另一单个图像。
11.一种多通道图像分析系统，包括：
图像接收单元，分别通过多个通道接收多个图像；
图像组合单元，将所述多个图像之中的选择的图像组合为单个图像；
图像分析单元，通过针对将选择的图像视为单个图像的整个组合的图像执行图像分析或针对组合的图像中的选择的图像中的每个图像执行图像分析。
12.如权利要求11所述的多通道图像分析系统，其中，图像分析单元通过将不同的图像分析方法分别应用于所述选择的图像中的至少两个图像来针对组合的图像中的选择的图像中的每个图像执行图像分析。
13.如权利要求11所述的多通道图像分析系统，还包括：图像分析方法选择单元，获得关于选择的图像中的每个图像的信息，并基于获得的信息确定针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析还是针对组合的图像中的选择的图像中的每个图像执行图像分析。
14.如权利要求13所述的多通道图像分析系统，其中，如果图像分析方法选择单元确定组合的图像中的选择的图像全部大于参考尺寸，则通过将选择的图像视为单个图像来针对整个组合的图像执行图像分析，
其中，如果图像分析方法选择单元确定组合的图像中的选择的图像中的至少一个图像不大于参考尺寸，则图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析。
15.如权利要求13所述的多通道图像分析系统，其中，关于选择的图像中的每个图像的信息包括构成所述选择的图像中的每个图像的像素的数量。
16.如权利要求13所述的多通道图像分析系统，其中，如果图像分析方法选择单元确定组合的图像中的选择的图像全部由大于参考数量的像素的像素来构成，则图像分析单元针对通过将选择的图像视为单个图像的整个组合的图像执行图像分析，
其中，如果图像分析方法选择单元确定组合的图像中的选择的图像中的至少一个图像由不大于参考数量的像素的像素来构成，则图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析。
17.如权利要求11所述的多通道图像分析系统，还包括：图像预处理单元，在图像分析单元执行图像分析之前对组合的图像执行预处理，
其中，预处理包括图像尺寸转换、颜色空间转换和颜色维度转换中的至少一个。
18.如权利要求11所述的多通道图像分析系统，其中，图像分析单元包括：
前景检测单元，通过对将选择的图像视为单个图像的整个组合的图像进行处理，检测组合的图像中的前景区域；
事件检测单元，针对多个通道中的每个通道，检测篡改多个相机中的至少一个相机的相机的出现，其中，从所述多个相机获得多个图像。
19.如权利要求11所述的多通道图像分析系统，其中，图像分析单元包括：
前景检测单元，通过对将选择的图像视为单个图像的整个组合的图像进行处理，检测组合的图像中的运动区域；
事件检测单元，获得关于所述运动区域的位置信息，并确定在多个通道中的选择的通道之中与运动区域相应的通道。
20.如权利要求11所述的多通道图像分析系统，还包括图像输出单元：
在图像分析单元针对组合的图像中的选择的图像中的每个图像执行图像分析之后，将用于图像分析的选择的图像组合为另一单个图像；
使用图像分析的结果，输出另一单个图像。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120025225A KR101747214B1 (ko) | 2012-03-12 | 2012-03-12 | 다채널 영상 분석 방법 및 시스템 |
| KR10-2012-0025225 | 2012-03-12 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103313032A true CN103313032A (zh) | 2013-09-18 |
| CN103313032B CN103313032B (zh) | 2017-08-25 |
Family
ID=49114192
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310077768.4A Active CN103313032B (zh) | 2012-03-12 | 2013-03-12 | 用于分析多通道图像的方法和系统 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9076268B2 (zh) |
| KR (1) | KR101747214B1 (zh) |
| CN (1) | CN103313032B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108495125A (zh) * | 2018-05-04 | 2018-09-04 | 昆山丘钛微电子科技有限公司 | 一种摄像模组测试方法、设备及介质 |
| WO2018192084A1 (zh) * | 2017-04-17 | 2018-10-25 | 深圳奥比中光科技有限公司 | 深度计算处理器、数据处理方法以及3d图像设备 |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102157765B1 (ko) * | 2013-12-24 | 2020-09-18 | 주식회사 케이티 | 영상 변화 추출에 기반한 다채널 영상 분석 시스템 및 그 방법 |
| KR20200090403A (ko) * | 2019-01-21 | 2020-07-29 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
| KR102459993B1 (ko) * | 2020-12-30 | 2022-10-28 | 아진산업(주) | 어라운드 뷰 모니터링 영상을 이용한 블랙박스 시스템 |
| KR20230173481A (ko) * | 2022-06-17 | 2023-12-27 | 주식회사 메타캠프 | 다채널 구조 및 채널 동기화를 위한 메타버스 서비스장치 및 그 장치의 구동방법 |
| CN116886912B (zh) * | 2022-12-06 | 2024-02-13 | 广州开得联软件技术有限公司 | 一种多路视频编码方法、装置、设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5800364A (en) * | 1993-03-01 | 1998-09-01 | Orthotics Limited | Foot orthoses |
| CN1706180A (zh) * | 2002-10-17 | 2005-12-07 | 传感电子公司 | 多摄像机图像复用器 |
| CN101350916A (zh) * | 2008-09-05 | 2009-01-21 | 北京中星微电子有限公司 | 一种数字化多目网络摄像监控方法及其装置 |
| CN101794515A (zh) * | 2010-03-29 | 2010-08-04 | 河海大学 | 基于协方差和二叉树支持向量机的目标检测系统及方法 |
| US20110064315A1 (en) * | 2009-09-15 | 2011-03-17 | Texas Instruments Incorporated | Method and apparatus for image capturing tampering detection |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100338421B1 (ko) | 2000-05-03 | 2002-05-27 | 남재열 | 광폭 화면 동영상의 부호화 장치 및 방법 |
| JP2004032172A (ja) * | 2002-06-24 | 2004-01-29 | Canon Inc | 複眼撮像装置およびこれを備えた機器 |
| US7283664B2 (en) * | 2002-09-25 | 2007-10-16 | Southwest Research Institute | Interactive computer aided analysis of images from sensor combinations |
| US20050134941A1 (en) * | 2003-12-18 | 2005-06-23 | Matsushita Electric Industrial Co., Ltd. | Scanner apparatus, method for controlling scanner apparatus and multifuntion apparatus |
| KR20060086505A (ko) | 2005-01-25 | 2006-08-01 | 금동교 | 움직임 감지를 이용한 디지털 보안 시스템 및 그 동작 방법 |
| ES2370032T3 (es) * | 2006-12-20 | 2011-12-12 | Axis Ab | Detección de la manipulación indebida de una cámara. |
| KR100853959B1 (ko) | 2007-06-19 | 2008-08-25 | 주식회사 씨앤비텍 | 아이피티브이망을 이용한 다채널 영상의 원격 감시 시스템및 그 방법 |
| KR20100033605A (ko) | 2008-09-22 | 2010-03-31 | (주) 엑스알플러스 | 영상감시 시스템의 다분할 화면 표시방법 및 분할화면의 정보표시방법 |
| US9141862B2 (en) * | 2008-09-26 | 2015-09-22 | Harris Corporation | Unattended surveillance device and associated methods |
-
2012
- 2012-03-12 KR KR1020120025225A patent/KR101747214B1/ko active IP Right Grant
-
2013
- 2013-03-11 US US13/793,420 patent/US9076268B2/en active Active
- 2013-03-12 CN CN201310077768.4A patent/CN103313032B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5800364A (en) * | 1993-03-01 | 1998-09-01 | Orthotics Limited | Foot orthoses |
| CN1706180A (zh) * | 2002-10-17 | 2005-12-07 | 传感电子公司 | 多摄像机图像复用器 |
| CN101350916A (zh) * | 2008-09-05 | 2009-01-21 | 北京中星微电子有限公司 | 一种数字化多目网络摄像监控方法及其装置 |
| US20110064315A1 (en) * | 2009-09-15 | 2011-03-17 | Texas Instruments Incorporated | Method and apparatus for image capturing tampering detection |
| CN101794515A (zh) * | 2010-03-29 | 2010-08-04 | 河海大学 | 基于协方差和二叉树支持向量机的目标检测系统及方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018192084A1 (zh) * | 2017-04-17 | 2018-10-25 | 深圳奥比中光科技有限公司 | 深度计算处理器、数据处理方法以及3d图像设备 |
| US11049271B2 (en) | 2017-04-17 | 2021-06-29 | Orbbec Inc. | Depth calculation processor, data processing method and 3D image device |
| US11741623B2 (en) | 2017-04-17 | 2023-08-29 | Orbbec Inc. | Depth calculation processor, data processing method and 3D image device |
| CN108495125A (zh) * | 2018-05-04 | 2018-09-04 | 昆山丘钛微电子科技有限公司 | 一种摄像模组测试方法、设备及介质 |
| CN108495125B (zh) * | 2018-05-04 | 2020-07-21 | 昆山丘钛微电子科技有限公司 | 一种摄像模组测试方法、设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20130104075A (ko) | 2013-09-25 |
| CN103313032B (zh) | 2017-08-25 |
| KR101747214B1 (ko) | 2017-06-15 |
| US9076268B2 (en) | 2015-07-07 |
| US20130236120A1 (en) | 2013-09-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103313032A (zh) | 用于分析多通道图像的方法和系统 | |
| KR101942808B1 (ko) | 객체 이미지 인식 dcnn 기반 cctv 영상분석장치 | |
| CN110390262B (zh) | 视频分析方法、装置、服务器及存储介质 | |
| US10123051B2 (en) | Video analytics with pre-processing at the source end | |
| US9008365B2 (en) | Systems and methods for pedestrian detection in images | |
| US9268993B2 (en) | Real-time face detection using combinations of local and global features | |
| CN107679471B (zh) | 基于视频监控平台的室内人员空岗检测方法 | |
| CN101535941B (zh) | 自适应视频呈现的方法和装置 | |
| US20150161449A1 (en) | System and method for the use of multiple cameras for video surveillance | |
| CN112257526B (zh) | 一种基于特征交互学习的动作识别方法及终端设备 | |
| CN206117878U (zh) | 智能视频分析装置、设备及视频监控系统 | |
| Komagal et al. | Real time background subtraction techniques for detection of moving objects in video surveillance system | |
| Kim et al. | Multi-object tracking coprocessor for multi-channel embedded DVR systems | |
| CN110379130B (zh) | 一种基于多路高清sdi视频的医疗看护防摔倒系统 | |
| EP3629577B1 (en) | Data transmission method, camera and electronic device | |
| US20230188679A1 (en) | Apparatus and method for transmitting images and apparatus and method for receiving images | |
| CN114220175B (zh) | 运动模式识别方法及其装置、设备、介质、产品 | |
| CN115223077A (zh) | 面向电网边缘侧的边缘视频分析智能服务方法及系统 | |
| WO2014038924A2 (en) | A method for producing a background model | |
| CN113674316A (zh) | 一种视频降噪方法和装置及设备 | |
| CN1436426A (zh) | 用于图像相关性最小失真计算的自适应尽快退出技术 | |
| Zhang et al. | BEST: benchmark and evaluation of surveillance task | |
| CN111814734A (zh) | 识别刀闸状态的方法 | |
| Lang et al. | Shot type classification in sports video based on visual attention | |
| CN104574343A (zh) | 一种视频中提取图像的方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C53 | Correction of patent of invention or patent application | ||
| CB02 | Change of applicant information |
Address after: Gyeongnam Changwon City, South Korea Applicant after: HANWHA TECHWIN Co.,Ltd. Address before: Gyeongnam Changwon City, South Korea Applicant before: Samsung Techwin Co.,Ltd. |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: Free format text: CORRECT: APPLICANT; FROM: SAMSUNG TAI KEWEI CO., LTD. TO: HANWHA TECHWIN CO., LTD. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP01 | Change in the name or title of a patent holder | ||
| CP01 | Change in the name or title of a patent holder |
Address after: Gyeongnam Changwon City, South Korea Patentee after: HANWHA AEROSPACE Co.,Ltd. Address before: Gyeongnam Changwon City, South Korea Patentee before: HANWHA TECHWIN Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20190228 Address after: Gyeonggi Do city of South Korea Patentee after: HANWHA TECHWIN Co.,Ltd. Address before: Gyeongnam Changwon City, South Korea Patentee before: HANWHA AEROSPACE Co.,Ltd. |
|
| CP01 | Change in the name or title of a patent holder | ||
| CP01 | Change in the name or title of a patent holder |
Address after: Gyeonggi Do city of South Korea Patentee after: Hanhua Vision Co.,Ltd. Address before: Gyeonggi Do city of South Korea Patentee before: HANWHA TECHWIN Co.,Ltd. |