TWI435279B - 監控系統，影像擷取裝置，分析裝置及監控方法 - Google Patents

Description

監控系統，影像擷取裝置，分析裝置及監控方法

本發明係關於一種監控系統、一種影像擷取裝置、一種分析裝置及一種監控方法。

存在一種監控系統，其包含：一監控相機(下文中亦稱為「IP相機」)，其具有一有線或無線LAN功能；及一監控裝置(下文中亦稱為「中心伺服器」)，其控制及監控複數個IP相機，且該等IP相機及該中心伺服器經由一網路彼此連接。在該監控系統中，該IP相機經由該網路將所擷取之影像資料傳輸至該中心伺服器。該中心伺服器記錄所接收之影像資料，藉由分析該影像資料而偵測一異常之出現，並輸出一警報。以此方式，一觀察者可在核對顯示於一監控器上之影像資料及由該中心伺服器輸出之該警報之細節的同時執行監控。

日本專利第4148285號揭示一種與在一監控裝置監控影像資料並輸出一警報時之物件辨識相關之技術。

在一監控系統中存在一情形，其中一IP相機包含一分析處理區段(舉例而言，移動物件偵測處理區段)且該IP相機產生元資料及事件以貫穿整個系統範圍分配處理。

在一監控中心(中心伺服器)中，一觀察者藉由連線或離線監控每一IP相機之影像。在最近幾年中，觀察者僅監控自IP相機(其每一者具有一分析功能)獲得之一分析結果(元資料或事件)以輕易地監控諸多相機。

然而，當僅藉由一IP相機中之一資源(CPU效能、記憶體大小及諸如此類)執行該分析處理時，難以執行充分的處理。為致使每一IP相機執行分析處理，期望該等IP相機具有例如一高效能CPU及記憶體之硬體。

當前，儘管在IP相機中執行簡單處理(例如，移動物件偵測)，但在IP相機中不執行使用大量記憶體之複雜處理，例如，面部辨識、車輛辨識及匹配處理。

根據上文，期望提供一種新穎及改良之監控系統、影像擷取裝置、分析裝置及可在包含一影像擷取裝置之一監控系統中有效執行分析處理之監控方法。

根據本發明之一實施例，提供一種監控系統，其包含：一影像擷取裝置，該影像擷取裝置包含：一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理並產生第一元資料；及一第一元資料輸出區段，其經由一網路將該第一元資料及不同於該第一元資料之第二元資料輸出至連接至該網路之一監控裝置；及一分析裝置，其包含：一擴展分析區段，其基於自該影像擷取裝置接收之該影像資料執行與該基本分析區段之分析處理不同之分析處理並產生該第二元資料；及一第二元資料輸出區段，其將該第二元資料輸出至該影像擷取裝置。

該監控系統可包含複數個影像擷取裝置。該分析裝置可進一步包含一元資料組合區段，其組合基於來自該等影像擷取裝置中之一者之影像資料所產生之第二元資料與基於來自該等影像擷取裝置中之另一者之影像資料所產生之第二元資料，且該第二元資料輸出區段將經組合之元資料輸出至該等影像擷取裝置中之一者。

該分析裝置可包含複數個擴展分析區段，且每一擴展分析區段執行不同的分析處理並產生不同的第二元資料，該分析裝置可進一步包含一元資料組合區段，該元資料組合區段組合由每一擴展分析區段所產生之第二元資料以產生經組合之元資料，且第二元資料輸出區段可將該經組合之元資料輸出至該等影像擷取裝置。

根據本發明之一實施例，提供一種影像擷取裝置，其包含：一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理以產生第一元資料；及一第一元資料輸出區段，其經由一網路將該第一元資料及第二元資料輸出至連接至該網路之一監控裝置，該第一元資料及第二元資料係藉由基於自該影像擷取裝置所接收之影像資料執行與該基本分析區段之分析處理不同之分析處理而產生於一分析裝置中之一擴展分析區段中。

該影像擷取裝置可進一步包含組合該第一元資料及該第二元資料以產生經組合之元資料之一元資料組合區段。該第一元資料輸出區段可將該經組合之元資料輸出至該監控裝置。

根據本發明之一實施例，提供一種分析裝置，其包含：一擴展分析區段，其自複數個影像擷取裝置接收影像資料且基於所接收之影像資料執行與基本分析區段之分析處理不同之分析處理以產生第二元資料；及一第二元資料輸出區段，其將該第二元資料輸出至該等影像擷取裝置。該等影像擷取裝置具有：一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理並產生第一元資料；及一第一元資料輸出區段，其經由一網路將該第一元資料及不同於該第一元資料之第二元資料輸出至連接至該網路之一監控裝置。

該分析裝置可進一步包含一元資料組合區段，其組合基於來自該等影像擷取裝置中之一者之影像資料所產生之第二元資料與基於來自該等影像擷取裝置中之另一者之影像資料所產生之第二元資料。該第二元資料輸出區段將該經組合之元資料輸出至該等影像擷取裝置。

該分析裝置可包含複數個擴展分析區段，且每一擴展分析區段可執行不同的分析處理並產生不同的第二元資料。該分析裝置可進一步包含一元資料組合區段，其組合由每一擴展分析區段產生之第二元資料以產生經組合之元資料，且該第二元資料輸出區段將該經組合之元資料輸出至該等影像擷取裝置。

根據本發明之一實施例，提供一種監控方法，其包括以下步驟：基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理並藉由一影像擷取裝置產生第一元資料；基於自該影像擷取裝置接收之該影像資料執行分析處理並藉由一分析裝置產生不同於該第一元資料之第二元資料；藉由該分析裝置將該第二元資料輸出至該影像擷取裝置；及藉由該影像擷取裝置經由一網路將該第一元資料及該第二元資料輸出至連接至該網路之一監控裝置。

根據本發明之一實施例，在包含一影像擷取裝置之一監控系統中，可有效地執行分析處理。

下文將參照隨附圖式詳細闡述本發明之較佳實施例。注意，在此說明書及隨附圖式中，以相同的參考編號表示具有大致相同功能及結構之結構元件，並省略對此等結構元件之重複說明。

將按以下次序做出該說明：

1.一實施例

1-1.監控系統之組態

1-2.使用IP相機100及分析伺服器130之分析處理方法

1-3.藉由分析伺服器130之元資料產生方法

1-4.監控系統中之偵測處理

1-5.在監控系統中使用分析伺服器130之偵測處理

1-6.IP相機100與分析伺服器130之間的合作方法

1-7.複數個IP相機100與分析伺服器130之間的關係

1-8.與複數個IP相機100與分析伺服器130之間的合作相關之操作

1-9.關於觀察器

1-10.本實施例之效果

<1.一實施例> [監控系統之組態]

首先將闡述根據本發明之一實施例之監控系統之一組態。圖1係圖解說明根據本發明之監控系統之一組態及一連接實例之一說明性圖式。

根據該實施例之監控系統包含(舉例而言)複數個IP相機100、一分析伺服器130、將IP相機100控制在一中心中之一中心伺服器10、一監控器12、可存取中心伺服器10之一客戶終端機30、轉發來自IP相機100之資料之一代理伺服器20、用於傳輸資料之一網路及諸如此類。IP相機100係一影像擷取裝置之一實例，且分析伺服器130係一分析裝置之一實例。該中心伺服器係一監控裝置之一實例。

作為對相關技術之一改良，考量將該監控系統中之分析處理之一部分指派給一外部分析伺服器。然而，即使在使用一外部伺服器時，為回應每一伺服器之負載及可連接之相機之數目之一增加，亦期望有效地降低該分析伺服器之負載。因此，在此實施例中，將彌補IP相機100之資源之分析伺服器130添加至監控系統。分析伺服器130直接連接至複數個IP相機100，且當自中心伺服器100查看時起到宛如中心伺服器100僅連接至該IP相機100一樣的作用。

該實施例之特徵為，藉由基於複數個IP相機100之安裝資訊整合在分析伺服器130中之每一IP相機100中產生之分析處理結果並將所整合之結果返回至IP相機100，中心伺服器10可接收元資料及事件宛如該等元資料及事件係由執行所有處理之一個IP相機100產生一樣。

[使用IP相機100及分析伺服器130之分析處理方法]

首先，將闡述一種使用IP相機100及分析伺服器130之分析處理方法。

IP相機100係根據IP(網際網路協定)連接至一網路之一相機。

在此說明書中，連接至直接由一觀察者監控之監控器12且在其上安裝有一可顯示觀察器之一伺服器稱為「中心伺服器10」。中心伺服器10可經由該觀察器監控所有IP相機100，且可藉助包含於中心伺服器10中之一記錄器管理所有相機之記錄資料。

分析伺服器130係針對每複數個IP相機100提供，且執行未包含於IP相機100中之分析處理。

代理伺服器20將某些IP相機100作為一群組來管理，且在中心伺服器10與IP相機100之間轉發資料。

觀察者將來自中心伺服器10之一偵測請求發送至每一IP相機100，且透過觀察器監控來自IP相機100之元資料及事件。此時，該觀察者(中心伺服器10)無需知道分析伺服器130之存在。中心伺服器10認識到中心伺服器10直接連接至IP相機100。該觀察者可執行一操作，例如使用客戶終端機30進行監控。

圖2圖解說明伺服器之間的一關係。圖2係圖解說明中心伺服器10、IP相機100及分析伺服器130之間的一關係之一連接方塊圖。此處，為簡明起見，將省略代理伺服器20之說明。代理伺服器20係在中心伺服器10與IP相機100之間，且具有將傳輸一偵測請求及元資料作為其之一基本功能之一作用。

藉由一使用者之一指令，中心伺服器10藉由使用一GUI(圖形使用者介面)或一命令將對應於該指令之一偵測請求發送至IP相機100。IP相機100根據該指令將一偵測結果作為元資料傳輸至中心伺服器10。作為一正常監控功能，將由IP相機所擷取之影像資料傳輸至中心伺服器10。亦可將不同於該偵測請求之相機控制命令及諸如此類自中心伺服器10傳輸至IP相機100。

自IP相機100傳輸之元資料之格式係預確定的。舉例而言，使用二進制格式或XML格式。關於所傳輸之內容，在偵測到一人時傳輸如在表1中所闡述之元資料。

以一類似方式，在偵測到一車輛時，傳輸例如該車輛之移動方向、色彩、類型及牌照編號等元資料。此外，舉例而言，當藉由分析該等元資料由一規則引擎確定一事件(例如，一物件進入某一區域，或該物件穿過某一虛線)時，傳輸該事件。

由於CPU、記憶體及諸如此類之一限制，現有IP相機難以具有可在一個相機中處理所有如上文所述之元資料之一分析處理功能。舉例而言，當前，一IP相機中包含偵測在一顯示螢幕中移動之一部分之一移動物件偵測功能。然而，由於資源短缺，IP相機難以包含多於上述之一功能。

[藉由分析伺服器130之元資料產生方法]

接下來將闡述一種使用彌補IP相機100之能力之分析伺服器130之元資料產生方法。

如圖2中所圖解說明，IP相機100回應於來自中心伺服器100之一請求返回元資料。此時，IP相機100與分析伺服器130互換能力。分析伺服器130執行IP相機100不能執行之分析處理，IP相機100自分析伺服器130接收分析處理之結果，且IP相機100將該結果作為元資料返回至中心伺服器10。

可互換指示哪些能力提前包含於IP相機100與分析伺服器130之間的資訊。舉例而言，可以圖3中所圖解說明之一方式執行能力互換。圖3係圖解說明在IP相機100與分析伺服器130之間的能力互換之一實例之一流程圖。圖3圖解說明一實例，其中在軟體程式之間使用用於互換訊息(物件)之一協定之SOAP。

首先，分析伺服器130呼叫IP相機100(步驟S101)，且IP相機100回應該呼叫(步驟S102)。接著，分析伺服器130回應在步驟S102中回應該呼叫之IP相機100。

[監控系統中之偵測處理]

接下來，將闡述在根據本實施例之監控系統中之偵測處理。圖4係圖解說明在根據本實施例之監控系統中之偵測處理之一流程圖。

首先，中心伺服器10將一偵測請求發送至IP相機100(步驟S111)。接下來，IP相機100分析該請求(步驟S112)。藉由分析該請求，IP相機100確定該請求可否由該IP相機本身回答(步驟S113)。若該請求可得到回答，則IP相機100單獨回答該請求(步驟S121)。

另一方面，若該請求不能得到回答，則IP相機100搜尋分析伺服器130(步驟S114)。當IP相機100不能找到分析伺服器130(步驟S115)時，IP相機100藉由使用僅包含於IP相機100中之能力形成並返回元資料(步驟S121)。在此情形中，清空或忽略元資料之不適當部分並傳輸元資料。

在IP相機100可找到分析伺服器130(步驟S115)時，IP相機100與分析伺服器130互換能力(步驟S116)。當分析伺服器130不具有執行所請求之處理之能力時，舉例而言，當所請求之處理不同於可由分析伺服器130執行之處理(針對一人或針對一車輛)(步驟S117)時，IP相機100藉由使用僅包含於IP相機100中之能力形成並返回元資料。在此情形中，清空或忽略元資料之不適當部分並傳輸元資料。

另一方面，當分析伺服器130具有執行所請求之處理之能力時，執行偵測處理(步驟S118)。下文將闡述使用分析伺服器130之偵測處理。

[使用監控系統中之分析伺服器130之偵測處理]

接下來將闡述使用在根據本實施例之監控系統中之分析伺服器130之偵測處理。圖5係圖解說明根據本實施例之IP相機100之一方塊圖。圖6係圖解說明根據本實施例之分析伺服器130之一方塊圖。為簡明起見，將主要闡述IP相機100與分析伺服器130之間的一關係。在圖5及圖6中，且當參照圖5及圖6闡述該處理時，「‧‧‧A」指示IP相機100執行處理，且「‧‧‧B」指示分析伺服器130執行處理。「‧‧‧C」指示資料被組合。每次元資料或事件穿過一功能方塊(「‧‧‧區段」)時添加至元資料或事件之尾數字遞增，然而，不考量尾數字，元資料或事件基本上係相同資料。

將來自中心伺服器10之一偵測請求發送至IP相機100之分析控制區段102。分析控制區段102根據該請求將一控制信號發送至基本分析區段104及相機-伺服器通信區段A106。

當分析控制區段102確定分析伺服器130係必要時，相機-伺服器通信區段A與分析伺服器130互換能力，且獲得儲存於分析伺服器130之一分析伺服器能力資料區段中之分析伺服器能力。除非該偵測請求改變否則沒有必要再次互換能力。所獲得之分析伺服器能力記錄於分析伺服器能力資料儲存區段108中。IP相機100與具有適合於該偵測請求之分析伺服器能力之分析伺服器130通信。

經由一影像擷取區段將輸入影像發送至基本分析區段104，其中該影像擷取區段由一光學系統(例如，透鏡)、一影像感測器(舉例而言，CMOS影像感測器及CCD影像感測器)及諸如此類構成。基本分析區段104藉由(舉例而言)執行移動物件偵測處理使用該輸入影像產生元資料A1。此時，舉例而言，在上述表1中之元資料之間，由移動物件偵測處理獲得經外切矩形之資訊。

將形成於IP相機100之基本分析區段104中之元資料A1傳輸至相機-伺服器通信區段A106。IP相機100中之相機-伺服器通信區段A106將資料傳輸至分析伺服器130中之相機-伺服器通信區段B132/自分析伺服器130中之相機-伺服器通信區段B132接收資料。

IP相機100將影像資料、相機狀態、元資料A2、控制命令A1及諸如此類傳輸至分析伺服器130。該影像資料係輸入影像。該輸入影像可轉換為JPEG或諸如此類，且該影像之大小可改變。該相機狀態指示(舉例而言)相機之當前平移/傾斜/變焦距值。元資料A2指示在IP相機100之基本分析區段104中產生之元資料。控制命令A1指示用於在分析伺服器130中進行分析之一參數。

分析伺服器130將元資料B2、事件B2及控制命令B1傳輸至IP相機100。元資料B2係在分析伺服器130之擴展分析區段136中產生之元資料。舉例而言，擴展分析區段136執行面部偵測處理並產生例如一頭部位置、一頭部定向、面部器官位置、一面部得分及類似資訊之資訊，該等資訊為在以上表1中所闡述之元資料。藉由面部分析處理，獲得例如男性/女性及年齡等面部屬性。此外，獲得用於面部匹配處理之一面部特徵量。

事件B2係端視元資料B1是否遵照某一規則而產生之資訊。規則引擎區段B138藉由施加一規則(例如，物件進入影像中之某一區域或該物件穿過某一虛線)產生事件B1，及端視該物件是否遵照該規則而產生該事件B1。在此實施例中，事件產生及事件處理並非基本功能。

在執行追蹤處理時，控制命令B1係(舉例而言)改變IP相機100之搖動/傾斜/變焦距功能之一命令。該追蹤處理係其中IP相機100藉由使用一機械控制功能追蹤一物件之處理。

元資料組合區段112藉由組合自分析伺服器130傳輸至IP相機100之元資料B3與自IP相機100中之基本分析區段104獲得之元資料A1產生元資料C。將元資料C作為一元資料流傳輸至元資料通信區段114(第一元資料輸出區段)，且輸出至中心伺服器10。元資料A1及元資料B3可能不能組合於IP相機100中但可單獨傳輸，且其可組合於中心伺服器10中。

元資料C由規則引擎區段A116轉換為事件A1，且作為一事件流由事件通信區段118傳輸至中心伺服器10。輸入影像在影像通信區段122中轉換且作為一影像流傳輸至中心伺服器10。

中心伺服器10藉助GUI或諸如此類顯示每一所接收之流以作為一警報顯示給使用者，並記錄資料/影像。

圖5圖解說明IP相機100穿過其連接至中心伺服器10之網路不同於IP相機100穿過其連接至分析伺服器130之網路。換言之，在圖5中，為闡明每一伺服器之若干個功能之作用，將每一伺服器之若干個功能圖解說明為單獨功能性區塊。然而，本實施例不限於此組態。舉例而言，可安裝IP相機100以便藉由將傳輸位址切換至中心伺服器10之位址或分析伺服器130之位址使得IP相機100透過同一功能方塊連接至中心伺服器10或分析伺服器130。具體而言，影像通信區段122及元資料通信區塊114之功能可包含於相機-伺服器通信區段A106中，且因此其可整合於一個功能方塊中。

接下來將闡述使用根據本實施例之監控系統之分析伺服器130之偵測處理之一操作。圖7係圖解說明使用根據本實施例之監控系統之分析伺服器130之偵測處理之操作之一流程圖。

圖7係圖解說明圖4中之步驟S118中之偵測處理之一流程圖。圖7主要圖解說明元資料之一流程。因此，將省略與規則引擎區段A116及規則引擎區段B138相關之說明。

在IP相機100中，IP相機100之基本分析區段104執行分析處理且然後執行偵測處理(步驟S131)。基本分析區段104產生元資料A1(步驟S132)。

此後，將與偵測源資訊相關之必要資訊自IP相機100之相機-伺服器通信區段A106傳輸至分析伺服器130之相機-伺服器通信區段B132(第二元資料輸出區段)(步驟S141)。此處，該必要資訊包含影像資料、相機狀態、元資料A2及控制命令A1。

在IP相機100及分析伺服器130中並行執行偵測處理。

在分析伺服器130中，擴展分析區段136執行分析處理且然後執行偵測處理(步驟S142)。擴展分析區段136產生元資料B1(步驟S143)。分析伺服器130將在擴展分析區段136中產生之元資料B1傳輸至相機-伺服器通信區段B132，且將元資料B2自相機-伺服器通信區段B132傳輸至IP相機100(步驟S144)。

此後，在IP相機100中，元資料組合區段112藉由組合元資料A1及元資料B3(步驟S133)產生元資料C。元資料A1及元資料B3可能不能組合於IP相機100中且可組合於中心伺服器10中。

IP相機100將元資料C傳輸至中心伺服器10(步驟S134)。以上操作係針對每一處理圖框而執行。該處理圖框可包含相同數目個正常影像圖框或可包含適當減少數目個影像圖框。

[IP相機100與分析伺服器130之間的合作方法]

接下來，將闡述當複數個IP相機100與分析伺服器130彼此連接時之一有效合作方法。圖8係圖解說明IP相機100之一安裝實例之一說明性圖式。在圖8中，沿一警戒區域之外部周圍配置有複數個IP相機100(此處，三個IP相機：IP相機100-1、IP相機100-2及IP相機100-3)。

圖9係圖解說明由每一IP相機100擷取之一人Obj1及一車輛Obj2之所擷取影像實例之一說明性圖式。

當對IP相機100執行位置校準時，可計算由每一IP相機100擷取之運動區域是否相同。另一選擇係，藉由參照一目標物件之色彩資訊及形狀資訊，可識別該目標物件。藉由使用以上事實，基於來自IP相機100-3之影像資料在擴展分析區段136中產生之元資料與基於IP相機100-1之元資料相組合。因此，舉例而言，可將目標物件(人Obj1)之一面部屬性作為IP相機100-1之元資料輸出，其中該目標物件太小以至於不能如圖9a-1中所圖解說明在IP相機100-1中獲得面部屬性。

如上所述，中心伺服器10表現得宛如其僅連接至IP相機100一樣。此乃因可輸出由分析伺服器130及IP相機100-3產生且難以由IP相機100-1產生之元資料宛如該元資料係由IP相機100-1產生一樣。

舉例而言，類似地，即使當目標物件(車輛Obj2)在影像中太小(如在圖9b-1中圖解說明)以至於難以辨識牌照編號時，可產生藉由使用分析伺服器130及IP相機100-3將牌照編號之資訊添加至其之元資料並自IP相機100-1輸出該元資料。

[複數個IP相機100與分析伺服器130之間的關係]

接下來，將闡述根據本實施例之複數個IP相機100與分析伺服器130之間的一關係。圖10係圖解說明根據本實施例之複數個IP相機100及分析伺服器130之一方塊圖。在圖10之一實例中，將闡述其中存在三個IP相機100之一情形，該三個IP相機係第一相機100-1、第二相機100-2及第三相機100-3。所安裝之IP相機100之數目不限於在圖10中所圖解說明之實例中之IP相機100之數目。

第一相機100-1之(同樣地，第二相機100-2之、第三相機100-3之)基本分析區段104產生元資料A1-1(元資料A1-2、元資料A1-3)。

相機-伺服器通信區段A106接收所產生之元資料A1-1(元資料A1-2、元資料A1-3)、影像資料及諸如此類，且將元資料A2-1(元資料A2-2、元資料A2-3)、影像資料及諸如此類傳輸至分析伺服器130。相機-伺服器通信區段A106自分析伺服器130接收由分析伺服器130產生之元資料E2。

分析伺服器130之相機-伺服器通信區段B132自每一IP相機100(第一相機100-1、第二相機100-2第三相機100-3)接收元資料A2(元資料A2-1、元資料A2-2、元資料A2-3)及影像資料。相機-伺服器通信區段B132將元資料E2傳輸至每一IP相機100。

分析伺服器130之相機合作資訊區段142自IP相機100(第一相機100-1、第二相機100-2、第三相機100-3)接收每一IP相機100之合作資訊(例如，位置合作資料)，且提前保持該合作資訊。

識別區段144基於來自IP相機100之元資料確定由每一IP相機100產生之元資料表示之目標物件彼此是否相同。

擴展分析區段(N)136-N執行分析處理(例如，人偵測、面部偵測及面部驗證)，並產生元資料B1。擴展分析區段(N) 136-N指示個別功能方塊之每一擴展分析區段具有彼此不同之一功能。舉例而言，擴展分析區段(1) 136-1具有人偵測之一功能，擴展分析區段(2) 136-2具有面部偵測之一功能，擴展分析區段(3) 136-3具有面部驗證之一功能，及諸如此類。

元資料組合區段B148組合基於來自IP相機100之資料所產生之每一元資料與由其他IP相機100基於由識別區段144產生之識別信號所獲得之元資料資訊。舉例而言，元資料組合區段B148組合基於來自第一相機100-1之資料所產生之元資料與由第二相機100-2及第三相機100-3基於由識別區段144產生之識別信號所獲得之元資料資訊。

元資料緩衝區段146本身儲存其他IP相機100之元資料及IP相機100在其他時間之元資料，且在組合元資料時使用此等元資料。

[與複數個IP相機100與分析伺服器130之間的合作相關之操作]

將闡述與複數個IP相機100與分析伺服器130之間的合作相關之操作。圖11係圖解說明與根據本實施例之複數個IP相機100與分析伺服器130之間的合作相關之一操作之一流程圖。圖11中所圖解說明之流程圖不包含相機合作資訊至分析伺服器130之初步傳輸。由於每一IP相機100具有相同的處理流程，因此將在此流程圖中省略相同處理流程之說明。圖11係圖解說明圖4中之步驟S118中之偵測處理之一流程圖。

首先，在每一IP相機100中，IP相機100之基本分析區段104執行分析處理且然後執行偵測處理(步驟S131)。基本分析區段104產生元資料A1(步驟S132)。

此後，將與偵測源資訊相關之必要資訊自IP相機100之相機-伺服器通信區段A106傳輸至分析伺服器130之相機-伺服器通信區段B132(步驟S141)。此處，該必要資訊包含影像資料、相機狀態、元資料A2及控制命令A1。

在IP相機100及在分析伺服器130中並行執行偵測處理。在分析伺服器130中並行執行兩種類型之流程。

在分析伺服器130中，擴展分析區段136執行分析處理且然後執行偵測處理(步驟S142)。擴展分析區段產生元資料B1(步驟S143)。

所產生之元資料B1儲存於元資料緩衝區段146(步驟S151)中。在步驟S162中，所儲存之元資料B1被元資料組合區段B148稱為元資料D。

另一方面，藉由使用經由相機-伺服器通信區段B132自IP相機100傳輸至分析伺服器130之元資料A3及保持於相機合作資訊區段142中之相機合作資訊執行識別處理(步驟S161)。在該識別處理中，自其他相機之元資料及當前用於元資料緩衝區段146中之相機在其他時間之元資料搜尋同一目標物件。

自元資料緩衝區段146呼叫目標物件之在複數個IP相機100中識別為相同之元資料(步驟S162)。

此後，元資料組合區段B148組合在擴展分析區段136-N中產生之元資料B1及自元資料緩衝區段146呼叫之元資料D(步驟S171)。

分析伺服器130將在擴展分析區段136中產生之元資料B1傳輸至相機-伺服器通信區段B132，且將元資料B2自相機-伺服器通信區段B132傳輸至IP相機100(步驟S144)。

此後，在IP相機100中，元資料組合區段112藉由組合在IP相機100中產生之元資料A1及自分析伺服器130傳輸之元資料B3產生元資料C(步驟S133)。元資料A1及元資料B3可能不能組合於IP相機100中，但可組合於中心伺服器10中。

IP相機100將經組合之元資料C傳輸至中心伺服器10(步驟S134)。以上操作係針對每一處理圖框而執行。該處理圖框可包含相同數目個正常影像圖框或可包含適當減少數目個影像圖框。

[關於觀察器]

接下來，將闡述顯示於根據本實施例之監控系統中之監控器12或客戶端30之一螢幕上之觀察器。圖12係圖解說明顯示於監控器12或該螢幕上之觀察器180之一說明性圖式。

觀察器180包含(舉例而言)一相機影像板182、一控制板184、一警報列表板186及諸如此類。

相機影像板182配置並顯示複數個IP相機100之影像。儘管相機影像板182在圖12中係一2×2矩陣，但本實施例不限於此。舉例而言，相機影像板182可係一1×1矩陣、一16×16矩陣，或一2×3矩陣。此處，儘管藉由劃分監控器螢幕將該等相機影像顯示於一個監控器12上，但可藉由使用複數個監控器12將每一IP相機100之影像個別地顯示於一個監控器12上。舉例而言，可在一個監控器12上顯示一個IP相機100之影像。

控制板184係由一GUI構成，該GUI執行例如IP相機100之一PTZ設定及中心伺服器10之一記錄設定等控制。

警報列表板186顯示在IP相機100或中心伺服器10中產生之一警報列表。

圖12A係圖解說明當分析伺服器130之偵測處理停止時之一狀態之一說明性圖式。當分析伺服器130之偵測處理停止時，在相機影像板182中之IP相機之目標物件上顯示一偵測圖框192(虛線部分)。同時，在警報列表板186上顯示警報及元資料。

圖12B係圖解說明當分析伺服器130之偵測處理進行時之一狀態之一說明性圖式。當分析伺服器130之偵測處理進行時，在相機影像板182中之IP相機之目標物件上顯示偵測圖框192，且可進一步顯示額外資訊194。舉例而言，當目標物件係一人時，將基於另一IP相機100所核對且登記於一資料庫中之一名字顯示為額外資訊194。當目標物件係一車輛時，將在另一IP相機100中核對之牌照編號之資訊顯示為額外資訊194。同時，在警報列表板194上顯示將登記為詳細資訊之名字及牌照編號添加至其之警報及元資料。

[本實施例之效果]

如上所述，本實施例係關於一種藉由來自中心伺服器10之請求在IP相機100中產生之元資料之產生方法。在該實施例中，複數個IP相機100及分析伺服器130有效地共享處理，並產生元資料。

根據本實施例，中心伺服器10可在不知道分析伺服器130存在之情形下執行操作。當分析伺服器130及IP相機100彼此連接時，在自中心伺服器10查看時，所請求之元資料之資訊量及內容量可增加。另一方面，當分析伺服器130及IP相機100彼此不連接時，在自中心伺服器10查看時，所請求之元資料包含最小資訊量及最小內容量。

當複數個IP相機100連接至分析伺服器130時，若另一IP相機100擷取與當前所使用之IP相機之目標物件相同之目標物件，則可經由分析伺服器130將當前所使用之IP相機難以獲得之資訊添加至元資料。因此，即使在一個IP相機100本身不具有一高位準分析能力時，在自中心伺服器10查看時該IP相機可執行得宛如其具有一高位準分析能力一樣。

熟習此項技術者應理解，可端視設計需求及其他因素作出各種修改、組合、子組合及變更，只要其在隨附申請專利範圍或其等效物之範疇內。

本申請案含有與2009年5月21日在日本專利局提出申請之日本優先專利申請案JP 2009-123413中所揭示之標的物相關之標的物，該申請案以全文引用之方式併入本文中。

10．．．中心伺服器

12．．．監控器

20．．．代理伺服器

30．．．客戶端端子

100-1．．．IP相機100

100-2．．．IP相機100

100-3．．．IP相機100

100．．．IP相機

102．．．分析控制區段

104．．．基本分析區段

108．．．分析伺服器能力儲存區段

112．．．元資料組合區段

114．．．元資料通信區段

118．．．事件通信區段

122．．．影像通信區段

130．．．分析伺服器

136-1．．．擴展分析區段(1)

136-2．．．擴展分析區段(2)

136-3．．．擴展分析區段(3)

136-n．．．擴展分析區段(n)

136．．．擴展分析區段

142．．．相機合作資訊區段

144．．．識別區段

146．．．元資料緩衝區段

圖1係圖解說明根據本發明之一實施例之一監控系統之一組態及一連接實例之一說明性圖式；

圖2係圖解說明一中心伺服器10、一IP相機100及一分析伺服器130之間的一關係之一連接方塊圖；

圖3係圖解說明在IP相機100與分析伺服器130之間的能力互換之一實例之一流程圖；

圖4係圖解說明在根據本實施例之監控系統中之偵測處理之一流程圖；

圖5係圖解說明根據本實施例之IP相機100之一方塊圖；

圖6係圖解說明根據本實施例之分析伺服器130之一方塊圖；

圖7係圖解說明使用根據本實施例之監控系統之分析伺服器130之偵測處理之一操作之一流程圖；

圖8係圖解說明IP相機100之一安裝實例之一說明性圖式；

圖9係圖解說明由每一IP相機100擷取之一人Obj1及一車輛Obj2之所擷取影像實例之一說明性圖式；

圖10係圖解說明根據本實施例之複數個IP相機100及分析伺服器130之一方塊圖；

圖11係圖解說明與根據本實施例之複數個IP相機100與分析伺服器130之間的合作相關的一操作之一流程圖；及

圖12係圖解說明顯示於一監控器12或一螢幕上之觀察器180之一說明性圖式。

10．．．中心伺服器

12．．．監控器

20．．．代理伺服器

30．．．客戶端端子

100．．．IP相機

130．．．分析伺服器

Claims (17)

1. 一種監控系統，其包括：一影像擷取裝置，其包含一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理並產生第一元資料，該第一元資料包含基於移動物件偵測處理所獲得之一經外切矩形，及一第一元資料輸出區段，其經由一網路將該第一元資料及不同於該第一元資料之第二元資料輸出至連接至該網路之一監控裝置；及一分析裝置，其包含一擴展分析區段，其基於自該影像擷取裝置接收之該影像資料執行與該基本分析區段之分析處理不同之分析處理並產生該第二元資料，該第二元資料於該經外切矩形及該影像資料之至少一者指定一頭部定向及一面部之面部特徵之位置，及一第二元資料輸出區段，其將該第二元資料輸出至該影像擷取裝置，其中該影像擷取裝置不能產生由該分析裝置所產生之該第二元資料。
2. 如請求項1之監控系統，其包括：複數個該等影像擷取裝置，其中，該分析裝置進一步包含一元資料組合區段，該元資料組合區段組合基於來自該等影像擷取裝置中之一者之該影像資料所產生之該第二元資料與基於來自該等影像擷取裝置中之另一者之該影像資料所產生之該第二元資料，且 該第二元資料輸出區段將該經組合之元資料輸出至該等影像擷取裝置中之該一者。
3. 如請求項1之監控系統，其中，該分析裝置包含複數個該等擴展分析區段，且每一擴展分析區段執行不同的分析處理並產生不同的第二元資料，該分析裝置進一步包含一元資料組合區段，其組合由每一擴展分析區段產生之該第二元資料以產生經組合之元資料，且該第二元資料輸出區段將該經組合之元資料輸出至該影像擷取裝置。
4. 如請求項1之監控系統，其中該影像擷取裝置及該分析裝置根據一簡易物件存取協定(SOAP)互換能力資訊。
5. 如請求項1之監控系統，其中該影像擷取裝置及該分析裝置於產生該第一元資料及該第二元資料之至少一者前互換能力資訊。
6. 如請求項1之監控系統，其進一步包括：複數個第二影像擷取裝置，該等複數個第二影像擷取裝置之每一者擷取該被攝體之一不同影像，且該等複數個第二影像擷取裝置基於該被攝體之該等不同影像產生不同於該第一及第二元資料之額外元資料。
7. 如請求項6之監控系統，其中該等複數個第二影像擷取裝置之至少一者能夠產生該額外元資料而該影像擷取裝置不能產生該額外元資料。
8. 如請求項6之監控系統，其中來自該等複數個第二影像擷取裝置之每一者之該被攝體之該等不同影像係同時地被顯示於一相機影像板中，而來自該等複數個第二影像擷取裝置之每一者之該額外元資料被顯示於一警報列表板。
9. 如請求項6之監控系統，其中該額外元資料指定該被攝物之一名稱。
10. 一種影像擷取裝置，其包括：一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理以產生第一元資料，該第一元資料包含基於移動物件偵測處理所獲得之一經外切矩形；及一第一元資料輸出區段，其經由一網路將該第一元資料及第二元資料輸出至連接至該網路之一監控裝置，該第一元資料及第二元資料係藉由基於自該影像擷取裝置所接收之該影像資料執行與該基本分析區段之分析處理不同之分析處理而產生於一分析裝置中之一擴展分析區段中，該第二元資料於該經外切矩形及該影像資料之至少一者指定一頭部定向及一面部之面部特徵之位置，其中該影像擷取裝置不能產生由該分析裝置所產生之該第二元資料。
11. 如請求項10之影像擷取裝置，其進一步包括：一元資料組合區段，其組合該第一元資料及該第二元資料以產生經組合之元資料， 其中，該第一元資料輸出區段將該經組合之元資料輸出至該監控裝置。
12. 一種分析裝置，其包括：一擴展分析區段，其自複數個影像擷取裝置接收影像資料，該等影像擷取裝置具有：一基本分析區段，其基於自擷取一被攝體之一影像之一影像擷取區段輸入之該影像資料執行分析處理並產生第一元資料，該第一元資料包含基於移動物件偵測處理獲得一經外切矩形；及一第一元資料輸出區段，其經由一網路將該第一元資料及不同於該第一元資料之第二元資料輸出至連接至該網路之一監控裝置，並基於該所接收之影像資料執行與該基本分析區段之分析處理不同之分析處理以產生該第二元資料；及一第二元資料輸出區段，其將該第二元資料輸出至該等影像擷取裝置，該第二元資料於該經外切矩形及該影像資料之至少一者指定一頭部定向及一面部之面部特徵之位置，其中該影像擷取裝置不能產生由該分析裝置所產生之該第二元資料。
13. 如請求項12之分析裝置，其進一步包括：一元資料組合區段，其組合基於來自該等影像擷取裝置中之一者之該影像資料所產生之該第二元資料及基於來自該等影像擷取裝置中之另一者之該影像資料所產生之該第二元資料， 其中，該第二元資料輸出區段將該經組合之元資料輸出至該等影像擷取裝置。
14. 如請求項12之分析裝置，其中，該分析裝置包含複數個該等擴展分析區段，且每一擴展分析區段執行不同的分析處理並產生不同的第二元資料，該分析裝置進一步包含一元資料組合區段，其組合由每一擴展分析區段產生之該第二元資料以產生經組合之元資料，且該第二元資料輸出區段將該經組合之元資料輸出至該等影像擷取裝置。
15. 一種監控方法，其包括以下步驟：基於自擷取一被攝體之一影像之一影像擷取區段輸入之影像資料執行分析處理並藉由一影像擷取裝置產生第一元資料，該第一元資料包含基於移動物件偵測處理所獲得之一經外切矩形；基於自該影像擷取裝置接收之該影像資料執行分析處理並藉由一分析裝置產生不同於該第一元資料之第二元資料，該第二元資料於該經外切矩形及該影像資料之至少一者指定一頭部定向及一面部之面部特徵之位置；藉由該分析裝置將該第二元資料輸出至該影像擷取裝置；及藉由該影像擷取裝置經由一網路將該第一元資料及該第二元資料輸出至連接至該網路之一監控裝置， 其中該影像擷取裝置不能產生由該分析裝置所產生之該第二元資料。
16. 如請求項15之監控方法，其進一步包括：藉由複數個第二影像擷取裝置暫時地追蹤該被攝物；藉由該等複數個第二影像擷取裝置之至少一者基於該暫時追蹤以即時產生不同於該第一及第二元資料之額外元資料；及以該額外元資料顯示藉由該等複數個第二影像擷取裝置獲得之被暫時地追蹤之該被攝物之影像。
17. 如請求項16之監控方法，其中該額外元資料指定對應於該被攝物之牌照資訊。