TW201419849A - 監測方法及攝影機 - Google Patents

監測方法及攝影機 Download PDF

Info

Publication number
TW201419849A
TW201419849A TW102135405A TW102135405A TW201419849A TW 201419849 A TW201419849 A TW 201419849A TW 102135405 A TW102135405 A TW 102135405A TW 102135405 A TW102135405 A TW 102135405A TW 201419849 A TW201419849 A TW 201419849A
Authority
TW
Taiwan
Prior art keywords
area
protected area
critical
outside
protected
Prior art date
Application number
TW102135405A
Other languages
English (en)
Other versions
TWI538503B (zh
Inventor
Daniel Gustafsson
Jonatan Kahrstroem
Willy Sagefalk
Gustav Traeff
Original Assignee
Axis Ab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Axis Ab filed Critical Axis Ab
Publication of TW201419849A publication Critical patent/TW201419849A/zh
Application granted granted Critical
Publication of TWI538503B publication Critical patent/TWI538503B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19652Systems using zones in a single scene defined for different treatment, e.g. outer zone gives pre-alarm, inner zone gives alarm
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/1968Interfaces for setting up or customising the system

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

提供一種用於藉由一監測攝影機(1)監測一區域之方法及系統。在該受監測區域(2)內界定一受保護區(5),且將一可疑物件(9a、9b)偵測為存在於該受保護區內部與外部之一物件。判定該可疑物件之一關鍵位置,且判定該關鍵位置處於該受保護區(5)內部抑或外部。若該關鍵位置處於該受保護區外部,則觸發一第一動作。

Description

監測方法及攝影機
本發明係關於一種用於藉由監測攝影機監測區域之方法及系統。
監控攝影機目前用於許多不同應用中以用於監測室內環境及室外環境兩者。攝影機可(例如)用於監測人員自櫃檯後方服務顧客及櫃檯內部可用作物品或設備之儲存之處的區域,物品或設備的儲存之處應限於配備於櫃檯之人員進入。此等環境之實例可為酒店總服務台、銀行辦公櫃檯、接待台、酒吧、快餐櫃檯、加油站之收銀台或機場之簽入櫃檯。另一實例為在配有工作人員之櫃檯內銷售香水、珠寶或腕錶的店鋪或專櫃。當在工作台或櫃檯處工作之人員正為顧客服務時,該人員可能難以持續追蹤接近工作台且可能試圖存取僅必須由在櫃檯處工作之人員所處置之物品或設備的其他人員。因此,將需要提供改良之解決方案以用於輔助配備於櫃檯之工作人員防止對櫃檯後方區域的未經授權之存取。
鑒於以上內容,因此本發明之一目標為提供一種監測區域(諸如,零售櫃檯)之改良方法。
根據本發明之第一態樣,提供一種藉由監測攝影機監測區域之方法,其包含以下步驟: 在受監測區域內界定受保護區,將可疑物件偵測為存在於受保護區內部與外部之物件,判定可疑物件之關鍵位置,判定關鍵位置處於受保護區內部抑或外部,及若關鍵位置處於受保護區外部,則觸發第一動作。
藉由使用此方法,有可能以高效且非侵入性方式監測櫃檯周圍之區域,允許設置規則以僅允許具有某些屬性之物件存取某些區域。換言之,該方法使得有可能容易地且高效地設置物件之位置鑑別規則。該方法為靈活的且可適用於不同監測情境以及各種不同之實際實施。
該方法可進一步包含在受監測區域內界定遮蔽區之步驟,其中第一動作包含執行判定關鍵位置是否處於遮蔽區外部之步驟,及若關鍵位置處於受保護區外部以及遮蔽區外部,則觸發第二動作。此操作引入額外可能性以使該方法適於不同監測情境,諸如需要允許自某一方向進入受保護區之情境。
界定受保護區之步驟可包含偵測圍繞受保護區之至少一部分之實體元件的邊界。以彼方式,有可能藉由使系統偵測櫃檯之邊界及將受保護區界定為(例如)櫃檯後方之區域或櫃檯內部之體積來執行監測系統之自動設置。
另外或替代地,界定受保護區之步驟可包含存取預先界定之受保護區的座標。以此方式,使用者可(例如)在圖形使用者介面中繪製受保護區之限制,該圖形使用者介面提供設置系統之使用者易用之方式。此操作可與對實體元件之邊界之自動偵測(例如,藉由使用者經由使用者介面確認偵測到之邊界)組合。
界定受保護區之步驟可包含界定三維受保護體積,且判定關鍵位置處於受保護區內部抑或外部之步驟可包含判定可疑物件處於受保 護體積之二維投影內部抑或外部。此操作使得有可能將櫃檯後方及其頂表面下方之體積設定為受保護區且仍能夠忽略站立於櫃檯後方之人員。
偵測可疑物件之步驟可包含偵測受保護區內部之物件像素,及判定物件像素所屬於之物件是否存在於受保護區外部。此操作提供偵測可疑物件之易於實施且高效之方法。
判定可疑物件之關鍵位置的步驟可包含將關鍵位置設定為包括於可疑物件中之像素之像素座標的平均位置。此操作提供尋找可用於三維物件表示及二維物件表示兩者之關鍵位置的易於實施且高效之方法。
判定關鍵位置之步驟可包含將關鍵位置設定為可疑物件之最高點之位置。此操作在能夠進行高度量測之攝影機(亦即,具有三維成像能力之影像感測器)包括於監測系統中的情況下可為便利之選項。可將最高點位置選擇為物件之十個最高點位置之平均值或中間值,以便增加穩健性。人員之最高點通常為其頭部,意謂此最高點在大多數狀況下為對人員所站立之處的正確估計。
判定關鍵位置之步驟可包含:若包括於可疑物件中之預定百分比之像素處於受保護區外部,則將關鍵位置設定為受保護區外部之位置。此操作在以下兩種情況下為便利之選項:當物件之三維表示可用時,及當物件之二維表示可用時。若使用熱感攝影機,則此操作亦為便利之選項。該百分比可(例如)選擇為50%或70%,或(例如)藉由給出正確估計之試誤法而判定的任何值。
判定關鍵位置之步驟可包含將關鍵位置設定為可疑物件之最高溫度之位置。人員之溫度在頭部分區中通常最高,其意謂此位置通常將為對人員之身體所定位之處的正確估計。為增加穩健性,將有可能將最高溫度位置設定為(例如)十個最高溫度位置之平均值或中間值。 亦將有可能添加其他準則,以使得最高溫度將必須由具有合理高溫之分區所圍繞。
判定關鍵位置之步驟可包含將關鍵位置設定為使用一系列物件分類器偵測到之可疑物件之一部分的位置,該部分諸如以下各者中之一者:面部、頭部、一對肩部及禮帽。此操作將使得有可能容易地使關鍵位置之判定適於多種不同監測情境。
根據本發明之第二態樣,一種用於監測區域之監測系統包含:監測攝影機;區界定單元,其經配置以在受監測區域內界定受保護區;可疑物件偵測單元,其經配置以將可疑物件偵測為存在於該受保護區內部與外部之物件;物件位置判定單元,其經配置以判定可疑物件之關鍵位置且判定該關鍵位置處於受保護區內部抑或外部;及動作觸發單元,其經配置以在關鍵位置經判定為處於保護區外部之情況下觸發第一動作。
物件位置判定單元可包含物件分類器單元、高度量測單元或熱量量測單元中之一或多者以判定物件分類器、物件之高度或物件之溫度,以便判定物件之關鍵位置。
根據本發明之第三態樣,一種電腦可讀記錄媒體具有記錄於其上之在執行於具有處理能力之器件上時用於實施如請求項1至12中任一項之方法的程式。
本發明之第二態樣及第三態樣均與如上文結合第一態樣所描述之相同優點相關聯。
本發明之進一步適用性範疇將自下文給出之詳細描述變得顯而易見。然而應瞭解,詳細描述及特定實例雖然指示本發明之較佳實施例,但僅為說明而給出,此係因為彼等熟習此項技術者將自此詳細描述顯而易見在本發明之範疇內之各種改變及修改。因此應瞭解,本發明並不限於所描述之器件之特定組件部分或所描述之方法之步驟,此 係因為此器件及方法可變化。亦應瞭解,本文中使用之術語僅為描述特定實施例之目的而並非意欲具有限制性。須注意,除非上下文中另外清楚地指出,否則如說明書及所附申請專利範圍中所使用之詞「一」及「該」意欲意謂存在該等元件中之一或多者。因此,例如,對於「一感測器」或「該感測器」之引用可包括若干器件及其類似者。此外,詞「包含」不排除其他元件或步驟。
1‧‧‧監測攝影機
3‧‧‧受監測區域
5‧‧‧受保護區
7‧‧‧實體元件/櫃檯
9a‧‧‧可疑物件
9b‧‧‧可疑物件/商店職員
9c‧‧‧物件
9d‧‧‧物件
10‧‧‧物件之手
11‧‧‧遮蔽區
12‧‧‧儲存於櫃檯中之物品
13‧‧‧監測系統
15‧‧‧區界定單元
17‧‧‧可疑物件界定單元
19‧‧‧物件位置判定單元
21‧‧‧動作觸發單元
600‧‧‧監測區域之方法
現將藉由實例且參看隨附示意性圖式更詳細地描述本發明,其中:圖1展示監測區域之監測攝影機。
圖2說明俯視之受監測區域。
圖3說明俯視之另一受監測區域。
圖4以橫截面圖說明又一受監測區域
圖5展示監測系統。
圖6說明監測區域之方法。
圖1說明監測攝影機1經配置以監測區域3之例證情形。監測攝影機l可代表具有不同成像能力之監測攝影機之群組或包括若干影像感測器之攝影機。該一或多個攝影機可(例如)包括擷取可見光影像之影像感測器、產生受監測區域內之溫度之影像的熱感測器,或擷取三維影像之影像感測器(例如,飛行時間(TOF)影像感測器,其給出距不同像素之距離的影像,自該影像有可能計算受監測區域及其中之物件之深度或高度)。
在所說明之實例中,受監測區域3包括藉由實體元件7(例如,以櫃檯之形式)而界定之受保護區5。物件9a、9b及9c存在於受監測區域3內。圖2為圖1中所說明之情形的俯視圖。換言之,圖2示意性地說明 由攝影機1所擷取之影像。可注意到,在使用具有三維成像能力之監測系統的情況下,受保護區可藉由一或多個平面界定;或在使用具有二維成像能力之監測系統的情況下,受保護區可藉由一或多條線界定。
在圖1及圖2中所展示之情形中,具有可疑意圖之顧客(物件9a)緊鄰櫃檯7站立且將手伸入櫃檯後方之區域(受保護區5),(例如)以便對僅於櫃檯出售之昂貴產品進行存取。物件9b(代表配備於櫃檯之職員)正從事與另一顧客(物件9c)之交談。因此,物件9b未意識到物件9a正對櫃檯後方之物品進行未經授權之存取。
根據本文所呈現之方法及裝置,藉由分析由監測攝影機擷取之影像以在第一步驟中找到同時存在於受保護區內部與外部之物件,可防止自櫃檯後方之盜竊。此物件可表示可疑物件,此係因為其為需要進一步分析以判定其是否正執行非准許動作之物件。
可以各種方式執行可疑物件之偵測。一選項為尋找處於受保護區內部之任何物件像素,且接著判定與彼等物件像素相關聯之物件是否亦存在於受保護區外部。後者可(例如)藉由檢查是否存在屬於同一物件之其他物件像素及彼等其他物件像素中之任一者是否處於受保護區外部而進行。
如以下更詳細地論述,物件之關鍵位置亦可用以直接判定以下兩者:物件是否存在於受保護區外部,及其關鍵位置是否處於受保護區外部。
另一選項為偵測為受保護區5劃界之線或平面的交叉。當此線或平面交叉時,可假設物件存在於受保護區內部與外部,換言之,與線或平面之交叉相關聯之物件為可疑物件且需要進一步調查。
返回至圖1及圖2,顯然物件9a及物件9b(正將手臂擱置於櫃檯上且可能伸出櫃檯(例如)以向顧客9c展示一件商品之職員)兩者將被判定 為可疑物件。為了忽略物件9b且僅對物件9a作出反應,進一步分析影像以尋找存在於受保護區內部與外部之每一物件(亦即,物件9a及9b)的關鍵位置。
當發現可疑物件具有處於受保護區外部之關鍵位置時,(例如)用以下形式觸發動作:光告警或聲音告警、條目至日誌中之加入、開始記錄來自攝影機之影像,或其他類型之監測動作,諸如對來自(例如)另一監測器件之影像或感測器輸入之分析的起始。如本文所使用之術語動作應在廣義上進行解釋,且亦應理解為併有多個動作,諸如攝影機偵測事件或經偵測之事件藉由攝影機發送至(例如)視訊分析引擎。因此,在此實例中,將針對物件9a觸發動作。當涉及到職員(物件9b)時,由於其關鍵位置處於受保護區內部,因此將不觸發動作。為達成完整性,可注意到,物件9c僅存在於受保護區外部,因此無需尋找其關鍵位置。
將物件之關鍵位置設定為物件之身體的主要部分可能定位之位置,或在某種意義上該物件所站立之位置。存在用於判定物件之關鍵位置的若干不同選項,且可以合適方式組合該等不同選項以使判定更為準確。
一實例為計算經判定為屬於某一物件之像素之像素座標的平均值,且將彼物件之關鍵位置設定為經計算之平均座標值。此操作亦可被視為判定物件之質心或重心(在二維區域抑或三維空間中)。
若能夠判定物件在受監測區域中之深度或高度的監測攝影機包括於監測系統中,則有可能使用物件之最高點作為其關鍵位置。在大多數狀況下,物件之最高點將為對物件頭部所處之處的準確量測。若存在關於高度量測結果之正確性的不確定性,則物件之最高點之位置可設定為在物件內量測之(例如)十個最高點之座標的平均位置或中間位置,以便增加穩健性。
另一選項為決定:若包括於某一物件中之預定百分比之像素處於受保護區外部,則彼物件之關鍵位置處於受保護區外部。此百分比可(例如)為50%或70%,或視為適合於此目的之另一值。
在熱敏感攝影機包括於監測系統中之情況下,物件之溫度可用以設定關鍵位置。人員之溫度在頭部分區中通常最高,且手及手臂通常較冷。由此得出,針對物件所偵測之最高溫度之位置可用作關鍵位置。亦將有可能添加準則,以使得最高溫度必須由具有合理高溫之物件分區所圍繞,(例如)以便區別物件手中固持有點燃之香菸的狀況。若存在關於溫度量測結果之正確性的不確定性,則正如最高點量測一樣,將有可能將物件之最高溫度之位置設定為在物件內量測之(例如)十個最高溫度之座標的中間位置,以便增加穩健性。
物件之關鍵位置亦可設定為使用一系列物件分類器偵測之物件的一部分的位置。物件分類器可(例如)為以下各者中之一者:面部、頭部、一對肩部、禮帽或便帽。物件分類器之概念已描述於(例如)US 7,099,510中。
可注意到,判定物件之關鍵位置的所有所描述方式在擷取二維影像與在擷取包括深度座標之三維影像時將均為有用的。
尋找可疑物件之關鍵位置的不同方法可彼此組合,且亦可結合關於物件之移動歷史(若此歷史可用)的資訊而使用。通常,表示試圖對櫃檯後方之區域進行未經授權之存取之人員的物件將具有在處於受保護區外部之區域內接近櫃檯之移動歷史。在櫃檯處工作之商店職員將通常具有包括櫃檯後方之各種位置的移動歷史。另一選項為將關於可疑物件之關鍵位置之資訊與物件之不同特性組合,諸如若僅由商店職員穿著一件特定之衣物,則此情形可經偵測且用作忽略已分類為可疑物件之物件的額外準則。
在尋找可疑物件之步驟之前,可能已分析由攝影機擷取之影像 以分離前景與背景,且可能已使用物件分段來將攝影機視圖內之物件分段。
在分析物件時,可發生可能需將在影像分析意義上合併之兩個物件分裂的情形。此情形可(例如)為商店職員與顧客握手或將物品遞給顧客之狀況。此情形可藉由添加分裂物件之步驟而避免,分裂物件係藉由以下步驟來進行:「切掉」具有手臂之厚度且屬於具有在受保護區外部之關鍵位置之物件的任何部分,及接著對具有與受保護區內之物件像素相同之類別的物件之數目進行技術。若該數目大於一,則此為存在已合併之兩個物件的指示,其很可能意謂未發生有企圖之盜竊。若數目等於一,則此為正發生盜竊之指示且應觸發動作。
在圖3中,展示另外已界定遮蔽區11之另一情形。界定遮蔽區在意欲允許物件自某一方向進入受保護區5而不觸發告警動作之情形下為有用的。在此狀況下,在找到滿足以上所論述之如下兩個條件之物件(在此狀況下為物件9d)時觸發第一動作:存在於受保護區內部與外部,及其關鍵位置在受保護區外部。在此狀況下,第一動作為另外檢查物件之關鍵位置處於遮蔽區11內部抑或外部。
在圖3中所展示之情形中,物件9d之關鍵位置處於遮蔽區11內部,且因此將不觸發第二動作。在物件9d已使其關鍵位置處於遮蔽區外部,則將已觸發第二動作(例如,與參看圖1及圖2所描述之以上實例中類型相同之動作),該第二動作暗示已發生至受保護區中之不適當進入。
在圖4中,說明利用本文所呈現之想法之又一方式。在圖4中,將受保護區界定為櫃檯下方之體積。物件9a正試圖存取儲存於櫃檯中之物品12。物件9b(配備於櫃檯之人員)正查看另一方向且未意識到該有企圖之盜竊。當物件9a將其手10伸入受保護區5中時,其將被偵測為可疑物件且將檢查其關鍵位置處於受保護區5內部抑或外部,且由 於其顯然在外部,因此將觸發動作。
為區分通常藉由商店職員9b對櫃檯之內部空間的經允許存取與有企圖之盜竊,已將櫃檯後方之空間或區域界定為遮蔽區11。當物件9a之手伸入受保護區中時所觸發之動作因此將為另外檢查可疑物件之關鍵位置是否處於遮蔽區11內。在圖4中,情況並非如此,且因此將觸發另一動作,例如,聲音告警或光告警、條目至日誌中之加入或開始記錄。在物件9b已將手伸進受保護區5中之情況下,將未觸發第二動作,此係因為物件9b具有處於遮蔽區內部之關鍵位置。
在圖5中,示意性地說明監測系統13。監測系統包括監測攝影機1及區界定單元15,該區界定單元15經配置以在由監測攝影機1監測之區域3內界定受保護區5。受保護區5可(例如)藉由區界定單元15使用影像分析以偵測圍繞受保護區之至少一部分的實體元件7之邊界而界定。
另一選項為區界定單元15存取預先界定之受保護區的座標。此等座標可能已由使用者在使用者介面中(例如)藉由在圖形使用者介面中繪製或藉由使用者鍵入座標而界定。一選項為界定橫越監測區域之線且將受保護區界定為在該線之一側之區域。亦將有可能界定為受保護區劃界之一或多個平面。
受保護區可界定為區域或界定為三維空間。後一種狀況通常將與3D攝影機之使用組合。在圖1至圖3中所展示之實例中,受保護區可接著界定為櫃檯後方及對應於櫃檯之上表面之水平面下方的空間。在圖4中,將受保護區(如已提及)界定為櫃檯之內部空間。
在界定三維受保護區之情況下,當判定可疑物件之關鍵位置處於該三維受保護區內部抑或外部時,使用其二維投影可為適當的。將基於界定三維受保護區之方式而決定是否使用二維投影。例如,在將圖1中之受保護區界定為櫃檯後方及其表面之水平面下方之體積的情 況下,在判定可疑物件關鍵位置處於受保護區內部抑或外部時使用其二維投影將可能更為便利。接著將確信物件9b具有處於受保護區內部之關鍵位置,若使用受保護區之三維表示,則情況可能並非如此。
可由區界定單元15以與保護區相同之方式界定遮蔽區。可注意到,(例如)若需要允許自一個以上方向進入櫃檯後方之受保護區,則可使用一個以上遮蔽區。
監測系統亦包括可疑物件偵測單元17,該可疑物件偵測單元17使用來自攝影機1之影像資料及關於經界定之受保護區5的資料,以將可疑物件偵測為存在於受保護區內部與外部之物件。當找到此物件時,提供物件位置判定單元19以判定可疑物件之關鍵位置且判定彼關鍵位置處於受保護區5內部抑或外部。
最後,提供動作觸發單元21,該動作觸發單元21在關鍵位置經判定為處於保護區外部之情況下觸發動作。如上文所描述,此動作可為光告警或聲音告警、條目至日誌中之加入或開始記錄工作階段。在遮蔽區11經界定之情況下,動作(第一動作)將為起始由物件位置判定單元19進行之檢查,以察看關鍵位置處於遮蔽區11內部抑或外部。在彼狀況下,在判定可疑物件之關鍵位置亦處於遮蔽區外部的情況下,動作觸發單元21將經調適以觸發第二動作,且彼第二動作接著可為(例如)光告警或聲音告警、條目至日誌中之加入及開始記錄工作階段。
單元15、17、19及21可以硬體抑或軟體或其組合實施。將有可能在監測攝影機中(例如)以在監測攝影機中之處理器上執行之軟體的形式或作為包括於監測攝影機中之硬體而提供單元15、17、19及21。亦可將單元15、17、19及21中之一或多者配置於單獨器件中,且亦可將該等單元分裂至若干器件上。
在圖6中,說明根據本發明之實施例之方法600。在第一步驟601 中,界定受保護區。在第二步驟603中,將可疑物件偵測為存在於受保護區內部與外部之物件。
在下一步驟605中,偵測可疑物件之關鍵位置,且在步驟607中,判定該關鍵位置處於受保護區內部抑或外部。若關鍵位置處於受保護區外部,則在步驟609中,觸發第一動作。如以上所提及,此動作可(例如)為聲音告警或光告警、條目至日誌中之加入或開始影像記錄。在關鍵位置處於受保護區內部之情況下,該方法可如圖6中所說明返回至偵測可疑物件之步驟603,或可返回至步驟601且以不同方式界定受保護區。另一選項為返回至步驟605且判定較早在步驟603中可能已偵測到之另一可疑物件的關鍵位置。
在使用遮蔽區之情況下,將在步驟611中界定此區,且在步驟609中經觸發之動作(第一動作)將為:在步驟613中,檢查關鍵位置處於該遮蔽區內部抑或外部。若判定關鍵位置處於遮蔽區外部,則在步驟615中,將觸發另一動作(第二動作)。此第二動作可(例如)為聲音告警或光告警、條目至日誌中之加入或開始影像記錄,或如以上所提及之關於無遮蔽區之情形的任何其他動作。
在關鍵位置處於遮蔽區內部之情況下,不觸發動作,且該方法可如圖6中所說明返回至偵測可疑物件之步驟603,或可返回至步驟601且以不同方式界定受保護區,或可返回至步驟611且以不同方式界定遮蔽區。另一選項為返回至步驟605且判定較早在步驟603中可能已偵測到之另一可疑物件的關鍵位置。
應瞭解,熟悉此項技術之人員可以許多方式修改上述實施例且仍使用如上述實施例中所展示之本發明之優點。可(例如)注意到,將本文中所呈現之想法擴充至使用一個以上受保護區將為直截了當的。
在存在一個以上監測攝影機或影像感測器之情況下,例如,若存在可見光攝影機及熱感攝影機或3D攝影機,則將有可能使用可見 光攝影機及切換至使用熱感攝影機或3D攝影機以用於物件偵測及關鍵位置分析來界定保護區。
因此,本發明不應限於所展示之實施例,而應僅由所附之申請專利範圍界定。
1‧‧‧監測攝影機
3‧‧‧受監測區域
5‧‧‧受保護區
7‧‧‧實體元件/櫃檯
9a‧‧‧可疑物件
9b‧‧‧可疑物件/商店職員
9c‧‧‧物件

Claims (14)

  1. 一種藉由一監測攝影機(1)監測一區域之方法,其包含以下步驟:在該受監測區域(2)內界定(601)一受保護區(5);將一可疑物件(9a、9b)偵測(603)為存在於該受保護區內部與外部之一物件;判定(605)該可疑物件之一關鍵位置;判定(607)該關鍵位置處於該受保護區(5)內部抑或外部,及若該關鍵位置處於該受保護區外部,則觸發(609)一第一動作;其中該可疑物件之該關鍵位置為該物件之身體之主要部分可能定位或該物件正站立的一位置;其中該界定(601)該受保護區之步驟包含界定一三維受保護體積;且其中該判定(605)該關鍵位置處於該受保護區內部抑或外部之步驟包含判定該關鍵位置處於該受保護體積之一二維投影內部抑或外部。
  2. 如請求項1之方法,其進一步包含以下步驟:在該受監測區域(2)內界定(611)一遮蔽區(11);其中該第一動作包含執行判定(613)該關鍵位置是否處於該遮蔽區外部之步驟,且若該關鍵位置處於該遮蔽區外部,則觸發(615)一第二動作;且其中該遮蔽區為該受監測區域之一部分,該部分界定自某一方向至該受保護區中之一經允許進入。
  3. 如請求項1之方法,其中該界定一受保護區(5)之步驟包含偵測圍 繞該受保護區之至少一部分的一實體元件(7)之邊界。
  4. 如請求項1之方法,其中該界定一受保護區(5)之步驟包含存取一預先界定之受保護區的座標。
  5. 如請求項1之方法,其中該偵測一可疑物件之步驟包含偵測該受保護區內部之物件像素及判定該等物件像素所屬於之一物件是否存在於該受保護區外部。
  6. 如請求項1之方法,其中該判定該可疑物件之一關鍵位置的步驟包含將該關鍵位置設定為包括於該可疑物件中之像素的像素座標之一平均位置。
  7. 如請求項1之方法,其中該判定一關鍵位置之步驟包含將該關鍵位置設定為該可疑物件之一最高點的一位置。
  8. 如請求項1之方法,其中該判定一關鍵位置之步驟包含:若包括於該可疑物件中之一預定百分比之像素處於該受保護區外部,則將該關鍵位置設定為處於該受保護區外部之一位置。
  9. 如請求項1之方法,其中該判定一關鍵位置之步驟包含將該關鍵位置設定為該可疑物件之一最高溫度的一位置。
  10. 如請求項1之方法,其中該判定一關鍵位置之步驟包含將該關鍵位置設定為使用一系列物件分類器偵測到之該可疑物件之一部分的一位置。
  11. 如請求項10之方法,其中使用一系列物件分類器偵測到之該可疑物件之該部分為以下各者中之一者:一面部、一頭部、一對肩部及一禮帽。
  12. 一種用於監測一區域(2)之監測系統(13),其包含:一監測攝影機(1);一區界定單元(15),其經配置以在該受監測區域(2)內界定一受保護區(5); 一可疑物件偵測單元(17),其經配置以將一可疑物件偵測為存在於該受保護區內部與外部之一物件;一物件位置判定單元(19),其經配置以判定該可疑物件之一關鍵位置且判定該關鍵位置處於該受保護區內部抑或外部;及一動作觸發單元(21),其經配置以在該關鍵位置經判定為處於該保護區外部之情況下觸發一第一動作;其中該可疑物件之該關鍵位置為該物件之身體的主要部分可能定位或該物件正站立之一位置;其中該區界定單元(15)經配置以界定一三維受保護體積;且其中該物件位置判定單元(19)經配置以判定該可疑物件處於該受保護體積之一二維投影內部抑或外部。
  13. 如請求項12之監測系統,其中該物件位置判定單元(19)包含以下各者中之一或多者:一物件分類器單元、一高度量測單元及/或一熱量量測單元。
  14. 一種電腦可讀記錄媒體,其具有記錄於其上之在執行於具有處理能力之一器件上時用於實施如請求項1之方法的一程式。
TW102135405A 2012-11-12 2013-09-30 監測方法及攝影機 TWI538503B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
EP12192217.3A EP2731087B1 (en) 2012-11-12 2012-11-12 Monitoring method and camera

Publications (2)

Publication Number Publication Date
TW201419849A true TW201419849A (zh) 2014-05-16
TWI538503B TWI538503B (zh) 2016-06-11

Family

ID=47143761

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102135405A TWI538503B (zh) 2012-11-12 2013-09-30 監測方法及攝影機

Country Status (6)

Country Link
US (1) US9070021B2 (zh)
EP (1) EP2731087B1 (zh)
JP (1) JP5654110B2 (zh)
KR (1) KR101494861B1 (zh)
CN (1) CN103813138B (zh)
TW (1) TWI538503B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI823327B (zh) * 2021-09-28 2023-11-21 日商歐姆龍股份有限公司 監測區域的設定裝置、監測區域的設定方法以及監測區域的設定程式

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2908296B1 (en) * 2014-02-18 2019-04-10 Salvatore Bua Method for detecting thefts inside shops
CN108353149B (zh) 2015-10-26 2020-10-13 李炯勇 Cctv自动选别监测系统、cctv自动选别监测管理方法及介质
DE102015224309A1 (de) * 2015-12-04 2017-06-08 Kuka Roboter Gmbh Darstellung variabler Schutzfelder
JP7173518B2 (ja) * 2018-03-19 2022-11-16 日本電気株式会社 情報処理システム、情報処理方法及びプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3812985B2 (ja) * 1997-04-04 2006-08-23 富士通株式会社 自動監視装置
US7099710B1 (en) 2003-01-06 2006-08-29 Faillace Gabriel Portable telephone case
JP2010011441A (ja) * 2008-05-26 2010-01-14 Sanyo Electric Co Ltd 撮像装置及び画像再生装置
JP5580683B2 (ja) * 2010-07-29 2014-08-27 セコム株式会社 通報装置
CN102184409A (zh) * 2011-04-22 2011-09-14 北京文安科技发展有限公司 基于机器视觉的客流统计方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI823327B (zh) * 2021-09-28 2023-11-21 日商歐姆龍股份有限公司 監測區域的設定裝置、監測區域的設定方法以及監測區域的設定程式

Also Published As

Publication number Publication date
US20140132771A1 (en) 2014-05-15
JP5654110B2 (ja) 2015-01-14
JP2014099171A (ja) 2014-05-29
EP2731087A1 (en) 2014-05-14
EP2731087B1 (en) 2015-01-14
TWI538503B (zh) 2016-06-11
KR101494861B1 (ko) 2015-02-23
US9070021B2 (en) 2015-06-30
CN103813138A (zh) 2014-05-21
KR20140061231A (ko) 2014-05-21
CN103813138B (zh) 2015-10-14

Similar Documents

Publication Publication Date Title
US20230041775A1 (en) Multiple-factor verification for vision-based systems
JP6249021B2 (ja) セキュリティシステム、セキュリティ方法及びセキュリティプログラム
TWI538503B (zh) 監測方法及攝影機
US10846537B2 (en) Information processing device, determination device, notification system, information transmission method, and program
KR101729857B1 (ko) 사람 검지 시스템 및 방법
JP2018147160A (ja) 情報処理装置、情報処理方法及びプログラム
JP2015011649A (ja) 人物行動分析装置、人物行動分析システムおよび人物行動分析方法、ならびに監視装置
JP2011248836A (ja) 滞留検出システム及びプログラム
TWI674002B (zh) 安全監控系統的運作方式
JP6206627B1 (ja) 情報処理装置、制御方法、及びプログラム
WO2019176222A1 (ja) 異常検知システム、異常検知方法および異常検知プログラム
US20230394556A1 (en) Information processing method, information processing device, and recording medium
JP2022073882A (ja) 行動推定装置、行動推定方法、プログラム及び行動推定システム
JP2019125238A (ja) 滞在時間検出システム、滞在時間検出装置、及び滞在時間検出方法
JP6536643B2 (ja) 情報処理装置、制御方法、及びプログラム
JP7039084B1 (ja) セルフレジ監視システム及びセルフレジ監視方法
JP5618366B2 (ja) 監視システム、監視装置、監視方法、及びプログラム
JP6917158B2 (ja) 監視装置、監視システム、監視方法、及びプログラム
JP6531804B2 (ja) 情報処理装置、制御方法、及びプログラム
JP2019133432A (ja) 店内監視装置、店内監視方法、および店内監視プログラム
JP2008252706A (ja) 人物監視システムおよび人物監視方法