TW202133034A - 違規事件檢測方法、電子設備和電腦可讀儲存介質 - Google Patents

違規事件檢測方法、電子設備和電腦可讀儲存介質 Download PDF

Info

Publication number
TW202133034A
TW202133034A TW110105336A TW110105336A TW202133034A TW 202133034 A TW202133034 A TW 202133034A TW 110105336 A TW110105336 A TW 110105336A TW 110105336 A TW110105336 A TW 110105336A TW 202133034 A TW202133034 A TW 202133034A
Authority
TW
Taiwan
Prior art keywords
detection
processed video
detection result
violation event
video stream
Prior art date
Application number
TW110105336A
Other languages
English (en)
Inventor
羅予晨
吳軍
焦義奎
田紀彭
袁誦弦
Original Assignee
大陸商深圳市商湯科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商深圳市商湯科技有限公司 filed Critical 大陸商深圳市商湯科技有限公司
Publication of TW202133034A publication Critical patent/TW202133034A/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • G08B13/19615—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion wherein said pattern is defined by the user
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Burglar Alarm Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本發明實施例公開了一種違規事件檢測方法、電子設備和電腦可讀儲存介質，所述方法包括：根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得待處理視頻流的檢測結果；在待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及檢測結果，生成警告資訊。

Description

違規事件檢測方法、電子設備和電腦可讀儲存介質
本發明關於電腦技術領域，尤其關於一種違規事件檢測方法、電子設備和電腦可讀儲存介質。
目前對監控視頻流中違規事件進行檢測，例如廚房監控視頻，主要還是依靠相關部門對監控視頻資料進行人工排查來實現，人力上消耗巨大，同時效率低下且即時性很差。
本發明實施例提出了一種違規事件檢測方法、電子設備和電腦可讀儲存介質。
根據本發明實施例的一方面，提供了一種違規事件方法，包括：根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果；在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊。
根據本發明的實施例的違規事件檢測方法，可根據預設的檢測模式對待處理視頻幀進行檢測，獲得待處理視頻流的檢測結果，並可根據預設的警告模式生成警告資訊，從而可以實現自動即時檢測並告警違規事件，減少人力成本，提高違規事件的檢測和警告效率。
在一種可能的實現方式中，根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：在所述檢測模式設置為第一檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得當前時刻的第一檢測結果；在所述第一檢測結果為第一違規事件的情況下，對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果，其中，所述第一預設時間段為以所述當前時刻為起始時刻的時間段，所述第一違規事件為任意一種違規事件；在所述第二檢測結果為第一違規事件的待處理視頻幀的數量大於或等於預設數量閾值的情況下，將所述待處理視頻流的檢測結果確定為第一違規事件。
通過這種方式，可在首次檢測到第一違規事件的待處理視頻幀後，對後續的待處理視頻幀進行多次確認，以降低誤檢測的概率。
在一種可能的實現方式中，根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：在所述檢測模式設置為第二檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果。
通過這種方式，可根據當前時刻抽取的待處理視頻幀立即確認待處理視頻流中是否存在違規事件，可提高檢測的靈敏度。
在一種可能的實現方式中，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：在所述待處理視頻幀中確定目標對象的人臉區域和/或人體區域；對所述人臉區域和/或人體區域進行行為檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：對多個時刻抽取的待處理視頻幀進行運動檢測處理，獲得運動的目標對象所在區域；對所述運動的目標對象所在區域進行檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：對待處理視頻幀的清晰度進行檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊，包括：在所述警告模式設置為第一警告模式的情況下，根據與第二違規事件對應的第一個檢測結果，生成與所述第二違規事件對應的警告資訊，並在第二預設時間段內遮罩與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
通過這種方式，可在第二時間段內遮罩重複的警告資訊，減少警告資訊冗餘，提高報警效率。
在一種可能的實現方式中，在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊，包括：在所述警告模式設置為第二警告模式的情況下，根據與第二違規事件的對應的檢測結果，生成與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
通過這種方式，可提升警告的力度，督促違規人員儘快糾正違規事件。
在一種可能的實現方式中，所述方法還包括：根據預設頻率對待處理視頻流進行抽幀處理，獲得待處理視頻幀。
通過這種方式，可減少視頻幀處理量，提高視頻處理速度。
根據本發明實施例的一方面，提供了一種違規事件檢測裝置，包括：第一獲得模組，配置為根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果；生成模組，配置為在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊。
在一種可能的實現方式中，所述第一獲得模組，配置為在所述檢測模式設置為第一檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得當前時刻的第一檢測結果；在所述第一檢測結果為第一違規事件的情況下，對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果，其中，所述第一預設時間段為以所述當前時刻為起始時刻的時間段，所述第一違規事件為任意一種違規事件；在所述第二檢測結果為第一違規事件的待處理視頻幀的數量大於或等於預設數量閾值的情況下，將所述待處理視頻流的檢測結果確定為第一違規事件。
在一種可能的實現方式中，所述第一獲得模組，配置為在所述檢測模式設置為第二檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果。
在一種可能的實現方式中，所述第一獲得模組，配置為在所述待處理視頻幀中確定目標對象的人臉區域和/或人體區域；對所述人臉區域和/或人體區域進行行為檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，所述第一獲得模組，配置為對多個時刻抽取的待處理視頻幀進行運動檢測處理，獲得運動的目標對象所在區域；對所述運動的目標對象所在區域進行檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，所述第一獲得模組，配置為對待處理視頻幀的清晰度進行檢測處理，獲得所述檢測結果。
在一種可能的實現方式中，所述生成模組，配置為在所述警告模式設置為第一警告模式的情況下，根據與第二違規事件對應的第一個檢測結果，生成與所述第二違規事件對應的警告資訊，並在第二預設時間段內遮罩與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一種可能的實現方式中，所述生成模組，配置為在所述警告模式設置為第二警告模式的情況下，根據與第二違規事件的對應的檢測結果，生成與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一種可能的實現方式中，所述裝置還包括：第二獲得模組，配置為根據預設頻率對待處理視頻流進行抽幀處理，獲得待處理視頻幀。
根據本發明實施例的一方面，提供了一種電子設備，包括：處理器；用於儲存處理器可執行指令的記憶體；其中，所述處理器被配置為：執行上述違規事件檢測方法。
根據本發明實施例的一方面，提供了一種電腦可讀儲存介質，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現上述違規事件檢測方法。
根據本發明實施例的一方面，提供了一種電腦程式產品，所述電腦程式產品包括程式指令，所述程式指令當被處理器執行時實現上述違規事件檢測方法。
根據本發明實施例的一方面，提供了一種電腦程式，包括電腦可讀代碼，當所述電腦可讀代碼在電子設備中運行時，所述電子設備中的處理器執行用於實現本發明實施例上述的違規事件檢測方法。
應當理解的是，以上的一般描述和後文的細節描述僅是示例性和解釋性的，而非限制本發明。
根據下面參考附圖對示例性實施例的詳細說明，本發明的其它特徵及方面將變得清楚。
以下將參考附圖詳細說明本發明的各種示例性實施例、特徵和方面。附圖中相同的附圖標記表示功能相同或相似的元件。儘管在附圖中示出了實施例的各種方面，但是除非特別指出，不必按比例繪製附圖。
在這裡專用的詞“示例性”意為“用作例子、實施例或說明性”。這裡作為“示例性”所說明的任何實施例不必解釋為優於或好於其它實施例。
本文中術語“和/或”，僅僅是一種描述關聯對象的關聯關係，表示可以存在三種關係，例如，A和/或B，可以表示：單獨存在A，同時存在A和B，單獨存在B這三種情況。另外，本文中術語“至少一種”表示多種中的任意一種或多種中的至少兩種的任意組合，例如，包括A、B、C中的至少一種，可以表示包括從A、B和C構成的集合中選擇的任意一個或多個元素。
另外，為了更好的說明本發明實施例，在下文的具體實施方式中給出了眾多的具體細節。本領域技術人員應當理解，沒有某些具體細節，本發明同樣可以實施。在一些實例中，對於本領域技術人員熟知的方法、手段、元件和電路未作詳細描述，以便於凸顯本發明實施例的主旨。
圖1示出根據本發明實施例的違規事件檢測方法的流程圖，如圖1所示，所述方法包括： 在步驟S11中，根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行行為檢測處理，獲得所述待處理視頻流的行為檢測結果； 在步驟S12中，在所述待處理視頻流的行為檢測結果為違規行為的情況下，根據預設的警告模式以及所述行為檢測結果，生成警告資訊。
根據本發明實施例的違規事件檢測方法，可根據預設的檢測模式對待處理視頻幀進行檢測，獲得待處理視頻流的檢測結果，並可根據預設的警告模式生成警告資訊，從而可以實現自動即時檢測並告警違規事件，減少人力成本，提高違規事件的檢測和警告效率。
在一種可能的實現方式中，所述違規事件檢測方法可以由終端設備或其它處理設備執行，其中，終端設備可以為使用者設備（User Equipment，UE）、移動設備、使用者終端、終端、蜂窩電話、無線電話、個人數位助理（Personal Digital Assistant，PDA）、手持設備、計算設備、車載設備、可穿戴設備等。其它處理設備可為伺服器或雲端伺服器等。在一些可能的實現方式中，該違規事件檢測方法可以通過處理器調用記憶體中儲存的電腦可讀指令的方式來實現。
在一種可能的實現方式中，所述違規事件檢測方法可用於對監控視頻（待處理視頻流）中的目標對象的行為（例如，違規操作行為、違規穿戴行為等）或違規的目標對象（例如，非法進入的人員、進入廚房的老鼠等）進行檢測，並對違規事件進行警告，以減少違規事件的發生，提高監管效率。在示例中，所述違規事件檢測方法可用於對廚房、食堂、食品加工廠、餐飲企業等場所的監控視頻中的目標對象進行行為檢測處理，以對工作人員的違規行為進行警告，從而提供從業人員的自覺性，提升食品安全和食品品質。
在一種可能的實現方式中，所述違規事件檢測方法可通過前端檢測設備來執行，可通過後端服務設備對前端檢測設備的檢測模式和警告模式進行設置。例如，可通過後端服務設備發送的指令來設置前端檢測設備的檢測模式和警告模式。或者，也可直接對前端檢測設備的檢測模式和警告模式進行設置。例如，可提供用於設置前端檢測設備的檢測模式和警告模式的指令接收裝置（例如，按鈕、觸控式螢幕、遙控器等），或者將預設的模式固化在前端檢測設備中。本發明對檢測模式和警告模式的設置方式不做限制。
在一些可選示例中，所述預設的檢測模式可包括第一檢測模式和/或第二檢測模式，第一檢測模式例如可包括如下檢測策略：首次在待處理視頻幀檢測到違規事件後，可不立即確定違規事件，而是繼續對後續的多個待處理視頻幀進行檢測處理，在上述多個待處理視頻幀中多次確定違規事件後，可將待檢測視頻流的檢測結果確定為違規事件，可減少違規事件的誤報。第二檢測模式例如可哥包括如下檢測策略：在檢測到違規事件後立即生成待處理視頻流的行為檢測結果，無需對後續的待處理視頻幀進行多次確認。
在一些可選示例中，所述預設的警告模式可包括第一警告模式和/或第二警告模式，第一警告模式例如可包括如下警告策略：在首次檢測到違規事件後，生成警告資訊，並在預設時間段內不再生成相同違規事件的警告資訊，避免對相同違規事件的重複警告。第二警告模式例如可包括如下警告策略：每次檢測到違規事件均生成警告資訊。
在一種可能的實現方式中，在檢測模式和警告模式設置完成後，前端檢測設備可按照預設的檢測模式對待處理視頻流的待處理視頻幀進行檢測，如果檢測結果為違規事件，前端檢測設備可按照預設的警告模式生成警告資訊。
在一種可能的實現方式中，在步驟S11中，前端檢測設備可按照預設的檢測模式對待處理視頻流的待處理視頻幀進行檢測。在一些可選示例中，前端檢測設備可對待處理視頻流的各視頻幀進行逐幀檢測，或者也可首先對待處理視頻流進行抽幀處理，並對抽取的視頻幀進行檢測。
在一種可能的實現方式中，所述方法還包括：根據預設頻率對待處理視頻流進行抽幀處理，獲得待處理視頻幀。在一些可選示例中，前端檢測設備可對待處理視頻流進行抽幀處理，例如，可每隔3秒鐘抽取一個視頻幀，即，每隔3秒獲取一個待處理視頻幀。在一些可選示例中，預設頻率可根據檢測模式適應性調整，也可根據檢測的違規事件的類型進行適應性調整。例如，在第一檢測模式下的預設頻率可低於第二檢測模式下的預設頻率。檢測視頻清晰度的預設頻率可低於檢測違規行為的預設頻率。本發明實施例對預設頻率不做限制。
在一種可能的實現方式中，前端檢測設備可根據預設的檢測模式對待處理視頻幀進行檢測處理。例如，在第一檢測模式下，前端檢測設備首次在待處理視頻幀檢測到違規事件後，可不立即確定違規事件，而是繼續對後續的多個待處理視頻幀進行檢測處理，即，在多個待處理視頻幀中多次確定違規事件後，可將待檢測視頻流的檢測結果確定為違規事件，可減少違規事件的誤報。例如，在食堂、廚房等場景中，違規事件可包括工作人員未戴帽子、未戴口罩、赤膊、吸煙等，多次確認後再確認違規事件的檢測模式（即，第一檢測模式）可減少工作人員偶然摘下口罩或帽子等動作（例如，擦汗）而發生的誤報。
在一種可能的實現方式中，步驟S11可包括：在所述檢測模式設置為第一檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得當前時刻的第一檢測結果；在所述第一檢測結果為第一違規事件的情況下，對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果，其中，所述第一預設時間段為以所述當前時刻為起始時刻的時間段，所述第一違規事件為任意一種違規事件；在所述第二檢測結果為第一違規事件的待處理視頻幀的數量大於或等於預設數量閾值的情況下，將所述待處理視頻流的檢測結果確定為第一違規事件。
在一種可能的實現方式中，可通過後端服務設備將前端應用設備的檢測模式設置為第一檢測模式，或者可直接在前端應用設備處將檢測模式設置為第一檢測模式。前端應用設備可在第一檢測模式下對待處理視頻幀進行檢測處理。在一些可選示例中，前端應用設備可逐一檢測按照預設頻率（例如，3秒/次）從待處理視頻流中抽取的待處理視頻幀，並獲得每個待處理視頻幀的檢測結果，例如，前端應用設備可對當前時刻t抽取的待處理視頻幀進行檢測處理，獲得當前時刻t的第一檢測結果。
在一些可選示例中，前端檢測設備檢測到當前時刻t的第一檢測結果為第一違規事件（即，當前時刻t抽取的待處理視頻幀中的目標對象可能正在進行違規行為），但由於可能存在誤檢測的情況（例如，工作人員偶然摘下口罩或帽子等動作（例如，擦汗）而被檢測到，不屬於真正的違規行為），前端檢測設備可對當前時刻t之後的多個視頻幀進行檢測處理，以對違規事件進行多次確定。
在一種可能的實現方式中，可對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果。在一些可選示例中，第一預設時間段為以當前時刻t為起始時刻的時間段，例如，從當前時刻t至t+A時間段（時長為A），在第一預設時間段內，可對待處理視頻流進行多次抽幀，獲得多個待處理視頻幀。例如，時長A為5分鐘，抽幀的預設頻率為3秒/次，則在第一預設時間段內可抽取100個視頻幀。前端檢測設備可對該100個待處理視頻幀逐一進行檢測處理，並獲得該100個待處理視頻幀的第二檢測結果。
在一種可能的實現方式中，可對第一預設時間段內抽取的待處理視頻幀的第二檢測結果進行統計，以確定第二檢測結果為第一違規事件的待處理視頻幀的數量；如果該數量大於預設數量閾值，則可確認違規事件，通過對多個待處理視頻幀的確認工作，可降低對第一違規事件誤檢測的概率。在一些可選示例中，如果在上述100個待處理視頻幀中，檢測結果為第一違規事件的數量大於或等於50個（預設數量閾值），則可確認違規事件，本發明實施例對預設數量閾值不做限制。
在一些可選示例中，也可不設置時間閾值，可從下一次抽幀開始，連續抽取預設數量的待處理視頻幀。例如，可抽取100個待處理視頻幀，並確定這些待處理視頻幀中第二檢測結果為第一違規事件的數量，如果該數量大於或等於預設數量閾值，則可確定第一違規事件。本發明實施例對抽取待處理視頻幀的數量不做限制。
通過這種方式，可在首次檢測到第一違規事件的待處理視頻幀後，對後續的待處理視頻幀進行多次確認，以降低誤檢測的概率。
在一種可能的實現方式中，步驟S11可包括：在所述檢測模式設置為第二檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果。
在一種可能的實現方式中，可通過後端服務設備將前端應用設備的檢測模式設置為第二檢測模式，或者可直接在前端應用設備處將檢測模式設置為第二檢測模式。前端應用設備可在第二檢測模式下對待處理視頻幀進行檢測處理。
在一些可選示例中，前端檢測設備可在檢測到違規事件後立即生成待處理視頻流的行為檢測結果。例如，在對待處理視頻幀進行檢測時，如果檢測到某個待處理視頻幀中的目標對象正在進行違規行為，則可立即確認待處理視頻流中的目標對象正在進行違規行為，即，將待處理視頻流的檢測結果確認為違規事件，無需對後續的待處理視頻幀進行多次確認，可提高檢測的靈敏度。
在一種可能的實現方式中，在對待處理視頻幀進行行為檢測時，前端檢測設備可檢測預設的一種或多種違規事件。在一些可選示例中，可對違規事件進行設置。例如，如果前端檢測設備用於檢測公共場所（例如，商場、學校、辦公廳、寫字樓等）的監控視頻的待處理視頻幀，則可將違規事件設置為吸煙、玩手機等。如果前端檢測設備用於檢測餐飲場所（例如，餐廳、廚房、食堂、食品加工廠等）或醫療衛生場所（例如，醫院、藥房、化驗室、手術室等）的監控視頻的待處理視頻幀，則可將違規事件設置為未戴帽子、未戴口罩、未戴手套、赤膊、等違規穿戴行為，以及害蟲、老鼠等衛生違規事件等。本發明實施例對違規行為的類型不做限制。
在一種可能的實現方式中，前端檢測設備可對針對各種違規事件使用不同的行為檢測方法進行檢測。本發明實施例上述對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：在所述待處理視頻幀中確定目標對象的人臉區域和/或人體區域；對所述人臉區域和/或人體區域進行行為檢測處理，獲得所述行為檢測結果。
在一種可能的實現方式中，前端檢測設備可使用卷積神經網路等方法檢測待處理視頻幀中的目標對象的人臉區域和/或人體區域，從而可對人臉區域和/或人體區域進行行為檢測處理。在一些可選示例中，可檢測目標對象的人臉區域，從而檢測目標對象是否戴帽子或戴口罩。
在一些可選示例中，可在檢測到目標對象的人臉區域和/或人體區域，從而可檢測目標對象穿著是否合規。例如，工作人員是否赤膊、是否穿工作服等。在一些可選示例中，可檢測到目標對象的人體區域，並根據人體區域中目標對象的動作以及人體區域中有無煙霧等判斷條件來判斷目標對象是否吸煙，進一步地，可檢測到該目標對象的人臉區域，以確定該目標對象的身份資訊。本發明實施例對行為檢測的方法不做限制。
在一種可能的實現方式中，前端檢測設備可使用多個時刻抽取的待處理視頻幀來檢測有無老鼠或害蟲等影響衛生條件的違規事件。本發明實施例上述對待處理視頻流的待處理視頻幀進行行為檢測處理，獲得所述待處理視頻流的行為檢測結果，包括：對多個時刻抽取的待處理視頻幀進行運動檢測處理，獲得運動的目標對象所在區域；對所述運動的目標對象所在區域進行檢測處理，獲得所述檢測結果。
在一些可選示例中，前端檢測設備可在光線條件較差（例如，夜間）的情況下，通過比對多個待處理視頻幀中的目標對象，來判斷待處理視頻幀中是否包括老鼠、害蟲等目標對象。例如，在夜間，廚房中無工作人員，其他物品靜止不動，如果在某個視頻幀中檢測到某一目標對象，而另一個視頻幀中沒有該目標對象，則該目標對象可能是老鼠、害蟲等正在運動的目標對象，可在光線條件較差的情況下，或者在可見光攝影頭或紅外光攝影頭的硬體條件下，提高檢測運動的目標對象的精度。進一步地，可對目標對象所在區域進行進一步地檢測處理，以確定目標對象是否為違規的目標對象。例如，可將老鼠設置為違規的目標對象，而對攝影頭拍攝到的窗外飛過的鳥類等設置為不違規的目標對象。在檢測到違規的目標對象時，可將檢測結果確定為違規事件。
在一種可能的實現方式中，前端檢測設備可使用多個時刻抽取的待處理視頻幀來檢測待處理視頻的清晰度，例如，攝影頭被油污、灰塵等污染造成的模糊，或者由於焦距調整造成的成像模糊等。本發明實施例上述對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括：對待處理視頻幀的清晰度進行檢測處理，獲得所述檢測結果。
在一些可選示例中，可檢測抽取的待處理視頻幀的清晰度。例如，可檢測紋理清晰度等指標，如果待處理視頻幀的該指標低於指標閾值，或者在第一預設時間段內多個待處理視頻幀的該指標低於指標閾值，則可確定檢測結果為違規事件，即，攝影頭被污染或焦距調整失誤等。
在一種可能的實現方式中，違規事件還可包括多種事件。例如，學生在課堂上交頭接耳，在考場中作弊等違規事件，本發明實施例對違規事件的類型不作限制。
在一種可能的實現方式中，上述行為檢測處理可並存執行，並且可有選擇地執行其中的一種或多種檢測處理。例如，在對廚房的監控視頻進行行為檢測處理時，可並存執行檢測目標對象是否未戴帽子、未戴口罩、未戴手套、赤膊、等違規穿戴行為的行為檢測處理，以及檢測害蟲、老鼠等衛生違規事件的檢測處理，各種檢測處理之間互不干擾。也可按照需要設置執行的檢測處理，例如，在白天可不需要執行檢測害蟲、老鼠等衛生違規行為的事件檢測處理，則可暫時關閉該種檢測處理。本發明實施例對檢測處理的類型不做限制。
在一種可能的實現方式中，在檢測到待處理視頻流中的違規事件時，可根據預設的警告模式，生成與違規事件對應的警告資訊。在一些示例中，可通過後端服務設備設置警告模式，也可在前端檢測設備處直接設置，本發明實施例對警告模式的設置方式不做限制。
在一種可能的實現方式中，為了避免針對同一種違規事件進行重複警告，可將前端檢測設備設置為第一檢測模式，步驟S12可包括：在所述警告模式設置為第一警告模式的情況下，根據與第二違規事件對應的第一個檢測結果，生成與所述第二違規事件對應的警告資訊，並在第二預設時間段內遮罩與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一些可選示例中，第二預設時間段可以是以首次檢測到針對第二違規事件的時刻t1為起始時刻的時間段（例如，以t1為起始時刻，時長為30分鐘的時間段，本發明實施例對第二預設時間段的時長不做限制）。警告模式可設置為第一警告模式，如果在該警告模式下檢測到第二違規事件，則在第二預設時間段內僅會針對第二違規事件生成一次警告資訊，如果在第二預設時間段內，重複檢測到多次第二違規事件，則可遮罩重複的警告資訊，僅針對第二違規事件警告一次。在第二預設時間段結束後，如果再次檢測到第二違規事件，則可再次生成警告資訊，並再次開始第二預設時間段，以此類推。
通過這種方式，可在第二時間段內遮罩重複的警告資訊，減少警告資訊冗餘，提高報警效率。
在一種可能的實現方式中，也可不遮罩針對相同違規事件的警告資訊。步驟S12可包括：在所述警告模式設置為第二警告模式的情況下，根據與第二違規事件對應的檢測結果，生成與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一些可選示例中，在第二警告模式下，只要檢測到違規事件，即可針對該違規事件生成警告資訊，不論該警告資訊是否與之前的警告資訊重複。可提升警告的力度，督促違規人員儘快糾正違規事件。
在一種可能的實現方式中，前端檢測設備還可自訂生成哪些警告資訊。例如，前端檢測設備進行了檢測未戴帽子、未戴口罩、未戴手套、赤膊、等違規穿戴行為的行為檢測處理，但前端檢測設備可選擇性地生成其中的一種或多種違規事件的警告資訊。例如，前端檢測設備檢測到目標對象未戴帽子、未戴口罩、未戴手套，但在生成警告資訊時，可僅生成未戴口罩的警告資訊。本發明實施例對違規事件不做限制。
在一種可能的實現方式中，所述前端檢測設備還可將警告資訊進行展示，或發送至後端服務模組，以通過後端服務模組展示警告資訊。例如，前端檢測設備可與顯示裝置或音響設備等進行連接，警告資訊可發送至顯示裝置，通過使用者介面（User Interface，UI）展示介面進行展示，或者發送至音響設備，以播放與警告資訊對應的聲音資訊。或者，前端檢測設備可將警告資訊發送至後端服務模組，並由後端服務模組來展示警告資訊，例如，後端服務模組可通過UI展示介面或音響設備展示警告資訊。本發明實施例對警告資訊的展示方式不做限制。
根據本發明實施例的違規事件檢測方法，可根據預設的檢測模式對待處理視頻幀進行檢測，在首次檢測到第一違規事件的待處理視頻幀後，對後續的待處理視頻幀進行多次確認，可提高檢測的準確率，降低誤檢的概率，並可根據預設的警告模式生成警告資訊，在第二時間段內遮罩重複的警告資訊，減少警告資訊冗餘，提高報警效率。
圖2示出根據本發明的實施例的違規事件檢測方法的應用示意圖一，如圖2所示，監控攝影頭可採集餐飲場所（例如，餐廳、廚房、食堂、食品加工廠等）或醫療衛生場所（例如，醫院、藥房、化驗室、手術室等）的監控視頻。前端檢測設備可在7:00-23:00之間檢測視頻中的工作人員是否存在違規行為。可對該視頻進行抽幀，例如，抽幀頻率可以是3秒/次，並對抽取的待處理視頻幀進行檢測處理。
在一種可能的實現方式中，可通過前端檢測設備對未戴帽子、未戴口罩、赤膊等穿戴違規行為進行檢測處理，並關閉對老鼠等夜間活動物的事件檢測處理。如果檢測到違規事件，還可選擇性地生成警告資訊。例如，僅對未戴口罩的違規行為生成警告資訊，對未戴帽子和赤膊的違規行為可不生成警告資訊。
圖3示出根據本發明的實施例的違規事件檢測方法的應用示意圖二，如圖3所示，可將前端檢測設備的檢測模式設置為第一檢測模式，並將前端檢測設備的警告模式設置為第一警告模式。
在一種可能的實現方式中，前端檢測設備可在7:00-23:00之間，對抽取的待處理視頻幀進行檢測，檢測工作人員是否存在未戴帽子、未戴口罩、赤膊等穿戴違規行為，如果在時刻t首次在待處理視頻幀中檢測到上述違規行為，為了減低誤報的概率，可在第一預設時間段內（例如，從時刻t開始的5分鐘內）對抽取的100個視頻幀分別進行檢測處理，如果檢測到相同違規行為的待處理視頻幀的數量小於預設數量閾值（例如，60個），則可認為工作人員未進行該違規行為，反之，如果檢測到相同違規行為的待處理視頻幀的數量大於或等於預設數量閾值（例如，60個），則可認為工作人員進行了該違規行為，並在第一預設時間段結束時，生成與該違規行為對應的警告資訊。例如，可生成與未戴口罩相關的警告資訊。
在一種可能的實現方式中，為減少針對相同的違規事件進行重複警告，在生成與未戴口罩對應的警告資訊時，可開始第二預設時間段（例如，30分鐘），可在第二預設時間段內，遮罩相同的警告資訊，例如，如果再次檢測到同一個工作人員未戴口罩，則可遮罩警告資訊，在30分鐘之內不再重複警告。如果該工作人員進行其他違規行為，或者其他工作人員未戴口罩或進行其他違規行為，仍可生成警告資訊。在30分鐘的第二預設時間段結束後，如果該工作人員仍未戴口罩，則可再次生成警告資訊。
圖4示出根據本發明的實施例的違規事件檢測方法的應用示意圖三，如圖4所示，後端服務設備可設置多個前端檢測設備的檢測模式和警告模式，前端檢測設備可對多個攝影頭採集的視頻流進行違規事件檢測處理。例如，後端服務設備可包括公有雲平臺，可通過路由器/閘道調用公有雲服務對前端檢測設備進行設置。
圖5示出根據本發明的實施例的違規事件檢測方法的應用示意圖四，如圖5所示，後端服務設備可包括客戶應用管理平臺，客戶應用管理平臺可通過應用程式介面（Application Program Interface，API）設置前端檢測設備的檢測模式和警告模式，還可設置抽幀頻率等參數。本發明對前端檢測設備的設置方式不做限制。
在一種可能的實現方式中，所述違規事件檢測方法可用於學校食堂的違規行為檢測中，可通過所述行為檢測方法實現對食堂、廚房等地的衛生狀況不間斷監測，保障師生飲食安全。或者，所述違規事件檢測方法可用於餐飲企業的違規事件檢測中，餐飲企業的廚房下水道是鼠害的重災區，企業常常因為老鼠問題導致客源下降，所述違規事件檢測方法可極大提升在可見光或紅外光線下老鼠的檢測與識別的精度，並可對工作人員所在的廚房區域違規事件檢測，提高衛生狀況。或者，所述違規事件檢測方法可用於食品加工廠的違規行為檢測中，食品加工廠勞動強度大，工作人員會出現因為擦汗而摘掉帽子或者口罩等短暫行為而導致錯誤警報，所述違規事件檢測方法可有效減少誤報，提高警告效率。此外，所述違規事件檢測方法還可用於醫院、藥房、製藥廠等衛生要求較高的場所，或者用於寫字樓、工廠、學校等場所，以檢測工作人員或學生是否存在玩手機等違規行為，或檢測學生是否進行考試作弊等違規行為。本發明實施例對所述違規事件檢測方法的應用領域不做限制。
可以理解，本發明提及的上述各個方法實施例，在不違背原理邏輯的情況下，均可以彼此相互結合形成結合後的實施例，限於篇幅，本發明實施例不再贅述。
此外，本發明實施例還提供了違規事件檢測裝置、電子設備、電腦可讀儲存介質、程式，上述均可用來實現本發明實施例提供的任一種違規事件檢測方法，相應技術方案和描述和參見方法部分的相應記載，本實施例不再贅述。
本領域技術人員可以理解，在具體實施方式的上述方法中，各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定，各步驟的具體執行順序應當以其功能和可能的內在邏輯確定。
圖6示出根據本發明的實施例的違規事件檢測裝置的方塊圖，所述裝置包括：第一獲得模組11，配置為根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果；生成模組12，配置為在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊。
在一種可能的實施例中，所述第一獲得模組11，配置為在所述檢測模式設置為第一檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得當前時刻的第一檢測結果；在所述第一檢測結果為第一違規事件的情況下，對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果，其中，所述第一預設時間段為以所述當前時刻為起始時刻的時間段，所述第一違規事件為任意一種違規事件；在所述第二檢測結果為第一違規事件的待處理視頻幀的數量大於或等於預設數量閾值的情況下，將所述待處理視頻流的檢測結果確定為第一違規事件。
在一種可能的實施例中，所述第一獲得模組11，配置為在所述檢測模式設置為第二檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果。
在一種可能的實施例中，所述第一獲得模組11，配置為在所述待處理視頻幀中確定目標對象的人臉區域和/或人體區域；對所述人臉區域和/或人體區域進行行為檢測處理，獲得所述檢測結果。
在一種可能的實施例中，所述第一獲得模組11，配置為對多個時刻抽取的待處理視頻幀進行運動檢測處理，獲得運動的目標對象所在區域；對所述運動的目標對象所在區域進行檢測處理，獲得所述檢測結果。
在一種可能的實施例中，所述第一獲得模組11，配置為對待處理視頻幀的清晰度進行檢測處理，獲得所述檢測結果。
在一種可能的實施例中，所述生成模組12，配置為在所述警告模式設置為第一警告模式的情況下，根據與第二違規事件對應的第一個檢測結果，生成與所述第二違規事件對應的警告資訊，並在第二預設時間段內遮罩與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一種可能的實施例中，所述生成模組12，配置為在所述警告模式設置為第二警告模式的情況下，根據與第二違規事件的對應的檢測結果，生成與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
在一種可能的實施例中，所述裝置還包括：第二獲得模組，配置為根據預設頻率對待處理視頻流進行抽幀處理，獲得待處理視頻幀。
在一些實施例中，本發明實施例提供的裝置具有的功能或包含的模組可以用於執行上文方法實施例描述的方法，其具體實現可以參照上文方法實施例的描述，為了簡潔，這裡不再贅述。
本發明實施例還提出一種電腦可讀儲存介質，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現上述方法。電腦可讀儲存介質可以是非易失性或易失性電腦可讀儲存介質。
本發明實施例還提出一種電子設備，包括：處理器；用於儲存處理器可執行指令的記憶體；其中，所述處理器被配置為上述方法。
電子設備可以被提供為終端、伺服器或其它形態的設備。
圖7是根據一示例性實施例示出的一種電子設備800的方塊圖。例如，電子設備800可以是行動電話、電腦、數位廣播終端、消息收發設備、遊戲控制台、平板設備、醫療設備、健身設備、個人數位助理等終端。
參照圖7，電子設備800可以包括以下一個或多個組件：處理組件802、記憶體804、電源組件806、多媒體組件808、音頻組件810、輸入/輸出（I/O）介面812、感測器組件814以及通信組件816。
處理組件802通常控制電子設備800的整體操作，諸如與顯示、電話呼叫、資料通信、相機操作和記錄操作相關聯的操作。處理組件802可以包括一個或多個處理器820來執行指令，以完成上述的方法的全部或部分步驟。此外，處理組件802可以包括一個或多個模組，便於處理組件802和其他組件之間的交互。例如，處理組件802可以包括多媒體模組，以方便多媒體組件808和處理組件802之間的交互。
記憶體804被配置為儲存各種類型的資料以支援在電子設備800的操作。這些資料的示例包括用於在電子設備800上操作的任何應用程式或方法的指令、連絡人資料、電話簿資料、消息、圖片、視頻等。記憶體804可以由任何類型的易失性或非易失性存放裝置或者它們的組合實現，如靜態隨機存取記憶體（Static Random Access Memory，SRAM），電可擦除可程式設計唯讀記憶體（Electrically Erasable Programmable Read-Only Memory，EEPROM），可擦除可程式設計唯讀記憶體（Erasable Programmable Read-Only Memory，EPROM），可程式設計唯讀記憶體（Programmable Read-Only Memory，PROM），唯讀記憶體（Read Only Memory，ROM），磁記憶體，快閃記憶體，磁片或光碟。
電源組件806為電子設備800的各種組件提供電力。電源組件806可以包括電源管理系統、一個或多個電源、及其他與為電子設備800生成、管理和分配電力相關聯的組件。
多媒體組件808包括在所述電子設備800和使用者之間的提供一個輸出介面的螢幕。在一些實施例中，螢幕可以包括液晶顯示器（Liquid Crystal Display，LCD）和觸摸面板（Touch Panel，TP）。如果螢幕包括觸摸面板，螢幕可以被實現為觸控式螢幕，以接收來自使用者的輸入信號。觸摸面板包括一個或多個觸摸感測器以感測觸摸、滑動和觸摸面板上的手勢。所述觸摸感測器可以不僅感測觸摸或滑動動作的邊界，而且還檢測與所述觸摸或滑動操作相關的持續時間和壓力。在一些實施例中，多媒體組件808包括一個前置攝影頭和/或後置攝影頭。當電子設備800處於操作模式，如拍攝模式或視訊模式時，前置攝影頭和/或後置攝影頭可以接收外部的多媒體資料。每個前置攝影頭和後置攝影頭可以是一個固定的光學透鏡系統或具有焦距和光學變焦能力。
音頻組件810被配置為輸出和/或輸入音頻信號。例如，音頻組件810包括一個麥克風（Microphone，MIC），當電子設備800處於操作模式，如呼叫模式、記錄模式和語音辨識模式時，麥克風被配置為接收外部音頻信號。所接收的音頻信號可以被進一步儲存在記憶體804或經由通信組件816發送。在一些實施例中，音頻組件810還包括一個揚聲器，用於輸出音頻信號。
I/O介面812為處理組件802和週邊介面模組之間提供介面，上述週邊介面模組可以是鍵盤、點擊輪、按鈕等。這些按鈕可包括但不限於：主頁按鈕、音量按鈕、啟動按鈕和鎖定按鈕。
感測器組件814包括一個或多個感測器，用於為電子設備800提供各個方面的狀態評估。例如，感測器組件814可以檢測到電子設備800的打開/關閉狀態、組件的相對定位，例如所述組件為電子設備800的顯示器和小鍵盤，感測器組件814還可以檢測電子設備800或電子設備800一個組件的位置改變，使用者與電子設備800接觸的存在或不存在，電子設備800方位或加速/減速和電子設備800的溫度變化。感測器組件814可以包括接近感測器，被配置用來在沒有任何的物理接觸時檢測附近物體的存在。感測器組件814還可以包括光感測器，如金屬氧化物半導體組件（Complementary Metal-Oxide Semiconductor，CMOS）或電荷耦合組件（Charge Coupled Device，CCD）圖像感測器，用於在成像應用中使用。在一些實施例中，該感測器組件814還可以包括加速度感測器、陀螺儀感測器、磁感測器、壓力感測器或溫度感測器。
通信組件816被配置為便於電子設備800和其他設備之間有線或無線方式的通信。電子設備800可以接入基於通信標準的無線網路，如WiFi，2G或3G，或它們的組合。在一個示例性實施例中，通信組件816經由廣播通道接收來自外部廣播管理系統的廣播信號或廣播相關資訊。在一個示例性實施例中，所述通信組件816還包括近場通信（Near Field Communication，NFC）模組，以促進短程通信。例如，在NFC模組可基於射頻識別（Radio Frequency Identification，RFID）技術，紅外資料協會（Infrared Data Association，IrDA）技術，超寬頻（Ultra WideBand，UWB）技術，藍牙（BlueTooth，BT）技術和其他技術來實現。
在示例性實施例中，電子設備800可以被一個或多個應用專用積體電路（Application Specific Integrated Circuit，ASIC）、數位訊號處理器（Digital Signal Processor，DSP）、數位信號處理設備（DSPD）、可程式設計邏輯器件（Programmable Logic Device，PLD）、現場可程式設計閘陣列（Field-Programmable Gate Array，FPGA）、控制器、微控制器、微處理器或其他電子組件實現，用於執行上述方法。
在示例性實施例中，還提供了一種非易失性電腦可讀儲存介質，例如包括電腦程式指令的記憶體804，上述電腦程式指令可由電子設備800的處理器820執行以完成上述方法。
圖8是根據一示例性實施例示出的一種電子設備1900的方塊圖。例如，電子設備1900可以被提供為一伺服器。參照圖8，電子設備1900包括處理組件1922，其進一步包括一個或多個處理器，以及由記憶體1932所代表的記憶體資源，用於儲存可由處理組件1922的執行的指令，例如應用程式。記憶體1932中儲存的應用程式可以包括一個或一個以上的每一個對應於一組指令的模組。此外，處理組件1922被配置為執行指令，以執行上述方法。
電子設備1900還可以包括一個電源組件1926被配置為執行電子設備1900的電源管理，一個有線或無線網路介面1950被配置為將電子設備1900連接到網路，和一個輸入輸出（I/O）介面1958。電子設備1900可以操作基於儲存在記憶體1932的作業系統，例如Windows ServerTM，Mac OS XTM，UnixTM, LinuxTM，FreeBSDTM或類似。
在示例性實施例中，還提供了一種非易失性電腦可讀儲存介質，例如包括電腦程式指令的記憶體1932，上述電腦程式指令可由電子設備1900的處理組件1922執行以完成上述方法。
在示例性實施例中，還提供了一種電腦程式，包括電腦可讀代碼，當所述電腦可讀代碼在電子設備中運行時，所述電子設備中的處理器執行用於實現本發明實施例所述的違規事件檢測方法。
本發明可以是系統、方法和/或電腦程式產品。電腦程式產品可以包括電腦可讀儲存介質，其上載有用於使處理器實現本發明的各個方面的電腦可讀程式指令。
電腦可讀儲存介質可以是可以保持和儲存由指令執行設備使用的指令的有形設備。電腦可讀儲存介質例如可以是(但不限於)電存放裝置、磁存放裝置、光存放裝置、電磁存放裝置、半導體存放裝置或者上述的任意合適的組合。電腦可讀儲存介質的更具體的例子（非窮舉的列表）包括：可擕式電腦盤、硬碟、隨機存取記憶體（Random Access Memory，RAM）、唯讀記憶體（Read Only Memory，ROM）、可擦式可程式設計唯讀記憶體（EPROM或快閃記憶體）、靜態隨機存取記憶體（Static Random Access Memory，SRAM）、可擕式壓縮磁碟唯讀記憶體（Compact Disc Read-Only Memory，CD-ROM）、數位多功能盤（DVD）、記憶棒、軟碟、機械編碼設備、例如其上儲存有指令的打孔卡或凹槽內凸起結構、以及上述的任意合適的組合。這裡所使用的電腦可讀儲存介質不被解釋為暫態信號本身，諸如無線電波或者其他自由傳播的電磁波、通過波導或其他傳輸媒介傳播的電磁波（例如，通過光纖電纜的光脈衝）、或者通過電線傳輸的電信號。
這裡所描述的電腦可讀程式指令可以從電腦可讀儲存介質下載到各個計算/處理設備，或者通過網路、例如網際網路、局域網、廣域網路和/或無線網下載到外部電腦或外部存放裝置。網路可以包括銅傳輸電纜、光纖傳輸、無線傳輸、路由器、防火牆、交換機、閘道電腦和/或邊緣伺服器。每個計算/處理設備中的網路介面卡或者網路介面從網路接收電腦可讀程式指令，並轉發該電腦可讀程式指令，以供儲存在各個計算/處理設備中的電腦可讀儲存介質中。
用於執行本發明操作的電腦程式指令可以是彙編指令、指令集架構（ISA）指令、機器指令、機器相關指令、微代碼、固件指令、狀態設置資料、或者以一種或多種程式設計語言的任意組合編寫的原始程式碼或目標代碼，所述程式設計語言包括對象導向的程式設計語言—諸如Smalltalk、C++等，以及常規的過程式程式設計語言—諸如“C”語言或類似的程式設計語言。電腦可讀程式指令可以完全地在使用者電腦上執行、部分地在使用者電腦上執行、作為一個獨立的套裝軟體執行、部分在使用者電腦上部分在遠端電腦上執行、或者完全在遠端電腦或伺服器上執行。在涉及遠端電腦的情形中，遠端電腦可以通過任意種類的網路—包括局域網(LAN)或廣域網路(WAN)—連接到使用者電腦，或者，可以連接到外部電腦（例如利用網際網路服務提供者來通過網際網路連接）。在一些實施例中，通過利用電腦可讀程式指令的狀態資訊來個性化定制電子電路，例如可程式設計邏輯電路、現場可程式設計閘陣列（FPGA）或可程式設計邏輯陣列（PLA），該電子電路可以執行電腦可讀程式指令，從而實現本發明的各個方面。
這裡參照根據本發明實施例的方法、裝置（系統）和電腦程式產品的流程圖和/或方塊圖描述了本發明的各個方面。應當理解，流程圖和/或方塊圖的每個方塊以及流程圖和/或方塊圖中各方塊的組合，都可以由電腦可讀程式指令實現。
這些電腦可讀程式指令可以提供給通用電腦、專用電腦或其它可程式設計資料處理裝置的處理器，從而生產出一種機器，使得這些指令在通過電腦或其它可程式設計資料處理裝置的處理器執行時，產生了實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作的裝置。也可以把這些電腦可讀程式指令儲存在電腦可讀儲存介質中，這些指令使得電腦、可程式設計資料處理裝置和/或其他設備以特定方式工作，從而，儲存有指令的電腦可讀介質則包括一個製造品，其包括實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作的各個方面的指令。
也可以把電腦可讀程式指令載入到電腦、其它可程式設計資料處理裝置、或其它設備上，使得在電腦、其它可程式設計資料處理裝置或其它設備上執行一系列操作步驟，以產生電腦實現的過程，從而使得在電腦、其它可程式設計資料處理裝置、或其它設備上執行的指令實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作。
附圖中的流程圖和方塊圖顯示了根據本發明的多個實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。在這點上，流程圖或方塊圖中的每個方塊可以代表一個模組、程式段或指令的一部分，所述模組、程式段或指令的一部分包含一個或多個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中，方塊中所標注的功能也可以以不同於附圖中所標注的順序發生。例如，兩個連續的方塊實際上可以基本並行地執行，它們有時也可以按相反的循序執行，這依所涉及的功能而定。也要注意的是，方塊圖和/或流程圖中的每個方塊、以及方塊圖和/或流程圖中的方塊的組合，可以用執行規定的功能或動作的專用的基於硬體的系統來實現，或者可以用專用硬體與電腦指令的組合來實現。
以上已經描述了本發明的各實施例，上述說明是示例性的，並非窮盡性的，並且也不限於所披露的各實施例。在不偏離所說明的各實施例的範圍和精神的情況下，對於本技術領域的普通技術人員來說許多修改和變更都是顯而易見的。本文中所用術語的選擇，旨在最好地解釋各實施例的原理、實際應用或對市場中的技術的技術改進，或者使本技術領域的其它普通技術人員能理解本文披露的各實施例。
11:第一獲得模組 12:生成模組 800:電子設備 802:處理組件 804:記憶體 806:電源組件 808:多媒體組件 810:音頻組件 812:輸入/輸出介面 814:感測器組件 816:通信組件 820:處理器 1900:電子設備 1922:處理組件 1926:電源組件 1932:記憶體 1950:網路介面 1958:輸入輸出介面 S11~S12:步驟
此處的附圖被併入說明書中並構成本說明書的一部分，這些附圖示出了符合本發明的實施例，並與說明書一起用於說明本發明的技術方案。 圖1示出根據本發明實施例的違規事件檢測方法的流程圖； 圖2示出根據本發明的實施例的違規事件檢測方法的應用示意圖一； 圖3示出根據本發明的實施例的違規事件檢測方法的應用示意圖二； 圖4示出根據本發明的實施例的違規事件檢測方法的應用示意圖三； 圖5示出根據本發明的實施例的違規事件檢測方法的應用示意圖四； 圖6示出根據本發明的實施例的違規事件檢測裝置的方塊圖； 圖7示出根據本發明的實施例的電子設備的一種方塊圖； 圖8示出根據本發明的實施例的電子設備的另一種方塊圖。
S11~S12:步驟

Claims (11)

  1. 一種違規事件檢測方法，所述方法包括： 根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果； 在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊。
  2. 根據請求項1所述的方法，其中，所述根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括： 在所述檢測模式設置為第一檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得當前時刻的第一檢測結果； 在所述第一檢測結果為第一違規事件的情況下，對第一預設時間段內抽取的多個待處理視頻幀進行檢測處理，分別獲得所述多個待處理視頻幀的第二檢測結果，其中，所述第一預設時間段為以所述當前時刻為起始時刻的時間段，所述第一違規事件為任意一種違規事件； 在所述第二檢測結果為第一違規事件的待處理視頻幀的數量大於或等於預設數量閾值的情況下，將所述待處理視頻流的檢測結果確定為第一違規事件。
  3. 根據請求項1所述的方法，其中，所述根據預設的檢測模式，對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括： 在所述檢測模式設置為第二檢測模式的情況下，對當前時刻抽取的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果。
  4. 根據請求項1至3中任一項所述的方法，其中，所述對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括： 在所述待處理視頻幀中確定目標對象的人臉區域和/或人體區域； 對所述人臉區域和/或人體區域進行行為檢測處理，獲得所述檢測結果。
  5. 根據請求項1至3中任一項所述的方法，其中，所述對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括： 對多個時刻抽取的待處理視頻幀進行運動檢測處理，獲得運動的目標對象所在區域； 對所述運動的目標對象所在區域進行檢測處理，獲得所述檢測結果。
  6. 根據請求項1至3任一項所述的方法，其中，所述對待處理視頻流的待處理視頻幀進行檢測處理，獲得所述待處理視頻流的檢測結果，包括： 對待處理視頻幀的清晰度進行檢測處理，獲得所述檢測結果。
  7. 根據請求項1至3任一項所述的方法，其中，在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊，包括： 在所述警告模式設置為第一警告模式的情況下，根據與第二違規事件對應的第一個檢測結果，生成與所述第二違規事件對應的警告資訊，並在第二預設時間段內遮罩與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
  8. 根據請求項1至3任一項所述的方法，其中，在所述待處理視頻流的檢測結果為違規事件的情況下，根據預設的警告模式以及所述檢測結果，生成警告資訊，包括： 在所述警告模式設置為第二警告模式的情況下，根據與第二違規事件的對應的檢測結果，生成與所述第二違規事件對應的警告資訊，其中，所述第二違規事件為任意一種違規事件。
  9. 根據請求項1至3任一項所述的方法，其中，所述方法還包括： 根據預設頻率對待處理視頻流進行抽幀處理，獲得待處理視頻幀。
  10. 一種電子設備，包括： 處理器； 用於儲存處理器可執行指令的記憶體； 其中，所述處理器被配置為：執行請求項1至9中任意一項所述的方法。
  11. 一種電腦可讀儲存介質，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現請求項1至9中任意一項所述的方法。
TW110105336A 2020-02-18 2021-02-17 違規事件檢測方法、電子設備和電腦可讀儲存介質 TW202133034A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010098904.8 2020-02-18
CN202010098904.8A CN111310665A (zh) 2020-02-18 2020-02-18 违规事件检测方法及装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
TW202133034A true TW202133034A (zh) 2021-09-01

Family

ID=71145068

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110105336A TW202133034A (zh) 2020-02-18 2021-02-17 違規事件檢測方法、電子設備和電腦可讀儲存介質

Country Status (5)

Country Link
JP (1) JP2022529300A (zh)
KR (1) KR20210148313A (zh)
CN (1) CN111310665A (zh)
TW (1) TW202133034A (zh)
WO (1) WO2021164644A1 (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111310665A (zh) * 2020-02-18 2020-06-19 深圳市商汤科技有限公司 违规事件检测方法及装置、电子设备和存储介质
CN112084882A (zh) * 2020-08-18 2020-12-15 深圳英飞拓科技股份有限公司 一种行为检测方法、装置及计算机可读存储介质
CN112216073B (zh) * 2020-10-12 2022-05-03 浙江大华技术股份有限公司 一种梯子违规操作告警方法及装置
CN112163123A (zh) * 2020-11-10 2021-01-01 中国科学院长春光学精密机械与物理研究所 一种事件提取方法、装置、电子设备及存储介质
CN114513625A (zh) * 2020-11-16 2022-05-17 中国石油化工股份有限公司 存储器、罐区泄漏的安全联锁方法、装置及设备
CN112434612A (zh) * 2020-11-25 2021-03-02 创新奇智(上海)科技有限公司 吸烟检测方法、装置、电子设备及计算机可读存储介质
CN112464898A (zh) * 2020-12-15 2021-03-09 北京市商汤科技开发有限公司 事件检测方法及装置、电子设备和存储介质
CN112866808B (zh) * 2020-12-31 2022-09-06 北京市商汤科技开发有限公司 一种视频处理方法、装置、电子设备及存储介质
CN112988337A (zh) * 2021-03-01 2021-06-18 创新奇智(上海)科技有限公司 任务处理系统、方法、装置、电子设备、存储介质
CN113011290A (zh) * 2021-03-03 2021-06-22 上海商汤智能科技有限公司 事件检测方法及装置、电子设备和存储介质
CN113095178A (zh) * 2021-03-30 2021-07-09 北京大米科技有限公司 不良信息检测方法、系统、电子设备和可读存储介质
CN113179423A (zh) * 2021-04-23 2021-07-27 深圳市商汤科技有限公司 事件的检测输出方法及装置、电子设备和存储介质
CN113076566B (zh) * 2021-04-26 2024-02-27 深圳市三旺通信股份有限公司 显示内容检测方法、设备、计算机程序产品及存储介质
CN113705370B (zh) * 2021-08-09 2023-06-30 百度在线网络技术（北京）有限公司 直播间违规行为的检测方法及装置、电子设备和存储介质
CN113762169A (zh) * 2021-09-09 2021-12-07 北京市商汤科技开发有限公司 人流量统计方法及装置、电子设备和存储介质
CN113780213B (zh) * 2021-09-16 2024-02-02 上海西井科技股份有限公司 基于监控进行行人识别的方法、系统、设备及存储介质
CN114554110B (zh) * 2022-01-25 2023-12-29 北京百度网讯科技有限公司 视频生成方法、装置、电子设备和存储介质
CN114155612A (zh) * 2022-02-10 2022-03-08 深圳爱莫科技有限公司 餐饮人员不规范行为模型训练方法、检测方法及处理设备
CN114999172A (zh) * 2022-05-24 2022-09-02 浙江大华技术股份有限公司 事件处理方法、装置、存储介质及电子装置
CN115914512A (zh) * 2022-09-30 2023-04-04 广州安思创信息技术有限公司 直播截图方法、装置、设备及存储介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4087600B2 (ja) * 2001-12-13 2008-05-21 セコム株式会社 画像監視装置
JP2010067169A (ja) * 2008-09-12 2010-03-25 Ntt Comware Corp 通信システム及び方法とそのプログラム
CN102081844A (zh) * 2011-01-25 2011-06-01 华中科技大学 一种交通视频行为分析与报警服务器
US9179096B2 (en) * 2013-10-11 2015-11-03 Fuji Xerox Co., Ltd. Systems and methods for real-time efficient navigation of video streams
CN107920223B (zh) * 2016-10-08 2020-08-28 杭州海康威视数字技术股份有限公司 一种对象行为检测方法及装置
EP3340104B1 (en) * 2016-12-21 2023-11-29 Axis AB A method for generating alerts in a video surveillance system
CN108810616B (zh) * 2018-05-31 2019-06-14 广州虎牙信息科技有限公司 目标定位方法、视频显示方法、装置、设备和存储介质
CN109063612A (zh) * 2018-07-19 2018-12-21 中智城信息技术有限公司 城市智能红线管理方法及机器可读存储介质
CN110647819B (zh) * 2019-08-28 2022-02-01 中国矿业大学 一种井下人员跨越皮带异常行为检测方法及装置
CN110728815A (zh) * 2019-10-25 2020-01-24 深圳市商汤科技有限公司 基于视频分析的预警方法及装置、电子设备和存储介质
CN111310665A (zh) * 2020-02-18 2020-06-19 深圳市商汤科技有限公司 违规事件检测方法及装置、电子设备和存储介质

Also Published As

Publication number Publication date
WO2021164644A1 (zh) 2021-08-26
KR20210148313A (ko) 2021-12-07
JP2022529300A (ja) 2022-06-20
CN111310665A (zh) 2020-06-19

Similar Documents

Publication Publication Date Title
WO2021164644A1 (zh) 违规事件检测方法及装置、电子设备和存储介质
US9691256B2 (en) Method and device for presenting prompt information that recommends removing contents from garbage container
US9934673B2 (en) Method and device for processing abnormality notification from a smart device
JP6466958B2 (ja) 端末異常の処理方法、端末異常の処理装置、電子装置、プログラム、及び記録媒体
US20180025229A1 (en) Method, Apparatus, and Storage Medium for Detecting and Outputting Image
WO2017211206A1 (zh) 视频标记方法、装置及视频监控方法和系统
US20170178289A1 (en) Method, device and computer-readable storage medium for video display
US10509540B2 (en) Method and device for displaying a message
CN109040824A (zh) 视频处理方法、装置、电子设备和可读存储介质
US20160125714A1 (en) Video recording with security/safety monitoring device
KR20220125716A (ko) 이벤트 검출 방법, 장치, 전자 기기, 저장 매체 및 프로그램 제품
US10133957B2 (en) Method and device for recognizing object
JP2017528050A (ja) 警報のための方法及び装置
US10309673B2 (en) Air anomaly alarming method, device and storage medium
JP2016515193A5 (zh)
US10354678B2 (en) Method and device for collecting sounds corresponding to surveillance images
CN105847763A (zh) 监控方法及装置
US11688261B2 (en) Body-worn alert system
CN106303961A (zh) 自动报警方法及设备
CN110728815A (zh) 基于视频分析的预警方法及装置、电子设备和存储介质
CN110807393A (zh) 基于视频分析的预警方法及装置、电子设备和存储介质
CN112633184A (zh) 告警方法及装置、电子设备和存储介质
CN111353454A (zh) 一种数据处理方法、装置和电子设备
US20160125303A1 (en) Method and apparatus for calculating smart indicator
CN111368701A (zh) 人物管控方法及装置、电子设备和存储介质