TW202220436A - 基於視訊源中之事件偵測的警報生成 - Google Patents

基於視訊源中之事件偵測的警報生成 Download PDF

Info

Publication number
TW202220436A
TW202220436A TW110139295A TW110139295A TW202220436A TW 202220436 A TW202220436 A TW 202220436A TW 110139295 A TW110139295 A TW 110139295A TW 110139295 A TW110139295 A TW 110139295A TW 202220436 A TW202220436 A TW 202220436A
Authority
TW
Taiwan
Prior art keywords
image frame
event
frame
image
hard
Prior art date
Application number
TW110139295A
Other languages
English (en)
Inventor
維克多 艾德帕姆
嵩 袁
艾德南 薩利姆
羅德里戈 薩屈
Original Assignee
瑞典商安訊士有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞典商安訊士有限公司 filed Critical 瑞典商安訊士有限公司
Publication of TW202220436A publication Critical patent/TW202220436A/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19663Surveillance related processing done local to the camera
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Abstract

本發明揭示用於處理藉由一攝影機系統擷取之一影像圖框串流之方法、系統及電腦程式產品。回應於偵測到一事件而生成一硬編碼之警報影像圖框。該硬編碼之警報影像圖框包含相對於一事件影像圖框之運動差量及/或色彩變化。生成一經編碼影像圖框串流,在該串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。

Description

基於視訊源中之事件偵測的警報生成
本發明係關於視訊監控系統,且更明確言之係關於回應於偵測到一視訊源中之一事件而向一操作者生成一警報。
在許多監控系統中,來自大量攝影機及/或其他感測器之視訊或其他資料係經管理且顯示於一操作控制室中之監視螢幕上。通常,該操作控制室中存在若干螢幕(諸如3個至6個螢幕)。各螢幕顯示由一操作者監視之若干視訊源(例如,4x4個視訊源)。因此,該操作者必須同時注意48 (3x16)至96 (6x16)個視訊源以便能夠偵測一單個視訊源中之一事件。
一事件可為一物件(諸如一車輛、一限制區域中之一闖入者、一經偵測人臉、一擁擠區域,僅舉一些實例)之一移動。然而,歸因於大量視訊源,存在操作者錯過偵測視訊源之一者中之事件的風險,尤其若事件很微妙或非常快發生,而操作者之注意力可能暫時被引導遠離含有事件之特定視訊源。因此,若一特定視訊源中存在一事件,則需要將操作者之注意力引導至該視訊源。
WO 2006/006081中描述一視訊監控系統。該視訊監控系統係由透過有線或無線組態之IP網路連接之智慧型攝影機、伺服器及用戶端組成。系統已經設計以便保護被監控人員及貨物之隱私。智慧型攝影機之操作經最佳化以在經解碼視訊之感知視覺品質與功率消耗量方面提供折衷。伺服器接收、儲存、管理視訊序列並在有線及無線通道上將其等分派給具有不同裝置能力、通道特性及偏好之各種用戶端及使用者。視訊序列之無縫可擴縮編碼之使用防止在系統中之任何點對轉碼操作之任何需要。
US 2003/0122667描述用於增強一自助結帳櫃台處之安全性之一系統及方法。該系統包含在若干自助結帳櫃台之終端機中執行之安全代理應用程式。安全代理軟體生成關於在一櫃台處正發生之安全事件之事件訊息且將其等傳輸至一伺服器。該伺服器將優先化之事件訊息作為警報訊息發送至一安全控制器。該安全控制器耦合至安全攝影機、影像資料儲存裝置及影像資料顯示裝置且根據經接收之警報訊息生成用於此等裝置之控制訊息。用於安全攝影機之控制訊息操作攝影機以針對在一櫃台處正發生之事件縮放、聚焦、傾斜或平移。控制器可在指向一監視器之一攝影機之視訊串流中插入視覺警報指示器或在視訊串流之音訊中插入一可聽音調以向安全人員警示在一櫃台處正在進行之安全事件之顯示。
根據一第一態樣,本發明係關於一種在一攝影機系統中之用於處理一影像圖框串流之方法。該方法包括: ●   回應於偵測到一事件,生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化; 及 ●   生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。
此方法使一操作者在其中可發生可疑事件之一監控情境下更容易獲得關於視訊源的警報。該方法不受事件之類型及/或偵測機制限制,而可應用於任何類型之事件。如本文中使用之一事件影像圖框係與一事件相關之一影像圖框。該事件影像圖框可為包括實際事件之一影像圖框,或在事件發生時或接近事件發生時擷取之一影像圖框。此外,當在本發明中使用時,表述硬編碼之警報影像圖框應被理解為在軟體中生成以產生在向一操作者顯示時視訊中之一所要變化,從而向該操作者警示該事件之一警報影像圖框。因此,應理解,硬編碼之警報影像圖框並非由一編碼器藉由編碼影像資料而產生。由於警報影像圖框經硬編碼,因此其無需藉由編碼器編碼,而是可直接插入至自編碼器輸出之影像串流中。當在向操作者顯示時視訊中之所要變化可為經顯示視訊中之一搖晃移動及/或一色彩變化以便警示操作者。警報之類型(即,「搖晃」及/或色彩變化)係可組態的,使得考量到當前境況可選擇最適當之警報類型。
如具有關於規定在影像內圖框及影像間圖框方面實施之時間視訊壓縮之視訊編碼格式之知識的熟習此項技術者所理解,一經編碼之影像間圖框包括:1)對一參考圖框(即,對在該經編碼之影像間圖框藉由一解碼器解碼時將在預測間使用之一影像圖框)之一參考;2)一圖框號,因此解碼器可按正確解碼順序對其進行解碼;及3)一顯示順序之一指示,因此解碼器可在經解碼視訊串流中之正確時間位置顯示經解碼之影像間圖框。因此,熟習技術者將理解,作為一影像間圖框之硬編碼之警報影像圖框包括:1)對在解碼包括相對於事件影像圖框之運動差量及/或色彩變化之硬編碼之警報影像圖框時將使用之事件影像圖框之一參考;2)一圖框號,其指示將按哪一解碼順序解碼硬編碼之警報影像圖框;及3)一顯示順序之一指示,因此解碼器可按正確顯示順序顯示經解碼之硬編碼之警報影像圖框以產生在向操作者顯示時視訊串流中之所要變化。有時在本發明中,硬編碼之警報影像圖框僅被稱為警報影像圖框。
根據一項實施例,方法進一步包括將該事件影像圖框編碼為一不顯示圖框。雖然可在不將事件影像圖框編碼為一不顯示圖框之情況下警示一操作者,但若將事件影像圖框編碼為不顯示影像圖框,則視覺效應通常更美觀。此外,藉由將事件影像圖框編碼為「不顯示」影像圖框且在各自事件影像圖框之後插入警報影像圖框(即,即使事件影像圖框係不顯示影像圖框且因此不被顯示,仍按顯示順序,警報影像圖框應插入於其等之後,如同其等將被顯示一樣),可保留原始顯示圖框率,從而給予操作者之顯示器上之視訊一自然外觀。在此背景內容中,「不顯示」意謂將不向一使用者顯示影像圖框。H.265編碼標準(及其他較新編碼標準,例如,諸如Google的VPl0)容許將一圖框標記為「不顯示」。例如,在H.265中,可藉由將切片標頭中之pic_output_flag設定為假或將SEI標頭中之no_display旗標設定為真來完成標記。
根據一項實施例,事件係在一影像圖框串流中之一事件影像圖框中偵測到之一事件,或一外部事件。即,如上文所提及,方法並不限於任何特定類型之事件偵測。例如,可藉由分析(例如,藉助於攝影機系統)影像圖框之內容來偵測一事件,但其亦可由一外部感測器(諸如一門被打開)觸發,且與在觸發感測器時(或接近觸發感測器時)擷取之一事件影像圖框相關。此大大增加其中可使用根據本發明之方法之情境。
根據一項實施例,對於若干事件影像圖框重複兩個生成步驟。即使本文中所描述之方法僅用於一單個事件影像圖框,在向一操作者警示一事件方面,其相較於現有技術仍提供一改良。然而,藉由針對若干事件影像圖框重複方法之生成步驟,可達成影像串流中之一「搖晃」或「閃爍」外觀,此將更容易向操作者警示在一特定視訊源中已發生一事件。搖晃/閃爍可持續一特定、預定時間量,或直至操作者確認警報。
根據一項實施例,運動差量包含在一水平方向上、在一垂直方向上及其等之任何組合相對於事件影像圖框之運動。大多數編碼器能夠應用水平運動及垂直運動兩者。因此,應理解,又,在軟體中(例如,藉由一影像處理管線)生成之警報影像圖框(即,硬編碼之警報影像圖框)可包括包含水平運動及垂直運動兩者之運動差量。此使得可以一使用者期望之基本上任何型樣移動(且藉此「搖晃」)影像串流中之影像。在一些情況中,此等型樣亦可與一特定事件類型相關。例如,一可疑人員進入一場景可引起一「小垂直搖晃」,而若有人試圖闖入一建築物中,則可引起一「明亮的紅色閃爍」或類似者。
根據一項實施例,運動差量具有一可組態大小或一預定義大小。能夠選擇運動之一預定義大小或一可組態大小增加本發明之多功能性且使其適於許多不同使用案例。例如,運動差量之大小可與事件之各種特徵(諸如類型、強度、重要性或準確性,僅舉幾個實例)有關。
根據一項實施例,運動差量僅應用於警報影像圖框之一部分。即,在一些情況中,可能無任何需要將運動應用於整個警報影像圖框。例如,若一場景中之一物件抵靠一致色彩之墻壁放置,則「搖晃」整個墻壁將具有較小意義或無意義,但僅搖晃物件將係足夠的,從而節省運算資源同時亦容許警示操作者。
根據一項實施例,色彩變化包含以下一或多者:相對於事件影像圖框之一更富有色彩的表示、相對於事件影像圖框之一色彩較少的表示,及相對於事件影像圖框之一變化色彩表示。此容許任何色彩組態在警報影像圖框中發生,且可形成各種效應(諸如更強烈或較不強烈的閃爍、交替色彩之閃爍或將整個警報影像圖框轉換為一致色彩)。
根據一項實施例,色彩變化僅應用於警報影像圖框之一部分。類似於上文所描述之內容,在一些情況中,僅對特定所關注物件應用色彩變化可能係足夠的,此將突顯物件且保持警報影像圖框之其餘部分不變。例如,此在一人臉辨識案例中可能係有用的,其中在一群人中,操作者可僅關注一特定個體。此外,色彩變化不一定需要應用於物件,但可對警報影像圖框之一特定部分(諸如警報影像圖框周圍之一邊界,僅舉一個實例)著色,或警報影像圖框可被加條紋或具有某種其他型樣,若一特定警報型樣與一特定事件類型相關聯,則此可能特別有用。
根據一項實施例,方法進一步包括回應於來自一操作者之一輸入,移除事件影像圖框之不顯示狀態且將警報影像圖框之狀態改變為不顯示,以便使操作者能夠觀看由攝影機系統擷取之事件。即,在操作者已被警示並確認警報之後,她可檢視由攝影機擷取之原始影像,以判定事件係什麼及是否需要採取任何行動。
根據一項實施例,警報影像圖框係以下一者:含有相對於事件影像圖框之運動差量之一向前預測影像圖框(P圖框),及含有相對於事件影像圖框之運動差量之一雙向圖框(B圖框)。在影像處理之背景內容中,P圖框及B圖框係眾所周知的標準概念,從而使得容易將本文中所描述之本發明與現有及未來監視系統整合。
根據一項實施例,基於在攝影機系統外部生成之一警報影像圖框生成硬編碼之警報影像圖框。因此,硬編碼之警報影像圖框之生成可包括基於在攝影機系統外部生成之一警報影像圖框生成硬編碼之警報影像圖框。此降低攝影機之所需運算能力且使本發明適於更大數目個裝置。例如,可藉由既不控制攝影機影像處理管線亦不控制視訊管理系統(VMS)事件處置系統之一外部應用程式生成警報影像圖框。該外部應用程式可(例如)藉由一外部裝置(諸如一麥克風、雷達、被動紅外(PIR)感測器、運動感測器、門感測器、窗感測器等)觸發。藉由外部應用程式生成之警報影像圖框包括運動差量及/或色彩變化(諸如預定義或預定運動差量及/或色彩變化)。此外,可將警報影像圖框輸入至影像處理管線,該影像處理管線可基於外部生成之警報影像圖框生成硬編碼之警報影像圖框。由於硬編碼之警報影像圖框係相對於事件影像圖框生成,故應理解,影像處理管線將硬編碼之警報影像圖框生成為一影像間圖框,該影像間圖框包括來自經輸入之警報影像圖框之運動差量及/或色彩變化以及對事件影像圖框之一參考。如上文所提及且如熟習此項技術者所知,一影像間圖框亦包括一圖框號及一顯示順序之一指示。
根據一項實施例,事件影像圖框係一圖像群組(GOP)之一參考圖框。在影像處理之背景內容中,一GOP係一眾所周知的標準概念,從而使得容易將本文中所描述之本發明與現有及未來監視系統整合。
根據一第二態樣,本發明係關於一種攝影機系統。該攝影機系統包含一透鏡、一影像感測器、一影像處理管線及一編碼器。該透鏡及該影像感測器經組態以擷取一影像圖框串流。該影像處理管線經組態以回應於偵測到一事件而生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化。該編碼器經組態以生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。
系統優點對應於方法之優點且可類似地改變。
根據一第三態樣,本發明係關於一種用於處理藉由一攝影機系統擷取之一影像圖框串流之一電腦程式產品。該電腦程式含有對應於以下步驟之指令: ●   回應於偵測到一事件,生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化;及 ●   生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框
電腦程式涉及對應於方法之優點之優點且可類似地改變。
在以下附圖及描述中闡述本發明之一或多項實施例之細節。將自描述及圖式及自發明申請專利範圍明白本發明之其他特徵及優點。
如上文所描述,本發明之各項實施例之一個目標係提供用於在一特定視訊源中存在一事件的情況下將一操作者之注意力引導至該視訊源之改良技術。確切而言什麼構成一「事件」超出本發明之範疇,且可分開判定。然而,如本說明書之介紹部分中所提及,事件之實例包含一物件(諸如一車輛、一限制區域中之一闖入者、一經偵測人臉、一擁擠區域等)之一移動。此等全部可被視為「視覺」事件。然而,亦可存在可能並非視覺的,但亦可根據下文所描述之技術進行處理的事件,諸如聲音或某物打破或發生故障。本發明之各項實施例係關於在偵測到一事件之後發生什麼。
根據本文中所描述之各項實施例,當偵測到一事件且該事件與一影像圖框(在下文中被稱為一影像圖框串流中之一「事件影像圖框」)相關聯時,生成一警報影像圖框。該警報圖框係類似於影像圖框,但不同之處在於警報圖框之至少一部分含有相對於事件影像圖框之一運動(即,在生成警報影像圖框時對事件影像圖框之至少一部分應用一或多個運動向量),或含有相對於事件影像圖框之一色彩變化(例如,使得比如說相較於事件影像圖框,警報影像圖框看上去更紅)。警報影像圖框經硬編碼,此意謂其並非由編碼器編碼。此外,硬編碼之警報影像圖框係在軟體中(例如)藉由一影像處理管線(IPP)生成。此亦可表達為硬編碼之警報影像圖框係由(例如)在IPP中執行之軟體產生。在警報影像圖框中之運動及色彩變化之各種組合亦係可行的。
警報影像圖框係插入於影像圖框串流中在事件影像圖框之位置處。因此,硬編碼之警報影像圖框可插入於經編碼影像圖框串流中在經編碼之事件影像圖框之位置處。更明確言之,在一項實施例中,警報影像圖框係緊接在事件影像圖框之後插入。例如,硬編碼之警報影像圖框可按顯示順序在經編碼之事件影像圖框之後插入於經編碼影像圖框串流中。在此等實施例中,警報影像圖框將在事件影像圖框之後且除了事件影像圖框之外被顯示。在一些實施例中,事件影像圖框改變至「不顯示」,此意謂將不顯示事件影像圖框。在此等實施例中,將顯示警報影像圖框而非事件影像圖框。可針對影像圖框串流中之若干事件影像圖框重複此程序,且對警報影像圖框應用通常持續幾秒之不同運動及/或不同色彩變化(例如,不同強度)。因此,操作者之顯示器上之視訊源看似「搖晃」及/或「閃爍」,此增加操作者將偵測否則可能無法偵測之一事件的可能性。此外,可在操作者已確認事件之後改變影像圖框串流,使得移除警報影像圖框且自事件影像圖框移除不顯示狀態,此容許操作者檢查由攝影機擷取之事件。現將藉由實例且參考圖式描述本發明之各項實施例。 系統概述
圖1展示其中可實施本發明之各項實施例之一例示性環境100之一示意圖。如圖1中可見,藉由一攝影機系統108擷取具有一人104及一樹106之一場景102。應注意,場景102之描繪僅為用於闡釋性目的之一簡單視圖。一場景102可在更一般意義上被描述為任何三維實體空間,其大小及形狀係由記錄場景之一攝影機之視野定義。
在圖3中更詳細繪示之攝影機系統108具有擷取場景102且將其投影至一影像感測器112上之一透鏡110。影像感測器112擷取一起形成一視訊串流之一系列影像圖框。影像感測器耦合至一影像處理管線302及一編碼器304 (其等兩者將在下文進一步詳細描述)。影像處理管線302及編碼器304較佳定位於攝影機系統108內部,但亦可定位於攝影機系統外部。例如,在一模組化攝影機系統中,透鏡110及影像感測器112可被包括於一影像擷取模組中,且影像處理管線302及編碼器304可被包括於一影像處理及編碼模組中。影像擷取模組與該影像處理及編碼模組可彼此分開配置且配置成經由一無線或有線連接彼此通信。此外,影像擷取模組可為可移動的,而影像處理及編碼模組可為固定的。影像處理管線302自影像感測器112獲取信號且在將視訊串流編碼成適於經由一網路傳輸給一操作者之一格式之前執行各種類型之影像處理操作。在圖1中,經編碼視訊係經由一無線電鏈路116無線傳輸至一有線網路118,且最終傳輸至連接至網路118之一用戶端120,但當然存在可使用的無線及有線傳輸模型之許多組合。
用戶端120具有一顯示器,一操作者可在該顯示器處觀看來自攝影機之影像視訊串流。通常,用戶端120亦連接至其中可儲存及/或進一步處理視訊之一伺服器。通常,用戶端120亦用於控制攝影機108 (例如,由操作者在用戶端120處發出控制命令)。例如,一操作者可指示攝影機按場景102之一特定細節放大,或若人104開始移動遠離樹106則追蹤她。然而,亦存在其中一操作者未控制攝影機但攝影機係固定的且僅提供影像串流以使操作者在用戶端120上觀看之情境。 用戶端顯示器及操作者體驗
圖2展示一操作者可在她的用戶端120之顯示器上看到之內容之一示意圖。如圖2中可見,顯示器被劃分成各展示來自一分開的攝影機之一視訊源之四個區段204a至204d。為便於圖解說明,圖2中僅展示四個分開的源,但應注意,一單個顯示器上通常可存在9個、16個或甚至更多源。描繪一汽車之一場景係在區段204a中展示,描繪一人透過一窗戶看之一場景係在區段204b中展示,圖1之場景102係在區段204c中展示,且跑過攝影機之一人係在區段204d中展示。如上文所闡釋,通常在觀看各具有多個區段之若干顯示器之操作者可能容易錯過在該等區段之一者中發生之微妙或短持續時間事件(例如,區段204b中之人移動一點點靠近窗戶)。在事件發生時操作者之注意力可能已集中於一不同顯示器上的情況尤其如此。在具體描述本發明之各項實施例如何解決此問題之前,將提供一影像處理之攝影機組件之一簡要描述。
如圖3中所展示,攝影機系統108包含在一影像感測器112上對場景102進行成像之一透鏡110。在執行各種操作(通常濾波、解馬賽克及色彩校正)之後,將所得影像轉送至一影像處理管線(IPP) 302。應注意,在一些實施例中,色彩校正可在IPP 302中完成。
在IPP 302中,對影像執行進一步處理。此進一步處理可包含雜訊濾波(用於消除空間及/或時間雜訊)、失真校正(用於消除例如桶形失真之效應)、全域及/或局部色調映射(例如,實現含有廣泛範圍之強度之場景之成像)、變換(例如,旋轉)、平場校正(例如,用於移除漸暈效應)、覆疊(例如,隱私遮罩、說明文字等)之應用。IPP 302亦可與執行物件偵測、物件辨識、警報等之一分析引擎(未展示)相關聯。IPP 302亦可經組態以生成包括相對於事件影像圖框之運動差量及/或色彩變化之硬編碼之警報影像圖框。如先前所提及,硬編碼之警報影像圖框可在軟體中藉由IPP 302生成。因此,IPP 302可執行電腦程式碼指令以生成硬編碼之警報影像圖框。此外,IPP 302可經組態以將硬編碼之警報影像圖框生成為包括相對於事件影像圖框之運動差量及/或色彩變化之一影像間圖框。如熟習此項技術者所知,一影像間圖框包括對在解碼包括該影像間圖框時將使用之一參考圖框之一參考、指示將由一解碼器用於按正確解碼順序解碼影像間圖框之影像間圖框之一解碼順序的一圖框號,及將由解碼器用於按正確顯示順序顯示影像間圖框之一顯示順序之一指示。因此,IPP 302生成包括對事件影像圖框之一參考、一圖框號及一顯示順序之一指示之硬編碼之警報影像圖框。
在影像IPP 302之後,可將影像(即,待由一編碼器編碼之影像)轉送至一編碼器304,其中根據一編碼協定編碼資訊且經由網路118將其轉送至接收用戶端120。此外,如下文將描述,在軟體中(例如)藉由IPP 302生成之硬編碼之警報影像圖框將被轉送至編碼器304以便插入於藉由編碼器304編碼之影像圖框串流中。應注意,圖3中所繪示之攝影機108亦包含諸多其他組件(諸如處理器、記憶體等),該等其他組件在習知攝影機系統中常見的且其等之目的及操作係一般技術者所熟知的。為清楚起見,已自圖3之圖解說明及描述省略此等組件。存在許多習知視訊編碼格式。配合本發明之各項實施例工作之一些常見視訊編碼格式包含:高效視訊編碼(HEVC),亦被稱為H.265及MPEG-H Part 2;高級視訊編碼(AVC),亦被稱為H.264及MPEG-4 Part 10;多功能視訊編碼(VVC),亦被稱為H.266、MPEG-I Part 3及未來視訊編碼(FVC);VP9、VP10及AOMedia Video 1 (AV1),僅舉一些實例。此等視訊編碼格式規定在影像內圖框及影像間圖框方面實施之時間視訊壓縮。影像內圖框亦可被稱為圖框內、I影像圖框或I圖框,且影像間圖框亦可被稱為圖框間且可為所謂之P圖框之預測(例如,向前預測)影像圖框或所謂之B圖框之雙向預測影像圖框。一I影像圖框可被描述為僅使用待編碼之影像圖框中之資訊編碼之一影像圖框。此外,I圖框係自針對待編碼之影像圖框擷取之所有影像資料計算。因此,I圖框有時亦被稱為一完整影像圖框。
P圖框可基於來自先前編碼之影像圖框之資訊以及目前編碼之影像圖框之資訊。B圖框可基於來自先前且視需要稍後編碼之影像圖框之資訊以及目前編碼之影像圖框之資訊。即,一影像間圖框可被描述為利用先前(且可能稍後)影像圖框中之時間冗餘資訊。實施此類型之編解碼器(壓縮標準)之一編碼器通常產生一I影像圖框,接著為預定數目個影像間圖框(例如,P圖框及/或B圖框),且接著一新I影像圖框,其後接著為相同數目個影像間圖框。一I圖框接著數個影像間圖框之此序列之長度通常被稱為一圖像群組(GOP)長度。對於一些壓縮標準(諸如H.265),可在編碼期間調整GOP長度。
圖4展示根據一項實施例之用於處理藉由一攝影機擷取之一影像圖框串流之一方法。如圖4中可見,該方法藉由以如上文參考圖3所描述之一習知方式處理一影像圖框串流(步驟402)而開始。在步驟402之正常處理期間,存在持續監視以偵測是否已發生一事件(步驟404)。如上文所提及,事件偵測本身與本發明之範疇分開。然而,事件偵測可總是與一或多個事件影像圖框相關。例如,在一項實施例中,可藉由分析藉由攝影機系統108擷取之影像圖框之內容來偵測一事件。在另一實施例中,可基於時間使一事件與一影像圖框相關。例如,藉由知道在什麼時間觸發一感測器(例如,藉由一門或窗被打開),可判定在該確切時間擷取哪一(些)影像圖框。無關於如何偵測事件,其總是將對應於一或多個影像圖框(其或其等在本文中將被稱為事件影像圖框)。應注意,一事件影像圖框不一定需要為在事件發生之確切時間擷取之影像圖框,而是代替性地可將事件與在事件發生之後之一特定時間框內擷取之一事件影像圖框相關聯。為清楚起見,本文中所描述之實例通常將係指一單個事件影像圖框,但應認識到,此等技術適用於若干事件影像圖框(其等可為連續或非連續的且其等可在一事件之整個持續時間或該事件之僅部分持續時間內擷取)。若無事件發生,則正常處理繼續。然而,若在步驟404發現已發生一事件,則生成一警報影像圖框(步驟406)。該警報影像圖框對應於事件影像圖框但具有如現將描述之一些不同特徵。
在一項實施例中,警報影像圖框係具有相對於事件影像圖框之至少一部分之一預定義向左或向右運動之一P圖框。通常,此運動係使用運動向量實施,如一般技術者所熟知。取決於特定實施方案,運動之量及運動之方向兩者可為可組態的或經預定義。例如,編碼器304可支援水平移動及垂直移動兩者,此亦實現任何種類之對角移動。如先前所提及,硬編碼之警報影像圖框係在軟體中(例如)藉由IPP 302產生。然而,對於解碼硬編碼之警報影像圖框之一解碼器,硬編碼之警報影像圖框應「看上去」如同其由編碼器304編碼一樣。因此,對於解碼器,在由編碼器304編碼之影像圖框與在軟體中(例如)藉由IPP 302生成之硬編碼之警報影像圖框之間不存在差異。因此,硬編碼之警報影像圖框亦可包括相對於事件影像之運動差量,該等運動差量提供水平運動及垂直運動兩者。在其中存在若干事件影像圖框之一案例中(其係常見的),可生成對應警報影像圖框,使得其等包含在交替方向上之移動。此將在下文進一步詳細描述,但本質上,具有其中交替警報影像圖框包含交替運動之一影像串流使得在顯示於顯示器120上時可達成一「搖晃」效應,此可幫助吸引操作者之注意力。應注意,運動向量可為全域運動向量,使得整個警報影像圖框相較於事件影像圖框移動一特定量且在一特定方向上移動。替代性地,運動向量可僅應用於事件影像圖框之一部分(例如,一特定所關注物件),使得僅警報影像圖框之該部分相對於事件影像圖框移動。
在另一實施例中,警報影像圖框係具有相對於事件影像圖框之至少一部分之一預定義色彩變化之一P圖框。例如,警報影像圖框可具有相對於事件圖框之一富有更多或更少色彩的表示(例如,或多或少的紅色)。當然,在不同警報影像圖框中色彩不必相同。例如,一個警報影像圖框可具有一更紅的色調,而一後續警報影像圖框可具有一更藍的色調。然而,鑑於人們習慣於將紅色感知為「危險」或「警報」的程度,在警報影像圖框中具有具不同強度之紅色通常可為一良好選擇。類似於運動向量,色彩變化可應用於整個警報影像圖框或警報影像圖框之一部分。又,影像圖框之部分不一定必須與事件影像圖框之內容相關,但可(例如)為被突顯之警報影像圖框周圍之一邊界。此一實例係在圖5中展示,其中在顯示器120之區段204c中已發生一事件。
一旦已生成警報影像圖框(即,硬編碼之警報影像圖框),就將其插入於經編碼影像圖框串流中之事件影像圖框之後,即通常緊跟在事件影像圖框之後,且對應事件影像圖框被標記為一不顯示影像圖框(步驟408)。藉由本質上用一警報影像圖框「替代」事件影像圖框,仍可保持原始圖框率且影像串流中之內容對於操作者仍將具有一正常外觀(除了搖晃及/或色彩變化之外)。此外,當操作者已確認事件時,可移除警報影像圖框且亦可移除警報影像圖框之不顯示特徵,從而使操作者能夠判定觸發警報之事件是否需要任何關注。
應注意,由於一事件通常具有一特定持續時間,因此可存在與該事件相關聯之許多事件影像圖框。在一些實施例中,針對各事件影像圖框生成一警報影像圖框,而在其他實施例中,僅針對事件影像圖框之一部分生成警報影像圖框。一般技術者可基於當前情境判定確切多少個事件影像圖框應用於生成警報影像圖框。但,作為一般準則,建議無關於生成多少個警報影像圖框,其等皆含有在交替方向上之移動及/或不同程度之色彩強度變化,此係因為此將使操作者更能注意到該等變化。此外,選擇事件影像圖框之方式使組態各種搖晃型樣成為可能。例如,可能存在三個「輕微的短持續時間搖晃」,接著在一段時間內暫停搖晃且顯示事件影像圖框,接著為一「大的長持續時間搖晃」。在許多方面,此類似於在蜂巢式電話上在一振動模式中進行的事情。
在一些實施例中,「搖晃」可在事件已終止之後繼續進行,且直至操作者確認事件。例如,存在其中一事件非常短且若搖晃僅在該事件期間發生,則操作者仍可錯過該事件之情境。因此,為增加操作者偵測到事件之可能性,系統可繼續生成警報影像圖框直至操作者確認事件。此可(例如)藉由將事件圖框之後之多個「正常」影像圖框亦設定為「不顯示」且接著將對應數目個所生成之警報圖框添加至串流來實施。
一旦已生成含有警報影像圖框之影像圖框串流,就判定是否還有任何影像圖框待處理(步驟410)。若是,則正常影像處理在步驟402恢復,如上文所描述。若不存在待處理之更多影像圖框(例如,若攝影機被關閉或進入睡眠狀態),則方法400結束。
為進一步繪示如本文中所描述之本發明之多功能性,請考量以下實例。 ●   一事件觸發。 ●   系統已經組態以藉助於一閃爍紅色警報來警示操作者,該閃爍紅色警報以原始影像混入0%至100%紅色之形式重複,例如,針對事件影像圖框#1為0%,針對事件影像圖框#2為50%,針對事件影像圖框#3為100%,針對事件影像圖框#4為50%,針對事件影像圖框#5為0%,針對事件影像圖框#6為50%等。 ●   對於一些事件影像圖框(特別是事件影像圖框#2、#3、#4、#6等),生成警報影像圖框且將其等添加至影像圖框串流,且將事件影像圖框#2、#3、#4、#6等標記為「不顯示」。然而,對於事件影像圖框#1、#5等(即,具有0%混合之警報影像圖框將與對應事件影像圖框相同),無需生成任何警報影像圖框(且亦無需將此等影像圖框標記為「不顯示」影像圖框)。
在以上實例中,事件影像圖框#1及#5將經正常編碼且事件影像圖框#2、#3、#4及#6將由編碼器304編碼為不顯示。一第一硬編碼之警報影像圖框A1將在軟體中(例如)藉由IPP 302生成(其中相對於事件影像圖框#2混入50%紅色),且其將由編碼器304按顯示順序插入於經編碼影像圖框串流中在事件影像圖框#2之後。又,一第二硬編碼之警報影像圖框A2將藉由IPP 302生成(其中相對於事件影像圖框#3混入100%紅色),且其將由編碼器304按顯示順序插入於經編碼影像圖框串流中在事件影像圖框#3之後。此外,一第三硬編碼之警報影像圖框A3將在軟體中(例如)藉由IPP 302生成(其中相對於事件影像圖框#4混入50%紅色),且其將由編碼器304按顯示順序插入於經編碼影像圖框串流中在事件影像圖框#4之後。相應地,一第四硬編碼之警報影像圖框A4將在軟體中(例如)藉由IPP 302生成(其中相對於事件影像圖框#6混入50%紅色),且其將由編碼器304按顯示順序插入於經編碼影像圖框串流中在事件影像圖框#6之後。因此,影像圖框串流將按顯示順序包括以下影像圖框:事件影像圖框#1、事件影像圖框#2 (不顯示)、第一硬編碼之警報影像圖框A1 (相對於#2 50%紅色)、事件影像圖框#3 (不顯示)、第二硬編碼之警報影像圖框A2 (相對於#3 100%紅色)、事件影像圖框#4 (不顯示)、第三硬編碼之警報影像圖框A3 (相對於#4 50%紅色)、事件影像圖框#5、事件影像圖框#6 (不顯示)及第四硬編碼之警報影像圖框A4 (相對於#6 50%紅色)。如熟習此項技術者理解,將影像圖框插入於影像圖框串流中可需要可能參考一或多個參考圖框及顯示順序之指示來更新影像圖框之一或多者之圖框號,以便保證影像圖框之正確解碼及正確解碼順序,及在顯示影像圖框串流時保證正確顯示順序。
如自此實例可見,不必針對一影像圖框串流中之每個事件影像圖框生成警報影像圖框,但僅針對事件影像圖框之一子集生成警報影像圖框可能係足夠的。
在一項實施例中,可能存在兩個分開的「軌道」,一個含有原始影像圖框串流,且一個僅含有警報影像圖框。若將第一軌道設定為「不顯示」,則將僅向操作者顯示警報影像圖框串流。因此,操作者之注意力將由展示於第二軌道中之一「搖晃靜止影像」捕獲,且接著操作者可切換至第一軌道且移除不顯示特徵,以觀看攝影機實際擷取之內容。 總結 評論
應注意,雖然以上實例聚焦於使用P圖框,但本發明之相同一般原理適用於可指代GOP中之向前及向後兩者之B圖框。然而,相較於P圖框,B圖框通常具有更高記憶體要求,因此在大多數情況中,使用P圖框將為較佳的。
此外,雖然以上實例已被描述為其中在警報影像圖框中發生移動或色彩變化之離散實施例,但沒有什麼將阻止此等實施例被組合。例如,可形成一搖晃及閃爍效應,此甚至可進一步增加操作者快速注意到含有事件之視訊源之可能性。在一些實施例中,可應用其他效應。例如,一影像之扭曲或「變形」可作為搖晃及閃爍之一替代(或結合其)而發生。此外,在一些實施方案中,若警報在一特定時間量內未被操作者確認,則警報類型可改變。例如,若一「搖晃」警報未被確認,則其可改變為一閃爍警報等。
亦應注意,在一些實施方案中,可存在與顯示於顯示器上之視覺警報相關聯之各種類型之可聽警報(警告聲音或警報等)。
本文中所揭示之系統(例如,影像處理管線及/或編碼器)及方法可實施為軟體、韌體、硬體或其等之一組合。在一硬體實施方案中,在以上描述中提及之功能單元或組件之間的任務劃分並不一定對應於劃分為實體單元;相反地,一個實體組件可執行多個功能性,且一個任務可由若干實體組件協作實行。
特定組件或所有組件可實施為由一數位信號處理器或微處理器執行之軟體,或實施為硬體或一特定應用積體電路。此軟體可分佈於可包括電腦儲存媒體(或非暫時性媒體)及通信媒體(或暫時性媒體)之電腦可讀媒體上。如熟習此項技術者熟知,術語電腦儲存媒體包含以任何方法或技術實施之用於儲存資訊(諸如電腦可讀指令、資料結構、程式模組或其他資料)之揮發性及非揮發性、可移除及不可移除媒體兩者。電腦儲存媒體包含(但不限於) RAM、ROM、EEPROM、快閃記憶體或其他記憶體技術、CD-ROM、數位多功能光碟(DVD)或其他光碟儲存器、磁帶盒、磁帶、磁碟儲存器或其他磁性儲存裝置,或可用於儲存所要資訊且可由一電腦存取之任何其他媒體。
圖中之流程圖及方塊圖繪示根據本發明之各項實施例之系統、方法及電腦程式產品之可行實施方案之架構、功能性及操作。在此方面,流程圖或方塊圖中之各方塊可表示包括用於實施(若干)經指定邏輯功能之一或多個可執行指令之指令之一模組、片段或部分。在一些替代實施方案中,方塊中提及之功能可不按圖中提及之順序發生。例如,取決於所涉及之功能性,連續展示之兩個方塊可實際上實質同時執行或該等方塊有時可按相反順序執行。亦將注意,方塊圖及/或流程圖圖解說明之各方塊以及該等方塊圖及/或流程圖圖解說明中之方塊之組合可藉由執行所指定之功能或動作或實行專用硬體及電腦指令之組合之專用的基於硬體之系統來實施。
將瞭解,熟習此項技術者可以許多方式修改上述實施例且仍使用如上文實施例中展示之本發明之優點。因此,本發明不應限於所展示實施例而應僅由隨附發明申請專利範圍定義。此外,如熟習技術者理解,可組合所展示實施例。
100:環境 102:場景 104:人 106:樹 108:攝影機系統 110:透鏡 112:影像感測器 116:無線電鏈路 118:有線網路/網路 120:用戶端/接收用戶端/顯示器 204a:區段 204b:區段 204c:區段 204d:區段 302:影像處理管線(IPP) 304:編碼器 400:方法 402:步驟 404:步驟 406:步驟 408:步驟 410:步驟
圖1係展示根據一項實施例之其中可應用本發明之各種方法及系統之一例示性環境100之一示意圖。
圖2係根據一項實施例之展示四個視訊源之一顯示器之一示意圖。
圖3係展示根據一項實施例之在圖1中繪示之攝影機系統108之一詳細視圖的一方塊圖。
圖4係展示根據一項實施例之用於處理一影像圖框串流之一方法之一流程圖。
圖5係根據一項實施例之展示四個視訊源之一顯示器之一示意圖,其中修改一個視訊源以吸引操作者之注意力。
各種圖式中之相同元件符號指示相同元件。
400:方法
402:步驟
404:步驟
406:步驟
408:步驟
410:步驟

Claims (14)

  1. 一種在一攝影機系統中之用於處理一影像圖框串流之方法,其包括: 回應於偵測到一事件,生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化;及 生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。
  2. 如請求項1之方法,其進一步包括: 將該事件影像圖框編碼為一不顯示影像圖框。
  3. 如請求項1之方法,其中該事件係在一影像圖框串流中之一事件影像圖框中偵測到之一事件,或一外部事件。
  4. 如請求項1之方法,其中該等運動差量包含在一水平方向上、在一垂直方向上及其等之任何組合相對於該事件影像圖框之運動。
  5. 如請求項1之方法,其中該等運動差量具有一可組態大小或一預定義大小。
  6. 如請求項1之方法,其中該等運動差量僅應用於該警報影像圖框之一部分。
  7. 如請求項1之方法,其中該等色彩變化包含以下一或多者:相對於該事件影像圖框之一更富有色彩的表示、相對於該事件影像圖框之一色彩較少的表示,及相對於該事件影像圖框之一變化色彩表示。
  8. 如請求項1之方法,其中該等色彩變化僅應用於該警報影像圖框之一部分。
  9. 如請求項2之方法,其進一步包括: 回應於來自一操作者之一輸入,移除該事件影像圖框之不顯示狀態且將該等警報影像圖框之狀態改變為不顯示,以便使該操作者能夠觀看由該攝影機系統(108)擷取之該事件。
  10. 如請求項1之方法,其中該警報影像圖框係以下一者:含有相對於該事件影像圖框之運動差量之一向前預測影像圖框—P圖框,及含有相對於該事件影像圖框之運動差量之一雙向圖框—B圖框。
  11. 如請求項1之方法,其中該硬編碼之警報影像圖框之該生成包括: 基於在該攝影機系統外部生成之一警報影像圖框生成該硬編碼之警報影像圖框。
  12. 如請求項1之方法,其中該事件影像圖框係一圖像群組GOP之一參考圖框。
  13. 一種攝影機系統,其包括: 一透鏡及一影像感測器,其等經組態以擷取一影像圖框串流; 一影像處理管線,其經組態以: 回應於偵測到一事件,生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化;及 一編碼器,其經組態以: 生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。
  14. 一種具有與其一起體現之程式指令之非暫時性電腦可讀儲存媒體,該等程式指令可藉由一處理器執行以執行包括以下之一方法: 回應於偵測到一事件,生成一硬編碼之警報影像圖框,其中該硬編碼之警報影像圖框係一影像間圖框且包含相對於一事件影像圖框之運動差量及/或色彩變化,且其中該硬編碼之警報影像圖框係在軟體中生成以產生在向一操作者顯示時一視訊串流中之一所要變化;及 生成一經編碼影像圖框串流,其中在該經編碼影像圖框串流中按顯示順序在該經編碼事件影像圖框之後插入該硬編碼之警報影像圖框。
TW110139295A 2020-10-23 2021-10-22 基於視訊源中之事件偵測的警報生成 TW202220436A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP20203602.6A EP3989537B1 (en) 2020-10-23 2020-10-23 Alert generation based on event detection in a video feed
EP20203602.6 2020-10-23

Publications (1)

Publication Number Publication Date
TW202220436A true TW202220436A (zh) 2022-05-16

Family

ID=73014317

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110139295A TW202220436A (zh) 2020-10-23 2021-10-22 基於視訊源中之事件偵測的警報生成

Country Status (6)

Country Link
US (1) US20220129680A1 (zh)
EP (1) EP3989537B1 (zh)
JP (1) JP2022069407A (zh)
KR (1) KR20220054198A (zh)
CN (1) CN114513629A (zh)
TW (1) TW202220436A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115278004B (zh) * 2022-07-06 2023-10-31 杭州海康汽车软件有限公司 监控视频数据的传输方法、装置、设备及存储介质

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8564661B2 (en) * 2000-10-24 2013-10-22 Objectvideo, Inc. Video analytic rule detection system and method
US7006666B2 (en) * 2001-11-21 2006-02-28 Etreppid Technologies, Llc Method and apparatus for detecting and reacting to occurrence of an event
US7034679B2 (en) * 2001-12-31 2006-04-25 Ncr Corporation System and method for enhancing security at a self-checkout station
KR20070043726A (ko) * 2004-06-01 2007-04-25 앨-쓰리 커뮤니케이션즈 코포레이션 비디오 플래쉬라이트/시각 경보 시스템 및 방법
US20070296817A1 (en) * 2004-07-09 2007-12-27 Touradj Ebrahimi Smart Video Surveillance System Ensuring Privacy
US7552467B2 (en) * 2006-04-24 2009-06-23 Jeffrey Dean Lindsay Security systems for protecting an asset
GB2450478A (en) * 2007-06-20 2008-12-31 Sony Uk Ltd A security device and system
EP2260646B1 (en) * 2008-03-28 2019-01-09 On-net Surveillance Systems, Inc. Method and systems for video collection and analysis thereof
US8345749B2 (en) * 2009-08-31 2013-01-01 IAD Gesellschaft für Informatik, Automatisierung und Datenverarbeitung mbH Method and system for transcoding regions of interests in video surveillance
US9405005B1 (en) * 2012-04-24 2016-08-02 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Automatic dependent surveillance broadcast (ADS-B) system for ownership and traffic situational awareness
US8948568B2 (en) * 2012-07-31 2015-02-03 Google Inc. Customized video
US20140036152A1 (en) * 2012-07-31 2014-02-06 Google Inc. Video alerts
US9304667B2 (en) * 2013-07-12 2016-04-05 Felix Houston Petitt, JR. System, devices, and platform for education, entertainment
US20160220174A1 (en) * 2015-02-03 2016-08-04 The Hong Kong Polytechnic University Body-Sensing Tank Top with Biofeedback System for Patients with Scoliosis
RU2017146271A (ru) * 2015-06-26 2019-07-30 Зуко МАНДЛАКАЗИ Устройство, система и способ оповещения
US20170134746A1 (en) * 2015-11-06 2017-05-11 Intel Corporation Motion vector assisted video stabilization
US10380429B2 (en) * 2016-07-11 2019-08-13 Google Llc Methods and systems for person detection in a video feed
US10192415B2 (en) * 2016-07-11 2019-01-29 Google Llc Methods and systems for providing intelligent alerts for events
US10957171B2 (en) * 2016-07-11 2021-03-23 Google Llc Methods and systems for providing event alerts
US11238290B2 (en) * 2016-10-26 2022-02-01 Google Llc Timeline-video relationship processing for alert events
EP3796655B1 (en) * 2019-09-20 2021-11-03 Axis AB Video privacy mask in forward predicted video frame
EP3836538B1 (en) * 2019-12-09 2022-01-26 Axis AB Displaying a video stream

Also Published As

Publication number Publication date
KR20220054198A (ko) 2022-05-02
JP2022069407A (ja) 2022-05-11
EP3989537A1 (en) 2022-04-27
CN114513629A (zh) 2022-05-17
EP3989537B1 (en) 2023-05-03
US20220129680A1 (en) 2022-04-28

Similar Documents

Publication Publication Date Title
US20220014717A1 (en) Analytics-Drived Summary Views for Surveillance Networks
JP6467368B2 (ja) イベントのビデオシーケンスを生成する方法及びシステム、並びにこうしたシステムを備えるカメラ
US10277901B2 (en) Encoding a video stream having a privacy mask
JP2001309354A (ja) 画像処理装置
US20100283857A1 (en) Event based dynamic change in video quality parameters of network cameras
JP2008205700A (ja) 映像表示装置及び映像表示方法
JP2008219484A (ja) 監視用カメラ、表示制御装置、および監視システム
JP2008042695A (ja) 監視カメラ装置、監視カメラシステム、監視カメラ画像記録方法
TW202220436A (zh) 基於視訊源中之事件偵測的警報生成
JP2006287893A (ja) ネットワークカメラシステム
JP2005073218A (ja) 画像処理装置
US11539909B2 (en) Controlling a pan-tilt-zoom camera
JP2004266592A (ja) 映像監視システム、およびサーバ、ならびに映像表示方法
JP2009100259A (ja) 監視カメラおよび画像監視システム
EP4270939A1 (en) System and method for adding one additional image frame or a sequence of additional image frames to a stream of encoded image frames
JP2002262272A (ja) ディジタル監視カメラシステムおよび制御装置
JP6604616B2 (ja) エレベータ用監視装置
TW202231068A (zh) 用於產生影像圖框之串流的方法及系統
JP4698260B2 (ja) 画像記録装置及び監視システム
JP2005328333A (ja) 監視システム
KR100563781B1 (ko) 주목해야 할 화상의 표시방법과 장치 및 원격화상감시시스템
JP2007325170A (ja) 映像監視装置及び方法
TW202337210A (zh) 包含覆蓋之視訊串流編碼
TWM499717U (zh) 智慧錄影和播放裝置
JP2021114763A (ja) ビデオのモニタリングにおけるリアルタイム偏差