TW201519649A - 網路視訊錄影的快速歷史回放及事件鎖定之方法 - Google Patents

網路視訊錄影的快速歷史回放及事件鎖定之方法 Download PDF

Info

Publication number
TW201519649A
TW201519649A TW102139735A TW102139735A TW201519649A TW 201519649 A TW201519649 A TW 201519649A TW 102139735 A TW102139735 A TW 102139735A TW 102139735 A TW102139735 A TW 102139735A TW 201519649 A TW201519649 A TW 201519649A
Authority
TW
Taiwan
Prior art keywords
image
frame
change
playback
player
Prior art date
Application number
TW102139735A
Other languages
English (en)
Other versions
TWI517699B (zh
Inventor
zhong-wang Li
Yi Liu
Jing-Fu Lin
Original Assignee
Alpha Networks Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpha Networks Inc filed Critical Alpha Networks Inc
Priority to TW102139735A priority Critical patent/TW201519649A/zh
Priority to US14/313,442 priority patent/US20150125130A1/en
Publication of TW201519649A publication Critical patent/TW201519649A/zh
Application granted granted Critical
Publication of TWI517699B publication Critical patent/TWI517699B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2747—Remote storage of video programs received via the downstream path, e.g. from the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本發明係一種網路視訊錄影的快速歷史回放及事件鎖定之方法，該方法係應用在網路視訊錄影(Network Video Recorder，簡稱NVR)之一播放器上，該播放器在對錄存影像(recorded image)執行歷史回放時，會先對錄存影像之一壓縮檔案進行解壓縮處理，且根據其中連續圖幀間影像數據變化量是否達一定程度者，分別標註代表「有變化」及「無變化」之旗標，嗣，再根據該播放器內對應於各該有變化及無變化之連續圖幀所設定的不同播放速度(如：無變化之連續圖幀的播放速度係較正常播放速度為快，有變化之連續圖幀的播放速度則較正常播放速度為慢)，在一顯示器上接續播放出該等連續圖幀之影像。如此，不僅能大幅縮減歷史回放所需之冗長時間，且令監視人員能在海量之回放影像數據中，快速地監看到少量真正需關注的影像，進而大幅減少監視人員歷史監看過程中所耗費之時間、精神及視力，此外，因監視人員有充分時間，對連續圖幀中「有變化」之部份，仔細監看事件發生之始末，並據以迅速且正確地分析及判斷事件發生之真正原因，故，本發明之方法僅需在簡單且快速的軟體運算條件下，使用少量的電腦計算能力，即能在現有廉價之錄影監視系統中，實現高階錄影監視系統所能完成之快速歷史回放及事件鎖定之最終目的。

Description

網路視訊錄影的快速歷史回放及事件鎖定之方法
本發明係關於網路視訊錄影的播放技術，尤指一種能大幅縮減錄影之歷史回放時間，且使監視人員能在海量之回放影像數據中，快速地監看到少量真正需關注的影像，進而大幅減少監視人員所耗費之時間、精神及視力，並令監視人員有充分時間，仔細監看事件發生始末，並據以快速且正確地判斷出事件原因之播放方法。
一般言，影像監視系統均係被設置在需要錄影存證之特定地點，以拍攝及錄製該特定地點之影像，供監視人員監看在該特定地點發生之異常事件，並據以啟動必要應變措施，因此，在設定及架設影像監視系統時，安裝人員必需將攝影機架設在特定地點之正確位置，以確保攝影機所擷取之影像區域能含蓋欲監看之全部範圍，進而確保攝影機所擷取之影像能供監視人員或影像辨識系統據以判斷異常事件發生之全貌，此外，攝影機之正確架設位置亦包括能方便調整攝影機角度及對攝影機進行維護保養之位置。二十年前，傳統影像監控系統均係建構在類比影像監視平台上，該等類比影像監視平台係利用5C2V同軸線，將攝影機所擷取之美國國家電視標準委員會(National Television System Committee，簡稱NTSC)影像訊號，傳輸至矩陣式監視主機，再經選擇切換後，輸出至監視牆進行即時監看，或儲存至錄影設備，該等類比影像監視平台不僅體積龐大，價格昂貴，尚需額外佈線，且無法提供多人同時且任意調閱即時影像，導致該等類比影像監視平台已逐漸被市場淘汰。
近年來，由於數位影像監視設備及網路軟體之不斷推陳出新，且價格日趨便宜，各界(包括機關、公司、社區及個人)基於對環境、公共及個人安全的日漸重視，數位影像監視系統之應用及需求乃不斷擴大 及增加，且已取代前述傳統類比影像監視平台，確定成為影像監視市場之主流。查，數位影像監視平台主要係採用網路攝影機(IP CAM)擷取數位影像，或將傳統攝影機所擷取之類比影像壓縮數位化後，再透過IP網路平台，傳輸數位影音訊號，令監視人員能在IP網域內之任一點，監看及錄存攝影機所擷取之影像。此外，為節省數位影像監視平台之視訊頻寬，數位影像監視系統尚必須能對攝影機所擷取及傳送之影音數據流，進行適當之壓縮處理；目前，市場上較常使用之數位影音壓縮規格雖概為H.264、MPEG-4、M-JPEG等，但由於影像畫素較高的攝影機能拍攝出較清晰之影像，以有效提升監視人員或影像辨識系統對人物的辨識率，且有助於進行犯罪偵防時對人臉或車牌之辨識準確性，因此，在數位影像監視平台中使用影像畫素較高的攝影機，幾乎已被認為是勢不可擋之市場主流。惟，高畫素攝影機亦意味著，數量龐大之影音數據流未來必然充斥在IP網域內，不僅佔據了大部份之網路頻寬，亦會佔用錄影設備中大量之儲存空間，且導致影像辨識系統之運算變得難度更高、更為複雜及更耗費時間。此外，由於攝影機擷取之影像品質極易受到拍攝角度及環境光亮度變化之影響，一旦攝影機所擷取之影像解析度不佳時，將因無法使用影像辨識系統，對影像進行自動辨識分析與後端資料庫比對，而無法在連續影像中即時且精準地找出目標，而必須在事件發生後，以人工方式，對影像逐一進行監看、比對及判斷，不僅耗工，亦極為費時。有鑒於此，使用更高解析度之攝影機，以適應不同拍攝角度及環境光變化，遂成為許多業者對高階數位影像監視平台的共同要求，惟，誠如前述，更高解析度攝影機所產生之更大量的影像數據流，又佔據了更多之網路頻寬及儲存空間，且勢必導致影像傳輸及自動辨識變得更為效率不彰，而需藉額外增設更高速且昂貴之網路設備及中央處理器，始能彌補，如此，惡性循環，最終導致高階數位影像監視平台之價格始終居高不下，而無法被普遍使用於各界。
目前，市場上較常使用之影像壓縮及解壓縮技術有H.264、MPEG-4、M-JPEG等不同規格，不同規格係對應於不同之影像解析度、每秒顯示幀數、傳輸速率及儲存容量等特性，針於租用一般電信公司專線頻寬傳輸數位監視影像之用戶而言，均係基於下列原則，選用其數位影像監 視平台所使用之壓縮及解壓縮技術：
1、因H.264具有最佳之壓縮率，且頻寬及儲存容量之要求皆較小，故適合於自建之有線網路，惟，當影像傳輸於不穩定之頻寬網路時，極易造成畫面模糊。
2、M-JPEG所需頻寬雖較大，但頻寬不穩定時，卻不易影響其錄影品質，故適合於自建之無線網路。
目前，錄影技術皆以數位化為主，影像錄存架構對於系統之後續維護及傳輸頻寬亦有相當影響，依現行技術，影像儲存及調閱架構主要可分為下列兩種類型：
1、前端分散式儲存架構：又稱「數位視訊錄影」(Digital Video Recorder，簡稱DVR)分散式管理架構1，參閱第1圖所示，其攝影機10及數位錄影機11等設備均係佈設於前端之監視現場，攝影機10所擷取之影像係利用數位錄影機11直接壓縮後，立即儲存，一般以4~16支攝影機10共用一台數位錄影機11為最普遍之作法，因此，較適合佈設於監視地點分散，監視現場面積較大，且歷史影像以較常在現場直接複製取用者為主，透過網路調閱為輔。此種前端分散式儲存架構，因現場設備體積大、空間取得不易、施工難度較高、設備影響觀瞻、不適合高濕高熱之戶外環境、不易維護管理、影像調閱不便及後端監視平台12加值功能受限等缺點，一般僅適用於特定室內區域，如：大樓中庭或停車場內，應用於監看大樓中庭或停車場之環境。
2、後端集中式儲存架構：又稱「網路視訊錄影」(Network Video Recorder，簡稱NVR)分散式管理架構2，參閱第2圖所示，網路攝影機20於現場端所擷取之影像，立即直接或透過數位視訊伺服器(Digital Video Server，簡稱DVS)21，被壓縮且傳送至遠端機房22儲存，各工作站23能直接或透過網路隨意調閱影像。由於，現場端僅架設有網路攝影機20，現場設備體積小，安裝簡易，且較不影響觀瞻，錄影主機221則共同集中安裝於遠端機房22內，各工作站23能直接或透過網路，連線至遠端機房22，進行影像擷取及調閱，因此，不僅能同時供多人至遠端機房22中調閱影像，錄影主機221亦易於管理、維護，且安全性高，此 外，若錄影主機221係採用高性能伺服器，不僅能提供智能影像辨識及比對、加值應用，亦易於擴充錄影功能及容量，且能針對特定現場之需求，延長特定網路攝影機20之錄影時間、調整影像傳輸頻寬及每秒顯示張數，較適合應用於鄰里、交通、路口、港灣等大範圍之監視環境。
本發明主要係針對前述NVR分散式管理架構，進行改良，茲以各大機構所普遍使用之數位錄影監視系統的影像平台為例，說明目前NVR分散式管理架構之運作態樣，參閱第3圖所示，各該數位錄影監視系統3會在各大機構內外之治安重要地點分別建置複數支網路攝影機30，錄影廣播伺服器321等設備則係分別安裝於警衛室或中控室32，其中，網路攝影機30所擷取之影像皆係以數位化方式，被壓縮為H.264(720×480，15FPS)或H.264(1280×960，7FPS)等格式，再經由租用之虛擬私人網路(Virtual Private Network，簡稱VPN)影像傳輸網路33，立即傳送且儲存至各警衛室或中控室32機房內之錄影廣播伺服器321，各警衛能透過系統中預設之使用權限，或其他人也能憑證透過所屬單位之工作站34，登入該錄影廣播伺服器321後，即能直接於網路上調閱影像及操作各項功能，某些系統除包括圖控、機構位置資訊、設備監視與維護管理等系統功能外，尚具有智能影像辨識功能，其中，圖控系統功能提供整體資源服務，主要具有平台權限控管、資源分配、事件管理及電子地圖等功能，採用分散式多層架構，使用者可透過圖控介面進行即時影像監看及錄製影像之歷史回放。
由以上所述可知，各該數位錄影監視系統均係利用錄影廣播伺服器之演算軟體，對網路攝影機所擷取之影像，進行判斷，以自動偵測監視區域內發生之事件狀態，再將所辨識之事件傳送至中控室之中央電腦系統，且發出警告，以便中央電腦系統進行後續應變管理及人員派遣，其智能影像辨識功能主要係對所獲得之影像訊號進行智能化分析(intelligent analysis)處理，包括利用其內建之影像擷取卡對影像輸入源進行數位化、擷取、比對、追蹤、分析等處理，並執行錄影工作，其事件偵測功能除能自動偵測及辨識事件外，尚能針對下列事件之開始至結束，在連續影像上標示移動或異常物件：
(1)參閱第4圖所示，監測機構外之移動物件(如：車輛或人)，並以某一特 定色彩(如：紅色)之高亮圖框(highlighted brackets)40予以標示，以便監視人員能以目視(eye contact)監看移動中的物件。
(2)參閱第5圖所示，監測機構內治安重要地點新增的異常物件(如：可疑包裹)，並以某一特定色彩(如：黃色)之高亮圖框41予以標示，以便監視人員能以目視注意到新增之異常物件及其過程。
(3)參閱第6圖所示，監測機構內治安重要地點中被搬移或被竊取的物件(如：行李)，並以某一特定色彩(如：藍色)之高亮圖框42予以標示，以便監視人員能以目視注意到被搬移或被竊取之物件及其過程。
(4)參閱第7圖所示，監測機構內治安重要地點之攝影機是否失焦？並以某一特定且高亮之圖標(如：驚嘆號)43予以警示，以便監視人員能於目視監看過程中，注意到此一失焦問題。
(5)參閱第8圖所示，監測機構內治安重要地點之攝影機是否被遮蔽？並以某一特定且高亮之圖標(如：手掌)44予以警示，以便監視人員能於目視監看過程中，注意到此一遮蔽問題。
一般言，在前述數位錄影監視系統中錄存之影像，雖如一段電影或電視畫面般，均是以影像之圖幀(frame)數據按時間順序的形式接續存放在至少一錄存影像檔案中，但是，針對異常事件的即時發現，仍完全需藉由監視人員以目視監看，前述數位錄影監視系統中之智能辨識功能僅係用以標示出影像中發生變化之物件，供監視人員注意、分析及判斷，以發現異常事件，其作法主要係藉由比對在時間軸上先後出現之連續圖幀間(frame by frame)整個影像數據的變化，並據以判斷且標示出影像中發生變化之目標(target)，因此，需耗費極大之電腦效能在智能辨識工作上。其次，前述數位錄影監視系統在錄存攝影機所擷取之影像時，為節省儲存空間，雖會使用前述常用之影像壓縮軟體對連續圖幀數據進行壓縮處理，僅記錄在時間軸上先後出現之連續圖幀中有變化的部份；惟，在事件發生後，對錄存影像進行歷史回放之過程中，因必需先藉影像解壓縮軟體，對錄存影像檔案進行解壓縮，始能執行歷史回放，導致監視人員仍必需在海量之影像圖幀中尋找、監看及確認少量與事件有關的影像，而必需耗費大量之精神、視力與時間。
綜上所述，由於NVR數位影像監視系統主要係針對特定地點之影像，進行全時監視錄影，故除了應考量用戶需求及周邊設備相容性等因素外，如何在無需大幅增加高畫質影像設備、高容量錄影設備及高速網路設備的添購成本之前提下，有效提高影像播放畫質、增加歷史回放效率及提升事件辨識能力，以加速使高階NVR數位影像監視系統之特性能普及於各界，即成為許多影像監視業者及網路服務業者刻正努力研發並亟欲達成的一重要目標。
本發明之一目的，係提供一種網路視訊錄影的快速歷史回放及事件鎖定之方法，該方法係應用在網路視訊錄影之一播放器上，該播放器在對錄存影像(recorded image)執行歷史回放時，會先對錄存影像之一壓縮檔案進行解壓縮處理，且根據其中連續圖幀間影像數據變化量是否達一定程度者，分別標註代表「有變化」及「無變化」之旗標，嗣，再根據該播放器內對應於各該有變化及無變化之連續圖幀所設定的不同播放速度，在一顯示器上接續播放出該等連續圖幀之影像。如此，不僅能大幅縮減歷史回放所需之冗長時間，且使監視人員能在海量之回放影像數據中，快速地監看到少量真正需關注的影像，進而大幅減少監視人員所耗費之時間、精神及視力；此外，因監視人員有充分時間，對連續圖幀中「有變化」之部份，仔細監看事件發生之始末，並據以迅速且正確地分析及判斷事件發生之真正原因，故，本發明之方法僅需在簡單且快速的軟體運算條件下，使用少量的電腦計算能力，即能在廉價之錄影監視系統中，實現高階錄影監視系統所能完成之快速歷史回放及事件鎖定之特性。
本發明之另一目的，係該方法尚能針對根據連續圖幀中影像數據變化量之程度，設定不同等級(如：高度變化、中度變化、低度變化及無變化)，且在圖幀上標示對應之等級，嗣，再根據該播放器內對應於各該等級所設定之不同播放速度，在顯示器上接續播放出該等連續圖幀之影像，且在顯示器畫面上標註對應之等級，進而使監視人員能在歷史回放之監看過程中，能更注意到連續圖幀中高度變化之部份，並據以快速且正確地判斷出事件發生之真正原因。
本發明之又一目的，係無變化之連續圖幀的播放速度係較正常播放速度為快，有變化之連續圖幀的播放速度係較正常播放速度為慢，且依其變化等級遞減。
為便 貴審查委員能對本發明目的、技術特徵及其功效，做更進一步之認識與瞭解，茲舉實施例配合圖式，詳細說明如下：
〔習知〕
1‧‧‧前端分散式儲存架構
10‧‧‧攝影機
11‧‧‧數位錄影機
12‧‧‧後端監視平台
2‧‧‧後端集中式儲存架構
20、30‧‧‧網路攝影機
21‧‧‧數位視訊伺服器
22‧‧‧遠端機房
23、34‧‧‧工作站
221‧‧‧錄影主機
3‧‧‧數位錄影監視系統
321‧‧‧錄影廣播伺服器
32‧‧‧中控室
33‧‧‧影像傳輸網路
40、41、42‧‧‧高亮圖框
43、44‧‧‧圖標
〔本發明〕
無
第1圖係習知前端分散式儲存架構之示意圖；第2圖係習知後端集中式儲存架構之示意圖；第3圖係習知NVR分散式管理架構之運作態樣之示意圖；第4圖係習知監測機構外移動物件影像之示意圖；第5圖係習知監測機構內治安重要地點新增異常物件影像之示意圖；第6圖係習知監測機構內治安重要地點中被搬移或被竊取物件影像之示意圖；第7圖係習知監測機構內治安重要地點之攝影機失焦影像之示意圖；第8圖係習知監測機構內治安重要地點之攝影機被遮蔽影像之示意圖；第9圖係本發明之一較佳實施例的方法流程示意圖；及第10圖係本發明之另一較佳實施例的方法流程示意圖。
發明人在對目前數位錄影監視系統所錄存之影像，經過長期研究後發現，各該數位錄影監視系統之播放器在事件發生後，對錄存影像進行歷史回放之過程中，因必需藉一影像解壓縮軟體，先對壓縮之錄存影像檔案進行解壓縮處理，以使錄存影像檔案回復成原始且連續之圖幀數據，始能執行歷史回放，逐一地在一顯示器上呈現每一圖幀之影像，供監視人員監看及判斷，以MPEG-4規格為例，每秒鐘係播放連續30張影像，因此，若欲監看二十四小時(即，捌萬陸仟肆佰秒)內之影像，總計需監看連續近兩佰陸拾萬張之影像，不僅極為浪費時間，監視人員尚必需在海量之圖幀影像中尋找、監看及確認少量與事件有關的影像，亦大量耗費了監視 人員之精神與視力。
查，前述影像壓縮軟體在對欲錄存之連續圖幀數據進行壓縮處理時，僅會記錄在時間軸上先後出現之連續圖幀中有變化的部份，事實上，在大多數時間之正常狀態下，由於每一圖幀影像間對應物件之移動變化一般均不會太大，前述影像壓縮軟體因此無需將每幀影像都紀錄下來，反之，只需從連續圖幀序列中挑出一些關鍵圖幀(key frame)，加以儲存，而介於關鍵圖幀間之其他圖幀，則只儲存與關鍵圖幀間之影像變化資訊即可，如此，相對於其他圖幀之整張影像而言，關鍵圖幀間因影像變化較小，只需少許儲存空間即能儲存其他圖幀上之影像變化資訊。
有鑒於此，發明人認為，在對目前數位錄影監視系統所錄存之影像，進行歷史回放之過程中，僅需針對事件發生的下列三大因素，進行判斷，即能據以確認與事件發生有直接且密切關聯之影像：
(1)判斷連續圖幀間數據量是否發生變化？
(2)判斷連續圖幀間數據變化量是否達一定程度？或其變化區域是否達一定範圍？
(3)判斷連續圖幀間數據量發生變化之開始及結束時間。
因此，若各該數位錄影監視系統之播放器能在對錄存影像檔案進行解壓縮處理時，能檢測出單位時間內連續圖幀間數據量(Data Traffic)變化的情況，即能區分出圖幀間「有變化」和「無變化」之相對關係，其中，「有變化」係指單位時間內連續圖幀間之數據量變化達一定程度，或變化區域達一定範圍，代表圖幀中必有大於一定尺寸的運動物件出現，或整個圖幀中場景畫面遭切換等，據此，該播放器在執行前述歷史回放過程時，僅需針對連續圖幀中「有變化」之部份，執行慢速播放(即，較正常播放速度慢)，且針對連續圖幀中「無變化」之部份，執行快速播放(即，較正常播放速度快)，即不僅能大幅縮減歷史回放所需之冗長時間，且能令監視人員針對連續圖幀中「有變化」之部份，有較多時間仔細監看事件發生之始末，並據以正確且迅速地分析及判斷出事件發生之真正原因。
有鑒於此，發明人乃根據上述理念研發出本發明之一種網路視訊錄影的快速歷史回放及事件鎖定之方法，該方法極適宜應用在某些需 進行監視之場所，特別是，這類場所的視頻畫面大多數時間是不變化或變化很少者，而監視人員所關注者也主要是集中在短時間內連續圖幀間影像數據量變化較大者，因此，在執行錄存影像的歷史回放時，快速發現或檢索出連續圖幀中「有變化」之部份，即變得非常有實際意義，因為，這樣就僅需在海量之錄存影像中，監看少量真正需關注的影像，不僅能使監視人員所耗費之時間、精神及視力大幅減少，且能令監視人員有更充分之時間，對連續圖幀中「有變化」之部份，進行迅速且正確的分析及判斷，進而能在簡單且快速的軟體運算條件下，使用少量的電腦計算能力，即能在廉價之錄影監視系統中，實現高階錄影監視系統所能完成之快速歷史回放及鎖定事件影像之功能。請參閱第9圖所示，在本發明之一較佳實施例中，該方法係應用於一網路視訊錄影(Network Video Recorder，簡稱NVR)之一播放器上，該播放器包括一解壓縮軟體，且在對錄存影像(recorded image)執行歷史回放時，能對錄存影像之一壓縮檔案，執行下列步驟之處理：(100)利用該解壓縮軟體先對錄存影像之該壓縮檔案，進行解壓縮處理；(101)判斷連續且相鄰兩圖幀間影像數據變化量是否達一設定程度(如：1%)？若是，執行步驟(102)，否則，執行步驟(103)；(102)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量未達該設定程度之狀態下(即，低於設定)，在後一幀影像上標註代表「無變化」之旗標後，執行步驟(104)；(103)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量達該設定程度之狀態下(即，不低於設定)，在後一幀影像上標註代表「有變化」之旗標後，執行步驟(104)；(104)判斷是否完成該壓縮檔案中全部連續圖幀影像之標註處理，若是，執行步驟(105)，否則，執行步驟(101)，對後續圖幀進行標註處理；及(105)根據使用者在該播放器內對應於各該有變化及無變化之連續圖幀所預先設定的不同播放速度(即，預先設定之旗標對應速度(106))，在一顯示器上接續播放出該等連續圖幀之影像，其中，無變化之連續圖幀的播放速度係較正常播放速度為快，有變化之連續圖幀的播放速度則較正常播放速度為慢。
如此，因無變化之連續圖幀係以較快的速度播放，不僅能大幅縮減歷史回放所需之冗長時間，且使監視人員能在海量之錄存影像中，快速地監看到少量真正需關注的影像，進而大幅減少監視人員所耗費之時間、精神及視力，此外，因有變化之連續圖幀係以較慢的速度播放，尚能令監視人員有充分時間，對連續圖幀中「有變化」之部份，仔細監看事件發生之始末，而無需反覆執行歷史回放之動作，即能迅速且正確地分析判斷出事件發生之原因。
在本發明之另一較佳實施例中，請參閱第10圖所示，該方法係應用於一網路視訊錄影之一播放器上，該播放器包括一解壓縮軟體，且在對網路視訊之錄存影像執行歷史回放時，能對錄存影像之一壓縮檔案，執行下列步驟之處理：(200)利用該解壓縮軟體先對錄存影像之該壓縮檔案，進行解壓縮處理；(201)判斷連續且相鄰兩圖幀間影像數據量變化之程度(或變化區域之範圍)，是否屬於複數個設定等級之一(如：數據量變化之程度或變化區域之範圍，低於1%即屬於無變化，介於1%~5%即屬於低度變化，介於5%~10%即屬於中度變化，高於10%以上即屬於高度變化)，且在圖幀上標註對應之等級；在判斷出後一幀影像相對於前一幀影像間之影像數據變化量(或變化區域之範圍)低於1%之狀態下，執行步驟(202)，否則，執行步驟(203)；(202)在後一幀影像上標註代表「無變化」等級之旗標後，執行步驟(208)；(203)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量(或變化區域之範圍)介於1%~5%之狀態下，執行步驟(204)，否則，執行步驟(205)；(204)在後一幀影像上標註代表「低度變化」等級之旗標後，執行步驟(208)；(205)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量介於5%~10%之狀態下，執行步驟(206)，否則，執行步驟(207)；(206)在後一幀影像上標註代表「中度變化」等級之旗標後，執行步驟(208)；(207)在後一幀影像上標註代表「高度變化」等級之旗標後，執行步驟(208)；(208)判斷是否完成該壓縮檔案中全部連續圖幀影像之標註處理，若是，執 行步驟(209)，否則，執行步驟(201)，對後續圖幀進行等級之標註處理；及(209)根據使用者在該播放器內對應於各該等級所預先設定之不同播放速度(210)，在一顯示器上接續播放出該等連續圖幀之影像，且在該顯示器之影像畫面上呈現對應之等級，其中，無變化之連續圖幀的播放速度係較正常播放速度為快，有變化之連續圖幀的播放速度則依其等級較正常播放速度遞減，進而使監視人員能在歷史回放之監看過程中，能更注意到連續圖幀中高度變化之部份，並據以正確地判斷出事件發生之真正原因。
在前述實施例中，為能清楚判斷該等連續圖幀間影像數據變化量，該播放器在對錄存影像執行歷史回放時，會透過該解壓縮軟體，判讀出在時間軸上先後出現之連續圖幀中無變化的部份，再從連續無變化的圖幀序列中挑出一張圖幀，作為一關鍵圖幀(key frame)，再判讀後續有變化之連續圖幀序列中每一圖幀與該關鍵圖幀間影像數據量發生變化之程度，或變化區域之範圍，並據以在各該錄存影像上標註對應之旗標或等級，如此，該播放器在對錄存影像執行歷史回放時，該播放器即能根據使用者或設計人員預先在該播放器中設定之不同對應播放速度，在顯示器上接續播放出該等連續圖幀之影像。誠如前述，由於，數位錄影監視系統全時錄存之所有影像，僅在少數時間狀態下，其間之影像數據量會因物件之較大移動，而發生較明顯之變化，反之，在大多數時間狀態下，連續圖幀影像間物件之移動一般均不會太大，甚至無變化，因此，透過本發明之方法，因該播放器能以非常快速之方式，在顯示器上播放無變化之連續圖幀，或僅播放關鍵圖幀，並顯示無變化連續圖幀之開始及結束時間，而跳過其它無變化之連續圖幀。如此，監視人員即能在進行網路視訊錄影之歷史監看時，快速略過其它冗長無變化之連續圖幀，僅將精神及視力集中在短時間內變化較大的連續圖幀影像，以快速發現及鎖定連續圖幀中「有變化」部份之異常事件，並進行迅速且正確的分析及判斷，以確認異常事件發生之始末及真正原因。據此，由於本發明之方法係作為現有播放器及現有解壓縮軟體間之界面，以在簡單且快速的軟體運算條件下，使用少量的電腦計算能 力，即能在廉價之錄影監視系統中，實現高階錄影監視系統所能完成之快速歷史回放及鎖定事件影像之功能，故，本發明之方法應確實符合專利法所規定之新穎性及進步性等專利要件。
按，以上所述，僅係本發明之較佳實施例，惟，本發明所主張之權利範圍，並不侷限於此，按凡熟悉該項技藝人士，依據本發明所揭露之技術內容，可輕易思及之等效變化，均應屬不脫離本發明之保護範疇。

Claims (8)

  1. 一種網路視訊錄影的快速歷史回放及事件鎖定之方法，係應用於一網路視訊錄影之一播放器上，該播放器包括一解壓縮軟體，且在對錄存影像執行歷史回放時，能對錄存影像之一壓縮檔案，執行下列步驟之處理：(1-1)利用該解壓縮軟體對錄存影像之該壓縮檔案，進行解壓縮處理；(1-2)判斷連續且相鄰兩圖幀間影像數據變化量是否達一設定程度？若是，執行步驟(1-3)，否則，執行步驟(1-4)；(1-3)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量達該設定程度之狀態下，在後一幀影像上標註代表「有變化」之旗標後，執行步驟(1-5)；(1-4)在判斷出後一幀影像相對於前一幀影像間之影像數據變化量未達該設定程度之狀態下，在後一幀影像上標註代表「無變化」之旗標後，執行步驟(1-5)；(1-5)判斷是否完成該壓縮檔案中全部連續圖幀影像之標註處理，若是，執行步驟(1-6)，否則，執行步驟(1-2)，對後續圖幀進行標註處理；及(1-6)根據使用者在該播放器內預先設定之旗標對應播放速度，在一顯示器上接續播放出該等連續圖幀之影像。
  2. 如請求項1所述之方法，其中，有變化之旗標的對應播放速度較無變化之旗標的對應播放速度為慢。
  3. 如請求項1或2所述之方法，其中，該播放器在對錄存影像執行歷史回放時，係透過該解壓縮軟體，判讀出在時間軸上先後出現之連續圖幀中無變化的部份，再從連續無變化的圖幀序列中挑出一張圖幀，作為一關鍵圖幀，再判讀後續有變化之連續圖幀序列中每一圖幀與該關鍵圖幀間 影像數據量發生變化之程度，或變化區域之範圍，並據以在各該圖幀上標註對應之旗標。
  4. 一種網路視訊錄影的快速歷史回放及事件鎖定之方法，係應用於一網路視訊錄影之一播放器上，該播放器包括一解壓縮軟體，且在對錄存影像執行歷史回放時，能對錄存影像之一壓縮檔案，執行下列步驟之處理：(4-1)利用該解壓縮軟體對錄存影像之該壓縮檔案，進行解壓縮處理；(4-2)判斷連續且相鄰兩圖幀間影像數據量變化之程度或變化區域之範圍；(4-3)在後一幀影像上標註對應等級之旗標；(4-4)判斷是否完成該壓縮檔案中全部連續圖幀影像之標註處理，若是，執行步驟(4-5)，否則，執行步驟(4-2)，對後續圖幀進行等級之標註處理；及(4-5)根據使用者在該播放器內對應於各該等級所預先設定之不同播放速度，在一顯示器上接續播放出該等連續圖幀之影像。
  5. 如請求項4所述之方法，其中，步驟(4-5)尚包括在該顯示器之影像畫面上呈現對應之等級。
  6. 如請求項4或5所述之方法，其中，有變化之連續圖幀的播放速度係依其等級，較無變化之連續圖幀的播放速度遞減。
  7. 如請求項6所述之方法，其中，該播放器在對錄存影像執行歷史回放時，會透過該解壓縮軟體，判讀出在時間軸上先後出現之連續圖幀中無變化的部份，再從連續無變化的圖幀序列中挑出一張圖幀，作為一關鍵圖幀，再判讀後續有變化之連續圖幀序列中每一圖幀與該關鍵圖幀間影像數據量發生變化之程度，或變化區域之範圍，並據以在各該圖幀上標註對應等級之旗標。
  8. 如請求項7所述之方法，其中，該等級係依數據量變化之程度或變化區域之範圍，被區分成無變化、低度變化、中度變化及高度變化四個等級。
TW102139735A 2013-11-01 2013-11-01 網路視訊錄影的快速歷史回放及事件鎖定之方法 TW201519649A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW102139735A TW201519649A (zh) 2013-11-01 2013-11-01 網路視訊錄影的快速歷史回放及事件鎖定之方法
US14/313,442 US20150125130A1 (en) 2013-11-01 2014-06-24 Method for network video recorder to accelerate history playback and event locking

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW102139735A TW201519649A (zh) 2013-11-01 2013-11-01 網路視訊錄影的快速歷史回放及事件鎖定之方法

Publications (2)

Publication Number Publication Date
TW201519649A true TW201519649A (zh) 2015-05-16
TWI517699B TWI517699B (zh) 2016-01-11

Family

ID=53007122

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102139735A TW201519649A (zh) 2013-11-01 2013-11-01 網路視訊錄影的快速歷史回放及事件鎖定之方法

Country Status (2)

Country Link
US (1) US20150125130A1 (zh)
TW (1) TW201519649A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI625967B (zh) * 2015-06-30 2018-06-01 瑞典商安訊士有限公司 監視攝影機
TWI638337B (zh) * 2017-12-21 2018-10-11 晶睿通訊股份有限公司 影像合成方法及其影像合成裝置
TWI710971B (zh) * 2019-01-31 2020-11-21 開曼群島商創新先進技術有限公司 基於區塊鏈對人臉資訊進行場景化存證的方法及裝置
CN113438538A (zh) * 2021-06-28 2021-09-24 康键信息技术（深圳）有限公司 短视频预览方法、装置、设备及存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108062507B (zh) * 2016-11-08 2024-02-27 中兴通讯股份有限公司 一种视频处理方法及装置
CN110716803A (zh) * 2018-07-13 2020-01-21 中强光电股份有限公司 电脑系统、资源分配方法及其影像辨识方法
CN111787357A (zh) * 2020-07-28 2020-10-16 联想(北京)有限公司 一种视频处理方法及电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2952783A1 (fr) * 2009-11-18 2011-05-20 St Microelectronics Grenoble 2 Sas Procede et dispositif de controle de la vitesse de restitution d'une sequence video numerique compressee

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI625967B (zh) * 2015-06-30 2018-06-01 瑞典商安訊士有限公司 監視攝影機
US10326917B2 (en) 2015-06-30 2019-06-18 Axis Ab Monitoring camera
TWI638337B (zh) * 2017-12-21 2018-10-11 晶睿通訊股份有限公司 影像合成方法及其影像合成裝置
US10785531B2 (en) 2017-12-21 2020-09-22 Vivotek Inc. Video synopsis method and related video synopsis device
TWI710971B (zh) * 2019-01-31 2020-11-21 開曼群島商創新先進技術有限公司 基於區塊鏈對人臉資訊進行場景化存證的方法及裝置
CN113438538A (zh) * 2021-06-28 2021-09-24 康键信息技术（深圳）有限公司 短视频预览方法、装置、设备及存储介质
CN113438538B (zh) * 2021-06-28 2023-02-10 康键信息技术（深圳）有限公司 短视频预览方法、装置、设备及存储介质

Also Published As

Publication number Publication date
TWI517699B (zh) 2016-01-11
US20150125130A1 (en) 2015-05-07

Similar Documents

Publication Publication Date Title
TW201519649A (zh) 網路視訊錄影的快速歷史回放及事件鎖定之方法
US10387726B2 (en) Image monitoring system and image monitoring program
US20220014717A1 (en) Analytics-Drived Summary Views for Surveillance Networks
KR100883632B1 (ko) 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법
US20170163941A1 (en) Video analytics based control of video data storage
CN104702897B (zh) 网络视频录影的快速历史回放及事件锁定的方法
US20150085114A1 (en) Method for Displaying Video Data on a Personal Device
KR101149651B1 (ko) 어안카메라의 다면영상분석을 통한 주차가능면 실시간 감지시스템 및 그 감지방법
CN103475856A (zh) 应用于广电网络的视频监控系统
KR100439042B1 (ko) 원격지 백업기능을 갖는 디브이알 시스템
WO2009108124A1 (en) A method of recording quality images
KR101619791B1 (ko) 블랙박스 녹화 영상의 분산 저장 방법
CN203279072U (zh) 金融行业联网监控系统
JP2004064438A (ja) 監視システム及び監視方法
KR101837980B1 (ko) 이기종 영상제공장치를 포함하는 영상통합중계 및 활용시스템과 그의 제어방법
US20180063470A1 (en) Monitoring camera system and reproduction method
KR101671276B1 (ko) 교차로 영상기록 시스템
KR102092074B1 (ko) 효율적 관제를 위한 스마트관제서비스장치 및 그 장치의 구동방법
TWM655316U (zh) 智慧型網路影像監控錄影裝置
Akoma et al. Intelligent video surveillance system
KR20240102420A (ko) 영상압축과 마스킹 처리 기능을 가진 감시정보 전송 방법을 이용한 감시시스템
CN101909202A (zh) 一种营业网点的监控系统
Sowmya et al. Challenges in Surveillance Video Forgery Detection
KR20050122382A (ko) Ｄｖｒ에서의 인터넷 백업 정보 관리 장치 및 방법