TW201540077A - 視訊資料之內容知覺儲存 - Google Patents

視訊資料之內容知覺儲存 Download PDF

Info

Publication number
TW201540077A
TW201540077A TW104123693A TW104123693A TW201540077A TW 201540077 A TW201540077 A TW 201540077A TW 104123693 A TW104123693 A TW 104123693A TW 104123693 A TW104123693 A TW 104123693A TW 201540077 A TW201540077 A TW 201540077A
Authority
TW
Taiwan
Prior art keywords
video
storage
video data
hard disk
disk drive
Prior art date
Application number
TW104123693A
Other languages
English (en)
Other versions
TWI575958B (zh
Inventor
Douglas H Marman
Mahesh Saptharishi
Original Assignee
Avo Usa Holding 2 Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Avo Usa Holding 2 Corp filed Critical Avo Usa Holding 2 Corp
Publication of TW201540077A publication Critical patent/TW201540077A/zh
Application granted granted Critical
Publication of TWI575958B publication Critical patent/TWI575958B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/3246Power saving characterised by the action undertaken by software initiated power-off
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0616Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices

Abstract

視訊分析以及大量儲存單元係包含於視訊攝影機之攝影機外殼中。視訊分析對視訊攝影機產生之視訊資料進行分析並偵測是否發生一定義之關注事件。儲存於大量儲存單元內之視訊資料包含不同品質之視訊資料,其代表所偵測到之該定義關注事件於視訊攝影機監看範圍內之發生及未發生。儲存不同品質之視訊資料降低系統儲存容量需求。儲存緩衝區及硬碟機儲存該視訊資料。傳送及儲存一部分視訊資料於硬碟機用去之總硬碟機儲存時間實質上小於儲存視訊資料於記憶體緩衝器用去之總緩衝器儲存時間。此儲存時間之配置延長硬碟機之運作壽命。

Description

視訊資料之內容知覺儲存
本揭示描述一種視訊成像系統,其智慧性地辨識視訊資料之內容、降低系統儲存容量需求、並延長視訊資料大量儲存單元之運作壽命。
諸如網路監視攝影系統或IP攝影系統之網路攝影系統(network camera system)已存在多年,但獲得工業界採納之進展極其緩慢。相較於傳統之類比式攝影系統,網路攝影系統提供諸如易使用性、整合性、低安裝成本、擴充性、以及升級至更高解析度視訊之能力等優點。然而,網路攝影機產生的資料需要大量之頻寬及儲存容量。
網路攝影系統牽連之頻寬問題導致更複雜之攝影網路,其包含更多數目之交換器(switch)以及,某些情況下,完全不同於傳統之資料路徑。網路攝影系統相關之儲存問題隨著視訊解析度以及系統內攝影機數目之增加而更加嚴重。舉例而言,使用MPEG-4壓縮而運作於每秒30個圖框(frames-per-second;簡稱fps)之一標準D1解析度攝影機可能需要360十億位元組(gigabyte;GB)之儲存空間以存放一個月之視訊資料。一個包含1000具攝影機之攝影系統因此將需要360兆位元組(terabyte)之儲存空間以儲存持續一個月之資料。此等實例顯示網路攝影系統所面對之高昂成本以及設備管理挑戰性,特別是在需要百萬像素級解析度以及需要六個月或一整年視訊 資料儲存空間之應用。基於以上所指出之問題,多數網路視訊資料並非以最高之品質錄製,而是錄製於較低之解析度和圖框速率(frame rate)。由於典型之高解析度攝影機在極短之時間內產生需要大量儲存資源之視訊資料,故要此等典型之攝影機包含內建之儲存單元,諸如可以儲存大量視訊資料之硬碟機,係不切實際的。
網路攝影系統之典型儲存架構係以類似傳統類比系統之方式配置。此架構包含處於中心位置之數位視訊錄影機(digital video recorder;DVR)或網路視訊錄影機(network video recorder;NVR)經由一網路連接至IP攝影機。基於許多原因,此種典型架構係有所不足的。舉例而言,多數DVR及NVR並未包含開放式平台,此使得系統在將來之更換及升級方面被限制於單一品牌。此外,多數DVR及NVR就系統彈性、備用性、以及視訊資料之長期歸檔而言並不符合IT之標準。另一方面,典型網路攝影系統通常缺乏儲存擴充性,此使得當網路攝影系統擴充之時,儲存系統需要"堆高機"式之升級("forklift" upgrade)。
典型視訊資料儲存架構之另一問題在於許多應用需要儲存裝置持續性地運作。此等持續性之運作致使儲存裝置在五或六年之運作後即失去作用。除非有歸檔或備用性地儲存,否則將遺失失去作用之儲存裝置上之資料。因此,更換儲存裝置之需要即變成重要之關注事項及維護議題。
近來,一些網路攝影系統已建立視訊分析處理(video analytics processing)以在重要事件(諸如物體之移動)被視訊攝影機拍攝到之時進行辨識。視訊分析主要係用以對可能之有害事件做出安全性警示。多數視訊分 析係由一多個攝影機共用之中央處理器執行,但某些視訊攝影機具有內建之視訊分析功能。然而,此等具有內建分析功能之視訊攝影機並未包含大容量之儲存空間,因為攝影機產生之視訊資料其儲存需求極為龐大。同時,一些未內建視訊分析功能但具有內建小型儲存容量之攝影機並不足以作為傳統DVR和NVR之替代品。
因此,其有需要提出一種網路攝影系統,其產生高品質視訊資料、需要較小之儲存容量及網路頻寬、符合IT標準、易於擴充、並可以在不更換儲存裝置下仍能運作較長之時間。
較佳實施例實施由一視訊攝影機產生之視訊資料之內容知覺(content aware)儲存方法及系統,其包含一攝影機外殼(camera housing)並用以連接至一網路通信系統。該等產生之視訊資料代表視訊攝影機觀測下之景象之監看範圍。視訊分析和一大量儲存單元內含於攝影機外殼或構成其一部分。該視訊分析對視訊攝影機產生之視訊資料進行分析,並偵測是否有令人關注事件之發生。代表視訊攝影機觀測下之景象之監看範圍被儲存於大量儲存單元之內。被儲存之視訊資料包含一第一品質之視訊資料以及一第二品質之視訊資料。第一品質表示視訊分析在監看範圍中偵測到令人關注事件之發生,而第二品質表示視訊分析在監看範圍中偵測到令人關注事件未曾發生。藉由將視訊資料儲存於包含於攝影機外殼中或構成其一部分之大量儲存單元內,網路頻寬需求得以降低,因為視訊資料不需要因儲存之目的串流於網路之間。
上述實施方式降低一分散式網路視訊監視系統之視訊資料 儲存及網路頻寬需求,該分散式網路視訊監視系統包含介於網路視訊影像裝置及網路視訊資料貯存(network video data store)間之網路通信路徑。在該監視系統內,網路視訊影像裝置產生代表該視訊影像裝置觀測下景象監看範圍內之視訊資料,而該網路視訊資料貯存將對應至該網路視訊影像裝置產生之視訊資料之視訊資訊進行儲存。多個網路視訊影像裝置中之每一影像裝置均連結至一內容知覺視訊資料儲存系統,該儲存系統具有針對其連結之網路視訊影像裝置產生之視訊資料之選擇性儲存能力。此內容知覺視訊資料儲存系統包含分析視訊資料內容之視訊分析以及依據該視訊分析之分析結果儲存部分視訊資料之本地端視訊資料貯存。對應該部分視訊資料之視訊資料經由網路通信路徑被遞送至網路視訊資料貯存以提供代表一特定品質等級之景象監看範圍之一控制數量之視訊資料。該控制數量之視訊資料實質上比缺少前述視訊分析之分析時將該網路視訊影像裝置於該特定品質等級產生之視訊資料傳送至網路視訊儲存處消耗較少之網路頻寬及較少之資料儲存資源。雖然特別著重於視訊監視之應用,但上述方法適用於為數眾多之視訊應用。
較佳實施例實施當使用於視訊資料儲存應用時用以延長硬碟機記憶體運作壽命之方法。一固態記憶體(solid state memory)用以作為一視訊攝影機產生之視訊資料之一儲存緩衝器。該視訊資料表示該視訊攝影機觀測下之景象。硬碟機記憶體正常運作於一歇電(powered-down)狀態。當視訊攝影機產生該視訊資料,該視訊資料於一第一時間間隔被儲存於儲存緩衝器。硬碟機係運作於一供電(powered-up)狀態。儲存於儲存緩衝器內之一部分視訊資料於一第二時間間隔被轉移並儲存於處於供電狀態之硬碟機記 憶體內,該第二時間間隔實質上短於該第一時間間隔。在完成視訊資料之轉移後,硬碟機記憶體返回歇電狀態,在硬碟機記憶體之運作壽命範圍中,就相當於該第二時間間隔總和之一總硬碟機儲存時間和相當於該第一時間間隔總和之一總緩衝器儲存時間而言,耗用在傳送及儲存一部分視訊資料至硬碟機記憶體之總硬碟機儲存時間實質上小於耗用在儲存視訊資料於儲存緩衝區中之總緩衝器儲存時間。此方法使得硬碟機記憶體之運作壽命得以延長。因此,一網路攝影系統之網路邊緣裝置(network edge device),諸如視訊攝影機,可以包含無須大量維修和維護成本之硬碟機。
經由以下較佳實施例之詳細說明,本發明之更多特色及優點將趨於明顯,其將配合所附之圖式進行。
100‧‧‧網路攝影機系統
102‧‧‧網路攝影機
102'‧‧‧網路攝影機
104‧‧‧中央監視站
106‧‧‧網路
108‧‧‧廣域網路
110‧‧‧區域網路
112‧‧‧無線網路
114‧‧‧遠端使用者
116‧‧‧遠端儲存單元
118‧‧‧交換器
120‧‧‧路由器
122‧‧‧視訊伺服器
202‧‧‧影像系統
204‧‧‧視訊處理系統
206‧‧‧資料儲存系統
208‧‧‧電源系統
210‧‧‧輸入/輸出介面及控制系統
302‧‧‧規則式引擎
304‧‧‧視訊分析
306‧‧‧儲存管理系統
402‧‧‧存取控制管理單元
204'‧‧‧視訊處理系統
502‧‧‧影像處理單元
506‧‧‧處理器中介橋接器
508‧‧‧時間戳記區塊
602‧‧‧第一編碼器
604‧‧‧第二編碼器
606‧‧‧串流及歸檔控制單元
702‧‧‧記憶體緩衝器單元
704‧‧‧硬碟機儲存單元
706‧‧‧記憶區域
708‧‧‧記憶區域
710‧‧‧記憶區域
圖1描繪一網路攝影系統之一實施例。
圖2係一圖1之網路攝影機之高階功能方塊圖。
圖3係一功能方塊圖,其依據一第一實施例描繪圖2之影像系統、視訊處理系統、以及資料儲存系統。
圖4係一功能方塊圖,其描繪運作於圖3之第一實施例之視訊處理系統中之一存取控制管理單元。
圖5係一功能方塊圖,其描繪圖2之影像系統、視訊處理系統、及資料儲存系統之一第二實施例。
圖6係一功能方塊圖,其描繪第二實施例之視訊處理系統之部分。
圖7係一功能方塊圖,其表示資料儲存系統之一記憶體緩衝 器單元和一硬碟機儲存單元。
圖8係一隻鳥停駐於禽鳥餵食器上之影像,在影像之中,該鳥和餵食器均以高品質影像顯示,而背景影像則以低品質顯示。
以下詳述之內容知覺儲存系統之每一實施例中,具有相同參考編號之系統組件執行相同之功能。
圖1係一圖解示意圖,其描繪一網路攝影系統100之實施例,網路攝影系統100使用於具有本地端校園建物及遠端場所之應用。網路攝影系統100並不限於視訊監視或所描繪之應用,而是可以使用於任何網路通信系統。網路攝影系統100包含網路攝影機102,其透過一網路106連接至一中央監視站(central monitoring station)104,網路106包含一廣域網路(wide area network;WAN)108和一校園區域網路(campus local area network;LAN)110。網路106可以同時亦包含一無線網路112,其包含具有無線通信功能之網路攝影機102'。網路106建立多重網路通信路徑。以下對於網路攝影機102之描述同時亦適用於網路攝影機102'。網路106並不限於此處所描繪之架構,而是可以包含各種不同架構及形式之網路。一遠端使用者114可以亦經由WAN 108連接至網路攝影機102。網路攝影機102可以連接至一遠端儲存單元116(意即一網路資料貯存)。網路攝影機系統100可以同時亦包含各種交換器118以及路由器(router)120以輔助經由網路106進行通信。
在運作時,網路攝影機102拍攝各種不同之監看範圍並產生表示該監看範圍之資料。某些應用可能需要使網路攝影機102大致上持續性地運作。資料傳送至中央監視站104,使用者可以於此處觀看產生自該等 資料而描繪監看範圍之影像。同時,該等資料可以傳送至遠端使用者114以產生監看範圍之影像。該等資料可以儲存於遠端儲存單元116以待使用者進行後續之存取。
以下將參照圖2進一步詳述網路攝影機102。網路攝影機102包含一影像系統202、一視訊處理系統204、一資料儲存系統206(意即一本地端資料貯存)、一電源系統208、以及一輸入/輸出介面及控制系統210。網路攝影機102包含一攝影機外殼;且系統202、204、206、208、及210之部分或全部均可以包含於該外殼之內。影像系統202可以包含眾多單元,用以拍攝監看範圍並用以產生包含數位資料及類比信號之視訊資訊。舉例而言,影像系統202可以產生符合NTSC/PAL格式及百萬像素(mega-pixel)格式之資訊。影像系統202可以包含可程式影像感測器、高傳真影像感測器、無/低光線感測器、以及對特定光譜特別敏感之專業影像感測器。影像系統202可以包含一可調式視訊編解碼器,諸如MPEG-4 SVC,以及其他視訊壓縮功能,諸如H.264壓縮。電源系統208可以包含用以接收及分送電力至網路攝影機102各個系統之任何系統。電源可以是直流(DC)電源,包含乙太網路供電(Power over Ethernet;PoE),或交流(AC)電源。輸入/輸出介面及控制系統210包含各種輔助多種通信方式之硬體及軟體架構,該等通信方式包含網際網路(Internet);乙太網路(Ethernet);通用序列匯流排(universal serial bus;USB);無線通信;非同步傳輸模式(asynchronous transfer mode;ATM);同步光纖網路封包(Packet over SONET/SDH;POS);上下、左右轉動、及放大縮小攝影功能(pan、zoom、tilt;PZT);以及音訊資訊。輸入/輸出介面及控制系統210可以實施為硬體及軟體以允許使用者構建網路攝影機102之運 作。
在另一實施例中,如圖1所描繪,一視訊伺服器122可用以取代網路攝影機102,其中多個拍攝不同監看範圍之影像系統202均連接至視訊伺服器122。於一伺服器外殼之內,視訊伺服器122包含視訊處理系統204、資料儲存系統206、電源系統208、以及輸入/輸出介面及控制系統210。為了清楚起見,以下說明將以網路攝影機102為例,但此等說明亦適用於多個影像系統202連接至視訊伺服器122之情況。
內容知覺儲存
第一實施例
以下將參照圖3進一步詳述網路攝影機102之一第一實施例。視訊處理系統204包含一規則式引擎(rules based engine)302、視訊分析304、以及一儲存管理系統306,其中之某些部分或全部可以以軟體之方式實施。視訊分析304包含運作於一視訊分析處理器中之視訊分析軟體。雖然以下實施例所述之視訊分析及其他視訊處理係由視訊處理系統204執行,但視訊資料亦可以由網路攝影機102供應至一連接至網路之視訊處理器,諸如一視訊伺服器(未顯示於圖中),其執行以下所述之視訊分析及其他視訊處理之全部或部分。換言之,視訊分析和處理可以是分散於網路攝影機系統100中之各處進行。視訊處理系統204同時亦可以包含視訊加密功能以防止未經授權之視訊資訊觀看。影像系統202拍攝一監看範圍並產生代表該監看範圍之視訊資料。影像系統202可以是可程式的且可以具有產生多種品質等級之視訊資料之能力,包含較高品質(higher quality;以下簡稱HiQ)視訊資料以及較低品質(lower quality;以下簡稱LowQ)視訊資料。品質 等級牽涉到許多參數,包括解析度、圖框速率、位元率(bit rate)、以及壓縮品質。舉例而言,HiQ視訊資料可以代表以每秒30個圖框(30 fps)錄製之D1解析度視訊,而LowQ視訊資料可以代表以5 fps錄製之CIF解析度視訊。HiQ和LowQ視訊資料並不限於上述之參數。HiQ視訊資料可以代表以一較低圖框速率,例如15 fps,錄製之D1解析度視訊。概括而言,HiQ視訊資料係表示比LowQ視訊資料具有較高品質視訊之視訊資料。HiQ視訊資料之特徵在於大量之儲存需求,而LowQ視訊資料之特徵在於小量之儲存需求。影像系統202可以產生超過二種品質等級之視訊資料。影像系統202可以具有在一視訊圖框內針對監看範圍之不同部分產生不同品質等級視訊資料之能力。舉例而言,影像系統202可以產生HiQ品質視訊資料代表該監看範圍中的一個人,而同時產生LowQ視訊資料代表該監看範圍中背景景象的影像。舉例言之,圖8以高解析度描繪一隻鳥停駐於禽鳥餵食器之上,同時其背景景像則以低解析度顯示。
影像系統202傳送視訊資料至視訊分析304。視訊分析304經由視訊分析引擎分析影像系統202產生之視訊資料以偵測是否有預先定義之關注事件或物體正被影像系統202所攝取。在較佳實施例中,視訊分析304所分析之視訊資料係HiQ視訊資料。視訊分析304產生詮釋資料(metadata),其描述視訊資料之內容。視訊分析304所產生之詮釋資料可以是視訊內容之文字及語意描述。
關注之事件及物體可以由一使用者程式設定並具體指定於一XML定義檔案之中。上述之定義檔案及視訊分析304可以週期性地更新,且定義檔案可以由網路攝影機系統100內之不同網路攝影機102之視訊 分析304共用。不同網路攝影機102之視訊分析304可以具有不同之分析功能。其可以定義多個關注事件,且在一特定時間可以同時發生超過一個關注事件。並且,一事件之未發生仍保留一第二事件發生之可能性。該詮釋資料可以提供予資料儲存系統206和遠端儲存單元116以進行儲存。代表任一圖框n之詮釋資料可以連結至代表圖框n之視訊資料。因此,該詮釋資料係可以搜尋的以允許使用者對視訊檔案有效率地進行搜尋以及進行語意上之瀏覽。
視訊分析304所偵測到之關注事件可以係單純之監看範圍內之運動。視訊分析304亦可以實施斑塊偵測(blob detection;例如,偵測一群移動之像素作為可能之移動物體,而不辨識物體之類型)、光亮變化調整、以及依據監看範圍中之物體大小進行幾何校準(geometric calibration)以依據其類型區別物體。舉例而言,視訊分析304可以能將一物體分類為人類、交通工具、或其他類型之物體,且可以在一物體出現於網路攝影機102之監看範圍內之任何部分時,辨認出該物體。此外,視訊分析304可以具有辨認一物體之特定之可識別特徵之能力,諸如,舉例而言,人臉以及交通工具之牌照。視訊分析304可以辨認出影像系統202正在拍攝一新物體並指派一獨有之物體ID給該新物體。視訊分析304可以辨認一物體移動之速度以及軌道。視訊分析304可以辨認諸如陣地入侵、特定方向之物體移動、物體接近另一物體、位於一特定區域內之數個物體、落後之物體、以及物體之移除。視訊分析304同時亦可以辨認監看範圍內一關注事件或物體(或物體及事件之結合,由一規則定義之)正被拍攝之特定位置或座標。
當視訊分析304在視訊資料中偵測到一關注事件或物體之 時,視訊分析304即產生對應至該關注事件或物體之詮釋資料並將該詮釋資料提供予規則式引擎302。規則式引擎302包含將關注事件或物體連結至待執行之特定動作之規則,其具體指明於上述之詮釋資料中。舉例而言,此等連結於規則之動作可以執行一或多個以下項目:儲存HiQ或LowQ視訊資料於資料儲存系統206中、儲存HiQ或LowQ視訊資料於遠端儲存單元116中、將HiQ或LowQ視訊資料串流至中央監視站104或遠端使用者114、產生及傳送關注事件之簡短視訊片段檔案至中央監視站104或遠端使用者114、傳送一警示(例如,產生可看見之顯示及/或可聽聞之聲音)至中央監視站104或遠端使用者114、儲存X個時間片段之視訊資料於資料儲存系統206之中。例如,使用者可以定義如下之規則:當有人侵入一界定範圍內之時,於資料儲存系統206儲存代表該入侵動作之HiQ視訊資料,對中央監視站104警示該入侵動作,產生該入侵動作之一短視訊片段並傳送該視訊片段至中央監視站104,以及儲存代表該入侵動作之HiQ視訊資料於遠端儲存單元116中。或者,使用者可以定義如下之規則:當無關注事件或物體被拍攝時,於資料儲存系統206儲存LowQ視訊資料且不傳送視訊資料至中央監視站104。由於視訊分析304可以偵測各種不同之物體及事件,因此使用者可以定義為數眾多之規則,且每一規則可以具有不同之儲存品質設定。並且,因為多個關注事件可以同時發生,故一規則可以對應至多個事件之結合。
儲存管理系統306可以控制視訊資料之儲存於資料儲存系統206以及遠端儲存單元116中。儲存管理系統306係由產生於視訊分析304中之詮釋資料以及定義於規則式引擎302中之規則所智慧性地驅動。儲 存管理系統306執行規則所定義之動作。舉例而言,儲存管理系統306通知影像系統202產生HiQ及/或LowQ視訊資料儲存於資料儲存系統206及遠端儲存單元116之中。由於視訊分析304可以在關注之事件或物體被拍攝處之監看範圍內指定位置或座標,故儲存管理系統306可以通知影像系統202監看範圍內的哪個部分以HiQ視訊資料(對應至事件或物體的部分)以及LowQ視訊資料(剩餘之部分)表示。例如,圖8描繪一隻鳥停駐於禽鳥餵食器上之景象。視訊分析304可以辨認該隻鳥以及該禽鳥餵食器之部分係此影像中最重要之特徵或者說關注物體。該隻鳥和禽鳥餵食器,作為關注物體,被顯示為HiQ影像,同時背景影像則被顯示為LowQ影像。並且,影像系統202可以被控制成建立僅顯示監看範圍中對應至該事件或物體之部分之視訊資料,以產生關注事件或物體之"視窗景像"。由於HiQ及LowQ視訊資料可以智慧性地依據內容產生,因此關注之事件或物體可以被拍攝並儲存為HiQ視訊資料,同時整體之儲存需求亦藉由產生LowQ視訊資料來表示無關注事件或物體被攝取之景象而得以降低。
在另一實施例中,影像系統202產生一品質等級之視訊資料儲存於資料儲存系統206之中。網路攝影機102包含一可調式視訊編解碼器,諸如MPEG-4 SVC。在視訊資料被視訊分析304分析並儲存於資料儲存系統206中之後,部分之視訊資料可以利用該可調式視訊編解碼器加以處理以產生一第二品質等級(多個品質等級可以利用SVC產生)。例如,網路攝影機102產生而資料儲存系統206儲存HiQ視訊資料。經過一段時間之後(例如,數分鐘、數小時、或數日之後),代表未發生關注事件之HiQ視訊資料部分之品質等級被降低成LowQ。
儲存管理系統306同時亦可以實施依據內容指定視訊資料中多長之部分被儲存於資料儲存系統206內之儲存管理策略。舉例而言,儲存管理系統306可以控制資料儲存系統206,使得重要之事件被保留較長之時間,而較不重要之視訊資料則在短暫時間內即被新的視訊資料所取代。儲存管理系統306同時亦控制如下所述之介於資料儲存系統206之次儲存單元(sub-storage unit)間之視訊資料通信。儲存管理單元306的目的之一係在於將從一第一次儲存單元到一第二次儲存單元之寫入動作之頻率最小化。
由於網路攝影機102所產生之視訊資料係儲存於網路攝影機102之攝影機外殼內之資料儲存系統206中,該等視訊資料可能較容易被破壞或遭竊。舉例而言,若一侵入者竊取網路攝影機102,該侵入者同時亦擁有該等視訊資料。由於網路攝影機102包含視訊分析304和資料儲存系統206,許多功能可以實施於系統100內以確保視訊資料之安全,並在網路攝影機102被竊取時免於資料遺失或未經授權之觀看。舉例而言,當一關注事件(例如,偵測到一侵入者)被視訊分析304偵測到之時,代表該關注事件之視訊資料可以立即被串流至(或者以視訊檔案之形式被傳送至)遠端儲存單元116,或是至另一網路攝影機102,以進行備用儲存。並且,在偵測到關注事件之後,可以隨即在網路攝影機102受損之前將代表該關注事件之警示和視訊片段檔案傳送至中央監視站104或遠端使用者114。為了防止侵入者觀看網路攝影機102所拍攝之影像,儲存於資料儲存系統206內之視訊資料被加密以使得侵入者無法播放該視訊資料。並且,自網路攝影機102以資料流形式串流而出或以視訊檔案傳送之視訊資料亦可以被加密以防止 未經授權之觀看。
影像系統202、視訊分析304、規則式引擎302、儲存管理系統306、以及資料儲存系統206彼此合作以建立一內容知覺儲存系統。此內容知覺儲存系統提供許多傳統之攝影系統所沒有的獨特優點(雖然傳統攝影系統包含某些形式之視訊分析或小容量儲存)。利用此內容知覺儲存系統,所需之儲存容量可以藉由視訊內容之智慧性辨識及分類而大幅降低。即使在需要網路攝影機102大致持續性運作之應用中,所需之儲存容量亦可以大幅降低。舉例而言,當拍攝到一關注事件之時,此內容知覺儲存系統可以以HiQ等級記錄該事件。當未拍攝到關注事件之時,內容知覺儲存系統可以以LowQ等級記錄視訊資料。被儲存資料之品質等級因此可以匹配其內容之重要性。
由於無關注事件或物體被拍攝到時可以儲存LowQ視訊資料,資料儲存系統206可以包含例如80GB之實際儲存容量而仍足以儲存跨越長時間(例如,一或二個月)之視訊資料。相較之下,一個不具有內容知覺儲存之傳統D1解析度30 fps系統一個月可能需要超過360GB之儲存空間。因此,傳統視訊攝影機無法包含一可以儲存跨越長時間視訊資料之大量儲存單元。並且,由於網路攝影機102包含資料儲存系統206,因此即使網路故障或是網路因為系統升級或維護而關閉時,視訊資料仍可以被儲存。其不再需要為了網路攝影機而設置另外之網路;網路攝影機可以安裝於使用於特定場所之同一資料網路上,節省安裝費用和後續之維護成本。此外,由於網路攝影機102包含資料儲存系統206,是以遠端儲存單元116之容量可以大幅降低而遠端儲存單元116主要可以作為重要事件之備份或 歸檔性之儲存。資料儲存系統206同時亦排除在網路攝影機系統100內包含傳統之DVR及NVR。
此外,由於網路攝影機102包含資料儲存系統206,網路頻寬需求可以大幅降低,因為網路攝影機102不需要持續地透過網路106供應視訊資料至遠端儲存單元116。反之,網路攝影機102可以提供一控制數量之視訊資料至遠端儲存單元116。舉例而言,網路攝影機102可以僅在拍攝到一關注事件或物體之時才透過網路106提供HiQ或LowQ視訊資料。舉例言之,在典型攝影系統中,拍攝到關注之事件或物體可能僅佔百分之十或更少之時間。在其他90%之時間中,使用者可以選擇僅透過網路106傳送LowQ視訊資料,或者是完全不傳送視訊資料。就無線網路112而言,由於網路頻寬之需求較低,故其可以加入更多無線網路攝影機102'至無線網路112之中。
由於視訊分析304可以偵測一關注事件或物體何時正被拍攝,故與該關注事件或物體相關聯之資料及詮釋資料可以自動地歸檔於遠端儲存單元116之中以提供額外之備份和錯誤容忍度。對於中央監視站104或遠端使用者114之警示資訊及視訊資料傳輸亦可以依據視訊內容之重要性賦以優先順序。
此外,基於此內容知覺儲存系統,使用者可以藉由指派優先數值對不同之關注事件或物體進行分類。關聯至關注事件或物體之視訊資料可以依據該優先數值而智慧性地於資料儲存系統206中被儲存預定之時間長度。舉例而言,較不重要之事件可以在一個月之後刪除,而較為重要之事件則可以儲存三個月、六個月、或一年。當結合影像系統202之可調 式視訊編解碼器功能時,視訊資料可以保存於資料儲存系統206內,但依據隨視訊內容而異之解析度和圖框速率減少之,以使得視訊資料佔據較小之空間。
由於視訊分析304產生可以儲存於資料儲存系統206及遠端儲存單元116中之詮釋資料,對於儲存在資料儲存系統206及遠端儲存單元116內之視訊資料之存取可以依據其內容加以控制。對於實況視訊資料之存取亦可以在對應於該視訊資料之詮釋資料建立後進行控制。如同圖4所描繪,視訊處理系統204可以包含一存取控制管理單元402,其在較佳實施例中係以軟體之方式實施。依據規則式引擎302中之規則,不同之內容安全性等級被指派予不同之關注事件或物體,以使得對視訊資料之存取可以依據其內容進行控制。此外,不同使用者被指派以一或多個安全性等級-對應於一或多個內容安全性等級之安全性等級。存取控制管理單元402控制對儲存視訊資料之存取,使得一使用者僅能存取包含對應於該使用者安全性等級之內容安全性等級之視訊資料。舉例而言,安全管理者可以存取標示為破壞安全或威脅安全之視訊資料,但可以被禁止存取關於業務或行銷目的之視訊資料。同樣地,行銷人員可以存取指定為他們所用之視訊資料,但不可以存取視訊安全性資料。對於視訊加密之策略亦可以依據內容進行控制。
此內容知覺儲存系統亦可以智慧性地分散儲存之視訊資料以最大化可用之儲存容量。舉例而言,為了滿足其儲存需求,一第一網路攝影機102可能僅需要其資料儲存系統206容量之一半,而一第二網路攝影機102可能需要超過其資料儲存系統206容量之儲存容量。來自該第二網路 攝影機102之視訊資料可以透過網路106提供至第一網路攝影機102以儲存於該處。由於一網路攝影機之資料儲存系統206可以儲存另一網路攝影機之資料,因此系統100內之總儲存容量可以被最大化且重要資料之備用儲存可以分散於系統100各處。最大化總儲存容量以及分散重要資料之備用儲存使得重要資料更能免於盜用及故障之影響。此外,儲存之轉移可以在每日之低頻寬時段進行。
此內容知覺儲存系統同時亦使得網路攝影機系統100易於調整。在傳統之系統中,當攝影機之數目增加時,必須藉由多加入裝置至遠端儲存設備以增加儲存容量。此外,其亦必須藉由多加入裝置至中央處理設備以增加處理能力。利用一內容知覺儲存系統,當加入網路攝影機102至網路攝影機系統100時,遠端儲存及處理設備不需要升級。取而代之的是,每一網路攝影機102包含其本身之儲存容量(經由資料儲存系統206)以及處理能力(經由視訊處理系統204)。因此,當一網路攝影機102被加入網路攝影機系統100時,其儲存容量及處理能力即同時增加。
第二實施例
以下配合圖5說明攝影機102之一第二實施例,其包含影像系統202、視訊處理系統204'、以及資料儲存系統206。此第二實施例之視訊處理系統204'包含視訊分析304以及一影像處理單元502。影像處理單元502產生待傳送至中央監視站104並儲存於資料儲存系統206及遠端儲存單元116中之視訊資料。影像處理單元502可以具有依據H.264/AVC標準以30 fps壓縮D1解析度視訊資料之能力。舉例而言,影像處理單元502可以是一Freescale Semiconductor® i.MX27多媒體應用處理器。視訊分析304對資 料進行分析以判定該資料是否包含特定形式之內容。視訊分析304可以具有執行MPEG4/CIF編碼之能力。視訊分析304亦可以傳送視訊資料至一PAL/NTSC監視器(未顯示於圖中)。例如,視訊分析304可以實施為一Texas Instruments DaVinciTM DM6437數位視訊發展平台。此外,影像處理單元502及視訊分析304可以經由一處理器中介橋接器(inter-processor bridge)506彼此通信。
影像系統202產生之視訊資料被提供至影像處理單元502和視訊分析304。視訊資料所代表之視訊中之每一圖框接收一時間戳記,其係由一時間戳記區塊508加入,時間戳記區塊508位於影像系統202及影像處理單元502以及視訊分析304之間。
以下將參照圖6進一步詳述影像處理單元502。影像處理單元502包含一第一編碼器602、一第二編碼器604、串流及歸檔控制單元(streaming and archive control unit)606、規則式引擎302、存取控制管理單元402、以及儲存管理系統306。串流及歸檔控制單元606、規則式引擎302、存取控制管理單元402、以及儲存管理系統306可以以軟體之方式實施。第一及第二編碼器602和604可以實施為諸如特殊應用積體電路(application specific integrated circuitry)之硬體或是以軟體之方式實施。第一及第二編碼器602和604接收影像系統202產生之視訊資料。第一及第二編碼器602和604以二種不同之品質等級對視訊資料進行編碼。如前所述,品質等級牽涉到許多視訊處理參數,包括解析度、圖框速率、位元率、以及視訊壓縮品質。第一編碼器602以一HiQ等級對視訊資料進行編碼以產生HiQ視訊資料,而第二編碼器604以一LowQ等級對視訊資料進行編碼以產生LowQ視訊資 料。
雖然圖6所描繪之實例包含二編碼器,但影像處理單元502可以包含超過二個編碼器以產生多種品質等級之數個串流視訊資料,或者編碼器602及604之品質等級可以依據視訊分析304偵測到之事件形式而改變。在較佳實施例中,編碼器602及604可以同時對視訊資料進行編碼。舉例而言,編碼器604對視訊資料持續性地進行編碼而編碼器602僅在偵測到一關注事件時方對視訊資料進行編碼,此使得當偵測到一關注事件時,編碼器604對該事件以LowQ等級編碼,同時編碼器602對該事件以HiQ等級編碼。此等LowQ視訊資料之持續性錄製以及HiQ視訊資料之間歇性錄製具體地降低儲存資源之需求。舉例而言,一段24小時長之時段內可以包含大約五小時,於其中有偵測到關注事件。若網路攝影機102使用H.264壓縮方式以15 fps錄製五小時之D1解析度視訊,該五小時將需要大約0.86GB之儲存空間。若網路攝影機102亦使用H.264壓縮方式以每秒五個圖框之速率錄製24小時之CIF解析度視訊,該24小時將需要大約0.4GB之儲存空間,合計總共需要每日1.26GB之儲存空間。假設網路攝影機102之資料儲存系統206包含80GB之儲存空間,則資料儲存系統206可以錄製大約二個月的視訊。相較之下,使用MPEG-4壓縮格式以15 fps持續錄製D1解析度視訊之一典型攝影機每日大約需要5.4GB之儲存空間。因此,一典型之16頻道視訊系統二個月內大約需要5TB之儲存空間。
在視訊分析304漏失關注事件發生之情況,以LowQ連續錄製係有其必要的。該等LowQ視訊資料可以由使用者重新檢視以觀看視訊分析304所漏失之事件。因此,其可以持續錄製LowQ視訊資料以確保沒有 漏失任何東西,同時在視訊分析304偵測到重要事件時仍以HiQ錄製視訊資料。
取決於視訊內容以及規則式引擎302所定義之規則,HiQ或LowQ視訊資料之資料流其中之一或二者被提供至資料儲存系統206和串流及歸檔控制單元606。串流及歸檔控制單元606輔助實況HiQ和LowQ視訊資料、儲存於資料儲存單元206內之視訊資料、和代表關注事件之視訊片段檔案之傳送,以及對中央監視站104、遠端儲存單元116、和遠端使用者114之警示。舉例而言,在拍攝到一關注事件並儲存於資料儲存系統206之中後,儲存於資料儲存系統206之中代表該關注事件之HiQ視訊資料可以經由串流及歸檔控制單元606傳送至遠端儲存單元116,以作為該關注事件之備用儲存。
規則式引擎302接收視訊分析304所產生之詮釋資料並從該詮釋資料判定HiQ或LowQ視訊資料是否要儲存於資料儲存系統206之中及/或傳送至中央監視站104、遠端儲存單元116、以及遠端使用者114。
存取控制管理單元402控制有關實況及已儲存視訊資料之存取。存取控制管理單元402允許建立多個使用者帳戶,該等帳戶依據視訊資料內容具有對應之存取部分視訊資料之許可。
儲存管理系統306係由視訊分析304產生之詮釋資料以及定義於規則式引擎302中之規則所智慧性地驅動。儲存管理系統306同時亦控制介於資料儲存系統206之次儲存單元間之視訊資料通信。
系統運作時,影像系統202拍攝監看範圍之影像並產生視訊資料。視訊資料之圖框於時間戳記區塊508中被加入時間戳記,以使得視 訊分析304所產生之詮釋資料可以與影像處理單元502產生之視訊資料同步。視訊分析304對影像系統202產生之視訊資料進行分析,並依據視訊資料之內容產生詮釋資料。第一編碼器602以及第二編碼器604亦接收影像系統202所產生之視訊資料並分別產生HiQ視訊資料和LowQ視訊資料。
該等詮釋資料經由處理器中介橋接器506被傳送至規則式引擎302,且規則式引擎302判定其是否已違反一規則(意即,視訊分析304偵測到之一關注事件或物體是否需要處理)。依據該詮釋資料以及規則式引擎302之規則,儲存管理系統306控制第一編碼器602及第二編碼器604供應HiQ視訊資料及/或LowQ視訊資料至資料儲存系統206。部分HiQ及LowQ視訊資料可以被分割成視訊片段檔案。儲存管理系統306同時亦控制是否經由串流及歸檔控制單元606傳送HiQ或LowQ視訊資料至中央資料儲存單元116。
舉例而言,若詮釋資料指出在網路攝影機102之監看範圍內並無關注物體或事件被拍攝到,則其可以傳送一規則至儲存管理系統306以控制第一及第二編碼器602和604,使得LowQ視訊資料被供應至資料儲存系統206而無視訊資料被供應至遠端儲存單元116。在另一實例中,若詮釋資料指出在網路攝影機306之監看範圍內發生一關注物體或事件,則其可以傳送一規則至儲存管理系統306以控制第一及第二編碼器602和604,使得代表該物體或事件之HiQ及LowQ視訊資料被供應至資料儲存系統206。由於HiQ及LowQ視訊資料均儲存於資料儲存系統206之中,該關注事件可以用較高之頻寬或較低之頻寬模式被播放。並且,當拍攝到一關注事件之時,一儲存於資料儲存系統206中之該關注事件之視訊片段檔案可 以經由串流及歸檔控制單元606被傳送至中央監視站104。視訊片段檔案可以是儲存於資料儲存系統206中之該關注事件之一簡短HiQ視訊片段。一視訊片段檔案可以是相當於七秒鐘之視訊,其中之二秒鐘係該事件發生之前,而五秒鐘係該事件被偵測到之後。視訊片段之持續時間可以被設定成任何長度。視訊片段檔案可以被播放多次、經由電子郵件轉送至其他使用者、或者儲存於一可移除之磁碟上及傳送至,舉例而言,執法單位。如第一實施例所述,使用者可以依據詮釋資料定義待執行之任意組合之動作,諸如儲存HiQ視訊資料於資料儲存系統206及遠端儲存單元116中,同時將LowQ視訊資料串流至中央監視站104。使用者亦可以定義一規則,其使得當偵測到一關注事件或物體時,經由電子郵件傳送一警示至中央監視站104或遠端使用者114。舉例而言,遠端使用者114可以以諸如行動電話或個人數位助理(personal digital assistant;PDA)之行動裝置接收一警示,以及一可以在該行動裝置上播放之視訊片段。
雖然以如上之實施例說明本發明,但網路攝影機102並不限於此二實施例。網路攝影機102可以包含任何可以分析視訊資料之內容以偵測運動或其他關注事件以及可以產生不只一種品質等級視訊資料之攝影系統。
資料儲存系統
以下將參照圖7說明資料儲存系統206。資料儲存系統206可以包含於網路攝影機102之中,或者資料儲存系統206可以位於網路攝影機102外部且可以透過網路106與網路攝影機102進行通信。資料儲存系統206係作為一大量儲存單元,其包含至少一GB,最好是80GB或以上,之 儲存容量。資料儲存系統206包含一固態記憶體緩衝器單元702以及一硬碟機儲存單元704。
記憶體緩衝器單元702可以包含非揮發性及揮發性記憶體,諸如NAND快閃記憶體以及隨機存取記憶體。若使用揮發性記憶體作為記憶體緩衝器單元702,則網路攝影機102可以包含一輔助性電源供應(secondary power supply)以備電源故障時使用。在一較佳實施例中,其使用1GB之NAND快閃記憶體,但記憶體緩衝器單元702可以包含大於或小於1GB之記憶體大小。記憶體緩衝器單元702之記憶區(sectors)可以分派給不同種類的資料,如區域706、708、以及710所示。舉例而言,區域706代表50%之記憶體被分派以儲存影像系統202所拍攝之最新視訊資料。區域708代表40%之記憶體被分派以儲存影像系統202所拍攝之最新之關注事件或物體。區域710代表10%之記憶體被分派以儲存視訊分析304所產生之詮釋資料。記憶體之配置並不限於上述之例子,而是可以調整以符合特定應用之需要。此外,區域706、708、及710可以週期性地輪換使之對應至記憶體緩衝器單元702之不同記憶區以延長記憶體緩衝器單元702之記憶區之運作壽命。
硬碟機儲存單元704可以是任意形式之大量儲存裝置,包含硬碟機以及大容量固態記憶體裝置。為了簡化說明,硬碟機儲存單元704將以硬碟機為例,但以下所述之許多特性同時亦適用於大容量固態記憶體裝置。硬碟機儲存單元704之儲存容量可以是任意大小,但在較佳實施例中,該儲存容量係80GB或更多。硬碟機儲存單元704包含一讀/寫頭以及一儲存記憶體磁碟。
系統運作時,在一第一時間間隔期間,記憶體緩衝器單元702自影像系統202或視訊處理系統204'接收視訊資料並依照儲存管理系統306之命令依據視訊資料內容儲存該視訊資料於區域706或708之中。記憶體緩衝器單元702同時亦接收視訊分析304所產生之詮釋資料並將該詮釋資料儲存於區域710中。由於該詮釋資料係同步於視訊資料,該視訊資料可以藉由參照該詮釋資料依據內容被迅速地搜尋。在視訊資料及詮釋資料被儲存於記憶體緩衝器單元702內之大部分時間,硬碟機儲存單元704係處於一歇電狀態。歇電狀態包含許多狀態,諸如電源完全切斷狀態或者是Hitachi之強化適應性電池壽命延長(Enhanced Adaptive Battery Life Extender;ABLETM)技術中所述之閒置(idle)、待命(standby)、或休眠(sleep)狀態中之一。舉例而言,在一歇電狀態中,讀/寫頭可以是處於一不執行讀/寫指令之"負載(loaded)"或啟動狀態而儲存記憶體磁碟轉動中、讀/寫頭可以是處於一"負載"或啟動狀態而儲存記憶體磁碟不轉動、讀/寫頭可以是處於一"卸載(unloaded)"或不啟動狀態而儲存記憶體磁碟轉動中、或者讀/寫頭可以是處於一"卸載"或不啟動狀態而儲存記憶體磁碟不轉動。一般而言,歇電狀態之特徵在於其電力等級小於供電狀態之電力等級。總記憶體緩衝器儲存時間相當於上述第一時間間隔之總和。
在儲存管理系統306所決定之一第二時間間隔期間,硬碟機儲存單元704被啟動其電源供應(意即,讀/寫頭處於啟動狀態以執行讀/寫指令且儲存記憶體磁碟轉動中)且來自一或多個區域706及708之視訊資料被自記憶體緩衝器單元702傳送至硬碟機儲存單元704以儲存於硬碟機儲存單元704之中。來自區域710之詮釋資料亦可以在前述之第二時間間隔內被傳 送至硬碟機儲存單元704。儲存管理系統306決定供應自記憶體緩衝器單元702而寫入硬碟機儲存單元704之資料總量。在該第二時間間隔期間,記憶體緩衝器單元702可以持續接收及儲存視訊資料及詮釋資料以避免視訊資料及詮釋資料儲存之中斷。第二時間間隔結束時(例如,在一特定數量之記憶體緩衝器單元702資料被寫入硬碟機儲存單元704之後),記憶體緩衝器單元702停止供應資料至硬碟機儲存單元704且硬碟機儲存單元704進入歇電狀態。總硬碟機儲存時間相當於上述第二時間間隔之總和。傳送及儲存一部分視訊資料於硬碟機儲存單元704用去之總硬碟機儲存時間實質上小於儲存視訊資料於記憶體緩衝器單元702用去之總記憶體緩衝器儲存時間。
儲存管理系統306可以在任何時間,諸如當一特定條件滿足之時,控制從記憶體緩衝器單元702到硬碟機儲存單元704之寫入動作。舉例而言,其中之一特定條件可以是當區域706、708、或710中之一之容量將用罄之時執行寫入動作。或者,在諸如車用攝影機之行動應用中,其可以在一行動感測器、加速度測量儀(accelerometer)、或位於車內之其他感測器指示該車係靜止不動時執行一寫入動作,以使其免於傷害硬碟機儲存單元704或排除納入具有吸收強震之硬碟機之需要。上述之行動感測器、加速度測量儀、或其他感測器可以包含於攝影機外殼之內。一感測器包含一車輛啟動/熄火開關。舉例而言,當車輛熄火時,車用電池可以保持資料儲存系統206處於供電狀態,以使得視訊資料在車輛處於熄火狀態期間視訊資料仍可以自記憶體緩衝器單元702傳送至硬碟機儲存單元704-理論上,車輛處於熄火狀態時係靜止不動的。此寫入動作可以在來自一或多個區域706、708、及710之所有資料均已寫入硬碟機儲存單元704之後或者諸 如車輛移動等其他條件成立之時停止。此外,當使用者請求取得儲存於硬碟機儲存單元704內之視訊資料時,儲存管理系統306可以控制硬碟機儲存單元704進入供電狀態。硬碟機儲存單元704將被恢復供電以供應視訊資料至視訊處理系統204(204'),此使得視訊資料可以透過網路106傳予使用者。
在行動式應用中,單一資料儲存系統206可以配合一交通工具上之多個影像系統202(例如,一輛公共汽車上之多具攝影機)運作,或者一硬碟機儲存單元704可以配合其本身具有記憶體緩衝器單元702之多個影像系統202運作。當交通工具停止時,硬碟機儲存單元704被供予電力,並藉由將介於(一或多個)記憶體緩衝器單元702及硬碟機儲存單元704間之通信速度最佳化以及實施一具有快速寫入速度之硬碟機儲存單元704(例如,大約每秒665 Mbits或更快),使資料自(一或多個)記憶體緩衝器單元702迅速轉移。此外,當交通工具包含多個影像系統202之時,資料傳輸可以藉由降低每一影像系統202之圖框速率而迅速完成且不致於巨幅犧牲視訊品質。舉例而言,若一交通工具包含八具以7.5 fps運作之攝影機,此八具攝影機產生之視訊資料將等同於運作於30 fps之二具攝影機產生之資料。
藉由將視訊資料儲存於記憶體緩衝器單元702之中以及週期性地啟動硬碟機儲存單元704之電源供應,硬碟機儲存單元704之運作壽命得以延長,因為硬碟機儲存單元704並未一直處於供電之狀態。舉例而言,若D1解析度之視訊資料以30 fps錄製並使用MPEG-4壓縮格式壓縮,則具有500MB儲存容量之區域706將可以錄製大約一小時之D1解析度視訊資料。取決於記憶體緩衝器單元702及硬碟機儲存單元704之資料傳輸速率,其可以在四分鐘或更短時間之內將500MB之資料自記憶體緩衝器單元 702傳送至硬碟機儲存單元704。因此,在一小時之中,硬碟機儲存單元704僅需進入供電狀態四分鐘。此相當於1/15之比例。硬碟機儲存單元704之供電比例並不限於1/15,而是可以較大或較小或隨時間改變,取決於視訊資料之內容。舉例而言,使用者可以選擇儲存低於最高圖框速率之視訊,則硬碟機儲存單元704被開啟供電之頻率每小時可以小於一次。在較佳實施例中,平均供電持續時間實質上將小於平均歇電持續時間。相較之下,一持續處於供電狀態之典型硬碟機可以具有大約五年之使用壽命。藉由使硬碟機儲存單元704一小時中啟動供電四分鐘,舉例而言,硬碟機儲存單元704之使用壽命可以延長為超過持續運轉之典型硬碟機之使用壽命之十倍。因此,藉由降低硬碟機儲存單元704之供電時數,硬碟機儲存單元704之使用壽命得以延長。
由於硬碟機儲存單元704重覆性地循環於電源之供電和歇電狀態之間,一硬碟機儲存單元704之較佳實施例包含一耐磨損硬碟機,其開關週期之數目不會巨幅降低硬碟機儲存單元704之使用壽命。耐磨損硬碟機包含在一或多個歇電狀態下實質停駐儲存記憶體磁碟之讀/寫頭(意即,"卸載"),使得該讀/寫頭在供電狀態或歇電狀態期間不接觸儲存記憶體磁碟。舉例而言,硬碟機儲存單元704可以實施Hitachi之斜面載卸技術(ramp load/unload technology),該技術描述於其Travelstar®硬碟機之相關文件中。
在一傳統之接觸啟動停止式(contact start-stop;簡稱CSS)硬碟機中,其讀/寫頭於不工作狀態期間直接停留於儲存記憶體磁碟上。當該CSS硬碟機啟動電力之後,其讀/寫頭與儲存記憶體磁碟維持於接觸之狀態,直到儲存記憶體磁碟旋轉而產生之空氣方使得讀/寫頭離開儲存記憶體磁碟。 由於儲存記憶體磁碟旋轉之時,讀/寫頭和儲存記憶體磁碟係彼此接觸,故CSS硬碟機之讀/寫頭及儲存記憶體磁碟易遭磨損。舉例而言,一CSS硬碟機在失效之前僅可以承受50,000次開/關周期。若一CSS硬碟機每一小時經歷一次開關周期,該CSS硬碟機將僅維持五或六年。
相較之下,一耐磨損硬碟機可以承受,舉例而言,300,000次開/關周期,或較佳之600,000次開/關周期或更多。換言之,若該較佳之耐磨損硬碟機每一小時經歷一次開關周期,則該硬碟機將維持約60年或更久。因此,藉由在較佳實施例中使用耐磨損硬碟機,則開/關周期之次數將不會實質降低硬碟機儲存單元704之使用壽命。由於資料儲存系統206之使用壽命相當地長,故資料儲存系統206僅需極少之維護或升級。因此,一網路邊緣裝置,諸如網路攝影機102,實務上可以包含資料儲存系統206。相對而言,若未實施上述之壽命延長特徵,一提供眾多大量儲存單元於網路邊緣裝置之網路攝影機系統將需要極大之維修和維護成本。此係由於該等大量儲存單元將頻繁地發生故障且分布於難以維修之處(諸如位於長竿之頂端)。具有上述之壽命延長特徵,則大量儲存單元可以置入網路邊緣裝置中而不需要頻繁的置換。
前述實施例之細節可以在未脫離本發明之基本原理下進行許多修改,此對於熟習本項技術者將係顯而易見的。本發明之範疇因此應由以下之申請專利範圍所界定。
202‧‧‧影像系統
204‧‧‧視訊處理系統
206‧‧‧資料儲存系統
210‧‧‧輸入/輸出介面及控制系統
302‧‧‧規則式引擎
304‧‧‧視訊分析
306‧‧‧儲存管理系統

Claims (15)

  1. 一種使用於視訊資料儲存應用而延長硬碟機記憶體運作壽命之方法,包含:提供固態記憶體作為一視訊攝影機產生之視訊資料之一儲存緩衝器,該視訊資料代表該視訊攝影機觀測下之一景象;提供硬碟機記憶體,其正常運作於一歇電狀態;當該視訊資料由該視訊攝影機產生時,儲存該視訊資料於該儲存緩衝器,該視訊資料於該儲存緩衝器之儲存係於一第一時間間隔中進行;使該硬碟機記憶體運作於一供電狀態;將儲存於該儲存緩衝器中之一部分該視訊資料於該供電狀態傳送至並儲存於該硬碟機記憶體中,該部分視訊資料於該硬碟機記憶體之儲存係於一第二時間間隔進行,該第二時間間隔實質上短於該第一時間間隔;在完成該視訊資料之傳送之後,將該硬碟機記憶體回復至該歇電狀態;以及在該硬碟機記憶體之一運作壽命範圍中,就相當於該第二時間間隔總和之一總硬碟機儲存時間和相當於該第一時間間隔總和之一總緩衝器儲存時間而言,耗用在傳送及儲存一部分該視訊資料至該硬碟機記憶體之該總硬碟機儲存時間實質上小於耗用在儲存該視訊資料於該儲存緩衝區中之該總緩衝器儲存時間。
  2. 如申請專利範圍第1項所述之方法,其中該硬碟機記憶體包含一讀/寫頭,且其中該供電狀態係確立於該讀/寫頭之啟動而該歇電狀態係確立於該讀/寫頭之不啟動。
  3. 如申請專利範圍第1項所述之方法,其中該硬碟機記憶體包含一儲存記憶體磁碟,且其中該供電狀態係確立於該儲存記憶體磁碟之轉動,而該歇電狀態係確立於該儲存記憶體磁碟之不轉動。
  4. 如申請專利範圍第1項所述之方法,其中該視訊儲存應用包含視訊監視,且其中視訊資料之儲存於該儲存緩衝器及一部分該視訊資料之傳送和儲存於該硬碟機記憶體彼此協調運作以於監視應用中防止產生自該視訊攝影機之該視訊資料之儲存中斷。
  5. 如申請專利範圍第1項所述之方法,其中該儲存緩衝器包含固態NAND快閃記憶體。
  6. 如申請專利範圍第1項所述之方法,其中該儲存緩衝器包含固態隨機存取記憶體,且一輔助性電源供應被提供於其中以在該固態隨機存取記憶體遭遇一主要電源電力喪失之時供應電力予該固態隨機存取記憶體。
  7. 如申請專利範圍第1項所述之方法,其中該視訊攝影機包含一攝影機外殼,且其中該硬碟機記憶體係包含於該攝影機外殼之內或構成其一部份。
  8. 如申請專利範圍第1項所述之方法,其中該視訊攝影機包含視訊分析,該視訊分析包含於一攝影機外殼之內或構成其一部份,該視訊分析執行該視訊資料之分析以使得一特定關注事件被偵測。
  9. 如申請專利範圍第1項所述之方法,更包含一視訊伺服器,該視訊伺服器具有一伺服器外殼並於運作時連結於該視訊攝影機以產生提供予該儲存緩衝器之該視訊資料,且其中該硬碟機記憶體係包含於該伺服器外殼之內或構成其一部份。
  10. 如申請專利範圍第1項所述之方法,其中該視訊攝影機係一網路攝 影系統之多個視訊攝影機之一,且其中該硬碟機記憶體係連結於該網路攝影系統中該多個視訊攝影機之多個硬碟機記憶體之一。
  11. 如申請專利範圍第10項所述之方法,其中該儲存緩衝器係連結於該多個視訊攝影機之多個儲存緩衝器之一,且該多個視訊攝影機包含第一及第二視訊攝影機,其中儲存於連結該第一視訊攝影機之一儲存緩衝器中之視訊資料被傳送至並儲存於連結該第二視訊攝影機之一硬碟機記憶體之中。
  12. 如申請專利範圍第1項所述之方法,其中該視訊攝影機係一網路攝影系統之多個視訊攝影機之一,且其中該多個視訊攝影機中每一攝影機所產生之視訊資料均於該第一時間間隔期間被儲存於該儲存緩衝器之中,且於該第二時間間隔期間被儲存於該硬碟機記憶體之中。
  13. 如申請專利範圍第1項所述之方法,其中一感測器及該視訊攝影機、儲存緩衝器、和硬碟機記憶體被提供於一交通工具之內,且其中該第二時間間隔對應至該感測器感測到一該交通工具係處於靜止狀態之時刻。
  14. 如申請專利範圍第13項所述之方法,其中該視訊攝影機係提供於該交通工具內之多個視訊攝影機之一,且該多個視訊攝影機中每一攝影機所產生之視訊資料均於該第一時間間隔期間被儲存於該儲存緩衝器之中,且於該第二時間間隔期間被儲存於該硬碟機記憶體之中。
  15. 如申請專利範圍第13項所述之方法,其中該視訊攝影機係提供於該交通工具內之多個視訊攝影機之一且該儲存緩衝器係提供於該交通工具內之多個儲存緩衝器之一,該多個儲存緩衝器中每一緩衝器均連結於一或多個該多個視訊攝影機,且其中儲存於該多個儲存緩衝器中每一緩衝器之視 訊資料均於該第二時間間隔期間被傳送至並儲存於該硬碟機記憶體之中。
TW104123693A 2008-03-03 2009-03-03 視訊資料之內容知覺儲存 TWI575958B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US3329008P 2008-03-03 2008-03-03
US12/105,893 US8427552B2 (en) 2008-03-03 2008-04-18 Extending the operational lifetime of a hard-disk drive used in video data storage applications
US12/105,871 US8872940B2 (en) 2008-03-03 2008-04-18 Content aware storage of video data

Publications (2)

Publication Number Publication Date
TW201540077A true TW201540077A (zh) 2015-10-16
TWI575958B TWI575958B (zh) 2017-03-21

Family

ID=41012886

Family Applications (2)

Application Number Title Priority Date Filing Date
TW098106803A TWI530193B (zh) 2008-03-03 2009-03-03 視訊資料之內容知覺儲存
TW104123693A TWI575958B (zh) 2008-03-03 2009-03-03 視訊資料之內容知覺儲存

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW098106803A TWI530193B (zh) 2008-03-03 2009-03-03 視訊資料之內容知覺儲存

Country Status (7)

Country Link
US (4) US8872940B2 (zh)
KR (2) KR101651472B1 (zh)
CN (3) CN102843538B (zh)
DE (2) DE112009005545B3 (zh)
GB (2) GB2470677B (zh)
TW (2) TWI530193B (zh)
WO (1) WO2009111377A1 (zh)

Families Citing this family (154)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020046061A1 (en) 2000-02-11 2002-04-18 Wright Kenneth L. Personal information system
US20080303903A1 (en) * 2003-12-02 2008-12-11 Connexed Technologies Inc. Networked video surveillance system
US8232860B2 (en) 2005-10-21 2012-07-31 Honeywell International Inc. RFID reader for facility access control and authorization
EP2023812B1 (en) 2006-05-19 2016-01-27 The Queen's Medical Center Motion tracking system for real time adaptive imaging and spectroscopy
TW200924534A (en) * 2007-06-04 2009-06-01 Objectvideo Inc Intelligent video network protocol
CN101472146B (zh) * 2007-12-28 2010-11-10 鸿富锦精密工业(深圳)有限公司 视频监控系统及方法
GB2492246B (en) 2008-03-03 2013-04-10 Videoiq Inc Dynamic object classification
US10354689B2 (en) 2008-04-06 2019-07-16 Taser International, Inc. Systems and methods for event recorder logging
US8128503B1 (en) * 2008-05-29 2012-03-06 Livestream LLC Systems, methods and computer software for live video/audio broadcasting
JP4603603B2 (ja) * 2008-07-24 2010-12-22 株式会社日立国際電気 録画転送装置
EP2329424B1 (en) 2008-08-22 2016-12-07 Datcard Systems, Inc. System and method of encryption for dicom volumes
US9141862B2 (en) * 2008-09-26 2015-09-22 Harris Corporation Unattended surveillance device and associated methods
CN102171670A (zh) * 2008-09-30 2011-08-31 惠普开发有限公司 基于nas的多媒体文件分发服务
US8788519B2 (en) 2008-10-24 2014-07-22 John C. Canessa System and methods for metadata management in content addressable storage
JP5203912B2 (ja) 2008-12-12 2013-06-05 キヤノン株式会社 撮像装置及びその制御方法
US8780198B2 (en) * 2009-02-26 2014-07-15 Tko Enterprises, Inc. Image processing sensor systems
US9740921B2 (en) 2009-02-26 2017-08-22 Tko Enterprises, Inc. Image processing sensor systems
US9277878B2 (en) * 2009-02-26 2016-03-08 Tko Enterprises, Inc. Image processing sensor systems
EP2408984B1 (en) 2009-03-19 2019-11-27 Honeywell International Inc. Systems and methods for managing access control devices
DE102009021974A1 (de) 2009-05-19 2011-03-03 Mobotix Ag Digitale Videokamera
US20120106915A1 (en) * 2009-07-08 2012-05-03 Honeywell International Inc. Systems and methods for managing video data
JP5390322B2 (ja) * 2009-09-28 2014-01-15 株式会社東芝 画像処理装置、及び画像処理方法
WO2011041903A1 (en) * 2009-10-07 2011-04-14 Telewatch Inc. Video analytics with pre-processing at the source end
US9420250B2 (en) * 2009-10-07 2016-08-16 Robert Laganiere Video analytics method and system
US20110113461A1 (en) * 2009-10-07 2011-05-12 Robert Laganiere Video analytics based control of video data storage
US20110102442A1 (en) * 2009-11-04 2011-05-05 Ahmed Rafeek Bin Ahmad Ibrahim Recording Contents of Display Screens
DE102009047365A1 (de) * 2009-12-01 2011-06-09 Robert Bosch Gmbh Verfahren zum Betreiben einer Aufzeichnungsanordnung
JP5424852B2 (ja) * 2009-12-17 2014-02-26 キヤノン株式会社 映像情報処理方法及びその装置
US9280365B2 (en) * 2009-12-17 2016-03-08 Honeywell International Inc. Systems and methods for managing configuration data at disconnected remote devices
US20110169950A1 (en) * 2010-01-12 2011-07-14 Liberty Imaging LLC Architecture for wireless communication and monitoring
US8503539B2 (en) 2010-02-26 2013-08-06 Bao Tran High definition personal computer (PC) cam
US8930470B2 (en) 2010-04-23 2015-01-06 Datcard Systems, Inc. Event notification in interconnected content-addressable storage systems
US9143739B2 (en) * 2010-05-07 2015-09-22 Iwatchlife, Inc. Video analytics with burst-like transmission of video data
US8830327B2 (en) * 2010-05-13 2014-09-09 Honeywell International Inc. Surveillance system with direct database server storage
US9047531B2 (en) 2010-05-21 2015-06-02 Hand Held Products, Inc. Interactive user interface for capturing a document in an image signal
US8600167B2 (en) 2010-05-21 2013-12-03 Hand Held Products, Inc. System for capturing a document in an image signal
CA2748065A1 (en) 2010-08-04 2012-02-04 Iwatchlife Inc. Method and system for locating an individual
CA2748059A1 (en) 2010-08-04 2012-02-04 Iwatchlife Inc. Method and system for initiating communication via a communication network
CA2748060A1 (en) 2010-08-04 2012-02-04 Iwatchlife Inc. Method and system for making video calls
US20120057640A1 (en) * 2010-09-02 2012-03-08 Fang Shi Video Analytics for Security Systems and Methods
CN102726042B (zh) * 2010-09-02 2016-04-27 英特赛尔美国有限公司 视频处理系统和视频解码系统
US10645344B2 (en) 2010-09-10 2020-05-05 Avigilion Analytics Corporation Video system with intelligent visual display
JPWO2012060105A1 (ja) * 2010-11-05 2014-05-12 日本電気株式会社 情報処理装置
JP5693162B2 (ja) * 2010-11-09 2015-04-01 キヤノン株式会社 画像処理システム、撮像装置、画像処理装置及びそれらの制御方法、プログラム
US8787725B2 (en) 2010-11-11 2014-07-22 Honeywell International Inc. Systems and methods for managing video data
US8902970B1 (en) * 2010-12-01 2014-12-02 Amazon Technologies, Inc. Altering streaming video encoding based on user attention
DE102010053181A1 (de) 2010-12-03 2012-06-06 Mobotix Ag Überwachungskameraanordnung
WO2012078898A2 (en) 2010-12-10 2012-06-14 Datcard Systems, Inc. Secure portable medical information access systems and methods related thereto
DE102011003392A1 (de) * 2011-01-31 2012-08-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Videoaufnahmesystem und Verfahren zur Videoaufnahme
US8628016B2 (en) 2011-06-17 2014-01-14 Hand Held Products, Inc. Terminal operative for storing frame of image data
EP2538672B1 (en) * 2011-06-21 2020-08-12 Axis AB Method for configuring networked cameras
US9894261B2 (en) 2011-06-24 2018-02-13 Honeywell International Inc. Systems and methods for presenting digital video management system information via a user-customizable hierarchical tree interface
US10362273B2 (en) 2011-08-05 2019-07-23 Honeywell International Inc. Systems and methods for managing video data
US9344684B2 (en) 2011-08-05 2016-05-17 Honeywell International Inc. Systems and methods configured to enable content sharing between client terminals of a digital video management system
WO2013020165A2 (en) 2011-08-05 2013-02-14 HONEYWELL INTERNATIONAL INC. Attn: Patent Services Systems and methods for managing video data
US9606209B2 (en) 2011-08-26 2017-03-28 Kineticor, Inc. Methods, systems, and devices for intra-scan motion correction
KR101668930B1 (ko) * 2011-11-14 2016-10-24 인텔 코포레이션 비디오 분석 인코딩
EP2783324A4 (en) * 2011-11-22 2015-09-09 Schneider Electric Buildings METHOD AND SYSTEM FOR ACCESS CONTROL USING INTELLIGENT OPTICAL SENSOR
US10769913B2 (en) 2011-12-22 2020-09-08 Pelco, Inc. Cloud-based video surveillance management system
EP2826020A4 (en) * 2012-03-15 2016-06-15 Behavioral Recognition Sys Inc STANDARDIZING AN ALERT VOLUME IN A VIDEO SURVEILLANCE SYSTEM
KR101152315B1 (ko) * 2012-03-19 2012-06-11 (주)리얼허브 네트워크 감시 카메라용 서버 가상화 방법
WO2014057496A2 (en) * 2012-03-26 2014-04-17 Tata Consultancy Services Limited An event triggered location based participatory surveillance
WO2013147908A1 (en) * 2012-03-31 2013-10-03 Intel Corporation Methods and systems for cryptographic access control of video
KR101366502B1 (ko) * 2012-04-23 2014-03-10 주식회사 아이디스 Nvr 장치의 ip 카메라 자동 연결 설정 시스템
CA2822217A1 (en) 2012-08-02 2014-02-02 Iwatchlife Inc. Method and system for anonymous video analytics processing
CN103634552A (zh) * 2012-08-28 2014-03-12 华为技术有限公司 一种监控视频存储方法、系统和中心管理服务器
EP2720172A1 (en) * 2012-10-12 2014-04-16 Nederlandse Organisatie voor toegepast -natuurwetenschappelijk onderzoek TNO Video access system and method based on action type detection
EP2915038A4 (en) 2012-10-31 2016-06-29 Outward Inc DELIVERY OF VIRTUALIZED CONTENT
US10462499B2 (en) 2012-10-31 2019-10-29 Outward, Inc. Rendering a modeled scene
US9197861B2 (en) 2012-11-15 2015-11-24 Avo Usa Holding 2 Corporation Multi-dimensional virtual beam detection for video analytics
US9210385B2 (en) * 2012-11-20 2015-12-08 Pelco, Inc. Method and system for metadata extraction from master-slave cameras tracking system
US9717461B2 (en) 2013-01-24 2017-08-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US10327708B2 (en) 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9305365B2 (en) 2013-01-24 2016-04-05 Kineticor, Inc. Systems, devices, and methods for tracking moving targets
WO2014120734A1 (en) 2013-02-01 2014-08-07 Kineticor, Inc. Motion tracking system for real time adaptive motion compensation in biomedical imaging
US20140218515A1 (en) * 2013-02-04 2014-08-07 Systems Engineering Technologies Corporation Immediate action system
US9933921B2 (en) * 2013-03-13 2018-04-03 Google Technology Holdings LLC System and method for navigating a field of view within an interactive media-content item
US20140300758A1 (en) * 2013-04-04 2014-10-09 Bao Tran Video processing systems and methods
US9792951B2 (en) 2013-05-08 2017-10-17 Vieu Labs, Inc. Systems and methods for identifying potentially interesting events in extended recordings
KR20150000230A (ko) * 2013-06-24 2015-01-02 한국전자통신연구원 네트워크 카메라 분산 시스템 및 방법
US9392099B2 (en) * 2013-06-24 2016-07-12 Cellco Partnership Mobile surveillance system
US9742627B2 (en) 2013-06-25 2017-08-22 Idis Co., Ltd. System for automatic connection between NVR and IP camera
US9779480B2 (en) 2013-07-19 2017-10-03 Google Technology Holdings LLC View-driven consumption of frameless media
US9589597B2 (en) 2013-07-19 2017-03-07 Google Technology Holdings LLC Small-screen movie-watching using a viewport
JP6327816B2 (ja) * 2013-09-13 2018-05-23 キヤノン株式会社 送信装置、受信装置、送受信システム、送信装置の制御方法、受信装置の制御方法、送受信システムの制御方法、及びプログラム
US20150082030A1 (en) * 2013-09-18 2015-03-19 Sheng-Fu Chang Security Mechanism for Video Storage System
DE102013110307A1 (de) * 2013-09-18 2015-03-19 Sheng-Fu Chang Sicherheitsmechanismus für ein Videospeichersystem
DE102013110306A1 (de) * 2013-09-18 2015-03-19 Sheng-Fu Chang Videospeichersystem
WO2015061803A1 (en) * 2013-10-25 2015-04-30 Outward, Inc. Rendering a modeled scene
US10523903B2 (en) 2013-10-30 2019-12-31 Honeywell International Inc. Computer implemented systems frameworks and methods configured for enabling review of incident data
US20150130936A1 (en) * 2013-11-08 2015-05-14 Dow Agrosciences Llc Crop monitoring system
DE102013019604B4 (de) * 2013-11-25 2018-06-14 Smart Mobile Labs Gmbh System aus einer Mehrzahl an Kameras und einem Zentralserver sowie Verfahren zum Betrieb des Systems
US10491936B2 (en) 2013-12-18 2019-11-26 Pelco, Inc. Sharing video in a cloud video service
FR3010606A1 (fr) * 2013-12-27 2015-03-13 Thomson Licensing Procede de synchronisation de metadonnees avec un document audiovisuel en utilisant des parties de trames et dispositif de production de telles metadonnees
US20150243325A1 (en) * 2014-02-24 2015-08-27 Lyve Minds, Inc. Automatic generation of compilation videos
US10004462B2 (en) 2014-03-24 2018-06-26 Kineticor, Inc. Systems, methods, and devices for removing prospective motion correction from medical imaging scans
US9888266B2 (en) 2014-04-22 2018-02-06 Vivint, Inc. Pushing video to panels and sending metadata tag to cloud
CL2014001085A1 (es) * 2014-04-25 2015-03-27 Cardenas Luis Fernando Alarcon Metodo y sistema de control de un sitio de trabajo, que permite analizar y gestionar las condiciones de trabajo, en que el metodo comprende registrar acciones de trabajo empleando medio de captura, almacenar la informacion en base de datos, consultar informacion almacenada, analizarla clasificando de acuerdo a categorias predefinidas, enlazar informacion y analizar en relacion a categorias, ubicacion temporal y/o eventual, permitir visualizacion de analisis e informacion
US10306125B2 (en) 2014-10-09 2019-05-28 Belkin International, Inc. Video camera with privacy
WO2016014718A1 (en) 2014-07-23 2016-01-28 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9179105B1 (en) * 2014-09-15 2015-11-03 Belkin International, Inc. Control of video camera with privacy feedback
WO2016064893A1 (en) 2014-10-20 2016-04-28 Taser International, Inc. Systems and methods for distributed control
DE102015204281A1 (de) * 2015-03-10 2016-09-15 Robert Bosch Gmbh Verfahren zur Kalibrierung einer Kamera für eine Blickrichtungserkennung in einem Fahrzeug, Vorrichtung für ein Kraftfahrzeug mit einer Kamera und mindestens einem weiteren Element und Computerprogrammprodukt
US9996749B2 (en) * 2015-05-29 2018-06-12 Accenture Global Solutions Limited Detecting contextual trends in digital video content
US10192277B2 (en) 2015-07-14 2019-01-29 Axon Enterprise, Inc. Systems and methods for generating an audit trail for auditable devices
US9943247B2 (en) 2015-07-28 2018-04-17 The University Of Hawai'i Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan
US9769367B2 (en) 2015-08-07 2017-09-19 Google Inc. Speech and computer vision-based control
US9774816B2 (en) * 2015-11-06 2017-09-26 At&T Intellectual Property I, L.P. Methods and apparatus to manage audiovisual recording in a connected vehicle
TWI571804B (zh) * 2015-11-20 2017-02-21 晶睿通訊股份有限公司 可預覽畫面之視訊檔案回放系統及其方法與電腦程式產品
WO2017091479A1 (en) 2015-11-23 2017-06-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9836484B1 (en) 2015-12-30 2017-12-05 Google Llc Systems and methods that leverage deep learning to selectively store images at a mobile image capture device
US9838641B1 (en) 2015-12-30 2017-12-05 Google Llc Low power framework for processing, compressing, and transmitting images at a mobile image capture device
US9836819B1 (en) 2015-12-30 2017-12-05 Google Llc Systems and methods for selective retention and editing of images captured by mobile image capture device
US10225511B1 (en) 2015-12-30 2019-03-05 Google Llc Low power framework for controlling image sensor mode in a mobile image capture device
US10732809B2 (en) 2015-12-30 2020-08-04 Google Llc Systems and methods for selective retention and editing of images captured by mobile image capture device
US20170230637A1 (en) * 2016-02-07 2017-08-10 Google Inc. Multiple camera computing system having camera-to-camera communications link
US10133639B2 (en) 2016-02-10 2018-11-20 International Business Machines Corporation Privacy protection of media files for automatic cloud backup systems
US10347102B2 (en) 2016-03-22 2019-07-09 Sensormatic Electronics, LLC Method and system for surveillance camera arbitration of uplink consumption
US11601583B2 (en) 2016-03-22 2023-03-07 Johnson Controls Tyco IP Holdings LLP System and method for controlling surveillance cameras
US9965680B2 (en) 2016-03-22 2018-05-08 Sensormatic Electronics, LLC Method and system for conveying data from monitored scene via surveillance cameras
US11216847B2 (en) 2016-03-22 2022-01-04 Sensormatic Electronics, LLC System and method for retail customer tracking in surveillance camera network
US10665071B2 (en) 2016-03-22 2020-05-26 Sensormatic Electronics, LLC System and method for deadzone detection in surveillance camera network
US10475315B2 (en) 2016-03-22 2019-11-12 Sensormatic Electronics, LLC System and method for configuring surveillance cameras using mobile computing devices
US10733231B2 (en) 2016-03-22 2020-08-04 Sensormatic Electronics, LLC Method and system for modeling image of interest to users
US10764539B2 (en) 2016-03-22 2020-09-01 Sensormatic Electronics, LLC System and method for using mobile device of zone and correlated motion detection
US10318836B2 (en) * 2016-03-22 2019-06-11 Sensormatic Electronics, LLC System and method for designating surveillance camera regions of interest
US20170280102A1 (en) * 2016-03-22 2017-09-28 Sensormatic Electronics, LLC Method and system for pooled local storage by surveillance cameras
US10192414B2 (en) * 2016-03-22 2019-01-29 Sensormatic Electronics, LLC System and method for overlap detection in surveillance camera network
JP6751620B2 (ja) * 2016-08-05 2020-09-09 キヤノン株式会社 撮像装置及びその制御方法、プログラム、並びに記憶媒体
KR102536518B1 (ko) 2016-09-13 2023-05-24 한화비전 주식회사 저장장치 리빌드 중 녹화가 가능한 감시 카메라 시스템 및 방법
CN107025066A (zh) 2016-09-14 2017-08-08 阿里巴巴集团控股有限公司 在基于闪存的存储介质中写入存储数据的方法和装置
RU2632473C1 (ru) * 2016-09-30 2017-10-05 ООО "Ай Ти Ви групп" Способ обмена данными между ip видеокамерой и сервером (варианты)
WO2018080650A2 (en) * 2016-10-25 2018-05-03 725-1 Corporation Video-based data collection, image capture and analysis configuration
US10354163B2 (en) 2017-06-19 2019-07-16 Honeywell International Inc. Enhanced computer vision using object location information
US10321160B2 (en) 2017-07-13 2019-06-11 International Business Machines Corporation Compressing multiple video files using localized camera meta data
CN116112640A (zh) * 2017-10-18 2023-05-12 北京京东尚科信息技术有限公司 信息传输方法、装置和系统
US20190347915A1 (en) * 2018-05-11 2019-11-14 Ching-Ming Lai Large-scale Video Monitoring and Recording System
RU182656U1 (ru) * 2018-05-29 2018-08-28 Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС") Телекамера для формирования панорамного видеоизображения и распознавания объектов на нем
RU2686154C1 (ru) * 2018-05-29 2019-04-24 Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС") Телекамера и способ для формирования панорамного видеоизображения и распознавания объектов на нем
RU2682315C1 (ru) * 2018-06-19 2019-03-19 Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС") Способ видеосъемки телекамерой, установленной на наклонно-поворотной платформе
KR102002360B1 (ko) * 2018-09-17 2019-07-23 국방과학연구소 영상 처리용 NoSQL 데이터베이스 구축 방법 및 장치
MY194748A (en) * 2018-12-21 2022-12-15 Mimos Berhad A system and method for video surveillance and monitoring
US11176269B2 (en) 2019-03-08 2021-11-16 International Business Machines Corporation Access control of specific encrypted data segment
US11531701B2 (en) * 2019-04-03 2022-12-20 Samsung Electronics Co., Ltd. Electronic device and control method thereof
CN111428080B (zh) * 2019-04-25 2024-02-27 杭州海康威视数字技术股份有限公司 录像文件的存储方法、搜索方法及装置
US11194789B2 (en) * 2019-06-07 2021-12-07 Sap Se Content agnostic memory pageable storage model
CN111107272A (zh) * 2020-01-02 2020-05-05 广州高博软件科技有限公司 多媒体视频流总结系统及流程
WO2021255635A1 (en) * 2020-06-15 2021-12-23 Cron Systems Pvt. Ltd. System and method for capturing an event of random occurrence and length from a stream of continuous input data
KR20220003376A (ko) 2020-07-01 2022-01-10 삼성전자주식회사 이미지 처리 방법 및 장치
US11558740B2 (en) * 2020-09-23 2023-01-17 T-Mobile Usa, Inc. Dynamic encryption for scheduled message delivery
WO2023018895A1 (en) * 2021-08-11 2023-02-16 Edge AI, LLC Body or car mounted camera system
US11682214B2 (en) 2021-10-05 2023-06-20 Motorola Solutions, Inc. Method, system and computer program product for reducing learning time for a newly installed camera
US20230336625A1 (en) * 2022-04-15 2023-10-19 Arcus Holding A/S Location based video data transmission
CN116506664B (zh) * 2023-06-25 2023-09-15 北京淳中科技股份有限公司 一种视频码流生成方法、装置、电子设备及介质

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5289275A (en) * 1991-07-12 1994-02-22 Hochiki Kabushiki Kaisha Surveillance monitor system using image processing for monitoring fires and thefts
EP0752783B1 (en) * 1991-11-21 2003-04-02 Canon Kabushiki Kaisha Information signal processing apparatus
US6833865B1 (en) * 1998-09-01 2004-12-21 Virage, Inc. Embedded metadata engines in digital capture devices
US6954859B1 (en) * 1999-10-08 2005-10-11 Axcess, Inc. Networked digital security system and methods
AU3201101A (en) * 2000-02-07 2001-08-14 Intelligent Security Limited Smoke and flame detection
JP2003524340A (ja) * 2000-02-24 2003-08-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 伝送システム
US7468682B2 (en) * 2000-05-18 2008-12-23 Echo Mobile Music Llp Portable recorder/players with power-saving buffers
US7574272B2 (en) * 2000-10-13 2009-08-11 Eric Paul Gibbs System and method for data transfer optimization in a portable audio device
US7868912B2 (en) * 2000-10-24 2011-01-11 Objectvideo, Inc. Video surveillance system employing video primitives
GB0028162D0 (en) * 2000-11-20 2001-01-03 Sentec Ltd Distributed image processing technology and services
GB0029880D0 (en) * 2000-12-07 2001-01-24 Sony Uk Ltd Video and audio information processing
JP4536299B2 (ja) * 2001-08-29 2010-09-01 パナソニック株式会社 イベント映像記録・再生システム、イベント管理装置、およびローカル記録装置
KR100471927B1 (ko) * 2001-10-08 2005-03-08 학교법인 한국정보통신학원 웹 기반 영상 데이터 검색 시스템 및 그 방법
US20060165386A1 (en) 2002-01-08 2006-07-27 Cernium, Inc. Object selective video recording
US6658091B1 (en) * 2002-02-01 2003-12-02 @Security Broadband Corp. LIfestyle multimedia security system
US7327396B2 (en) * 2002-04-10 2008-02-05 National Instruments Corporation Smart camera with a plurality of slots for modular expansion capability through a variety of function modules connected to the smart camera
KR20050003451A (ko) * 2002-05-14 2005-01-10 코닌클리케 필립스 일렉트로닉스 엔.브이. 하드 디스크 드라이브 시스템, 이러한 시스템을 사용하는방법 및 장치
US7489802B2 (en) * 2002-09-10 2009-02-10 Zeev Smilansky Miniature autonomous agents for scene interpretation
JP2004172780A (ja) * 2002-11-19 2004-06-17 Hitachi Ltd カメラシステム、カメラ装置及び記録装置
KR100489890B1 (ko) * 2002-11-22 2005-05-17 한국전자통신연구원 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법
AU2003303258A1 (en) * 2002-12-20 2004-07-14 Koninklijke Philips Electronics N.V. Power saving method for portable streaming devices
US20040126038A1 (en) * 2002-12-31 2004-07-01 France Telecom Research And Development Llc Method and system for automated annotation and retrieval of remote digital content
US7817716B2 (en) 2003-05-29 2010-10-19 Lsi Corporation Method and/or apparatus for analyzing the content of a surveillance image
GB2404105A (en) 2003-07-03 2005-01-19 Braddahead Ltd Compressing digital images
US7505673B2 (en) * 2003-09-30 2009-03-17 At&T Intellectual Property I, L.P. Video recorder for detection of occurrences
US20060077256A1 (en) * 2003-11-07 2006-04-13 Silvemail William B High resolution pre-event record
DE602004020271D1 (de) * 2003-12-03 2009-05-07 Koninkl Philips Electronics Nv Energiesparverfahren und -system
US7477285B1 (en) 2003-12-12 2009-01-13 Careview Communication, Inc. Non-intrusive data transmission network for use in an enterprise facility and method for implementing
US7697026B2 (en) * 2004-03-16 2010-04-13 3Vr Security, Inc. Pipeline architecture for analyzing multiple video streams
US20070296817A1 (en) * 2004-07-09 2007-12-27 Touradj Ebrahimi Smart Video Surveillance System Ensuring Privacy
US7746378B2 (en) * 2004-10-12 2010-06-29 International Business Machines Corporation Video analysis, archiving and alerting methods and apparatus for a distributed, modular and extensible video surveillance system
KR100677601B1 (ko) * 2004-11-11 2007-02-02 삼성전자주식회사 메타 데이터를 포함하는 영상 데이터를 기록한 저장매체,그 재생장치 및 메타 데이터를 이용한 검색방법
US20060137018A1 (en) 2004-11-29 2006-06-22 Interdigital Technology Corporation Method and apparatus to provide secured surveillance data to authorized entities
JP2006179137A (ja) * 2004-12-24 2006-07-06 Hitachi Ltd 光ディスク装置
US7751632B2 (en) 2005-02-15 2010-07-06 Panasonic Corporation Intelligent, dynamic, long-term digital surveilance media storage system
US20060224875A1 (en) * 2005-03-11 2006-10-05 Choi Young-Joon Portable digital player
US7574039B2 (en) * 2005-03-24 2009-08-11 Honeywell International Inc. Video based fire detection system
JP4601666B2 (ja) * 2005-03-29 2010-12-22 富士通株式会社 映像検索装置
US7982795B2 (en) * 2005-04-11 2011-07-19 Panayotis B. SPATHARIS Image acquisition and exploitation camera system and methods therefore
US8284254B2 (en) * 2005-08-11 2012-10-09 Sightlogix, Inc. Methods and apparatus for a wide area coordinated surveillance system
AU2006294336B2 (en) * 2005-09-23 2012-05-17 Toronto Microelectronics Inc. A data storage device and method
JP4341616B2 (ja) * 2005-12-02 2009-10-07 ソニー株式会社 ネットワークカメラシステムおよびネットワークカメラ制御プログラム
JP4578396B2 (ja) * 2005-12-08 2010-11-10 株式会社日立超エル・エス・アイ・システムズ 情報処理装置
US20070185989A1 (en) * 2006-02-07 2007-08-09 Thomas Grant Corbett Integrated video surveillance system and associated method of use
US8184154B2 (en) * 2006-02-27 2012-05-22 Texas Instruments Incorporated Video surveillance correlating detected moving objects and RF signals
US20070217761A1 (en) 2006-03-07 2007-09-20 Coban Research And Technologies, Inc. Method for video/audio recording using unrestricted pre-event/post-event buffering with multiple bit and frame rates buffer files
JP4847165B2 (ja) * 2006-03-09 2011-12-28 株式会社日立製作所 映像記録再生方法及び映像記録再生装置
US8451329B2 (en) * 2006-08-14 2013-05-28 Honeywell International Inc. PTZ presets control analytics configuration
US7974522B2 (en) * 2006-09-29 2011-07-05 Hibbard Gary D Systems and methods to improve consumer product reliability and lifetime of a hard disk drive by reducing its activity
US8531521B2 (en) * 2006-10-06 2013-09-10 Sightlogix, Inc. Methods and apparatus related to improved surveillance using a smart camera
WO2008057285A2 (en) * 2006-10-27 2008-05-15 Vidient Systems, Inc. An apparatus for image capture with automatic and manual field of interest processing with a multi-resolution camera
US20080136934A1 (en) * 2006-12-12 2008-06-12 Industrial Technology Research Institute Flame Detecting Method And Device
CN100474271C (zh) * 2006-12-15 2009-04-01 华为技术有限公司 一种多级缓冲的存储系统和方法
CN101711393A (zh) * 2007-01-16 2010-05-19 Utc消防及保安公司 基于视频的火灾检测的系统和方法
JP2008269048A (ja) * 2007-04-17 2008-11-06 Matsushita Electric Ind Co Ltd 車両用画像記録装置
US7460149B1 (en) * 2007-05-28 2008-12-02 Kd Secure, Llc Video data storage, search, and retrieval using meta-data and attribute data in a video surveillance system
US20080320036A1 (en) * 2007-06-22 2008-12-25 Winter Gentle E Automatic data collection
US8199196B2 (en) 2007-09-27 2012-06-12 Alcatel Lucent Method and apparatus for controlling video streams
US7382244B1 (en) * 2007-10-04 2008-06-03 Kd Secure Video surveillance, storage, and alerting system having network management, hierarchical data storage, video tip processing, and vehicle plate analysis
US8204273B2 (en) * 2007-11-29 2012-06-19 Cernium Corporation Systems and methods for analysis of video content, event notification, and video content provision
US8170280B2 (en) * 2007-12-03 2012-05-01 Digital Smiths, Inc. Integrated systems and methods for video-based object modeling, recognition, and tracking
US8032110B2 (en) * 2008-01-02 2011-10-04 Chung-Yi Kuo Mobile security device
KR101513215B1 (ko) * 2014-03-28 2015-04-17 주식회사 로보티어 객체 행동패턴 cctv 영상 분석서버

Also Published As

Publication number Publication date
WO2009111377A1 (en) 2009-09-11
KR101651472B1 (ko) 2016-08-29
KR101759921B1 (ko) 2017-07-21
GB201222862D0 (en) 2013-01-30
US20090219411A1 (en) 2009-09-03
US8427552B2 (en) 2013-04-23
CN104079856A (zh) 2014-10-01
TWI575958B (zh) 2017-03-21
KR20160103162A (ko) 2016-08-31
US8872940B2 (en) 2014-10-28
US20110043631A1 (en) 2011-02-24
DE112009000481T5 (de) 2011-04-28
TWI530193B (zh) 2016-04-11
GB201014671D0 (en) 2010-10-20
CN102843538B (zh) 2016-11-02
TW200948080A (en) 2009-11-16
CN101971609B (zh) 2014-08-06
US20090219639A1 (en) 2009-09-03
DE112009000481B4 (de) 2017-06-14
GB2495030A (en) 2013-03-27
GB2495030B (en) 2013-05-15
US8736701B2 (en) 2014-05-27
GB2470677B (en) 2013-02-27
CN102843538A (zh) 2012-12-26
US20110050947A1 (en) 2011-03-03
DE112009005545B3 (de) 2022-04-28
GB2470677A (en) 2010-12-01
KR20100129736A (ko) 2010-12-09
CN101971609A (zh) 2011-02-09

Similar Documents

Publication Publication Date Title
TWI575958B (zh) 視訊資料之內容知覺儲存
US7609941B2 (en) Multimedia data recording apparatus, monitor system, and multimedia data recording method
US10848716B2 (en) Content-aware computer networking devices with video analytics for reducing video storage and video communication bandwidth requirements of a video surveillance network camera system
CN104301591A (zh) 用于基于云的视频监控系统中的摄像机的方法
US20080285955A1 (en) Method for low data rate video image storage
JP2010041274A (ja) カメラシステム、レコーダ及びハブ
US10986306B2 (en) Monitoring camera system and method capable of recording images during storage device recovery
JP4746219B2 (ja) 監視カメラシステム
JP2006203342A (ja) 映像監視システム
KR20070101996A (ko) 디지털 영상 저장방법
JP2005025533A (ja) 監視システムおよび監視方法
Rafey et al. Using Computer Webcam as a Surveillance Device
KR100892302B1 (ko) 무중단 영상 기록 방법과 그 시스템
KR100555846B1 (ko) 디지털 비디오 레코더의 하드디스크 자동 감지 장치
JP2012227627A (ja) 画像記録装置
KR20180080911A (ko) 데이터 분산 저장 장치 및 시스템
KR20050015357A (ko) 복합형 디지털 비디오 저장 시스템
JP2004129012A (ja) 蓄積メモリ内蔵画像符号化装置