TW201824850A - 監視攝影機系統 - Google Patents

監視攝影機系統 Download PDF

Info

Publication number
TW201824850A
TW201824850A TW106106497A TW106106497A TW201824850A TW 201824850 A TW201824850 A TW 201824850A TW 106106497 A TW106106497 A TW 106106497A TW 106106497 A TW106106497 A TW 106106497A TW 201824850 A TW201824850 A TW 201824850A
Authority
TW
Taiwan
Prior art keywords
server
image
surveillance camera
data
image data
Prior art date
Application number
TW106106497A
Other languages
English (en)
Inventor
佐久間昭弘
Original Assignee
Nexpoint股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nexpoint股份有限公司 filed Critical Nexpoint股份有限公司
Publication of TW201824850A publication Critical patent/TW201824850A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/915Television signal processing therefor for field- or frame-skip recording or reproducing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

監視攝影機系統,係具備有監視攝影機、和經由網路而被與監視攝影機作連接之伺服器。監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。

Description

監視攝影機系統
本發明,係有關於監視攝影機系統。
係周知有:為了防盜或調查或者是管理上的目的,而對於集中式住宅等之建築物的出入口或店鋪或者是街上、工廠或配送中心等的成為監視對象之地點藉由監視攝影機來在適當的時間進行攝像並將攝影機影像經由網際網路等之電性通訊線路來送出至使用者終端之螢幕上而進行監視的監視攝影機系統(例如,參考日本特開2002-77882號公報)。在監視攝影機的業界中,由於顯示即時影像一事係為必要之條件,因此,就算是在IP攝影機(網路攝影機)之技術已有所發達的現今,仍是以類比構成為更具優勢。
當在先前技術之監視攝影機系統中而使用IP攝影機的情況時,從IP攝影機而來之串流輸出,係被限定於H.264之baseline profile。此係因為,監視攝影機系統,在以即時性之閱覽為主的性質上,係並無法容許會發生延遲之high proflie下的串流之故。另外,在本說明書 中之所謂「high profile」,係指包含雙方向預測框間圖框(亦被表現為未來預測圖框、B圖框等)的動畫資料。high profile,由於係參照過去之圖框與未來之圖框的雙方而進行最適化,因此在原理上係必定會發生延遲。
另外,一般而言,在將動畫資料保存在伺服器中的情況時,係有著資料容量變得龐大的問題以及無法進行長期保存的問題。又,係有必要準備多數之大容量的伺服器,而有著導致成本膨脹的問題。
為了減少動畫資料之容量,在先前技術之監視攝影機系統中,係進行有由baseline profile之最適化或可變編碼率所致的容量削減。又,本案申請人,係已提案有將baseline profile之動畫資料轉換為high profile並作保存的監視攝影機系統(日本特願2016-079470)。
本發明之其中一個側面的監視攝影機系統,係具備有:監視攝影機;和透過網路而被與前述監視攝影機作連接之伺服器,前述監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。
10‧‧‧攝影機系統
100‧‧‧伺服器
101‧‧‧CPU
102‧‧‧記憶體
103‧‧‧顯示器
104‧‧‧網路介面
105‧‧‧鍵盤
106‧‧‧滑鼠
110‧‧‧記憶裝置
111‧‧‧一次影像資料夾
112‧‧‧二次影像資料夾
113‧‧‧程式
114‧‧‧作業系統
200‧‧‧終端裝置
200A‧‧‧終端裝置
200B‧‧‧終端裝置
201‧‧‧CPU
202‧‧‧記憶體
204‧‧‧顯示器
210‧‧‧記憶裝置
213‧‧‧程式
214‧‧‧作業系統
300‧‧‧終端裝置
300A‧‧‧終端裝置
300B‧‧‧終端裝置
300C‧‧‧終端裝置
301‧‧‧CPU
302‧‧‧記憶體
303‧‧‧顯示器
304‧‧‧網路介面
305‧‧‧鍵盤
306‧‧‧滑鼠
310‧‧‧記憶裝置
313‧‧‧程式
314‧‧‧作業系統
400‧‧‧監視攝影機
400A‧‧‧監視攝影機
400B‧‧‧監視攝影機
401‧‧‧攝像部
402‧‧‧編碼部
402B‧‧‧編碼部
403‧‧‧現場影像產生部
403B‧‧‧現場影像產生部
403C‧‧‧現場影像產生部
404‧‧‧網路介面
405‧‧‧框體
409‧‧‧計時器
410‧‧‧編碼LSI
411A‧‧‧介面區塊
411B‧‧‧介面區塊
500‧‧‧網路
600‧‧‧路由器
4011‧‧‧鏡頭
4012‧‧‧影像資料受訊部
4013‧‧‧RAW資料產生部
4021‧‧‧控制電路
4022‧‧‧圖框內壓縮區塊
4023‧‧‧圖框間壓縮區塊
4024‧‧‧可變長度編碼壓縮/圖框重新排序區塊
4025‧‧‧記憶體
[圖1]圖1,係為對於其中一個實施形態的監視攝影機系統之概略性構成作展示之圖。
[圖2]圖2,係為對於圖1中所示之監視攝影機系統中的監視攝影機之概略性構成作展示之圖。
[圖3]圖3,係為對於圖2中所示之監視攝影機的編碼部之概略性內部構成作展示之區塊圖。
[圖4]圖4,係為用以對於在圖3中所示之編碼部處的輸出圖框之延遲與重新排序作說明之圖。
[圖5]圖5,係為用以對於圖3中所示之編碼部的原理性之動作作說明之圖。
[圖6]圖6,係為對於圖3中所示之編碼部的硬體構成之其中一例作展示之區塊圖。
[圖7]圖7,係為對於圖3中所示之編碼部的硬體構成之變形例作展示之區塊圖。
[圖8]圖8,係為對於圖1中所示之監視攝影機系統中的伺服器之概略性構成作展示之圖。
[圖9]圖9,係為對於圖1中所示之監視攝影機系統中的終端裝置(行動終端)之概略性構成作展示之圖。
[圖10]圖10,係為對於圖1中所示之監視攝影機系統中的終端裝置(閱覽PC)之概略性構成作展示之圖。
[圖11]圖11,係為對於圖1中所示之監視攝影機系 統的動作之其中一例作展示之概略圖。
[圖12]圖12,係為對於其中一個實施形態的第1變形例之監視攝影機之概略性構成作展示之圖。
[圖13]圖13,係為對於其中一個實施形態的第2變形例之監視攝影機之概略性構成作展示之圖。
[圖14]圖14,係為對於其中一個實施形態的第3變形例之監視攝影機之概略性構成作展示之圖。
在先前技術之監視攝影機系統中,由於係以baseline profile來進行動作資料之保存,因此,會有起因於容量之壓縮而導致影像劣化、或者是在可變編碼率的情況時係會有於瞬間性的動作中而產生影像之紊亂的情形等,在架構本身而言係已出現了瓶頸。
另一方面,在將baseline profile之動畫資料轉換為high profile並作保存的構成中,雖然係成為能夠進行最適化後的資料保存,但是,由於係使用成為記錄器之伺服器的CPU資源來進行轉換,因此,係有著會使系統的成本增大的傾向。
又,從攝影機而來之串流輸出,由於係被限定於baseline profile,因此,若是對於網路而連接複數台的攝影機,則流量會增大,並產生對於網路設計和機器之負擔。
〔實施形態〕
以下所說明之實施形態,係為對於上述事態作考慮所進行者,其目的,係在於提供一種能夠取得即時之影像並且能夠並不對於伺服器造成負擔地而進行最適化之資料保存的監視攝影機系統。
實施形態之第1態樣之監視攝影機系統,係具備有:監視攝影機;和透過網路而被與前述監視攝影機作連接之伺服器,前述監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。
若依據此種態樣,則由於監視攝影機之編碼部,係將未加工之影像資料,編碼為包含有雙方向預測框間圖框(B圖框)之動畫資料並送訊至伺服器處,因此,係成為能夠並不對於伺服器造成負擔地而進行最適化之資料保存。又,在網路上所流動的資料量係大幅度地變小,而能夠降低網路流量。藉由此,係能夠降低對於網路設計和機器之負擔,並使網路機器長壽化。又,係成為能夠對於網路而連接複數台的攝影機。
又,若依據此種態樣,則由於包含有雙方向預測框間圖框(B圖框)之動畫資料的編碼,係並非為使 用伺服器之CPU資源來進行,而是在監視攝影機之內部來進行,因此,係能夠降低伺服器的負擔並降低對系統所耗費的成本。又,由於伺服器之負擔係被降低,因此,係能夠使一台的伺服器之監視攝影機的收容台數增加。
又,若依據此種態樣,則由於從監視攝影機所送訊的動畫資料係包含有雙方向預測框間圖框(B圖框),因此,係必然會有所延遲,但是,由於現場影像產生部係根據並不存在有延遲之未加工的影像資料來作成即時之影像資料並送訊至伺服器處,因此,伺服器係成為能夠取得即時之影像,而不會對於作為監視攝影機系統的必須要件之即時性的閱覽產生任何的損害。
實施形態之第2態樣的監視攝影機系統,係在上述第1態樣之監視攝影機系統中,具備有下述特徵:亦即是,前述編碼部,係將前述動畫資料以串流方式來送訊至前述伺服器處。
實施形態之第3態樣之監視攝影機系統,係在上述第1態樣之監視攝影機系統中,具備有下述特徵:亦即是,前述編碼部,係從前述動畫資料來以GOP單位而以攝影時刻順序來作成分割資料並保存在記憶體中,並在每次從前述伺服器而受理分割資料要求時,從前述記憶體而將分割資料1個1個地對於前述伺服器作傳輸,前述伺服器,係將從前述監視攝影機所接收的分割資料以攝影時刻順序來作結合而作成動畫資料。
實施形態之第4態樣之監視攝影機系統,係 在上述第1~第3態樣之任一者之態樣的監視攝影機系統中,具備有下述特徵:亦即是,前述現場影像產生部,係在每次從前述伺服器而受理現場畫像要求時,從前述未加工之影像資料來切出即時之靜止畫像資料並送訊至前述伺服器處。
實施形態之第5態樣之監視攝影機系統,係在上述第1~第3態樣之任一者之態樣的之監視攝影機系統中,具備有下述特徵:亦即是,前述現場影像產生部,係將前述未加工之影像資料,編碼為並未包含有前述雙方向預測框間圖框之即時之動畫資料,並以串流方式來送訊至前述伺服器處。
實施形態之第6態樣之監視攝影機系統,係在上述第1~第3態樣之任一者之態樣的監視攝影機系統中,具備有下述特徵:亦即是,前述現場影像產生部,係以預先所制定了的快照(snapshot)時間間隔,而反覆進行從前述未加工之影像資料來切出即時之靜止畫像資料並送訊至前述伺服器處一事。
實施形態之第7態樣之監視攝影機系統,係在上述第4或第6態樣之監視攝影機系統中,具備有下述特徵:亦即是,前述伺服器,係具備有:一次影像保存部,係將從前述監視攝影機所接收的靜止畫像資料保存於記憶裝置中;和現場畫像送訊部,係將前述靜止畫像資料作為現場畫像而送訊至透過網路所連接了的終端裝置處;和倒帶現場畫像送訊部,係若是從前述終端裝置而受理從 現場畫像起之倒帶要求,則從前述記憶裝置而取得從前一次所送訊了的靜止畫像資料起之一定時間之量的過去之時間點之靜止畫像資料,並作為倒帶現場畫像而送訊至前述終端裝置處;和快轉現場畫像送訊部,係若是從前述終端裝置而受理從倒帶現場畫像起之快轉要求,則從前述記憶裝置而取得從前一次所送訊了的靜止畫像資料起之一定時間之量的未來之時間點之靜止畫像資料,直到到達現在時間點之靜止畫像資料為止,並作為快轉現場畫像而送訊至前述終端裝置處。
若依據此種態樣,則當正在終端裝置處而顯示現場畫像時,當使用者發現到漏看等的情況時,藉由從終端裝置來對於伺服器送訊倒帶要求,在終端裝置處係能夠直接回溯到過去而進行確認,又,藉由從終端裝置來對於伺服器送訊快轉要求,係能夠以快轉來對於從過去起直到現在的時間點之期間作確認。
實施形態之第8態樣之監視攝影機系統,係在上述第1~第7態樣之任一者之態樣的監視攝影機系統中,具備有下述特徵:亦即是,其中,前述伺服器,係具備有:二次影像保存部,係將從前述監視攝影機所接收的動畫資料,因應於關連於在前述編碼部中之編碼的延遲而進行時間調整並保存在記憶裝置中。
若依據此種態樣,則雖然從監視攝影機所送訊之動畫資料係會起因於在編碼部處之編碼而必然性地有所延遲,但是,由於在記憶裝置處係以因應於延遲時間而 進行了時間調整的狀態來作保存,因此,伺服器,當從終端裝置而受理了對於時刻有所特定之過去之動作資料之播放要求的情況時,係能夠從記憶裝置而將所被要求的時刻之動作資料正確地抽出並送訊至終端裝置處。
實施形態之第9態樣之監視攝影機,係為透過網路而被與伺服器作連接之監視攝影機,其特徵為,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。
實施形態之第10態樣之伺服器,係透過網路而被與監視攝影機作連接,其特徵為:前述監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處,前述伺服器,係具備有:一次影像保存部,係將從前述監視攝影機所接收的即時之影像資料保存於記憶裝置中;和二次影像保存部,係將從前述監視攝影機所接收的動畫資料,因應於關連於在前述編碼部中之編碼的延遲而進行時間調 整並保存在前述記憶裝置中。
以下,參考所添附之圖面,針對實施形態之具體例作詳細說明。另外,在各圖中,對於具備有同等之功能的構成要素,係附加相同之元件符號,而並不重複進行相同元件符號之構成要素的詳細說明。
圖1,係為對於其中一個實施形態的監視攝影機系統10之概略性構成作展示之圖。
如同圖1中所示一般,監視攝影機系統10,係具備有監視攝影機400A、400B、和伺服器100、以及終端裝置200A、200B、300A~300C。監視攝影機400A、400B和伺服器100以及終端裝置200A、200B、300A~300C,係經由網路500而被相互作連接。
網路500,係可為有線網路和無線網路之任一者,對於網路之種類或形態係並不作限定。在本實施形態中,網路500,係由LAN或網際網路、Wi-Fi網路、3G/LTE網路等之通訊網所構成。
在本實施形態中,監視攝影機400A、400B,係在每次從伺服器100而受理現場畫像要求時,從攝影機影像來作成即時之靜止畫像資料並送訊至伺服器100處。伺服器100,係從監視攝影機400來取得靜止畫像並作積蓄,並在每次從終端裝置200A、200B、300A~300C而受理閱覽要求時,將閱覽用之靜止畫像送訊至終端裝置200A、200B、300A~300C處。在圖示之例中,監視攝影機400A、400B,係與攝像機100存在於相同的LAN之 內。監視攝影機400A、400B與伺服器100之間的通訊,係為TCP/IP方式,而能夠確實地進行攝影機影像之送受訊,信賴性係為高。
終端裝置200A、200B、300A~300C,係為由使用者所使用,並為智慧型手機、平板電腦等之行動終端、筆記型電腦或桌上型電腦等。終端裝置200A、200B、300A~300C,係能夠與伺服器100存在於相同的LAN內,又,若是經由路由器600來與網路500作連接,則亦可經由網際網路來與伺服器100作連接。
在以下的說明中,係會有對於監視攝影機400A、400B附加元件符號400來統籌作表現的情形。又,係會有對於作為行動終端之終端裝置200A、200B附加元件符號200,並對於作為閱覽PC之終端裝置300A~300C附加元件符號300,來統籌作表現的情形。
接著,針對監視攝影機400之構成作說明。圖2,係為對於監視攝影機400的概略構成作展示之圖。
如同圖2中所示一般,監視攝影機400,係具備有攝像部401、和編碼部402、和現場影像產生部403、以及網路介面404等之通訊控制部。此些之各部401~404,係被一體性地收容在相同之框體405中。
在圖示之例中,攝像部401,係具備有鏡頭4011、和對於透過鏡頭4011所受光了的影像作攝像之影像資料受訊部4012、和基於攝像結果而產生未加工之影像資料(亦被表現為RAW資料等)的RAW資料產生部 4013。攝像部401之構成,係為與先前技術之監視攝影機相同者,故省略詳細之說明。
編碼部402,係被與攝像部401作連接,並將藉由攝像部401所產生的未加工之影像資料(RAW資料),編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框(B圖框)之動畫資料,並經由網路介面404來送訊至伺服器100處。在本實施形態中,編碼部402,係將動畫資料以串流方式(亦稱作streaming方式)來送訊至伺服器100處。
圖3,係為對於編碼部402之概略性內部構成作展示之區塊圖。
如同圖3中所示一般,編碼部402,係具備有控制電路4021、和圖框內壓縮區塊4022、和圖框間壓縮區塊4023、和可變長度編碼壓縮/圖框重新排序區塊4024、以及記憶體4025。
控制電路4021,係進行壓縮參數之設定等的各區塊之控制。圖框內壓縮區塊4022,係進行由圖框內之空間性相關關係所致的資訊壓縮(1個畫面內之資料壓縮)。圖框間壓縮區塊4023,係進行由前後之圖框間之時間性相關關係所致的資訊壓縮。可變長度編碼壓縮/圖框重新排序區塊4024,係藉由對於出現頻率為高之資料分配較短的碼,而將資訊作壓縮(熵編碼),並且對於編碼後的圖框資料之輸出的順序作重新排序。記憶體4025,係為了產生雙方向預測框間圖框(B圖框),而積 蓄複數(在圖示之例中係為5個圖框)之圖框資料。
圖4,係為用以對於在編碼部402處的輸出圖框之延遲與重新排序作說明之圖。
如同圖4中所示一般,編碼部402,係將RAW資料,編碼為包含有可單獨進行解碼並且為在每一定之時間所作成的框內圖框(I圖框)和參照過去的圖框並在框內圖框之間而被作複數之作成的預測框間圖框(P圖框)以及參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框(B圖框)之動畫資料。於此,雙方向預測框間圖框(B圖框),若是預測框間圖框(P圖框)並未確定,則係並無法產生。因此,包含雙方向預測框間圖框(B圖框)之high profile輸出,相較於並未包含雙方向預測框間圖框(B圖框)之baseline profile輸出,直到進行輸出為止的延遲時間係為長,並且係有必較進行圖框之重新排序。由於延遲時間係為長,因此,在編碼部402處,係設置有用以將該期間之圖框作保持的記憶體4025。
圖5,係為用以對於編碼部402的原理性之動作作說明之圖。
如同圖5中所示一般,編碼部402,係針對依序被輸入之RAW資料中的最初之圖框資料,而直接進行圖框內壓縮(空間性資訊壓縮)(步驟S41)。另一方面,編碼部402,針對第2張之後的圖框資料,首先,係將前後之圖框的圖框內壓縮展開(步驟S42),並在對該 些作參照而進行了圖框間壓縮(時間性資訊壓縮)之後(步驟S43),進行圖框內壓縮(空間性資訊壓縮)(步驟S41)。之後,編碼部402,係對於被作了圖框內壓縮之圖框資料,而進行由碼之出現頻率所致之壓縮(熵編碼)以及重新排序,並進行輸出(步驟S44)。
圖6,係為對於編碼部402的硬體構成之其中一例作展示之區塊圖。
在圖6所示之例中,編碼部402,係具備有編碼LSI410、和介面區塊411A、411B。編碼LSI410,係為進行high profile之編碼的硬體,並包含有控制電路4021、和圖框內壓縮區塊4022、和圖框間壓縮區塊4023、和可變長度編碼壓縮/圖框重新排序區塊4024(參照圖3)。又,在圖示之例中,編碼LSI410,係於內部包含有記憶體4025。介面區塊411A、411B,係當資料之輸入輸出與LSI之輸入輸出為相異的情況時,進行轉換。
作為編碼LSI410,具體而言,例如係使用有SOCIONEXT公司之內藏有H.264編譯對應記憶體之編譯器LSI MB86M0x。於先前技術中,此種編碼LSI410,由於係產生B圖框,因此係必然性地會產生延遲,故而,在其之性質上,係為被利用在電視、硬碟錄影機、個人電腦等之搭載數位播送之錄影功能的桌上型機器或者是適用於智慧型手機和平板電腦製品之攜帶用關連機器中者,就本案發明者所知,係尚未存在有被利用於監視攝影機中的例子。
另外,在圖6所示之例中,記憶體4025係被內藏於編碼LSI410中,但是,係並不被限定於此,亦可如同圖7中所示一般,使記憶體4025被外接於編碼LSI410處。
又,編碼部402之硬體構成,係並不被限定於如同圖6以及圖7中所示一般之使用編碼LSI410所安裝的態樣,亦可為使用微電腦和軟體所安裝的態樣。
回到圖2,現場影像產生部403,係被與攝像部401作連接,並根據並不存在有延遲之未加工的影像資料(RAW資料)來作成即時之影像資料並送訊至伺服器100處。在本實施形態中,現場影像產生部403,係在每次從伺服器100而受理現場畫像要求時,根據並不存在有延遲之未加工的影像資料(RAW資料)來作成即時之靜止畫像資料(例如,直接切出),並作為現場畫像而經由網路介面404來送訊至伺服器100處。另外,在本說明書中之所謂「現場畫像」,係指代表即時之攝影機影像的1枚之靜止畫像。
接著,針對伺服器100之構成作說明。圖8,係為對於伺服器100的概略構成作展示之圖。
如同圖8中所示一般,伺服器100,係具備有:具備著伴隨著身為快閃記憶體之記憶體102的CPU101和裝置驅動器等之控制、演算裝置;和具備著DRAM等之主記憶裝置和硬碟等之輔助記憶裝置之記憶裝置110;和網路介面104等之通訊控制裝置;和作為顯示 裝置之顯示器103;和包含鍵盤105以及滑鼠106等之輸入裝置。
在記憶裝置110中,係被儲存有一次影像資料夾111、和二次影像資料夾112、和程式113、和作業系統114、和認證用資料庫及環境設定資料夾(未圖示)等。
在一次影像資料夾111中,係保存有從監視攝影機400所接收的即時之影像資料。在本實施形態中,在一次影像資料夾111中,從監視攝影機400所接收的即時之靜止畫像資料係被依序作保存。在二次影像資料夾112中,係將從監視攝影機400所接收的動畫資料,在各預先所制定的保存單位(例如10分鐘)處作為1個的檔案來作保存。
程式113,通常,係被儲存在記憶裝置110之輔助記憶裝置中,於實行時係被載入至主記憶裝置中。在認證用資料庫中,係記憶有ID、密碼、各監視攝影機400和終端裝置200、300之埠編號與IP位址等,在並不具有IP位址的行動終端200的情況時,係記憶有個體辨識編號(UID)等。在環境設定資料夾中,係預先記憶有各監視攝影機400之影像取得時序、各監視攝影機400之關連於在編碼部402處的編碼之延遲時間等。
在本實施形態中,伺服器100,係為了使伺服器與終端裝置成為一體並使自身亦發揮作為顯示攝影機影像的終端裝置之功能,又或是為了進行維修和管理,而具 備有作為顯示裝置之顯示器103、和作為輸入裝置之鍵盤105與滑鼠106。當在伺服器109處並不需要進行攝影機影像之顯示的情況時,係亦可並不具備作為顯示裝置之終端功能。
伺服器100,係藉由使CPU101將程式113載入至記憶體102中並實行,而實現能夠進行從監視攝影機400而來之攝影機影像的取得以及對於終端裝置200、300之攝影機影像的送出之電腦之功能。CPU101,係為被搭載於通常之電腦中的演算處理裝置,而實行各種程式並進行各種控制等。
伺服器100,係可為1台的伺服器,亦可為由複數之伺服器所成之伺服器群。例如,針對二次影像資料夾112,係亦可將在經過一定期間(例如24小時)之後的動畫資料之保存目標,設為被設置在與從監視攝影機400而取得動畫資料的伺服器相異之其他伺服器處之二次影像資料夾112。藉由將並不會頻繁進行播放的過去之動畫資料之保存目標設為其他的場所,係能夠降低伺服器100之負擔,並成為能夠在同一網路上對於更多台數之攝影機進行監視。
程式113,係為用以使電腦實現將從監視攝影機400所接收的動畫資料因應於關連於在編碼部402中之編碼的延遲而進行時間調整並保存在二次影像資料夾112中的二次影像保存功能之程式。伺服器100,係藉由使CPU101將程式113載入至記憶體102中並實行,而作為 將從監視攝影機400所接收的動畫資料因應於關連於在編碼部402中之編碼的延遲而進行時間調整並保存在二次影像資料夾112中的二次影像保存部來起作用。
又,程式113,係為用以使電腦實現將從監視攝影機400所接收的靜止畫像資料例如於預先所制定的閱覽期間(例如24小時)中而保存在一次影像資料夾111中的一次影像保存功能之程式。伺服器100,係藉由使CPU101將程式113載入至記憶體102中並實行,而作為將從監視攝影機400所接收的靜止畫像資料例如於預先所制定的閱覽期間中而保存在一次影像資料夾111中的一次影像保存部來起作用。另外,靜止畫像資料之閱覽期間(於一次影像資料夾111中之保存期間),係並不被限定於預先作了制定的態樣,亦可成為因應於該時間點之記憶裝置110之空餘容量來適宜作設定者。
又,程式113,係為用以使電腦實現受理從終端裝置200、300而來之攝影機影像的播放要求之攝影機影像播放要求受理功能、將被保存在一次影像資料夾111中之最新的靜止畫像資料作為現場畫像來送訊至終端裝置200、300處之現場畫像送訊功能之程式。伺服器100,係藉由使CPU101將程式113載入至記憶體102中並實行,而作為若是從終端裝置200、300而受理攝影機影像播放要求則將被保存在一次影像資料夾111中之最新的靜止畫像資料作為現場畫像來送訊至終端裝置200、300處之現場畫像送訊部來起作用。
又,程式113,係為用以使電腦實現受理從終端裝置200、300而來之從現場畫像起之倒帶要求的倒帶要求受理功能、若是受理從現場畫像起之倒帶要求則從一次影像資料夾111來取得從前一次所送訊了的靜止畫像資料起之一定時間之量的過去之時間點之靜止畫像並作為倒帶現場畫像而送訊至終端裝置200、300處之倒帶現場畫像送訊功能、受理從終端裝置200、300而來之從倒帶現場畫像起之快轉要求的快轉要求受理功能、若是受理從倒帶現場畫像起之快轉要求則從一次影像資料夾111來取得從所送訊了的靜止畫像資料起之一定時間之量的未來之時間點之靜止畫像直到到達現在時間點之靜止畫像資料為止並作為快轉現場畫像而送訊至終端裝置200、300處之快轉現場畫像送訊功能之程式。伺服器100,係藉由使CPU101將程式113載入至記憶體102中並實行,而作為若是從終端裝置200、300而受理從現場畫像起之倒帶要求則從一次影像資料夾111來取得從前一次所送訊了的靜止畫像資料起之一定時間之量的過去之時間點之靜止畫像並作為倒帶現場畫像而送訊至終端裝置200、300處之倒帶現場畫像送訊部、和若是從終端裝置200、300而受理從倒帶現場畫像起之快轉要求則從一次影像資料夾111來取得從前一次所送訊了的靜止畫像資料起之一定時間之量的未來之時間點之靜止畫像直到到達現在時間點之靜止畫像資料為止並作為快轉現場畫像而送訊至終端裝置200、300處之快轉現場畫像送訊部,來起作用。
又,程式113,係為用以使電腦實現從終端裝置200、300而受理過去之動畫資料的播放之過去動畫播放受理功能、將所受理了的過去之動畫資料從二次影像資料夾112中抽出並將所抽出了的動畫資料送訊至終端裝置200、300處之過去動畫送訊功能之程式。
又,程式113,係為用以使電腦實現進行與1或複數台之監視攝影機400之間的連接之監視攝影機連接功能、進行與1或複數台之終端裝置200、300之間的連接之終端裝置連接功能之程式。
在本實施形態中,監視攝影機400與伺服器100之間之連接,係藉由TCP/IP方式來進行,為了特定出應進行連接之監視攝影機400,係先藉由在伺服器100側處所設定了的使用者ID與密碼來進行認證,之後進行攝影機影像之取得等的要求。終端裝置200、300與伺服器100之間之連接,亦係藉由TCP/IP方式來進行,並先藉由使用者ID與密碼來進行認證而確認終端裝置200、300為在伺服器100中有所登錄的終端裝置,之後再進行攝影機影像之送訊。認證,係以由伺服器100上之認證資料庫所致之認證為理想。
就算是終端裝置200、300和監視攝影機400並非存在於相同之LAN內,若是經由路由器600而藉由網路500來作連接,則係藉由所連接的路由器600之IP位址和被分配至各者處之埠編號,來進行特定。在藉由網際網路而作連接時,兩者之間的路由器600之埠編號係被 設為「有效」。在並不具有IP位址的行動終端200的情況時,係利用UID。
在本實施形態中,從監視攝影機400所對於伺服器100之動畫資料之送訊,係藉由TCP/IP基礎之RTSP(即時串流協定)來進行。在本實施形態中,動畫資料係使用H.264之high profile來進行壓縮並作送訊,但是,係亦可使用H.265等之下一世代編碼的high profile。
接著,針對作為行動終端之終端裝置200之構成作說明。圖9,係為對於終端裝置200的概略構成作展示之圖。
如同圖9中所示一般,終端裝置200,係具備有:具備著伴隨著記憶體202的CPU201和裝置驅動器等之控制、演算裝置;和該記憶裝置210;和進行資料的送受訊等之通訊控制裝置(未圖示);和作為顯示裝置之顯示器204;和操作鍵或觸控面板等之輸出裝置(未圖示)。在記憶裝置210中,係被儲存有用以進行畫像顯示之程式213和作業系統214。
終端裝置200,例如係為智慧型手機等之行動電話等,並藉由使CPU201將程式213載入至記憶體202中並實行,而實現能夠進行從伺服器100所送訊而來之攝影機影像的顯示之電腦之功能。CPU201,係為被搭載於通常之行動終端中的演算處理裝置,而實行各種程式並進行各種控制等。
接著,針對作為閱覽PC之終端裝置300之構成作說明。圖10,係為對於終端裝置300的概略構成作展示之圖。
如同圖10中所示一般,終端裝置300,係具備有:具備著伴隨著記憶體302的CPU301和裝置驅動器等之控制、演算裝置;和具備著DRAM等之主記憶裝置和硬碟等之輔助記憶裝置之記憶裝置310;和網路介面304等之通訊控制裝置;和作為顯示裝置之顯示器303;和包含鍵盤305以及滑鼠306等之輸出裝置。在記憶裝置310中,係被儲存有用以進行畫像顯示之程式313和作業系統314。
終端裝置300,例如係為桌上型電腦或筆記型電腦、平板終端等,並藉由使CPU301將程式313載入至記憶體302中並實行,而實現能夠進行從伺服器100所送訊而來之攝影機影像的顯示之電腦之功能。CPU301,係為被搭載於通常之PC的演算處理裝置,而實行各種程式並進行各種控制等。
用以進行畫像顯示之程式213、313,係為用以使電腦實現進行與伺服器100之間的連接之伺服器連接功能、對於伺服器100而要求關連於具有監視權限之1或複數台之監視攝影機400的攝影機影像之播放之攝影機影像播放要求功能、將從伺服器100所送訊而來之攝影機影像作顯示的攝影機影像顯示功能之程式。
伺服器100,係在開始與位於本地(local)環 境中之監視攝影機400之間之連接時,藉由使用有IP位址以及埠編號之連接來特定出連接對象,並藉由使用者ID和密碼來進行認證。伺服器100,在與位於遠端環境中之監視攝影機400之間之連接時,係藉由使用路由器600之埠傳輸(亦被表現為通訊埠轉發等),來使用全域(global)IP位址以及埠編號而特定出連接對象。伺服器100,在開始與終端裝置200之間之連接時,由於係根據使用有UID之終端固有資訊來特定出終端裝置200,因此係藉由使用者ID和密碼之認證以及終端固有資訊之一致,而成為能夠進行攝影機影像之顯示。
在本實施形態中,伺服器100和作為閱覽PC之終端裝置300,係均作為個人電腦而被構成,並具備有通常之個人電腦所具備之時脈功能等。作為行動終端之終端裝置200以及監視攝影機400,亦係具備有時脈功能等。
接著,參考圖11,針對由此種構成所成之監視攝影機系統10之動作的其中一例作說明。圖11,係為對於監視攝影機系統10的動作之其中一例作展示之概略圖。另外,在圖11所示之例中,雖係對於作為行動終端之終端裝置200有所圖示,但是,就算是置換為作為閱覽PC之終端裝置300,其動作亦為相同。
參考圖11,首先,伺服器100,係對於監視攝影機400而藉由TCP/IP方式來要求連接。監視攝影機400,係藉由1或複數台之監視攝影機所構成,監視攝影 機400與伺服器100係藉由使用者ID以及密碼來進行認證。伺服器100之認證用資料庫係被作參照,若是認證成功,則監視攝影機400與伺服器100係成為連接狀態。
接著,伺服器100,係對於監視攝影機400而要求攝像攝影機影像並送訊。監視攝影機400,若是受理從伺服器100而來之影像要求,則係連續攝像攝影機影像,並將進行攝像所得到的未加工之影像資料(RAW資料)編碼為H.264之high profile之動畫資料。更詳細而言,監視攝影機400,係將RAW資料,編碼為包含有可單獨進行解碼並且為在每一定之時間所作成的框內圖框(I圖框)和參照過去的圖框並在框內圖框之間而被作複數之作成的預測框間圖框(P圖框)以及參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框(B圖框)之動畫資料。之後,監視攝影機400,係將編碼後的動畫資料以串流方式來送訊至伺服器100處。
又,伺服器100,係以預先所制定了的快照(snapshot)時間間隔,而反覆對於監視攝影機400送訊現場畫像要求。快照時間間隔,係預先任意地作設定,例如係為1/10秒、1秒、3秒或60秒等。在以下所說明的實施例中,係將快照時間間隔設為1秒。監視攝影機400,係在每次從伺服器100而受理現場畫像要求時,根據未加工的影像資料(RAW資料)來作成(切出)即時之靜止畫像資料,並作為現場畫像而送訊至伺服器100處。
伺服器100,若是從監視攝影機400而藉由串流方式取得動畫資料,則係在各保存單位(例如10分鐘)處作為1個的檔案來保存在二次影像資料夾112中。藉由此,過去之動畫資料的播放,係從動畫資料之保存後(例如10分鐘後)起而成為可受理。
在本實施形態中,伺服器100,係將從監視攝影機400所接收的動畫資料,因應於關連於在編碼部402中之編碼的延遲而進行時間調整並保存在二次影像資料夾112中。例如,當從監視攝影機400所送訊而來的動畫資料係相對於被與動畫資料同時地作送訊的即時之靜止畫像資料而產生有1分鐘之延遲的情況時,伺服器100,例如係對於在9:51:00~10:00:59處所接收的動畫資料,附加9:50:00~9:59:59之時間戳記並作為1個的檔案而保存在二次影像資料夾112中。
又,伺服器100,若是從監視攝影機400而取得作為現場畫像之靜止畫像資料,則係作為在預先所制定的閱覽期間(例如24小時)中而可能會有被頻繁地觀看的可能性之高解析度之資料,而保存在一次影像資料夾111中,若是超過了閱覽期間,則係從一次影像資料夾111而刪除。
終端裝置200,係受理由使用者所致之對於伺服器100之連接要求。若是對於伺服器100之連接要求被輸入至終端裝置200處,則終端裝置200,係對於伺服器100而藉由TCP/IP方式來要求連接。在行動終端200的 情況時,係亦會有部分性地使用行動電話獨自之通訊協定來進行連接的情形。終端裝置200,係藉由1或複數台之終端裝置所構成,終端裝置200與伺服器100係藉由使用者ID以及密碼來進行認證。伺服器100之認證用資料庫係被作參照,當終端裝置200之認證登錄並未被進行的情況時,係發行僅作初次使用之編碼鍵並進行登錄,在登錄時,使用者ID和密碼係被發行。若是認證成功,則終端裝置200與伺服器100係成為連接狀態。
終端裝置200,係受理由使用者所致之攝影機一覽要求。終端裝置200,若是被輸入有攝影機一覽要求,則係對於伺服器100送訊攝影機一覽要求。伺服器100,若是受訊攝影機一覽要求,則係對關於進行了要求的終端裝置200所能夠作監視之監視攝影機400之權限資訊作確認。伺服器100,係將具有權限的攝影機一覽資料送訊至終端裝置200處。終端裝置200,係將所受訊了的攝影機一覽資料顯示在顯示器203處,並受理關於應進行現場播放之監視攝影機的從使用者而來之選擇。
終端裝置200,若是被輸入有從使用者而來之監視攝影機的選擇,則係針對所選擇了的監視攝影機,而對於伺服器100要求攝影機影像之現場播放。伺服器100,若是受理現場播放之要求,則將從所選擇了的監視攝影機400而取得並保存在一次影像資料夾111中之最新的靜止畫像資料,作為現場畫像來送訊至終端裝置200處。
終端裝置200,係將從伺服器100所接收的靜止畫像資料,作為現場畫像而顯示在顯示器203處。除了直到經由使用者而將監視攝影機之選擇解除為止之後、或者是被進行有現場播放以外之選擇的期間中以外,終端裝置200,係以與在監視攝影機400處之快照時間間隔相同的時間間隔來反覆進行現場播放之要求。
終端裝置200,係在現場畫像之顯示中,受理從使用者而來之倒帶要求的輸入。終端裝置200,若是由使用者而輸入有倒帶要求,則係對於伺服器100要求倒帶畫像。
伺服器100,若是受理倒帶畫像之要求,則係將從前一次所送訊了的靜止畫像資料起之一定時間之量的過去之時間點之靜止畫像資料從一次影像資料夾111來抽出,並作為倒帶現場畫像來送訊至終端裝置200處。在本實施例中,由於係將一定量的過去之時間點作為1秒之量的過去之時間點,而現場畫像係身為在每一秒鐘所取得的靜止畫像資料,因此,當最初之倒帶要求被作了輸入時,係將前1枚的靜止畫像資料送訊至終端裝置200處。
在倒帶正被作選擇的期間中、亦即是在倒帶現場畫像的顯示中,終端裝置200,係對於伺服器100,而於每一定之時間處要求倒帶現場畫像。此時之一定之時間,係為較現場畫像之要求間隔而更短的一定之時間,例如係為每0.2秒。故而,在終端裝置200處,係成為於每0.2秒處,被顯示有從1秒、1秒之前之攝影機影像的靜 止畫像資料所作成的倒帶現場畫像。
進而,終端裝置200,係在倒帶現場畫像之顯示中,受理從使用者而來之快轉要求的輸入。終端裝置200,若是被輸入有快轉要求,則係對於伺服器100要求快轉現場畫像。伺服器100,若是受理快轉現場畫像之要求,則係將從前一次所送訊了的靜止畫像資料起之一定時間之量的未來之時間點之靜止畫像資料從一次影像資料夾111來抽出,並作為快轉現場畫像來送訊至終端裝置200處。在本實施例中,由於係將一定量的未來之時間點作為1秒之量的未來之時間點,而現場畫像係身為在每一秒鐘所取得的畫像,因此,當最初之快轉要求被作了輸入時,係將從作為倒帶現場畫像的現在正被作顯示之靜止畫像資料起的未來1秒之靜止畫像資料作送訊。
在快轉正被作選擇的期間中、亦即是在快轉現場畫像的顯示中,終端裝置200,係對於伺服器100,而於每一定之時間處要求快轉現場畫像。此時之一定之時間,係為較現場畫像之要求間隔而更短的一定之時間,例如係為每0.2秒。故而,在終端裝置200處,係成為於每0.2秒處,被顯示有從1秒、1秒之後之攝影機影像的靜止畫像資料所作成的快轉現場畫像。若是快轉現場畫像一直到達了現在的時間點之畫像,則係切換為現場畫像顯示,快轉係結束。
代替現場播放,亦可同樣地進行過去之動畫資料的播放。伺服器100,係代替靜止畫像資料,而將所 受理了的過去之動畫資料從二次影像資料夾112中抽出,並將所抽出了的動畫資料送訊至終端裝置200處而使其作顯示。
靜止畫像資料,係身為畫像,而為能夠連續地對於終端裝置200進行送訊之較小的大小,又,動畫資料,由於亦係藉由high profile而被作編碼,而在身為動畫的同時其之資料量亦為極小,因此,係為能夠對於終端裝置200作送訊之較小的大小。又,不論是靜止畫像資料或者是動畫資料,均能夠進行倒帶、從倒帶起之播放和快轉,便利性係為高。
另外,如同於上亦有所提及一般,在先前技術之監視攝影機系統中,由於係以baseline profile來進行動作資料之保存,因此,會有起因於容量之壓縮而導致影像劣化、或者是在可變編碼率的情況時係會有於瞬間性的動作中而產生影像之紊亂的情形等,在架構本身而言係已出現了瓶頸。
又,在將baseline profile之動畫資料轉換為high profile並作保存的構成中,雖然係成為能夠進行最適化後的資料保存,但是,由於係使用成為記錄器之伺服器的CPU資源來進行轉換,因此,係有著會使系統的成本增大的傾向。
又,從攝影機而來之串流輸出,由於係被限定於baseline profile,因此,若是對於網路而連接複數台的攝影機,則流量會增大,並產生對於網路設計和機器之 負擔。
相對於此,若依據本實施形態,則由於監視攝影機400之編碼部402,係將未加工之影像資料,編碼為包含有雙方向預測框間圖框(B圖框)之動畫資料並送訊至伺服器處,因此,係成為能夠並不對於伺服器造成負擔地而進行最適化之資料保存。又,在網路500上所流動的資料量係大幅度地變小,而能夠降低網路流量。藉由此,係能夠降低對於網路設計和機器之負擔,並使網路機器長壽化。又,係成為能夠對於網路500而連接複數台的監視攝影機400。
又,若依據本實施形態,則由於包含有雙方向預測框間圖框(B圖框)之動畫資料的編碼,係並非為使用伺服器100之CPU資源來進行,而是在監視攝影機400之內部來進行,因此,係能夠降低伺服器100的負擔並降低對系統所耗費的成本。又,由於伺服器100之負擔係被降低,因此,係能夠使一台的伺服器之監視攝影機400的收容台數增加。
又,若依據本實施形態,則由於從監視攝影機400所送訊的動畫資料係包含有雙方向預測框間圖框(B圖框),因此,係必然會有所延遲,但是,由於現場影像產生部403係根據並不存在有延遲之未加工的影像資料來作成即時之影像資料並送訊至伺服器100處,因此,伺服器100係成為能夠取得即時之影像,而不會對於作為監視攝影機系統的必須要件之即時性的閱覽產生任何的損 害。
又,若依據本實施形態,則雖然從監視攝影機400所送訊之動畫資料係會起因於在編碼部402處之編碼而必然性地有所延遲,但是,由於在二次影像資料夾112處係以因應於延遲時間而進行了時間調整的狀態來作保存,因此,伺服器100,當從終端裝置200而受理了對於時刻有所特定之過去之動作資料之播放要求的情況時,係能夠從二次影像資料夾112而將所被要求的時刻之動作資料正確地抽出並送訊至終端裝置200處。
又,若依據本實施形態,則當正在終端裝置200處而顯示現場畫像時,當使用者發現到漏看等的情況時,藉由從終端裝置200來對於伺服器100送訊倒帶要求,在終端裝置200處係能夠直接回溯到過去而進行確認,又,藉由從終端裝置200來對於伺服器100送訊快轉要求,係能夠以快轉來對於從過去起直到現在的時間點之期間作確認。
另外,係可對於上述之實施形態而施加各種的變更。以下,參考圖面,針對變形之其中一例作說明。在以下之說明以及於以下之說明所使用的圖面中,針對能夠與上述之實施形態相同地來構成的部分,係使用與對於在上述之實施形態中所對應的部分而使用之元件符號相同的元件符號,並將重複之說明省略。
(第1變形例)
參考圖12,針對第1變形例作說明。圖12,係為對於第1變形例之監視攝影機400之概略性構成作展示之圖。
如同圖12中所示一般,在第1變形例中,監視攝影機400之編碼部402B,係在將藉由攝像部401所產生的未加工之影像資料(RAW資料)編碼為包含有B圖框之動畫資料(例如,H.264之high profile之動畫資料)之後,根據動畫資料,來以會使I圖框成為開頭之畫像的GOP單位(例如1秒之量)而依據攝影時刻順序來作成分割資料並保存在記憶體4025中。
另外,GOP(Group Of Picture),係為由1個以上的I圖框(框內圖框)和複數之P圖框(預測框間圖框)以及B圖框(雙方像預測框間圖框)所成的圖框群。編碼部402,例如,係若是從動畫資料而檢測出I圖框,則係將從其開始而直到檢測出下一個的I圖框之前之圖框為止,作為1個的分割資料。於此情況,1個的分割資料係成為包含1個的I圖框。另外,1個的分割資料係亦可包含2個以上的I圖框。
又,監視攝影機400之編碼部402B,係在每次從伺服器100而受理分割資料要求時,從記憶體4025而將分割資料1個1個地傳輸至伺服器100處。
另一方面,伺服器100,係反覆進行對於監視攝影機400送訊分割資料要求並接收分割資料的操作。之後,伺服器100,係將從監視攝影機400所接收的分割資 料依據攝影時刻順序來作結合,並在各保存單位(例如10分鐘)處作成1個的檔案之動畫資料,而保存在二次影像資料夾112中。
若依據如同上述一般之第1變形例,則例如當在雲端環境中設置伺服器100並從遠端地點之監視攝影機400來將影像資料傳輸至伺服器100處時,由於係分割成能夠在之後復原成原本的影像之容量為小之單位,並一面避免網路500之壅塞一面進行送訊,因此,係成為能夠進行在雲端環境下的安定之攝影機影像之收集。
(第2變形例)
參考圖13,針對第2變形例作說明。圖13,係為對於第2變形例之監視攝影機400之概略性構成作展示之圖。
如同圖13中所示一般,在第2變形例中,監視攝影機400之現場影像產生部403B,係將未加工之影像資料(RAW資料),編碼為由並不包含雙方向預測框間圖框(B圖框)之即時的動畫資料(亦即是可單獨進行解碼並且為在每一定之時間所作成的框內圖框(I圖框))、和參照過去的圖框並在框內圖框之間而被作複數之作成的預測框間圖框(P圖框),所構成的bascline profile之動畫資料,並以串流方式來送訊至伺服器100處。
就算是依據第2變形例,亦係與上述之實施 形態同樣的,由於係使監視攝影機400之編碼部402將未加工之影像資料編碼為包含有雙方向預測框間圖框(B圖框)之動畫資料並送訊至伺服器100處,因此,係成為能夠並不對於伺服器100施加負擔地而進行最適化之資料保存,並且,由於係使現場影像產生部403根據並不存在有延遲之未加工的影像資料來作成即時之影像資料並送訊至伺服器100處,因此,伺服器100係成為能夠取得即時之影像,而不會對於作為監視攝影機系統的必須要件之即時性的閱覽產生任何的損害。
另外,若依據第2變形例,則由於監視攝影機400係將即時之影像以串流方式來送出,因此,相較於上述之實施形態,雖然會有使網路500之流量增加的可能性,但是若是身為本地(local)環境則不會造成問題。
(第3變形例)
參考圖14,針對第3變形例作說明。圖14,係為對於第3變形例之監視攝影機400之概略性構成作展示之圖。
如同圖14中所示一般,在第3變形例中,監視攝影機400之現場影像產生部403C,係以在計時器409等之中所預先制定了的快照(snapshot)時間間隔(例如,每一秒),而反覆進行從未加工之影像資料(RAW資料)來切出即時之靜止畫像資料並送訊至伺服器100處的操作。在從監視攝影機400所對於伺服器100之靜止畫 像資料之傳輸中,係使用有FTP、HTTP等之TCP/IP基礎之傳輸方式。
就算是依據第3變形例,亦係與上述之實施形態同樣的,由於係使監視攝影機400之編碼部402將未加工之影像資料編碼為包含有雙方向預測框間圖框(B圖框)之動畫資料並送訊至伺服器100處,因此,係成為能夠並不對於伺服器100施加負擔地而進行最適化之資料保存,並且,由於係使現場影像產生部403根據並不存在有延遲之未加工的影像資料來作成即時之影像資料並送訊至伺服器100處,因此,伺服器100係成為能夠取得即時之影像,而不會對於作為監視攝影機系統的必須要件之即時性的閱覽產生任何的損害。
另外,上述之實施形態以及各個的變形例之記載還有圖面之開示,係均僅為用以對於在申請專利範圍中所記載之發明作說明的其中一例,而並非為藉由上述之實施形態以及各個的變形例之記載還有圖面之開示來對於在申請專利範圍中所記載之發明作限定。上述之實施形態以及各個的變形例之構成要素,在不脫離發明之主旨的範圍內,係可任意作組合。

Claims (10)

  1. 一種監視攝影機系統,其特徵為,係具備有:監視攝影機;和透過網路而被與前述監視攝影機作連接之伺服器,前述監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。
  2. 如申請專利範圍第1項所記載之監視攝影機系統,其中,前述編碼部,係將前述動畫資料以串流方式來送訊至前述伺服器處。
  3. 如申請專利範圍第1項所記載之監視攝影機系統,其中,前述編碼部,係從前述動畫資料來以GOP單位而以攝影時刻順序來作成分割資料並保存在記憶體中,並在每次從前述伺服器而受理分割資料要求時,從前述記憶體而將分割資料1個1個地對於前述伺服器作傳輸,前述伺服器,係將從前述監視攝影機所接收的分割資料以攝影時刻順序來作結合而作成動畫資料。
  4. 如申請專利範圍第1~3項中之任一項所記載之監 視攝影機系統,其中,前述現場影像產生部,係在每次從前述伺服器而受理現場畫像要求時,從前述未加工之影像資料來切出即時之靜止畫像資料並送訊至前述伺服器處。
  5. 如申請專利範圍第1~3項中之任一項所記載之監視攝影機系統,其中,前述現場影像產生部,係將前述未加工之影像資料,編碼為並未包含有前述雙方向預測框間圖框之即時之動畫資料,並以串流方式來送訊至前述伺服器處。
  6. 如申請專利範圍第1~3項中之任一項所記載之監視攝影機系統,其中,前述現場影像產生部,係以預先所制定了的快照(snapshot)時間間隔,而反覆進行從前述未加工之影像資料來切出即時之靜止畫像資料並送訊至前述伺服器處一事。
  7. 如申請專利範圍第4項或第6項所記載之監視攝影機系統,其中,前述伺服器,係具備有:一次影像保存部,係將從前述監視攝影機所接收的靜止畫像資料保存於記憶裝置中;和現場畫像送訊部,係將前述靜止畫像資料作為現場畫像而送訊至透過網路所連接了的終端裝置處;和倒帶現場畫像送訊部,係若是從前述終端裝置而受理從現場畫像起之倒帶要求,則從前述記憶裝置而取得從前一次所送訊了的靜止畫像資料起之一定時間之量的過去之時間點之靜止畫像資料,並作為倒帶現場畫像而送訊至前 述終端裝置處;和快轉現場畫像送訊部,係若是從前述終端裝置而受理從倒帶現場畫像起之快轉要求,則從前述記憶裝置而取得從前一次所送訊了的靜止畫像資料起之一定時間之量的未來之時間點之靜止畫像資料,直到到達現在時間點之靜止畫像資料為止,並作為快轉現場畫像而送訊至前述終端裝置處。
  8. 如申請專利範圍第1~7項中之任一項所記載之監視攝影機系統,其中,前述伺服器,係具備有:二次影像保存部,係將從前述監視攝影機所接收的動畫資料,因應於關連於在前述編碼部中之編碼的延遲而進行時間調整並保存在記憶裝置中。
  9. 一種監視攝影機,係為透過網路而被與伺服器作連接之監視攝影機,其特徵為,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處。
  10. 一種伺服器,係透過網路而被與監視攝影機作連接,其特徵為: 前述監視攝影機,係具備有:攝像部,係對於所受光了的影像進行攝像並產生未加工的影像資料;和編碼部,係將前述未加工之影像資料,編碼為包含有參照過去的圖框與未來的圖框之雙方而作成的雙方向預測框間圖框之動畫資料,並送訊至前述伺服器處;和現場影像產生部,係從前述未加工之影像資料來作成即時之影像資料,並送訊至前述伺服器處,前述伺服器,係具備有:一次影像保存部,係將從前述監視攝影機所接收的即時之影像資料保存於記憶裝置中;和二次影像保存部,係將從前述監視攝影機所接收的動畫資料,因應於關連於在前述編碼部中之編碼的延遲而進行時間調整並保存在前述記憶裝置中。
TW106106497A 2016-12-27 2017-02-24 監視攝影機系統 TW201824850A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016252729A JP2018107655A (ja) 2016-12-27 2016-12-27 監視カメラシステム
JP2016-252729 2016-12-27

Publications (1)

Publication Number Publication Date
TW201824850A true TW201824850A (zh) 2018-07-01

Family

ID=62707129

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106106497A TW201824850A (zh) 2016-12-27 2017-02-24 監視攝影機系統

Country Status (3)

Country Link
JP (1) JP2018107655A (zh)
TW (1) TW201824850A (zh)
WO (1) WO2018123078A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114760480A (zh) * 2021-01-08 2022-07-15 华为技术有限公司 图像处理方法、装置、设备及存储介质
JP7531677B1 (ja) 2023-10-13 2024-08-09 セーフィー株式会社 システム、方法、及びプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4148673B2 (ja) * 2001-11-20 2008-09-10 株式会社日立製作所 映像配信システム
JP4431010B2 (ja) * 2002-10-31 2010-03-10 株式会社日立国際電気 映像データ保存方法及び映像データ保存システム
JP4104577B2 (ja) * 2004-05-21 2008-06-18 三菱電機株式会社 画像伝送装置、画像伝送方法、伝送システム、及び映像監視システム
JP2012090172A (ja) * 2010-10-21 2012-05-10 Canon Inc 監視カメラ、監視カメラの制御方法及びネットワークカメラシステム
JP5854194B2 (ja) * 2011-08-31 2016-02-09 株式会社Nexpoint 監視カメラシステム及び監視方法
WO2015118664A1 (ja) * 2014-02-07 2015-08-13 日立マクセル株式会社 画像伝送装置と画像受信装置、並びに、これらを利用した監視カメラシステム、テレビ会議システム、そして、車載カメラシステム

Also Published As

Publication number Publication date
JP2018107655A (ja) 2018-07-05
WO2018123078A1 (ja) 2018-07-05

Similar Documents

Publication Publication Date Title
US10009630B2 (en) System and method for encoding video content using virtual intra-frames
JP5854194B2 (ja) 監視カメラシステム及び監視方法
JP6238255B2 (ja) 監視カメラシステムによる監視方法及び動画分割装置
US10356302B2 (en) Transmission apparatus, reception apparatus, transmission and reception system, transmission apparatus control method, reception apparatus control method, transmission and reception system control method, and program
US20110255590A1 (en) Data transmission apparatus and method, network data transmission system and method using the same
US20200037001A1 (en) Method and apparatus for generating a composite video stream from a plurality of video segments
TW201824850A (zh) 監視攝影機系統
JP6466638B2 (ja) 動き変化量に応じて撮影動画像のフレームを間引く端末、システム、プログラム及び方法
JP6284172B1 (ja) 画面画像転送方法、画像復元方法、画面画像転送システム、画像復元システム、画面画像転送プログラム、画像復元プログラム、画像圧縮方法、画像圧縮システム、画像圧縮プログラム
WO2018003685A1 (ja) 画像圧縮方法、画像復元方法、画像圧縮装置、画像復元装置、画像圧縮プログラムプロダクト及び画像復元プログラムプロダクト
JP2015056788A (ja) 画像監視システムおよび画像送信方法
JP6357188B2 (ja) 監視カメラシステム及び監視カメラデータ保存方法
JP6363130B2 (ja) 監視カメラシステムにおける監視方法、差分画像作成方法、画像復元方法、及び差分検出装置
JP5896438B2 (ja) 監視カメラシステム及び監視方法
JP2018110404A (ja) 画面画像転送方法、画像復元方法、画面画像転送システム、画像復元システム、画面画像転送プログラム、画像復元プログラム、画像圧縮方法、画像圧縮システム、画像圧縮プログラム
TW201534125A (zh) 遠端視訊監控系統及方法