TWI554083B - 影像處理方法及其攝影機 - Google Patents

影像處理方法及其攝影機 Download PDF

Info

Publication number
TWI554083B
TWI554083B TW104137691A TW104137691A TWI554083B TW I554083 B TWI554083 B TW I554083B TW 104137691 A TW104137691 A TW 104137691A TW 104137691 A TW104137691 A TW 104137691A TW I554083 B TWI554083 B TW I554083B
Authority
TW
Taiwan
Prior art keywords
image
frame
frames
ideal
group
Prior art date
Application number
TW104137691A
Other languages
English (en)
Other versions
TW201720151A (zh
Inventor
吳仁智
Original Assignee
晶睿通訊股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 晶睿通訊股份有限公司 filed Critical 晶睿通訊股份有限公司
Priority to TW104137691A priority Critical patent/TWI554083B/zh
Priority to CN201610850120.XA priority patent/CN106713842B/zh
Application granted granted Critical
Publication of TWI554083B publication Critical patent/TWI554083B/zh
Priority to US15/348,924 priority patent/US10880562B2/en
Publication of TW201720151A publication Critical patent/TW201720151A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]

Description

影像處理方法及其攝影機
本發明關於一種影像處理方法及其攝影機,尤指一種根據影像資料串流之初始影像群組的起點影像訊框之訊框大小與非起點影像訊框之訊框大小的比例關係獲得影像資料串流之接續影像群組之理想訊框張數的影像處理方法及其攝影機。
一般而言,用來進行影像監視之攝影裝置(如網路攝影機(IP camera))係採用影像資料串流傳輸之方式以將其所擷取的影像實時傳輸至控制端(如影像控管主機等)而達到即時監控之目的。在實際應用中,為了縮減影像資料串流之整體資料量以降低影像資料串流在傳輸時所佔用的頻寬而節省影像資料串流傳輸所需時間,傳輸至控制端的影像資料串流通常會被分成數個影像群組(Group of Pictures, GOP),而每個影像群組則是由單張節點訊框(Intra frame, I-frame))與多張預測訊框(Predicted frame, P-frame)(或雙向預測訊框(Bi-directional Predicted frame, B-frame))所組成,不同於節點訊框保留完整影像資料,由於預測訊框(或雙向預測訊框)僅保留部分影像資料,因此,採用上述訊框組成方式的影像資料串流即可縮減其整體資料量而產生影像壓縮效果。
在上述影像壓縮方法中,影像資料串流中所具有的預測訊框(或雙向預測訊框)的張數越多代表影像資料串流之整體資料量越小,其係越有利於節省影像資料串流傳輸所需時間,然而,當相鄰節點訊框之間所插入之預測訊框(或雙向預測訊框)的張數過多時,往往會產生影像資料串流之影像清晰度不夠、在傳輸期間出現資料封包丟失情況時容易破圖,以及影像回播耗時(因影像解碼軟體不易快速搜尋到節點訊框)的問題。雖然上述問題係可透過減少影像群組之預測訊框(或雙向預測訊框)張數的方式來解決,但此方式又會導致影像資料串流之整體資料量相對應地增加而造成影像資料串流傳輸延遲的問題。
另一方面,在實際應用中,若是攝影裝置所擷取到之影像中有較多物體在移動(即影像訊框大小變動幅度較大)時,通常會希望影像資料串流中的影像群組具有較低的訊框張數,藉以使影像資料串流能夠具有較高的影像清晰度以及較快的影像回播速度,但若是攝影裝置所擷取到之影像中大多為靜止物體(即影像訊框大小變動幅度較小)時,則又會希望影像資料串流中的影像群組具有較高的訊框張數,藉以縮減影像資料串流之整體資料量而進一步地節省影像資料串流傳輸所需時間。
綜上所述,如何根據影像資料串流之影像內容針對影像資料串流中之影像群組的訊框張數進行最佳化設定係已成為攝影裝置在影像資料串流傳輸上的重要課題之一。
本發明之目的之一在於提供一種根據影像資料串流之初始影像群組的起點影像訊框之訊框大小與非起點影像訊框之訊框大小的比例關係獲得影像資料串流之接續影像群組之理想訊框張數的影像處理方法及其攝影機,以解決上述之問題。
根據本發明之一實施例,本發明之影像處理方法包含接收一影像資料以及根據該影像資料輸出一影像資料串流,該影像資料串流包含一初始影像群組以及一接續影像群組,該初始影像群組包含一第一起點影像訊框與至少一第一非起點影像訊框,該接續影像群組包含一第二起點影像訊框與至少一第二非起點影像訊框。本發明之影像處理方法另包含根據該初始影像群組於一預設張數區間或一預設時間區間內之該第一起點影像訊框之訊框大小(frame size)與該至少一第一非起點影像訊框之訊框大小的一比例關係,獲得該接續影像群組之一第一理想訊框張數,以及根據該第一理想訊框張數設定該接續影像群組之訊框張數。
根據本發明之另一實施例,本發明之攝影機包含一影像擷取單元、一處理單元,以及一傳輸單元。該影像擷取單元用以擷取一外部場景之影像。該處理單元連接於該影像擷取單元,用來接收一影像資料且根據該影像資料產生對應該外部場景之影像的一影像資料串流,該影像資料串流包含一初始影像群組以及一接續影像群組,該初始影像群組包含一第一起點影像訊框與至少一第一非起點影像訊框,該接續影像群組包含一第二起點影像訊框與至少一第二非起點影像訊框,並且根據該初始影像群組於一預設張數區間或一預設時間區間內之該第一起點影像訊框之訊框大小與該至少一第一非起點影像訊框之訊框大小的一比例關係獲得該接續影像群組之一第一理想訊框張數,以及用來根據該第一理想訊框張數設定該接續影像群組之訊框張數。該傳輸單元連接於該處理單元,用來傳輸該影像資料串流。
綜上所述,本發明係採用根據影像資料串流之影像內容針對影像資料串流中之影像群組的訊框張數進行最佳化設定的影像處理方法,以達到影像群組在影像訊框大小變動幅度較大時可具有較低訊框張數之設定且在影像訊框大小變動幅度較小時可具有較高訊框張數之設定的目的,從而產生攝影機可在影像資料串流以期望壓縮效率進行傳輸並且影像資料串流中所包含之影像群組具有符合影像訊框大小變動幅度之理想訊框張數的情況下進行影像資料串流之傳輸的效果。
關於本發明之優點與精神可以藉由以下的實施方式及所附圖式得到進一步的瞭解。
請參閱第1圖,其為根據本發明之一實施例所提出之一攝影機10之功能方塊示意圖,如第1圖所示,攝影機10包含一影像擷取單元12、一處理單元14,以及一傳輸單元16。影像擷取單元12係可較佳地為用來進行影像監視之攝影裝置(如網路攝影機(IP camera))以用來擷取外部場景(如停車場)之影像。處理單元14連接於影像擷取單元12,以用來產生對應上述影像擷取單元12所擷取之外部場景之影像的影像資料串流,並且用來根據期望壓縮效率以及影像群組在預設張數區間(如30張)或預設時間區間(如1秒)內之起點影像訊框(如節點訊框)之訊框大小與非起點影像訊框(如預測訊框或雙向預測訊框)之訊框大小的比例關係對影像群組進行訊框張數之設定,藉以產生使影像資料串流中之影像群組的訊框張數最佳化的效果。傳輸單元16係連接於處理單元14,以用來傳輸(例如以有線或無線傳輸方式)影像資料串流至控制端(如影像控管主機等)而達到即時監控之目的。
攝影機10所採用之影像處理方法說明如下,請參閱第1圖以及第2圖,第2圖為根據本發明之一實施例所提出之影像處理方法之流程圖,本發明之影像處理方法包含下列步驟。
步驟200:   影像擷取單元12擷取外部場景之影像。
步驟202:   處理單元14接收影像資料且根據影像資料產生對應影像擷取單元12所擷取之外部場景之影像的影像資料串流。
步驟204:   處理單元14根據期望壓縮效率以及初始影像群組在預設張數區間內之起點影像訊框之訊框大小與非起點影像訊框之訊框大小的比例關係,獲得接續影像群組之理想訊框張數。
步驟206:   處理單元14根據理想訊框張數設定接續影像群組之訊框張數。
步驟208:   傳輸單元16進行影像資料串流之傳輸。
以下係針對上述步驟進行詳細之描述,首先,在步驟200中,攝影機10可開啟影像擷取單元12針對外部場景進行影像擷取,以供後續處理單元14進行影像處理之用。接下來,處理單元14係可接收影像資料且根據影像資料產生對應影像擷取單元12所擷取之影像的影像資料串流(步驟202),並針對其所產生之影像資料串流的影像群組進行訊框張數之設定(步驟204),此處所提及之影像資料可以是未編碼的原始影像資料,也可以是經過編碼的影像資料,所述之影像資料係可由影像擷取單元、攝影機、網路或相關儲存裝置提供,但不以此為限,若是處理單元14所接收到之影像資料係為經過編碼的影像資料,則在產生影像資料串流之前,處理單元14需先針對其所接收到之影像資料進行解碼以將其還原為未編碼的原始影像資料,以利後續影像處理方法之執行。在此實施例中,其係先以處理單元14根據影像資料串流之初始影像群組(即影像資料串流中的第一個影像群組)之影像訊框大小進行接續影像群組(即影像資料串流中的第二個影像群組)之訊框張數的設定為例進行步驟204之說明,也就是說,在步驟204中,處理單元14係可較佳地根據期望壓縮效率(可為系統預設值或是由使用者自行設定)以及影像資料串流之初始影像群組在預設張數區間(如30張,但不受此限,其亦可為預設時間區間,如1秒)內之起點影像訊框之訊框大小與至少一非起點影像訊框之訊框大小的比例關係,獲得影像資料串流中之接續影像群組的理想訊框張數。
更詳細地說,在一般常見情況下,當影像擷取單元12所擷取到之影像中有較多物體在移動(代表影像訊框大小變動幅度較大,也就是非起點影像訊框之平均訊框大小會較大)時,影像群組中的起點影像訊框之訊框大小除以非起點影像訊框之平均訊框大小的比例值會隨著影像訊框大小變動幅度越大而越小(即兩者呈負相關),再加上由上述可知,影像群組之訊框張數多寡係較佳地與影像訊框大小變動幅度呈負相關,故可得知影像群組中的起點影像訊框之訊框大小除以非起點影像訊框之平均訊框大小的比例值係可較佳地與影像群組之訊框張數多寡呈正相關,因此本發明之處理單元14係可較佳地選用影像資料串流中之初始影像群組在預設張數區間內的起點影像訊框之平均訊框大小除以非起點影像訊框之平均訊框大小的比例值,作為設定影像資料串流中之接續影像群組之訊框張數的依據,更進一步地說,在透過實務經驗與相關公式推導後,本發明之處理單元14係可較佳地根據下列公式獲得影像資料串流之接續影像群組之理想訊框張數。
I GOP=E(IP ratio-1)/(1-E)。
其中I GOP代表理想訊框張數,E代表期望壓縮效率(0<E<1),IP ratio代表影像群組於預設張數區間內之起點影像訊框之平均訊框大小S i除以非起點影像訊框之平均訊框大小S p的比例值(即S i/S p)。
舉例來說,在影像資料串流之訊框速率(frame per second, FPS)為每秒30張影像訊框、期望壓縮效率E設定為0.9、初始影像群組由1張節點訊框以及29張預測訊框所組成、初始影像群組在預設張數區間為30張內之節點訊框之平均訊框大小S i(此處代表的是單張節點訊框之訊框大小)除以初始影像群組之預測訊框之平均訊框大小S p(此處代表的是29張預測訊框之平均訊框大小)的比例值等於10的條件下,處理單元14係可根據上述公式計算出影像資料串流之接續影像群組的理想訊框張數等於81,並據以將接續影像群組之訊框張數設定81張。如此一來,在同時考量期望壓縮效率與影像群組於預設張數區間內之起點影像訊框的平均訊框大小除以非起點影像訊框的平均訊框大小之比例值的情況下,傳輸單元16即可以初始影像群組由1張節點訊框以及29張預測訊框所組成與接續影像群組由1張節點訊框以及80張預測訊框的設定進行影像資料串流之初始影像群組與接續影像群組的傳輸(步驟208),藉以產生根據影像資料串流之影像內容針對影像資料串流中之影像群組的訊框張數進行最佳化設定的效果,從而達到攝影機10可在影像資料串流以期望壓縮效率進行傳輸並且影像資料串流中所包含之影像群組具有符合影像訊框大小變動幅度之理想訊框張數的情況下進行影像資料串流之傳輸的目的。至於針對影像資料串流中之其他後續影像群組之理想訊框張數的設定(例如根據影像資料串流中的第二個影像群組之訊框大小進行影像資料串流中的第三個影像群組之理想訊框張數的設定),其係可根據上述說明類推,於此不再贅述。
需注意的是,理想訊框張數之取得係可不限於處理單元14根據上述公式即時計算而得之方式,舉例來說,在另一實施例中,在不考慮期望壓縮效率的情況下,本發明係可採用預先建立起點影像訊框與非起點影像訊框比例值IP ratio與理想訊框張數I GOP之關係表並藉由查表得知理想訊框張數I GOP之設計,也就是根據實務經驗直接建立起點影像訊框與非起點影像訊框比例值IP ratio與理想訊框張數I GOP之關係表以取代上述使用由期望壓縮效率E以及起點影像訊框與非起點影像訊框比例值IP ratio所建立之公式獲取理想訊框張數的設計,藉以提升處理單元14在獲得理想訊框張數上的運算效率,上述起點影像訊框與非起點影像訊框比例值IP ratio與理想訊框張數I GOP之關係表係可如下列表1所示,但不受此限。 表1 <TABLE border="1" borderColor="#000000" width="_0002"><TBODY><tr><td> 起點影像訊框與非起點影像訊框比例值IP<sub>ratio</sub></td><td> 理想訊框張數I<sub>GOP</sub></td></tr><tr><td> 0≦IP<sub>ratio</sub><5 </td><td> 30 </td></tr><tr><td> 5≦IP<sub>ratio</sub><8 </td><td> 60 </td></tr><tr><td> 8≦IP<sub>ratio</sub><11 </td><td> 90 </td></tr></TBODY></TABLE>
更進一步地,為了避免起點影像訊框與非起點影像訊框比例值IP ratio在比例值範圍邊界前後跳動時會導致理想訊框張數I GOP跳動的情況發生(例如起點影像訊框與非起點影像訊框比例值IP ratio在4.9~5.1間變化時,理想訊框張數I GOP會30和60間跳動),處理單元14可選擇性地在判斷出起點影像訊框與非起點影像訊框比例值IP ratio有連續跨過二階以上的變化時,才會針對理想訊框張數I GOP進行更新,為此,本發明可更進一步地細分表1中所列的起點影像訊框與非起點影像訊框比例值IP ratio的範圍,其係可如下列表2所示,但不受此限。 表2 <TABLE border="1" borderColor="#000000" width="_0003"><TBODY><tr><td> 起點影像訊框與非起點影像訊框比例值IP<sub>ratio</sub></td><td> 理想訊框張數I<sub>GOP</sub></td></tr><tr><td> 0≦IP<sub>ratio</sub><3 </td><td> 15 </td></tr><tr><td> 3≦IP<sub>ratio</sub><5 </td><td> 30 </td></tr><tr><td> 5≦IP<sub>ratio</sub><7 </td><td> 45 </td></tr><tr><td> 7≦IP<sub>ratio</sub><8 </td><td> 60 </td></tr></TBODY></TABLE>
也就是說,假設處理單元14計算出目前起點影像訊框與非起點影像訊框比例值IP ratio等於4.9,則由表2可知,處理單元14可獲得理想訊框張數I GOP等於30,而再經過下一輪30張訊框的計算後,假設處理單元14可計算出起點影像訊框與非起點影像訊框比例值IP ratio等於5.1,則由表2可知,處理單元14可獲得理想訊框張數I GOP等於45,此時,由於處理單元14所獲得的理想訊框張數I GOP僅跨過一階的變化,故處理單元14不進行理想訊框張數I GOP的更新。接下來,當再經過下一輪30張訊框的計算後,假設處理單元14可計算出起點影像訊框與非起點影像訊框比例值IP ratio等於7.1,則由表2可知,處理單元14可獲得理想訊框張數I GOP等於60,此時,由於處理單元14所獲得的理想訊框張數I GOP已跨過兩階的變化,故處理單元14可將理想訊框張數I GOP更新為60。
除此之外,處理單元14係可進一步地採用當其所獲得之理想訊框張數介於其所設定之張數區間內(可為系統預設值或由使用者自行定義)時將其所設定之張數區間之最大值直接設定為理想訊框張數的設計,以避免影像群組之訊框張數變動太過頻繁的情況發生。舉例來說,若是處理單元14所獲得之對應影像資料串流之第三、四、五、六個影像群組的理想訊框張數分別為10張、25張、35張、55張,且其所設定之第一張數區間以及第二張數區間分別為0~30以及30~60,則處理單元14就會將第三、四、五、六個影像群組之訊框張數分別設定為30張、30張、60張、60張,以取代直接將第三、四、五、六個影像群組之訊框張數分別設定為10張、25張、35張、55張而造成影像群組之訊框張數變動太過頻繁的設計。
另外,為了使上述針對影像群組之訊框張數所進行的更新設定能夠更加地順暢且更加即時地符合影像資料串流之影像內容(也就是影像群組在影像訊框大小變動幅度較大時可具有較低訊框張數之設定,且在影像訊框大小變動幅度較小時可具有較高訊框張數之設定),處理單元14亦可進一步地採用比較其所獲得之理想訊框張數大小的方式來進行影像群組之訊框張數的設定,舉例來說,若是處理單元14所獲得之對應影像資料串流之第二個影像群組(即接續影像群組)的理想訊框張數為60張,且根據第二影像群組在預設張數區間內之起點影像訊框之訊框大小與至少一非起點影像訊框之訊框大小的比例關係,獲得之第三個影像群組(即下一接續影像群組)的理想訊框張數小於60張時,此處以30張為例(代表影像資料串流在第二個影像群組以及第三個影像群組中之影像訊框大小變動幅度有逐漸上升之趨勢,也就是相對於第二個影像群組,在第三個影像群組所對應之影像中有較多物體在移動),則處理單元14停止產生第二個影像群組之非起點影像訊框且直接開始產生第三個影像群組之起點影像訊框以及非起點影像訊框,也就是將第三個影像群組之訊框張數設定為30張並在停止產生第二個影像群組之非起點影像訊框後直接產生出第三個影像群組的1張起點影像訊框以及29張非起點影像訊框(如第3圖所示),從而即時地提升影像資料串流之影像清晰度與影像回播速度。   另一方面,若是處理單元14所獲得之對應影像資料串流之第二個影像群組的理想訊框張數為60張,且根據第二影像群組在預設張數區間內之起點影像訊框之訊框大小與至少一非起點影像訊框之訊框大小的比例關係,所獲得之第三個影像群組的理想訊框張數大於或等於60張時,此處以90張為例(代表影像資料串流在第二個影像群組以及第三個影像群組中之影像訊框大小變動幅度有逐漸下降之趨勢,也就是相對於第二個影像群組,在第三個影像群組所對應之影像中有較多靜止物體),則處理單元14係可將第三個影像群組之訊框張數設定為90張,並且待第二個影像群組之1張起點影像訊框以及59張非起點影像訊框全數依序產出之後,在依序產生出第三個影像群組的1張起點影像訊框以及89張非起點影像訊框(如第4圖所示),但不受此限,處理單元14亦可選擇性地採用直接將第二個影像群組之訊框張數改設定為90張以取代原本所設定的60張(如第5圖所示),藉以即時地縮減影像資料串流之整體資料量而進一步地節省影像資料串流傳輸所需時間。   需注意的是,上述根據前後影像群組之理想訊框張數大小之比較結果來進行影像群組之訊框張數設定的方式係可繼續應用在影像資料串流之後續影像群組中,也就是說,處理單元14係可持續地根據目前影像群組在預設張數區間(如30張)內(或預設時間區間(如1秒)內)之起點影像訊框之訊框大小與非起點影像訊框之訊框大小的比例關係獲得下一影像群組之理想訊框張數,且根據目前影像群組與下一影像群組之理想訊框張數的比較結果對目前影像群組與下一影像群組的訊框張數進行設定,藉以確保處理單元14針對後續影像群組之訊框張數所進行的更新設定均可更加地順暢且更加即時地符合影像資料串流之影像內容,其相關描述係可根據上述說明類推,故於此不再贅述。   綜上所述,本發明係採用根據影像資料串流之影像內容針對影像資料串流中之影像群組的訊框張數進行最佳化設定的影像處理方法,以達到影像群組在影像訊框大小變動幅度較大時可具有較低訊框張數之設定且在影像訊框大小變動幅度較小時可具有較高訊框張數之設定的目的,從而產生攝影機可在影像資料串流以期望壓縮效率進行傳輸並且影像資料串流中所包含之影像群組具有符合影像訊框大小變動幅度之理想訊框張數的情況下進行影像資料串流之傳輸的效果。   以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
10‧‧‧攝影機
12‧‧‧影像擷取單元
14‧‧‧處理單元
16‧‧‧傳輸單元
IGOP‧‧‧理想訊框張數
E‧‧‧期望壓縮效率
IPratio‧‧‧起點影像訊框與非起點影像訊框比例值
Si、Sp‧‧‧平均訊框大小
200、202、204、206、208‧‧‧步驟
第1圖為根據本發明之一實施例所提出之攝影機之功能方塊示意圖。 第2圖為根據本發明之一實施例所提出之影像處理方法之流程圖。 第3圖為停止產生接續影像群組之非起點影像訊框且直接產生下一接續影像群組之起點影像訊框以及非起點影像訊框之示意圖。 第4圖為在接續影像群組之起點影像訊框以及非起點影像訊框全數依序產出後依序產生出下一接續影像群組的起點影像訊框以及非起點影像訊框之示意圖。 第5圖為根據下一接續影像群組之理想訊框張數設定接續影像群組之訊框張數之示意圖。
200、202、204、206、208‧‧‧步驟

Claims (13)

  1. 一種影像處理方法,其包含:接收一影像資料;根據該影像資料,輸出一影像資料串流,該影像資料串流包含一初始影像群組以及一接續影像群組,該初始影像群組包含一第一起點影像訊框與至少一第一非起點影像訊框,該接續影像群組包含一第二起點影像訊框與至少一第二非起點影像訊框;根據該初始影像群組於一預設張數區間或一預設時間區間內之該第一起點影像訊框之訊框大小(frame size)與該至少一第一非起點影像訊框之訊框大小的一比例關係,獲得該接續影像群組之一第一理想訊框張數,該初始影像群組於該預設張數區間或該預設時間區間內之該第一起點影像訊框之訊框大小與該至少一第一非起點影像訊框之訊框大小的該比例關係與該第一理想訊框張數呈正相關;以及根據該第一理想訊框張數設定該接續影像群組之訊框張數。
  2. 如請求項1所述之影像處理方法,其中該影像資料串流另包含一下一接續影像群組,該下一接續影像群組包含一第三起點影像訊框以及至少一第三非起點影像訊框,該影像處理方法另包含:根據該接續影像群組於該預設張數區間或該預設時間區間內之該第二起點影像訊框之訊框大小與該至少一第二非起點影像訊框之訊框大小的該比例關係獲得該下一接續影像群組之一第二理想訊框張數,該接續影像群組於該預設張數區間或該預設時間區間內之該第二起點影像訊框之訊框大小與該至少一第二非起點影像訊框之訊框大小的該比例關係與該第二理想訊框張數呈正相關; 其中當該第一理想訊框張數大於該第二理想訊框張數時,停止輸出該至少一第二非起點影像訊框,且根據該第二理想訊框張數設定該下一接續影像群組之訊框張數,並輸出該第三起點影像訊框以及該至少一第三非起點影像訊框。
  3. 如請求項2所述之影像處理方法,其中當該第一理想訊框張數小於或等於該第二理想訊框張數時,該影像處理方法更包含:根據該第一理想訊框張數設定該接續影像群組中的該第二起點影像訊框與該至少一第二非起點影像訊框之訊框張數,以及根據該第二理想訊框張數設定該下一接續影像群組中的該第三起點影像訊框與該至少一第三非起點影像訊框之訊框張數。
  4. 如請求項2所述之影像處理方法,其中當該第一理想訊框張數小於或等於該第二理想訊框張數時,該影像處理方法更包含:以該第二理想訊框張數取代該第一理想訊框張數,且根據該第二理想訊框張數設定該接續影像群組中的該第二起點影像訊框與該至少一第二非起點影像訊框之訊框張數。
  5. 如請求項1所述之影像處理方法,其中當該第一理想訊框張數介於一張數區間內時,將該張數區間之一最大值設定為該第一理想訊框張數。
  6. 如請求項1所述之影像處理方法,更包含根據一期望壓縮效率以及該比例關係,獲得該第一理想訊框張數。
  7. 如請求項1所述之影像處理方法,其中該影像資料係為未經編碼之原始影像資料。
  8. 一種攝影機,其包含:一影像擷取單元,用以擷取一外部場景之影像;一處理單元,其連接於該影像擷取單元,用來接收一影像資料且根據該影像資料產生對應該外部場景之影像的一影像資料串流,該影像資料串流包含一初始影像群組以及一接續影像群組,該初始影像群組包含一第一起點影像訊框與至少一第一非起點影像訊框,該接續影像群組包含一第二起點影像訊框與至少一第二非起點影像訊框,並且根據該初始影像群組於一預設張數區間或一預設時間區間內之該第一起點影像訊框之訊框大小與該至少一第一非起點影像訊框之訊框大小的一比例關係獲得該接續影像群組之一第一理想訊框張數,以及用來根據該第一理想訊框張數設定該接續影像群組之訊框張數,該初始影像群組於該預設張數區間或該預設時間區間內之該第一起點影像訊框之訊框大小與該至少一第一非起點影像訊框之訊框大小的該比例關係與該第一理想訊框張數呈正相關;以及一傳輸單元,其連接於該處理單元,用來傳輸該影像資料串流。
  9. 如請求項8所述之攝影機,其中該影像資料串流另包含一下一接續影像群組,該下一接續影像群組包含一第三起點影像訊框以及至少一第三非起點影像訊框,且該處理單元根據該接續影像群組於該預設張數區間或該預設時間區間內之該第二起點影像訊框之訊框大小與該至少一第二非起點影像訊框之訊框大小的該比例關係獲得該下一接續影像群組之一第二理想訊框張數,該接續影像群組於該預設張數區間或該預設時間區間內之該第二起點影像訊框之訊框大小與該至少一第二非起點影像訊框之訊框大小的該比例關係與該第二理想訊框張數呈正相關,當該第一理想訊框張數大於該第二理想訊框張數時,該處理單元停止產生該至少一第二非起點影像訊框,且根據 該第二理想訊框張數設定該下一接續影像群組訊框張數,並產生出該第三起點影像訊框以及該至少一第三非起點影像訊框。
  10. 如請求項9所述之攝影機,其中當該第一理想訊框張數小於或等於該第二理想訊框張數時,該處理單元根據該第一理想訊框張數設定該接續影像群組中的該第二起點影像訊框與該至少一第二非起點影像訊框之訊框張數,以及根據該第二理想訊框張數設定該下一接續影像群組中的該第三起點影像訊框與該至少一第三非起點影像訊框之訊框張數。
  11. 如請求項9所述之攝影機,其中當該第一理想訊框張數小於或等於該第二理想訊框張數時,該處理單元以該第二理想訊框張數取代該第一理想訊框張數,且根據該第二理想訊框張數設定該接續影像群組中的該第二起點影像訊框與該至少一第二非起點影像訊框之訊框張數。
  12. 如請求項8所述之攝影機,其中當該第一理想訊框張數介於一張數區間內時,該處理單元將該張數區間之一最大值設定為該第一理想訊框張數。
  13. 如請求項8所述之攝影機,其中該處理單元更用來根據一期望壓縮效率以及該比例關係,獲得該第一理想訊框張數。
TW104137691A 2015-11-16 2015-11-16 影像處理方法及其攝影機 TWI554083B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW104137691A TWI554083B (zh) 2015-11-16 2015-11-16 影像處理方法及其攝影機
CN201610850120.XA CN106713842B (zh) 2015-11-16 2016-09-26 影像处理方法及其摄影机
US15/348,924 US10880562B2 (en) 2015-11-16 2016-11-10 Image processing method and camera thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW104137691A TWI554083B (zh) 2015-11-16 2015-11-16 影像處理方法及其攝影機

Publications (2)

Publication Number Publication Date
TWI554083B true TWI554083B (zh) 2016-10-11
TW201720151A TW201720151A (zh) 2017-06-01

Family

ID=57848305

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104137691A TWI554083B (zh) 2015-11-16 2015-11-16 影像處理方法及其攝影機

Country Status (3)

Country Link
US (1) US10880562B2 (zh)
CN (1) CN106713842B (zh)
TW (1) TWI554083B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI659647B (zh) 2017-11-21 2019-05-11 晶睿通訊股份有限公司 影像播放設備及其影像播放方法
EP3687176A1 (en) * 2019-01-22 2020-07-29 InterDigital CE Patent Holdings A client and a method for managing, at the client, a streaming session of a multimedia content

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW376621B (en) * 1998-01-20 1999-12-11 Ibm Dynamically determining group of picture size during encoding of video sequence
JP2002199398A (ja) * 2000-12-27 2002-07-12 Kddi Corp 可変ビットレート動画像符号化装置および記録媒体
US20080232468A1 (en) * 2007-03-21 2008-09-25 Mediatek Inc. Method and apparatus for adaptive gop structure determination
WO2011125286A1 (ja) * 2010-04-02 2011-10-13 パナソニック株式会社 無線通信装置及び無線通信方法
CN102223524A (zh) * 2010-04-13 2011-10-19 中兴通讯股份有限公司 一种三维小波视频编码帧分组方法及装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5835149A (en) * 1995-06-06 1998-11-10 Intel Corporation Bit allocation in a coded video sequence
GB2306833B (en) * 1995-10-30 2000-03-29 Sony Uk Ltd Video data compression
JP2005341248A (ja) * 2004-05-27 2005-12-08 Toshiba Corp ネットワーク型映像送信装置、ネットワーク型映像受信装置
JP4649318B2 (ja) * 2004-12-13 2011-03-09 キヤノン株式会社 画像符号化装置、画像符号化方法、プログラム及び記憶媒体
CN101202912A (zh) * 2007-11-30 2008-06-18 上海广电(集团)有限公司中央研究院 一种平衡码率和图像质量的码率控制方法
CN100581262C (zh) * 2008-05-23 2010-01-13 清华大学 基于ρ域的视频编码码率控制方法
US20110246603A1 (en) * 2008-09-05 2011-10-06 The Chinese University Of Hong Kong Methods and devices for live streaming using pre-indexed file formats
WO2010106670A1 (ja) * 2009-03-19 2010-09-23 富士通株式会社 画像符号化装置、画像符号化制御方法および画像符号化プログラム
CN101668197B (zh) * 2009-09-18 2011-11-09 浙江大学 一种基于线性模型的可伸缩性视频编码中的码率控制方法
CN101674472A (zh) * 2009-09-25 2010-03-17 上海大学 多视点视频编码的多级码率控制方法
CN101835040B (zh) * 2010-03-17 2012-07-04 天津大学 数字视频来源取证方法
CN102186084B (zh) * 2011-06-07 2013-07-31 东莞电子科技大学电子信息工程研究院 一种可伸缩视频编码svc的空间增强层码率控制实现方法
CN103634698B (zh) * 2012-08-21 2014-12-03 华为技术有限公司 视频流的帧类型检测、帧大小检测方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW376621B (en) * 1998-01-20 1999-12-11 Ibm Dynamically determining group of picture size during encoding of video sequence
JP2002199398A (ja) * 2000-12-27 2002-07-12 Kddi Corp 可変ビットレート動画像符号化装置および記録媒体
US20080232468A1 (en) * 2007-03-21 2008-09-25 Mediatek Inc. Method and apparatus for adaptive gop structure determination
WO2011125286A1 (ja) * 2010-04-02 2011-10-13 パナソニック株式会社 無線通信装置及び無線通信方法
CN102223524A (zh) * 2010-04-13 2011-10-19 中兴通讯股份有限公司 一种三维小波视频编码帧分组方法及装置

Also Published As

Publication number Publication date
CN106713842B (zh) 2019-07-02
CN106713842A (zh) 2017-05-24
TW201720151A (zh) 2017-06-01
US10880562B2 (en) 2020-12-29
US20170142431A1 (en) 2017-05-18

Similar Documents

Publication Publication Date Title
JP7053556B2 (ja) サーバにおいてマルチビットレートストリーミングメディアをアダプティブに提供するための方法及び装置
CN110248204B (zh) 一种直播缓存的处理方法、装置、设备和存储介质
US10785279B2 (en) Video encoding using starve mode
WO2019228078A1 (zh) 一种视频转码系统、方法、装置及存储介质
JP5421346B2 (ja) 高速チャンネル変更におけるユニキャストストリームの高速送信方法および装置
US8407747B1 (en) Adaptive trick play streaming
US20140104493A1 (en) Proactive video frame dropping for hardware and network variance
JP5227875B2 (ja) 動画像符号化装置
KR20150126860A (ko) 고속 전환을 위한 코덱 기법
JP2008507915A (ja) 映像圧縮のための符号器補助式フレーム速度アップコンバージョンのための方法及び装置
CN107770538B (zh) 一种检测场景切换帧的方法、装置和系统
WO2018059175A1 (zh) 视频码率处理方法和装置、存储介质及电子设备
US10142644B2 (en) Decoding frames
US20080320170A1 (en) Data communication apparatus and data communication method
US9319682B2 (en) Moving image encoding apparatus, control method therefor, and non-transitory computer readable storage medium
TWI554083B (zh) 影像處理方法及其攝影機
JP2016111699A5 (zh)
US9467691B2 (en) Video system for displaying image data, method and computer program
EP3915268A1 (en) A client and a method for managing, at the client, a streaming session of a multimedia content
JP2020022106A (ja) 情報処理装置、情報処理方法、及びプログラム
WO2021140768A1 (ja) 送信装置、送信方法
JP2013031038A (ja) 通信装置、映像取得方法、及び映像取得プログラム
TWI683572B (zh) 基於畫面動態資訊的視訊位元率傳輸控制方法
CN116055810A (zh) 音视频播放方法、装置、系统、电子设备及存储介质
JP2007329787A (ja) 画像符号化装置