TW200803518A - Method and apparatus for shot detection in video streaming - Google Patents

Method and apparatus for shot detection in video streaming Download PDF

Info

Publication number
TW200803518A
TW200803518A TW095138252A TW95138252A TW200803518A TW 200803518 A TW200803518 A TW 200803518A TW 095138252 A TW095138252 A TW 095138252A TW 95138252 A TW95138252 A TW 95138252A TW 200803518 A TW200803518 A TW 200803518A
Authority
TW
Taiwan
Prior art keywords
frame
selection
difference
metric
selection frame
Prior art date
Application number
TW095138252A
Other languages
English (en)
Inventor
Tao Tian
Vijayalakshmi R Raveendran
Gordon Kent Walker
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW200803518A publication Critical patent/TW200803518A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/142—Detection of scene cut or scene change
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Description

200803518 九、發明說明： 【發明所屬之技術領域】 本t明大體係關於多媒體資料處理，且更特定言之，係 關於基於拍攝偵測處理來對多媒體資料進行編碼。 【先前技術】 拍攝债測係關於確定一在一圖像組（G〇p)中之訊框何時 顯示出指示-場景變化已發生之資料。通常，在一 G0P 内，訊框在任何兩個或三個（或三個以上）鄰近訊框中可不 具有任何顯著的變化，或者可存在緩慢變化或快速變化。 S然’若有必要’該等場景變化分類取決於一特定應用可 被進一步細分為一較大等級的變化。 偵測拍攝或場景變化對於視頻之有效編碼很重要。通 常’當— GOP並未顯著地改變日夺，一在該G〇p之開始處且 後面為一定數量之預測訊框訊框可對該視頻進行充分 編碼以使得該視頻之隨後解碼及顯示視覺上可接受。然 而，當一場景正在改變或者突然或緩慢地改變時，可使用 額外的I訊框及較少的預測編碼（1>訊框及B訊框）來產生隨 後被解碼且視覺上可接受的結果。在拍攝價測及使用拍攝 侧結果之對應編碼中之改良可提高編碼效率且克服此項 技術中與GOP分割關聯之其他問題。 【發明内容】 本文中所描述的發明裝置及方法之每—者具有若干態 樣其中任-單-怨樣不能單獨對其所需的屬性負責。在 不限定本發明之範嘴的情況下’現將簡要地討論其較突出 115487.doc 200803518 的特性。在考慮該討論之後且尤其在閱讀題為"實施方式" 的部分之後，吾人將瞭解本發明之特性係如何提供關於多 媒體資料處理裝置及方法之改良的。 θ本發明提供一種處理多媒體資料之方法，該方法包含獲 #指示在複數個視頻訊框中之—選擇訊框與在時間上鄰近 該選擇訊框之訊框間的一差異之至少一個度量，該至少一 個度量包含與該選擇訊框及在時間上鄰近該選擇訊框1該 • $訊框關聯的雙向運動資訊及亮度差異資訊，基於該至少 -個度量來確定-與該選擇訊框關聯的拍攝事件基於 該拍攝事件來可調適地對該選擇訊框進行編碼。在一2態 樣中’獲得該至少一個度量句冬士士管、） 没里匕S δ十异该至少—個度量。若 該拍攝事件指示該選擇訊框為一突然場景變化，則該選擇 訊框可被可調適地編碼為一！訊框。若該拍攝事件指干$ 選擇訊框為包含一緩慢場景變化之複數個訊框之一部分： 則該選擇訊框可被編碼為一 ρ訊框或_Β訊框中之任一者。 _ m'樣中，若該拍攝事件指示該選擇訊框含有至少一 個相機閃光’則該選擇訊框可被識別為需要特殊處理。該 特殊處理之實例包括自視頻移除該選擇訊框且複製一在時 間上鄰近該選擇訊框之訊框且用該複製訊框來代替該選擇 訊框。在某些態樣中，該拍攝事件指示該選擇訊框包含一 突然場景變化、一緩慢場景變化之_部分或者至少一個相 機閃光。在某些態樣中，若該拍攝事件未指示該選擇訊框 包含突然場景變化、-缓慢場景變化之—部分或者至少一 個相機閃光’則可調適地編碼包含將該選擇訊框編碼=一 115487.doc 200803518 I訊框。 在另一態樣中，一種用於處理一多媒體資料之裝置包 括· 一運動補償器，其經組態以獲得指示在複數個視頻訊 框中之一選擇訊框與在時間上鄰近該選擇訊框之訊框之間 的差異之至少一個度量，該至少一個度量包含雙向運動 貧訊及亮度資訊；_拍攝分類器，其經組態以基於該至少 個度里來石霍定與該選擇訊框關聯的拍攝事件；及一編碼
器其纟二組恶以基於該拍攝事件來可調適地對該選擇訊框 進行編碼。 你力一態樣中 卜 —〜、^烁體買科炙裝置a括 於獲得指示在複數個讳^ 4 «uu視頻訊框中一選擇訊框與在時間上 近該選擇訊框之訊極之間的一差異之至少一個度量的 個度里包含與該選擇訊框及在時間上鄰近 4擇訊框之該等訊框關聯的雙向運動資訊及亮度差显 訊；用於基於該至少一個 〆、 ^ 又里來確定一與該選擇訊框關， ^ ^ ^ ^ , ，用於基於該拍攝事件來可調適地- 忒k擇汛框進行編碼的構件。 框為-突然場景 6亥拍攝事件指示該選擇1 該選擇… 調適編碼構件可包含用… ^擇況框編碼為η 拍；》重从此- 卞在另一恶樣中，若兮 拍攝事件扣不該選 σ 訊框之-部分，則対緩慢場景變化之複數令 、“茨Ύ调適編碼欉株 4 _碼為，框或—Β訊框中=:=將物 態樣中，該拍攝事件指 者的構件。在另— 光，且該可調適編巧構 =Λ框合有至少—個相機閃 馬構件可包括用於將該選擇訊框識別為 115487.doc 200803518 需要特殊處理的構件。 在另I、樣中，一種機益可讀媒體包括用於處理多媒體 貝料之指♦’其中該等指令在執行時導致—機器獲得指示 在複數個視頻訊框中之一選擇訊框與在時間上鄰近該選擇 訊框之訊框之間的一差異之至少一個度量，該至少一個度 夏包含與该選擇訊框及在時間上鄰近該選擇訊框之該等訊 框關聯的雙向運動資訊及亮度差異資訊；基於該至少一個 φ 度里來確疋一與該選擇訊框關聯的拍攝事件及基於該拍攝 事件來可調適地對該選擇訊框進行編碼。 在另一恶樣中，本發明提供一種用於處理多媒體資料之 處理為，该處理器經組態以包含一組態來獲得指示在複數 個視頻訊框中之一選擇訊框與在時間上鄰近該選擇訊框之 訊框之間的一差異之至少一個度量，該至少一個度量包含 與該選擇訊框及在時間上鄰近該選擇訊框之該等訊框關聯 的雙向運動資訊及亮度差異資訊；基於該至少一個度量來 # 碟定一與該選擇訊框關聯的拍攝事件及基於該拍攝事件來 可調適地對該選擇訊框進行編碼。 【實施方式】 在下面的描述中’給出特定的細節以提供對該等態樣之 一全面理解。然而，一般熟習此項技術者將瞭解該等態樣 可在；又有该等特定細節的情況下實踐。舉例而言，為了不 讓不必要的細節使該等態樣不清晰，通信系統及視頻處理 設備可以方塊圖展示。 本文中所描述的為改良現存編碼系統之效能之拍攝偵測 115487.doc 200803518 及編碼系統及方法的 頻資料之鄰近訊框==樣。該等態樣利用包括視 否發生-突然場計(或度量)來確定是 咳場景巾θ 劳豕疋否正在緩慢改變或者在 μ葱厅、中疋否存在可使視 光。該等統計可自—… $-传特別複雜之相機閃 自預處理器獲得且接著被發送至一编辑 設備，或者其可在— 、至、為馬 、；拟 、扁碼§又備中產生（例如，藉由一經组 悲以執行運動補償之處 ' ' 測確定/一# d )。所付統計幫助場景變化偵 -^心 碼（transe°ding)之系統中，常常存在 、田預處理态或可組態的處 動補償輔助解交錯，列運動 用。 幻運動補償統計為可用的且即可使 本文所描述的拍攝谓測器可僅利用來自一先前訊框、一 =訊框及-下一訊框之統計以使得演算法具有非常低的 (遲。6亥拍㈣測器區分若干不同類型之拍攝事件，包括 大然场景變化、交叉衰減及其他緩慢場景變化以及相機閃 光。藉由用編碼器中之不同策略來確定不同類型之拍攝事 件’編碼效率及視覺品質得以提高。 =文中提到的”一個態樣"、”一態樣’，、’，一些態樣"或"某 些態樣"指結合該態樣所描述的一特定特性、結構或特徵 之-或多者可包括於一拍攝偵測及編碼系統之至少一個態 樣中。本說明書各種位置處出現的該等詞語未必皆指相同 態樣’亦未必指與其他態樣相互排斥之獨立態樣或替代離 樣。^卜’可描述各種特性’該等特性可由—些態樣而非 其他態樣展現。類似地’描述可為對於一些態樣但非其他 115487.doc 10- 200803518 態樣的要求的各種要求。 本文中所使用的"多媒體資料"或"多媒體”為一廣義的術 語，其包括視頻資料(其可包括音訊資料)、音訊資料或者 視頻資料與音訊資料之兩者。本文中所使料”視頻資料” 或”視頻"為—廣義的術語，其指的是含有本文、影像及/或 音訊資料之影像之-或多個系列或序列，且其可用來指多 媒體育料或者該等術語可互換使用（除非另外明確規定）。 • 圖1為一用於遞送串流多媒體之通信系統10之一方塊 圖。如圖1所示’該系統可應用在數位壓縮視頻傳輸至多 個終=機中。—數位視頻源可為（例如卜數位電缓或衛星 弓」入端或-經數位化之類比源。該視頻源在一傳輸設施2 _被處理，在該設施2中其被編碼且調變至—載體上以便 由、.罔路4傳輸至一或多個終端機6。終端機㈣碼所接 收視頻且通常顯示該視頻之至少一部分。網路*指適合於 編碼貧料之傳輸之任何類型之通信網路(有線網路或無 • 1=1°舉例而言，網路4可為一手機網路、有線或無線區 l路（LAN)或一廣域網路（WAN)或網際網路。終端機6可 為能夠接收及顯示資料之任何類型之通信設傷，其 (:不，於)手機、PDA(個人數位助理)、家用或商用： …件、電腦(攜帶型、膝上型、掌上型、pc 、 Μ及較大的基於伺服器之電腦㈣ > 及㈣“ 料之個人娛樂設備。 “ _貝 圖2為根據某些態樣一用於對多媒體資料進 傳輸設施的某些組件之一方塊圖。一在數位傳輪設施2 115487.doc 200803518 中之接收器21接收一數位視頻源且將該視頻提供至一用於 對該視頻進行處理及編碼之編碼組件（或裝置）22。編碼組 件22包括一運動補償器23、一拍攝分類器24及一編碼器25 以便對該視頻進行處理。 運動補償器23可經組態以確定關於該視
向運動資訊。運動補償器23亦可經組態以確定一或多個差 異度量（例如，絕對差之和（SAD)或平方差之和（SSD))，且 彳异其他 > 訊，包括關於一或多個訊框之亮度資訊（例 如，巨集區塊（MB)亮度平均值或差異）、一亮度直方圖差 異及一訊框差異度量（其實例將根據方程式}至3來進行描 述）。該拍攝分類器可經組態以利用該運動補償器所確定 的資汛來將視頻中之訊框分為兩個或兩個以上種類之”拍 攝”。該編碼器經組態以基於該等拍攝分類來可調適地對 複數個訊框進行編碼。下文參考方程式m來描述該運 動補償器、拍攝分類器及編碼器。 扁馬、、且件22、其組件及其中所含的處理可由硬體、軟 ，早刀體、中間軟體（middleware)、微碼或其任何組合來 、牛例而σ ’運動補償器23、拍攝分類器24及編碼器 25可為獨立的組件， 土 八Τ作為另汉備之一組件中之硬 一朝體、中間軟體來併入或者在一處理器上 碼或軟體中被實施，。木 仃、微 間軟體或微碼中，… 體，體、中 處理之〜補償、拍攝分類及編屬 讀婵體中可儲存於—諸如—儲存媒體之機器可 貝媒體中° —碼段可代表―程序、-函數、—子程式、= 115487.doc -12- 200803518 程式、-常式、次常式、—模組、H軟體、__類別 (㈣或者指+、資料結構或程式語句之任何組合。一碼 段可藉由傳遞及/或接收資訊、資料、引數、參數或記憶 體内容而耦接至另一碼段或一硬體電路。
圖3A為根據某些態樣包含一處理器31之多媒體處理設備 3〇之-方塊圖，其中該處理器則於拍攝❹】及基於韻測 到拍攝來編碼。在某些態樣中，圖3中之多媒體處理設備 3〇亦可為圖2中之編碼組件22。—數位視頻源可由多媒體 處理没備3G外的-源提供且被傳達至多媒體處理設備％中 之一通k模組36。多媒體處理設備3〇含有一 信之儲存媒體35，處理器31與儲存媒體35之 組36通信。處理器31包括一運動補償器32、 與處理器3 1通 兩者與通信模 一拍攝分類器 及一編碼H ’其可運作來產生運動資訊、將視頻資料之 ^中的拍攝分類且對該視頻資料進行編碼。該運動補 器、拍攝分類器及編碼器可對視頻進行處理以確定下文 考方私式1至1 〇所描述的資訊。詳言之，處理器3 1可具 一組態以獲得指示複數個視頻訊框之鄰近訊框間之一差 ，度！(該等度量包含雙向運動資訊及亮度資訊”基於 等度里來確定該複數個視頻訊框中之拍攝變化且基於該 :攝變化來可調適地對複數個訊框編碼進行編碼。在某 =中’該等度量可由處理器31外的備或過程計算 该设備或過程亦卩為多士某體處理設備3〇外的且其直接或 經由另-設備或記憶體間接地與處理器31通信。該等产 亦可由處理計算，例如，由處理㈣之運動補償^ 115487.doc 200803518 計算。 多媒體處理設備30可提供編碼視頻以便進一步處理及/ 或傳輸至其他設備（例如，終端機6(圖1))〇在某些態樣 中，該編碼視頻可為可調適的多層編碼視頻，其可包含一 基礎層及一增強層1可調適層編碼在同時申請的美國專利 申請案第11/373,604號（代理人案號〇5〇〇78)中進一步描 述，該專利案題為"scalable vmE0 CODING WITH TW〇 LAYER ENCODING AND SINGLE LAYER DEC〇DING"且由其 受讓人所有’且該案之全文内容以引用的方式併入本^ 中。圖3B為一用於拍攝偵測且基於偵測拍攝來編碼之多媒 體處理設備30之另-說明性態樣的一方塊圖。多媒體處理 °又備3 〇包括用於獲得指示一選擇訊框與在時間上鄰近該選 擇訊框之訊框間的-差異之至少一個度量之構件，諸如模 ’·且37 7媒體處理設備3〇亦包括用於確定一拍攝事件之構 件’諸如一用於基於該至少一個度量來確定該選擇訊框中 之拍攝事件之模組38，該度量係由模組37確定。一確定 -拍攝事件之說明性過程使用下文中之方程式4至9。多媒 體處理π又備30亦包括用於基於該拍攝事件來可調適地對今 «訊框進行編碼之構件，諸如模組39。在—個態樣中 若該拍攝事件指示該選擇訊框為一突然場景變化，則模組 +可凋適地將選擇讯框編碼為一 ^訊框。在另一態樣中， 若該拍攝事件指示該選擇訊框為包含一缓慢場景變化 數個訊框之一部分，目卩伊4， 刀則板組39可調適地將選擇訊框編 一 P訊框或一 B訊框中之任_ …、 1 者。在另一悲樣中，若該拍攝 115487.doc -14- 200803518 事件指示該選擇訊框含有至少一個相機閃光，則模組39可 δ周適地將遠擇说框識別為需要特殊處理，其可包括丢牵琴 擇訊框、複製一鄰近該選擇訊框之訊框且使用該複製訊框 來代替選擇訊框、内插鄰近該選擇訊框之訊框以形成一新 訊框來取代選擇訊框、對選擇訊框執行錯誤隱藏或者為選 擇訊框執行另一預定編碼處理。
結合圖2、3Α及3Β所描述的各種說明性邏輯塊、組件、 杈組及電路以及本文所揭示的其他實例及圖可（在某些態 樣中）由一通用處理器、一數位信號處理器（DSp)、一特殊 應用積體電路(ASIC)、一場可程式閘陣列（FpGA)或其他可 程式邏輯設備、離散閘或電晶體邏輯、離散硬體組件或其 經設計以執行本文所描述的功能之任何組合來實施或執 行。-通用處理器（諸如圖2所示的通用處理器）可為一微處 理器’但或者該處理器可為任何習知的處理器、控制器、 微控制器或狀態機。一處理器亦可作為計算設備之一組合 來實：’例如，一 DSP與一微處理器之一組合、複數個： 處理為、與-DSP核結合的—或多個微處理器或任何其他 該種態樣。 視頻編碼通常對一結構化圖像組（GOP)摔作。一 G〇P 般以一框内編碼訊框（1訊框）開始，隨後為-序列的P( 測）訊框或B(雙向）訊框。通常，—m框可儲存用於顯示 訊框之所有資料，一B訊框依 一 彳佤賴在先前訊框及隨後訊框 之資料（例如，僅合右自汰1 t _ 3有自先則矾框改變的資料或與下一
框中的資料不同），且一 P 框合有已自先前訊框改變的 115487.doc •15- 200803518 料。 在正常使用中，i訊框在編碼讳斗 庙碼視頻中夾雜著P訊框及B訊 框。在大小方面（例如，用於對^ ^ 、對或框進行編碼之位元之數 里）’ I §fl框通常要比p訊框大得容 、 穴侍夕，而P訊框又比B訊框 大。為了有效的編碼、傳輸及解碼處理，一G〇p之長产應 為足夠長以減少來自大1訊框之有效損耗且為足夠^I 服編碼器與解碼器間的不匹配或者通道損失。此外，Η 框中的巨集區塊(應)可因為相同的理由而被框内編碼。 -視頻編碼器可使用場景變化偵測來確適當的⑽ 長度且基於該GOP長度來插入I訊柜 框，而非以固定間隔來 插入一通常為不需要的！訊框。在一垂 牡 只踐中的串流視頻系 統中’通信通道通常由於位元夢 1几錯為或封包丟失而受損害。 在何處置放I訊框或I mb可顯荽砧紅 … 頦者地對解碼視頻品質及觀看 感受產生影響。一個編碼方荦為脾 系馬將框内編碼訊框用於與分 配的先前圖像或圖像部分顯著 互个1 j的圖像或圖像之部分 中。-般不能藉由運動估計來有效地預測此等區域，且若 該等區域不使用框間編碼技術（例如，使用B訊框及P訊框 進行編碼）’則編碼可更有效地進行。在通道損失的情形 中’彼等區域可能發生錯誤傳播，該錯誤傳播可藉由框内 編碼減少或消除（或者幾乎消除）。 可將GOP視頻之一選擇訊框或一八八 、 '" 口 P刀刀類為兩個或兩個 以上的種類，其中每一邙挺七 母晟框或部分可具有可取決於特定實 施的不同框内編碼準則。舉一 、 兄月性Μ例，一在視頻中之 選擇訊框可經處理以確定苴 疋/、疋否包括一可用於基於其内容 115487.doc 16 200803518 來將該訊框分成三個種類中之_者的某個，，拍攝事件”；亦 即，每一種類指示由訊框擷取或者訊框為其_部分之^種 類型的拍攝事件。該等三個種類為一突然場景變:、一交 叉衰減及/或其他缓慢場景變化之一部分或者作為一含= 至少一個相機閃光（亦被稱作”相機閃光"）之訊框。 3 -被分類為-突然場景變化之訊框包括與先前訊框頻著 不同的訊框。該等突然場景變化通常由視頻之編輯或势作 期間的一相機操作造成。舉例而言，自不同的相機產生的 視頻可因為該等相機具有不同的視角而包括突然場景變 化。又，在記錄視頻時突然地改變一相機之視場可導致— 突然場景變化。由於-被分類為一突然場景變化之訊框的 内容與先前訊框之内容不同，故通常應將-突_景變化 訊框編碼為一 I訊框。 :被分類為一緩慢場景變化之一部分之訊框包括具有交 又衰減及其他缓慢場景變化或者場景之緩慢切換之視頻。 在=些實例中，此可由相機拍攝之電腦處理造成、兩個不 同場景之逐漸混合對於人類眼睛而言看起來較舒適，但其 對視頻編碼卻是挑戰。對於—些缓慢改變的場景，運動補 償不能有效地降低該等訊框之位元速率。在某些情況下， 可將更多的框内編碼MB用於該等訊框。 一被分類為具有相機閃光或一相機閃光事件的訊框可包 括具有包括-或多個相機閃光之内容的訊框。該等閃光持 續時間相對短（例如個訊框）且可為極其明亮使得一訊 框中描緣閃光之像素相對於一鄰近訊框上之-對應區域顯 】】5487.doc -17- 200803518 示出不尋常的高意 ϋ X目^閃光突然地且迅速地轉換一圖 1冢之冗度。一相機閃伞 (HVS^b- π ^ ^ 持，時間常常比人類視覺系統 )$間遮蔽持續時間（通當^ # & 於古声夕#埜 （、吊疋義為44 ms)短。人眼對 於冗度之该4短時爆發所 編碼。因為不能感且因此其可對其粗略 箄 8運動補彳員來有效地處理閃光訊框且該
:厂為未來訊框之不良預測候選訊框，故該等訊框之粗 =碼不會降低未來訊框之編碼效率。被分類為閃光之場 Γ於人工”向亮度而不應被用來預測其他訊框，且其他 訊框由、於相同的理由亦不能被有效地用來預測該等訊框。 -識别出來’即可將該等訊框取出，因為其可需要一相 對較大量之處理。-種選擇為移除被確定為包括相機閃光 之訊框且在JL位署μ #找 ^ 口口 ^ 4置上編碼一 DC係數；該種解決方法簡 早’計算迅速且在編碼期間可節省不少位元。 田上述類型之場景變化之任_者在—訊框中被谓測到 時，則宣告一拍攝事件且所偵測到場景類型可用來禮定該 如何對訊框編碼；換言之，該訊框可基於確定的拍攝事件 而被可調適地編碼。拍攝㈣不僅對改良編碼品質有用 處，其亦可幫助識別視頻内容搜尋及索引。一場景搞測過 程之一個態樣將在下文中進行描述。 、圖4說明一在一 G〇p上操作且在一些態樣中可用來基於 視頻汛框中之拍攝偵測來對視頻進行編碼之過程扣，其中 苓考圖5至圖1〇描述及說明過程4〇之部分（或者子過程）。編 碼組件22(圖2)或處理器31可經組態以包含過程4〇。在過程 4〇開始之後，其進行至區塊42，此處獲得關於視頻訊框之 H5487.doc •18- 200803518 度里（貪訊），該等度量包括指示鄰近訊框間之一差異之資 訊。該等度量包括雙向運動資訊及基於亮度的資訊，其隨 後用於確定出現於鄰近訊框間且可用於拍攝分類的變化。 該等度量可自另一設備或過程獲得或者由（例如）編碼組件 22或處理器31計算得出。參考圖5中之過程a及方程式1至 1 〇來描述度量產生之說明性實例。
過耘40接著進行至區塊44，此處基於該等度量確定視頻 中之拍攝變化。—視頻訊框可根據哪種類型之拍攝（例 如，一突然場景變化、一緩慢改變的場景或者一含有高亮 度值之場景（相機閃光））包含於該訊框巾而被分為兩個^ 個以上的種類。某些實施編碼可需要其他種類。參考圖6 中之過程B描述拍攝分類之一說明性實例，且分別參考圖8 至圖1〇中之過程D、E&F更詳細地描述該實例。 一旦一訊框被分類後，過程40即進行至區塊邨，此處使 用拍攝分類結果可對該訊框編碼或者指定用於編瑪。該等 結果可影響是用-框内編碼訊框還是用_預測訊框⑼ 如p讯框或B訊框）來對訊框進行編碼。圖7中之過程c展 示一使用拍攝結果之編碼方案之一實例。 圖5說明-用於獲得視頻之度量之過程的一實例。圖5說 明發生於圖4之區塊42中之某些步驟。仍參看圖$，在區塊 ^中’過程A獲得或確定視頻之雙向運動估計及補償資 訊。圖2及圖3之運動補償器23可經組態來對訊框執行= 運動估計且確定可用於隨後的拍攝分類之運次：： 過程A接著進行至區塊54，此處其 貝σ 王匕栝一關於一當前 115487.doc -19- 200803518 聽或選擇訊框與—或多個鄰近訊框之亮度差異直方圖的 冗度貧訊。最後，過程A接著繼續至區塊56，此處計算一 指Γ訊框中所含的拍攝之度量…種該度量為—訊框差異 度里I其展示於方程式4及10之兩個實例中。確定運動資 。孔A度貝訊及一訊框差異度量之說明性實例在下文中進 行描述。 運動補償
為了執4丁雙向運動估計/補冑，一視頻彳列可由一雙向 運^補償11進行預處理，該雙向運動補償器使當前訊框之 每:8X8區塊與該等訊框最鄰近鄰近訊框之兩者（一者為過 去訊框，一者為將來訊框）中之區塊相匹配。該運動補償 2為每一區塊產生運動向量及差異度量。圖11說明該概 “展不使一當前訊框C之像素與一過去訊框P及一未來 (或訊框N相匹配之實例，且描繪至匹配像素的運動 ° 3 (k去運動向i MVp及未來運動向量mvn)。下文為對 雙向運動向里產生及相關編碼之一說明性態樣的一簡短描 述。 圖U說明在（例如）MPEG_4中一運動向量確定過程及預測 訊框編碼之一實例。圖13中所描述的過程為對一可發生於 圖5之區塊52中之實例過程的一較詳細說明。在圖！ 3中， 田剛圖像134由5x5巨集區塊組成，其中巨集區塊在該實例 中之數量為任意的。一巨集區塊由16><16像素組成。像素 °由8位元壳度值（Y)及兩個8位元色彩值（cr及Cb)界 定。 115487.doc -20- 200803518 在MPEG中，Y、Cr及Cb分量可以4:2:0袼式中儲存，其 中Cr分量及Cb分量在χ方向及γ方向上以2被向下取樣。因 此，每一巨集區塊將由256個Υ分量、64個Cr分量及64個 Cb为里組成。當前圖像134之巨集區塊136係自處於—與當 前圖像134不同時間點處的參考圖像132預測到的。在參考 圖像】32中進行—搜尋來定位在Y值、Cr值及Cb值方面最 鄰近正進行編碼之當前巨集區塊136的最匹配且集區塊 138最匹配巨集區塊138在參考圖像中之位置編碼在 運動向量M0中。參考圖像132可為—解碼器在建構當前圖 像134之前將重建的一！訊框或p訊框。自當前巨集區塊⑶ 減去最匹配巨集區塊138(計算γ分量、。分量及。分量之 每一者之差異）導致殘餘誤差142。殘餘誤差M2以二维 (旦2D)離散餘弦變換（DCT)144編碼且接著量化146。可執行 量化!46以藉由(例如)將較少的位元分配給高頻率係數且同 時將較多的位元分配給低頻率係數來提供空間壓縮。殘餘 誤差⑷之量化係數以及運動向量及參考圖像識別 育訊為代表當前巨集區塊136之編碼資訊。該編石馬資訊可 =於記憶體中以備將來使用，或者為了（例如）錯誤校正 或衫像增強之目的來對i掉作， 誤次4 八永作成者經由網路4傳輸該編 々与貝§孔。 可使用殘餘誤差142之編碼量化係數以及編碼 140來重建編碼器中之當前 η里 用你—〜以&塊136，該巨集區塊136 «於隨後的運動估計及補償之參考訊框之部 、，扁碼器可模擬-用於此p訊框 以 阱馬為之程序。解碼 H5487.doc •21 - 200803518 器之模擬將導致編碼器與解碼器兩者對相同的參考圖像操 作。此處呈現在一編碼器中進行（為了進行進一步的框間 編碼）或者在一解碼器中進行之重建過程。一p訊框之重建 可在重建該參考訊框（或者一正被參考之圖像或訊框之一 部分）之後開始。編碼量化係數經反量化15〇且接著執行二 維（2D)反向DCT^IDCT)152，此導致解碼的或重建的殘 餘誤差154。解碼編碼運動向量14〇且其用於使已重建的最 匹配巨集區塊156定位於已重建的參考圖像132中。接著將 重建殘餘誤差154添加到重建最匹配巨集區塊156中以形成 重建巨集區塊158。重建巨集區塊158可儲存於記憶體中、 獨立地顯示或與其他重建巨集區塊_起hi中顯示、 或為影像增強而被進一步處理。 使用B汛忙（或以雙向預測編碼之任何區段）之編碼可利 用在一當前圖像中的一區域與一先前圖像中的一最匹配預 測區域與一隨後圖像中的一最匹配預測區域之間的時間冗 餘。將隨後最匹配預測區域與先前最匹配預測區域組合以 形成一組合雙向預測區域。當前圖像區域與最匹配組合雙 向預測區域之間的差異為一殘餘誤差（或預測誤差）。最匹 配預測區域在隨後參考圖像中的位置及最匹配預測區域在 先前參考圖像中的位置可編碼在兩個運動向量中。 亮度直方圖差異 在一個態樣中，運動補償器可為每一區塊產生一差異度 里《亥差異度里係基於一在一個訊框中之區塊與在時間上 鄰近的-先前訊框及在時間上鄰近的一下一訊框中之對應 115487.doc -22. 200803518 區塊之間的亮度差異。差異度量可（例如）包括一平方差之 和（SSD)或一絕對差之和（SAD)。在不失一般性的情況下， 此處將SAD用作一說明性實例。
對於當前（或選擇）訊框，S AD比率如方程式1所示叶算： 一 ε 七 SADP 7~ e + SADN [1] 其中及以分別為一選擇訊框之前向及反向差異度 里之、纟巴對差之和。應注意分母含有一小正數ε來防止"除零” 錯誤。分子亦含有一值ε來平衡分母中的統一效果。舉例 而言，若先前訊框、當前訊框及下一訊框為相同的，則運 動搜尋應得出= = 0。在該狀況下，上述的計算產 生y = 7而非〇或無窮大。 可為每一訊框計算一亮度直方圖。通常多媒體影像具有 一為八位元之亮度深度（例如，”組"（bin)的數量）。用於根 據某些態樣來計算亮度直方圖之該亮度深度可設定為16從 而獲得該直方圖。在其他態樣中，該亮度深度可設定為一 適當的數量，該數量可取決於正進行處理之資料之類型、 可用之計算能力或其他預定準則。在某些態樣中，該亮度 深度可基於一所計算或所接收度量（諸如資料之内容）來動 恶地設定。 方程式2說明計算一亮度直方圖差異（λ)之一個實例： ΣΚ-^|/ /1 =㈤ / Γ01 115487.doc -23· 200803518 =二先前訊框第i組中之區塊之數量…。為當前訊 4之區塊之數量’且縣在―訊框中 盤 〇 戈企义 几V、心 W訊框與當前訊框之亮度直方圖差異完全不相似 (或不相交），則;。 =考圖5之區塊56所討論的訊框差異度量何根據方程 式3计鼻：
d^^^AX{2X^\) y p [3]
其中A為由應用選擇的一常數，re + SADPP 圖6說明一過程B之一㈣，其使用I視頻獲得或確定的 度量來確定三個種類之拍攝（或場景）變化。圖6說明發生於 圖4之區塊44之—個態樣中的某些步驟。再次參看圖$，在
=旦中過私B首先確定訊框是否符合被指定為一突然 场景變化之某些條件或一或多個準則。圖8中之過程⑽明 該確^之一實例。過程B接著進行至區塊㈠，此處其確定 ~疋否為緩忮改變的場景之部分。圖9中之過程E說明 定緩丨又改、交场景之一貫例。最後，過程B在區塊66處 確定：框是否含有相機閃光，換言之，確定訊框是否含有 1、先鈉Λ框不同的咼壳度值。圖10中之過程F說明確定一 3有相機閃光之訊框之一實例。下文中描述該等過程之一 說明性實例。 突然場景變化 圖8為一說明一確定突然場景變化之過程之流程圖。圖8 115487.doc -24- 200803518 進一步詳細描述可發生於圖6之區塊62之一些態樣中的某 些步驟。在區塊82處，若訊框差異度量乃符合方程式4中所 示的準則： μ] 其中Α為由應用選擇的一常數，且乃為一臨限值（例如，一 臨限值準則）。若符合該臨限值，則過程D在區塊84處將訊 框指定為一突然場景變化，且在該實例中，可不需要任何 進一步的拍攝分類。 在一個實例中，模擬展示：設定」=1及7/=5達成良好的 偵測效能。若當前訊框為一突然場景變化訊框，則斤應較 大且卜應較小。可使用比率^而非僅使用以使得該度量 經標準化為該情形的活動等級。 應注意方程式4中的準則以一非線性的方式來使用亮度 直方圖差異拉姆達.圖12說明λχ(2λ+1)為—凸函數^ 拉姆達（λ)較小（例士口，鄰近零）時，λχ(2λ+ι)的貢獻相對 小。然而’當λ變大時，函數λχ(2λ+1)相對大。對於任何 大於1.4的拉姆達以），在臨限值l設為5時偵測到一突然場 景變化。 交又衣減及緩慢場景變化 圖9進一步說明可發生於圖6之區塊6 4中的—些態樣之更 多細節。參看圖9,過程Ε在方塊92處確定訊框是:為描繪 一緩場景變化之—序列訊框的部分。若訊框差異度量〇 115487.doc -25- 200803518 方^式5所&明的那樣小於該第—臨限值[且大於或等 ;第^限值r2，貝，】過程E確定當前訊框為—交叉衰減 或其他緩慢場景變化： , T^D<Tl [5] 對於特定數量之連續訊框，其中厂為與方程式4中所用之 L限值相同的臨限值且巧為另—臨限值。通常，準則厂及 心由於有可能存在實施中的差異而由標準實驗或模擬確 疋。若滿足方程式5中的準則，則過程£在方塊叫將訊框 分類為-緩慢改變場景之部分。可能不需要訊框之任何進 一步的分類，且選擇訊框之拍攝分類結束。 相機閃光事件 圖W中所不的過程FS-可確^當前訊框是否包含相機 閃光之過程之一實例。在相機之該說明性態樣中，使用亮 度直方圖統計來確定當前訊框是否包含相機閃光。過程f 错由首先確定-當前訊框之亮度是否大於先前訊框之亮度 及下-訊框之亮度來確定相機閃光事件是否在選擇訊極中 (區㈣2處所示）。若不A，則訊框並非為一相機閃光事 件，若是，則其可能為-相機閃光事件。在區塊1〇4處， 難以定反向差異度量是否大於或等於一特定臨限值且 别向差異度量是否大於或等於一臨限值；若滿足該等兩個 條件，則過程F在區塊106處將當前訊框分類為具有相機閃 光。 在-個說明性實例中，在區塊1〇2處，過程f喊定當前訊 框之平均亮度減去先前訊框之平均亮度是否等於或超過一 115487.doc -26 - 200803518 且過程F«定當前訊框之平均 聽之平均亮度是否大於或等於該臨限 下 及方程式7中所示·· 方私式6
Yc-Yp>T3 [6] [7]
Vc-Yn>T3 人若未滿足方程式6及7之準則’則不將當前訊框分類為包 各相機閃光且過程F返回。若滿 … t 右滿足方程式6及7中所說明的 則過程F進行至區塊1G4,此處其確定-反向差里产 I吨及-前向差異度量咖4否大於或等於—特= 限值丁4，如以下方程式8及方程式9所示： S瑪 A [8] —SAD成 [9] 其中^為當前訊框之平均亮度，、先前訊框之平均亮 度，L為下-訊框之平均亮|，且歸尸及篇…別為= 當前訊框關聯的前向及反向差異度量。若未滿足方程式8 及9中所說明的準則，則過程]?返回；所滿足該等準則，則 拍攝事件指示該訊框含有至少一個相機閃光。 由於所描述的過程之實施可導致在包括臨限值之操作參 數中的差異，故臨限值A的大小通常由標準實驗確定。因 為相機閃光通常僅佔領一個訊框，故以乃值包括於該確定 中，且歸因於亮度差異，故不能使用來自前向方向與反向 方向之兩者上的運動補償來對該訊框進行很好的預測。 在某些態樣中，預定臨限值Γ/、5h及心之一或多者 且此等值併入編碼設備之拍攝分類器中。通常，此等臨限 H5487.doc -27· 200803518 值藉由拍攝偵測之一特定實施的測試來選擇❶在某些，能樣 中，可在處理（例如，動態處理）期間基於使用供給拍攝分 類器之資訊（例如，元資料）或者基於拍攝分類器本身所= 异出的資訊來設定臨限值cG、心及心之一或多者。 現在參看圖7,其展示一用於基於選擇訊框之拍攝分類 來為視頻確定編碼參數或對視頻進行編碼之過程c。2程 . C在區塊70處確定選擇訊框是否被分類為-突然場^ • 化。若是，則在區塊71處當前訊框被分類為一突然場景二 化，且該訊框可編碼為一〗訊框且可確定一 G〇p邊界。7、二 不是，則過程C進行至區塊72;若當前訊框被分類為一= 慢改變場景之-部分，則在區塊73處，在缓慢改變場景中 之當前訊框及其他訊框可編碼為一預測訊框（例如，P訊框 或B訊框）。過程c接著進行至區塊74，此處其檢查當前訊 框疋否被分類為一包含一或多個相機閃光（閃光）之場景。 右疋，則在區塊75處，訊框可被識別用於特殊處理。該特 • 殊處理可包括(例如)移除選擇訊框、複製-鄰近訊框且代 替選擇訊框（例如’-先前或一隨後訊框）或者為該訊框編 碼一特定的係數。若訊框未被分類為含有一或多個相機閃 光，則並沒有為選擇訊框確定一特定的拍攝事件且可根據 八他的或多個準則（編碼為一 I訊框或者跳過（例如，將其 丟棄）以使得不對該選擇訊框進行編碼）來對其進行編碼。 過程c可被實施於一編碼器25(例如，圖2)中或者一處理器 3 1 (例如，圖3中的處理器3 1之編碼器34中）中。 在以上描述的態樣中，待壓縮之訊框與其鄰近兩個訊框 H5487.doc -28- 200803518 之間的差異量係由一訊框差異度量p指示。若偵測到一單 調亮度變化之一顯著量，則其表示該訊框中之一交又衰減 效應。交叉衰減愈顯著，使用B訊框即可達成愈多的增 孤在某些悲樣中，如下文方程式10中所示使用一經修改 的訊框差異度量：
A 1 f Tlcc
丨心-土丨) dp + dN :乃，若Κ广或尽+ 其他， [10] 其中Ά 4丨及〜备\丨分別為當前訊框與先前訊框之間 的月度差異及當雨訊框與下一訊框之間的明度差異，△代 表-可在標準實驗中確定之常數，因為其可取決於實施； 且α為一具有一在0與1之間的值的權重變量。
右觀察到明度轉換之—穩定趨勢且轉換強度足夠大，則 。亥^修改聽差異度量a僅與原始訊框差異度量乃不同。 D/等於或者小於D。若明度變化為穩定的(㈣)，則經修 改訊框差異度量仏比原始訊框差異度量斜，最低比率為 下文中的表1展不藉由增加突然場景變化偵測之效能改 良。在非場景變化(NSC)情形與場景變化⑽情形兩者下 的I訊框之總數近似相同。在咖情形下，！訊框被均句地 分=在整個序列中’而在sc情形下，Σ訊框僅被指定給突 然場景變化訊框。 dB的改良。模 可發現在PSNR方面通常可達成〇·2〜Q3 115487.doc -29- 200803518 擬結果展示拍攝偵測器在確定以上提及的拍攝事件中非常 準確。具有標準交叉衰減效應之五個剪輯之模擬展示在A =5.5且0.4時，在相同的位元速率下達成P SNR增益 0.226031 dB。 序列\度量 位元速率(kbps) 平均QP PSNR(dB) 動晝NSC 226.2403 31.1696 35.6426 動晝SC 232.8023 29.8171 36.4513 音樂NSC 246.6394 32.8524 35.9337 音樂SC 250.0994 32.3209 36.1202 標題NSC 216.9493 29.8304 38.9804 標題新聞SC 220.2512 28.9011 39.3151 籃球NSC 256.8726 33.1429 33.5262 籃球SC 254.9242 32.4341 33.8635 表1 :突然場景變化偵測之模擬結果 注意本文中所描述的拍攝偵測及編碼態樣可被描述為一 過程，其中該過程被描繪為一流程圖表、一流程圖、一結 構圖或一方塊圖。儘管諸圖中所示的該等流程圖可將操作 描述為一順序過程，但可並行地或同時地執行其中許多操 作。此外，可重新安排該等操作之次序。一過程在其操作 完成時終止。一過程可對應於一方法、一函數、一程序、 一個次常式、一子程式等等。當一過程對應於一函數時， 其終止對應於該函數返回至調用函數或者主函數。 對熟習此項技術者而言，顯而易見可在不影響設備之操 作的情況下對本文中所揭示的一設備之一或多個元件進行 重新安排。類似地，在不影響設備之操作的情況下可將本 文中所揭示的一設備之一或多個元件組合。一般熟習此項 115487.doc -30 - 200803518 技術者將瞭解可使用各種不同的技術及工藝之任一者來代 表資訊及多媒體資料。一般熟習此項技術者將進一步瞭解 結合本文所揭示的實例描述的各種說明性邏輯塊、模組及 演算法步驟可作為電子硬體、韌體、電腦軟體、中間軟 體、微碼或其組合來被實施。為了清楚地說明硬體與軟體
之此互換性，在上文中大體根據其功能來描述各種說明性 組件、區塊、模組、電路及步驟。該功能是作為硬體還是 作為軟體來被實施取決於特定的應用及強加於整個系統上 的設計約束。熟習此項技術者可以不同的方式來為每一特 定應用實施描述的功能，但不應將該等實施決定理解為導 致偏離所揭示方法之範嘴。 舉例而言，結合本文所揭示的拍攝偵測及編碼實例以及 諸圖描述的一方法或演算法之步驟可直接體現於硬體中、 二由一處理器執行之軟體模組中或者該兩者之一組合中。 澹等方法及次异法尤其適用於通信技術中，其包括視頻至 手機丄電月自、膝上型電腦、pDA的及所有類型的個人及商 業通4⑨備之無線傳輸。軟體模組可常駐於^ 快閃記憶體、R0M^情麵 ρ抑 一 ·。己^肢、EPR〇M記憶體、EEPROM記憶 暫存③、硬碟、可移磁碟、CD-ROM(或此項技術中已 至7任何其他形式㈣存媒體中。—例示性儲存媒體輕接 =理Γ以使得該處理器可自該儲存媒體讀取資訊且將資 人了二存媒體中。或者，該儲存媒體可與該處理器整 口。處理态及儲存媒鹗V私Μ 巾。％ ’、 ”、、於一特殊應用積體電路（ASIC) 宁。该ASIC可駐於一無 " 據機中。或者，該處理器及該 】15487.doc 200803518 儲存媒體可作為離散組件當社 干昂駐於该無線數據機中。 此外，結合本文所揭示66每 勺Μ例描述的各種說明性邏輯 塊、組件、模組及電路可藉由一通用處理器、-數位信號 處理特殊應用積體電路（ASic)、—場可程式 閘陣列（FPGA)或其他可葙+、显沾< Μ J私式璉輯没備、離散閘或電晶體邏
輯、離散硬體組件或經設計以執行本文中所描述的功能之 :之任何組合來貫施或執行。一通用處理器可為一微處理 器’但或者該處理器可為任何習知的處理器、控制器、微 控制器或狀態機。-處理器亦可實施為計算設備之一組 :例如，一 DSP與一微處理器之一組合、複數個微處理 為、與- DSP核結合之一或多個微處理器或任何其他該種 組態。 提供所揭*實例之先前描絲使一般熟習此項技術者製 造或使用所揭示的方法及裝置。該等實例之各種修改對於 熟習此項技術者而言將為顯而易見的，且在不偏離所揭示 方法及裝置之精神或範疇的情況下可將本文所界定的原理 應用於其他實例中且可增加額外的元件。希望對該等態樣 的描述為說明性的且沒有限制申請專利範圍之範脅。 【圖式簡單說明】 圖1為一用於遞送串流多媒體資料之通信系統之一方塊 圖； ’ 圖2為一用於對多媒體資料進行編碼之數位傳輸設施之 某些組件的一方塊圖； 圖3 A為一用於拍攝偵測及基於偵測到之拍攝來編碼之處 115487.doc -32- 200803518 理設備的一方塊圖； 攝線基㈣測到之拍攝來一處 料' 其說明’拍攝偵測來對多媒《 圖5為流程圖，其說明一獲得複數個視頻訊 訊框之間的-差異之度量的方法； 之料
圖6為-流程圖，其說明一基於所確定的度量來確定拍 攝變化之方法； 、圖7為一流程圖，其說明一基於拍攝變化來對—視頻流 進行編碼之方法； 圖8為一流程圖，其說明一確定突然場景變化之方法； 圖9為一流程圖，其說明一確定緩慢場景變化之方法； 圖10為一流程圖，其說明一確定相機閃光之方法； 圖11為一說明，其展示一使一當前訊框c之像素與一過 去。fl框P及一未來（或下一）訊框n匹配之實例； 圖12為一曲線圖，其展示亮度直方圖差值Miamda)與 λχ(2χλ+1)間之一關係；及 圖13说明一運動向量確定過程及預測訊框編碼之一實 例0 【主要元件符號說明】 數位傳輸設施 網路 終端機 2 4 6 115487.doc 33· 200803518
ίο 21 22 23、32 24 25、34 30 31 36 37 、 38 、 39 40、A、B、C、D、E、F 42 、 44 、 46 、 52 、 54 、 56、62、 64' 66λ 70、 71 、 72 、 73 、 74 、 75 、 82 ' 84 、 92 、 94 、 102 、 104 、 106 132 134 136 、 156 、 158 140 142 、 154 144 146 150 152 通信系統 接收器 編碼組件（裝置） 運動補償器 拍攝分類器 編碼|§ 多媒體處理設備 處理器 通信模組 模組 過程 區塊 參考圖像 當前圖像 巨集區塊 運動向量 殘餘誤差 二維離散餘弦變換（DCT) 量化 反量化 二維DCT反向轉換（或IDCT) 115487.doc •34-

Claims (1)

  1. 200803518 十、申請專利範圍： L -種處理多媒體資料之方法，該方法包含·· 獲得指示在複數個視頻訊框中之一選擇訊框與 上鄰近該選擇訊框之訊框之間的一差異的至少一個产 量，該至少-個度量包含與該選擇訊框及在時： 1 選擇訊框之料軸«的雙向運動資訊及亮度差異 貧 ， 基於該至少一個度量來確定一盥兮、登摇％ 4 • #事件；及 擇讯框關聯的拍 2 ^^拍攝事件來可調適地對該選擇訊框進行編碼。 ’…項1之方法’其中獲得至少一 至少一個度量。 里匕3计异该 3.如：：項1之方法’其中該拍攝事件指示該選擇訊框為 大景變化’且其中可 框編碼為一】訊框。 〜將该選擇訊 • I 2广拍攝事件指示該選擇訊框為 ^ 史化之複數個訊框之一部分，且直士 π 调適地編碣包含 /、中可 框。 “將《擇訊框編碼為—P訊框或—㈣ 5·如s月求項1之方法’其中該 有至少—個;^ 攝爭件才曰不该選擇訊框含 擇訊樞識別為ί閃光’且其中可調適地編碼包含將該選 取別為需要特殊處理。 忙月求項5之方法，其中該特殊處理包含跳7¾兮H 框以使得該選擇訊框未被編碼。 ㈣過«擇訊 115487.doc 200803518
    如請求項5之方法 上鄰近該選擇訊框 框0 〃中忒特殊處理包含複製一在時 之几汇且用該複製訊框代替該選擇 間 訊 8·如明求項1之方法，其中該 八一办 拍攝事件指示該選擇訊框包 ^ 犬然場景變化、一緩慢場旦料儿 A 1又琢不變化之一部分或者至少 一個相機閃光。 9·如請求項1之方法，1中若兮从4耳士 ^ A ，、T右邊拍攝事件未指示該選擇訊
    突然場景變化、-緩慢場景變化之-部分或者至 、固相機閃光，則可§周適地編碼包含將該選擇訊框編 碼為~ 1訊框。 10. 如味求項1之方法’其中若該拍攝事件未指示該選擇气 框包含-突然場景變化、一緩慢場景變化之一部分或者 至少—個相機閃光’則可調適地編碼包含丟棄該選擇訊 框0 η.如請：们之方法，λ中該至少一個度量包含一訊框差 異度量，且其中若該訊框差異度量大於一第一臨限值 ^ ’則確定一拍攝事件包含確定該選擇訊框為一突然場 景。 12·如請求項^之方法，其中該選擇訊框之該訊框差異度量 係基於一第一差異度量與一第二差異度量之一比率，其 中忒第一差異度量包含該選擇訊框與在時間上鄰近的一 先前訊框之間的差異與該選擇訊框與在時間上鄰近的一 下一訊框之間的差異之一比率，且該第二差異度量包含 該先前訊框與在時間上鄰近該先前訊框且先於其之一气 115487.doc 200803518 框之間的差異與該先前訊框與該選擇訊框之間的該等差 異之一比率。 13·如請求項11之方法，其中該選擇訊框之該訊框差異度量 包含yc與}^之一比率，其中斤為該當前選擇訊框之一前 向與一反向差異度量之一比率，且以為一在時間上鄰近 該當前選擇訊框且先於其的訊框之一前向與一反向差異 度量之一比率。 14·如請求項11之方法，其中該訊框差異度量係基於與一在 時間上先於該選擇訊框之訊框及該選擇訊框關聯的一亮 度直方圖差異。 15·如請求項11之方法，其中確定一拍攝事件包含若該選擇 Λ框未被確疋為一突然場景變化且該訊框差異度量指示 該選擇訊框與鄰近訊框之間的一差異小於該第一臨限值 。且大於或等於一第二臨限值6，則確定該選擇訊框為 一緩慢場景變化之一部分。 16.如請求項15之方法，其中該確定一拍攝事件包含確定該 選擇訊框、-在時間上㈣該選擇訊框的先前訊框及一 在時間上鄰近該選擇訊框的下一訊框之平均亮度；及若 該選擇訊框未被確定為一突然訊框或一緩慢變化訊 框， Α遥擇訊框之-平均亮度減去_在時間上與該選擇訊 框鄰近的先前訊框之-平均亮度等於或超過—第三臨限 值， 該選擇訊框之-平均亮度減去一在時間上鄰近該選擇 115487.doc 200803518 況框的下一訊框之一平宾 一儿度等於或超過該第三臨限值 G，且 與該選擇訊框關聯的一前向差 c ^ 旦 ⑴丨）左呉度置及一反向差異度 $兩者皆等於或超過一第 ,. 乐四l限值心，則確定該選擇訊 框έ有至少一個相機閃光。 1 7·如請求項1之方法，其 r β確疋一拍攝事件包含參考至 >、—個臨限值來評估該選擇訊框之亮度差显資祝。 18·::請求項1之方法，其中該等拍攝事件被分為三個或三 個以上的拍攝類型。 19’：請求項丨之方法，其中獲得至少一個度量包含執行雙 二運：補償來產生雙向運動資訊，且其中基於該雙向運 動補償來為該選擇訊框確宕# s 一 评i峄疋忒雙向運動資訊及該亮度差 異貧訊。 20·如請求項1之方法，苴中 ，、甲確疋拍攝事件包含參考複數 個鼪限值來評估該至少一個度量。 21· 種用於處理一多媒體資料之裝置，其包含： :運動補償器’其經組態以獲得指示在複數個視頻訊 1之—選擇訊框與在時間上鄰近該選擇訊框之訊框之 間的一差異的至少一個、 又里々至夕一個度量包含雙向 運動資訊及亮度資訊； 二拍攝分類器’其經組態以基於該至少一個度量來確 定與該選擇訊框關聯之拍攝事件；及 二 ^ 其、、星組悲以基於該拍攝事件來可調適地對 該選擇訊框進行編碼。 II5487.doc 200803518 22· —種用於處理多媒體資料之裝置，其包含： 用於獲得指示在複數個視頻訊框中之—選擇訊框與在 時間上鄰近該選擇訊框之訊框之間n &的至少一個 度量之構件’該至少一個度量包含與該選擇訊框及在時 間上鄰近該選擇訊框之該等訊才匡關聯白勺雙向動資訊及 亮度差異資訊； ' 用於基於該至少一個度量來確定一與該選擇訊框關聯 的拍攝事件的構件；及 用於基於該拍攝事件來可調適地對該選擇訊框進行編 碼的構件。 23.如=求項22之裝置，其中該拍攝事件指示該選擇訊框為 :大然場景變化，且其中該可調適編碼構件包含用於將 该選擇訊框編碼為一 I訊框之構件。 24·如請求項22之裝置，其中該拍 Τ亥拍攝事件指不該選擇訊框為 “-緩慢場景變化之複數個訊框之一部分，且直中該 可調適編碼構件包含用於將該選擇訊框編碼m請 或一 B訊框的構件。 25·如請求項22之裝置，其 ?日攝事件指不該選擇訊框含 有至少一個相機閃光，且其中 m 1 八可凋適編碼構件包含用 於將该選擇讯框識別為需要特殊處理的構件。 26.如請求項22之裝置，其中該特殊處理包含跳過或丢㈣ 選擇訊框以使得該訊框未被料。 — 27·如請求項26之裝置，其中該 _ Τ4特殊處理包含用於複製一在 日守間上鄰近該選擇訊框之訊框 且用該複製訊框來代替該 115487.doc 200803518 選擇訊框的構件。 28.如請求項22之裝置，其中該拍攝 含一突然場景變化一緩慢場景變該選擇訊框包 至少一個相機閃光。 。卩分或者包括 1如請求項22之裝置，其中若該 框包含—突_景變化、-緩"It 5請擇訊 ,/h 4, 〖又％豕變化之一部分或者 至）一個相機閃光，則該可調適 、g iimr* „ 局馬構件包含用於將該 遥擇讯框編碼為一 I訊框的構件。 3〇·如請求項22之裝置，其中若該拍 丄r a人 科’ 1千禾^不该選擇訊 框包含-突然場景變化、一緩慢場景變化之一部分或者 至少-個相機閃光’則可調適編碼構件包含丢棄該選擇 訊框。 3 1 ·如請求項22之裝置，其中該至少一 b 少 1固度里包含一訊框差 異度量，且其中該確定—拍攝事件的構件包含用於若該 訊框差異度量大於一篦一RB rr， , 里大於弟L限值Γ广則確定該選擇訊框 為一突然場景的構件。 32·如請求項31之|置，纟中該選擇訊框之該訊框差異度量 係基於一第一差異度量與一第二差異度量之一比率，其 中該第一差異度量包含該選擇訊框與在時間上鄰近的一 先刚訊框之間的差異與該選擇訊框與在時間上鄰近的一 下一訊框之間的差異之一比率，且該第二差異度量包含 該先前訊框與一在時間上鄰近該先前訊框且先於其之訊 框之間的差異與該先前訊框與該選擇訊框之間的該等差 異之一比率。 115487.doc -6- 200803518 33· t求項31之裝置’其中該選擇訊框之該訊框差異度量 包含斤與以之一比率，其中η：為該當前選擇訊框之一前 =一反向差異度量之-比率，且在時間上鄰近 、，k擇λ框且先於該選擇訊框的訊框之一前向與一反向 差異度量之一比率。 " 34·如°月求項31之裝置，其中該訊框差異度量係基於-與一
    在時間上先於該選擇絲之鄰近純與料擇訊框關聯 的免度直方圖差異。 月求S 3 1之裝置’其中該4定—拍攝事件的構件包含 用於右，選擇訊框未被分類為—突然場景變化且該訊框 差異度置指示該選擇訊框與鄰近訊框之間的一差異小於 :第-臨限值Γ7且大於或等於一第二臨限值Γ2，則將該 遥擇訊框分類為一緩慢場景變化的構件。 明求項35之裝置，其中確定一拍攝事件的構件包含： 用於確定該選擇訊框、一在時間上鄰近的先前訊框及 -在時間上鄰近的下_訊框之平均亮度的構件； 及在該選擇訊框未被確定為一突然訊框或一緩慢變化 訊框， 該選擇訊框之一平均韋洚：士 1 , 、 十^儿度減去一在時間上與該選擇訊 框鄰近的先前訊框之一平的古痒堃 十均冗度專於或超過一第三臨限 值Γ3， 勻免度減去一在時間上與該選擇 琢選擇訊框 ，山六你巧评机 框鄰近的下一訊框之一平的古疮梦 十均冗度#於或超過該第三臨限 值，且 3I5487.doc 200803518 與該選擇訊框有關聯的一前向差異度量與一反向差異 度$兩者皆等於或超過一第四臨限值匕時用於將該選擇 訊框分類為一相機閃光場景的構件。 37·種機裔可5買媒體，其包含用於處理多媒體資料之指 令，其中該等指令在執行時導致一機器·· 獲得指不在複數個視頻訊框中之一選擇訊框與在時間 上鄰近該選擇訊框之訊框之間的一差異之至少一個度 • 量，泫至少一個度量包含與該選擇訊框及在時間上鄰近 該選擇訊框之該等訊框關聯的雙向運動資訊及亮度差異 資訊； / 基於该至少一個度量來確定一與該選擇訊框關聯的拍 攝事件，及 基於該拍攝事件來可調適地對該選擇訊框進行編碼。 38. 一種用於處理多媒體資料之處理器，該處理器包含一組 態來： _ €得指示在複數個視頻訊框中之-選擇訊框與在時間 上鄰近該選擇訊框之訊框之間的一差異之至少一個度 畺/至；>、個度量包含與該選擇訊框及在時間上鄰近 該選擇訊框之訊框關聯的雙向運動資訊及亮度差異資 訊； ’、、 ；至少個度畺來確疋一與該選擇訊框關聯的拍 攝事件；及 基於該拍攝事件來可調適地對該選擇訊框進行編碼。 115487.doc
TW095138252A 2005-10-17 2006-10-17 Method and apparatus for shot detection in video streaming TW200803518A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US72764405P 2005-10-17 2005-10-17

Publications (1)

Publication Number Publication Date
TW200803518A true TW200803518A (en) 2008-01-01

Family

ID=37758803

Family Applications (1)

Application Number Title Priority Date Filing Date
TW095138252A TW200803518A (en) 2005-10-17 2006-10-17 Method and apparatus for shot detection in video streaming

Country Status (9)

Country Link
US (1) US8654848B2 (zh)
EP (1) EP1938580A1 (zh)
JP (1) JP2009512400A (zh)
KR (1) KR20080068716A (zh)
CN (1) CN101326809A (zh)
AR (1) AR055450A1 (zh)
CL (1) CL2006002797A1 (zh)
TW (1) TW200803518A (zh)
WO (1) WO2007047758A1 (zh)

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110126255A1 (en) * 2002-12-10 2011-05-26 Onlive, Inc. System and method for remote-hosted video effects
US8155178B2 (en) 2007-10-30 2012-04-10 Sony Corporation 16k mode interleaver in a digital video broadcasting (DVB) standard
US8780957B2 (en) * 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
AR052601A1 (es) * 2005-03-10 2007-03-21 Qualcomm Inc Clasificacion de contenido para procesamiento de multimedia
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
US8948260B2 (en) * 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US20070206117A1 (en) * 2005-10-17 2007-09-06 Qualcomm Incorporated Motion and apparatus for spatio-temporal deinterlacing aided by motion compensation for field-based video
US20070171280A1 (en) * 2005-10-24 2007-07-26 Qualcomm Incorporated Inverse telecine algorithm based on state machine
US9131164B2 (en) * 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
JP2007288299A (ja) * 2006-04-13 2007-11-01 Hitachi Ltd 配信システム、情報処理装置、配信方法及びプログラム
US9432433B2 (en) * 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
JP2008066851A (ja) * 2006-09-05 2008-03-21 Sony Corp 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
US8891020B2 (en) * 2007-01-31 2014-11-18 Thomson Licensing Method and apparatus for automatically categorizing potential shot and scene detection information
US8345769B1 (en) * 2007-04-10 2013-01-01 Nvidia Corporation Real-time video segmentation on a GPU for scene and take indexing
US8358381B1 (en) 2007-04-10 2013-01-22 Nvidia Corporation Real-time video segmentation on a GPU for scene and take indexing
WO2009016474A2 (en) * 2007-07-31 2009-02-05 Bighand Ltd. System and method for efficiently providing content over a thin client network
US8063942B2 (en) * 2007-10-19 2011-11-22 Qualcomm Incorporated Motion assisted image sensor configuration
US20090109341A1 (en) * 2007-10-30 2009-04-30 Qualcomm Incorporated Detecting scene transitions in digital video sequences
US8104055B2 (en) * 2007-11-14 2012-01-24 Mavs Lab. Inc. Method of identifying target synchronization point pair through scan-line image matching scheme
US20110075730A1 (en) * 2008-06-25 2011-03-31 Telefonaktiebolaget L M Ericsson (Publ) Row Evaluation Rate Control
KR101522985B1 (ko) 2008-10-31 2015-05-27 삼성전자주식회사 영상처리 장치 및 방법
EP2187647A1 (en) * 2008-11-12 2010-05-19 Sony Corporation Method and device for approximating a DC coefficient of a block of pixels of a frame
US8396114B2 (en) * 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
US8311115B2 (en) * 2009-01-29 2012-11-13 Microsoft Corporation Video encoding using previously calculated motion information
US8270473B2 (en) * 2009-06-12 2012-09-18 Microsoft Corporation Motion based dynamic resolution multiple bit rate video encoding
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
CN102648490B (zh) 2009-11-30 2016-08-17 株式会社半导体能源研究所 液晶显示设备、用于驱动该液晶显示设备的方法、以及包括该液晶显示设备的电子设备
US8705616B2 (en) * 2010-06-11 2014-04-22 Microsoft Corporation Parallel multiple bitrate video encoding to reduce latency and dependences between groups of pictures
US8451384B2 (en) * 2010-07-08 2013-05-28 Spinella Ip Holdings, Inc. System and method for shot change detection in a video sequence
US8723914B2 (en) * 2010-11-19 2014-05-13 Cisco Technology, Inc. System and method for providing enhanced video processing in a network environment
US20120287987A1 (en) * 2011-05-13 2012-11-15 Madhukar Budagavi Coding of Scene Changes Using Picture Dropping
US9232233B2 (en) * 2011-07-01 2016-01-05 Apple Inc. Adaptive configuration of reference frame buffer based on camera and background motion
US9591318B2 (en) 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
US11089343B2 (en) 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
US10713499B2 (en) * 2012-04-23 2020-07-14 Conduent Business Services, Llc Real-time video triggering for traffic surveillance and photo enforcement applications using near infrared video acquisition
US20140181668A1 (en) 2012-12-20 2014-06-26 International Business Machines Corporation Visual summarization of video for quick understanding
US9992501B2 (en) 2013-09-10 2018-06-05 Kt Corporation Method and apparatus for encoding/decoding scalable video signal
US20150117515A1 (en) * 2013-10-25 2015-04-30 Microsoft Corporation Layered Encoding Using Spatial and Temporal Analysis
US9609338B2 (en) 2013-10-25 2017-03-28 Microsoft Technology Licensing, Llc Layered video encoding and decoding
US20150189222A1 (en) * 2013-12-30 2015-07-02 Google Inc. Content-adaptive chunking for distributed transcoding
US20160112707A1 (en) * 2014-10-15 2016-04-21 Intel Corporation Policy-based image encoding
US11356709B2 (en) * 2015-01-05 2022-06-07 Arris Enterprises Llc Using motion compensated temporal filter (MCTF) statistics for scene change detection when a fade, dissolve or cut occurs
CN105608233A (zh) * 2016-02-26 2016-05-25 北京大学 一种基于改进的om特征的视频拷贝检测方法
US10686969B2 (en) * 2016-07-08 2020-06-16 NETFLIX Inc. Detecting shot changes in a video
US10701404B2 (en) * 2016-08-30 2020-06-30 Dolby Laboratories Licensing Corporation Real-time reshaping of single-layer backwards-compatible codec
WO2018044803A1 (en) * 2016-08-30 2018-03-08 Dolby Laboratories Licensing Corporation Real-time reshaping of single-layer backwards-compatible codec
AU2017339463B2 (en) * 2016-10-05 2020-09-03 Dolby Laboratories Licensing Corporation Source color volume information messaging
CN114115609A (zh) 2016-11-25 2022-03-01 株式会社半导体能源研究所 显示装置及其工作方法
EP3328051B1 (en) 2016-11-29 2019-01-02 Axis AB Method for controlling an infrared cut filter of a video camera
EP3337174B1 (en) * 2016-12-14 2021-04-07 Alcatel-Lucent España Method and device for transmission of content
CN109151469B (zh) * 2017-06-15 2020-06-30 腾讯科技（深圳）有限公司 视频编码方法、装置及设备
US11019273B2 (en) 2017-09-28 2021-05-25 Apple Inc. Generating static images with an event camera
CN111369482B (zh) * 2020-03-03 2023-06-23 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质

Family Cites Families (243)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US655068A (en) * 1899-08-11 1900-07-31 Robert B Elliott Fender for cultivators.
FR2646047B1 (fr) 1989-04-13 1995-08-04 Telediffusion Fse Procede et installation de codage et de transmission d'images animees sous forme numerique a bas debit
JP2909239B2 (ja) 1991-03-27 1999-06-23 株式会社東芝 高能率符号化記録再生装置
JP3189292B2 (ja) 1991-05-09 2001-07-16 松下電器産業株式会社 走査線補間装置
KR0121328B1 (ko) 1991-12-13 1997-11-17 사또오 후미오 디지탈 신호 기록 재생 장치
IT1252546B (it) 1991-12-18 1995-06-19 Alcatel Italia Metodo e sistema per adattare il ciclo di frequenza di refresh alla complessita' dell'immagine
US5289276A (en) 1992-06-19 1994-02-22 General Electric Company Method and apparatus for conveying compressed video data over a noisy communication channel
FR2700090B1 (fr) 1992-12-30 1995-01-27 Thomson Csf Procédé de désentrelacement de trames d'une séquence d'images animées.
US5649047A (en) 1993-06-03 1997-07-15 Matsushita Electric Industrial Co., Ltd. Picture reproduction apparatus and picture decoding apparatus
EP0710422B1 (en) 1993-07-19 1998-09-30 BRITISH TELECOMMUNICATIONS public limited company Detecting errors in video images
CA2127151A1 (en) 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
US5991502A (en) 1993-10-04 1999-11-23 Matsushita Electric Industrial Co., Ltd. Optical recording device which calculates distances between I-frames and records I-frame addresses in a sector
AU681185B2 (en) 1993-10-22 1997-08-21 Sony Corporation apparatus and method for recording and reproducing digital video data
JP2734953B2 (ja) 1993-12-16 1998-04-02 日本電気株式会社 Ｃｄｍａ受信装置
JP2839132B2 (ja) * 1993-12-17 1998-12-16 日本電信電話株式会社 映像カット点検出方法及び装置
US5642294A (en) * 1993-12-17 1997-06-24 Nippon Telegraph And Telephone Corporation Method and apparatus for video cut detection
US5446491A (en) 1993-12-21 1995-08-29 Hitachi, Ltd. Multi-point video conference system wherein each terminal comprises a shared frame memory to store information from other terminals
JP3149303B2 (ja) 1993-12-29 2001-03-26 松下電器産業株式会社 デジタル画像符号化方法及びデジタル画像復号化方法
US5592226A (en) 1994-01-26 1997-01-07 Btg Usa Inc. Method and apparatus for video data compression using temporally adaptive motion interpolation
US6798834B1 (en) 1996-08-15 2004-09-28 Mitsubishi Denki Kabushiki Kaisha Image coding apparatus with segment classification and segmentation-type motion prediction circuit
KR100213015B1 (ko) 1994-03-31 1999-08-02 윤종용 양자화 방법 및 회로
US6091460A (en) 1994-03-31 2000-07-18 Mitsubishi Denki Kabushiki Kaisha Video signal encoding method and system
US5508752A (en) 1994-04-12 1996-04-16 Lg Electronics Inc. Partial response trellis decoder for high definition television (HDTV) system
JPH07298272A (ja) 1994-04-28 1995-11-10 Canon Inc 映像符号化装置
US5706386A (en) 1994-05-24 1998-01-06 Sony Corporation Image information recording method and apparatus, image information reproducing method and apparatus and editing method and system
EP0845908B1 (en) 1994-06-17 2003-02-05 Snell & Wilcox Limited Compressing a signal combined from compression encoded video signals after partial decoding thereof
US5521644A (en) 1994-06-30 1996-05-28 Eastman Kodak Company Mechanism for controllably deinterlacing sequential lines of video data field based upon pixel signals associated with four successive interlaced video fields
KR100213018B1 (ko) 1994-07-30 1999-08-02 윤종용 동화상 부호화장치
JP3755155B2 (ja) * 1994-09-30 2006-03-15 ソニー株式会社 画像符号化装置
SG74566A1 (en) 1995-08-23 2000-08-22 Sony Corp Encoding/decoding fields of predetermined field polarity apparatus and method
JPH0974566A (ja) * 1995-09-04 1997-03-18 Sony Corp 圧縮符号化装置及び圧縮符号化データの記録装置
WO1997013362A1 (en) 1995-09-29 1997-04-10 Matsushita Electric Industrial Co., Ltd. Method and device for encoding seamless-connection of telecine-converted video data
JP3813070B2 (ja) 1995-09-29 2006-08-23 松下電器産業株式会社 光ディスクを再生する再生装置
JPH09130732A (ja) * 1995-11-01 1997-05-16 Matsushita Electric Ind Co Ltd シーンチェンジ検出方法および動画像編集装置
US5835163A (en) 1995-12-21 1998-11-10 Siemens Corporate Research, Inc. Apparatus for detecting a cut in a video
US5682204A (en) 1995-12-26 1997-10-28 C Cube Microsystems, Inc. Video encoder which uses intra-coding when an activity level of a current macro-block is smaller than a threshold level
US5821991A (en) 1996-02-28 1998-10-13 C-Cube Microsystems, Inc. Method and apparatus for inverse telecine process by correlating vectors of pixel differences
US6157674A (en) 1996-03-21 2000-12-05 Sony Corporation Audio and video data transmitting apparatus, system, and method thereof
JPH09284770A (ja) * 1996-04-13 1997-10-31 Sony Corp 画像符号化装置および方法
US7095874B2 (en) 1996-07-02 2006-08-22 Wistaria Trading, Inc. Optimization methods for the insertion, protection, and detection of digital watermarks in digitized data
US6643506B1 (en) 1996-08-07 2003-11-04 Telxon Corporation Wireless software upgrades with version control
US5793895A (en) 1996-08-28 1998-08-11 International Business Machines Corporation Intelligent error resilient video encoder
KR100389893B1 (ko) 1996-11-09 2003-09-19 삼성전자주식회사 영상 특성 분류법을 이용한 영상 부호화 장치
FR2756399B1 (fr) 1996-11-28 1999-06-25 Thomson Multimedia Sa Procede et dispositif de compression video pour images de synthese
DE69835058D1 (de) 1997-03-12 2006-08-10 Matsushita Electric Ind Co Ltd Verfahren und vorrichtung zur videosignalkodierung
US6333950B1 (en) 1997-04-18 2001-12-25 Canon Kabushiki Kaisha Encoding apparatus and method and computer readable recording medium in which encoding program has been recorded
JP3679606B2 (ja) 1997-04-18 2005-08-03 キヤノン株式会社 符号化装置及び方法並びに符号化プログラムが記録されたコンピュータ可読記録媒体
JP3588970B2 (ja) 1997-04-30 2004-11-17 ソニー株式会社 信号符号化方法、信号符号化装置、信号記録媒体及び信号伝送方法
US5864369A (en) 1997-06-16 1999-01-26 Ati International Srl Method and apparatus for providing interlaced video on a progressive display
US6012091A (en) 1997-06-30 2000-01-04 At&T Corporation Video telecommunications server and method of providing video fast forward and reverse
KR100226722B1 (ko) 1997-07-30 1999-10-15 구자홍 동영상 움직임 벡터 추정 방법
US5978029A (en) 1997-10-10 1999-11-02 International Business Machines Corporation Real-time encoding of video sequence employing two encoders and statistical analysis
US6574211B2 (en) 1997-11-03 2003-06-03 Qualcomm Incorporated Method and apparatus for high rate packet data transmission
US5956026A (en) 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
JP3738939B2 (ja) * 1998-03-05 2006-01-25 Ｋｄｄｉ株式会社 動画像のカット点検出装置
EP0946054B1 (en) 1998-03-09 2005-06-08 Sony International (Europe) GmbH Weighted median filter interpolator
US6895048B2 (en) 1998-03-20 2005-05-17 International Business Machines Corporation Adaptive encoding of a sequence of still frames or partially still frames within motion video
US6538688B1 (en) 1998-07-02 2003-03-25 Terran Interactive Method and apparatus for performing an automated inverse telecine process
JP2000032474A (ja) 1998-07-08 2000-01-28 Sharp Corp 動画像符号化装置
JP2000059774A (ja) 1998-08-06 2000-02-25 Nippon Telegr & Teleph Corp <Ntt> 映像符号化制御装置
US6580829B1 (en) 1998-09-25 2003-06-17 Sarnoff Corporation Detecting and coding flash frames in video data
KR20010099660A (ko) * 1998-09-29 2001-11-09 매클린토크 샤운 엘 고품위 텔레비전 인코더에서 장면변화의 검출 및화면코딩타입의 조정을 행하기 위한 방법 및 장치
JP3921841B2 (ja) 1998-10-16 2007-05-30 ソニー株式会社 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置
JP2000209553A (ja) 1998-11-13 2000-07-28 Victor Co Of Japan Ltd 情報信号記録装置及び再生装置
US6297848B1 (en) 1998-11-25 2001-10-02 Sharp Laboratories Of America, Inc. Low-delay conversion of 3:2 pulldown video to progressive format with field averaging
JP3260713B2 (ja) 1998-12-21 2002-02-25 日本電気株式会社 無線基地局のプログラムダウンロード方式
US6618507B1 (en) 1999-01-25 2003-09-09 Mitsubishi Electric Research Laboratories, Inc Methods of feature extraction of video sequences
JP3591712B2 (ja) 1999-04-02 2004-11-24 松下電器産業株式会社 動画送信装置及び動画受信装置
US6724819B1 (en) 1999-04-02 2004-04-20 Matsushitas Electric Industrial Co., Ltd. Moving picture transmission apparatus, moving picture reception apparatus, and moving picture data record medium
JP2000295626A (ja) 1999-04-08 2000-10-20 Mitsubishi Electric Corp 多段画像符号化装置
US6325805B1 (en) 1999-04-23 2001-12-04 Sdgi Holdings, Inc. Shape memory alloy staple
JP4287538B2 (ja) 1999-04-30 2009-07-01 パナソニック株式会社 画像信号切替方法及び装置並びにこれを用いたデジタル撮像カメラ及び監視システム
EP1092321A1 (en) 1999-04-30 2001-04-18 Koninklijke Philips Electronics N.V. Video encoding method with selection of b-frame encoding mode
GB2352350B (en) 1999-07-19 2003-11-05 Nokia Mobile Phones Ltd Video coding
JP3669619B2 (ja) 1999-09-06 2005-07-13 富士通株式会社 無線端末装置のソフトウェア更新方法及びその装置
US6370672B1 (en) 1999-11-01 2002-04-09 Lsi Logic Corporation Determining the received data rate in a variable rate communications system
GB2359918A (en) 2000-03-01 2001-09-05 Sony Uk Ltd Audio and/or video generation apparatus having a metadata generator
JP2001169251A (ja) 1999-12-03 2001-06-22 Sony Corp 記録装置および方法、ならびに、再生装置および方法
US7116717B1 (en) 1999-12-15 2006-10-03 Bigband Networks, Inc. Method and system for scalable representation, storage, transmission and reconstruction of media streams
US7093028B1 (en) 1999-12-15 2006-08-15 Microsoft Corporation User and content aware object-based data stream transmission methods and arrangements
US6449002B1 (en) 1999-12-21 2002-09-10 Thomson Licensing S.A. Truncated metric for NTSC interference rejection in the ATSC-HDTV trellis decoder
JP2001045494A (ja) 2000-01-01 2001-02-16 Mitsubishi Electric Corp 画像符号化装置
JP2001204026A (ja) 2000-01-21 2001-07-27 Sony Corp 画像情報変換装置及び方法
US6600836B1 (en) 2000-01-28 2003-07-29 Qualcomm, Incorporated Quality based image compression
EP1169866A1 (en) 2000-02-01 2002-01-09 Koninklijke Philips Electronics N.V. Video encoding with a two step motion estimation for p-frames
US6542546B1 (en) 2000-02-02 2003-04-01 Mitsubishi Electric Research Laboratories, Inc. Adaptable compressed bitstream transcoder
US6574279B1 (en) 2000-02-02 2003-06-03 Mitsubishi Electric Research Laboratories, Inc. Video transcoding using syntactic and semantic clues
US6490320B1 (en) 2000-02-02 2002-12-03 Mitsubishi Electric Research Laboratories Inc. Adaptable bitstream video delivery system
JP3960451B2 (ja) 2000-03-06 2007-08-15 Ｋｄｄｉ株式会社 シーン特性検出型動画像符号化装置
SE0000766L (sv) 2000-03-08 2001-06-25 Sem Ab Krets för tändförställning, varvtalsbegränsning och förhindrande av baklängesgång i magnettändsystem
WO2001069936A2 (en) 2000-03-13 2001-09-20 Sony Corporation Method and apparatus for generating compact transcoding hints metadata
US20020154705A1 (en) 2000-03-22 2002-10-24 Walton Jay R. High efficiency high performance communications system employing multi-carrier modulation
AU4670701A (en) 2000-04-07 2001-10-23 Snell & Wilcox Limited Video signal processing
US6867814B2 (en) 2000-04-18 2005-03-15 Silicon Image, Inc. Method, system and article of manufacture for identifying the source type and quality level of a video sequence
US6507618B1 (en) 2000-04-25 2003-01-14 Hewlett-Packard Company Compressed video signal including independently coded regions
EP1152621A1 (en) 2000-05-05 2001-11-07 STMicroelectronics S.r.l. Motion estimation process and system.
US6647061B1 (en) 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
KR100708091B1 (ko) 2000-06-13 2007-04-16 삼성전자주식회사 양방향 움직임 벡터를 이용한 프레임 레이트 변환 장치 및그 방법
JP2002010259A (ja) 2000-06-21 2002-01-11 Mitsubishi Electric Corp 画像符号化装置及び画像符号化方法及び画像符号化プログラムを記録した記録媒体
EP1172681A3 (en) 2000-07-13 2004-06-09 Creo IL. Ltd. Blazed micro-mechanical light modulator and array thereof
US20040125877A1 (en) * 2000-07-17 2004-07-01 Shin-Fu Chang Method and system for indexing and content-based adaptive streaming of digital video content
KR20020010171A (ko) 2000-07-27 2002-02-04 오길록 블록 정합 움직임 추정을 위한 적응적 예측 방향성 탐색방법
FI120125B (fi) 2000-08-21 2009-06-30 Nokia Corp Kuvankoodaus
JP2002094994A (ja) 2000-09-19 2002-03-29 Nec Corp 動画再生処理装置および動画再生処理方法
US7038736B2 (en) * 2000-09-21 2006-05-02 Canon Kabushiki Kaisha Moving image processing apparatus and method, and computer readable memory
DE60124746T2 (de) 2000-09-22 2007-09-13 Koninklijke Philips Electronics N.V. Videocodierung mit hybrider temporeller und snr-bezogener feingranularer skalierbarkeit
JP2002125227A (ja) 2000-10-11 2002-04-26 Sony Corp 画像情報変換装置及び方法
US7095814B2 (en) 2000-10-11 2006-08-22 Electronics And Telecommunications Research Institute Apparatus and method for very high performance space-time array reception processing using chip-level beamforming and fading rate adaptation
ATE330427T1 (de) 2000-11-23 2006-07-15 Koninkl Philips Electronics Nv Videodekodierungsverfahren und entsprechender dekodierer
EP1209624A1 (en) 2000-11-27 2002-05-29 Sony International (Europe) GmbH Method for compressed imaging artefact reduction
US7203238B2 (en) 2000-12-11 2007-04-10 Sony Corporation 3:2 Pull-down detection
US6934335B2 (en) 2000-12-11 2005-08-23 Sony Corporation Video encoder with embedded scene change and 3:2 pull-down detections
US7058130B2 (en) * 2000-12-11 2006-06-06 Sony Corporation Scene change detection
US6744474B2 (en) 2000-12-13 2004-06-01 Thomson Licensing S.A. Recursive metric for NTSC interference rejection in the ATSC-HDTV trellis decoder
US6807234B2 (en) 2000-12-19 2004-10-19 Intel Corporation Method and apparatus for constellation mapping and bitloading in multi-carrier transceivers, such as DMT-based DSL transceivers
GB2372394B (en) 2000-12-22 2004-09-22 Matsushita Electric Ind Co Ltd Interpolation apparatus and video signal processing apparatus including the same
CA2330854A1 (en) 2001-01-11 2002-07-11 Jaldi Semiconductor Corp. A system and method for detecting a non-video source in video signals
US6987728B2 (en) 2001-01-23 2006-01-17 Sharp Laboratories Of America, Inc. Bandwidth allocation system
JP4336051B2 (ja) 2001-01-31 2009-09-30 株式会社エヌ・ティ・ティ・ドコモ 無線通信端末、発呼制限方法及びプログラム
US6721361B1 (en) * 2001-02-23 2004-04-13 Yesvideo.Com Video processing system including advanced scene break detection methods for fades, dissolves and flashes
US7110452B2 (en) 2001-03-05 2006-09-19 Intervideo, Inc. Systems and methods for detecting scene changes in a video data stream
KR100783396B1 (ko) 2001-04-19 2007-12-10 엘지전자 주식회사 부호기의 서브밴드 분할을 이용한 시공간 스케일러빌러티방법
US20020163964A1 (en) 2001-05-02 2002-11-07 Nichols James B. Apparatus and method for compressing video
US6909745B1 (en) 2001-06-05 2005-06-21 At&T Corp. Content adaptive video encoder
KR100803115B1 (ko) 2001-06-07 2008-02-14 엘지전자 주식회사 적응 안테나 어레이가 구비된 wｃｄｍａ 시스템에서의 신호 처리 방법 이를 위한 시스템
KR100393066B1 (ko) 2001-06-11 2003-07-31 삼성전자주식회사 적응 움직임 보상형 디-인터레이싱 장치 및 그 방법
JP2002051336A (ja) 2001-06-15 2002-02-15 Sharp Corp 画像符号化装置及び画像復号装置
US7483581B2 (en) 2001-07-02 2009-01-27 Qualcomm Incorporated Apparatus and method for encoding digital image data in a lossless manner
JP2003037844A (ja) 2001-07-23 2003-02-07 Sharp Corp 動画像符号化装置
KR100440953B1 (ko) 2001-08-18 2004-07-21 삼성전자주식회사 영상 압축 비트 스트림의 트랜스코딩 방법
US6959044B1 (en) * 2001-08-21 2005-10-25 Cisco Systems Canada Co. Dynamic GOP system and method for digital video encoding
US7359466B2 (en) 2001-08-24 2008-04-15 Lucent Technologies Inc. Signal detection by a receiver in a multiple antenna time-dispersive system
US6784942B2 (en) 2001-10-05 2004-08-31 Genesis Microchip, Inc. Motion adaptive de-interlacing method and apparatus
TW536918B (en) 2001-11-01 2003-06-11 Aiptek Int Inc Method to increase the temporal resolution of continuous image series
JP2003209837A (ja) 2001-11-09 2003-07-25 Matsushita Electric Ind Co Ltd 動画像符号化方法及び動画像符号化装置
AU2002343220A1 (en) 2001-11-09 2003-05-19 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and apparatus
US6847680B2 (en) 2001-12-17 2005-01-25 Mitsubishi Electric Research Laboratories, Inc. Method for detecting talking heads in a compressed video
KR100446083B1 (ko) 2002-01-02 2004-08-30 삼성전자주식회사 움직임 추정 및 모드 결정 장치 및 방법
US20030142762A1 (en) 2002-01-11 2003-07-31 Burke Joseph P. Wireless receiver method and apparatus using space-cover-time equalization
US7139551B2 (en) 2002-01-19 2006-11-21 Sasken Communication Technologies Ltd. System and method for automatically downloading software applications to a remote terminal
JP2003224847A (ja) 2002-01-29 2003-08-08 Sony Corp 画像符号化装置とその方法、および、画像復号化装置とその方法
US6996186B2 (en) 2002-02-22 2006-02-07 International Business Machines Corporation Programmable horizontal filter with noise reduction and image scaling for video encoding system
KR100850705B1 (ko) 2002-03-09 2008-08-06 삼성전자주식회사 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치
US20060133514A1 (en) 2002-03-27 2006-06-22 Walker Matthew D Video coding and transmission
US20030185302A1 (en) 2002-04-02 2003-10-02 Abrams Thomas Algie Camera and/or camera converter
CA2380105A1 (en) 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
KR100468726B1 (ko) 2002-04-18 2005-01-29 삼성전자주식회사 실시간 가변 비트율 제어를 수행하는 부호화 장치 및 방법
US6985635B2 (en) 2002-04-22 2006-01-10 Koninklijke Philips Electronics N.V. System and method for providing a single-layer video encoded bitstreams suitable for reduced-complexity decoding
JP3926203B2 (ja) 2002-05-15 2007-06-06 シャープ株式会社 コンテンツ表示装置、コンテンツ表示プログラム、該プログラムを記録した記録媒体、およびコンテンツ表示方法
KR100850706B1 (ko) 2002-05-22 2008-08-06 삼성전자주식회사 적응적 동영상 부호화 및 복호화 방법과 그 장치
FR2840495B1 (fr) 2002-05-29 2004-07-30 Canon Kk Procede et dispositif de selection d'une methode de transcodage parmi un ensemble de methodes de transcodage
JP2004023288A (ja) 2002-06-13 2004-01-22 Kddi R & D Laboratories Inc 動画像符号化のための前処理方式
US7436890B2 (en) 2002-06-05 2008-10-14 Kddi R&D Laboratories, Inc. Quantization control system for video coding
KR100553082B1 (ko) 2002-06-20 2006-02-15 엘지전자 주식회사 이동통신 단말기의 무선 데이터 다운로드 이어받기 장치및 방법
US7167507B2 (en) 2002-07-01 2007-01-23 Lucent Technologies Inc. Equalizer and method for performing equalization in a wireless communications system
US7136417B2 (en) 2002-07-15 2006-11-14 Scientific-Atlanta, Inc. Chroma conversion optimization
JP2005533337A (ja) 2002-07-16 2005-11-04 トムソン ライセンシング 拡張層の交互のストリーム識別番号を用いた、ｈｄ−ｄｖｄのための基本層と拡張層のインターリーブ
US7089313B2 (en) 2002-07-25 2006-08-08 Matsushita Electric Industrial Co., Ltd. Protocol independent communication system for mobile devices
CN100412973C (zh) 2002-08-21 2008-08-20 汤姆森特许公司 用户设备以及在用户设备上对数字数据压制水印的方法
US20040045038A1 (en) 2002-08-29 2004-03-04 Duff John F. System and method for the synchronized activation of external devices in association with video programs
US6904081B2 (en) 2002-08-30 2005-06-07 Motorola, Inc. Spread spectrum receiver apparatus and method
GB0222562D0 (en) 2002-09-28 2002-11-06 Koninkl Philips Electronics Nv Method and apparatus for encoding image and or audio data
JP4294933B2 (ja) 2002-10-16 2009-07-15 富士通株式会社 マルチメディアコンテンツ編集装置およびマルチメディアコンテンツ再生装置
KR100501933B1 (ko) 2002-11-21 2005-07-18 삼성전자주식회사 멀티미디어 데이터 암호화 압축방법 및 장치
WO2004049722A1 (en) 2002-11-22 2004-06-10 Koninklijke Philips Electronics N.V. Transcoder for a variable length coded data stream
CN101141651B (zh) 2002-11-25 2010-11-10 松下电器产业株式会社 动态补偿方法、图像编码方法及图像解码方法
AU2003283723A1 (en) 2002-12-10 2004-06-30 Koninklijke Philips Electronics N.V. A unified metric for digital video processing (umdvp)
CN100342401C (zh) 2002-12-20 2007-10-10 皇家飞利浦电子股份有限公司 基于段的运动估计
US7154555B2 (en) 2003-01-10 2006-12-26 Realnetworks, Inc. Automatic deinterlacing and inverse telecine
US7039855B2 (en) 2003-01-22 2006-05-02 Lsi Logic Corporation Decision function generator for a Viterbi decoder
EP1588548B1 (en) 2003-01-28 2010-10-13 Thomson Licensing Robust mode staggercasting
KR20040079084A (ko) 2003-03-06 2004-09-14 삼성전자주식회사 시간적 복잡도를 고려한 적응적 동영상 부호화와 그 장치
US7062260B2 (en) 2003-03-27 2006-06-13 Nokia Corporation Fetching application and driver for extension device from network
US7075581B1 (en) 2003-06-03 2006-07-11 Zoran Corporation Interlaced-to-progressive scan conversion based on film source detection
KR100518580B1 (ko) 2003-06-10 2005-10-04 삼성전자주식회사 인버스 텔레시네 변환장치 및 변환방법
US8811492B2 (en) 2003-06-16 2014-08-19 Thomson Licensing Encoding method and apparatus enabling fast channel change of compressed video
EP1634460B1 (en) 2003-06-19 2014-08-06 Thomson Licensing Method and apparatus for low-complexity spatial scalable encoding
KR100505694B1 (ko) 2003-07-09 2005-08-02 삼성전자주식회사 직접 계산 방식에 의한 코드화 직교 주파수 분할 다중화수신기의 채널 상태 평가 장치 및 그 방법
US7406123B2 (en) 2003-07-10 2008-07-29 Mitsubishi Electric Research Laboratories, Inc. Visual complexity measure for playing videos adaptively
GB0316387D0 (en) 2003-07-12 2003-08-13 Ncr Int Inc Software updates
WO2005009057A2 (en) 2003-07-14 2005-01-27 Interdigital Technology Corporation High performance wireless receiver with cluster multipath interference suppression circuit
US7356073B2 (en) 2003-09-10 2008-04-08 Nokia Corporation Method and apparatus providing an advanced MIMO receiver that includes a signal-plus-residual-interference (SPRI) detector
US20050076057A1 (en) 2003-10-03 2005-04-07 Puneet Sharma Method and system for transferring video and audio files to portable computing devices
US7840112B2 (en) 2003-10-08 2010-11-23 Intel Corporation Gradually degrading multimedia recordings
JP2005123732A (ja) 2003-10-14 2005-05-12 Matsushita Electric Ind Co Ltd デブロックフィルタ処理装置およびデブロックフィルタ処理方法
KR20050037293A (ko) 2003-10-18 2005-04-21 삼성전자주식회사 영상신호의 아티팩트 억제장치 및 그 방법
US7780886B2 (en) 2003-10-21 2010-08-24 Certainteed Corporation Insulation product having directional facing layer thereon and method of making the same
EP1657835A4 (en) 2003-10-30 2008-12-10 Panasonic Corp MOBILEND DEVICE ORIENTED TRANSMISSION PROCESS AND DEVICE
US7420618B2 (en) 2003-12-23 2008-09-02 Genesis Microchip Inc. Single chip multi-function display controller and method of use thereof
EP2485186A1 (en) 2004-01-21 2012-08-08 Qualcomm Incorporated Application-based value billing in a wireless subscriber network
US7483077B2 (en) 2004-01-30 2009-01-27 Broadcom Corporation Method and system for control of a multi-field deinterlacer including providing visually pleasing start-up and shut-down
US7904039B2 (en) 2004-01-30 2011-03-08 UNIVERSITé LAVAL Multi-user adaptive array receiver and method
US20050168656A1 (en) 2004-01-30 2005-08-04 Wyman Richard H. Method and system for quantized historical motion for motion detection in motion adaptive deinterlacer
US7324583B2 (en) 2004-02-13 2008-01-29 Nokia Corporation Chip-level or symbol-level equalizer structure for multiple transmit and receiver antenna configurations
KR100586883B1 (ko) 2004-03-04 2006-06-08 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩방법, 프리디코딩방법, 비디오 디코딩방법, 및 이를 위한 장치와, 이미지 필터링방법
KR100596705B1 (ko) 2004-03-04 2006-07-04 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩 방법과 비디오 인코딩 시스템, 및 비디오 디코딩 방법과 비디오 디코딩 시스템
US7339980B2 (en) 2004-03-05 2008-03-04 Telefonaktiebolaget Lm Ericsson (Publ) Successive interference cancellation in a generalized RAKE receiver architecture
US20050201478A1 (en) 2004-03-10 2005-09-15 Holger Claussen Modulation in a mobile telecommunications system
US20050222961A1 (en) 2004-04-05 2005-10-06 Philippe Staib System and method of facilitating contactless payment transactions across different payment systems using a common mobile device acting as a stored value device
US20050231635A1 (en) 2004-04-16 2005-10-20 Lin Ken K Automated inverse telecine process
EP1592250A1 (en) 2004-04-30 2005-11-02 Matsushita Electric Industrial Co., Ltd. Film-mode detection in video sequences
US7991053B2 (en) 2004-05-04 2011-08-02 Qualcomm Incorporated Method and apparatus to enable acquisition of media in streaming applications
US7430336B2 (en) 2004-05-06 2008-09-30 Qualcomm Incorporated Method and apparatus for image enhancement for low bit rate video compression
DE102004026433A1 (de) 2004-05-29 2005-12-22 Schott Ag Nanoglaspulver und deren Verwendung
US7536626B2 (en) 2004-06-18 2009-05-19 Qualcomm Incorporated Power control using erasure techniques
EP1615447B1 (en) 2004-07-09 2016-03-09 STMicroelectronics Srl Method and system for delivery of coded information streams, related network and computer program product therefor
JP4145275B2 (ja) 2004-07-27 2008-09-03 富士通株式会社 動きベクトル検出・補償装置
KR20060011281A (ko) 2004-07-30 2006-02-03 한종기 트랜스코더에 적용되는 해상도 변환장치 및 방법
JP2006074684A (ja) 2004-09-06 2006-03-16 Matsushita Electric Ind Co Ltd 画像処理方法及び装置
US7474701B2 (en) 2004-09-23 2009-01-06 International Business Machines Corporation Single pass variable bit rate control strategy and encoder for processing a video frame of a sequence of video frames
US7528887B2 (en) 2004-10-08 2009-05-05 Broadcom Corporation System and method for performing inverse telecine deinterlacing of video by bypassing data present in vertical blanking intervals
US7660987B2 (en) 2004-10-29 2010-02-09 Baylis Stephen W Method of establishing a secure e-mail transmission link
KR100592882B1 (ko) 2004-12-13 2006-06-26 한국전자통신연구원 세션 초기화 프로토콜(ｓｉｐ) 기능이 없는 이동 단말에인터넷 프로토콜 멀티미디어 서브시스템을 통한 세션초기화 프로토콜 기반 인스턴스 메시징 서비스 제공방법,시스템 및 이를 위한 인스턴스 메시징 프록시 서버
US20060153294A1 (en) 2005-01-12 2006-07-13 Nokia Corporation Inter-layer coefficient coding for scalable video coding
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
US20060166739A1 (en) 2005-01-25 2006-07-27 Jeng-Tay Lin Operating method for a wireless recreation system
KR20060088461A (ko) 2005-02-01 2006-08-04 엘지전자 주식회사 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
EP2268042B1 (en) 2005-03-10 2014-07-02 Qualcomm Incorporated A decoder architecture for optimized error management in streaming multimedia
AR052601A1 (es) 2005-03-10 2007-03-21 Qualcomm Inc Clasificacion de contenido para procesamiento de multimedia
US7929776B2 (en) 2005-03-10 2011-04-19 Qualcomm, Incorporated Method and apparatus for error recovery using intra-slice resynchronization points
US8693540B2 (en) 2005-03-10 2014-04-08 Qualcomm Incorporated Method and apparatus of temporal error concealment for P-frame
US7995656B2 (en) 2005-03-10 2011-08-09 Qualcomm Incorporated Scalable video coding with two layer encoding and single layer decoding
US8165167B2 (en) 2005-03-10 2012-04-24 Qualcomm Incorporated Time tracking for a communication system
CN101662683B (zh) 2005-04-14 2012-05-30 汤姆森特许公司 空间可缩放视频解码方法和空间可缩放视频解码器
US20060239347A1 (en) * 2005-04-25 2006-10-26 Ashish Koul Method and system for scene change detection in a video encoder
US20060271990A1 (en) 2005-05-18 2006-11-30 Rodriguez Arturo A Higher picture rate HD encoding and transmission with legacy HD backward compatibility
KR100716998B1 (ko) 2005-05-24 2007-05-10 삼성전자주식회사 블록화 현상을 감소시키기 위한 부호화 및 복호화 장치 및그 방법과, 이를 구현하기 위한 프로그램이 기록된 기록매체
KR100718134B1 (ko) * 2005-07-21 2007-05-14 삼성전자주식회사 비트율에 적응적인 영상 데이터 이진 산술 부호화/복호화장치 및 방법
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
AT502881B1 (de) 2005-10-05 2007-08-15 Pirker Wolfgang Ddr Zahnimplantat
US9521584B2 (en) 2005-10-17 2016-12-13 Qualcomm Incorporated Method and apparatus for managing data flow through a mesh network
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US20070206117A1 (en) 2005-10-17 2007-09-06 Qualcomm Incorporated Motion and apparatus for spatio-temporal deinterlacing aided by motion compensation for field-based video
US7916784B2 (en) 2005-10-20 2011-03-29 Broadcom Corporation Method and system for inverse telecine and field pairing
US7433982B2 (en) 2005-10-21 2008-10-07 Microsoft Corporation Transferable component that effectuates plug-and-play
US20070171280A1 (en) 2005-10-24 2007-07-26 Qualcomm Incorporated Inverse telecine algorithm based on state machine
JP4984503B2 (ja) 2005-11-28 2012-07-25 富士通株式会社 携帯端末装置およびソフトウェアインストール方法
US7587569B2 (en) 2005-12-19 2009-09-08 Yahoo! Inc. System and method for removing a storage server in a distributed column chunk data store
US7705913B2 (en) 2005-12-20 2010-04-27 Lsi Corporation Unified approach to film mode detection
US7835904B2 (en) 2006-03-03 2010-11-16 Microsoft Corp. Perceptual, scalable audio compression
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
JP4929819B2 (ja) 2006-04-27 2012-05-09 富士通株式会社 映像信号の変換装置及び方法
JP5412739B2 (ja) 2008-03-26 2014-02-12 富士通株式会社 光増幅装置

Also Published As

Publication number Publication date
JP2009512400A (ja) 2009-03-19
AR055450A1 (es) 2007-08-22
US8654848B2 (en) 2014-02-18
WO2007047758A1 (en) 2007-04-26
KR20080068716A (ko) 2008-07-23
US20070160128A1 (en) 2007-07-12
CN101326809A (zh) 2008-12-17
CL2006002797A1 (es) 2008-03-24
EP1938580A1 (en) 2008-07-02

Similar Documents

Publication Publication Date Title
TW200803518A (en) Method and apparatus for shot detection in video streaming
RU2402885C2 (ru) Классификация контента для обработки мультимедийных данных
US9402034B2 (en) Adaptive auto exposure adjustment
JP5722943B2 (ja) 冗長ビデオ符号化方法および装置
WO2007118160A1 (en) Temporal quality metric for video coding
TW200942045A (en) Method for video coding
CN108235025B (zh) 自适应帧间参考结构的拉格朗日乘子优化方法
JP4104593B2 (ja) 画像処理システムの損失ブロック復旧装置及びその方法
Xie et al. Adaptive VP8 steganography based on deblocking filtering
US8503520B2 (en) Method and apparatus for encoding a flash picture occurring in a video sequence, and for decoding corresponding data for a flash picture
US10856002B2 (en) Method, device and system for method of encoding a sequence of frames in a video stream
EP1921866A2 (en) Content classification for multimedia processing
Bang et al. An efficient skipping method of H. 264/AVC weighted prediction for various illuminating effects
Chong et al. Temporal error concealment for video transmission
CN116137658A (zh) 视频编码方法及装置
JP6016484B2 (ja) 符号化装置
CN115499647A (zh) 多变换核选择方法、编码解码方法、电子设备及存储介质
Cheung Error resilient support in video proxy over wireless channels
Chen et al. A human vision system based flash picture coding method for video coding
JP2017005634A (ja) 符号化装置及び符号化方法