TW200935874A - Systems and methods of motion and edge adaptive processing including motion compensation features - Google Patents

Systems and methods of motion and edge adaptive processing including motion compensation features Download PDF

Info

Publication number
TW200935874A
TW200935874A TW097137178A TW97137178A TW200935874A TW 200935874 A TW200935874 A TW 200935874A TW 097137178 A TW097137178 A TW 097137178A TW 97137178 A TW97137178 A TW 97137178A TW 200935874 A TW200935874 A TW 200935874A
Authority
TW
Taiwan
Prior art keywords
pixel
intensity
motion
edge
column
Prior art date
Application number
TW097137178A
Other languages
English (en)
Inventor
Jiande Jiang
Jun Zhang
Yong Wu
Dong Wang
Chun Wang
Original Assignee
Trident Microsystems Far East
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=40563113&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TW200935874(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Trident Microsystems Far East filed Critical Trident Microsystems Far East
Publication of TW200935874A publication Critical patent/TW200935874A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/142Edging; Contouring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/0142Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes the interpolation being edge adaptive

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Systems (AREA)

Description

200935874 九、發明說明:
【發明所屬之技術領域;J 發明領域 5 ❹ 10 15 ❹ 20 本發明大致上係有關視訊影像顯示器,特定言之係有 關視訊影像處理諸如解交插。 Εί Λ. iltr 發明背景 多種電視信號及視訊信號交插,此處組成一單一視訊 框之該掃描線集合(典型NTSC彩色電視為525條)未經循序 掃描或發射。反而視訊框被劃分成為二「攔」,各欄包含每 隔一條掃描線。於電視,組成一欄之掃描線先發射,接著 發射第二欄之掃描線。 但多種顯示裝置諸如電腦監視器並未交插。反而此等 裝置循序掃描整個顯示器’逐一掃描每一條掃描線。為了 於此種漸進式掃描裝置上顯示交插的掃描順序,諸如視訊 信號,解交減理必須將各個分開賴變換成為—個完整 顯示框,其可循序輸出至該顯示裝置。解交插處理之主要 任務係重組一父插攔之各掃描線間之遺漏線。 有兩種主要的解交插方法,各方法有其本身之優劣 點。「欄際」技術單純將得自第二欄之資料與得自第一爛之 資料合併來產生-個完整訊框。若於該視訊框中並無任何 運動,則此種方法獲得理想重_畫面。垂直解析度如同 原先未經交插訊㈣H但若於視訊信號㈣有運動, 則運動效應通常為人眼可見。當掃描第二欄之交錯掃描線 5 200935874 時,當-物件移動時,該物件於择描第一爛期間係位移一 個位置’出現運動效應。單純組合二搁之交插掃描線獲得 該物件之無法為人所接受之複製。 「攔内」技術使用只得自單—攔之資料來產生一個完 5整框。此種方法較佳適合用於有運動之視訊框。使用棚内 技術,不存在之像素值係由位於該不存在之像素上方及下 方之掃描線之像素值内插。雖然此項技術不會產生有害的 運動效應,但因此項技術並未合併一棚的運動至下一棚, 也並未提升垂直解析度,原因在於其單純係由單一爛内部 1〇既2的像素值_’而未使用來自第二欄之賴掃描線之像 素資訊。此外’簡單欄内解交插技術(諸如簡單垂直内插)傾 向於產生順著對角線邊緣之無法為人所接受之射形圖像。 又復’當接受處理之視訊資訊包括運動中的影像/像素 資料時,特別隨著特定像素之運動程度的變大,此種處理 '、解交插方法有輸^滿意的視訊f彡像之問題。如此需要提
间影像處理可靠度’提供運動補償處理,以及減少諸如輪 出視訊影像中之缺陷諸如模糊。 J 【發明内容】 發明概要 解交插 根據本發明之线及方法係針對視訊影像處理諸如 插相關聯 交 本攔 個具體實關巾,提供__種處理與視訊影像解 位炉之像衫歡方法。此外,财法包括於一本 仃邊緣適應㈣插處理,狀祕是料過該像素 20 200935874 素之—第—強度估值;接收來自於運動補償處理 ,丨、動資料,包括對於至少一個參考攔中之像素鄰近之至 v 個像素之估計的運動向量;以及決定該像素之一第二 強度估值為得自該邊緣適應性内插處理之邊緣資料及運動 5貝料之函數。一個或多個進一步實施例包括執行強度計算 程序’例如内插像素之強度呈第一強度估值及第二強度估 值之函數。 須瞭解前文概略說明及後文詳細說明僅供舉例說明之 用而非限制如此處所述之本發明。除了本文列舉之特性之 10外可提供額外特性及/或變化。例如本發明係針對所揭示之 特性之各種組合及次等組合,及/或後文於詳細說明部分所 揭示之若干額外特性之組合及次組合。 圖式簡單說明 第1圖為略圖顯示根據本發明之面相之一交插的掃描 15 視訊源中之偶攔及奇攔之實例。 第2圖為流程圖顯示根據本發明之面相之運動及邊緣 處理方法之實例。 第3圖為方塊圖顯示根據本發明之面相之解交插系統 之實例。 20 第4A及4B圖為方塊圖顯示根據本發明之面相之邊緣/ 運動處理分量之特性之實例。 第5A及5B圖為略圖顯示根據本發明之面相之像素處 理功能之欄至欄特性之實例。 第ό圖為時程圖顯示根據本發明之面相用於運動檢測 7 200935874 方法之欄際像素節段實例。 第7圖為示意圖顯示根據本發明之面相,用於處理運動 值資訊之系統實例。 第8A-8D圖為像素圖實例,顯示根據本發明之面相之 5 邊緣檢測特性。 第9圖為示意圖顯示根據本發明之面相,用於處理邊緣 資訊之系統實例。 第10顯示根據本發明之面相後處理邊緣内插及運動估 計特性之實例。 10 15 第11圖顯示先前技術之用於訊框顯示器之訊框緩衝器。 第12圖顯示根據本發明之面相包括用於即時運動及邊 緣適應性解交插之特性緩衝器之一訊框緩衝器。 較佳實施例之詳細說明 現在將說明本發明之細節,本發明之實例係於附圖中 舉例說明。於後文說明中列舉之實施例並非表示符合本案 凊求之發明之全部實施例。反而僅為符合本發明相關之若 干面相之實例。可能時,附圖中將使用相同的聽符號來 標示相同的或類似的零組件。 多項技術用於處理及/或解交插得自-來源之視訊資 料。此等技術之實例係採用運動檢測處理、邊緣檢測處理 或德波處is錢&轉混魏叫止切換假影。 大:上二發明之各面相係有關於視訊;:號例如包括 至少二似插的掃描線之-視訊信號解交插顧内插-像 20 200935874 5 ❹ 10 15 20 素,各掃描線包括一系列具有個別強度的像素。與此種像 素貧訊相關聯之處理實例包括產生表示環繞該像素之連續 訊框間移動之代姐運動數值,_有_像素之邊緣方 向,使用所檢測得之邊緣方向執行於該像素之邊緣適應性 内插’接收與合併ig動補償資料,以及使用所產生之運動 數值執行於該像素之運動適應性内插。 第1圖顯示典型交插的掃描視訊源之一偶欄1〇及一奇 欄12之略圖。偶_係由偶數掃描線G、2及4等所組成,而 奇欄12係由奇數掃描線1、3等所組成。典型NTSC電視視訊 源包含以此種方式劃分之525條線。偶欄丨〇係於時間^掃 描’而奇襴12係於㈣時間㈤掃描。為了例如由偶搁酿 成-完整訊框’必須重組遣漏線(例如線3)。第1圖之實線表 示於一給定欄中既有的掃描線,而虛線表示需要重構之遺 漏線。 舉例言之,順著偶攔10之線3之各個像素元體χ須經重 構。可單純使用得自下一個奇攔12之像素元體q、^及^ 等,但如此簡單欄際技術可能導入如所述之運動效應。或 可單純使用欄内鄰近像素值Al、八2、八3及仏、b2、&等來 内插遺漏元體C!、C2及C3。但此種欄内技術無法提供高垂 直解析度,產生順著對角線邊緣之鋸齒狀亂真假影。 有關像素之處理,本發明之各面相係有關下列特性中 之一者或多者。經由比較得自連續訊框之該像素周圍之像 素節段,可產生一運動數值。該節段包括於—掃描線中之 至少兩個接續像素。運動數值的產生包括對得自該像素周 9 200935874 圍連續訊框之多個像素節段之各個節段,計算多 決定計算所狀多撼值巾之最大值 ^ 個差值; 多個差值中之最大值;以及由一詢查表決之 5 10 15 環繞該像素是否存在有邊緣可經決定,依據是否動數值。 緣而由多個詢查表巾選定該詢查表。又復,=否存在有邊 至少三個連續訊框之該像素周圍之像素節段比較得自 數值,連續訊框中之至少—個訊框之像二構:::運動 特性緩衝ϋ。 L财财於— 第2圖顯示解交插方法2〇之一實例之流程圖該解交插 方法改良較少運動之—訊框各區之垂直解析度, 具有較大運動之其他區之非期望之運動效應。於第一步驟 22實射,料個像素X,使崎自連射個職之資讀 測運動數值。此等運動數值例如為具有由0至丨5之範圍之一 個4位元整數,且係與該像素X周圍之景象之運動程度成正 比。於第二步驟24之實财,使驗其本身訊框内部之像 素X周圍之鄰近像素之強度值,可檢測像衫之邊緣方向。 例如’邊緣方向可大致上定義為45度、135度或無邊緣(也 稱作為90度)。於第三步職之實财,經讀用邊緣方向 資料及環繞像素X之某些鄰近像素值,決定該像素之中間内 插值。最後,於第四步驟28之實财,透過組合中間内插 值及像素Χ得自下-攔之數值,可獲得像素X之最終像素值, 此等數值中之纟或_者視需要可藉檢測得之運動數值、運 動補償資訊及/或其他運動相關資料加權,如本文說明。 第3圖中,提供顯示根據本發明之各面相之一解交插系 20 200935874 統之實例之方塊圖。雖然於後文說明第3圖中各個組件之進 一步細節討論,但於此處提供此等組件如何互連之簡短综 論。於此種具體實施例十,如圖所示,交插的視訊信號刚 輸入運動檢測器110、靜態區處理單元12〇、邊緣檢測器13〇 5及運動估計器/補償器單元14〇。當接收到視訊信號獅時, 運動檢測H11G及靜態區處理單元12()分別輸出運動檢測資 料112及靜態資料122’其中輸出的運動檢測資料112及靜態 資料122各自係輸入掺混組件16〇。運動檢測資料ιΐ2可為多 位兀數目來指示運動位準。於基本具體實施例中,運動檢 測資料可為4位元數目,b〇_等於無運動及Μ1_於最大 運動。 有關邊緣檢測,邊緣檢測器130接受視訊信號1〇〇及輸 出邊緣檢測資料132,該邊緣檢測資料132輸入邊緣適應性 内插單元134,因而產生邊緣資料136。然後視訊信號也 15由運動估計器/補償器單元140接收因而產生運動資料 142。然後邊緣資料136及運動資料142輸入邊緣/運動處理/ 掺混組件150因而產生邊緣/運動資料152,其可送至一後處 理組件,諸如掺混組件16〇。掺混組件16〇可與美國專利案 第7,242,819號所陳述之掺混、邊緣檢測及邊緣適應性内插 20組件符合一致,該案以引用方式併入此處彷彿此等組件應 用於本文所述系統。此處,舉例言之,掺混組件16〇之輸出 仏號可為二乘積之和,第一乘積為邊緣/運動資料152與運 動檢測資料m之某個乘積’而第二乘積為靜態資料122與 運動負料112之函數之某個乘積。如此,由如下結果獲得輸 11 200935874 出實例: (邊緣/運動資料)*運動+(靜態資料)*(最大值-運動)/最大值 此處最大值為相關聯之最大值(例如當運動=4位元時 為16) 5 當接收到各個運動資料112、靜態資料122及邊緣/運動 資料152時,掺混組件丨60輸出像素又之強度估值丨62(例如像 素X之度或彩度之估值)。經由對一訊框中之各像素平順 地組合欄内值及攔際值,該等數值係經由於該像素所檢測 得之運動檢測資料112加權,本方法對景象之靜態部分及動 10態部分,提供於解交插掃描視訊信號中之較高準確度及所 顯示之影像之較大可信度。換言之,_交插結果(亦即邊 緣/運動資料152)係與對得自下一棚之像素χ之數值C2(亦即 靜態資料m)根據於像素X檢測得之運動量(亦即運動檢測 資料112)成比例地混合。舉财之,若軸檢職料ιΐ2為 15高,則像素X之強度估值162大部分係由邊緣/運動資料152 表示之欄内結果測定。另-方面,若運動檢測資料ιΐ2極 低,則強度估值162大部分可由於靜態資料122所表示之下 一欄中之數值C決定。 20
回頭參考邊緣相關之處理(例如邊緣檢測⑽、邊緣適 應性内插m等),經由對第-多數像素對形成個別差異, 可檢測邊緣方向。例如各像素對包含由該像素之上方及下 =描線所得之二像素’對第—多數像素對之各個像素 料第-共通方向。如此,邊緣方向處理之實例包括由第 一夕數像素對侧之差值算出該第—多數像切之第一电 12 200935874 :=去形成第二多數像素對個別之差值(各像素對包含得 之上方及τ方之掃描線之二像素,第二多數像素對 2料對具衫二共通方向);Μ二錢像素對個別 鼻出該第二多數像素對之第二組合差值;以及比較 合綱之差值與-邊緣臨界
10 各個多數像素對各自包括至少三對像素對。此外,計 及第二組合差值包括將由第一及第二像素對之個別 對所形成之個別差值各自之絕對值相加。此外,第一 方向可順著該像素垂直方向爽角約135度,第二方向可順著 該像素垂直方向夾角約45度。 邊緣方向處理之實例也包括對第三多個像素對形成個 別差值,各像素對包含於該像素上方及下方之掃描線之二 15像素,第三多數像素對之各個像素對具有第三共通方向,
5由該第三多數像素對之個別差值算出第三多數|素對之第 一組合差值,以及若邊緣存在時,比較第三組合差值與第 —及第二組合差值來決定邊緣方向。第三多數像素對各自 包括至少三個像素對,以及計算該第三組合差值包括將由 第二多數像素對之個別像素對各自所形成之個別差值各自 2〇之絕對值相加。此外,計算第三組合差值進一步包括相加 所得之絕對值乘以敏感度因數。根據本發明之一個或多個 面相,第三方向實質上為垂直。 額外邊緣檢測130及邊緣適應性内插134特性及功能也 與美國專利第7,242,819號所揭示者符合一致,該案係以弓丨 13 200935874 用方式併入此處。 第4A圖顯示包括用於決定像素資訊之邊緣/運動處理/ 掺混15 0之一實例之系統實例之方塊圖。如圖所示邊緣運動 處理掺混組件150進一步包含邊緣/運動處理單元151耦接 5至掺混組件153,如圖所示。於此種配置實例中,邊緣/運 動處理單元151接收得自邊緣適應性内插處理之邊緣資料 136,其中邊緣資料136包括像素χ之第一強度估值139。此 處’邊緣適應性内插程序可藉邊緣適應性内插134執行,其 中邊緣資料136進一步包含像素a及c相關之資料,其係鄰 10近本欄之像素X(亦即A資料137及C資料138)。邊緣/運動處 理單元151也接收得自運動補償處理之運動資料142,其包 括於至少一個參考攔中像素χ鄰近之至少一個像素之經估 計的運動向量。於舉例說明之實例中,運動補償處理可藉 運動估計器/補償器單元14〇執行,其中運動資料142包括像 15素D之運動向量(例如運動向量143,其中像素D之相關資料 為出現於本欄之前之一參考攔之資料)及/或其中運動資料 I42包括像素£之運動向量(例如運動向量144,其中像素£之 相關資料為出現於本攔之後之一參考欄之資料)。邊緣/運動 處理單元151然後決定像素X之第二強度估值154呈得自邊 20緣適應性内插處理之邊緣資料136及得自運動補償處理之 運動資料142之函數。然後第二強度估值154輸入-處理/組 合組件諸如掺混組件⑸,於該處執行強度計算程序,例如 像素X之内插強度(亦即邊緣/運動資料152)計算為第一強度 估值139及第二強度估值154之函數。 200935874 5 ❹ 10 15 ❷ 20 於根據本發明之若干面相中,運動資料142進—步包含 運動可信度資料145,運動可信度資料145可輸入掺混組件 153,如圖所示。根據此等面相,運動可信度資料145可反 映藉運動補償處理計算得之經估計的運動向量之可信度, 例如反映運動向量143及運動向量144個別之可信度之數 值)。此外,對於此等面相,由掺混組件153所進行之強度 計算程序進一步包含根據運動可信度資料145選擇性加權 像素之内插強度。於其他實施例中,掺混組件153包括邏輯 電路(係藉硬體、軟體、韌體其組合等而實施)若運動可信度 資料145係低於臨界值,則實現像素之内插強度等於第一強 度估值139。 第4B圖為方塊圖顯示根據本發明之各面相邊緣/運動 處理組件之實例之另一個實施例。第4B圖之系統實例顯示 本發明之邊緣/運動處理組件之進一步關聯性及特定功 能。舉例言之,掺混組件153可組配成其輸出信號亦即邊緣 /運動資料輸出信號152等於下述: (邊緣/第一估值)*(最大值-可信度[145])+(第二估值 [154]广(可信度)/最大值 此處最大值為相關聯之最大值(例如對4位元數值為 16)。 第4B圖之系統實例也玎執行根據如第4A圖所示組件 之邊緣/運動處理。進一步,第一估值139可為藉邊緣適應 性内插單元所提供之簡單邊緣適應性内插結果。 第5A及5B圖為根據本發明之一個或多個面相,符合第 15 200935874 5 10 15 20 3圖及第4圖之邊緣/運動處理/掺混組件150及其他處理/掺 混、.且件151、153、160之運動向量及像素資訊之說明圖。於 第3圖及第4圖之系統實例中’「A」表示順著所檢測之邊緣 方向於線a之像素;「c」表示順著所檢測之邊緣方向於線。 之像素,「第一估值」表示諸如邊緣適應性内插結果之估值 其可等於(a+c)/2;rD」表示順著前一欄中運動向量方向之X 個投影像素;及「E」表示順著下-攔中運動向量方向之χ 個投影像素。如此,對邊緣檢測為可靠之大邊際,Α與C幾 乎為相等,保有計算得之邊緣值,輸出供隨後處理之用。 有關細節區移動,此處邊緣方向檢測並不可靠,D值及£值 較為可靠。如此,基於所輸入之資料之相對強度,你用 來增加細節運動區之清晰度(第5B圖顯示第3圖及第4圖之d 資料與e資料間之交互關係及與目前像素如相關聯之運動 向量)。如此例如運動估計組件獲得各個像素之運動向 提供各像素之運動方向。然後該運動向量用來預測^量搁 及/或下-糊之像素的位置。如此,使用本運動向量資訊, 由前一欄或下一攔可預測遺漏線x。 於第5A圖舉例說明之本㈣實例中,X為欲產生用來解 交插之線。若移動檢測器輸出信號為靜態,則仏卩 。 靜態區處理之結果。若移動檢測器輪出信號為: X=(f,c),此處f(a,c)為邊緣適應性交插。但用於運動區— 垂直解析度為靜態區處理之解析度之__ . ) 又一牛。如此,若未經 進-步處理,則由於如此指示用欄際資訊,藉解交插器之 輸出信號顯示不正確的視訊影像,諸如模_影像。 ❹ ❹ 16 200935874 本發明包括符合前文說明之邊緣適應性處理。 ❹ 10 關於像素之内插’若邊緣方向實質上為垂直,則處 步包括1邊緣方向實質上為垂直,經由將該像素〜 上方之至少-個像素及該像素實f正下方之至少―正 求平均而形成中間像素值;若邊緣方向與水平* 素 度,則經好㈣像素上方之至少—個像素城像素下2 之至少-個像素以及通過該像素實質順著45度軸而形成今 中間像素值;以及若邊緣方向與水平失角約135度,則經= 平均該像素上方之至少一個像素及該像素下方之至少2 像素以及通過該像素實f順著i 3 5度軸㈣成該中間像2 值。又復,於該像素之運動適應性内插之進行方式可經由 將該中間像素值乘以運動值,以及將得自下一欄之像素值 之 乘以最大運動值與該運動值間之差值相加來形成該像素 最終内插值。 15 其他各面相係有關於視訊信號解交插期間内插—像 素’其中該視訊信號包括交插掃描線之至少二欄,各掃描 線包括具有個別強度值之一系列像素。此處例如,運動值 產生組件可產生表示環繞該像素之連續訊框間運動之代表 性運動值;邊緣方向檢測器可檢測環繞該像素之邊緣方 20向;邊緣適應性内插器可使用所檢測得之邊緣方向執行於 該像素之邊緣適應性内插;以及運動適應性⑽器可使用 所產生之運動值執行於該像素之運動適應性内插。 進一步面相包括下列特性實例中之一者或多者。運動 值產生組件可比較得自環繞該像素之連續信號之像素節段 17 200935874 來產生運動值。該等節段包括於一掃描線中之至少兩個連 續像素。運動值產生組件進一步包括差值計算器,該差值 計算器組配成由環繞該像素之連續訊框之多個像素節段之 各個節段計算多個差值;差值比較器,係組配來判定計算 5得之多個差值中之最大差值;以及運動值詢查表,係組配 來藉得自該差值比較器之計算得之多個差值中之最大差值 檢索。運動值產生組件進一步包括·一邊緣檢測器,其組配 來檢測環繞該像素是否存在有邊緣,此處依據是否存在有 邊緣而定,詢查表係選自於多個詢查表。經由比較得自至 ίο少二個接續訊框之環繞該像素之像素節段’可產生運動 值。特性緩衝器也可用來儲存連續訊框中之至少一訊框之 像素節段。 本發明之各面相之優點包括下列優點中之—者或多 15 20 者。經由平順組合於一個訊框中之各個像素之欄際值及攔 内值,藉於該像素檢測得之運動加權,對景象之靜熊部分 及動態部分可提供解交插掃描視訊信號之較大準確度,及 提供所顯示影像之較高保真度。攔際内插技術用於具有較 低運動值之像素,允許獲得較高垂直解析f攔際内插技 術用於具有較高運動值之像素,減少非期望之運動效應。 將二者組合於線性函數,藉於該像素檢测得之運動加權, 可順利提供兩項技射之最佳技術。經由基於 g 否檢測得邊緣,_運純詢絲,切更準確料動= 測定。基於此處所述像素處理(❹分料)衫運動值可 增加運動檢測準確度與減少雜訊及錯誤運動別^ 复
18 200935874 由於-節段中之各像素共享共通運動值,分段可銳利地減 少每個訊框所需的運動計算數目。使用至少三訊框之八p 像素資訊,允許獲得更準確之運動測定。使用分段及2 緩衝器用以儲存前一個訊框之各節段,可減少執行特性緩 5衝器讀寫上所要求之頻寬。也可免除每個訊框執行分段計 算多於一次的需要。順著檢測得之邊緣内插像素值,提供 解交插一視訊信號之更高準確度。 ” 其次將說明進一步初始運動檢測處理。參考第6圖及第 ❹ 7圖,經由對連續攔位分析環繞像素又之像素群,可產生— 10像素X之運動值。根據若干面相’六個搁被諮詢:搁〇(項目 100)及欄1(項目101)為目前訊框之前的兩個訊框,搁^項目 102)及攔3(項目1G3)為目前訊框之前的—個訊框,及棚 4(1〇4)及攔聊)包含目前訊框。此外,得自此等攔之像素 節奴(110a至11〇ι)而非個別像素經比較來檢測運動值。於一 個實施例中’各節段⑽她含—掃描線中之四個接續像 素,平均成為一個強度值。藉此方式大於丨之任何像素數目 ❹- 皆可分節。 用於像素X之運動值計算之各節段通常係相鄰於像素 X或含有像素X。舉例言之,得自目前訊框攔4之節段A⑴加) 2〇為高於像素X之一像素節段,而得自同-攔之節段G⑽g) 為像素X下方之一像素節段。以及節段D(110d)係得自同一 個訊框之下一欄5且含有像素χ。 將像素分節連同執行運動檢測有數項優點。第一,可 減少雜訊與提高運動檢測準確度。第二,一節段内部之各 19 200935874 個像素(例如4個像素)將共享同 個運動值,故運動計算只
2施’或以專用硬體實施。於較佳實施例中,於所需像 素各區塊(邏輯區塊2G2a至織)分料,败得自連續欄之 相鄰於(或含有)像素χ之各對像素節段間之差值。例如,纟 10前-個偶欄2節段Β⑽b)扣除得自目前偶欄4之節段A W (_)(區塊咖),及測定結果之絕對值(區塊2〇㈣同理, 前個偶攔2之節段B (ll〇b)與早期偶欄〇之節段c⑴〇c)間 之差值(區塊204b)之絕對值(區塊2〇6b)經測定。以類似方 式由$段〇 (ll〇d)扣除節段E (ii〇e),由節段E (11〇e)扣除 1衰又F⑴0幻’由節段H (110h)扣除節段G (ll〇g)及由節段I (11 〇i)扣除節段Η (1 l〇h)(區塊2〇2c至202f)。其次測定此等差 值各自之絕對值(區塊2〇6c至206f)。然後測定此等絕對差值 〇 之最大值(區塊208)。然後所得最大差值(最大節段際差值) 用作為運動值之可再度載入詢查表之索引(區塊21〇)來輸出 20最終運動值216。於一個實施例中,各個像素(及各自經平 均之像素節段)具有8位元強度值(亦即由〇至255),運動值 216為具有數值由〇至15之4位元數目。 於一個實施例中,依據環繞像素X是否檢測得邊緣而 定’可載入不同的詢查表。舉例言之,可判定目前偶欄4之 20 200935874 節段A (110a)與節段G (ll〇g)間之差值(區塊2〇4g),於邊緣 檢測步驟中結果之絕對值比較邊緣臨界值(區塊214)來決定 像素X上方與下方間是否有鮮明差異。如此決定於像素又是 否有欄内垂直邊緣。 5 10 15 ⑩ 20 若未檢測得邊緣,則詢查表可為簡單函數: 若小於或等於15,運動[3:〇]=最大節段際差值;以及 最大卽段際差值之全部其他數值,運動[3:〇]=ι5。 若檢測得邊緣(例如欄内垂直緣),則有效運動值降低, 例如:若小於或等於31,運動[3:0]=1/2最大節段際差值; 以及最大節段際差值之全部其他數值,運動[3:〇]=15。 當檢測得邊緣時,使用不同的詢查表(具有較少運動 值)’可產生更準讀的内摘結果。就後文說明之内插計算變 得更為明顯’若檢測得邊緣,由另_·個詢查表取為減少的 運動值,經由取得之下一攔之較多值,且使用得自目前欄 中環繞像素X之既有像素之較少浦,解交插計算將產生像 素X之強度’否則,將「軟化」邊緣,通常產生較不準確的 結果。 依據實施例而定可使用運動值之多個詢查表。舉例言 之,運動值為完整8位it數目,完整映射至連續像素節段間 所產生之最大強度差值之度規。此外,可使用更繁靖之邊 緣檢測演繹關(容後詳述)來依㈣緣方向μ同詢查表 中選出運動值。 於產生運動值後(例如第2圖步驟22),相鄰於像素乂之 邊緣之方向(若有)可經判定(例如第2圖步驟叫。參考第从 21 200935874 圖至第8DiJ ’對像素χ上方及下方之像素25〇群進行邊緣檢 測。如第8A圖所示,像素x上方之掃描線252包括五個像素 A. sub.O至A.sub.5 ’像素X下方之掃描線254包括五個像素 B. sub.O至B.sub.5。參考第7B圖’首先,邊緣檢測演繹法則 5順著135度軸(於垂直夾角測定)計算環繞像素X之三對像素 間(256a、256b、及256c)之個別差值,各對像素包含得自掃 描線252之一個像素及得自掃描線254之一個像素。然後將 . 個別差值之絕對值加總來獲得0丨汗135值: 同理,參考第8C圖,其次邊緣檢測演繹法則計算沿9〇 0 1〇度(或垂直)軸,環繞像素X之三對像素(258a、258b及258c) 間之個別差值。然後此等個別差值之絕對值經加總來獲得 Diff90 值: 此處因數為降低Diff90計算之敏感度之敏感度常數。於 —個實施例中,因數=0.75。 5 以及參考第8D圖,其次邊緣檢測演繹法則計算沿45度 (或垂直)軸,環繞像素X之三對像素(26〇a、260b及260c)間 之個別差值。然後此等個別差值之絕對值經加總來獲得 ο
Diff45 值: 然後環繞像素X(該像素欲内插)之三個不同方向,此三 對像素對進行比較來判定環繞像素X之邊緣的存在及邊緣 方向。 首先,Diff45及Diffl35與邊緣臨界值比較來判定是否 存在有實質上非垂直緣: IF.vertline.Diff45-Diffl35.vertline.>Edge_Threshold 22 200935874 THEN Edge Exist 此處Edge_Threshold為決定邊緣存在之另一個敏感度 因數 5 Ο 10 15 ❹ 20 於一個實施例中’ Edge_Threshold=32。邊緣臨界值及 因數二者經調整來以可能產生假邊緣指示之較高細節程度 考慮景象。特別,邊緣計算通常並未判定小細節諸如細線 為邊緣。敏感度常數因數考慮下述狀況,例如單一細線產 生跨像素集合之高90度差值,但低45度差值及低135度差 值,如此可能產生假邊緣。 邊緣檢測演繹法則之内設情況為無邊緣(或90度邊 緣)。邊緣檢測演繹法則使用Diff45、Diff90及Diffl35結果 來判定既有邊緣之方向:IF (Diff45<=Diff90) AND (Diff45<=Diffl35) AND Edge_Exist) THEN Edge[l:0]=l〇; ELSE IF ((Diffl35<=Diff90) AND (Diffl35<=Dff45) AND Edge_Exist) THEN Edge[l:0]=ll; ELSE Edge[l:0]=00. 此處Edge[l:0]為邊緣狀況之二位元二進制碼:二進制 之Edge[l:0]=00指示無(或垂直)邊緣,Edge[l:0]=10指示實 質上順著45度軸之邊緣;及Edge[l:0]=ll指示實質上順著 135度轴之邊緣。也可使用任何其他界定邊緣之習慣。 第9圖表示實施邊緣檢測演繹法則之示意圖300。首先 計算Diffl35,係經由計算三對像素對之個別差值 (A.sub.0-B.sub.2, A.sub.l —B.sub.3, A.sub.2 -B.sub.4)(於邏 輯方塊302a至302c),取該等差值之絕對值(方塊304a至 304c),然後將結果加總(方塊306a)。Diff90之計算方式係經 23 200935874 由計异二對像素對之個別差值(A.sub.l-B.sub.l, A.sub.2 -B.sub.2, A.sub.3 -B.sub.3)(於邏輯方塊302d至 302f),取該等差值之絕對值(方塊3〇4d至304f),然後結果加 總(方塊306b) ’及然後乘以因數31〇(方塊308)。以及Diff45 5之計算方式係經由計算三對像素對之個別差值 (A.sub.2-B.sub.O, A.sub.3 -B.sub.l,A.sub.4 -B.sub.2)(於方 塊302g至302i),取該等差值之絕對值(方塊3〇4g至3〇4丨),然 後結果加總(方塊306c)。 然後判定Diffl35與Diff45間之差值(方塊312),結果之 © 10 絕對值(方塊314)與邊緣臨界值318比較來判定邊緣存在是 否為真(方塊316)。然後提供Diff90、Diffl35、Diff45及 Edge_Exist信號來比較與解碼執行前述比較之邏輯方塊320 而產生最終Edge[l:0]信號322。 於已經測定Edge[l:0]及Motion[3:0](可以任何順序或 15 並列完成)後,計算像素X之中間欄内内插結果M_Data (第2 圖步驟26)如下:IF Edge[l:0]=00 (90度邊緣或無邊緣), THEM M_Data=A.sub.2 /2+B.sub.2 /2 ; IF Edge[l:0]=10 (45 —❹ 度邊緣或無邊緣),THEM M_Data=A.sub.3 /2+B.sub.l /2 ; 及IF Edge[l:0]=ll (135度邊緣或無邊緣),THEM 20 M_Data=A.sub.l /2+B.sub.3 /2 ; 此等計算基於順著檢測得之邊緣數值内插像素X之 值,提供更準確之邊緣描述。
最後,欄内内插結果混合得自下一欄(例如第1圖之奇 欄 12)之像素 X 之數值 C.sub_2 : IF (Motion=15) THEN 24 200935874 X=M-Data; Else X=((16-Motion[3:0]).milltid〇tc + (Motion.multidot.M—Data))/16。 若運動為GM5數值之錄,料動為高,大部分像素 X係由攔内結果M-Data決定。若運動為極低,像素χ之全部 5 數值係由下一欄中之數值C測定。 經由將各像素之欄内值及攔際值二者平順組合於一訊 框,藉於該像素檢測得之運動加權,本方法對景象之靜態 部分及動態部分,提供於解交插掃描視訊信號之較高準確 © 度及於所顯示影像之較高可信度。 10 如前述,得自邊緣/運動處理/掺混組件150之邊緣(例如 參考第3圖及第4圖)可通訊至後處理組件,諸如掺混組件 160。使用鈾述邊緣適應性内插,任何邊緣方向檢測錯誤皆 可能產生不準確的輸出信號。若此種結果直接進入顯示, 則當邊緣方向未經校正時可能存在有惱人的點雜訊。特別 15係對有詳細細節之畫面而言,邊緣檢測演繹法則並非經常 性保證100%準確。為了移除與不準確的邊緣方向相關之此 ®. 等假影,本發明包括一個或多個後處理組件,諸如掺混組 件,該等組件於初步邊緣/運動處理後可使用或執行來移除 此專雜訊。 20 第10圖顯示後處理組件150諸如邊緣/運動處理單元 151及相關組件之後處理方塊56之一個具體實施例。如圖所 示,本後處理組件之實例包括一濾波器94諸如五點中數濾 波器、一比較器96、一加法區塊98、一除法區塊1〇〇,一減 法區塊102、一乘法區塊104、一絕對值區塊1〇6及一乘法器 25 200935874 108。於此等討論及說明實例中,濾波器舛所使用之五點單 純為像素之彩度及邊緣適應性資料,但根據本發明之後處 理/掺混可於其他輪出值及/或資料範圍執行。雖然基本邊緣 處理函數以下係就第10圖討論,但本發明之經擴充之内插 5特性及運動處理特性可符合下列實例。舉例言之,例如藉 上方及下方之像素,X可經内插,須實質上順著A、EDGE 及c並無垂直高頻分量。此處EDGE為邊緣適應性内插結 果。基於此,若EDGE係大於A及C二者或EDGE係小於A及 C二者’則系統將考慮EDgE為不準確或為由不準確的邊緣 10方向所形成的雜訊。如此,諸如中數濾波器之一個組件可 優異地用來過濾出此等錯誤資料及/或移出雜訊。於若干實 施例中,系統可使用濾波器94諸如五點中數濾波器來移除 脈衝雜訊,諸如點雜訊。 得自初步邊緣/運動處理之資料或輸出信號EDGE首先 15連同信號A、C、D及E通訊至濾波器94。 X_after_filter=median5(A, C, EDGE, D, E); 此處 函數中數5(a,b,c,d,e)可有效選出a, b,c, d, e之正中值 A及C可為邊緣資料诸如邊緣適應性内插 20 D及E可為運動資訊諸如運動補償資料。 於滤波器94之後’結果(亦即信號x_after_fiiter)可與相 乘98之輸入信號比較來瞭解任何差值是否過大。若差值間 隔過大,則系統獲得結論該結果不可靠,以平均值來置換 輸出信號。置換函數以乘法器108執行。如第10圖之實例所 200935874 示,處理實例包括下列計算,可藉區塊98-108執行:
Vert int=(A+C)/2;
If (abs(X_after—filter Vert_int)>(Vert int*factor))
Then X output=(A+C)/2; 5 ❹ 10 15 e 20
Else X_output=X after filter. 區塊98及100可有效提供Vert_int信號。區塊i〇2及i〇6合作 來提供輸入信號A至比較器96,其係等於(X_after_fiiter _ Vert int)之絕對值。區塊104可以適當因數[2:0]乘以Vert int來提供輸 入信號B至比較器96。基於期望之準嫁度、系統參數及/或嘗試 錯誤,系統操作者可以適當方式選擇因數之數值。比較器96可 有效比較A及B,若結果為可靠(亦即A不大於B)則信號乘法器 10 8選擇(X output,X after一filter),或若結果為不可靠(亦即a大 於B) ’則選擇(A+B)/2。然後輸出信號X_outpUt提供作為輸出信 號或隨後之濾波、處理及/或掺混組件/處理程序,亦即用於顯 示作為經内插之影像之一部分。 後處理之敏感度及可靠度可藉改變Vert int信號及因數 [2:0]之乘積(經由變更因數值)控制。如此後處理區塊56提供 作為輸出信號,或為經内插像素之邊緣適應性内插值,或 為垂直内插值,其為經内插像素12之正上方及正下方之像 素之平均值。因數[2:0]用來調整邊緣内插之敏感度,因此 二數值中之較可靠的數值由後處理區塊56輸出。 除了第6圖及第8圖所示邏輯電路硬體之外,可用來提 供前一訊框資訊之記憶體儲存用於執行運動計算。如第u 27 200935874 圖所示,用於多項視訊用途(例如典型pc圖形處裡器及視訊 卡)’訊框級衝器400包含保有循序視訊框之兩個緩衝器(此 處定名為表面A 402及表面B 404)。一個緩衝器係經捕捉處 理器等寫入,另一個緩衝器被讀至顯示處理器4〇6用於顯示 於視訊螢幕上。如此確保接受讀取的記憶體不會被下一個 訊框寫入的記憶體所竄改。雙重緩衝器於輸入垂直同步信 號與輸出垂直同步信號不同之情況下特別有用。於典型雙 重緩衝,顯示處理器無法接取前一個訊框之資訊。 如第12圖所不 10 20 * ,丨丈初双调无前訊框之4 素資訊,本發明之一個實施例採用兩個特性緩衝器,亦f 特性緩衝器A 508a及特性緩衝器b 508b。對欲顯示之各4 訊框,顯示處理器506提取出目前訊框之相關特性,且將j 寫回訊框緩衝器500,儲存於特性緩衝器5〇8a*5〇8b中之_ 者。藉此方式,兩個特性緩衝器將儲存兩個先前訊框之^ 價值的相關的㈣資訊,料f訊可由運動檢測器於運讀 計算期間用來對目前訊框之各個像素產生運動數值。 如前文說明’於本發明之運動檢測期間使用分節段与 將四個連續像素平均成為—個平均的像素祕。㈣如育 文=明,此㈣段經啸。”段之—項方體果為唯琴 目月』況框4算付之像素節段須料於特性緩衝器5〇8以 5=此縮小執行特性緩衝器之讀取及寫入所 =明=除需要執行分節計算每個訊框多於—次。如❸ 度,俾:== =值,也可提高運動檢測㈣ 運動測疋。又復,因一節段中之各低
28 200935874 5 Ο 10 15 20 =素將共享;:共通運動值,分節可激烈地減少每個訊框所 ° ^ ’各個節段可有任何數目之像 素·此處用於本發明之一個實施例選用四個像素。 係於申請專利範圍。例如,任何邏輯區塊 任何=组各 如目減可冑料料财形記憶體(例 ^隨上機f、唯讀_、cd侧記憶體、硬碟 功於程式’來由中央處理單元讀取而實現本發明之 程式指令。此外,模組可實施為實現本發明 用於運之硬體邏輯電路。任何數目之像素皆可組合成 檢游算之節段。任何數目之先前訊框皆可用於 緣檢、則 之運動。任何數目之像素對皆可用於邊 不同像*其他邊緣方向可使用像素對之^選擇來判定。 動因=素群可經選擇來決定邊緣方向及/或内插值。不同運 及邊緣臨界值可_擇來娜計算 ==及U可驗餘及舰她㈣,制係用於未 么父插之電視用途。 „ 說明’本發明之實施例及特性可經由電腦亦即 可以、軟體及/錄體實施。例如,此處揭示之系統及方法 、《種I式具體實施,例如包括資料處理器諸如電腦, 合腦,包括一資料庫、數位電子電路、勤體、軟體或其組 諸如此外’雖然所揭示之若干實施例描述來源碼編輯組件 = 體但根據本發明之系統及方法也可使用硬體、軟 29 200935874 體及/或韌體之任一種組合 及其他面相及原理可於多種環境^卜,前述本發明之特性 用―執行根據二應 操作,或可包括通用用途 :之各項處理程序及 化或_碼重新組配來—料平台其係經選擇性活 程序並未特別與任何=要:功能。此處揭示之處理 裝置相關,可由硬體、軟 /他 如,多種itffi㈣功體之適當組合實現。例 4 於根據本發明之教稍寫成的程 10
式,或可更方便地組成特化MU絲執行所要求之方 法及技術。
此處揭示之系統及方法可實施為電腦程式產品,亦即 於#訊載波例如於機器可讀取儲存媒體或元件或於傳播信 號具體實施用以由資料處理裝置例如可程式處理器、電腦 或多部電腦執行或控制資料處理裝置之操作之電腦程式。 電腦程式可以任-種程式語言形式包括緣編語言或解譯語 言寫成,且程式可以任何形式部署,包括部署為孤立程式 或部署為模組、組件、次常式或可用於運算環境之其他單 元。電腦程式可部署成於一個位置之一部電腦或多部電腦 上執行,或分散跨多個位置且藉通訊網路互連。 2〇 須瞭解剛文說明僅供舉例說明而非限制本發明之範 圍,本發明之範圍係由隨附之申請專利範圍之範圍界定。 其他實施例係屬於如下申請專利範圍之範圍内。 【明式簡皁說明】 第1圖為略圖顯示根據本發明之面相之一交插的掃描 30 200935874 視訊源中之偶攔及奇攔之實例。 第2圖為流程圖顯示根據本發明之面相之運動及邊緣 處理方法之實例。 第3圖為方塊圖顯示根據本發明之面相之解交插系統 5 之實例。 第4A及4B圖為方塊圖顯示根據本發明之面相之邊緣/ 運動處理分量之特性之實例。 第5A及5B圖為略圖顯不根據本發明之面相之像素處 〇 理功能之欄至欄特性之實例。 10 第6圖為時程圖顯示根據本發明之面相用於運動檢測 方法之攔際像素節段實例。 第7圖為示意圖顯示根據本發明之面相,用於處理運動 值資訊之系統實例。 第8A-8D圖為像素圖實例,顯示根據本發明之面相之 15 邊緣檢測特性。 • 第9圖為示意圖顯示根據本發明之面相,用於處理邊緣 ® . 資訊之系統實例。 第10顯示根據本發明之面相後處理邊緣内插及運動估 計特性之實例。 20 第11圖顯示先前技術之用於訊框顯示器之訊框緩衝器。 第12圖顯示根據本發明之面相包括用於即時運動及邊 緣適應性解交插之特性緩衝器之一訊框緩衝器。 31 200935874 【主要元件符號說明】 10.. .偶攔 12.. .奇欄 20.. .解交插方法 22-28...方法步驟 56.. .後處理方塊 94.. .渡波器 96.. .比較器 98.. .加法區塊 100.. .除法區塊 102.. .減法區塊 104.. .乘法區塊 106.. .絕對值區塊 108.. .乘法器 100.. .已交插之視訊信號 100-105...欄 110.. .運動檢測器 110a-i…像素節段 112.. .運動檢測資料 120.. .靜態區處理單元 122.. .靜態資料 130.. .邊緣檢測器 132.. .邊緣檢測資料 134.. .邊緣適應性内插單元 136.. .邊緣資料 137.. .A 資料 138.. .C 資料 139.. .第一強度估值 140.. .運動估計器/補償器單元 142.. .運動資料 143.. .運動向量 144.. .運動向量 145.. .運動可信度資料 150.. .處理/攙混組件、邊緣/運 動處理/攙混組件 151.. .邊緣/運動處理單元 152.. .邊緣/運動資料 153.. .攙混組件 154.. .第二強度估值 160.. .攙混組件 162.. .強度估值 200.. .運動值檢測方法 202a-i、204a-g、206a-f...區塊 208-214...區塊 216.. .運動值 250.. .像素群 252.. .掃描線
32
200935874 254.. .掃描線 256a-c...三對像素 258a-c、260a-c···三對像素 300.. .實施邊緣檢測演繹則之 示意圖 302a-i、304a-i、306a-c...邏輯區塊 308-316...方塊 310.. .因數 318.. .邊緣臨界值 320.. .比較與解碼邏輯 322.. .最終 Edge[l:0]信號 400.. .訊框緩衝器 402.. .表面 A 404.. .表面 B 406.. .顯示處理器 500.. .訊框緩衝器 506.. .顯示處理器 508a-b...特性緩衝器
33

Claims (1)

  1. 200935874 十、申請專利範圍: 1. 一種處理與視訊影像解交插相關聯之像素資訊之方 法,該方法包含: 於一目前欄上執行邊緣適應性内插處理,因而判定 邊緣是否通過一像素,其中該緣適應性内插處理提供包 括該像素之一第一強度估值之邊緣資料; 接收與運動補償處理相關聯之運動資料,包括對於 至少一個參考欄中之該像素鄰近之至少一個像素之估 計的運動向量; 以作為該邊緣資料及運動資料之函數,決定該像素 之一第二強度估值;以及 執行強度計算程序,其中該像素的内插的強度係以 作為該第一強度估值及該第二強度估值之函數來計算。 2. 如申請專利範圍第1項之方法,其中該第二強度估值係 呈該邊緣資料及該運動資料之一中數濾波處理之函數 而獲得。 3. 如申請專利範圍第2項之方法,其中由該中數濾波處理 所使用之邊緣資料包括該第一強度估值。 4. 如申請專利範圍第1項之方法,其中該運動資料包括於 前一欄中順著運動向量方向之該像素之投影像素。 5. 如申請專利範圍第1項之方法,其中該運動資料包括於 下一欄中順著運動向量方向之該像素之投影像素。 6. 如申請專利範圍第1項之方法,其中該運動資料包含經 估計之運動向量資料。 200935874 如申吻專利㈣第丨項之方法,其巾該運動補償處理進 一步包括判定反映該經估計之運動向量之可信度之一 數值以及其中該強度計算程序進—步包括根據該數值 加權該像素之經内插之強度。 8.如申請專鄉圍第7項之方法,其巾若紐健低於臨界 ' 9值’則該像素之經内插之強度係、等於該第-強度估值。 種處理與解交插處理程序相關聯之像素資訊之系 U 統’該襞置包含: 一邊緣適應性内插組件,其中該邊緣適應性内插組 件判定一邊緣是否通過本欄位中之一像素,以及其中該 邊緣適應性内插組件提供邊緣資料,包括該像素之一第 一強度估值; 一運動處理組件,其中該運動處理組件接收與運動 補償處理相關聯之運動資料,包括於至少一個參考攔中 . 用於該像素鄰近之至少—個像素之-經估計之運動向 〇 量,以及其中該運動處理組件以作為該邊緣資料及該運 動資料之函數,決定該像素之一第二強度估值;以及 一強度計算組件,其中該像素之經内插之強度係以 作為該第一強度估值及該第二強度估值之函數來計算。 10.如申請專利範圍第9項之系統,其中該至少一個參考欄 為相對於本欄之前一欄。 11‘如申請專利範圍第9項之系統,其中該至少一個參考攔 為相對於本欄之後一欄。 12.如申請專利範圍第9項之系統,其中該至少一個參考攔 35 200935874 包括一第一參考欄及一 為相對於該本欄之後一 辦於該本欄之前一欄。 第二參考攔,其中該第-參考棚 欄,以及^該第二參考攔為相 13. 如申請專利範圍第9項之系統, 強度為表示該像素之亮度之—數值中該像素之經内插之 14. 如申請專利範圍第9項之系 強度為表示該像素之彩度之―數^中該像素之經内插之
    15·=請專利範圍第9項之系統,其中該運動處理組件進 =定反映該經估計之運動向量之可靠度之數值: 二強度計算組件根據該數值加權該像素之經内 Γ請專難圍第9奴“,騎絲數㈣低於臨界 值,則該像素之_插之強度係等於該第—強度估值。 -種基於職收之運動賴^緣㈣處理像素資訊 之方法’該方法包含:
    接收得自邊緣適應性内插處理之邊緣資料,包括該 像素之一第一強度估值; 接收與運動補償處理相關聯之運動資料,包括對於 至少一個參考攔中之該像素鄰近之至少一個像素之估 計的運動向量; 以作為該邊緣資料及運動資料之函數,決定該像素 之一第二強度估值;以及 執行強度計算程序,其中該像素的内插的強度係以 作為該第一強度估值及該第二強度估值之函數來計算。 36 200935874 18. 如申請專利範圍第1項之方法,其中該至少一個參考欄 為相對於本欄之前一攔。 19. 如申請專利範圍第1項之方法,其中該至少一個參考欄 為相對於本欄之後一攔。 20. 如申請專利範圍第1項之方法,其中該至少一個參考欄 包括一第一參考欄及一第二參考攔,其中該第一參考欄 為相對於該本欄之後一欄,以及其中該第二參考攔為相 對於本欄之前一欄。 21. 如申請專利範圍第1項之方法,其中該像素之經内插之 強度為表示該像素之亮度之一數值。 22. 如申請專利範圍第1項之方法,其中該像素之經内插之 強度為表示該像素之彩度之一數值。 23·如申請專利範圍第1項之方法,其中該運動補償處理進 一步判定反映該經估計之運動向量之可靠度之數值,以 及其中該強度計算組件根據該數值加權該像素之經内 插之強度。 24.如申請專利範圍第幻項之方法,其中若該數值係低於臨 界值’則該像素之經内插之強度係等於該第一強度估值。 •一種於一視訊信號之解交插期間測定於一本欄中之一像 素強度之系統,該視訊信號進一步包含多個連續攔,該 本襴及該等多個連續欄各自具有已交插的掃描線,包含: 、用於提供該像素之一第一強度估值之一第一部 刀其中该第-強度估值係等於於本攔緊鄰後方之該欄 中之像素強度; 37 200935874 用於提供該像素之一第二強度估值之一第二組 件,其中該第二強度估值係等於一邊緣適應性内插組件 之輸出值,以及其中該邊緣適應性内插組件判定一邊緣 是否通過本欄中之該像素; 用於提供該像素之一第三強度估值之一第三組 件,其中該第三強度估值係以作為該第二強度估值及以 作為運動補償資料之函數所獲得之一第四強度估值之 函數來計算; 用以分配一運動值予該像素之一第四組件,其中該 運動值係與該像素鄰近之一像素群中檢測得之運動呈 正比;以及 用以測定該像素之強度之一第五組件,其中該測得 之像素強度為該運動值、該第一強度估值及該第三強度 估值之函數。 26. 如申請專利範圍第25項之系統,其中於本欄之前一欄及 於本攔之後之一欄係用作為參考攔。 27. 如申請專利範圍第25項之系統,其中該第三組件決定該 像素之第三強度估值呈反映該經估計之運動向量之可 靠度之數值之函數。 2 8.如申請專利範圍第2 7項之系統,其中若該值係低於臨界 值,則該像素之第三強度估值係等於該第二強度估值。
TW097137178A 2007-10-17 2008-09-26 Systems and methods of motion and edge adaptive processing including motion compensation features TW200935874A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/874,096 US8189105B2 (en) 2007-10-17 2007-10-17 Systems and methods of motion and edge adaptive processing including motion compensation features

Publications (1)

Publication Number Publication Date
TW200935874A true TW200935874A (en) 2009-08-16

Family

ID=40563113

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097137178A TW200935874A (en) 2007-10-17 2008-09-26 Systems and methods of motion and edge adaptive processing including motion compensation features

Country Status (4)

Country Link
US (1) US8189105B2 (zh)
CN (1) CN102027489B (zh)
TW (1) TW200935874A (zh)
WO (1) WO2009052430A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8849011B2 (en) 2010-10-07 2014-09-30 Himax Media Solutions, Inc. Video processing system and method thereof for compensating boundary of image
TWI603305B (zh) * 2013-09-27 2017-10-21 鴻海精密工業股份有限公司 顯示裝置、拼接式顯示器及顯示面板

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4139430B1 (ja) * 2007-04-27 2008-08-27 シャープ株式会社 画像処理装置及び方法、画像表示装置及び方法
US8259228B2 (en) * 2007-12-10 2012-09-04 Ati Technologies Ulc Method and apparatus for high quality video motion adaptive edge-directional deinterlacing
JP4973542B2 (ja) * 2008-02-26 2012-07-11 富士通株式会社 画素補間装置及び画素補間方法
EP2107519A1 (en) * 2008-03-31 2009-10-07 Sony Corporation Apparatus and method for reducing motion blur in a video signal
EP2114068A1 (en) * 2008-04-30 2009-11-04 Sony Corporation Method for converting an image and image conversion unit
US8228429B2 (en) * 2008-09-29 2012-07-24 Intel Corporation Reducing artifacts as a result of video de-interlacing
WO2014028069A1 (en) 2012-08-17 2014-02-20 Flextronics Ap, Llc Epg aggregation from multiple sources
US8768438B2 (en) * 2012-06-25 2014-07-01 Xerox Corporation Determining cardiac arrhythmia from a video of a subject being monitored for cardiac function
US11368760B2 (en) 2012-08-17 2022-06-21 Flextronics Ap, Llc Applications generating statistics for user behavior
CN107071326B (zh) * 2017-04-26 2020-01-17 西安诺瓦星云科技股份有限公司 视频处理方法及装置
CN113261276B (zh) * 2019-01-09 2023-08-22 西安诺瓦星云科技股份有限公司 去隔行插值方法、装置及系统、视频处理方法和存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285804B1 (en) * 1998-12-21 2001-09-04 Sharp Laboratories Of America, Inc. Resolution improvement from multiple images of a scene containing motion at fractional pixel values
US6421090B1 (en) * 1999-08-27 2002-07-16 Trident Microsystems, Inc. Motion and edge adaptive deinterlacing
US7375760B2 (en) * 2001-12-31 2008-05-20 Texas Instruments Incorporated Content-dependent scan rate converter with adaptive noise reduction
US7242819B2 (en) * 2002-12-13 2007-07-10 Trident Microsystems, Inc. Method and system for advanced edge-adaptive interpolation for interlace-to-progressive conversion
US20050129306A1 (en) * 2003-12-12 2005-06-16 Xianglin Wang Method and apparatus for image deinterlacing using neural networks
US9292904B2 (en) * 2004-01-16 2016-03-22 Nvidia Corporation Video image processing with parallel processing
JP4659036B2 (ja) * 2004-08-20 2011-03-30 シリコン オプティックス インコーポレイテッド エッジ適応画像拡大強化システム及び方法
US7379626B2 (en) * 2004-08-20 2008-05-27 Silicon Optix Inc. Edge adaptive image expansion and enhancement system and method
CN100479495C (zh) * 2007-02-09 2009-04-15 天津大学 采用运动检测和自适应加权滤波的去隔行方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8849011B2 (en) 2010-10-07 2014-09-30 Himax Media Solutions, Inc. Video processing system and method thereof for compensating boundary of image
TWI478574B (zh) * 2010-10-07 2015-03-21 Himax Media Solutions Inc 影像處理系統及影像邊界補償方法
TWI603305B (zh) * 2013-09-27 2017-10-21 鴻海精密工業股份有限公司 顯示裝置、拼接式顯示器及顯示面板

Also Published As

Publication number Publication date
US8189105B2 (en) 2012-05-29
WO2009052430A1 (en) 2009-04-23
US20090102966A1 (en) 2009-04-23
CN102027489B (zh) 2014-07-02
CN102027489A (zh) 2011-04-20

Similar Documents

Publication Publication Date Title
TW200935874A (en) Systems and methods of motion and edge adaptive processing including motion compensation features
US9036082B2 (en) Method, apparatus, and system for line-based motion compensation in video image data
TW484322B (en) Motion and edge adaptive deinterlacing
KR101536794B1 (ko) 후광현상이 줄어든 영상보간 장치 및 방법
JP3962876B2 (ja) ビデオ信号用補間フィルタ
JP5592454B2 (ja) 低減されたメモリおよび帯域幅の動き適応ビデオデインターレース
WO2008057563A2 (en) Advanced deinterlacer for high-definition and standard-definition video
US20100177239A1 (en) Method of and apparatus for frame rate conversion
KR20050001215A (ko) 디-인터레이싱 방법, 그 장치, 그 비디오 디코더 및 그재생 장치
JP2004007696A (ja) インターレース−プログレッシブ変換用のエッジ適応補間のための方法及びシステム
TWI324884B (en) Pull-down detection apparatus and pull-down detection method
EP1646244A2 (en) Image processing device and method
JP3893263B2 (ja) 動きベクトル検出装置
JP5197374B2 (ja) 動き推定
GB2422264A (en) Spatial interpolation along a slope calculated from image pixel values
KR100601638B1 (ko) 디-인터레이싱 방법, 그 장치, 그 비디오 디코더 및 그재생 장치
KR100252943B1 (ko) 스캔컨버터회로
JP4032785B2 (ja) 画像処理装置および方法、記録媒体、並びにプログラム
KR100949137B1 (ko) 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체
TW200812387A (en) Method and apparatus for de-interlacing video data through utilizing horizontal motion estimation and horizontal motion compensation
JP2006041619A (ja) 画像処理装置
JP2001333390A (ja) 動き係数算出方法
JP2011254314A (ja) コーミングノイズ検出装置、コーミングノイズ検出方法