TW201431379A - 針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測 - Google Patents

針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測 Download PDF

Info

Publication number
TW201431379A
TW201431379A TW102141530A TW102141530A TW201431379A TW 201431379 A TW201431379 A TW 201431379A TW 102141530 A TW102141530 A TW 102141530A TW 102141530 A TW102141530 A TW 102141530A TW 201431379 A TW201431379 A TW 201431379A
Authority
TW
Taiwan
Prior art keywords
image
media
phase
media stream
network
Prior art date
Application number
TW102141530A
Other languages
English (en)
Other versions
TWI575955B (zh
Inventor
Jiong Huang
Yuan Chen
tie-shan Liu
Liang-Hai Li
Bing Zhang
Jian Zhu
Original Assignee
Silicon Image Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Silicon Image Inc filed Critical Silicon Image Inc
Publication of TW201431379A publication Critical patent/TW201431379A/zh
Application granted granted Critical
Publication of TWI575955B publication Critical patent/TWI575955B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • H04N5/06Generation of synchronising signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Image Processing (AREA)

Abstract

本發明提供一種針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測。在一實施例中,方法包括根據與影像的多個相位相關之兩個或更多連續訊框的多個像素,以計算媒體串流之此影像之穩定性優化,計算此影像之銳利度優化以及根據此影像之穩定性及銳利度優化,以選擇這些相位的最佳相位。此最佳相位代表的影像,可使得此影像是以根據人類視覺感知的方式顯示。

Description

針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測
本發明是有關於一種媒體通訊,且特別是有關於一種針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測。
隨著電子裝置的數位化,諸如越來越多的電視具有高清晰度多媒體接口(High Definition Multimedia Interface,HDMI)和行動高畫質連結(Mobile High-definition Link,MHL)接頭,使得將類比訊號轉換為數位訊號是很普遍的,以移除類比接頭並提昇畫面品質。然而,由於沒有考慮到許多關鍵因素,因此這樣電腦產生的影像是低品質和非智能的。
本發明描述一種針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測。
在一實施例中,一種方法包括根據與一影像的多個相位相關之兩個或更多連續訊框(frame)的多個像素以計算一媒體串流的影像之穩定性優化,計算此影像之銳利度優化,以及根據此影像之穩定性及銳利度優化以選擇這些相位的一最佳相位。此最佳相位代表的影像,使得此影像是以根據人類視覺感知的方式顯示。
在另一實施例中,一種設備是執行根據上述任一或更多的操作方法。
在另一實施例中,一種系統包括一個或更多裝置以執行根據上述任一或更多的操作方法。
在另一實施例中,至少一機器可讀媒體包括在一電腦裝置上對應被執行的多個指令,以使得電腦裝置執行根據上述任一或更多的操作方法。
100‧‧‧通訊媒體裝置
102‧‧‧處理器
104‧‧‧記憶體
106‧‧‧作業系統
108‧‧‧輸入/輸出來源
110‧‧‧動態相位檢測機制
202‧‧‧輸入影像掃描器
204‧‧‧穩定性優化邏輯
206‧‧‧像素強度模組
208‧‧‧訊框強度模組
210‧‧‧銳利度優化邏輯
212‧‧‧銳利度函數模組
214‧‧‧影像一致性評估邏輯
216‧‧‧能量函數模組
218‧‧‧影像適宜性邏輯
220‧‧‧交握邏輯
222‧‧‧通訊組件
224‧‧‧相容性模組
230‧‧‧影像
232、234‧‧‧訊框
242、244、252、254、262、264、272、274‧‧‧像素
300‧‧‧方法
305、310、315、320、325、330‧‧‧區塊
405‧‧‧網路電腦裝置
410‧‧‧網路單元
415‧‧‧處理器
420‧‧‧動態隨機存取記憶體
425‧‧‧快閃記憶體
430‧‧‧發射器
435、445‧‧‧線路
440‧‧‧接收器
450‧‧‧以太網纜線
455‧‧‧網路介面
本發明之實施例乃透過示例方式說明,而非用於限定,在附隨繪製的圖式中,相同的參考標號代表類似的元件:圖1繪示根據一實施例之採用動態相位檢測機制的媒體裝置;圖2A繪示根據一實施例之動態相位檢測機制;圖2B繪示根據一實施例以動態相位檢測選擇之影像的影像圖樣;圖2C繪示根據一實施例之動態相位檢測;圖3繪示根據一實施例之動態相位檢測方法;以及圖4繪示能採用一個或多個實施例之電腦裝置。
本發明之實施例是針對媒體串流的影像,以促進自動相位檢測而具有高抖動容忍。
圖1繪示根據一實施例之採用動態相位檢測機制110的媒體裝置。通訊或網路媒體裝置100可包括任何數量或種類的媒體裝置,諸如信號源裝置(source device)(例如發射器)、終端裝置(sink device)(例如接收器)、中間裝置(例如類比數位轉換器)、放大器等等。通訊媒體裝置100可包括許多組件及/或模組,而這些組件及/或模組可通用於多種媒體設備(諸如終端裝置、信號源裝置等);然而,透過本文件並特別參照圖2,在一實施例中,為求簡潔起見,清晰和易於理解,通訊媒體裝置100可包括及被稱為如採用動態相位檢測機制(“相位機制”)110之主裝置或主機,並設定為與任何數量或種類的裝置進行通訊,這些裝置諸如為透過網路(例如廣播網路,諸如纜線或衛星廣播網路、廣域網路、局部區域網路、個人區域網路、城域網路、雲端網路、內部網路、網際網路等)之一個或更多的信號源裝置及/或終端裝置及/或中間裝置。
信號源裝置是指發射器或發射裝置以用於負責傳送資料(例如媒體音頻及/或視頻資料/內容串流)至終端裝置,終端裝置是指接收器或接收裝置以用於負責透過通訊網路而接收被傳送的資料。信號源裝置可例如包括消費電子裝置,諸如個人電腦(“PC”)、行動運算裝置(例如平板電腦、智慧型手機等)、MP3播放器、音響設備、電視、收音機、全球定位系統(“GPS”)或導航裝置、數位相機、錄音機/錄影機、藍光播放器、數位多功能光碟(“DVD”播放器、光碟(“CD”)播放器、卡式錄影機(“VCR”)、一體型攝錄影機(camcorder)等。信號源裝置可例如更包括運算裝置、數據端子、機器(例如傳真機、電話等)、視頻攝影機、廣播 站(例如電視台或廣播電台、有線電視機房等等)、有線廣播機房、機上盒、衛星等。終端裝置可包括一個或更多如信號源裝置所列出的媒體裝置的相同示例。同樣地,中間裝置可包括一個或更多如信號源裝置所列出的相同媒體裝置,或者中間裝置可包括專業轉換器裝置以便利媒體從一種格式轉換至另一種,例如從類比轉數位或反之亦然。
通訊媒體裝置100可包括作業系統106以作為信號源裝置與終端裝置或使用者之任何硬體或物理資源之間的介面。通訊媒體裝置100更可包括一個或更多處理器102、記憶體104、網路裝置、驅動器或相類似的,以及輸入/輸出(“I/O”)來源108,諸如觸控屏幕、觸控面板、觸控板、虛擬或普通鍵盤、虛擬或普通滑鼠等。
實施例提供相位機制100以促使內部鎖相迴路或鎖相迴路(PLL)動態地為類比數位轉換(ADC)產生目標像素時脈,並使用像素時脈搜尋相位以用於產生適於人眼觀看品質的影像。藉由相位機制100之相位檢測程序在本文件中可被稱為自動的相位檢測或自動相位檢測(APD)或自動相位檢測程序。然而,需注意的是,用語”自動相位檢測APD”或任何前述相關用語之使用不應被解讀為將實施例限制於裝置、硬體、軟體等,並表達此標記於產品中或於超出本文件之文意中。
舉例來說,傳統機制所提供的影像品質是由電腦所設想,這是因為沒有考慮到人眼的運作方式或喜好,例如什麼樣的品質或因素,例如銳利度等級或量的穩定性等方面,可能會吸引人類(也被稱為”使用者”,”終端用戶”,”觀眾”等)。需注意的是,不同的相位配置會導致不同的顯示品質,諸如在好的相位下會顯示清晰銳利,而在壞的相位下會顯示模糊陰影。同樣地,某些相位可能有顯著的雜訊,例如水平閃爍條紋,而可能對使用者造成視覺上困擾。相位表現可能根據其來源、平台、格式等因素發生變化,因此,識別出表現最好的相位是很難處理的,特別是在複雜的媒體環境中。實施例提供全面性的解決方案,而具有準確、成本效益,節能、速度快、相對簡易之特點,並具有健全的抖動容忍等。在一實施例中,此解決方案是基於已知的人類視覺感知資訊,且該資訊可經由科學和醫學界所提出的許多報告而獲得,又使用此資訊可決定與選擇更合適的相位,使得影像品質對人眼是令人滿意的,且對使用者是被視為高品質的(例如其清晰度、穩定性,像素分佈等之用語)。
請參考圖2A而進一步描述,一旦自動相位檢測(APD)程序已經藉由相位機制110而開始,則在更大的程序中,藉由對於每個程序所界定的增值而將相位位置由起始位置移動至結束位置。在一實施例中,在影像的各個相位中,各種因素(例如穩定性優化,銳利度優化,影像一致性評估,影像適宜性評估等)會被計算及/或被決定,以評估影像適宜性和/或品質,藉此反應如顯示的銳利度和穩定性。然後,所收集的資訊可在所有的相位位置進行比較,並最終選擇具有最佳特性的一個相位。如前所述,在一實施例中,最佳的特性可能基於人類視覺如何感知影像品質之眾所周知的科學上,使得所選擇的相位有利於最佳影像品質,以讓典型的人眼能夠欣賞和享受。另外,為使比較公平乃採用同一基準比較(apple-to-apple comparison),作為先決條件而在檢測期間中,自動相位檢測(APD)的輸入影像可為靜止和一致,並可使影像包含一定對比,以充分激發相位表現功能。
相位機制110可在自動模式或手動模式被觸發及運用,舉例而言,其中與各相位位置相關的原始資料可依據各式各樣的組件(components)而被決定或計算,而藉由維持這些組件之間的交握(handshake),則這樣的計算結果可由相位機制110的其他組件提供。在自動模式的情況下,為保留系統資源並實現程序快速完成,某些組件可執行多項任務,例如在不影響其他組件的情況下計算原始資料以及候選相位排序兩者。此外,為求除錯及/或後階段程序的目的,於自動以及手動模式兩者下,在自動相位檢測(APD)程序完成之後,由每個相關候選相位所計算的原始資料可被儲存於可用於存取的記憶體中。同樣地,一旦執行自動相位檢測(APD),電路可能被關閉,而相位可由硬體或軟體選擇保留,直到觸發下一次自動相位檢測(APD)。
圖2A繪示根據一實施例之動態相位檢測機制110。在一實施例中,相位機制110包括許多組件,例如輸入影像掃描器(“掃描儀”)202、具有像素強度模組(“像素模組”)206與訊框強度模組(“訊框模組”)208之穩定性優化邏輯(“穩定性邏輯”)204、具有銳利度函數模組(“銳利度模組”)212之銳利度優化邏輯(“銳利度邏輯”)210、具有能量函數模組(“能量模組”)216之影像一致性評估邏輯(“一致性邏輯”)214、影像適宜性邏輯(“適宜性邏輯”)218、交握邏輯220、通訊組件222以及相容性模組224。在本文件中,相位機制110的各種組件202-224可以互換名稱而為”邏輯”、”處理邏輯”或”模組”,並可例如包括軟體、硬體及/ 或將軟硬體任意組合的方式,例如韌體。
在一實施例中,掃描器202可用於到掃描傳入的影像。儘管實施例並不局限於任何特定的影像或不同種類的影像,某些條件或標準可預先決定及應用以利於執行,例如用於相位選擇之更有效率的程序。舉例來說,對於較佳的同一基準自動相位檢測(APD),可選擇靜止影像以用於相位檢驗。此外,靜止影像可預先決定以包含一些對比,例如選擇的影像可不為空白影像或單色系屏幕影像(solid-colored screened image)或灰階影像等。例如以圖2B之繪示而言,具有重複單像素寬度之垂直黑線與白線之示例性影像230可被視為是採用相位機制100以選擇不同相位品質之具有最佳圖樣(pattern)之影像。
在一實施例中,穩定性邏輯204有利於所選擇影像之決定與計算,例如圖2B之影像230。舉例而言,對於影像的每個相位而在相同的相位中,穩定性或穩定性函數可被描述為在影像的連續訊框之間的點至點差異(dot-to-dot difference)之統計特性。當涉及的像素愈多,會預期有愈高的精確度。需注意的是,在理想的解決方案中,在至少兩個連續訊框中之所有的點(dot)均可進行比較,雖然這樣的任務可利用相位機制110執行,但考量成本與時間效率之目的,在有限記憶體需求下,可選擇少部份的點以進行比較。請參考圖2C而進一步描述,可利用像素模組206以計算像素強度,並可利用訊框模組208計算訊強度,以決定所選擇影像的穩定性函數。
現在請參考圖2C,例如是圖2B之影像230,所選擇的影像之兩個連續訊框232、234之M×N數量的像素或像素點(pixel point)可進行比較。為求簡潔及易於理解,訊框232被認為是相位k之訊框0,而訊框234被認為是相同相位k之訊框1。需注意的是,有可能是32個相位,例如從k=0到k=31的範圍內。對於這兩個訊框232、234,具有M×N尺寸的網格(grid)可定義為每訊框具有N行(line)可選擇且每行具有M個像素可選擇。對於每個水平選定的行,M個像素可均勻分佈,且對於每個垂直選定的列(row),N個像素可均勻分佈。水平方向和垂直方向兩者是可配置的,而當考慮隨機性時,使得隨機選擇的M×N個像素可於統計上用來表示整個訊框232、234。
在圖示的實施例中,1024個像素被選擇為基底(例如M×N=1024),其中M和N是從2的X次方(2^X)選擇,而X的範圍為0到10。隨機性可透過例如兩個固定式線性反饋移位暫存器(Linear Feedback Shift Register, LFSR)來實現,其中對每行中的M個像素,水平隨機生成一個,且對每訊框中的N行,垂直隨機生另一個。這些種子是隨機的(例如隨機性與機器時間相關聯),但對每個自動相位檢測(APD)計算而言,可為求候選相位而選擇相同的種子或像素242、244、252、254、262、264、272、274。在每個訊框起始時可需要這些種子,一旦線性反饋移位暫存器伴隨著種子載入,則依據已定義的多項式進行操作。另外,也應當注意像素242、244、252、254、262、264、272、274,其位置對於每個自動相位檢測(APD)計算可以是固定的。應用隨機性時,特定位置變化可被放置於固定M×N網格的頂部。此位置變化可能是偽隨機,並根據預先定義的多項式和種子而具數學上可預測的,此可使得選定的像素位置242、244、252、254、262、264、272、274從訊框232至訊框234具有重複性。如此可以得到與訊框232、234相關的訊框統計方式,但無需承擔任何訊框緩衝成本。
一但決定M×N隨機網格之後,便可收集其個別強度差異,且由初始相位位置(例如相位k=0)至結束相位位置(例如相位k=31)可得出整體強度變化的特徵。需注意的是,當相位之鎖相迴路(PLL)抖動容忍表現愈佳,則由像素模組206與訊框模組208所計算之整體強度變化愈低,然後將其用於計算由穩定性邏輯204所提供的穩定性優化。
舉例而言,訊框232的像素(0,0)242可被選擇而與其對應之訊框234的像素(0,0)244比較,所以像素242、244的像素強度差異(AbsDiff(0,0))246可利用像素模組206而例如採用以下的公式計算:AbsDiff(i,j,k)=| P(i,j,k,0)-P(i,j,k,1)|,0 i<n,0 j<m,0 k<32.同樣地,上述公式可被像素模組206用於計算其他相對應像素252、254、262、264、272、274之像素強度差異AbsDiff(n-1,0)256、AbsDiff(0,m-1)266、AbsDiff(n-1,m-1)276。一旦計算出像素強度差異246、256、266、276,訊框模組208可例如採用以下的公式以計算訊框強度差異(AbsDiffTotal(k))
一但計算出訊框強度差異,接著穩定性邏輯204可例如採用以下的公式針對每個相位而利用訊框強度差異的計算以產生穩定性優化:Minimize(AbsDiffTotal(k)),0 k<32.此外,根據由上述公式所設定的標準,各個候選相位可由內部排序以選擇出最佳的相位。此模擬平台展示相位之穩定 性優化的有效性,且需注意的是,針對具有大量像素對像素轉換(pixel-to-pixel transition)之影像,可藉由相位機制110來實現更強的抖動容忍。
在一實施例中,由於時脈和相位可與高頻訊號高度相關,並與低頻信號不那麼相關,因此可利用銳利度邏輯210產生銳利度優化。舉例來說,在某些實施例中,銳利度邏輯210可使用高頻成份能量(high frequency component energy,HFCE)以計算相位的銳利度優化。以下的公式定義高頻成份能量(HFCE),並可對任何的候選相位利用銳利度函數模組212得到銳利度函數(HFCE(k))if(| -p' i,j-1+2*p' i,j -p' i,j+1 |>hf_threshold) hfce i,j =| -p' i,j-1+2*p' i,j -p' i,j+1 |;else hfce i,j =0;
一旦獲得銳利度函數,銳利度優化邏輯210可對不同的相位候選而利用已得之銳利度函數並例如採用與以下的公式來計算銳利度優化:Maxmize(HFCE(k)),0 k<32.其中ij是對HxV影像解析度分別表示行數與列數。P i,j 表示像素值,而hf_threshold表示可程式化暫存器設定。根據由上述公式所設定的標準,候選相位由內部排序,而相較於具有慢速轉換之影像而言,具有快速像素對像素轉換之影像可產生較高的高頻成份能量(HFCE)。
此外,由於不對稱銳利度分佈在眾多的候選相位中,如果具有極大高頻成份能量(HFCE)之最大銳利度相位不是最乾淨的一個相位(例如含有低水平,但明顯的雜訊可讓顯示不如預期平靜),可在相位排序之後執行淨化程序(cleaning process)以確保所選擇的候選相位處於相對平靜的鄰近區域。此可表示為在影像銳利度與鄰近區域一致性之間的權衡。
根據自動相位檢測(APD)優化標準而徹底搜尋所有的候選相位,可能需要大約一秒鐘的運算程序以得到結果。然而,在運算過程中,所選擇的影像可能會突然改變,而與靜止圖像相關的自動相位檢測(APD)假設也處於改變的風險中。為避免或改正這種情況,在相位檢測程序過程中,根據由能量 模組216所決定的能量函數,而利用一致性邏輯214以監控影像的影像一致性。基本能量函數可由像素值總合而利用能量模組216以及例如以下的公式進行計算或近似: 其中afce表示全頻成份能量(All Frequency Component Energy,AFCE),而ij是分別表示行數與列數。一般情況下,對每個自動相位檢測(APD)運算而言,如果輸入影像保持靜止,則全頻成份能量(AFCE)的分佈範圍可能相對較小。舉例來說,如果相對特定閾值(例如預先定義的閾值)而言分佈太寬,此將意味突然的輸入影像變化而因此可使得影像被認為不一致。此分佈可例如由以下的公式而標準化與量測化:[Max(AFCE)-Min(AFCE)]/Max(AFCE),其中Max(AFCE)與Min(AFCE)分別表示在相同自動相位檢測(APD)運算過程中之極大全頻成份能量(AFCE)與極小全頻成份能量(AFCE)。另外,利用一致性邏輯214,閾值可由暫存器(例如reg_csst_thresh[1:0])控制,而一致性可由暫存器位元(例如reg_apd_img_csst)反映。
在一實施例中,影像適宜性邏輯218可用於檢查所選擇的影像的邊緣強度。如果邊緣的數量是相同或超過特定(例如預先定義的)閾值,則影像可認為是適宜的;相反地,如果邊緣的數量是小於閾值,則影像可決定為不適宜的。利用適宜性邏輯218,閾值可由暫存器(例如reg_edg_thresh[1:0])控制,而適宜性可由暫存器位元(例如reg_apd_img_suitable)反映。
基於在相位檢測中影像是靜止(如藉由影像一致性邏輯214所得到之影像一致性評估所決定)與適宜(如藉由影像適宜性邏輯218所得到之影像適宜性評估所決定)的狀況下,最佳的候選相位是由銳利度優化(如利用銳利度優化邏輯210得到)與穩定性優化(如利用穩定性優化邏輯204得到)兩者所決定。在一實施例中,所選擇的最佳相位可能對應到最高程度的穩定性與銳利度。
在一實施例中,在穩定性與銳利度之間的任何衝突之情況下,如果所檢測的影像具有大量的像素對像素轉換並且是抖動敏感的,則相位的穩定性優化可優先於銳利度優化以確保抖動容忍,這是因為抖動容忍可被視為比其它因素更重要。相反地,在較少量像素對像素轉換或是對抖動較不敏感之影像,銳利度優化可優先適用。換言之,理想的相位會是有最佳穩定性與銳利度程度 的相位而具有健全的抖動容忍,使得可將最佳可能影像提供給使用者,但是在自動相位檢測(APD)程序可能要在穩定性與銳利度之間折衷的情況下,所選擇的最佳相位可對應由最佳鄰近區域之影像(可如在圖表所示)中所選擇出的影像,而在已知的人類視覺觀點上提供最強的關連性。
進一步而言,在一實施例中,交握邏輯220可用於在相位機制110之各種程序與組件之間促進交握。舉例來說,可在此產生與目前相位相關的中斷(interrupt),而相位機制110之各種組件可收集相關資料且一旦程序完成,中斷將會被移除且可轉換到其他程序之階段。
通訊組件222可用於促進各種媒體裝置之間的通訊,諸如不同品牌、製作者、版本、機制等之信號源裝置、終端裝置、中間裝置/類比-數位轉換器等。通訊組件222更提供各種模組以促進相位機制110的各種組件202-224之間的通訊,並且透過某些預設的通訊組件(諸如接收器、發射器,類比-數位轉換器、音頻-視頻轉換器、處理器、揚聲器、輸入/輸出組件、緩衝器之類的)促進通訊,而這些預設的通訊組件可能是各種媒體裝置的部份元件。同樣地,相容性模組224促進媒體裝置之間的相容性,諸如不同品牌、製作者、版本、機制等之信號源裝置、終端裝置、中間裝置/類比-數位轉換器等,且不限定於任何特定數量或種類的媒體設備、技術、組件、標準、音頻/視頻格式、音頻與視頻訊號類型、硬體、連結、軟體、設備,諸如顯示器、線纜、連結等或類似的。值得一提且應當理解的是,“電視”或其他類似的媒體設備是作為示例以提昇簡潔、清晰和易於理解,且本發明之實施例並不局限於特定的類型,品牌或數量之媒體裝置及/或其組件。
圖3繪示根據一實施例之動態相位檢測的方法。方法300可由處理邏輯執行,而處理邏輯可包括硬體(例如電路、專屬邏輯,可程式化邏輯,微代碼(microcode)等)、軟體(例如在處理裝置上運行的指令)或其組合,例如韌體或具有硬體裝置之功能電路。在一實施例中,方法300是由圖1之動態相位檢測機制110所執行。
方法300從區塊305開始,在許多類型的輸入影像中選取一個影像,此乃為了選擇最佳相位以代表此影像。在區塊310中,執行第一次運算,以藉由測試所選擇影像之每個相位在連續訊框中的各個像素點,而決定關於影像之每個相位之穩定性優化。在區塊315中,執行第二次運算以決定銳利度優 化。
在區塊320中,執行影像一致性評估與適宜性評估。在一實施例中,影像一致性與適宜性評估是獨立於穩定性與銳利度優化,且在更高等級的系統中,一致性與適宜性評估可判定自動相位檢測(APD)是否有效與適用。如果影像是判定為不一致或不適宜,任何自動相位檢測(APD)優化結果可被忽略。在區塊325中,在一實施例中,利用上述的運算以決定穩定性、銳利度,一致性評估、適宜性評價以及最佳的相位,以選取最佳相位。需注意的是,對單獨之穩定性或銳利度而言,所選擇的影像並不一定是最佳的,但是根據某些例如穩定性優於銳利度或反之亦然等等之因素而達成某種妥協,以從所有影像之最佳鄰近區域中選擇影像。在區塊330中,藉由顯示裝置,影像被傳送給使用者觀看。顯示裝置(例如顯示螢幕)可偶接至或是作為終端裝置(例如電視、電腦裝置)之部件以根據最佳相位而顯示影像。在一實施方案,所選擇之最佳相位表示相位以盡可能最好的方式提供或顯示影像,而影像具有健全的抖動容忍,並與已知人類視覺感知是一致的,因此使用者可在最高等級並以自然的方式欣賞和享受影像。
圖4繪示根據一實施例採用圖1之動態相位檢測機制110之網路電腦裝置405的組件。在此圖式中,網路裝置405可以是在網路中的任何裝置,包括但不局限於運算裝置、網路運算系統、電視、纜線機上盒、廣播電台、藍光播放器、數位多功能光碟(DVD)播放器、光碟(CD)播放器、放大器、音頻/視頻接收器、智慧型手機、個人數位助理(PDA)、儲存單元、遊戲機或其他媒體裝置。在某些實施例中,網路裝置405包括網路單元410以提供網路功能。網路功能包括但不局限於產生、傳輸、儲存和接收媒體內容串流。網路單元410可由單晶片系統(single system on a chip,single SoC)或由多個組件所實現。
在某些實施例中,網路單元410包括處理器以用於資料處理。資料處理可包括媒體資料串流之生成、媒體資料串流於傳輸或儲存之控制以及媒體資料串流於使用上之解密與解碼。網路裝置亦可包括記憶體以支援網路操作,諸如動態隨機存取記憶體(Dynamic Random Access Memory,DRAM)420或其他類似的記憶體以及快閃記憶體(flash memory)425或其他非揮發性記憶體。網路裝置405亦可包括唯讀記憶體(read only memory,ROM)及/或其他靜態儲存裝置,以用於儲存由處理器415使用之靜態資訊與指令。
資料儲存裝置,諸如磁碟或光碟及其對應之驅動器,亦可偶接至網路裝置405以用於儲存資訊及指令。網路裝置405亦可藉由輸入/輸出(I/O)介面偶接至輸入/輸出(I/O)匯流排。多個輸入/輸出(I/O)裝置可偶接至輸入/輸出(I/O)匯流排,包括顯示裝置、輸入裝置(例如字母數字(alphanumeric)輸入裝置及/或游標控制裝置)。網路裝置405可包括或偶接至通訊裝置以藉由外部資料網路而存取其他電腦(伺服端(server)或客戶端(client))。通訊裝置可包括數據機(modem)、網路介面卡或其他已知界面裝置,諸如那些用於偶接至以太網(Ethernet)、令牌環網(token ring)或其它類型的網路。
網路裝置405亦可包括發射器430及/或接收器440以藉由一個或更多的網路介面455而分別用於傳送資料至網路上或從網路接收資料。網路裝置405可相同於圖1之通訊媒體裝置100而採用圖1之相位機制110。發射器430或接收器440可連接至有線傳輸纜線,例如包括以太網纜線450、同軸纜線或無線單元。發射器430或接收器440可經由一條或多條線路,例如用於傳送資料之線路435以及用於接收資料之線路445,而偶接至網路單元410以用於資料傳輸與控制訊號。亦可存在額外的連接關係。網路裝置405亦可包括多個組件以用於裝置的媒體操作,而於此並未說明。
網路裝置405可在客戶端/伺服器網路系統或通訊媒體網路(例如衛星或有線廣播)上相互連接(interconnected)。網路可包括通訊網路、電信(telecommunication)網路、局部區域網路(Local Area Network,LAN)、廣域網路(Wide Area Network,WAN)、城域網路(Metropolitan Area Network,MAN)、個人區域網路(Personal Area Network,PAN)、內部網路(intranet)、網際網路(internet)等。需注意的是,藉由網路可將任意數量的裝置連接。一個裝置可在網路系統中藉由一些標準及非標準協議而將如串流媒體資料之資料串流傳輸至其他裝置。
在上述說明中,為了解釋的目的,設置許多具體細節以為求徹底理解本發明。然而,顯而易見的,熟悉此項技藝之人可在缺少部份具體細節的情況下實施本發明。在其他情況下,眾所周知的結構與裝置以方框圖形式呈現。在說明的組件之間可能會有中間結構。此處所描述或說明的組件可能具有額外的輸入或輸出,而於此並未說明或描述。
本發明的各種實施例中可包括各種程序。這些程序可由硬體組件 執行或者在電腦程式或機器可執行指令中實施,其可用於使得通用或專用的處理器或者以指令編程之邏輯電路執行這些程序。可替代地,這些程序可由硬體與軟體的組合執行。
本文件所說明的一個或更多的模組、組件或元件,諸如與動態隨機存取記憶體(DRAM)增強機制相關或在其中的某個模組、組件或元件,可包括硬體、軟體及/或其組合。在模組包括軟體的情況下,軟體資料、指令及/或配置可藉由機器/電子裝置/硬體之製品(article of manufacture)而提供。製品可包括具有內容之機器可存取/可讀媒體以提供指令、資料等。
本發明之各種實施例中的部分可提供作為電腦程式產品,其可包括電腦可讀媒體或機器可讀媒體,而電腦或機器可讀媒體具有儲存於其中的電腦程式指令,其可用於對電腦(或其他電子裝置)下指令以執行根據本發明實施例之程序。機器可讀媒體可包括但不局限於軟碟機(floppy diskettes,FD)、光碟、唯讀光碟記憶體(compact disk read-only memory,CD ROM)、磁光碟(magneto optical disks)、唯讀記憶體(ROM)、隨機存取記憶體(random access memory,RAM)、可抹除可編程唯讀記憶體(erasable programmable read-only memory,EPROM)、電子抹除式可複寫唯讀記憶體(EEPROM)、磁卡或光學卡、快閃記憶體或者用於儲存電子指令之其他種類的媒體/機器可讀媒體。此外,本發明也可如電腦程式產品而被下載,其中該程式可由遠程電腦傳送至發出請求的電腦。
前述眾多方法是以其最基本的形式描述,但是在不脫離本創作之精神和範圍內,可從任何方法新增或刪減程序且可從所描述之訊息中新增或移除資訊。顯而易見的,熟習此項技藝者當可作些許之更動與潤飾,因此本創作之保護範圍當視後附之申請專利範圍所界定者為準,而非以限制於前述之具體實施例。
如果說元件“A”偶接至元件“B”或元件“A”與元件“B”偶接,則元件A可直接偶接至元件B,或是非直接而例如透過元件C偶接。當說明書或專利範圍陳述組件,特徵,結構,程序或特性A“促使”另一組件,特徵,結構,程序或特性B時,乃表示“A”至少是“B”的部份原因,但亦可至少有其他組件,特徵,結構,程序或特性協助促使B。如果說明書指出組件,特徵,結構,程序或特性是“可”、“可能”、“可以”包括的,則此特定之組件,特徵,結構,程序或特性則不一定需要包括。如果說明書或專利範圍陳述指出“一”或“一個”元件,此 並不表示所描述之元件僅能只有一個。
實施例是本發明之實行或示例。說明書中參考“一實施例”、“一個實施例”、“某些實施例”或“其他實施例”意味著所描述之與實施例相關連之特定特徵,結構或特性是至少包括在某些實施例中,但非於全部的實施例中。“一實施例”、“一個實施例”、“某些實施例”或”其他實施例”這些不同的用語並非一定全部參造到相同的實施例。應當理解的是,在前述之本發明之示例實施例中,不同的特徵有時會一起組合在單一實施例、圖式或描述中,以為求簡化說明及幫助瞭解一個或更多不同的發明面向。然而,此說明之方法不能解釋為請求保護發明所需要的特徵會多過於在每項專利範圍中明確記載的特徵。相反地,如以下專利範圍所反應的,發明的面向在於少於單一前述揭露實施例之所有特徵。因此,專利範圍是特此明確納入本說明書中,其中每項專利範圍是以本發明獨立之實施例而建立於自身範圍上。
100‧‧‧通訊媒體裝置
102‧‧‧處理器
104‧‧‧記憶體
106‧‧‧作業系統
108‧‧‧輸入/輸出來源
110‧‧‧動態相位檢測機制

Claims (20)

  1. 一種設備,包括:一媒體裝置,具有:第一邏輯,根據與一影像的多個相位相關之兩個或更多連續訊框的多個像素,以計算一媒體串流的該影像之穩定性優化;第二邏輯,以計算該影像之銳利度優化;以及第三邏輯,根據該影像之穩定性及銳利度優化,以選擇該些相位的一最佳相位,其中該最佳相位代表的該影像,使得該影像是以根據人類視覺感知的方式顯示。
  2. 如申請專利範圍第1項所述之設備,其中第三邏輯更在該媒體串流中從多個影像掃描及選擇該影像,其中被選擇的影像代表的一理想影像是根據預設標準進行分析而用於選擇該最佳相位。
  3. 如申請專利範圍第1項所述之設備,更包括:第四邏輯,以評估影像一致性;以及第五邏輯,以評估影像適宜性。
  4. 如申請專利範圍第1項所述之設備,更包括一顯示裝置,偶接至該媒體裝置,該顯示裝置依據被選擇的最佳相位以顯示該影像,其中該媒體裝置包括一中間裝置,該中間裝置包括一媒體格式轉換器以將該媒體串流從類比轉換為數位或從數位轉換為類比,其中該媒體串流包括一音頻/視頻媒體串流。
  5. 如申請專利範圍第4項所述之設備,其中該媒體裝置包括一終端裝置,該終端裝置包括一個或更多個電視,一劇院顯示器,一投影機,一數位多功能光碟(DVD)播放器,一藍光播放器,一運算裝置,一智慧型手機,一個人數位助理(PDA)以及一遊戲機。
  6. 如申請專利範圍第5項所述之設備,其中該媒體裝置包括一信號源裝置,該 信號源裝置透過一網路偶接至該終端裝置,該信號源裝置產生該音頻/視頻媒體串流,其中該媒體裝置包括一網路運算系統,一纜線機上盒,一有線電視機房,一衛星廣播系統,一藍光播放器以及一DVD播放器。
  7. 如申請專利範圍第6項所述之設備,其中該網路包括一個或更多的廣播網路,一局部區域網路,一廣域網路,一個人區域網路,一城域網路,一內部網路以及一網際網路。
  8. 一種系統,包括:一運算裝置,具有一記憶體以儲存指令以及一處理裝置以執行指令,其中指令使該處理裝置根據與一影像的多個相位相關之兩個或更多連續訊框的多個像素,以計算一媒體串流的該影像之穩定性優化;計算該影像之銳利度優化;以及根據該影像之穩定性及銳利度優化,以選擇該些相位的一最佳相位,其中該最佳相位代表的該影像,使得該影像是以根據人類視覺感知的方式顯示。
  9. 如申請專利範圍第8項所述之系統,其中該運算裝置更在該媒體串流中從多個影像掃描及選擇該影像,其中被選擇的影像代表的一理想影像是根據預設標準進行分析而用於選擇該最佳相位。
  10. 如申請專利範圍第8項所述之系統,其中該運算裝置更:評估影像一致性;以及評估影像適宜性。
  11. 如申請專利範圍第8項所述之系統,更包括一顯示裝置,偶接至該媒體裝置,該顯示裝置依據被選擇的最佳相位以顯示該影像,其中該媒體裝置包括一中間裝置,該中間裝置包括一媒體格式轉換器以將該媒體串流從類比轉換為數位或從數位轉換為類比,其中該媒體串流包括一音頻/視頻媒體串流。
  12. 如申請專利範圍第11項所述之系統,其中該媒體裝置包括一終端裝置,該 終端裝置包括一個或更多個電視,一劇院顯示器,一投影機,一數位多功能光碟播放器,一藍光播放器,一運算裝置,一智慧型手機,一個人數位助理以及一遊戲機。
  13. 如申請專利範圍第12項所述之系統,其中該媒體裝置包括一信號源裝置,該信號源裝置透過一網路偶接至該終端裝置,該信號源裝置產生該音頻/視頻媒體串流,其中該媒體裝置包括一網路運算系統,一纜線機上盒,一有線電視機房,一衛星廣播系統,一藍光播放器以及一DVD播放器。
  14. 如申請專利範圍第13項所述之系統,其中該網路包括一個或更多的廣播網路,一局部區域網路,一廣域網路,一個人區域網路,一城域網路,一內部網路以及一網際網路。
  15. 一種方法,包括:根據與一影像的多個相位相關之兩個或更多連續訊框的多個像素,以計算一媒體串流的該影像之穩定性優化;計算該影像之銳利度優化;以及根據該影像之穩定性及銳利度優化,以選擇該些相位的一最佳相位,其中該最佳相位代表的該影像,使得該影像是以根據人類視覺感知的方式顯示。
  16. 如申請專利範圍第15項所述之方法,更包括在該媒體串流中從多個影像掃描及選擇該影像,其中被選擇的影像代表的一理想影像是根據預設標準進行分析而用於選擇該最佳相位。
  17. 如申請專利範圍第15項所述之方法,更包括:評估影像一致性;以及評估影像適宜性。
  18. 如申請專利範圍第15項所述之方法,更包括透過偶接至一媒體裝置之一一顯示裝置,而依據被選擇的最佳相位以顯示該影像,其中該媒體裝置包括一 中間裝置,該中間裝置包括一媒體格式轉換器以將該媒體串流從類比轉換為數位或從數位轉換為類比,其中該媒體串流包括一音頻/視頻媒體串流。
  19. 如申請專利範圍第18項所述之方法,其中該媒體裝置包括一終端裝置,該終端裝置包括一個或更多個電視,一劇院顯示器,一投影機,一數位多功能光碟播放器,一藍光播放器,一運算裝置,一智慧型手機,一個人數位助理以及一遊戲機。
  20. 如申請專利範圍第19項所述之方法,其中該媒體裝置包括一信號源裝置,該信號源裝置透過一網路偶接至該終端裝置,該信號源裝置產生該音頻/視頻媒體串流,其中該媒體裝置包括一網路運算系統,一纜線機上盒,一有線電視機房,一衛星廣播系統,一藍光播放器以及一DVD播放器。
TW102141530A 2013-01-22 2013-11-14 針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測 TWI575955B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/070826 WO2014113915A1 (en) 2013-01-22 2013-01-22 Mechanism for facilitating dynamic phase detection with high jitter tolerance for images of media streams

Publications (2)

Publication Number Publication Date
TW201431379A true TW201431379A (zh) 2014-08-01
TWI575955B TWI575955B (zh) 2017-03-21

Family

ID=51207391

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102141530A TWI575955B (zh) 2013-01-22 2013-11-14 針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測

Country Status (4)

Country Link
US (2) US8941780B2 (zh)
CN (1) CN105122305B (zh)
TW (1) TWI575955B (zh)
WO (1) WO2014113915A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8941780B2 (en) 2013-01-22 2015-01-27 Silicon Image, Inc. Mechanism for facilitating dynamic phase detection with high jitter tolerance for images of media streams
CN106791276B (zh) * 2016-12-20 2019-12-10 湖南国科微电子股份有限公司 一种视频及图形信号自动相位检测方法及装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0941614A4 (en) * 1996-11-27 2004-10-13 Princeton Video Image Inc MOTION IMAGE LOCATION SYSTEM USING IMAGE TEXTURE MODELS
JP2002520663A (ja) * 1998-07-10 2002-07-09 オリオン・エレクトリック・カンパニー・リミテッド 交流形プラズマ表示パネル駆動方法
US6798919B2 (en) * 2000-12-12 2004-09-28 Koninklijke Philips Electronics, N.V. System and method for providing a scalable dynamic objective metric for automatic video quality evaluation
US6876381B2 (en) * 2001-01-10 2005-04-05 Koninklijke Philips Electronics N.V. System and method for providing a scalable objective metric for automatic video quality evaluation employing interdependent objective metrics
US7050097B2 (en) * 2001-11-13 2006-05-23 Microsoft Corporation Method and apparatus for the display of still images from image files
US6856358B1 (en) * 2002-01-16 2005-02-15 Etron Technology, Inc. Phase-increase induced backporch decrease (PIBD) phase recovery method for video signal processing
US7023470B2 (en) * 2002-01-22 2006-04-04 Hewlett-Packard Development Company, L.P. Self-testing video display devices and method of use thereof
KR100583723B1 (ko) * 2003-09-16 2006-05-25 삼성전자주식회사 복수의 아날로그 신호들을 샘플링하는 장치
US7973740B2 (en) * 2004-04-21 2011-07-05 Bridgestone Corporation Method of driving information display device
KR100648308B1 (ko) * 2004-08-12 2006-11-23 삼성전자주식회사 해상도 변환방법 및 장치
US20060188046A1 (en) * 2005-02-24 2006-08-24 Broadcom Corporation Prediction of an optimal sampling point for clock resynchronization in a source synchronous data channel
US7760956B2 (en) * 2005-05-12 2010-07-20 Hewlett-Packard Development Company, L.P. System and method for producing a page using frames of a video stream
JP4470899B2 (ja) * 2006-03-16 2010-06-02 ソニー株式会社 画像処理装置および画像処理方法、並びにプログラム
JP2008228037A (ja) * 2007-03-14 2008-09-25 Matsushita Electric Ind Co Ltd 位相調整装置、位相調整方法およびデジタルカメラ
US8126197B2 (en) * 2007-11-29 2012-02-28 Certifi-Media Inc. Method for image quality assessment using quality vectors
WO2009069205A1 (ja) * 2007-11-28 2009-06-04 Mitsubishi Electric Corporation ビット識別回路
JP4645707B2 (ja) * 2008-09-01 2011-03-09 ソニー株式会社 コンテンツデータ処理装置
JP5476879B2 (ja) * 2008-09-29 2014-04-23 ソニー株式会社 画像処理装置および係数学習装置。
US9894361B2 (en) * 2009-03-31 2018-02-13 Citrix Systems, Inc. Framework for quality-aware video optimization
DE102009046114B4 (de) * 2009-10-28 2011-09-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und Vorrichtung zum Erzeugen einer kalibrierten Projektion
JP2012065094A (ja) * 2010-09-15 2012-03-29 Sony Corp 位相調整回路、受信装置、および通信システム
JP2013003892A (ja) * 2011-06-17 2013-01-07 Sony Corp 画像処理装置および方法、プログラム、並びに記録媒体
CN102520404B (zh) * 2011-11-30 2013-07-03 北京理工大学 一种基于图像质量最优的sar多普勒模糊数估计方法
CN102708567B (zh) 2012-05-11 2014-12-10 宁波大学 一种基于视觉感知的立体图像质量客观评价方法
US9554042B2 (en) * 2012-09-24 2017-01-24 Google Technology Holdings LLC Preventing motion artifacts by intelligently disabling video stabilization
US8941780B2 (en) * 2013-01-22 2015-01-27 Silicon Image, Inc. Mechanism for facilitating dynamic phase detection with high jitter tolerance for images of media streams

Also Published As

Publication number Publication date
US20150097972A1 (en) 2015-04-09
CN105122305A (zh) 2015-12-02
CN105122305B (zh) 2018-10-30
TWI575955B (zh) 2017-03-21
US20140204222A1 (en) 2014-07-24
WO2014113915A1 (en) 2014-07-31
US9392145B2 (en) 2016-07-12
US8941780B2 (en) 2015-01-27

Similar Documents

Publication Publication Date Title
US10368123B2 (en) Information pushing method, terminal and server
Rehman et al. Display device-adapted video quality-of-experience assessment
CN110868625A (zh) 一种视频播放方法、装置、电子设备及存储介质
JPWO2019053917A1 (ja) 輝度特性生成方法
US11122245B2 (en) Display apparatus, method for controlling the same and image providing apparatus
KR20130066069A (ko) 클라우드 컴퓨팅 기반 어플리케이션 제공 방법 및 시스템
US10582122B2 (en) Image processing apparatus, image processing method, and image pickup apparatus
JP6700880B2 (ja) 情報処理装置および情報処理方法
US10771855B1 (en) Deep characterization of content playback systems
CN108235075B (zh) 视频质量等级匹配方法、计算机可读存储介质及终端
TWI575955B (zh) 針對媒體串流的影像具有高抖動容忍之機制以促進動態相位檢測
RU2628569C2 (ru) Способ и устройство для распределения контента для просмотра с множеством экранов
US10764632B2 (en) Video signal processing apparatus, video signal processing method, and program
JP2020058014A (ja) 映像処理装置、ビデオ会議システム、映像処理方法、およびプログラム
JP5378883B2 (ja) 画像処理装置および画像処理方法
US20110206348A1 (en) Content providing apparatus and processing method of content providing apparatus
KR101967819B1 (ko) 타일 영상 기반 다중 재생을 위한 영상 처리장치 및 그 타일 영상 구성방법
CN103581744A (zh) 获取数据的方法及电子设备
JP2015184952A (ja) 画像処理装置、画像処理方法、およびプログラム
JP6036294B2 (ja) 情報提供システム、画像表示装置、情報提供方法及びプログラム
JP6623905B2 (ja) サーバ装置、情報処理方法およびプログラム
US11025833B2 (en) Video signal processing apparatus, video signal processing method, and program for performing video signal processing in consideration of behavior of light in nature
Melo et al. Hdr video on small screen devices
TWM495576U (zh) 影像調整裝置
KR20220123073A (ko) 이미징 프로세싱 방법 및 장치