TW202246950A

TW202246950A - 時序控制器及顯示裝置

Info

Publication number: TW202246950A
Application number: TW111118499A
Authority: TW
Inventors: 刁鴻浩
Original assignee: 中國商北京芯海視界三維科技有限公司; 新加坡商視覺技術創投私人有限公司
Priority date: 2021-05-25
Filing date: 2022-05-18
Publication date: 2022-12-01
Also published as: CN113012621A; WO2022247646A1

Abstract

本申請涉及3D圖像資料處理技術領域，公開了一種時序控制器，包括：FPGA裝置和橋接裝置，橋接裝置被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置；FPGA裝置被配置為接收眼球座標和圖像資料並根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕；還公開了一種時序控制器，包括：FPGA裝置和橋接裝置，橋接裝置被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置；FPGA裝置被配置為接收包括眼睛的圖像和圖像資料並根據包括眼睛的圖像獲得眼球座標，根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。本申請提供的時序控制器可以在一定程度上提高用戶體驗。本申請還公開了一種顯示裝置。

Description

時序控制器及顯示裝置

本申請要求在2021年05月25日提交中國智慧財產權局、申請號為202110568110.8、發明名稱為「時序控制器及顯示裝置」的中國專利申請的優先權，其全部內容透過引用結合在本申請中。本申請涉及3D圖像資料處理技術領域，例如涉及時序控制器及顯示裝置。

目前，電子設備的資料處理通常是由中央處理器（CPU）來執行，由於3D資料比2D資料的資料量大很多，因此由CPU處理3D資料時會出現延遲、卡頓等問題，影響用戶體驗。

為了對揭露的實施例的一些方面有基本的理解，下面給出了簡單的概括。該概括不是泛泛評述，也不是要確定關鍵／重要組成元素或描繪這些實施例的保護範圍，而是作為後面的詳細說明的序言。

本公開實施例提供了一種時序控制器及顯示裝置，以解決上述技術問題。

在一些實施例中，時序控制器包括：FPGA裝置和橋接裝置，橋接裝置，被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置； FPGA裝置，被配置為接收眼球座標和圖像資料，並根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。

在一些實施例中，時序控制器包括：FPGA裝置和橋接裝置，橋接裝置，被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置； FPGA裝置，被配置為接收包括眼睛的圖像和圖像資料，並根據包括眼睛的圖像獲得眼球座標，根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。

在一些實施例中，顯示裝置包括：上述時序控制器。

本公開實施例提供的時序控制器及顯示裝置，可以實現以下技術效果：在一定程度上提高了用戶體驗。

以上的總體描述和下文中的描述僅是示例性和解釋性的，不用於限制本申請。

為了能夠更加詳盡地瞭解本公開實施例的特點與技術內容，下面結合附圖對本公開實施例的實現進行詳細闡述，所附附圖僅供參考說明之用，並非用來限定本公開實施例。在以下的技術描述中，為方便解釋起見，透過多個細節以提供對所揭露實施例的充分理解。然而，在沒有這些細節的情況下，至少一個實施例仍然可以實施。在其它情況下，為簡化附圖，熟知的結構和裝置可以簡化展示。

通常，顯示螢幕（或稱顯示面板）會有一個時序控制器（Timing Controller，TCON），也叫TCON板或螢幕驅動板，作用是接收紅綠藍（RGB）資料訊號、時鐘訊號和控制訊號等輸入訊號，然後將這些輸入訊號轉換成能驅動顯示螢幕的訊號。

本公開實施例提供了一種時序控制器，下面進行說明。

第1圖示出了本公開實施例中時序控制器的結構示意圖。

如圖所示，時序控制器，可以包括：橋接裝置100和現場可程式化邏輯閘陣列（FPGA，Field Programmable Gate Array）裝置200，橋接裝置100，被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置200； FPGA裝置200，被配置為接收眼球座標和圖像資料，並根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。

本公開實施例對現有的時序控制器進行了改進，在時序控制器中透過FPGA設計實現了3D圖像資料處理的硬體單元，透過橋接裝置與FPGA橋接後獲取圖像資料，FPGA即可完成3D圖像資料處理，CPU不需要參與任何圖像資料的運算，圖像資料的運算透過時序控制器這樣的專用硬體設備就可以實現，在一定程度上提升了效率，採用本公開實施例提供的時序控制器進行3D顯示可以提高處理速率、減小延遲，提升用戶的觀看體驗。

在一些實施例中，橋接裝置100可以為橋接晶片或轉換晶片，通常可以將一種訊號格式轉換為另一種訊號格式，例如：將原始圖像資料的移動產業處理器介面（MIPI，Mobile Industry Processor Interface）訊號轉成低電壓差分訊號（LVDS，Low-Voltage Differential Signaling）。

在一些實施例中，橋接裝置100可以接收應用處理器AP發送的圖像資料，也可以接收圖像感測器獲取的圖像資料。其中，AP發送的圖像資料可以是AP生成的虛擬影片資料，圖像感測器獲取的圖像資料可以是圖像感測器即時攝錄的真實影片資料。

在一些實施例中，圖像資料可以包括左眼圖像資料和右眼圖像資料。

第2圖示出了本公開實施例中時序控制器的另一結構示意圖。

如圖所示，在一些實施例中，FPGA裝置200可以包括微處理器MCU 210、3D模組220、接收模組230和輸出模組240，MCU 210與3D模組220的第一輸入端相連，接收模組230與3D模組220的第二輸入端相連，3D模組220的輸出端與輸出模組240相連，其中， MCU 210，可以被配置為接收眼球座標並將眼球座標和控制資訊發送至3D模組220；接收模組230，可以被配置為接收圖像資料並將圖像資料發送至3D模組220； 3D模組220，可以配置為根據眼球座標、控制資訊以及圖像資料輸出像素驅動訊號。

在一些實施例中，3D模組220可以包括兩個輸入引腳、一個輸出引腳，MCU 210的輸出引腳可以與3D模組220的一個輸入引腳相連，接收模組230的輸出引腳可以與3D模組220的另一個輸入引腳相連，輸出模組240的輸入引腳和3D模組220的輸出引腳相連。

在一些實施例中，MCU 210可以與圖像感測器相連，或與圖像感測器的處理單元相連，以獲取使用者的眼球座標。可選地，眼球座標可以包括螢幕坐標系下水平方向和垂直方向的座標x、y值，還可以包括眼球到螢幕的深度值z。眼球座標可以包括左眼的座標和右眼的座標。

在一些實施例中，輸出模組240可以是採用點對點（P2P，Peer-to-peer）方式傳輸訊號。

在一些實施例中，3D模組220、輸出模組240可以透過匯流排的方式與MCU 210連接。可選地，匯流排可以是AXI（Advanced extensible Interface）匯流排等。

在一些實施例中，橋接裝置100可以與接收模組230相連，被配置為接收圖像資料並進行協定轉換後將圖像資料發送給接收模組230。

在一些實施例中，橋接裝置100可以包括一輸出引腳，該輸出引腳與FPGA的接收模組230的輸入引腳相連。

在一些實施例中，MCU 210還可以被配置為向橋接裝置100發送初始化資料；橋接裝置100還可以被配置為根據初始化資料進行初始化。

在一些實施例中，橋接裝置100可以包括一初始化輸入引腳，該初始化輸入引腳與FPGA的MCU 210的一輸出引腳相連，用於接收MCU 210發送的初始化資料。

在一些實施例中，橋接裝置100的初始化輸入引腳可以採用積體電路互連（IIC，Inter-Integrated Circuit）介面。MCU 210用於向橋接裝置100發送初始化資料的介面同樣可以為IIC介面。可選地，MCU 210用於向橋接裝置100發送初始化資料的介面可以為IIC主設備介面，橋接裝置100的初始化輸入引腳可以為IIC從設備介面。

在一些實施例中，MCU 210還可以被配置為接收光學資料並將光學資料發送至3D模組220，3D模組220可以被配置為根據眼球座標、控制資訊、光學資料以及圖像資料輸出像素驅動訊號。

在一些實施例中，MCU 210可以在每次上電之後，向3D模組220發送光學資料。

在一些實施例中，光學資料可以包括顯示螢幕上的像素（每個像素可以包括多個子像素，每個子像素還可以包括多個複合子像素等）與光柵的對應關係。可選地，光柵可以包括柱鏡光柵等。對應關係可以包括每條光柵內的複合子像素的個數、橫向位置排列、縱向位置排列等關係。

在一些實施例中，光學資料可以是從應用處理器AP傳輸過來的。

在一些實施例中，控制資訊可以包括以下模式中至少之一的控制資訊：2D模式、3D模式； 3D模組220被配置為在2D模式下將圖像資料根據每個像素的複合子像素數量進行像素擴充後輸出，在3D模式下根據眼球座標和圖像資料輸出每個像素的複合子像素的驅動訊號。

在一些實施例中，在2D模式下，3D模組220可以將圖像資料的每個像素複製N次，輸出到輸出模組240。複製的次數與每個子像素所包括的複合子像素的個數相關。例如：每個像素包括三個子像素，每個子像素包括4個複合子像素，2D模式下，可以將圖像資料的每個子像素複製4倍後輸出到輸出模組240。

第3圖示出了本公開實施例中橋接裝置的結構示意圖。

如圖所示，在一些實施例中，橋接裝置100可以包括第一協定輸入單元110、協定處理單元120和第二協定輸出單元130，第一協定輸入單元110，被配置為接收第一協定格式的圖像資料；協定處理單元120，被配置為將第一協定格式的圖像資料轉換為第二協定格式；第二協定輸出單元130，被配置為將第二協定格式的圖像資料傳輸至FPGA裝置。

在一些實施例中，第一協定輸入單元101可以為MIPI介面單元。可選地，可以為MIPI DSI顯示介面單元。

在一些實施例中，第二協定輸出單元103可以為LVDS介面單元。

在一些實施例中，橋接裝置100還可以包括第一重排單元，被配置為對圖像資料的像素進行重新排列，例如：將原圖像資料的不符合預設規則的像素安排佈置重新排列為符合預設規則的像素安排佈置。

在一些實施例中，接收模組230還可以包括第二重排單元，被配置為對圖像資料的像素進行重新排列，例如：將橋接裝置100發送過來的像素安排佈置重新排列為符合預設規則的像素安排佈置。

在一些實施例中，像素的重新排列可以為：橋接裝置100將圖像資料重排為一個時鐘包括N個RGB資料、接收模組230將一個時鐘包括N個RGB資料重排為一個時鐘包括M個RGB資料，N和M不相等。可選地，N＞M。

在一些實施例中，本公開實施例中的各個功能模組、單元均可以採用硬體電路等方式實現。

本公開實施例還提供了一種時序控制器，下面進行說明。

第4圖示出了本公開實施例中時序控制器的另一結構示意圖。

如圖所示，時序控制器，可以包括：橋接裝置100和現場可程式化邏輯閘陣列（FPGA，Field Programmable Gate Array）裝置200，橋接裝置100，被配置為接收圖像資料並進行協定轉換後將圖像資料發送給FPGA裝置200； FPGA裝置200，被配置為接收包括眼睛的圖像和圖像資料，並根據包括眼睛的圖像獲得眼球座標，根據眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。

第5圖示出了本公開實施例中時序控制器的另一結構示意圖。

如圖所示，在一些實施例中，FPGA裝置200可以包括微處理器MCU 210、3D模組220、眼球處理模組250、接收模組230和輸出模組240，MCU 210和眼球處理模組250均與3D模組220的第一輸入端相連，接收模組230與3D模組220的第二輸入端相連，3D模組220的輸出端與輸出模組240相連，其中， MCU 210，被配置為向3D模組220發送控制資訊；眼球處理模組250，被配置為接收攝影裝置獲取的圖像並根據圖像得到眼球座標，將眼球座標發送至3D模組220；接收模組230，被配置為接收圖像資料並將圖像資料發送至3D模組220； 3D模組220，配置為根據眼球座標、控制資訊以及圖像資料輸出像素驅動訊號。

本公開實施例對現有的時序控制器進行了改進，在時序控制器中透過FPGA設計實現了3D圖像資料處理以及眼球處理的硬體單元，透過橋接裝置與FPGA橋接後獲取圖像資料，FPGA即可完成眼球處理和3D圖像資料處理，CPU不需要參與任何圖像資料的運算，圖像資料的運算透過時序控制器這樣的專用硬體設備就可以實現，在一定程度上提升了效率，採用本公開實施例提供的時序控制器進行3D顯示可以提高處理速率、減小延遲，提升用戶的觀看體驗。

在一些實施例中，MCU 210還可以被配置為向橋接裝置100發送初始化資料；橋接裝置100還被配置為根據初始化資料進行初始化。

在一些實施例中，MCU 210還可以被配置為接收光學資料並將光學資料發送至3D模組220，3D模組220被配置為根據眼球座標、控制資訊、光學資料以及圖像資料輸出像素驅動訊號。

在一些實施例中，橋接裝置100可以包括第一協定輸入單元101、協定處理單元102和第二協定輸出單元103，第一協定輸入單元101，被配置為接收第一協定格式的圖像資料；協定處理單元102，被配置為將第一協定格式的圖像資料轉換為第二協定格式；第二協定輸出單元103，被配置為將第二協定格式的圖像資料傳輸至FPGA裝置。

本公開實施例還提供了一種顯示裝置，包括上述時序控制器。

第6圖示出了本公開實施例中顯示裝置的結構示意圖。

如圖所示，在一些實施例中，顯示裝置可以包括時序控制器，可選地，還可以包括顯示螢幕，時序控制器可以向顯示螢幕輸出像素驅動訊號來驅動顯示螢幕的顯示。

本公開實施例所提供的時序控制器、顯示裝置可以用在液晶顯示螢幕（LCD，Liquid Crystal Display）、發光二極體（LED，Light-Emitting Diode）等設備中。

本公開實施例所提供的時序控制器、顯示裝置可以用於2D、3D等顯示裝置。

在一些實施例中，顯示裝置還可以包括用於支持顯示裝置正常運轉的其他構件，例如：通訊介面、框架、控制電路等構件中的至少之一。

以上描述和附圖充分地示出了本公開的實施例，以使本領域技術人員能夠實踐它們。其他實施例可以包括結構的、邏輯的、電氣的、過程的以及其他的改變。實施例僅代表可能的變化。除非明確要求，否則單獨的部件和功能是可選的，並且操作的順序可以變化。一些實施例的部分和特徵可以被包括在或替換其他實施例的部分和特徵。本公開實施例的範圍包括請求項的整個範圍，以及請求項的所有可獲得的等同物。當用於本申請中時，雖然術語「第一」、「第二」等可能會在本申請中使用以描述各元件，但這些元件不應受到這些術語的限制。這些術語僅用於將一個元件與另一個元件區別開。比如，在不改變描述的含義的情況下，第一元件可以叫做第二元件，並且同樣地，第二元件可以叫做第一元件，只要所有出現的「第一元件」一致重命名並且所有出現的「第二元件」一致重命名即可。第一元件和第二元件都是元件，但可以不是相同的元件。而且，本申請中使用的用詞僅用於描述實施例並且不用於限制請求項。如在實施例以及請求項的描述中使用的，除非上下文清楚地表明，否則單數形式的「一個」（a）、「一個」（an）和「所述」（the）旨在同樣包括複數形式。類似地，如在本申請中所使用的術語「和/或」是指包含一個或一個以上相關聯的列出的任何以及所有可能的組合。另外，當用於本申請中時，術語「包括」（comprise）及其變型「包括」（comprises）和/或包括（comprising）等指陳述的特徵、整體、步驟、操作、元素，和/或元件的存在，但不排除一個或一個以上其它特徵、整體、步驟、操作、元素、元件和/或這些的分組的存在或添加。在沒有更多限制的情況下，由語句「包括一個…」限定的要素，並不排除在包括該要素的過程、方法或者設備中還存在另外的相同要素。本文中，每個實施例重點說明的可以是與其他實施例的不同之處，各個實施例之間相同相似部分可以互相參見。對於實施例公開的方法、產品等而言，如果其與實施例公開的方法部分相對應，那麼相關之處可以參見方法部分的描述。

本領域技術人員可以意識到，結合本文中所公開的實施例描述的各示例的單元及演算法步驟，能夠以電子硬體、或者電腦軟體和電子硬體的結合來實現。這些功能究竟以硬體還是軟體方式來執行，可以取決於技術方案的特定應用和設計約束條件。本領域技術人員可以對每個特定的應用來使用不同方法以實現所描述的功能，但是這種實現不應認為超出本公開實施例的範圍。本領域技術人員可以清楚地瞭解到，為描述的方便和簡潔，上述描述的系統、裝置和單元的工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。

本文所揭露的實施例中，所揭露的方法、產品（包括但不限於裝置、設備等），可以透過其它的方式實現。例如，以上所描述的裝置實施例僅僅是示意性的，例如，單元的劃分，可以僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，例如多個單元或元件可以結合或者可以集成到另一個系統，或一些特徵可以忽略，或不執行。另外，所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是透過一些介面，裝置或單元的間接耦合或通訊連接，可以是電性，機械或其它的形式。作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位於一個地方，或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例。另外，在本公開實施例中的各功能單元可以集成在一個處理單元中，也可以是各個單元單獨物理存在，也可以兩個或兩個以上單元集成在一個單元中。

在附圖中，考慮到清楚性和描述性，可以誇大元件或層等結構的寬度、長度、厚度等。當元件或層等結構被稱為「設置在」（或「安裝在」、「鋪設在」、「貼合在」、「塗布在」等類似描述）另一元件或層「上方」或「上」時，該元件或層等結構可以直接「設置在」上述的另一元件或層「上方」或「上」，或者可以存在與上述的另一元件或層之間的中間元件或層等結構，甚至有一部分嵌入上述的另一元件或層。

附圖中的流程圖和框圖顯示了根據本公開實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。在這點上，流程圖或框圖中的每個方框可以代表一個模組、程式段或代碼的一部分，上述模組、程式段或代碼的一部分包含至少一個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中，方框中所標注的功能也可以以不同於附圖中所標注的順序發生。例如，兩個連續的方框實際上可以基本並行地執行，它們有時也可以按相反的循序執行，這可以依所涉及的功能而定。在附圖中的流程圖和框圖所對應的描述中，不同的方框所對應的操作或步驟也可以以不同於描述中所揭露的順序發生，有時不同的操作或步驟之間不存在特定的順序。例如，兩個連續的操作或步驟實際上可以基本並行地執行，它們有時也可以按相反的循序執行，這可以依所涉及的功能而定。框圖和/或流程圖中的每個方框、以及框圖和/或流程圖中的方框的組合，可以用執行規定的功能或動作的專用的基於硬體的系統來實現，或者可以用專用硬體與電腦指令的組合來實現。

100:橋接裝置 110:第一協定輸入單元 120:協定處理單元 130:第二協定輸出單元 200:FPGA裝置 210:MCU 220:3D模組 230:接收模組 240:輸出模組 250:眼球處理模組

至少一個實施例透過與之對應的附圖進行示例性說明，這些示例性說明和附圖並不構成對實施例的限定，附圖中具有相同參考數位標號的元件示為類似的元件，附圖不構成比例限制，並且其中：第1圖示出了本公開實施例中時序控制器的結構示意圖；第2圖示出了本公開實施例中時序控制器的另一結構示意圖；第3圖示出了本公開實施例中橋接裝置的結構示意圖；第4圖示出了本公開實施例中時序控制器的另一結構示意圖；第5圖示出了本公開實施例中時序控制器的另一結構示意圖；第6圖示出了本公開實施例中顯示裝置的結構示意圖。

100:橋接裝置

200:FPGA裝置

Claims

一種時序控制器，包括：現場可程式化邏輯閘陣列FPGA裝置和橋接裝置，所述橋接裝置，被配置為接收圖像資料並進行協定轉換後將所述圖像資料發送給所述FPGA裝置；所述FPGA裝置，被配置為接收眼球座標和圖像資料，並根據所述眼球座標和圖像資料輸出像素驅動訊號到顯示螢幕。
根據請求項1所述的時序控制器，其中，所述FPGA裝置包括微處理器MCU、3D模組、接收模組和輸出模組，所述MCU與所述3D模組的第一輸入端相連，所述接收模組與所述3D模組的第二輸入端相連，所述3D模組的輸出端與所述輸出模組相連，其中，所述MCU，被配置為接收眼球座標並將所述眼球座標和控制資訊發送至所述3D模組；所述接收模組，被配置為接收圖像資料並將所述圖像資料發送至所述3D模組；所述3D模組，配置為根據所述眼球座標、控制資訊以及所述圖像資料輸出像素驅動訊號。
一種時序控制器，包括：現場可程式化邏輯閘陣列FPGA裝置和橋接裝置，所述橋接裝置，被配置為接收圖像資料並進行協定轉換後將所述圖像資料發送給所述FPGA裝置；所述FPGA裝置，被配置為接收包括眼睛的圖像和圖像資料，並根據所述包括眼睛的圖像獲得眼球座標，根據所述眼球座標和所述圖像資料輸出像素驅動訊號到顯示螢幕。
根據請求項3所述的時序控制器，其中，所述FPGA裝置包括微處理器MCU、3D模組、眼球處理模組、接收模組和輸出模組，所述MCU和所述眼球處理模組均與所述3D模組的第一輸入端相連，所述接收模組與所述3D模組的第二輸入端相連，所述3D模組的輸出端與所述輸出模組相連，其中，所述MCU，被配置為向所述3D模組發送控制資訊；所述眼球處理模組，被配置為接收攝影裝置獲取的圖像並根據所述圖像得到眼球座標，將所述眼球座標發送至所述3D模組；所述接收模組，被配置為接收圖像資料並將所述圖像資料發送至所述3D模組；所述3D模組，配置為根據所述眼球座標、控制資訊以及所述圖像資料輸出像素驅動訊號。
根據請求項2或4所述的時序控制器，其中，所述橋接裝置與所述接收模組相連，被配置為接收圖像資料並進行協定轉換後將所述圖像資料發送給所述接收模組。
根據請求項2或4所述的時序控制器，其中，所述MCU還被配置為向所述橋接裝置發送初始化資料；所述橋接裝置還被配置為根據所述初始化資料進行初始化。
根據請求項2或4所述的時序控制器，其中，所述MCU還被配置為接收光學資料並將所述光學資料發送至所述3D模組，所述3D模組被配置為根據所述眼球座標、控制資訊、光學資料以及所述圖像資料輸出像素驅動訊號。
根據請求項2或4所述的時序控制器，其中，所述控制資訊包括以下模式中至少之一的控制資訊：2D模式、3D模式；所述3D模組，被配置為在2D模式下將所述圖像資料根據每個像素的複合子像素數量進行像素擴充後輸出，在3D模式下根據所述眼球座標和所述圖像資料輸出每個像素的複合子像素的驅動訊號。
根據請求項1或3所述的時序控制器，其中，所述橋接裝置包括第一協定輸入單元、協定處理單元和第二協定輸出單元，所述第一協定輸入單元，被配置為接收第一協定格式的圖像資料；所述協定處理單元，被配置為將所述第一協定格式的圖像資料轉換為第二協定格式；所述第二協定輸出單元，被配置為將所述第二協定格式的圖像資料傳輸至所述FPGA裝置。
一種顯示裝置，包括如請求項1至9任一所述的時序控制器。