TW202143022A

TW202143022A - 用於更新顯示在顯示器裝置上的影像的系統及方法

Info

Publication number: TW202143022A
Application number: TW110100839A
Authority: TW
Inventors: 埃德蒙帕松; 伊恩凱爾斯; 亞倫博伊斯; 格倫薩斯
Original assignee: 美商複合光子股份有限公司
Priority date: 2020-01-08
Filing date: 2021-01-08
Publication date: 2021-11-16
Also published as: TWI825379B; US20230034839A1; WO2021142243A1; US11756512B2; KR102612768B1; EP4088178A1; CN115053208A; KR20220129573A

Abstract

提供了用於基於顯示裝置更新影像的裝置、系統及方法。顯示裝置包含像素陣列中的像素。系統包含顯示器子系統用於執行指令及顯示影像，所述顯示器子系統包含解析器用於接收影像幀資料，其中解析器擷取更新影像資料及指令，儲存裝置用於依據指令儲存更新影像資料進更新快取位置，加載器用於讀取指令以從儲存裝置辨認及取得更新影像資料，以及顯示器背板電路用於從加載器接收更新影像資料及用於為更新影像資料內的像素更新像素驅動電路。此述的實施例對於驅動微型顯示器，例如LCoS微型LED顯示器是理想的。

Description

用於更新顯示在顯示器裝置上的影像的系統及方法

本發明係關於顯示器。具體地，本發明係關於更新在顯示器裝置上顯示的影像，這種顯示器裝置包含空間光調變器及/或顯示器，其中顯示器例如為液晶顯示器、液晶覆矽顯示器（liquid crystal-on-silicon，LCoS）、LED顯示器、微型LED顯示器及微型顯示器，該些顯示器被以顯示驅動器電路及/或軟體（例如，電路、邏輯元件或電路、IC及/或驅動軟體）驅動。

在例如為擴增實境（Augmented Reality，AR）頭戴式顯示器的行動系統中，功耗及電池的使用極為重要。在這些系統中，在主機上（例如，影片來源，如手機、電腦、平板或其他行動裝置）的影片資料的產生（渲染）、在顯示驅動器IC及背板IC或多個IC中資料的傳輸（例如透過纜線）及處理/加載影片資料，對於每個被傳輸的位元或管線（pipeline）中的硬體的每個位元切換皆會消耗能量。這些系統從主機的幀緩衝器，傳輸欲被顯示的資料的整個幀，包含未改變及被改變的資料。例如，一些系統可能僅渲染被顯示的影像的改變部分，並將其寫入主機上的幀緩衝器，但接著發送整個幀至顯示器子系統。此外，這些系統也使用固定的刷新率。由於專用於通過該系統進行數據傳輸的這種重複和功率浪費，已知技術和傳統系統目前不足以提供輕重量、長期使用且亦使電池重量和體積最小化的系統。

具有用於渲染影像幀資料的資料源或主機的這種已知顯示器系統，從幀緩衝器渲染並傳輸整個影像幀資料，以更新整個顯示器的當前顯示的影像。這包含了在兩個影像幀之間發送重複或不便的資料。該資料可以為，例如，影片、影像或特性化（characterize）影像的影像資料。顯示器可以為微型顯示器，例如LCD或LCoS微型顯示器，或直接視野大型顯示器（direct view larger display）。

在本發明的一實施例中，提供了用於更新顯示在一顯示器裝置上的一顯示影像的一種顯示器系統，該顯示器裝置包含在一像素陣列中的多個像素，該系統包含：一顯示器子系統，用於執行多個指令，其中該些指令指示該顯示器子系統如何更新該顯示影像，該顯示器子系統包含：一解析器，用於接收一影像幀資料，其中該解析器擷取一更新影像資料及該些指令；一儲存裝置，用於基於該些指令儲存該更新影像資料至一更新快取位置；一加載器，用於讀取該些指令以從該儲存裝置辨認及取得該更新影像資料；以及一顯示器背板電路，用於從該加載器接收該更新影像資料，及用於針對該更新影像資料中的像素更新像素驅動電路。

在本發明的一實施例中，提供了一種影像更新方法，適用於更新顯示於一顯示器裝置上的一顯示影像，該顯示器裝置包含一像素陣列中的多個像素，該方法包含：在一顯示器子系統中接收一影像幀資料；在一解析器中接收該影像幀資料；從該影像幀資料擷取一更新影像資料及多個相關指令，該影像幀資料包含多個指令，用於指示一加載器如何更新該顯示影像；依據該些相關指令將該更新影像資料儲存進一更新快取位置；讀取該些相關指令以從該更新快取位置辨認並取得該更新影像資料；從該加載器接收該更新影像資料；以及僅針對該更新影像資料中的像素更新一像素驅動電路。

在本發明的一實施例中，該儲存裝置可以包含一快取記憶體。該快取或儲存裝置可以為實體記憶體，例如RAM、EEPROM等，或可以為基於軟體的快取記憶體或儲存器。

在本發明的一實施例中，提供了用於更新顯示在一顯示器裝置上的一顯示影像的一種顯示器系統，該顯示器裝置具有一顯示器包含一像素陣列中的多個像素，該系統包含：一顯示器子系統，用於執行多個指令，其中該些指令包括：用於供該顯示器裝置描述如何從該更新影像資料更新該顯示影像的指示，該顯示器子系統包含：一解析器，用於接收該更新影像幀資料，其中該解析器擷取一更新影像資料及該些指令；供一儲存裝置描述如何儲存該更新影像資料至一更新快取位置的指示；供一加載器描述如何從該更新快取位置辨識及取得該更新影像資料的指示；以及一顯示器背板電路，用於從該加載器接收該更新影像資料，及用於更新該更新影像資料內的像素的像素驅動電路。

在依據本發明的系統中，顯示器背板電路僅的部分僅將資料加載到顯示器的一部份中，而所有其他像素的狀態保持不變。這是透過為每個定義區塊308中的行（column）的水平範圍的行組使用一或多個行導向（column-oriented）的負載致能訊號（例如，啟動或停用（致能或抑制）像素組的控制電壓），藉由對像素分組進行定址（addressing）使顯示器加載其像素而實現，其中該一或多個行導向與列導向（row-oriented）的訊號（例如，控制電壓）協同工作以致能或抑制將新的資料載入像素區塊308中的像素，其中像素分組例如為顯示器像素的子集或像素的小的矩形區塊。

在本發明的一實施例中，一種顯示器系統用於更新顯示在一顯示器裝置上的一顯示影像，該顯示器系統可以包含在一像素陣列中的多個像素，且該系統包含一顯示器子系統，用於執行多個指令，其中該些指令指示一加載器如何更新該顯示影像，該顯示器子系統包含：一解析器，用於接收一影像幀資料，其中該解析器擷取一更新影像資料及該些指令包含辨認該顯示影像是否欲被更新的部分的指令；一映像，由一資料集構成，其中該資料集包含多個座標及多個區塊位置（例如，顯示影像中的位置的座標或像素的位置或顯示影像的像素元件或像素區塊的位置或座標，或在對應的影像或影像資料中的位置）的至少其中一者，其中所述多個座標及多個區塊位置的至少其中一者係指示該顯示影像中為主動且需被更新的區域；一儲存裝置，用於基於該些指令儲存該更新影像資料、一更新儲存位置或快取，所述該些指令可以，例如，基於該映像的內容選擇性地儲存或判斷輸入資料將被儲存的位置；一加載器，用於讀取該些指令以從該儲存裝置辨認及取得該更新影像資料、更新儲存位置或快取，且可以根據該映像選擇性地取得資料；以及一顯示器背板電路，用於從該加載器接收該更新影像資料，及用於對該更新影像資料中的像素更新一像素驅動電路。在本發明的一實施例中，一種顯示器系統用於更新顯示在一顯示器裝置上的一顯示影像，該顯示器系統包含在一像素陣列中的多個像素，該系統包含：一解析器，用於接收一影像幀資料，其中該解析器擷取一更新影像資料及該些指令包含辨認該顯示影像被用於更新的部分的指令；一映像，由一資料集構成，其中該資料集包含該顯示影像被用於更新的主動區域的多個座標及多個區塊位置的至少其中一者；一儲存裝置，用於基於該些指令及該映像的至少其中一者儲存該更新影像資料；一加載器，用於讀取該些指令，且其中該加載器辨認該更新影像資料，並依據該映像從該儲存裝置取得該更新影像資料；以及一顯示器背板電路，用於從該加載器接收該更新影像資料，及用於更新一像素驅動電路，該像素驅動電路以該更新影像資料更新該些像素。

在一實施例中，該些指令包含一描述符，該描述符辨認該更新影像資料顯示的影像對應的部分的位置。在一實施例中，該解析器發送該些指令至該儲存裝置及/或該加載器的至少其中一者。在一實施例中，該加載器讀取該描述符並從更新儲存位置取得該更新影像資料。在一實施例中，該加載器辨認該像素陣列中對應該描述符中的該更新儲存位置的像素列及/或像素行。在一實施例中，該加載器排列該描述符的讀取直到該加載器從該儲存裝置取得資料。在一實施例中，該加載器排列該描述符的讀取，以預定的時間間隔發生。在一實施例中，該系統更包含一影像源，且其中該影像源辨認待更新的該顯示影像的該區塊位置，並僅針對該區塊位置渲染該更新影像資料。在一實施例中，該影像源為一影片資料源，且其中該更新影像資料係儲存在一記憶體及一緩衝器的至少其中一者。在一實施例中，該記憶體及該緩衝器的至少其中一者為一緩衝器，且儲存於該緩衝器的該更新影像資料被傳輸至該顯示器系統，並且其中該顯示器系統包含一驅動顯示邏輯，用於從該更新影像資料計算該顯示影像的多個主動區域的一佔用圖。在一實施例中，該顯示影像的該些主動區域包含該顯示影像的該些像素、該些像素的多個列及該些像素的多個部分的至少其中一者的多個矩形磚（rectangular tile）。在一實施例中，該佔用圖判斷該些主動區域係透過分析該顯示影像的該些主動區域中是否存在任何非黑像素。在一實施例中，僅有非黑的該更新影像資料被寫入該儲存裝置。在一實施例中，僅有對應於該顯示影像的該些主動區域的該更新影像資料被從該儲存裝置取回。在一實施例中，該顯示器系統包含一像素陣列，且該像素陣列中的各像素包含：包含耦接至一像素邏輯電路的多個像素元件的像素；以及耦接至該像素邏輯電路的一像素記憶體。在一實施例中，該些像素記憶體儲存該些像素的一電流灰階值。在一實施例中，中每一該些像素更包含一像素驅動電路。在一實施例中，該像素邏輯電路解碼該電流灰階值及調變該像素驅動電路並產生一像素強度及一亮度的至少其中一者。在一實施例中，該些像素記憶體包含一鎖存電路，以為該些像素儲存由多個位元呈現的影像資料。在一實施例中，該影像源執行渲染該影像幀資料及傳輸該影像幀資料的至少其中一者，該影像幀資料包含：一影像的至少一部份的更新影像資料，以取代一當前顯示影像的一影像資料的所對應的一部份；以及多個相關指令，描述該另一更新影像資料如何取代該影像資料。在一實施例中，該儲存裝置係一快取記憶體。在一實施例中，一種影像更新方法，適用於更新顯示於一顯示器裝置上的一顯示影像，該顯示器裝置包含一像素陣列中的多個像素，該方法包含：在一顯示器子系統中接收一影像幀資料；在一解析器中接收該影像幀資料；從該影像幀資料擷取一更新影像資料及多個相關指令，該影像幀資料包含多個指令，用於指示一加載器如何更新該顯示影像；依據該些相關指令將該更新影像資料儲存進一更新快取位置；讀取該些相關指令以從該更新快取位置辨認並取得該更新影像資料；從該加載器接收該更新影像資料；以及僅針對該更新影像資料中的像素更新一像素驅動電路。

本發明的設備、系統和方法透過最佳化資料（例如，影片、影像、影片/影像資料）的渲染、傳輸和更新來節省顯示器系統內的功耗。本文的本發明的實施例允許在每個階段僅改變有所改變者，即，僅選擇性地更新相對於整個先前幀或子幀僅需要改變的部分資料，並且僅刷新那些非空白（non-blank）的部分。因此，僅有這些改變或主動部分被渲染、傳輸及更新，而影像或影像資料的其他部分維持原樣或不被顯示驅動電路及/或軟體改變。此選擇性的更新可以發生在管線（pipeline）的一或多個階段，亦即依據此述的實施例在主機渲染、傳輸及/或更新顯示影像的期間。

作為最小化發送的資料量以及隨後在管線的多個階段（例如，不發送完整的影片幀）的處理、傳輸和新的資料量的結果，整個系統提高了效率，並減少了使用此類顯示器系統和方法的相關裝置的電池尺寸和功耗。這些減少（例如較小的電池及較小/較輕的移動系統）對於需要較長的電實壽命的應用是理想的，例如頭戴式系統，包含AR、VR等。此外，此述的實施例對於驅動顯示器是理想的，例如，液晶顯示器、LCoS顯示器、LED顯示器、微型LED顯示器。在本發明的實施例中，顯示驅動電路及/或軟體可以被集成、包括近或耦接到顯示器，以形成包含顯示驅動IC的單一裝置（例如，具有矽背板的顯示器裝置（顯示器裝置可以接合或耦接到背板））。在本發明的一實施例中，顯示器可以與顯示驅動電路及/或軟體（例如，顯示驅動IC）分隔出來，且電性耦接到顯示器裝置，例如，透過附有排線（flex cable）、導線，或電性連接元件。可以使用術語「耦接」及「連接」及其他衍生詞。應該理解的是，這些術語並不旨在彼此等同。相反的，在特定實施例中，「連接」可以用於指示兩個或多個元件彼此直接物理接觸。「耦接」可以指兩個或多個元件彼此直接物理接觸。然而，「耦接」亦可以兩個或多個元件彼此不直接接觸，但仍彼此協作或相互作用。

以上之關於本揭露內容之說明及以下之實施方式之說明係用以示範與解釋本發明之精神與原理，並且提供本發明之專利申請範圍更進一步之解釋。

以下在實施方式中詳細敘述本發明之詳細特徵以及優點，其內容足以使任何熟習相關技藝者了解本發明之技術內容並據以實施，且根據本說明書所揭露之內容、申請專利範圍及圖式，任何熟習相關技藝者可輕易地理解本發明相關之目的及優點。以下之實施例係進一步詳細說明本發明之觀點，但非以任何觀點限制本發明之範疇。

圖1a示出資料源102的示意性方塊圖，例如，影像、影像資料或影片源或影片資料104，例如為主機。在本發明的一實施例中，主機可以包含一處理器105，例如，應用處理器（application processor），處理器105執行存在處機的儲存裝置內（例如，記憶體裝置107）的應用程式、指示或指令106（例如，軟體）。在本發明的一實施例中，主機可以串流（stream）影像資料或影像，例如，透過例如耦接到或包含在主機內的中央處理單元、圖形處理器的影片資料、顯示處理器（DPU）、直接記憶體存取引擎（DMA engine）、行動產業處理器介面（MIPI）資料服務介面（DSI）控制器及行動產業處理器介面物理（PHY）介面。在本發明的一實施例中，軟體模組107a包含指令106。

圖1b為微型LED顯示器系統180的圖式，在一實施例中，微型LED顯示器系統180可以包含本發明的顯示器系統100。微型LED顯示器系統180通常包含佈置在一基板182上的各別像素LED元件184的一像素陣列140。在本發明一實施例中，基板182可以耦接到、集成於或形成在驅動器背板或背板積體電路（IC）186上。在本發明一實施例中，像素LED元件184是直接佈置在驅動器背板或背板IC 186上。在本發明一實施例中，驅動器背板或背板IC 186包含電路以驅動像素陣列140，例如，顯示器驅動邏輯122或積體電路及/或顯示器背板邏輯130或積體電路。顯示器驅動邏輯122可以包含一解析器（parser）124及/或快取或儲存裝置153。顯示器背板邏輯130可以包含一加載器（loader）162。一描述符（descriptor）152亦可以被提供。像素陣列140的像素的像素驅動電路176亦可以被提供。

相似地，圖1c是具有相似元件的LCoS顯示器系統190的圖式，並且在一實施例中，LCoS顯示器系統190亦可以包含本發明的顯示器系統100。具體地，一LCoS顯示器裝置包含基板120，驅動器背板或背板IC 186可以耦接至或集成於基板120上。基板120可以為矽（silicon）。各別的反射裝置的層196，其可以是諸如反射鏡或鋁裝置（在這裡表示為單層）的單個反射裝置，其佈置、耦合至或集成於顯示器背板120。對準層（alignment layer）140（像素陣列140）是形成在層196上。液晶層193、對準層198、透明電極（通常位在銦錫氧化物（ITO）層內）199及玻璃或其他透明材料層197亦形成顯示器的結構。

在本發明一實施例中，顯示器背板IC 130可以包含在、整合進或集成於顯示器背板120（其可以耦接至，例如，LCoS顯示器系統中的反射裝置186；196或微型LED顯示器系統中的LED，例如微型LED）。像素陣列（即微型LED或LED）可以位於自身的基板上，其中每個LED耦接至背板上的像素驅動器。在本發明一實施例中，顯示器背板120耦接至顯示器裝置180、190（例如，LCoS裝置）或LCoS像素陣列140或像素元件（例如，反射裝置186；196或LED或LED陣列，例如微型LED）。在本發明一實施例中，顯示器系統100包含顯示器背板120、顯示器背板電路130、像素電路174（例如，為像素驅動電路或像素電路）及像素元件140a，其中像素元件140a耦接（例如電性地）至、集成進、包含於及/或位於顯示驅動積體電路（DDIC）122內。在本發明一實施例中，顯示器系統100（包含DDIC）是電性耦接於DDIC，且形成顯示器子系統120（顯示器背板120）且被一起組裝在顯示器系統100中。

在本發明一實施例中，顯示器子系統120包含一顯示器197（玻璃或其他透明材料層197）。在本發明一實施例中（如圖1c所示），顯示器197為佈置在背板120上或耦接至背板電路（例如，像素電路170、整合、耦接或集成進背板的像素驅動電路或驅動電路）的像素元件的像素陣列140。在本發明一實施例中，顯示器子系統120為LCoS顯示器系統190的液晶覆矽（liquid crystal-on-silicon，LCoS）顯示器子系統。在LCoS顯示器系統190的一實施例中，依據本發明，顯示器197為液晶顯示器或液晶單元（cell）（包含設置於基板196、199之間的液晶193）電性耦接於或集成於顯示器子系統的背板120或背板IC。在本發明一實施例中，液晶顯示器或單元的基板196的其中一者為背板120或背板IC。在本發明一實施例中，液晶顯示器或液晶單元193包含於、電性耦接於或集成於顯示器背板電路130（IC）或其基板中。在本發明一實施例中，顯示器背板IC 130電性耦接於液晶單元的其中一側，例如，顯示器不發光或不發出對應於影像的光的一側。在本發明一實施例中，液晶單元耦接於矽基板182，且該基板為相同於形成背板IC 120的一側的矽基板，或為耦接到顯示器背板IC的基板（例如，基板，例如為包含驅動電路、像素電路、像素電路170及/或驅動電路166的矽基板）的矽基板。

在本發明一實施例中（如圖1b所示），顯示器子系統120為微型LED顯示器子系統180。在本發明一實施例中，顯示器系統100為微型LED顯示器子系統180。在依據本發明的微型LED顯示器子系統180的一實施例中，顯示器為LED 184或微型LED的陣列，該顯示器電性耦合於或集成進或顯示器系統100的背板120或顯示器背板IC或與顯示器系統100的背板120或顯示器背板IC集成。在本發明一實施例中，微型LED 184包含於、電性耦合於或集成進顯示器背板IC 122及/或其基板182。在本發明一實施例中，顯示器背板IC 122電性耦合於LED（例如微型LED）陣列的一中一側，例如，LED（例如微型LED）陣列中不發光或不發出對應於影像的光的一側。在本發明一實施例中， LED 184（例如微型LED）的陣列耦接於矽基板182，且該基板為相同於形成顯示器背板IC 122的一側的矽基板，或為耦接到顯示器背板IC 122的基板186的矽基板182（例如，顯示器背板IC矽基板）。

在本發明一實施例中，像素184的陣列包含組裝在陣列140中或組裝在基板182上的陣列的像素元件。在本發明一實施例中，像素184的陣列為發光二極體（LED）陣列。在本發明一實施例中，LED可以為微型LED。在本發明一實施例中，像素184的陣列；140為反射元件196的陣列，其控制LCoS裝置190中的液晶193或其他液晶的雙折射率（birefringence）。在本發明一實施例中，像素元件184為反射性元件/裝置，例如，鏡子。在本發明一實施例中，像素陣列140或像素的陣列是形成於、耦接於、整合於或集成進顯示器背板IC 122。在本發明一實施例中，DDIC或顯示器驅動電路驅動像素元件的陣列的像素元件（例如，發光二極體（LED）、微型LED 184、反射元件）的運作，其中該像素元件的陣列是佈置在顯示器系統100的背板120上。

在本發明一實施例中，資料源或主機可以為，例如，行動裝置，例如智慧型手機、平板電腦、筆記型電腦、抬頭顯示器（head-up display）系統、頭戴式裝置或混合裝置（或前述的裝置的部分組合）。在本發明一實施例中，影像、影像資料及/或影片資料由主機102的即時資料軟體模組107a及/或多工器（MUX）108接收，且即時資料軟體或軟體模組107a在多工器108及/或即時資料軟體模組107a處將資料與從包含所需驅動序列的主序列文件解析的命令進行合併。此外或可變地，多工器108可以為從即時資料軟體模組107a控制的硬體。在本發明一實施例中，與指令合併的資料為從資料源（例如，主機）102輸出且傳輸至顯示器子系統的合併資料。在本發明一實施例中，該合併資料透過資料源102的即時資料軟體模組107a及/或多工器108被輸出。

相反於習知的系統，此述實施例的資料源102或主機幀之間渲染並傳輸資料104已改變的一部分，而並非所有的影像資料（即已改變及未被改變的資料）。在本發明一實施例中，僅有由主機傳輸的影像資料為幀之間已經改變的資料的一部份，且此已改變的影像資料被從主機102隨一或多個指令106傳輸至顯示器197或顯示器背板130及/或驅動電路122及/或用於驅動顯示器背板130的軟體。如以下將更詳細描述的，這種節省可能發生在五個階段：1）將資料從主機102傳輸至顯示器197；2）將其置入快取153；3）從快取153讀取資料；4）從透過顯示器加載器162快取153將其寫入顯示器背板130；及5）調變顯示器197的主動像素。本發明的實施例利用了在例如AR系統之類的系統應用中呈現的影像的性質，其通常具有稀疏的影像資料（由於影像覆蓋在真實世界上），並且具有高比例的黑色背景，其中該黑色背景在AR頭戴式顯示器中變成透明。依據本發明的實施例，可能存在以下情況：例如，當正在呈現全動態影像（full-motion video）時或當使用者正在移動且圖樣被更新以與使用者的真實世界的有利觀點（vantage point）保持一致時，需要刷新整個顯示區域和將資料傳輸到顯示器的電纜上的全部資料帶寬。在本發明一實施例中，顯示器197可以在特定區域（例如沿著顯示器的底部邊緣、上部邊緣或側邊緣的條帶，同時中心區域為空白）呈現圖像（icon）、圖樣（graphic）或文字，且這些可以為靜態或零星地改變，且在這些情況中，依據本發明，在幀之間傳輸資料已改變的部份，而非所有的影像資料（即已改變及未改變的資料）是有利的，例如，節省能量。依據本發明的實施例，資料104亦可以為符號、圖像或正在移動的指標，但相對於整個顯示區域是小的並因此僅有區域的子集需被更新。對於小區域刷新（refresh）的情況，若動作需要很快速以跟上環境的改變，則刷新率亦可以增加，因為可用的時間及傳輸帶寬可能全被用於改變顯示的一部份。本發明致力於在管線（pipline）的多個階段最小化資料處理、傳輸和刷新。在一實施例中，整個顯示影像被刷新而不刷新整個快取，且在另一實施例中，整個顯示被從快取刷新。在本發明一實施例中，加載器162可以僅從快取153擷取或讀取改變的資料，並刷新或更新顯示器197。可替代地，例如，加載器162可以使用或讀取快取153中的整個內容或影像資料，刷新或更新顯示器197，以更新或刷新顯示器197，而非僅從快取153讀取改變的資料。

依據本發明的實施例的顯示器子系統120的顯示器背板部分130整合僅將資料重新加載到顯示器的一部分中並同時使所有其他像素140的狀態保持靜態的能力。這示出於圖3中，且顯示器背板部分130能夠僅加載資料到顯示器的一部分中並同時使所有其他像素140的狀態保持靜態的能力是藉由使顯示器300加載其像素而實現，其中上述是透過定址（addressing）像素的小的矩形區塊308或顯示器像素140a、140b的子集，或顯示器像素的子集或像素的區塊的集合加載其像素而實現，而定址（addressing）像素的小的矩形區塊308或顯示器像素140a、140b的子集，或顯示器像素的子集或像素的區塊的集合是透過為定義在區塊308中與列導向加載訊號協同運作的行的水平範圍的行301的每個組，具有致能或抑制加載新的資料進像素區塊308的像素的行導向加載致能訊號（column-oriented load enable signals）或控制電壓。在本發明的一實施例中，像素140a整合足夠的記憶體174（例如，像素電路176，如鎖存器或鎖存電路）以完整地描述該像素的灰階值，並從幀到幀保留靜態（不改變）像素140a的狀態。

再次參考圖1a，在主機102（即為影像資料的來源的主機，其中影像資料例如為，影像、影片、影像資料及/或影片資料104）上的軟體應用（application）渲染影像的一部份（或全部）的影像資料（例如，在幀緩衝器內），其中該影像在顯示器197上需被改變。在本發明一實施例中，影像資料被格式化。在本發明一實施例中，影像資料藉由將其與指令106結合、附加（appending）或整合被格式化，並像是單純的影片資料104（即沒有任何跡象表明其包含指令106或指令資料）傳輸影像資料至較低層的傳輸協定110（例如MIPI）。在本發明一實施例中，指令106可以不在傳輸後被接著處理，直到其被由解析器124從傳輸資料或影像資料分析出來。

在本發明一實施例中，其中待再加載（re-loaded）的像素及/或像素區塊（即改變的資料）被以指令106辨認，例如描述符（descriptor）（例如區域描述符），且此改變的資料可以（隨新的影像及/或影片資料104）被主機102透過傳輸通道裝置110傳輸至顯示器子系統120及/或顯示器加載邏輯162（即加載電路及/或軟體）。傳輸通道（例如傳輸協定的導線、物理層電子元件及較高的層）110可以為互通性（interoperability）維持標準化，然而資料串流的內容被改變以包含指令106及冒充為影像及/或影像資料104的影像及/或影片資料104（即單純的影像及/或影片資料104或不被指令106辨認為其包含的資料）。在主機102上的軟體及顯示器驅動邏輯122（或各別的顯示器驅動IC）中的解析器124的實施例對於影像/影片資料封包及指令106依據一格式（即相同的格式或相容的格式）議定（agree）或運作，例如提供被刷新的區域的尺寸及位置以及系統100的刷新率的區塊描述符155。在本發明一實施例中，主機102及解析器124被設計為議定。在本發明一實施例中，解析器124可以為硬體及/或軟體。

在顯示器子系統120中（或單塊的顯示器IC），接收到的資料串流110被解析器124解析以擷取被隨其的影像資料152（例如影像或影片資料104的區塊）以及指令106或識別符（例如描述符155）。在本發明一實施例中，描述符155被用於辨認在一區域快取153中新資料104要被儲存的區域。在本發明一實施例中，描述符155被傳輸到快取153及加載器162，使驅動邏輯（即驅動電路122及/或軟體）知道要將改變資料放到何處，且當加載器162需將該改變資料寫至像素陣列140時，加載器162知道在快取153中要從何處讀取該改變資料。在本發明一實施例中，快取153（可以在顯示加載器162之前）用於在影像及/或影片資料104加載到顯示器197之前暫存或儲存影像及/或影片資料104。在本發明一實施例中，快取153的唯一被更新的部分、區段或地址是其內容中與描述符155（例如，區域描述符）所標識或設置的與被更新的顯示區域相對應或相關的那些部分。在部分實施例中，整個圖示（scheme）中僅有一部份被使用。例如，在一實施例中，主機102可以識別顯示器197的要更新的區域並僅發送該區域的資料，並且將重寫快取153，但是如果例如在以下情況下可以將顯示器197設置為從快取153刷新：多色顯示器需要依序地顯示3種不同顏色的資料（顏色順序操作）。

在本發明一實施例中，解析器124將描述符155發送到快取153並還發送到加載器162，並且加載器使用該描述符標識區塊地址164，從該區塊地址164中讀取或獲取快取153中的改變資料（以使加載器162 可以將改變的資料加載到像素陣列140中），然後使用描述符155標識陣列140、300中的列303和行301以將該資料（例如，影像資料）加載到其中。在本發明一實施例中，當加載器162將從快取153擷取資料以加載進顯示像素140時，描述符155可以被排序（即，以與將在顯示器或顯示器197的像素陣列或像素元件上更新的區域的順序相同的順序被放置在緩衝記憶體中）。所述的排序可以以預定的間隔時間發生。在本發明一實施例中，可能存在固定的刷新率，其中將在下一幀時間中顯示的所有資料到達快取153，以根據刷新率來更新顯示器197。相反的，依據本發明的系統100，可以以預定的間隔時間（且此間隔時間可以不同）週期性地更新顯示器197或顯示器197的像素陣列或像素元件。可替代地，在本發明一實施例中，依據本發明的系統100可以在顯示驅動邏輯（即，顯示驅動電路122和/或軟體和/或解析器124）接收到改變的數據時將其推出。

在本發明另一實施例中，主機處理器105僅渲染影像中主動或改變為影片緩衝器的一部份，但為了方便，整個影片緩衝器被傳輸至顯示器197且顯示驅動邏輯122基於在每個區域308中是否存在認非黑像素，計算顯示器的區域的佔用圖300，例如矩形磚或線303的一部份。這示出於圖3中。此佔用圖300可以取代從主機102發送的佔用及改變區域。只有為非黑的資料303、305、308被寫入快取153，且佔用圖中僅有被標記為主動的區域304被從快取153取回，且僅有被標記為主動的區域304被寫入顯示像素記憶體174。在本發明一實施例中，佔用圖300為資料的集合且可以被顯示驅動軟體及/或電路/硬體存取。

藉由使用此述的實施例的系統及方法，僅透過渲染、傳輸和刷新用於顯示器的需要改變的部分的資料而保留其他部分未被觸摸而不發送完整的影片幀，進而節省功耗。與傳統的系統和方法相比，這也產生了更高的幀速率。

在一實施例中，像素陣列140中的每個像素140a、140b包含記憶體元件174（例如鎖存器）、邏輯172（例如，如為組合閘極、電晶體等的硬體）及像素驅動電路176（例如位準偏移器）。可替代地，一或多個像素140b的每一者可以僅包含記憶體元件174及像素驅動邏輯172。這在圖1中透過兩個替代像素塊140a、140b的分解圖示出。像素本身包含足夠的記憶體174，以完整地描述該像素的灰階值，如果影像沒有變化，則像素值可以保持靜態，並且沒有負載活動。換言之，具有足夠的記憶體174以儲存像素140a、140b中的資訊，使其從幀到幀維持正確的顏色或亮度而不被刷新。像素140a、140b中的邏輯172作為解碼儲存的灰階值並調製像素驅動輸出176（例如，在給出期望的光強度的幀的過程中設置類比值或一系列二進位值）。在本發明一實施例中，記憶體元件174可以為儲存由數個位元代表的影像資料的鎖存器或鎖存電路。

像素邏輯172可以整合從匯流排G-bus接收到的資訊，並基於影像資料判斷哪個波型輸出到像素陣列140。請參考例如PCT專利申PCT/US2021/012262，專利名稱為“Dynamic Pixel Modulation”的圖10到11，其整體內容作為本公開的一部份完全合併於此。

圖2繪示依據此述實施例繪示的顯示區域200，如在示例性的非限制性系統應用中所看到的，即AR頭戴式顯示器。（替代方案可以是用於車輛的HUD的顯示器。）在本發明的一實施例中，圖2繪示覆蓋到裝置使用者所看到的真實世界上的影像210，例如，AR頭戴式裝置。在圖2的例子中，因為觀看者幀在看到疊加了資訊的真實世界，故影像210大部分214是清晰的（沒有光從顯示器反射到眼睛），不需要更新。移動指標/符號212佔據一小塊正在移動的區域，並且需要對佩戴者在其環境中的外部運動做出響應。示出了帶狀區220，其在影像210中具有固定位置，並且其內容僅需要根據需求（根據所需的頻率）進行更新。例如，對於時脈（clock），所述的更新可以每秒一次的頻率發生，對於電池指標222則可能非常緩慢。在本發明的一實施例中，當用於顯示疊加在觀看者在現實世界中所看到的影像上的影像的變化時，根據本發明的系統100將是高效的，因為該系統將僅更新覆蓋影像的變化的部分，例如，圖2的移動指示箭頭。

圖3繪示稀疏影像300的例子，細分為固定大小區域302、303、305、307、308，這些區域被標記為主動304（包含非黑色影像資料）或非主動302。為了說明的目的，包含非黑色像素的區域的背景以白色呈現。佔用圖300如此標記主動區域，並且只有該些區域的資料才會儲存到快取153中、從快取153取回並加載到每個像素的記憶體174中。

如圖4所示，描述了依據本發明的顯示器系統100的操作方法400。在操作顯示器系統的方法的實施例中，該方法可以包括提供410顯示器系統100的步驟。在依據本發明的一實施例中，後續步驟420可以包括從影像或影片資料源120傳輸影像幀資料，其中，所述影像幀資料包含：影像200的至少一部分的更新影像資料104以取代當前顯示的影像200的影像資料的對應部分210。相關的指令106（例如，更新顯示器驅動訊續的更新面向的指令，例如時序參數）為區域提供描述符及/或描述該更新影像資料如何取代該影像資料。在被資料源102以前述方式渲染後，該方法可以包括在顯示器子系統120中接收影像幀資料的步驟430。影像幀資料可以由解析器124接收和解析，解析器124在步驟440中從影像幀資料中擷取更新影像資料104和相關的指令106，並將更新影像資料104儲存進儲存器或快取153中。儲存器或快取153的內容（例如，更新影像資料104）可以接著在步驟450依據相關的指令106被傳輸至加載器。加載器162可以接著460讀取相關指令106以從快取153辨認並取得更新影像資料104；以及接著470像素陣列140從加載器162接收更新影像資料104；以及在步驟480中僅針對更新影像資料中的像素更新像素驅動電路。

本文描述的標的可以在數位電子電路中或在電腦軟體、韌體及/或硬體中實現，包括本說明書中公開的結構手段及其等同結構，或其組合。本文描述的標的可以實現為硬體、一或多種電腦程式產品，例如有形地體現在資訊載體中（例如，機器可讀儲存裝置中）及/或實現在傳播的訊號（例如，電壓或電流波形）中的一或多個電腦程式，以由資料處理設備（例如，可程式化處理器、電腦或多台電腦）執行或控制資料處理設備（例如，可程式化處理器、電腦或多台電腦）的操作。電腦程式（亦稱為程式、軟體、應用軟體或碼（code））可以被寫為任何形式的程式語言，包含編譯或解釋語言，且其可以被使用在任何形式，包含單獨程式（stand-alone program）或模組、元件、子程式（subroutine）或其他適合用於電腦運算環境的單元。電腦程式不用一定對應到檔案。程式可以被儲存在保存其他程式或資料的檔案的一部份中、專用於該程式的單個文件中，也可以儲存在多個整合文件中（例如，儲存一個或多個模組、子程式或部分的碼的文件）。可以將電腦程式部署為在一個站點上的一台電腦或多台電腦上執行，或者分佈在多個站點上並透過通訊網路互連。

本說明書中描述的過程和邏輯流程，包括本文所述標的的方法步驟，可以由一個或多個可程式化處理器執行，該可程式化處理器執行一或多個電腦程式以透過操作輸入資料並產生輸出來執行本文所述標的的功能。該的過程和邏輯流程亦可以由特殊用途邏輯電路執行，且本本文所述標的的設備可以被實現為特殊用途邏輯電路執行，例如現場可程式邏輯閘陣列（field programmable gate array，FPGA）或特殊應用積體電路（application specific integrated circuit，ASIC）。

適合於執行電腦程式的處理器包括，例如，通用及特殊用途微處理器，以及任何類型的數位電腦中的任何一個或多個處理器。通常，處理器會從唯讀記憶體或隨機存取記憶體或兩者接收指示及資料。電腦的基本元件為用於執行指令的處理器及用於儲存指令及資料的一或多個記憶體裝置。通常，電腦亦會包含，或可運作地耦接以從用於儲存資料的一或多個大容量儲存裝置（例如，磁碟、磁光碟或光碟）接收資料或將資料傳輸到一個或多個大容量存儲裝置或執行這兩者。適用於實現電腦程式指令及資料的資訊載體包含所有形式的非揮發性記憶體，包含例如半導體記憶體裝置（例如，EPROM、EEPROM及快閃記憶體裝置）；磁盤（例如內部硬碟或可移磁碟）；磁光碟；以及和光碟（例如CD和DVD磁碟）。處理器及記憶體可以由特殊用途邏輯電路補充或併入特殊用途邏輯電路。

此述的標的可以被實現進運算系統中，該運算系統包含後端元件（back end component）（例如，資料伺服器）、中介軟體元件（例如，應用程式伺服器），或前端元件（front end component）（例如，具有圖形化使用者介面或網路瀏覽器且使用者可透過該網路瀏覽器與本文所述標的的實現進行互動的客戶端電腦行動裝置、穿戴式裝置），或所述的後端元件、中介軟體元件及前端元件的任何組合。該系統的元件可以透過數位資料通訊的任何形式或介質（例如，通訊網路）互連。通訊網路的示例包括區域網路（LAN）和廣域網路（WAN），例如網際網路。

雖然本發明以前述之實施例揭露如上，然其並非用以限定本發明。在不脫離本發明之精神和範圍內，所為之更動與潤飾，均屬本發明之專利保護範圍。關於本發明所界定之保護範圍請參考所附之申請專利範圍。

100:顯示器系統 102:資料源/主機 104:影片資料 105:處理器 106:指令 107:記憶體裝置 107a:軟體模組 108:多工器 110:傳輸協定/傳輸通道/資料串流 120:基板/顯示器子系統/顯示器背板 122:顯示器驅動邏輯 124:解析器 130:顯示器背板邏輯或IC 140:像素陣列/對準層 140a、140b:像素 152:描述符 153:快取或儲存裝置 155:區塊描述符 162:加載器 164:區塊地址 166:驅動電路 170:像素電路 172:像素驅動邏輯 174:像素電路/記憶體 176:像素驅動電路 180:微型LED顯示器系統 182:基板 184:像素LED元件 186:背板積體電路（IC） 190:LCoS顯示器系統 193:液晶層 196:層 197:玻璃或其他透明材料層/顯示器 198:對準層 199:透明電極 200:顯示區域 210:影像 212:指標/符號 214:部分 220:帶狀區 300:陣列器/佔用圖/稀疏影像 301:行 303:列/資料/區域 302、304:區域 305:資料/區域 308:區塊/資料/區域 400:方法

圖1係依據本發明的系統及其組件的示例性實施例的方塊圖。圖2係依據本發明的實施例的示例性顯示影像的圖示。圖3係依據本發明的實施例的影像分為主動區域及非主動區域的圖示。圖4依據本發明繪示一方法。

100:顯示器系統

102:資料源/主機

104:影片資料

105:處理器

106:指令

107:記憶體裝置

107a:軟體模組

108:多工器

110:傳輸協定/傳輸通道/資料串流

120:基板/顯示器子系統/顯示器背板

122:顯示器驅動邏輯

124:解析器

130:顯示器背板邏輯或IC

140:像素陣列/對準層

140a、140b:像素

152:描述符

153:快取或儲存裝置

155:區塊描述符

162:加載器

164:區塊地址

166:驅動電路

170:像素電路

172:像素驅動邏輯

174:像素電路/記憶體

176:像素驅動電路

Claims

一種顯示器系統，用於更新顯示在一顯示器裝置上的一顯示影像，該顯示器裝置包含在一像素陣列中的多個像素，該系統包含：一解析器，用於接收一影像幀資料，其中該解析器擷取一更新影像資料及多個指令，該些指令包含辨認用於更新的該顯示影像的一部份的指令；一映像，由一資料集構成，其中該資料集包含用於更新的該顯示影像的多個主動區域的多個座標及多個區塊位置的至少其中一者；一儲存裝置，用於基於該些指令及該映像的至少其中一者儲存該更新影像資料；一加載器，用於讀取該些指令，且其中該加載器辨認該更新影像資料，並依據該映像從該儲存裝置取得該更新影像資料；以及一顯示器背板電路，用於從該加載器接收該更新影像資料，及用於更新一像素驅動電路，該像素驅動電路以該更新影像資料更新該些像素。
如請求項1所述的系統，其中該些指令包含一描述符，該描述符辨認該更新影像資料顯示的影像對應的部分的區塊位置。
如請求項2所述的系統，其中該解析器發送該些指令的至少其中一者至該儲存裝置及/或該加載器。
如請求項2或3所述的系統，其中該更新影像資料對應於該儲存裝置的一更新儲存位置，且該加載器讀取該描述符並從該更新儲存位置取得該更新影像資料。
如請求項4所述的系統，其中該加載器辨認該像素陣列中對應該描述符中的該更新儲存位置的像素列及/或像素行。
如請求項5所述的系統，其中該加載器排列該描述符的讀取直到該加載器從該儲存裝置取得資料。
如請求項6所述的系統，其中該加載器排列該描述符的讀取，以預定的時間間隔發生。
如請求項7所述的系統，更包含一影像源，且其中該影像源辨認待更新的該顯示影像的該區塊位置，並僅針對該區塊位置渲染該更新影像資料。
如請求項8所述的系統，其中該影像源為一影片資料源，且其中該更新影像資料係儲存在一記憶體及一緩衝器的至少其中一者。
如請求項9所述的系統，其中該記憶體及該緩衝器的至少其中一者為一緩衝器，且儲存於該緩衝器的該更新影像資料被傳輸至該顯示器系統，並且其中該顯示器系統包含一驅動顯示邏輯，用於從該更新影像資料計算該顯示影像的多個主動區域的一佔用圖。
如請求項10所述的系統，其中該顯示影像的該些主動區域包含該顯示影像的該些像素、該些像素的多個列及該些像素的多個部分的至少其中一者的多個矩形磚。
如請求項11所述的系統，其中該佔用圖判斷該些主動區域係透過分析該顯示影像的該些主動區域中是否存在任何非黑像素。
如請求項12所述的系統，其中僅有非黑的該更新影像資料被寫入該儲存裝置。
如請求項13所述的系統，其中僅有對應於該顯示影像的該些主動區域的該更新影像資料被從該儲存裝置取回。
如請求項14所述的系統，其中該像素陣列中的各像素包含：多個像素元件，耦接至一像素邏輯電路；以及一像素記憶體，耦接至該像素邏輯電路。
如請求項15所述的系統，其中該些像素記憶體儲存該些像素的一電流灰階值。
如請求項16所述的系統，其中每一該些像素更包含一像素驅動電路。
如請求項17所述的系統，其中該像素邏輯電路解碼該電流灰階值及調變該像素驅動電路並產生一像素強度及一亮度的至少其中一者。
如請求項18所述的系統，其中該些像素記憶體包含一鎖存電路，以為該些像素儲存由多個位元呈現的影像資料。
如請求項19所述的系統，其中該影像源執行渲染該影像幀資料及傳輸該影像幀資料的至少其中一者，該影像幀資料包含：一影像的至少一部份的另一更新影像資料，以取代一當前顯示影像的一影像資料的所對應的一部份；以及多個相關指令，描述該另一更新影像資料如何取代該影像資料。
如請求項20所述的系統，其中該儲存裝置係一快取記憶體。
一種影像更新方法，適用於更新顯示於一顯示器裝置上的一顯示影像，該顯示器裝置包含一像素陣列中的多個像素，該方法包含：在一顯示器子系統中接收一影像幀資料；在一解析器中接收該影像幀資料；從該影像幀資料擷取一更新影像資料及多個相關指令，該影像幀資料包含多個指令，用於指示一加載器如何更新該顯示影像；依據該些相關指令將該更新影像資料儲存進一更新快取位置；讀取該些相關指令以從該更新快取位置辨認並取得該更新影像資料；從該加載器接收該更新影像資料；以及僅針對該更新影像資料中的像素更新一像素驅動電路。