TW200935350A

TW200935350A - System and method for using a secondary processor in a graphics system

Info

Publication number: TW200935350A
Application number: TW097146520A
Authority: TW
Inventors: Michael D Street
Original assignee: Qualcomm Inc
Priority date: 2007-11-30
Filing date: 2008-11-28
Publication date: 2009-08-16
Also published as: US20090141033A1; JP5032670B2; KR20100089896A; CN101911111A; JP2011505633A; KR20120125395A; EP2068279A1; WO2009073516A1; EP2068279B1; KR101386180B1; CN101911111B; US8922565B2

Description

200935350 九、發明說明：【發明所屬之技術領域】本發明係關於繪圖處理系統中之並行處理，且更特定言之係關於結合諸如中央處理單元及繪圖處理單元之其他處理單元同步第二處理器的使用以並行執行繪圖處理，包括由此第二處理器處理之資料之重新整合至繪圖處理管線中。【先前技術】 φ 繪圖處理單元（GPU)係用以產生用於在顯示器件上顯示之電腦化繪圖的專用繪圖再現器件。GPU通常與通用中央處理單元（CPU)—起使用以處理繪圖影像資料，例如，三維電腦化繪圖影像資料。在此狀況下，GPU可實施多個基元繪圖操作以相比使用CPU繪製用於在顯示器件上顯示之影像更快地建立用於在顯示器件上顯示之三維影像。通常，GPU包括在硬體中實施某數目之複雜演算法之硬體。典型GPU接收影像幾何圖形且使用管線方法來產生可經 ® 輸出（例如）用於在顯示器件上顯示之繪圖。典型繪圖管線包括並行操作之多個級，來自一個級之輸出可能用於管線中的另一級處。舉例而言，典型繪圖管線包含頂點著色器 (vertex shader)、基元總成、視埠變換、基元設立，光栅化、隱藏基元及像素拒絕、屬性設立、屬性内插法及片斷著色器級。頂點者色器應用於影像之影像幾何圖形且產生影像幾何圖形内之頂點座標及頂點之屬性。頂點屬性包括（例如）與 136489.doc 200935350 頂點相關聯之色彩、法線及紋理座標。基元總成基於影像幾何圖形自頂點形成基元，例如，點、線及三角基元。可使用變換（例如，將基元自正規化器件空間變換至螢幕空間之視埠變換）將所形成之基元自一空間變換至另一空間。基7〇设立可用以判定基元之面積、邊緣係數且執行遮擋剔除法(〇Cclusion culling)(例如，背面剔除法），及3七剖切操作。光柵化基於基元内之頂點之χγ座標及包括於基元中的

像素之數目將基元轉換為像素。隱藏基元及像素拒絕使用基凡及/或像素之Ζ座標來判定及拒絕經判定為隱藏之彼等基元及像素（例h，位於影像圖+匡中之另一基元或像素後之基元或像素、a明基元或像素）。屬性設立判定屬性梯度，例如，對於與基元内之像素相關聯之屬性，在水平 m方向或垂直⑺方向上移動之基元内第一像素處之屬性值與第二像素處之屬性值之間的差。屬㈣插法基於所判定之屬性梯度值在基元内之像素上内插屬性。所内插之屬性值經發駐片斷著μ用於料再現。精著色器之社果可經輸出至後（理區塊及圖框緩衝器用於經處理之影：在顯示器件上之呈現。促進綠圖管線處理以達成增加之輪送量為有益的。已努 =藉=最佳化實施緣圖管線之—部分的軟體來增加輸送、、:而’此方法為高成本的’因為其通常需要大量間來產生最佳化㈣碼。可使料用硬體i 輸送量。然…方法涉及專用硬體之額外成 136489.doc 200935350 本’該專用硬體僅可用於專用目的。【發明内容】之Π=ΓΓ技術…點及提供纷圖影像處理處理：補=單元來執行输®處理管線中的" 爽理以補充由其他處理嚴^ w-W 繪圖處理單元及/或中、地理單兀）執行之處理，相依性及將由第二處理單元產生=處理相關聯之資料 Λ 產生之輸出整合於緣圖處理管線中以滿足此資料相依性。方法及裝置，其中處理單元經組態以對繪圖吕線外之綠圖管線資料執行第二處理，來自第二處理之輸出整合於繪圖管線中使得其對綠圖管線可用。進行是 =使用第二處理之判定’且在待使用第二處理之狀況下， .了包含-或多個命令的命令流提供至第二處理單元，使得單元可定位且對經緩衝之緣圖管線資料操作。管理及監 φ 視第二處理以同步由第二處理及_管線争之一或多個處理模組進行之資料存取。根據本發明之實施例，識別使用第二處理單元理器與繪圖處理管線 β弟一處 …線之機會，且使繪圖管線資料對第二處 :早兀可用。由第二處理單元產生之繚圖管線資料經重新整合於緣圖管線中。藉助於非限制性實例，第二處理器為數位信號處理器’其經組態為照明模組以由對來自緣圖管線之數位信號處理器可用之色彩資料產生發光色彩。如此-來，本發明之實施例提供使用可用第二處理器平衡處理負載之能力。可以其他方式保持間置之第二處理器 J36489.doc 200935350 可用以促進由繪圖處理單元中央處if罝_ + # 仃之繪圖管線處理及/或由士 Ϊ理厂或其他處理單元執行的處理。由此，舉例而二處理式4待處理資源之操作可經指引至可用第處更快輸送量。有利地，已判定使用第二处理盗相比未使用第-邊例如，L 之處理存在輸送量之增加，如按每秒圖框來量測。另卜，用自坌_ + 卜本發明之實施例可使 ❹ ❹ 饋可之資訊來執行負載平衡。舉例而言，反當判定第i:何時第二處理器已達到特定臨限處理級別。

田ϋ第二處理器達到臨限處理容量時，處理可經指引至處理單元，諸如中央處理單元Q 本發明之實施例提供利用處理單元用於不同於其 =理目的之能力以執行_或多個其他第二功能（若此 ΐ軍元可用）。可以其他方式閒置之此硬體（例如，處理羊凡）之使用產生硬體之更有效率之使用。判…Γ本Γ明之一態樣’一種方法包含：回應於緣製請求疋理早7L是否可用以輔助綠圖管線處s，處理單元具理^處理功能；請求第二處理器之分配以執行不同於處理._之帛處理功能之第二處理功能以輔助搶圖管線處及在刀配5月求成功之狀況下：使緣圖管線資料對處理可用，監視藉由處理單元之處理之狀態；及將由處理早疋輪出之資料整合於繪圖管線資料中。據本發明之另-態樣，提供儲存程式碼之電腦可讀記隐體媒體’該程式碼包含用於以下之程式碼：判定處理單 _是否可用以辅助緣圖管線處理’處理草元具有第一處理 136489.doc 200935350 功能，凊求第二處理器之分配以執行不同於處理單元之處理功旎的第二處理功能以輔助繪圖管線處理；及在八配請求成功之狀況下：使繪圖管線資料對處理單元可用刀 $視藉由處理單元之處理之狀態；及將由處理單元輪出之 >料整合於％圖管線資料中。 _根據本發明之另-態樣’ -種裝置包含：-繪圖處理單疋’其經組態以實施繪圖管線；及一第二處理管理器，盆耦接至緣圖處理單几，第二處理管理器經組態以 ^該第二處理管理器之處理單元是否可用以輔助』線處理，該處理單元且古楚处里早兀具有第一處理功能；請求該第二處理 .之分配以執行不同於該處理單元之第一處理功能之第二處理功能以辅助緣圖管線處理；及在分配請求成功之狀: 二；：處理管理器進一步經組態以：使綠圖管線資料對早凡可肖，監視藉由該處理單元之處理之狀態；及將由處理單元輸出之資料整合於繪圖管線資料中。…

G 根據本發明之又-態樣’ -種裝置包含：-緣圖處理單 2 ’其經組態以實施繪圖管線；及一第二處理管理構件， ^接至_處理單元’第二處理管理構件包含：用定耦接至該第二處理管理器之處 ' 圖其“ 自之處理早疋疋否可用以輔助繪心：處理的構件，該處理單元具有第一處理功能;用於吻、^帛―處⑨器之分配以執行不同於該處自單元之第一處理功成之第二處理功能以輔助_圖管線處理的構件 :配請求成功之狀況下，該第二處理管理構件進一步包含.用於使纷圖管線資料對該處理單元可用的構件；用於 136489.doc 200935350 ^視藉由該處理單元之處理之狀態的構件；及用於將由處理單元輸出之資料整合於繪圖管線資料中的構件。已提供此簡要概述，使得可快速理解本發明之本質。可藉由參考以下結合附加圖式對本發明之較佳實施例之詳細描述而獲得本發明的更完全理解。【實施方式】參考結合隨附圖式進行之以下描述，以上提及之本發明之特徵及目標將變得更顯而易見，其"目似參考數字表示 ❹ 相似元件。現將參看前述圖式論述本發明之特定實施例，其中相似參考數字指代相似組件。根據一或多個實施例，揭示一種系統，方法及裝置，其中第一處理器單元經組態以對繪圖管線資料操作，來自第二處理n之輸出經整合讀时線巾使得使輸出對在繪圖管線中執行之一或多個模組可用。根據此等實施例，進行 Μ使用第二處理器之判定’且在待使用第二處理器之狀兄下，將命令流提供至第二處理器。舉例而言，命令流可包含一或多对♦。經提供至第二處㈣之每一命令含有識別當前命令之資訊。在存在另一命令之狀況下，當前命令含有識別下一命令之資訊。在當前命令為最後命令之狀况下’當則命令含有將當前命令識別為最後命令之資訊。命令流將資訊提供至第二處理器，該資訊可包括（但不限於）輸入及/或輸出資料儲存位置，及反饋儲存位置。根據一或多個實施例，第二處理器為數位信號處理器 136489.doc •10· 200935350 (DSP)，其可組態以執行第一第處理，例如，處理音訊及/或視訊資料，且其可經組離 _ 一〜、執订第一處理。根據一或多個此等實施例，DSP經共用俏媒让使传其可用以執行音訊及/或視訊資料處理，且當可用時可輔助繪圖管線處理，例如，非處理音訊/視訊資料。僅出於簡單之目的，參考如DSP之第二處理器來描述本文中所揭示之實施例。應顯而易見，任何處理器或處理單元可與本發明之實施例—起使用。

Ο 圖1為說明用於根據本發明之一或多個實施例使用之例示性計算器件1G0的方塊圖。例示性計算器件丨⑼可包含個人電腦、桌上型電腦、膝上型電腦、工作台、視訊遊戲平台或控制台、蜂巢式或衛星無線電電話、陸上通信線電話、網際網路電話、諸如攜帶型視訊遊戲器件或個人數位助理之掌上型器件、個人音樂播放器、词服器、中間網路器件、主機電細’或輸出缯·圖資訊之另一類型之器件。在圖1之實例中’計算器件1 〇〇包括中央處理單元（Cpu) 102、GPU 104、DSP 108，作為第二處理器之實例，顯示單元124 ’及記憶體模組116，例如’ 一或多個隨機存取記憶體（RAM)記憶體模組。計算器件1〇〇之組件（例如，cpu 102、GPU 104、DSP 108及記憶體模組116)可使用可包含任何類型之匯流排的匯流排106或現在已知或稍後發現之器件互連來通信。CPU 102可包含通用或專用微處理器。舉例而言，CPU 102可包含由具有位於世界各處之辦公至’包括 Irvine，CA ’ 且母公司為 Cambridge，UK之 ARlv!

Holdings PLC之ARM Inc·設計的精簡指令集電腦（pjsc)處 136489.doc 200935350 理器。藉助於另一非限制性實例，CPU 1〇2可包含由Sa吻 Clara，Calif0rniaiIntel c〇rp〇rati〇n提供之c〇re 2處理器或另-類型的微處理器。GPU 104為專用綠圖計算器件。舉例而言，GPU 1〇4可為由Sunnyvaie，CA之AMD提供之 Imageon媒體共處理器或另一類型之繪圖處理單元。舉例而言，GPU 104可經整合於計算器件1〇〇之主機板中，可存在於安裝於計算器件100之主機板中的琿中之繪圖卡上，或可另外經組態以與計算器件1〇〇互操作。舉例而言，耦接至計算器件1〇〇之顯示單元124可包含監視器、電視、投影器件、液晶顯示器、電漿顯示面板發光二極體（LED)陣列、陰極射線管顯示器、電子紙、表面導電電子發射顯示器（SED)、雷射電視顯示器、奈米晶體顯示器，或另一類型之顯示單元。在圖丨之實例中，顯示單元124可為計算器件100之一部分。舉例而言顯示單元 124可為行動電話之榮幕。或者，舉例而言，顯示單元124 可在電腦器件100外部且可經由有線或無線通信連接或其他連接與計算器件100通信。藉助於非限制性實例，顯示單元124可為經由有線或無線連接而連接至個人電腦之電腦監視器或平板顯示器。藉助於非限制性實例，軟體應用程式丨1〇可包含能夠經由CPU 102執行之任何軟體應用程式，諸如視訊遊戲、緣圖使用者介面引擎、電腦輔助工程設計程式或藝術應用程式，或使用二維（2D)或三維（3D)繪圖之另一類型之軟體應用程式。藉助於非限制性實例，當CPU 1〇2執行軟體應用 I36489.doc 200935350 程式110時’軟體應用程式110可調用繪圖處理應用程式設計介面（API) 112之次常式，諸如OpenVG API、OpenGL API、Direct3D API、繪圖器件介面（GDI)、Quartz、 QuickDraw中之任何一或多者或另一類型之2D或3D繪圖處理 API。根據至少一實施例’當軟體應用程式1丨〇調用繪圖處理 API 112之次常式時’繪圖處理API 112調用gpu驅動程式 114之一或多個次常式，其經由計算器件ι〇〇上之cpu 102 Ο 執行。舉例而言，GPU驅動程式114可包含提供繪圖處理 API 112與GPU 104之間的介面之軟體及/或韌體指令的集合。當繪圖處理API 112調用GPU驅動程式114之次常式時，GPU驅動程式114公式化且發出使GPu 1〇4產生可顯示繪圖資訊之命令。舉例而言，當繪圖處理API 1丨2調用 GPU驅動程式114之次常式以繪製，或再現一批繪圖基元時，GPU驅動程式114對GPU 104提供Gpu 1〇4用以再現該批繪圖基元之處理組態。舉例而言，Gpu i 〇4再現該批繪 ® 圖基元’且輸出繪圖基元之光栅影像。由GPU驅動程式114公式化之命令可識別Gpu 1〇4待使用以執行命令之繪圖處理組態，該（等）組態可識別待由Gpu 1〇4執行之指令之集合、狀態暫存器值之集合，及ϋρυ 1〇4 執行命令可能需要的其他類型之資訊。在GpU驅動程式114將繪圖處理組態儲存於記憶體〗16中之狀況下，GPU驅動程式114可參考記憶體模組116中對應於由GPU驅動程式114公式化之命令中的繪圖處理組態之 136489.doc -13- 200935350 儲存位置。當GPU 104接收命令時，GPU 104可自記憶體 116擷取自GPU驅動程式114接收之命令中所參考的繪圖處理組態。根據至少一實施例，GPU 104之命令解碼器（未圖示）解碼來自GPU驅動程式114之命令且組態GPU 104的處理元件中之一或多者以使用自記憶體116擷取之資料（例如，位置、色彩 '紋理等）執行命令。根據一或多個實施例，GPU 104之處理元件或模組實施〇繪圖管線。根據此等實施例，GPU 104之處理元件可以並行模式實施繪圖管線，使得處理元件對資料並行操作，來自一處理元件之輸出用作對另一處理元件之輸入。藉助於非限制性實例，第一處理元件對初始輸入資料之第一集合執行第一繪圖操作且將中間結果之第一集合輸出至第二處理元件《舉例而言，初始輸入資料可包含對應於一或多個頂點之資料，該資料可包含座標及屬性資料。頂點座標基 ❹ 例如）具有X、丫及2(寬度、高度及深度）座標之四維座標系統識別影像内之位置，且w座標形成齊次座標 (h〇m〇genous coordinate)。舉例而言，頂點屬性可包括與頂點相關聯之色彩、法線及紋理座標。第二處理元件可對由第一處理元件輸出之中間結果之第一集合執行另一繪圖操作，且將中間結果的第二集合輸出至第三處理元件等。當第二處理元件執行第二繪圖操作時，第一處理元件可對初始輸入資料之第二集合執行第一繪圖操作。 GPU 1〇4及其處理元件可以此方式繼續’直至最後處理 136489.doc -14- 200935350 疋件對記憶體模組116中之一或多個緩衝器輸出像素物件，或對某其他目的地輸出此新像素物件為止。像素物件為描述像素之資料。每一像素物件可指定多個色彩值，且可指定像素之透明度級別。在一些情形下’像素物件可以第一色彩格式指定第一色彩且以第二色彩格式指定第二色彩。根據本發明之一或多個實施例，Gpu 1〇4之處理模組可包括由GPU 104執行之軟體 '專用硬體模組及/或經組態以 0 執行GPU 1G4之處理模組中之—或多者的可程式化處理模組。舉例而言，GPU 1〇4之處理模組實施繪圖管線，其可包含頂點著色器、基元總成、視埠變換、基元設立、光柵化、隱藏基元及像素拒絕、屬性設立、屬性内插法及片斷著色器級。本發明之實施例可對DSP 108或其他第二處理器指派第二用途以操作使用於繪圖管線中之資料。根據一或多個實 ❹ j例’第二用途不同於第二處理器之第一用途。舉例而言，DSP 1〇8可用以處理音訊及視訊資料，且可進一步用以實施對繪圖管線資料操作之一或多個照明模組。如此一來，第二處理器可補充另外用以實施繪圖管線之資源。根據本發明之實施例，當判定第二處理器未用於其第一目的時’使用第二處理器。舉例而言，在判定Dsp 1〇8為間置，亦即，未處理音訊或視訊資料之狀況下，進行請求以結合繪圖管線分配DSP 1〇8用作第二處理器。在此狀況下，DSP 108可用以對繪圖管線資料執行某形式之第二處 136489.doc -15- 200935350 理（例如，照明）或其他處理（例如，修飾）等圖2說明包含根據本發明之一或多個實施例使用之組件及組件間通信的方塊圖。第二處理管理模組（SPMM)或第二處理管理器202結合一或多個第二處理介面模組（SPIM) 管理第二處理。根據一或多個實施例，SPMM及SPIM模組為獨立模組。或者，SPMM及SPIM模組中之一或多者經組合以形成單一模組。作為又一替代，SPMM及SPIM模組中之一或多者可與其他程式碼整合。藉助於非限制性實例’ ❹ SPIM可與執行第二處理之程式碼整合，及/或SPIM可與執行繪圖管線之模組的程式碼整合。SPMM 202判定是否可能使用第二處理器，對第二處理器提供包含一或多個命令之命令流，及同步藉由第二處理及一或多個繪圖管線處理模組之資料存取，由第二處理器操作之繪圖管線資料係整合於由繪圖管線處理之資料中。在圖2中所示之實例中，DSP 108用作第二處理器。應顯而易見，根據本發明之一或多個實施例’任何處理單元可

A ¥ 用作第二處理器。當應用程式110發出繪製呼叫時，SPMM 202接收通知220。SPMM 202分析由應用程式110提供之繪製呼叫，及相關聯之資訊，以判定繪製呼叫的處理是否包括可由第二處理器執行之處理。舉例而言’ SPMM 202判定繪製呼叫之處理是否涉及一或多個照明模型對色彩資料之應用。藉助於另一非限制性實例，SPMM 202可檢驗繪製呼叫以判定是否應用修飾。在SPMM 202判定處理可由第二處理器執行之狀況下， 136489.doc -16- 200935350 SPMM 202試圖分配第二處理器用於第二處理。舉例而言，SPMM 202與DSP 108之即時作業系統（RTOS) 206通信 222以請求DSP 108 »通信222包括由RTOS 206使用之回呼以通知SPMM 202 DSP 1 08是否可用，例如，SPMM 202之分配請求是否成功。若RTOS 206判定DSP 108可用，例如，不用於其第一目的，則RTOS 206載入DSP模組208 ’ 其包含第二處理模組208B及第二處理介面模組（SPIM) 208A。 φ 第二處理模組208B包含用以執行第二處理之程式碼。 SPIM 208A包含經組態以與SPMM 202介面連接之程式碼，諸如經由通信路徑228提供反饋至記憶體模組116中之反饋記憶體區域216A。SPMM 202經由通信路徑226提供資訊至SPIM 208A，該資訊識別反饋區域216A、輸入資料及輸出資料之儲存位置，例如，資料緩衝器216C中之位置。另外，SPIM 208A提供資訊至處理模組208B，該資訊可由處理模組208B使用以執行第二處理，例如，照明。〇根據一或多個實施例，SPMM 202使用通信路徑226以提供由處理模組208B使用之與被稱作命令之流或命令流之命令集合相關聯的資訊。根據一或多個此等實施例，SPMM 202傳達初始訊息至SPIM 208A，該訊息包含對儲存於記憶體模組116之命令流區域216B中的命令流之第一命令之指標，及對記憶體模組116中之反饋區域216A之指標。簡要地，命令流中之命令包括識別輸入及輸出資料在資料缓衝器21 6C中之位置、反饋216A的位置、對流中之下一命令 136489.doc 200935350 的指標或當前命令為最後命令之指示的資訊，及其他資訊，諸如在DSP模組208執行照明的狀況下使用之照明模型。下文更詳細地描述命令之内容。 SPMM 202經由通信路徑224將每一命令載入至命令流 2 16B中且經由通信路徑226將對命令流21 6B中之第一命令的指標轉發至SPIM 208A且將由SPMM 202發送的初始訊息轉發至SPIM 208A。此後，SPIM 208A使用第一，或當前命令中含有之資訊來定位命令流216B中之下一命令，或 0 將第一/當前命令識別為最後命令。SPIM 208A可基於命令流中之給定命令中含有之資訊及由SPMM 202經由通信路徑226提供的初始資訊存取反饋216A、命令流216B及/或資料緩衝器216C。舉例而言，包括SPIM 208A及處理模組 208B之DSP模組208可經由通信路徑228存取記憶體116之一或多個區域。資料緩衝器216C中所含有之資料由處理模組208B及繪圖管線處理模組218兩者使用。在模組208B與模組218中之 W 至少一者之間存在至少一資料相依性之狀況下，SPMM 202基於儲存於反饋216A中由SPIM 208A提供的資訊及由結合繪圖管線處理模組218操作之SPIM 214提供之資訊同步藉由模組208B及218之資料存取。舉例而言，SPMM 202 可使用反饋216A中之資訊以通知SPIM 214發光色彩資料可用於藉由一或多個繪圖管線處理模組218之處理。藉助於另一非限制性實例，一旦SPMM 202判定對應於由剖切模組所需要之所有基元的色彩資料已由處理模組208B處理， 136489.doc -18- 200935350 則可使發光色彩資料對繪圖管線處理模組218的剖切模組可用。SPMM 202及SPIM 214可經由通信通路232通信，例如，SPIM 214通知SPMM 202繪圖管線處理模組218中之一或多者準備好處理資料，及/或SPMM 202通知SPIM 214資料可用以由繪圖管線處理模組218處理。另外，SPMM 202可使用反饋區域216A中之資訊以判定命令流216B中之區域何時可藉由命令流中之新命令覆寫。藉助於非限制性實例，反饋216A包含識別由第二處理模組 φ 208B完成之最新命令之資訊。在第二處理模組208B不再存取命令流216B中之命令，且SPMM 202判定不再需要命令之狀況下，SPMM 202可選擇使用該區域用於命令流中的新命令。SPMM 202可能判定在繪圖管線已完成處理對應於命令之繪圖管線資料之狀況下不再需要命令。

根據一或多個實施例，SPMM 202、SPIM 208A及SPIM 214包含由一或多個處理單元或處理器執行之程式碼。此等處理單元可包括（但不限於）CPU 103、DSP 108及GPU w 104。藉助於非限制性實例，SPMM 202及SPIM 214包含由 CPU 103執行之程式碼，且SPIM 208A包含由DSP 108執行之程式碼。藉助於另一非限制性實例，SPMM 202之程式碼由CPU 103執行，SPIM 214包含由GPU 104執行之程式碼且SPIM 208A包含由DSP 108執行之程式碼。然而，應顯而易見，任何一或多個處理單元可用以實施SPMM 202、SPIM 208A及SPIM 214之程式碼。藉助於另一非限制性實例，匯流排106可用以促進SPMM 202、RTOS 136489.doc -19- 200935350 206、包含SPIM 208A及處理模組208B之DSP模組208、記憶體模組116、SPIM 214與繪圖管線處理模組21 8之間的通信路徑220、222、224、226、228、23 0 及 232及/或通信。舉例而言，通信路徑230可由繪圖管線處理模組218中之一或多者使用以存取儲存於資料緩衝器216C中之繪圖管線資料。包含圖3A及圖3B之圖3說明實施根據本發明之一或多個實施例的SPMM 202之程式碼處理流程。在步驟302處，〇 SPMM 202接收繪製呼叫，例如，由應用程式110對繪圖 API 112進行之呼叫。在步驟304處，SPMM 202檢驗繪製呼叫以識別使用第二處理之機會。舉例而言，SPMM 202 可檢驗繪製呼叫以識別應用程式11 0是否請求一或多個照明模型應用於色彩資料。若SPMM 202在步驟306處自繪製呼叫之檢驗結果判定不存在第二處理機會，則處理在步驟 3 12處繼續以通知繪圖管線（例如，SPIM 214)不存在第二處理。舉例而言，此通知消除SPIM 2 14協調藉由繪圖管線 ® 處理模組21 8對儲存於資料緩衝器216C中之資料之存取的需要。若SPMM 202在步驟306處判定存在使用第二處理之機會，則處理在步驟308處繼續，其中SPMM 202請求第二處理器。舉例而言，SPMM 202發送請求至DSP 108之RTOS 206以載入DSP模組208 ’且提供用於rt〇s 206之回呼以通知SPMM 202 SPMM 202之請求成功或失敗。若在步驟310 處判定RTOS 206通知SPMM 202請求失敗，則處理在步驟 136489.doc •20- 200935350 3 12處繼續以通知繪圖管線不存在第二處理。在此狀況下且根據一或多個實施例，SPMM 202可通知CPU 102執行照明。若RTOS 206通知SPMM 202第二處理器之請求成功，貝ij 處理在圖3B之步驟332處繼續。在步驟322處，SPMM 202 準備命令流中之第一命令且將第一命令儲存於命令流21 6B 中。根據一或多個實施例，SPMM 202使用鏈接清單方法以將命令流傳達至第二處理器。藉助於非限制性實例，每 φ 一命令含有對下一命令之指標。藉助於另一非限制性實例，命令可含有對命令流中之任何命令之指標，諸如對命令流中之前一命令之指標。在當前命令為最後命令之狀況下，對下一命令之指標含有一值，例如，OxFFFFFFFF之十六進位值，其將當前命令識別為最後命令。根據一或多個實施例，SPMM 202在其將命令儲存於命令流216B中時可能未知是否存在額外命令。在此狀況下， SPMM 202將零值儲存為對鏈接清單中之下一命令的指標 ® 以通知SPIM 208A可能存在額外命令。在模組208B完成與當前命令相關聯之處理之狀況下，SPIM 208A考慮完成不久之命令中之指標以定位命令流216B中之下一命令（若存在）。若指標經設定為零值，則SPIM 208A已知SPMM 202 未更新指標。在此狀況下，SPIM 208A可在檢查指標前等待一時間週期以明瞭SPMM 202是否已更新指標。若指標具有非零值，則SPIM 208A檢驗該值以判定其指向命令流 21 6B中之下一命令，或指示所完成之命令為命令流中之最 136489.doc -21 · 200935350 後命令。在後者狀況下，SPMM 202可在指標中儲存一值 (例如，OxFFFFFFFF之十六進位值）以通知SPIM 208A在當前命令流中不存在待處理之更多命令，且DSP 108可用以執行其第一或其他處理。在步驟324處，SPMM 202將含有對應於第一命令之資訊的初始訊息發送至第二處理器。由SPMM 202發送至SPIM 208A之訊息具有對應於第一命令之資訊。由SPMM 202發送之訊息通知第二處理器其可開始處理，且提供資訊以定 ❹ 位第一命令。根據本發明之一或多個實施例，且參看圖 7，初始訊息700包含對命令流記憶體2 16B中之命令的指標 702、識別命令流記憶體21 6B中之命令的儲存區域之大小的資訊704，及對記憶體模組216之反饋21 6A儲存區域的指標706。再次參看圖3B，在SPMM 202在步驟324處發送通知命令流中之第一命令之第二處理器的訊息之後，SPMM 202處理在步驟326處繼續以判定命令流中是否存在額外命令0 © 若SPMM 202在步驟326處判定存在待產生用於當前繪製呼叫之至少一額外命令，則處理在步驟328處繼續。在步驟328處，SPMM 202準備新命令且在命令流216B中儲存新命令。在步驟330處，SPMM 202設定命令流216B中之前不久命令（例如，第一命令）中之指標以指向命令流21 6B中的新命令，例如，指向命令流21 6B中新命令待儲存之位置。如同第一命令，新命令及任何隨後命令含有指向下一命令 (若下一命令由SPMM 202產生）之指標，或新命令為最後命 136489.doc -22- 200935350 令（若不存在下一命令）之指示符。根據一或多個實施例，在初始訊息經發送至第二處理器之後，SPMM 202及第二處理器之處理模組（例如，DSP模組208)經由命令流216B及反饋2 16 A通信。如此一來，耗用可經最小化，因為兩個處理模組之間不存在發送訊息之需要。DSP模組208導航命令流216B中之命令之鏈接清單以處理資料，且藉由將狀態資訊寫入至記憶體模組216的反饋216A而將反饋提供至 SPMM。根據一或多個實施例，DSP模組208相對於SPMM φ 202及繪圖管線處理模組218非同步且獨立地操作。一旦SPMM 202更新先前命令中之指標以指向新命令，則處理在步驟326處繼續以判定任何額外命令是否保持待產生。若任何額外命令未保持待產生，則處理在步驟332 處繼續以將最後命令中所含有之指標更新為一值（例如， OxFFFFFFFF之十六進位值）以通知SPIM 208A該命令為當前命令流216B中之最後命令，且處理對於當前繪製呼叫結束。若存在額外繪製呼叫，處理在步驟332處繼續以結合 © 另一繪製呼叫準備命令流。 SPIM 208A提供SPMM 202與處理模組208B之間的介面。根據一或多個實施例，SPIM 208八接收對應於由8?11^[ 202產生之命令流的資訊，促進由處理模組208B執行的處理，監視處理模組208B之處理狀態，且提供關於處理模組 208B之處理之反饋。圖4說明實施根據本發明之一或多個實施例之SPIM 208A的程式碼處理流程。在步驟402處，SPIM 208A接收來自SPIM 202之初始化 136489.doc -23 · 200935350 訊息。藉助於非限制性實例，SPIM 208八接收初始化訊息 700，其包括對命令流216β中對應於第一命令之位置的指標、識別第一命令之大小（例如，以位元組為單位）之資訊 704，及對反饋216A區域中之位置的指標7〇6。在步驟4〇4 處，SPIM 208A使用訊息700中之資訊來定位命令流216B 中之第一命令，及識別當前命令是否為最後命令。在步驟406處，SPIM 208A使當前命令中所含有之資訊對處理模組208B可用。舉例而言，位置資訊（例如，指標 _ 及大小 > 成）用以起始資料移動操作以存取（例如，載入及/ 或儲存）資料緩衝器216C中之資料。另外，命令可包括資料緩衝器216C中之色彩資料之位置，諸如對與第一頂點相關聯之輸入色彩資料的指標，及添加至指標以定位下一頂點之色彩資料的增量。當前命令可進一步包含對資料緩衝器216C中與第一頂點相關聯之輸出緩衝器中之位置的指標，以及定位與下一頂點相關聯之色彩資料之輸出位置的增量。藉助於另一非限制性實例，在處理模組2〇8B執行照 ® 明之狀況下，當前命令可包括一或多個照明模型。作為另非限制性實例，在處理模組2〇8B執行修飾之狀況下，命 7可包括修飾矩陣。根據一或多個實施例，第一命令可提供照明模型或修飾矩陣之完整集合，後續命令識別先前命令中指定之照明模型或修飾矩陣之任何改變。在步驟408處，SPIM 208A監視處理模組2〇8B之進度，且在步驟410處藉由識別由處理模組208B執行之處理之狀態的資訊更新反饋216中的資訊。圖8提供可儲存於根據本 136489.doc • 24- 200935350 發明之一或多個實施例之反饋216A中之資訊的實例。根據一或多個此等實施例’每一命令識別頂點之有限集合，且一旦處理模組20 8B已處理與由命令識別之頂點相關聯之頂點資料’則命令被視為完成◊反饋216A可包含識別由處理模組208B完成之最新命令的資訊，例如，最後命令識別符 (ID) 802 ’及對命令流2ΐόΒ中之命令的指標804。

❿ 再次參看圖4 ’ SPIM 208Α在步驟404處繼續使用當前命令中之資訊來使在處理中使用之資料對處理模組2〇8B可用’且藉由第二處理之狀態更新反饋216A。如上文所論述且根據一或多個實施例，第二處理器與 SPMM 202及繪圖管線處理模組218非同步且獨立地操作。然而，在至少一狀況下，第二處理（例如，由Dsp模組2〇8 執行之處理）與由繪圖管線處理模組218執行之處理同步，使得由第二處理器處理且待由繪圖管線處理模組2丨8進一步處理之資料經同步。在此狀況下，SPMM 2〇2結合可提供繪圖管線處理模組218與SPMM 202之間的介面之spiM 214操作，以管理藉由繪圖管線處理模組218之資料存取使得模組218使用已由第二處理器處理之資料。根據一或多個實施例，SPMM 202及SPIM 214可包含單一模組。圖5說明用於根據本發明之一或多個實施例使用之同步程式碼處理流程。根據一或多個實施例，繪圖管線及Qpu 104對基元之區塊操作，其中每一者具有頂點之集合。舉例而言，在基元包含三角形之狀況下，每一基元具有三個頂點之相關聯集合。基元之區塊可表示為基元及其頂點之 136489.doc -25- 200935350 清單。根據一或多個實施例，SPMM 202判定對於給定基元β單中之基元是否待執行第二處理，且設定基元清單中之值（例如’邏輯值）以指示第二處理是否與基元清單中所識別之基元一起使用。根據或多個實施例’基元清單中設定之值可由spmM 202使用以判定與待由繪圖管線處理之基元相關聯的資料疋否首先由第二處理器處理。在步驟502處，SPMM 202存取基兀清單中設定之值，且在步驟504處，SPMM 202判定 ® 是否正使用第二處理。若SPMM 202在步驟504處判定正執行第二處理，則SPMM 2〇2同步藉由繪圖管線處理模組218 對正由第二處理器處理之資料的存取，使得第二處理器在使k料對模組21 8可用之前完成其對待由繪圖管線處理模組218進一步處理的資料之處理。藉助於非限制性實例，若基元清單中所儲存之值指示未使用第二處理，則由繪圖管線處理模組218存取之資料無需與由第二處理模組208B存取的資料同步。在此狀況下，繪圖管線處理模組218可以非同步模式操作，其不涉及同步繪圖管線處理模組21 8對頂點資料之使用與此頂點資料藉由第二處理模組2〇叩之使用之間的資料存取。在基元清單中所儲存之值指示正使用第二處理之狀況下，繪圖管線處理模組218以同步模式操作，以將模組218對頂點資料之存取與處理模組208B的資料存取同步。右寊料存取待同步，則根據—或多個實施例，SpMM 202在步驟5〇6處使用由SPiM 2〇8八提供之反饋資訊判定處 136489.doc * 26 - 200935350 理模組208B之狀態。根據一或多個實施例，spiM之⑽八將資訊儲存於反饋216A中，該資訊藉由識別由處理模組 208B完成之最後基元來識別處理模組2〇8B之處理狀態。根據一或多個實施例，基元經指派順序識別符，使得 SPMM 202靶夠在步驟5〇8處且基於由SpIM 2〇8A供應之反饋資訊判定識別符等於或小於由spiM 2〇8A供應之基元識別符的基元已由處理模組2〇8B完成。在步驟51〇處， SPMM 202結合SPIM 214允許繪圖處理模組218存取資料緩〇衝器216C中所儲存與經判定已由處理模組208B處理之基元相關聯的資料。包含圖6A及圖6B之圖6提供根據本發明之一或多個實施例的同步實例。參看圖6A，模組6〇4及6〇8提供繪圖管線處理模組218之實例，其存取資料緩衝器216(：中所儲存之資料。在非同步模式中，前變換緩衝器6〇2儲存頂點資料，其包括位置資料’例如，Χ、γ、2及w座標資料、紋理資冑及色彩資料。前變換緩衝⑽2巾所儲存之色彩資料包含發光色彩資料，或已以不同於使用第二處理器之方式經歷照明處理的色彩資料。舉例而t，此可為SPMM 2〇2判定第二處理器（例如，Dsp 1〇8)不可用於第二處理之狀況。在此狀況下，CPU 1〇2可執行照明且將值儲存於前變換緩衝器602中。在非同步模式中，模型檢視變換模組604擷取包括發光色彩資料之頂點資料，對不同於發光色彩資料之頂點資料操作且將頂點資料儲存於後變換緩衝器606中。在非同步 136489.doc -27- 200935350 模式中’模型檢視變換模組604經指導以傳送色彩資料與其他頂點資料。儘管變換模組604未修改色彩資料，但是其自前變換緩衝器602擷取發光色彩資料且如所指導將發光色彩資料儲存於後變換緩衝器606中，使得色彩資料可用於由鳍·圖官線中之隨後模組（例如，視埠變換模組6〇8)處理。在圖6A中所示之實例中，視埠變換模組6〇8存取後變換緩衝器606以擷取由模型檢視變換模組614轉發之發光色彩資料’且在其變換操作中使用發光色彩資料，例如，内 φ 插色彩資料。圖6B說明涉及處於第二處理同步模式之變換模組6〇4與 608及緩衝器602與606之處理。在圖6B中所示之實例中，第二處理器610(例如’實施處理模組2〇8B2dsp ι〇8)自前變換緩衝器602擷取不發光頂點色彩資料連同位置資料。第二處理器610使用所擷取資訊連同其他資料（例如，照明模型資料、修飾矩陣資料等）以處理色彩資料。在照明之狀況下，第二處理器610使用一或多個照明模型及頂點資 ® 料’以產生第二處理器610在使用命令流216B中所含有之資訊識別之位置處儲存於後變換緩衝器606中的發光頂點色彩資料。在非同步模式中，模型檢視變換模組604將色彩資料寫入至後變換緩衝器606。然而，若變換模組604將色彩資料寫入至後變換緩衝器6〇6，則變換模組604可覆寫由第二處理器610寫入至緩衝器6〇6之發光色彩資料。在同步模式中’模型檢視變換模組6〇4接收通知（例如，來自SPIM 214 136489.doc -28 - 200935350 之通知）以不將色彩資料傳送至後變換緩衝器606。藉由作為由模型檢視變換模組604寫入至後變換緩衝器6〇6之頂點資料之部分之色彩資料的前述傳送，變換模組6〇4避免覆寫由第二處理器610寫入至後變換緩衝器6〇6之發光色彩資料。在同步模式中’ SPIM 214可提供儲存於後變換緩衝器 606中之資料的狀態，使得視埠變換模組6〇8擷取包括由第二處理器610輸出之發光色彩資料的頂點資料。藉助於非 ❹ 限制性實例’ SPMM 202及SPIM 214可監視反饋216Α以識別第一處理器61 0是否已處理與視埠變換模組6 〇 8待處理之基元相關聯的頂點，使得模組608處理包括發光色彩資料的頂點資料。舉例而言，命令可包括使命令與頂點正由命令處理之基元清單相關聯的資訊。根據一或多個實施例，命令與相關聯之基元清單之間存在一對一對應性，使得一命令由第二處理器6 1 0使用以處理相關聯之基元清單中之所有基元。由此，一旦處理對給定命令係判定為將完成，則相關聯之基元清單中之基元將可由視埠變換模組6〇8處理。根據一或多個實施例，每一命令被提供識別符，且命令識別符以順序次序經指派。如此一來，可能基於反饋216Α 中所含有之最後命令識別符802資訊判定給定命令之處理是否完成。舉例而言，具有等於或小於最後命令ID 802中所識別之值之命令識別符值的命令被視為由第二處理器 61〇完成，而具有大於最後命令ID 802值之命令識別符值 136489.doc -29- 200935350 的命令被視為未由第二處理器610完成。圖9根據本發明之一或多個實施例說明命令流及命令流中所包括之一或多個命令的例示性内容。命令流216B包含一或多個命令9〇〇。每一命令900包含命令9〇〇之—或多個資訊項°以下提供命令流中之命令900之内容的非限制性實例’其包括用於與經組態以對頂點操作之程式碼—起使用的資訊，諸如照明或修飾程式碼。應顯而易見，其他資訊可添加或用以替換以下論述之資訊，該資訊可經調試以 ® 與由根據本發明之一或多個實施例的第二處理器使用之任何程式碼互操作。資訊項902及904包含用於與當前命令9〇〇一起使用之識別資訊。根據一或多個實施例，以下資訊可用以促進第二處理管理及控制。以下提供此等資訊項之實例：時戳：識別正由第二處理器處理之當前命令。舉例而言，SPIM 208A可在反饋213A中輸出此時戳以指示第二處理器當前正處理此命令。基π時戳：變數包含用於識別對應於當前命令900之基兀*/月單之時戳。舉例而言，基元時戳之值可用以將命令 900映射至給定基元。基元時戳可由第二處理器忽略。粒度：用於根據一或多個實施例使用之可選變數。粒度變數指示與命令900相關聯之頂點的數目，該等頂點包含與命令900相關聯之頂點群組或頂點的子集。根據一或多個實施例，第二處理器輸出資訊作為反饋以指示包含已處理之頂點群組之頂點的數目。在命令9〇〇處理頂點之狀況 136489.doc -30- 200935350 下’粒度指導SPIM 208A在多個頂點（例如，頂點群組）的完成後即提供反饋’該等頂點為與命令900相關聯之項點之子集。使用粒度值’ SPIM 208A可隨每一頂點群組經處理而提供反饋’該反饋可另外為在第二處理器完成處理與命令900相關聯之所有頂點時由SPIM 208A提供之反饋，由此提供額外及/或更精細級別之反饋。 vertexCount :包含指示待結合當前命令900處理之頂點之數目的值之變數。〇 nextCommandGroupSize :此變數識別下一命令之大小。若不存在下一鏈接命令’則變數可經設定為零。否則，值包含反映下一命令中所含有之位元組之數目的值。 nextCommandGroupPtr :此變數包含下一命令ID資訊9〇4 之全部或一部分，其可包含對命令流216B中之下一命令的指標。若不存在下一命令，則值可經設定為空值。否則，值包含對對應於下一命令之初始儲存位置之記憶體位置的指標，例如，在命令流216B中。資訊項906包含可用以定位所儲存之資料（例如，資料緩衝器216C中所儲存之資料）之資訊（例如，指標及跨距）。以下提供此等資訊項之實例： vertexInPtr :包含對含有輸入頂點位置之緩衝器之指標的變數。根據一或多個實施例，此變數之值為空值。藉助於非限制性實例，正由第二處理器執行之照明程式可在處理涉及無限照明模型之狀況下使用與頂點相關聯之法線而非位置資訊。在處理涉及聚光照明（sp〇tlighting)或位置照 136489.doc -31 · 200935350 明模型中之一或多者之狀況下，vertexInPtr可用作對儲存待處理之一或多個頂點之位置資料的儲存器之指標。 vertexOutPtr :包含對可供第二處理器寫入經修飾頂點之緩衝器之指標的變數。vertexOutPtr變數用於第二處理器執行修飾之狀況下。 colorsInPtr :包含對儲存頂點色彩（RGBA)之缓衝器之指標的變數。紅色、綠色、藍色及阿伐值集合中之每一集合包含頂點色彩群組。在執行雙面照明之狀況下，緩衝器在〇緩衝器中接連儲存兩個頂點色彩群組。每一頂點色彩群組由vertexOutSize位元組分離，使得下一頂點色彩群組可藉由將vertexOutSize變數之值添加至當前colorsInPtr值來定位。若colorsInPtr變數具有空值，則材料資料結構用作每一頂點之輸入色彩群組。 colorsOutPtr :包含對儲存由第二處理器產生之色彩輸出之緩衝器的指標之變數。在致能雙面照明之狀況下，兩個色彩群組由第二處理器對於每一頂點接連輸出。每一頂 ❿ 點色彩群組由vertexOutSize位元組分離。 normalsInPtr :包含對含有對應於由vertexInPtr所指之頂點（例如，當前正由第二處理器處理之頂點）之頂點法線的緩衝器之指標的變數。若normalsInPtr變數具有空值，則第二處理器使用CurrentNormal用於所有頂點。 bonelndicesPtr :包含對在修飾頂點中使用之矩陣調色板編索引之位元組陣列之指標的變數。藉助於非限制性實例，索引之數目等於頂點之數目乘以每頂點骨之數目，例 136489.doc •32· 200935350 如，如由boneCount變數所指示。 boneWeightsPtr :指向含有可在頂點修飾處理期間使用之S15.16骨重量之緩衝器的變數。藉助於非限制性實例，重量之數目等於頂點之數目乘以每頂點骨之數目，例如，如由boneCount變數所指示。 vertexInSize :指示一輸入頂點結構（每頂點）中含有之位元組之數目的變數。藉助於非限制性實例，與此變數相關聯之值可用作計算頂點緩衝器中之下一頂點位置的跨距。 ⑩ vertexOutAndColorSize :識別一輸出頂點結構（每頂點）中所含有之位元組之數目的變數。藉助於非限制性實例，與此變數相關聯之值可用作計算位置或色彩之下一輸出位置的跨距。 numDimensions :指定每位置向量元素之數目的變數（3 =XYZ)，（4=XYZW)。若數目為3，則W可假設為1.0。藉助於非限制性實例，與此變數相關聯之值可用作計算對下一頂點之位置資料之指標的跨距。 ® 資訊項908包含可用於第二處理中之其他處理資訊。以下提供此等資訊項之實例：

CurrentNormal (XYZ):含有在 normalsInPtr 為空值指標值之狀況下使用之法線的變數。此法線應用於命令流中參考之所有頂點。 rescaleNormalsFlag :指示是否重新縮放頂點法線之變數。若旗標經設定（例如，設定為OxFFFFFFFF之值），則第二處理器在照明等式之前按照0卩611〇1^£3規範（第2.11.3節） 136489.doc -33· 200935350 重新縮放頂點法線。

ReSCaleNormalizeFlag :指示何時重新縮放頂點法線之變數。若第-有效位元(例如，位元〇)經設定，則第二處理器如在OpenGL-ES規範（第2.n.3節）中所指定在變換之後但在照明前正規化法線。綠元!經設定，貝"二處理器可使用如在OpenGL規範中所陳述之重新縮放法線演算法或使用所有狀況下之標準正規化。因為正規化可在所有狀泥

下使用，所以無論何時正規化法線為適當的時位元〇可經設定’且當准許第二處理器使用重新縮放法線作為替代時位元1亦可經設定。 twoSidedLightingFUg:指示是否執行雙面照明之變數。若旗標經設定（例如，設定為0xFFFFFFFF之值），則第二處理器計算每頂點兩個色彩，頂點之每—側具有—個色_ (相對於法線）°根據一或多個實施例f twoSidedUghtingFUg可用以指示存在多個色彩例如與頂點相關聯之每一側具有一個色彩。 nghtingEnabledFiag :用以指示是否執行照明之變數。若旗標經設定（例如，設定為0xFFFFFFFF之值），則第_ 理器執行對頂點之照明計算且視是否致$ twoSidedUghting旗標而輸出每頂點—或兩個色彩。根j -或多個實施例，在於執行多個操作（例如，照明及之第二處理期間視情況執行照明之狀況下可使 lightingEnabledFlag。用 numActiveUghts:指定每頂點待應用之燈之數目的變 136489.doc -34- 200935350 數。根據一或多個實施例，支援達至8個燈，且有效燈處於數字次序。（例如，3個有效燈指代燈〇、1、2)。 numLightsUpdated :指定由 lightinglnfoPtr變數值所指向之照明資訊陣列之數目的變數。根據一或多個實施例，與命令一起發送之燈資訊陣列在對當前命令之頂點執行照明計算之前經更新，且未更新之任何有效燈使用其先前值。 lightUpdateMask :包含指示待使用 lightingInf〇Arrayptr 更新哪些燈之位元攔位的變數。位元集合之數目對應於〇 numLightsUpdated項。最低有效位元對應於燈〇 ’且位元7 對應於燈7。右没定最高有效位元（〇χ8〇〇〇)，則存在當前指令之經更新之材料結構。材料：可用以（若需要）更新照明模型資料之資料結構，若此資料經更新《此結構之存在可藉由設定 lightUpdateMask變數之最高有效位元組之值來識別。下文提供材料資料結構定義之實例。

UpdatedLights :包含（若需要）照明資訊結構（其中每一者 ® 包含自最後命令以來已改變之燈之新資料）之數目（例如， numLightsUpdated)的資料結構。根據一或多個實施例第二處理使用lightUpdateMask變數以將燈結構映射至正更新之實際燈。 boneCount :包含修飾中待使用之每頂點骨之數目的變數。根據一或多個實施例，若該值等於〇(零），則第二處理器應用包含MVT之矩陣調色板[〇]，但在此狀況下不輸出經變換之頂點，例如，使得眼空間頂點僅用於照明計算。 136489.doc -35- 200935350

MatrixPalettePtr-包含對含有矩陣調色板項之4χ4固定點矩陣的緩衝器之指標的變數自最後CCG改變。此緩衝器之大小由includedMatricesSize項指示且索引映射含於 MPInUse位元遮罩中。 includedMatricesSize :指示由 matrixPalettePtr所指向之矩陣調色板之位元組之大小的變數。根據一或多個實施例’緩衝器僅需包括經更新之矩陣，且]^1>1111186遮罩變數中之欄位用以判定複寫資料的適當索引位置。 ® MPInUseO-15 : 16位元遮罩，其中每一位元集合對應於由matrixPalettePtr變數所指向之緩衝器中所包括之經更新的矩陣調色板。舉例而言，最低有效位元對應於矩陣索引〇 ’而最高有效位元對應於矩陣索引丨5。 MPInUsel6-31 : 16位元遮罩，其中每一位元集合對應於由matdXpaletteptr所指向之緩衝器中所包括之經更新的矩陣調色板《舉例而言，最低有效位元對應於矩陣索引16，而最高有效位元對應於矩陣索引3 1。 MPInUse32_47: 16位元遮罩，其中每一位元集合對應於由rnatrixpalettePtr所指向之緩衝器中所包括之經更新的矩陣調色板。舉例而言，最低有效位元對應於矩陣索引32 , 而最高有效位元對應於矩陣索引47。以下提供可由根據本發明之一或多個實施例執行之第二處理（例如，照明）所使用的材料資料結構之内容的實例：燈模型環境場景色彩（RGBA)·包含可用於照明模型之環境場景色彩集合。 136489.doc -36 - 200935350 材料發射性（RGBA)-包含可用於材料發射性色彩之固定點RGBA色彩集合。材料環境（RGBA)-包含可用於材料環境色彩之固定點 RGBA色彩集合。材料漫射性（RGBA)-包含可用於材料漫射色彩之固定點 RGBA色彩集合。材料鏡面反射性（RGBA)-包含可用於材料鏡面反射性色彩之固定點RGB A色彩集合。〇材料鏡面反射性指數-包含固定點材料鏡面反射性指數因子，其可在0.0與128.0之間變化。以下提供可由根據一或多個實施例之第二處理使用之資料結構（例如，燈模型資料結構）的額外實例。藉助於非限制性實例，燈模型資料結構可存在用於在第二處理中所執行之照明中所使用的每一燈模型。環境（RGB A)-包含環境光分量之固定點值。聚光燈向量（XYZ)-包含聚光燈方向向量，若使用聚光 ® 燈。漫射性（RGBA)-包含漫射性分量之固定點值。鏡面反射性（RGBA)-包含鏡面反射性分量之固定點值。聚光燈截止餘弦-包含聚光燈之餘弦截止值。舉例而言，餘弦值可自1.0至〇_〇(〇度至90度）或-1(180度）變化。在-1(1 80度）之特殊狀況下，光為全向光且非聚光燈。聚光燈指數-包含固定點聚光燈分量（若使用聚光燈）。燈位置（XYZW)-包含固定點光位置或方向。若W分量之 136489.doc -37- 200935350 若w為零值為0，則光為無限方向光，否則其為位置燈衣減且聚光燈值可忽略。衰減因子（怪定）-包含衰減因子之怪定值衰減因子（線性）-包含衰減因子之線性分量衰減因子(二次)_包含衰減因子之二次分量其中第本發明之實施例提供_種系統、方法及裝置〜步一處理器單元經組態以對纷圖管線資料操作，來自第二:理器之輸出經整合於緣圖管線中，使得輸出對在繪圖管線中執行的-或多個模組可用。根據此等實施例，進行是否使用第一處理器之判定，且在待使用第二處理器之狀況下，將可包含-或多個命令之命令流提供至第二處理器，。第二處理使用含於命令流中之資訊且與一或多個綠圖管理模組同步對經緩衝之緣圖管線資料操作，使得第二處理器的處理模組或任何緣圖管線處理模組皆未覆寫資料。 SPMM結合-或多個spiM而操作以使用包含第二處理模組 ❿ 之處理狀態的反饋資訊同步藉由第二處理及㈣管線處理模組的資料存取。如此-來’本發明之實施例提供使用可用第二處理器平衡處理負載之能力。可以其他方式保持閒置之第二處理器可用以促進由緣圖處理單元執行之緣圖管線處理及/或由 :央處理單元或其他處理單元執行的處理。由此，舉例而言’可以其他方式等待處理資源之操作可經指引至可用第處理器此產生更快輸送量。有利地，已判定使用第二處理器相比未使用第二處理器之處理存在輸送量之增加;· 136489.doc -38- 200935350 例如，如按每秒圖框來量測。 ^ 卜，本發明之實施例可使 y第-處理反饋之貝訊來執行負㈣衡當判定第-虛拥哭、“丨蛛達到特疋臨限處理級別。虽判疋弟一處理|§達到臨限處 « _ ^ « . Α 谷重時，處理可經指引至另處理單兀》，諸如中央處理單元。另外，本發明之實施例提供利〜用思理早兀用於不同於其弟一處理目的之能力以執行一或 # Ϊ® - -Γ a \ 、他第一功能（若此處理早70可用）。可以其他方夫 ❺ 鲁〇置之此硬體（例如，處理單元）之使用產生硬體之更有效率之使用。在-或多個例示性實施例中，所描述之功能可以硬體、軟體及/或㈣，或任何組合實施。若以硬體實施，功能可實施於-或多個微處理器、微控制器、數位信號處理器 (㈣)、特殊應用積體電路(ASCI)、場可程式化間陣列 (福)或其類似物中。此等組件可駐留於通信系統、資料寫入及/或讀取系統或其㈣統内1以軟體實施，則可將該等功能作為-或多個指令或程式碼而儲存於電腦可讀媒體上或經由電腦可讀媒體來傳輸。電腦可讀媒體包括有形電腦f諸存媒體與通信媒體（包括促進電腦程式自一位置轉移至另一位置之任何媒體）。儲存媒體可為可由電腦存取之任何可用媒體。藉助於實例而非限制，此等電腦可讀媒體可包含RAM、快閃記憶體、唯讀記憶體（r〇m)、電可抹除可程式化唯讀記憶體（EEPR〇M)、緊密光碟唯讀記憶體（CD-ROM)或其他光碟儲存器件、磁碟儲存器件或其他磁性儲存器件，或可用以儲存呈指令或資料結構之形式的 136489.doc -39- 200935350 所要程式碼且可由電腦存取的任何其他媒體。術語"電腦可讀媒體”亦可定義為有形電腦程式產品。如本文所使用，磁碟及光碟包括緊密光碟（CD)、雷射光碟、光碟、數位化通用光碟（DVD)、軟性磁碟及藍光⑻u_ray)光碟，其中”磁碟”通常以磁性方式再生資料，而”光碟„用雷射以光學方式再生資料。上述各物之組合亦應包括在電腦可讀媒體之範疇内。儘管已依據當前被視為最實際且較佳實施例之内容來描 © 豸該裝置及方法，但是應理解，本發明無需限於所揭示之實施例。意欲涵蓋包括於申請專利範圍之精神及範疇内之各種修改及類似配置，申請專利範圍之範疇應符合最廣泛之解譯以涵蓋所有此等修改及類似結構。本發明包括以下申請專利範圍之任何及所有實施例。【圖式簡單說明】圖1為說明用於根據本發明之一或多個實施例使用之例示性器件的方塊圖。 _ ® 2說明包含根據本發日月之—或多個實施例使用之組件及組件間通信的方塊圖。包含圖3A及圖3B之圖3說明實施根據本發明之一或多個實施例的第二處理管理模組之程式碼處理流程。圖4說明實施根據本發明之一或多個實施例之第二處理介面模組的程式碼處理流程。圖5說明用於根據本發明之一或多個實施例使用之同步程式碼處理流程。 136489.doc •40· 200935350 包含圖6Α及圖6Β之圖6提供根據本發明之一或多個實施例的同步實例。圖7提供經轉發至根據本發明之一或多個實施例的第二處理模組之組態訊息中所含有的資訊之實例。圖8提供可儲存於根據本發明之一或多個實施例之反饋 216Α中之資訊的實例。圖9根據本發明之一或多個實施例說明命令流及命令流中所包括之一或多個命令的例示性内容。 Φ

【主要元件符號說明】 100 計算器件/電腦器件 102 中央處理單元（CPU) 104 GPU 106 匯流排 108 DSP 110 軟體應用程式 112 繪圖處理應用程式設計介面（API) 114 GPU驅動程式 116 記憶體模組/記憶體 124 顯示單元 202 第二處理管理模組（SPMM)或第二處理管理器 206 即時作業系統（RTOS) 208 DSP模組 208Α 第二處理介面模組（SPIM) 136489.doc 200935350

208B 214 216A 216B 216C 218 220 222 224 226 228 230 232 602 604 606 608 610 700 702 704

第二處理模組 SPIM 反饋記憶體區域/反饋命令流區域/命令流/命令流記憶體資料緩衝器繪圖管線處理模組通信路徑通信路徑通信路徑通信路徑通信路徑通信路徑通信路徑/通信通路前變換緩衝器模型檢視變換模組後變換緩衝器視埠變換模組第二處理器初始訊息/初始化訊息對命令流記憶體216B中之命令的指標識別命令流記憶體216B中之命令的儲存區域之大小的資訊/識別第一命令之大小（例如，以位元組為單位）之資訊 136489.doc -42- 706 200935350 802 804 900-1 900-N 902 ❹ 904 906 908 對記憶體模組216之反饋216A儲存區域的指標/對反饋216A區域中之位置的指標最後命令識別符（ID) 對命令流2 1 6B中之命令的指標命令命令資訊項資訊項資訊項資訊項

136489.doc .43,

Claims

200935350 十、申謗專利範圍·· 1. 一種方法，其包含：回應於一繪製請求，判定一處繪皁凡疋否可用以輔助繪圖S線處理，該處理單元具姓开角第處理功能；切求該處理單元之分配以執行一啊叮不同於該處理單元之孩第一處理功能的第二處理功理. 处力迠，以輔助繪圖管線處在該分配請求成功之一狀況下·· ❹ ❹ 使繪圖管線資料對該處理單元可用；監視該處理單元之一處理狀態；及使用該處理狀態，將由該虛 π W邊恳理皁π輸出之資料整合於該繪圖.管線資料中^ 2. 如請求項丨之方法，其 „ 紙主早70包含一數位信號處且該第二處理功能包令 ^ 犯巴坌或多個照明功能。 3. 如請求項1之方法，其中該虚琿萤_ 神獎丹平该處理單兀包含-數位信號處理器，且該第二處理功能包. ,,^ ^ ^ 3或多個修飾功能。 4. 如印求項1之方法，進一步包含：判定該處理單元是否正執行其第—處理功能；及在該處理單元未執行其第一處理功能之一狀況下，分配該處理單元。 5. 如請求項1之方法，装φΑ分八、在該刀配請求成功之一狀況下，該方法進一步包含：產生—命令流，以傳達待由該處理單元使用之資訊。 6·如請求項1之方法，其中該將由該處理單元輸出之資料 136489.doc 200935350 整合於該繪圖管線資料中進一步包含：識別一涉及該處理單元及一或多個繪圖管線處理模組之資料相依性；使用該處理狀態來判定該處理單元是否完成處理該資料相依性中所涉及之依賴性資料；及使該一或多個繪圖管線處理模組等待該依賴性資料，直至該處理單元完成處理該依賴性資料為止。一種裝置，其包含：

8. 一繪圖處理單元，其經組態以實施一繪圖管線；及一第二處理管理器，其耦接至該繪圖處理單元，該第二處理管理器經組態以：判定一耦接至該第二處理管理器之處理單元是否可用以輔助繪圖管線處理，該處理單元具有一第一處理功能；請求該處理單元之分配以執行一不同於該處理單元之該第-處理功能之第二處理功能，以輔助繪圖管線處理； ’該第二處理管理器進在該分配請求成功之一狀況下一步經組態以：使繪圖管線資料對該處理單元可用；監視該處理單元之一處理狀態；及出之資料整合一數位信號處使用該處理狀態，將由該處理單元輸於該續圖管線資料中。如請求項7之裝置，其中該處理單元包含 I36489.doc 參 ❹ 200935350 理器，且马· @ $ 9. 如請求項;:裝二置能包含一或多個照明功能。理器，且該第L!中該處理單元包含一數位信號處 10. 如請求項7之捉要 X夕调修飾功旎。 a 7之裝置，進一步包含—分第二處理管理器，該分配器經組態以配器’其麵接至該理單元是否正執行其第一處理功能；及在該處理單元未執行其第一處理功能之配該處理單元。况下’为 11. 如請求項7之裝置，袞由 …一其中在該分配請求成功之—狀、、牙亥第二處理管理器進一步經組態以：，產生一命令流，以傳達待由該處理單元使 12. 如請求項7之裝置，其中貧訊之資料整合於該繪圖管線資料甲’出 -步經組態以： U第—處理官理器進識別一涉及該處理單元及一七夕之資料相依性；或夕個綠圖管線處理模纪使用該處理狀態判定該處理單元是否完成處理相依性中所涉及之依賴性資料；及 M科使該一或多個緣圖管線處理模組等待該依賴性資料直至該處理單元完成處理該依賴性資料為止。， α-種電腦可讀記憶體媒體，其中儲存有電腦可執行碼’該程式碼包含用於以下之程式碼. 式回應於-繪製請求，判定-處理單元是否可用缚圖管線處理，該處理單元具有—第—處理功能；補助 136489.doc 200935350 不同於該處理單元之 ’以辅助繪圖管線處請求該處理單元之分配以執行一該第一處理功能的第二處理功能理；在該分配請求成功之一狀況下：使繪圖管線資料對該處理單元可用；監視該處理單元之使用該處理狀態，於該繪圖管線資料中一處理狀態；及將由該處理單元輸出之資料整合

14. 如請求項13之媒體，其中該虛恳理単疋包含一數位信號處理器，且該第二處理功能包含—或多個照明功能。 15. 如請求項13之媒體，#中該處理單元包含—數位信號處理器’且該第二處理功能包含-或多個修飾功能。 1 6.如請求項1 3之媒體，其中判定— 助繪圖管線處理之該程式碼進一碼· 處理單元是否可用以輔步包含用於以下之程式

判定該處理單元是^執行其第—處理功能。 17.如請求項13之媒體’進-步包含用於以下之程式碼：判定該處理單元是否正執杆装巩仃再第一處理功能；及在該處理單元未執行其第一虛丹弗處理功能之一狀況下，分配該處理單元。 18.如請求項13之媒體，其中在缔丹T在該分配請求成功之一狀況下’該程式碼進一產生一命令流， 19.如請求項13之媒體步包含用於以下之程式碼：以傳達待由該處理單元使用之資訊。，其中將由該處理單元輸出之資料整 J36489.doc 200935350 合於崎圖管線資料中之該程式碼進一步包含用於以下之程式碼： t = f涉及該處理單元及—或多個繪圖管線處理模組义資料相依性；使用該處理狀態判定該處理單元是否完成處理相依性中所涉及之依賴性資料；及使該—或多個緣圖管線處理模組等待該依賴性資料，直至該處理單元完成處理該依賴性資料為止。 Φ 20· 一種裝置，其包含： -繪圖處理單元’其經組態以實施一繪圖管線；及 -第二處理管理構件’其耦接至該繪第二處理管理構件包含：单7"該 ^用於判定-純至該第二處理管理構件之處理單元是否可用以輔助緣圖管線處理的構件，肖處理單元且有一第一處理功能； ’、 ❹ 詩請求該處理單元之分配以執行—不同於該處理卓疋之第-處理功能之第二處理功能以輔助處理的構件； ^ 在該分配請求成功之-狀況τ ’該第件進一步包含： “里構用於使繪圖管線資料對該處理單元可用的構件. 用於監視該處理單元之一處理狀態的構件；及用於使用該處理狀態將由該處理單元輪出之資/ 整合於該繪圖管線資料中的構件。貧料 136489.doc 200935350 21. 如請求項20之裝置，装 π罝#中該處理早元包含一數理器，且該第二處理功一， ^ 3 或多個照明功能。 22. 如請求項20之裝置，其理理器，且，[者處數位信號處第-處理功能包含-或多個修飾功能。 23. 如請求項20之裝置，進一 ^ 3耦接至該第二處理瞢理構件的分配構件，該分配構件包含：用於判定該處理單元是否正執件；及 ”丹弟一處理功能的構用於在該處理單元未執行其第一處理功能之一狀分配該處理單元的構件。 ’ 24. 如請求項20之裝置，1中在哕八〒在该刀配請求成功之一狀況下，該第二處理管理構件進一步包含：用於產生一命令流以傳達待由該處理單元使用之資訊的構件。參 25. 如請求項20之裝置，其中該用於將由該處理單元輸出之資料整合於該繪圖管線資料中的構件進一步包含. 用於識別-涉及該處理單元及一或多個繪圖管模組之資料相依性的構件；用於使㈣處理狀態判定該處理單元是否完成處理該資料相依性中所涉及之依賴性資料的構件；及用於使該-或多個緣圖管線處理模組等待該依賴性資料直至該處理單元完成處理該依賴性資料為止的構件。 136489.doc -6 *