TWI506442B - 在同一螢幕中之多方同時顯示 - Google Patents

在同一螢幕中之多方同時顯示 Download PDF

Info

Publication number
TWI506442B
TWI506442B TW101132009A TW101132009A TWI506442B TW I506442 B TWI506442 B TW I506442B TW 101132009 A TW101132009 A TW 101132009A TW 101132009 A TW101132009 A TW 101132009A TW I506442 B TWI506442 B TW I506442B
Authority
TW
Taiwan
Prior art keywords
application
user
display
processor
user interface
Prior art date
Application number
TW101132009A
Other languages
English (en)
Other versions
TW201327183A (zh
Inventor
Tao Zho
Chengming Zhao
Brett P Wang
John C Weast
Wanglei L Wang
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of TW201327183A publication Critical patent/TW201327183A/zh
Application granted granted Critical
Publication of TWI506442B publication Critical patent/TWI506442B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Description

在同一螢幕中之多方同時顯示
本發明係大致有關消費性電子產品(Consumer Electronics ;簡稱CE),且尤係有關在電視顯示器上顯示資訊。
傳統上,一CE裝置可包含諸如一處理器等的硬體及一軟體堆疊。一般而言,該軟體堆疊假定其是其中包括該顯示器的下層硬體之唯一使用者。
因此,一般而言,沒有與同時顯示不同的物件有關之衝突或問題,這是因為一軟體堆疊只須顯示來自下層硬體的資訊而不會出現問題。
繪製(rendering)應用程式介面(Application Program Interface;簡稱API)是一種呼叫繪製引擎(rendering engine)之介面。繪製引擎之例子包括(但不限於)DirectFB、OpenGL ES、Clutter、Qt、及GTK。繪製API是被該等引擎輸出以供開發者利用該等引擎的功能之程式介面。
因此,可利用各種不同的繪製API及繪製引擎。術語"繪製技術"被用來意指繪製API及/或繪製引擎。
如果不同的繪製技術嘗試在一顯示螢幕上於同一時間顯示資訊,則確定將產生衝突。
根據某些實施例,多個應用程式可同時在顯示螢幕的 不同區域中顯示資訊。在某些實施例中,使用不同的繪製技術之多個應用程式可同時在相同的顯示螢幕之不同區域中顯示資訊。在某些實施例中,轉換介面將來自各使用者應用程式之不同的繪製技術轉換為一共同的格式,且然後轉換回到不同的技術以供顯示。因此,不同的使用者介面技術及不同的使用者應用程式技術可合作而促進不同的應用程式同時在相同的螢幕上之同時顯示。
多重應用架構(Multiple Application Framework;簡稱MAF)啟用一種支援多個應用程式的同時執行之軟體架構。可同時在一顯示螢幕上顯示多個應用程式。
本發明可說明兩種不同類型的應用程式。"使用者應用程式"是可能想要在一顯示螢幕上顯示資訊之任何應用程式。"使用者體驗"或"使用者介面應用程式"是一種將來自一或多個使用者應用程式的資訊實際寫到螢幕上顯示(onscreen display)之應用程式。因此在一例子中,在多重應用架構中,多個使用者應用程式可開始多個應用,且可由一使用者體驗應用程式在該顯示螢幕上顯示該等使用者應用程式之輸出。在某些實施例中,該等使用者應用程式使用之繪製技術可相互不同,且可不同於該使用者體驗應用程式使用之繪製技術。
在一實施例中,一繪圖頁管理組件(surface management component)可以是保存來自各使用者應用程式的場景圖(scene graph)之一樹狀實體。該繪圖頁管理組件能夠同時在螢幕上同時執行多個應用程式。在某些實施例中,該繪 圖頁管理組件保存所有下層記憶體繪圖頁資訊、以及與產生該等資訊的程序間之關係。
當各使用者應用程式產生一些來源場景時,一場景圖在一多重應用架構中顯示該等來源場景,且指示如何使用一使用者介面將該等來源場景變形或轉換而組合成將在一顯示螢幕上同時顯示之一多重應用架構。
因此,如第1圖所示,可轉換使用各種繪製技術之多個使用者應用程式100,以便使用一使用者體驗或使用者介面應用程式108而在一電視顯示螢幕110上顯示。
一轉換層102協調且解決該等不同的繪製技術間之衝突,而且將各種使用者應用程式產生的資訊組合成一整體合併式顯示。在某些實施例中,該轉換層的一關鍵性組件是該繪圖頁管理組件。
請參閱第2圖,一更詳細的圖式示出只有一使用者應用程式12之一例子,但是熟悉此項技術者當可了解:可以與一使用者體驗(UserX)應用程式26有關之方式使用許多使用者應用程式12。每一使用者應用程式12可具有一有繪製技術之特定繪製程式庫14。在某些實施例中,該繪製程式庫可被修改而包含一幕後模式代理模組(screen off agent)。可加入一幕後模式代理模組作為傳統繪製程式庫之一修補程式(patch),用以關閉螢幕模式(screen mode),且避免立即在螢幕上顯示,這是因為立即在螢幕上顯示只會如同先前實施方式的情形而造成衝突。此外,該代理模組提供了轉換該資訊且在不同的使用者應用程式與及其任 務之間協調以便同時在相同的螢幕上顯示資訊之機會。
轉換介面16負責將每一繪製程式庫提供的資訊轉換為一共同的格式。
繪圖頁管理代理模組18儲存且協調各使用者應用程式12產生的所有繪圖頁。繪圖頁管理代理模組18之輸出然後被轉換為適用於現用使用者體驗應用程式26使用的一特定繪製程式庫24之一格式。因此,在某些實施例中,轉換介面22及轉換介面26提供了兩種轉換,以便適應各使用者應用程式使用的各種繪製技術、以及各使用者體驗應用程式使用的各種繪製技術。
然後請參閱第3圖,如方塊30所示,使用者體驗應用程式開始。然後如方塊32所示,該使用者體驗應用程式等候所需的記憶體繪圖頁資訊。在某些實施例中,可自轉換介面22提供該所需的記憶體繪圖頁資訊。介面22的一例子可包括一結合繪圖頁。例如,可將一Clutter結合繪圖頁轉換為一Clutter繪圖頁。
然後如方塊34所示,開始尚未開始的任何使用者應用程式。如方塊36所示,該等使用者應用程式分配特定的記憶體繪圖頁(memory surface)。可使特定的記憶體繪圖頁與諸如Flash或QT等的特定的繪製技術相關聯。
然後如方塊38所示,繪製程式庫14或24內之一繪製代理模組強制一應用程式利用幕後記憶體模式,且將繪圖頁資訊傳送到繪圖頁管理代理模組18。在某些實施例中,可以修補程式之方式加入該繪製代理模組,且將中斷加 入該繪製技術,以便利用幕後模式。可將一攔截程序(hook)插入該繪製程式庫內的程式碼中,而執行上述步驟。
如方塊40所示,該繪圖頁管理組件保存所有下層記憶體繪圖頁資訊、以及與產生該等資訊的程序間之關係。
然後如方塊40及42所示,該繪圖頁管理組件接收該使用者應用程式的資訊及被轉換的繪圖頁,且在樹狀結構中組織該資訊。
然後如方塊44所示,該等結合或轉換層接著與該繪圖頁管理組件通訊,且將該記憶體繪圖頁轉換到繪製API緩衝區,以便易於存取及調處。在方塊48中,該結合層將記憶體繪圖頁轉換到繪製API緩衝區。
在方塊48中,該使用者體驗應用程式接著自該結合層取得該應用程式的緩衝區之輸出。如方塊50所示,該使用者體驗應用程式構成最後的使用者體驗或顯示。
在某些實施例中,硬體實施例可能比軟體實施例更迅速或更有效率。亦可在不將繪圖頁直接載入該繪圖頁管理組件(硬體實施例中可能執行該直接載入)之情形下實施軟體實施例。在軟體實施例中,可替代地使用諸如網際網路協定通訊而將訊息或通訊傳送到一共用記憶體,以便載入繪圖頁。
在某些實施例中,使用不同的繪製技術之多個應用程式可同時在一使用者介面上顯示多個應用。可在無須使用者使用諸如Microsoft X視窗應用程式等的一特定類型的應用程式之情形下執行上列步驟。
在某些實施例中,可在一軟體堆疊的底層中提供用來實施該多重應用架構之程式碼。此外,在額外的例子中,可以應用程式或圖形引擎實施該程式碼。
根據另一實施例,可改變該使用者體驗應用程式,且可使該系統適應新的使用者介面應用程式。該新的使用者體驗應用程式在其開始之後,可廣播其存在的訊息。然後,所有運行的使用者應用程式訂閱該訊息,且因而被通知新的使用者應用程式之存在。在該通知之後,該等現有的使用者應用程式將其繪圖頁資訊傳送到該繪圖頁管理組件,而協助該繪圖頁管理組件重建場景圖。然後,該新的使用者體驗應用程式使用來自該繪圖頁管理組件的資訊以建構新的使用者介面。
該使用者體驗應用程式內之一廣播單元在使用者應用程式開始之後公佈該使用者應用程式的存在。同樣地,當該使用者體驗應用程式廣播其存在時,該等使用者應用程式內之代理模組可被通知。
在一實施例中,該代理模組可使用一處理器間通訊(Inter-Processor Communication;簡稱IPC)方法將該等繪製API繪圖頁之資訊傳送到該繪圖頁管理組件。然後可根據要求而更新用來保存來自該等使用者應用程式的所有繪圖頁資訊之一資料結構。當需要多個使用者介面應用程式時,可在新的使用者體驗應用程式廣播其的存在且自各使用者應用程式取得繪圖頁資訊時支援該等多個使用者介面應用程式。
因此,請參閱第4圖,用來執行一使用者體驗應用程式切換的一序列在方塊60中開始,然後如方塊62所示,該使用者體驗應用程式廣播其的存在。如方塊64所示,任何運行的使用者應用程式訂閱該訊息。如方塊66所示,那些運行的使用者應用程式然後將其繪圖頁資訊傳送到該繪圖頁管理組件,而協助該繪圖頁管理組件重建場景圖。最後,如方塊68所示,使用者應用程式使用該資訊而建構新的使用者介面。
根據又一實施例,可減輕與顯示器閃爍有關的問題。閃爍的顯示器之一原因是在發生緩衝區翻頁(buffer flipping)時。傳統上,使用了一前景緩衝區(front buffer)及一背景緩衝區(back buffer)。使用者應用程式寫到該背景緩衝區,且該前景緩衝區寫到該使用者體驗應用程式。當各緩衝區正在翻頁時(因而該前景緩衝區變成該背景緩衝區且反之亦然),可能發生螢幕顯示閃爍。
請參閱第5圖,在某些實施例中,可使用三重緩衝。該前景緩衝區介接該使用者體驗應用程式。一第三(背景)緩衝區被該等使用者應用程式更新。一中間或第二(背景)緩衝區保存將要被顯示一完成框。前景緩衝區以第二(背景)緩衝區進行翻頁且第二(背景)緩衝區以第三(背景)緩衝區進行翻頁。在一實施例中,該前景緩衝區與該第三緩衝區之間永不翻頁。因為該第二背景緩衝區有一已準備好的框,所以該等使用者應用程式可能總是利用該第三背景緩衝區。在該模式中,甚至在沒有同步之情形下,當該第二 背景緩衝區翻頁而變為該前景緩衝區時,因為該第二背景緩衝區含有一完成框,且該等使用者應用程式並沒有正在利用該第二背景緩衝區,所以輸出可呈現平滑而不會有影像閃爍。
因此,請參閱第6圖,如方塊80所示根據一實施例,該使用者體驗應用程式開始,且等候該繪圖頁管理組件的資訊。如方塊82所示,該等使用者應用程式開始,且自該繪製引擎程式庫分配繪圖頁。然後偵測緩衝區模式。如方塊84所示,如果偵測到雙重緩衝區模式,則將緩衝區模式自動切換到三重緩衝區模式。然後,如方塊86所示,防止該第一與第三緩衝區間之緩衝區翻頁。在方塊88中,將與繪圖頁翻頁有關的訊息傳送到該繪圖頁管理組件,且所有的雙重緩衝區應用程式係在三重緩衝區模式中操作。最後,如方塊90所示,該繪圖頁管理組件更新對應的繪圖頁。
請參閱第7圖,一多重應用架構(MAF)可與一使用者體驗應用程式通訊。如圖所示,該使用者體驗應用程式然後可與該繪圖頁管理組件記憶體通訊。該使用者體驗應用程式可包含與環境維護模組通訊之一事件分派器(event dispatcher),而該環境維護模組又包含一繪製模擬模組。如圖所示,該繪製模擬模組可包含一或多個內部繪圖頁。
在某些實施例中,來自一或多個使用者應用程式的該等繪圖頁中之每一單一繪圖頁可以如同其是一單一使用者應用程式的最後繪圖頁之方式,而與該多重應用架構或繪 圖頁管理組件通訊。
該繪圖頁管理組件可將最後繪圖頁視為一實際的使用者應用程式繪圖頁。或者,在該繪圖頁之後,可以有一被模擬的實際使用者應用程式。輸入事件可被分派到該單一繪圖頁,而不是被分派到擁有該繪圖頁之整個使用者應用程式,且每一繪圖頁可如同一使用者應用程式而具有一被登錄的名稱。在一實施例中,該使用者體驗應用程式處理被傳送到該繪圖頁管理組件的所有該等繪圖頁之輸入事件。在一實施例中,輸入事件也被分派到相關的個別繪圖頁,而不是被分派到擁有那些繪圖頁之整個使用者應用程式。因此,該事件分派器負責將事件以信令通知個別的繪圖頁,而不是通知整體的應用程式。
該環境維護模組維護每一繪圖頁的其中包括堆疊整合模組方法及用戶端識別碼之物件。應用程式可呼叫該堆疊整合模組方法,以便將該應用程式的名稱登錄到該繪圖頁管理組件。此外,在某些實施例中,應用程式中之每一繪圖頁可呼叫一堆疊整合模組方法,以便將該繪圖頁之名稱登錄到該繪圖頁管理組件,而不是登錄應用程式之名稱。此外,應用程式可為每一繪圖頁維護諸如用戶端識別碼等的識別碼。
在該多重應用架構中運行的各使用者應用程式將其繪圖頁資訊傳送到繪圖頁管理組件,以供該應用程式嘗試將最後繪圖頁利用螢幕時存取該繪圖頁資訊。該繪圖頁管理組件修改諸如OpenGL ES及DirectFB等的圖形程式庫。 該繪製模擬模組為每一繪圖頁模擬該程序。可將每一繪圖頁產生為一幕後繪圖頁(off screen surface),而不是產生到螢幕上。然後,每一繪圖頁將該幕後繪圖頁資訊傳送到該繪圖頁管理組件。
該環境維護模組可為該使用者體驗應用程式中之每一被輸出之繪圖頁產生一唯一的用戶端識別碼。在某些實施例中,繪圖頁經由該堆疊整合管理程式而將其名稱登錄到該繪圖頁管理組件。該事件分派器將作為使用者輸入的一部分且將事件分派到正確的繪圖頁。然後,該繪製模擬模組處理繪製程序,以便將該視窗利用一幕後緩衝區(off screen buffer)。該繪製模擬模組也經由相關視窗之用戶端識別碼而通知該繪圖頁管理組件執行更新。
因此,請參閱第8圖,該繪圖頁管理組件啟動。如92所示,當該繪圖頁管理組件啟動時,其將通知使用者體驗應用程式。然後,如方塊94所示,該使用者體驗應用程式利用圖形程式庫。如96所示,該圖形程式庫將繪圖頁資訊傳送回該繪圖頁管理組件。該程序對該繪圖頁管理組件的這端是透通的,亦即,該繪圖頁管理組件不知道這些繪圖頁是在相同的程序中,且仍然以與調處來自不同的使用者應用程序的最後繪圖頁相同之方式調處這些繪圖頁。
可以各種硬體架構實施本發明所述之圖形處理技術。例如,可將圖形功能整合到一晶片組內。或者,可使用分立式圖形處理器。作為又一實施例,可以其中包括多核心處理器之一般用途處理器實施該等圖形功能。
在某些實施例中,可以硬體實施第1及2圖所示之架構。該硬體可具有各種架構。在一實施例中,可以單晶片系統實施該硬體。然而,本發明不限於使用單晶片系統之實施例。
請參閱第9圖,一單晶片系統實施例108包含一中央處理單元110。中央處理單元110可被耦合到一系統互連122。諸如一"反及"(NAND)控制器的一記憶體控制器112也被連接到系統互連122。在一實施例中,可自NAND記憶體啟動系統108。
一多格式硬體解碼器114可將影像及視訊資料的各種編碼格式解碼。一顯示處理器116可對視訊及靜態影像執行其中包括縮放、雜訊降低、以及移動適應性解交錯(motion adaptive de-interlacing)(只提到一些例子)的功能。
在一實施例中,一圖形處理器118可為中央處理單元110執行圖形處理。一視訊顯示控制器120可具有一些通用控制層,且可提供混合及縮放。在一實施例中,可在該視訊顯示控制器中實施第1及2圖所示之該等架構。
一傳輸處理器124也被連接到系統互連122,該傳輸處理器124配合一安全處理器126而工作,以便提供被加密的或被解密的資料流。
一音訊數位信號處理器128可具有多個環繞音源縮混(down mix)模式,且可負責將各種音訊格式解碼。一通用輸入/輸出裝置130可提供其中包括通用序列匯流排、I2 C匯流排之各種不同的輸入或輸出裝置之一介面,且可提供 一般用途輸入/輸出以及中斷及時序。最後,音訊及視訊輸入/輸出132可接收各種音訊及視訊輸入,且可提供對應格式的音訊及視訊輸出,該等格式包括諸如Sony/Philips數位互連格式(Sony/Philips Digital Interconnect Format;簡稱S/PDIF)以及高解析多媒體介面(High-Definition Multimedia Interface;簡稱HDMI)。
在某些實施例中,一晶片內記憶體控制器134可與一晶片外系統記憶體(動態隨機存取記憶體(Dynamic Random Access Memory;簡稱DRAM))136通訊。在某些實施例中,音訊及視訊輸入/輸出132可被耦合到也是晶片外的一電視138。因此,在某些實施例中,除了系統記憶體(DRAM)136及電視顯示器138之外,可將第9圖所示之所有元件整合在一積體電路中。
系統108可以是諸如一電視或家庭娛樂系統、一行動網際網路裝置、一機上盒、或一細胞式電話(只提到某些例子)等的一消費性電子裝置。
第2、3、4、6、及8圖是流程圖。該等流程圖示出可在某些實施例中以硬體、軟體、及/或韌體實施之一些序列。在軟體實施例中,可以非短暫性電腦可讀取的媒體中儲存之指令實施該等序列。電腦可讀取的媒體之例子包括諸如系統記憶體136的光學、磁性、及半導體記憶體或儲存器。
在本說明書中提及"一個實施例"或"一實施"時,意指以與該實施例有關之方式述及的一特定特徵、結構、或特 性被包含在本發明內包含的至少一實施例中。因此,出現詞語"一個實施例中"或"在一實施例中"時,不必然都參照到相同的實施例。此外,可以所示特定實施例以外的其他適當形式設立該等特定特徵、結構、或特性,且所有此類形式可被包含在本申請案之申請專利範圍內。
雖然已經以與有限數目的實施例有關之方式說明了本發明,但是熟悉此項技術者將可了解本發明的許多修改及變化。後附的申請專利範圍將涵蓋在本發明的真實精神及範圍內之所有此類修改及變化。
12,100‧‧‧使用者應用程式
26,108‧‧‧使用者體驗應用程式
110‧‧‧顯示螢幕
102‧‧‧轉換層
14,24‧‧‧繪製程式庫
16,22‧‧‧轉換介面
18‧‧‧繪圖頁管理代理模組
108(重複)‧‧‧單晶片系統
110(重複)‧‧‧中央處理單元
122‧‧‧系統互連
112,134‧‧‧記憶體控制器
114‧‧‧多格式硬體解碼器
116‧‧‧顯示處理器
118‧‧‧圖形處理器
120‧‧‧視訊顯示控制器
124‧‧‧傳輸處理器
126‧‧‧安全處理器
128‧‧‧音訊數位信號處理器
130‧‧‧通用輸入/輸出裝置
132‧‧‧音訊及視訊輸入/輸出
136‧‧‧系統記憶體
138‧‧‧電視
第1圖是本發明的一實施例之一高階圖式;第2圖是本發明的一實施例之一流程圖;第3圖是本發明的另一實施例之一流程圖;第4圖是本發明的又一實施例之一流程圖;第5圖是本發明的一個三重緩衝區實施例之一圖式;第6圖是本發明的再一實施例之一流程圖;第7圖是本發明的一實施例之一軟體圖式;第8圖是本發明的另一實施例之一流程圖;以及第9圖是一實施例之一硬體圖式。
100‧‧‧使用者應用程式
108‧‧‧使用者體驗應用程式
110‧‧‧顯示螢幕
102‧‧‧轉換層

Claims (30)

  1. 一種在同一螢幕中之多方同時顯示的方法,包含:一步驟用以藉由被至少一應用程式停用立即顯示而給予時間來協調在相同螢幕上由二者應用程式的顯示使二使用者應用程式能夠在一使用者介面上同時顯示資訊。
  2. 如申請專利範圍第1項之方法,包含一步驟用以使不同的使用者應用程式能夠在相同的使用者介面上同時顯示。
  3. 如申請專利範圍第1項之方法,包含一步驟用以使一些使用與一使用者介面使用的繪製技術不同的繪製技術之使用者應用程式能夠在相同的顯示器上繪製。
  4. 如申請專利範圍第1項之方法,包含一步驟用以停用螢幕上顯示模式。
  5. 如申請專利範圍第1項之方法,包含一步驟用以轉換一使用者應用程式之一繪製技術。
  6. 如申請專利範圍第5項之方法,包含一步驟用以轉換被提供給一使用者體驗應用程式之繪製技術。
  7. 如申請專利範圍第1項之方法,包含一步驟用以修改一繪製程式庫,而將一使用者應用程式之螢幕上輸出改變為一幕後輸出。
  8. 如申請專利範圍第1項之方法,包含一步驟用以個別地識別來自一或多個使用者應用程式的複數個繪圖頁中之每一繪圖頁;以及如同該等繪圖頁是來自一單一使用者應用程式的最後繪圖頁般地與該等繪圖頁通訊。
  9. 一種方法,包含:一步驟用以使用不同的繪製技術繪製多個應用程式;以及一步驟用以同時在相同的螢幕顯示器上顯示來自多個應用程式之輸出。
  10. 如申請專利範圍第9項之方法,包含一步驟用以修改一繪製程式庫,而將一使用者應用程式之螢幕上輸出改變為一幕後輸出。
  11. 如申請專利範圍第9項之方法,包含一步驟用以轉換一使用者應用程式之一繪製技術。
  12. 如申請專利範圍第11項之方法,包含一步驟用以轉換被提供給一使用者體驗應用程式之繪製技術。
  13. 如申請專利範圍第9項之方法,包含一步驟用以個別地識別來自一或多個使用者應用程式的複數個繪圖頁中之每一繪圖頁;以及如同該等繪圖頁是來自一單一使用者應用程式的最後繪圖頁般地與該等繪圖頁通訊。
  14. 如申請專利範圍第9項之方法,包含一步驟用以使用一個前景緩衝區以及至少兩個背景緩衝區。
  15. 如申請專利範圍第9項之方法,包含一步驟用以將一新的使用者介面應用程式的存在通知該等使用者應用程式,而能夠改變使用者介面。
  16. 一種儲存了指令之非短暫性電腦可讀取的媒體,該指令用以使一處理器能夠使用任何繪製技術在一使用者介面上同時顯示資訊。
  17. 如申請專利範圍第16項之媒體,進一步儲存指令,該指令用以在相同的使用者介面上同時顯示不同的使用者應用程式。
  18. 如申請專利範圍第16項之媒體,進一步儲存指令,該指令用以使一些使用與一使用者介面使用的繪製技術不同的繪製技術之使用者應用程式能夠在相同的顯示器上繪製。
  19. 如申請專利範圍第16項之媒體,進一步儲存指令,該指令用以轉換一使用者應用程式之一繪製技術。
  20. 一種裝置,包含:一處理器,該處理器用以藉由被至少一應用程式停用立即顯示而給予時間來協調在相同螢幕上由二者應用程式的顯示使二使用者應用程式能夠在一使用者介面上同時顯示資訊;以及用以被耦合到該處理器之一記憶體。
  21. 如申請專利範圍第20項之裝置,其中該處理器是一單晶片系統的一部分。
  22. 如申請專利範圍第20項之裝置,其中該處理器用以使不同的使用者應用程式能夠在相同的使用者介面上同時顯示。
  23. 如申請專利範圍第22項之裝置,其中該處理器被耦合到一電視顯示器。
  24. 如申請專利範圍第21項之裝置,其中該處理器用以使一些使用與一使用者介面使用的繪製技術不同的繪製 技術之使用者應用程式能夠在相同的顯示器上繪製。
  25. 如申請專利範圍第21項之裝置,其中該處理器用以轉換一使用者應用程式之一繪製技術。
  26. 如申請專利範圍第25項之裝置,其中該處理器用以轉換被提供給一使用者體驗應用程式之繪製技術。
  27. 如申請專利範圍第21項之裝置,其中該處理器用以修改一繪製程式庫,而將一使用者應用程式之螢幕上輸出改變為一幕後輸出。
  28. 如申請專利範圍第21項之裝置,其中該處理器個別地識別來自一或多個使用者應用程式的複數個繪圖頁中之每一繪圖頁;以及如同該等繪圖頁是來自一單一使用者應用程式的最後繪圖頁般地與該等繪圖頁通訊。
  29. 如申請專利範圍第21項之裝置,其中該處理器使用一個前景緩衝區以及至少兩個背景緩衝區。
  30. 如申請專利範圍第21項之裝置,其中該處理器將一新的使用者介面應用程式的存在通知該等使用者應用程式,而能夠改變使用者介面。
TW101132009A 2011-09-12 2012-09-03 在同一螢幕中之多方同時顯示 TWI506442B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2011/001543 WO2013037077A1 (en) 2011-09-12 2011-09-12 Multiple simultaneous displays on the same screen

Publications (2)

Publication Number Publication Date
TW201327183A TW201327183A (zh) 2013-07-01
TWI506442B true TWI506442B (zh) 2015-11-01

Family

ID=47882501

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101132009A TWI506442B (zh) 2011-09-12 2012-09-03 在同一螢幕中之多方同時顯示

Country Status (6)

Country Link
US (1) US20130254704A1 (zh)
EP (1) EP2756408A4 (zh)
CN (1) CN103842978A (zh)
BR (1) BR112014005551A2 (zh)
TW (1) TWI506442B (zh)
WO (1) WO2013037077A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180197509A1 (en) * 2015-08-11 2018-07-12 Sony Corporation Information processing device, information processing method, and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200634629A (en) * 2005-01-03 2006-10-01 Pixtel Media Technology P Ltd Methods and systems for interface management
US7487516B1 (en) * 2005-05-24 2009-02-03 Nvidia Corporation Desktop composition for incompatible graphics applications
TW200935309A (en) * 2007-09-27 2009-08-16 Ibm Method and system for remote visualization of a graphics application
US20100289804A1 (en) * 2009-05-13 2010-11-18 International Business Machines Corporation System, mechanism, and apparatus for a customizable and extensible distributed rendering api
US20110144970A1 (en) * 2009-12-15 2011-06-16 Ati Technologies Ulc Apparatus and method for partitioning a display surface into a plurality of virtual display areas

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5801717A (en) * 1996-04-25 1998-09-01 Microsoft Corporation Method and system in display device interface for managing surface memory
US7477205B1 (en) * 2002-11-05 2009-01-13 Nvidia Corporation Method and apparatus for displaying data from multiple frame buffers on one or more display devices
US7673304B2 (en) * 2003-02-18 2010-03-02 Microsoft Corporation Multithreaded kernel for graphics processing unit
US7370284B2 (en) * 2003-11-18 2008-05-06 Laszlo Systems, Inc. User interface for displaying multiple applications
US7830372B2 (en) * 2004-08-30 2010-11-09 Qnx Software Systems Gmbh & Co. Kg Method and system for providing transparent access to hardware graphic layers
US20060244755A1 (en) * 2005-04-28 2006-11-02 Microsoft Corporation Pre-rendering conversion of graphical data
US7774430B2 (en) * 2005-11-14 2010-08-10 Graphics Properties Holdings, Inc. Media fusion remote access system
US7868893B2 (en) * 2006-03-07 2011-01-11 Graphics Properties Holdings, Inc. Integration of graphical application content into the graphical scene of another application
US8612847B2 (en) * 2006-10-03 2013-12-17 Adobe Systems Incorporated Embedding rendering interface
US8872896B1 (en) * 2007-04-09 2014-10-28 Nvidia Corporation Hardware-based system, method, and computer program product for synchronizing stereo signals
US20080284798A1 (en) * 2007-05-07 2008-11-20 Qualcomm Incorporated Post-render graphics overlays
US20090119607A1 (en) * 2007-11-02 2009-05-07 Microsoft Corporation Integration of disparate rendering platforms
CN101873510B (zh) * 2009-04-21 2012-12-19 鸿富锦精密工业(深圳)有限公司 控制视频影像跳台显示的方法和数据处理设备
US8368707B2 (en) * 2009-05-18 2013-02-05 Apple Inc. Memory management based on automatic full-screen detection

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200634629A (en) * 2005-01-03 2006-10-01 Pixtel Media Technology P Ltd Methods and systems for interface management
US7487516B1 (en) * 2005-05-24 2009-02-03 Nvidia Corporation Desktop composition for incompatible graphics applications
TW200935309A (en) * 2007-09-27 2009-08-16 Ibm Method and system for remote visualization of a graphics application
US20100289804A1 (en) * 2009-05-13 2010-11-18 International Business Machines Corporation System, mechanism, and apparatus for a customizable and extensible distributed rendering api
US20110144970A1 (en) * 2009-12-15 2011-06-16 Ati Technologies Ulc Apparatus and method for partitioning a display surface into a plurality of virtual display areas

Also Published As

Publication number Publication date
EP2756408A4 (en) 2015-02-18
CN103842978A (zh) 2014-06-04
BR112014005551A2 (pt) 2017-03-21
US20130254704A1 (en) 2013-09-26
WO2013037077A1 (en) 2013-03-21
TW201327183A (zh) 2013-07-01
EP2756408A1 (en) 2014-07-23

Similar Documents

Publication Publication Date Title
CN111818120B (zh) 端云用户交互方法、系统及相应设备、存储介质
US9883137B2 (en) Updating regions for display based on video decoding mode
US8856212B1 (en) Web-based configurable pipeline for media processing
JP2018534607A (ja) プリフェッチを用いた効率的な表示処理
WO2011073947A1 (en) Method and apparatus for projecting a user interface via partition streaming
JP2010286811A (ja) 組立式表示設備およびその画面制御方法とシステム
WO2023207194A1 (zh) 画面显示方法、装置、设备、存储介质及程序产品
CN116821040B (zh) 基于gpu直接存储器访问的显示加速方法、装置及介质
US12027087B2 (en) Smart compositor module
CN112804410A (zh) 多显示屏同步显示方法及装置、视频处理设备和存储介质
CN114710702A (zh) 一种视频的播放方法和装置
TWI506442B (zh) 在同一螢幕中之多方同時顯示
WO2023193598A1 (zh) 一种图像处理方法、装置、设备及存储介质
US20180122038A1 (en) Multi-layer fetch during composition
CN115373618B (zh) 一种多屏显示方法、装置、车机及存储介质
CN106648634A (zh) 一种屏幕截屏的方法及装置
CN111179386A (zh) 动画生成方法、装置、设备及存储介质
US11705091B2 (en) Parallelization of GPU composition with DPU topology selection
US11361488B2 (en) Image display method and apparatus, and storage medium
CN117453170B (zh) 一种显示控制方法、装置及存储介质
WO2023141917A1 (en) Sequential flexible display shape resolution
US8587599B1 (en) Asset server for shared hardware graphic data
WO2023225771A1 (en) Concurrent frame buffer composition scheme
JP7278850B2 (ja) ビデオランダムアクセスメモリにおけるマルチソースメディアをオーバーレイするシステム及び方法
CN116339659A (zh) 一种投屏显示方法、装置、设备以及计算机存储介质

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees