TWI635441B - 行動裝置及其觸控畫面更新方法 - Google Patents

Abstract

本發明係提供一種行動裝置，包括：一處理器，用以執行一應用程式；一繪圖處理單元；以及一觸控螢幕，用以偵測一觸控事件，並回報該觸控事件至該處理器，其中該觸控事件包括一觸控座標位置；其中該應用程式係依據該觸控事件執行相關之一軟體行為，並依據該觸控座標位置執行一視窗偵測，其中該應用程式係依據該視窗偵測之結果決定一智慧影像之一影像格式，其中該應用程式係輸出該智慧影像至該繪圖處理單元，且該繪圖處理單元係對該智慧影像進行一繪圖處理以產生一輸出影像，並將該輸出影像傳送至該觸控螢幕進行播放。

Description

行動裝置及其觸控畫面更新方法

本發明係有關於顯示裝置，特別是有關於一種行動裝置及其觸控畫面更新方法。

隨著科技發展，具有觸控面板之行動裝置也變得愈來愈普及。在行動裝置上，觸控功能與螢幕之顯示是密不可分的。然而，在傳統的行動裝置上之觸控螢幕上進行觸控操作，在觸控螢幕上所顯示的使用者介面均是進行全幀更新(whole frame update)。此外，因為觸控螢幕在偵測到觸控動作並將相應的觸控信號回報觸控驅動程式(touch device driver)，且再由觸控驅動程式回報觸控事件至作業系統。接著，作業系統及應用程式控制繪圖處理單元(GPU)以重新繪製使用者介面及整張輸出影像，再由觸控螢幕播放上述輸出影像，上述觸控操作之處理流程往往需要耗費不少反應時間，這也會造成在觸控操作時的畫面延遲。

因此，需要一種行動裝置及其觸控畫面更新方法以改善傳統行動裝置上進行觸控時之畫面延遲的問題。

本發明係提供一種行動裝置，包括：一處理器，用以執行一應用程式；一繪圖處理單元；以及一觸控螢幕，用以偵測一觸控事件，並回報該觸控事件至該處理器，其中該觸控事件包括一觸控座標位置；其中該應用程式係依據該觸控事件執行相關之一軟體行為，並依據該觸控座標位置執行一視窗偵測，其中該應用程式係依據該視窗偵測之結果決定一智慧影像之一影像格式，其中該應用程式係輸出該智慧影像至該繪圖處理單元，且該繪圖處理單元係對該智慧影像進行一繪圖處理以產生一輸出影像，並將該輸出影像傳送至該觸控螢幕進行播放。

在一實施例中，該應用程式係執行一前預定法以進行該視窗偵測，其中該前預定法係指預先定義該應用程式之一使用者介面中之各物件的尺寸及位置，並依據該觸控座標位置對該使用者介面中所相應之該物件以得到一區域影像以做為該視窗偵測之結果。

在另一實施例中，該應用程式係執行一後分析法以進行該視窗偵測，其中該後分析法係指該應用程式將在執行該軟體行為前之一目前影像以及在執行該軟體行為後之一調整影像相減以得到一區域影像以做為該視窗偵測之結果。

在一實施例中，該智慧影像之解析度係等於該觸控螢幕之解析度，且該智慧影像包括一區域影像及一填充影像。

在另一實施例中，其中該智慧影像之解析度係小 於該觸控螢幕之解析度，且該智慧影像僅包括一區域影像。

本發明更提供一種觸控畫面更新方法，用於一行動裝置，其中該行動裝置包括一處理器、一繪圖處理單元以及一觸控螢幕，該方法包括：利用該觸控螢幕偵測一觸控事件，並回報該觸控事件至該處理器，其中該觸控事件包括一觸控座標位置；依據該觸控事件執行相關之一軟體行為；依據該觸控座標位置執行一視窗偵測；依據該視窗偵測之結果決定一智慧影像之一影像格式；輸出該智慧影像至該繪圖處理單元；利用該繪圖處理單元對該智慧影像進行一繪圖處理以產生一輸出影像，並將該輸出影像傳送至該觸控螢幕進行播放。

在一實施例中，該方法更包括：執行一前預定法以進行該視窗偵測，其中該前預定法係指預先定義該應用程式之一使用者介面中之各物件的尺寸及位置，並依據該觸控座標位置對該使用者介面中所相應之該物件以得到一區域影像以做為該視窗偵測之結果。

在另一實施例中，該方法更包括：執行一後分析法以進行該視窗偵測，其中該後分析法係指該應用程式將在執行該軟體行為前之一目前影像以及在執行該軟體行為後之一調整影像相減以得到一區域影像以做為該視窗偵測之結果。

在一實施例中，該智慧影像之解析度係等於該觸控螢幕之解析度，且該智慧影像包括一區域影像及一填充影像。

在另一實施例中，其中該智慧影像之解析度係小於該觸控螢幕之解析度，且該智慧影像僅包括一區域影像。

100‧‧‧行動裝置

110‧‧‧處理器

115‧‧‧繪圖處理單元

120‧‧‧系統記憶體

130‧‧‧儲存裝置

140‧‧‧觸控螢幕

141‧‧‧觸控感測陣列

142‧‧‧顯示面板

143‧‧‧觸控控制電路

144‧‧‧顯示控制器

211-213‧‧‧訊息選項

214‧‧‧新聞欄位

221‧‧‧訊息工具列

222‧‧‧亮度條

223-231‧‧‧按鈕

400‧‧‧智慧影像

410‧‧‧區域影像

420‧‧‧填充影像

S510-S560‧‧‧步驟

第1圖係顯示依據本發明一實施例中之行動裝置的方塊圖。

第2A~2B圖係顯示依據本發明一實施例中應用程式之預先定義物件之示意圖。

第3A圖係顯示依據本發明一實施例中應用程式之目前影像之示意圖。

第3B圖係顯示依據本發明一實施例中應用程式之目前影像之示意圖。

第4A~4G圖係顯示依據本發明一實施例中不同類型之智慧影像的示意圖。

第5圖係顯示依據本發明一實施例中之觸控畫面更新方法的流程圖。

為使本發明之上述目的、特徵和優點能更明顯易懂，下文特舉一較佳實施例，並配合所附圖式，作詳細說明如下。

第1圖係顯示依據本發明一實施例中之行動裝置的方塊圖。在一實施例中，行動裝置100係包括一處理器110、一繪圖處理單元115、一系統記憶體120、一儲存裝置130、以及一觸控螢幕(touch screen)140。處理器110例如是一中央處理器(central processing unit，CPU)，且系統記憶體120例如是一靜態隨機存取記憶體(SRAM)或一動態隨機存取記憶體(DRAM) 等等的揮發性記憶體。

繪圖處理單元115係依據處理器110所執行之應用程式的指令以進行相應的繪圖處理以產生輸出影像。儲存裝置130係用以儲存在行動裝置上所執行之作業系統、各種應用程式、觸控驅動程式、及顯示驅動程式等等，儲存裝置130例如是一硬碟機、一固態硬碟、一快閃記憶體等等的非揮發性記憶體，但本發明並不限於此。處理器110係可將儲存於儲存裝置130中之作業系統及應用程式讀取至系統記憶體120並執行。

觸控螢幕140例如包括一觸控感測陣列141、一顯示面板(display panel)142、一觸控控制電路(touch control circuit)143、以及一顯示控制器144。舉例來說，觸控感測陣列141係包括複數個觸控偵測器(未繪示)以偵測在顯示面板142上所進行之觸控動作，其中觸控偵測器可為電容式、光學式等類型之偵測器，但本發明並不限於此。在一些實施例中，觸控感測陣列141與顯示面板142係可整合為一觸控面板。觸控控制電路143例如可為一微處理器(microcontroller)，其可接收來自觸控感測陣列141之一或多個偵測信號，並分析所接收的偵測信號以產生相應的觸控事件信號(例如包括觸控座標位置及觸控動作)，並將觸控事件信號傳送至處理器110所執行之應用程式。顯示控制器144係接收來自繪圖處理單元115之輸出影像或智慧影像並於顯示面板142播放。

應用程式則可依據該觸控事件信號執行對應的軟體行為，例如是調整聲音、刪除檔案、選取物件、寄送郵件等等。需注意的是上述的軟體行為僅為舉例說明之用，各應用程 式所執行之不同軟體行為並不限於此。

接著，應用程式可利用所得到的觸控座標位置以進行視窗偵測，並依據視窗偵測的結果來決定輸出影像之影像格式，此部份之細節將詳述於後。

第2A~2B圖係顯示依據本發明一實施例中應用程式之預先定義物件之示意圖。第3A圖係顯示依據本發明一實施例中應用程式之目前影像之示意圖。第3B圖係顯示依據本發明一實施例中應用程式之目前影像之示意圖。

本發明中之應用程式可依據兩種不同的方法在進行視窗偵測，例如前預定義法(pre-defined method)及後分析法(post-analysis method)。

舉例來說，以前預定義法為例，應用程式在設計時可預先定義其使用者介面中之各種物件之尺寸及位置。更進一步而言，各物件均有相應的大小尺寸及位置進行適當排列以形成使用者介面。使用者在觸控螢幕上對使用者介面進行觸控操作時，通常都是對使用者介面中之一特定物件進行觸控，例如點擊、長按、滑動等等，應用程式也僅需對位於該觸控座標位置的特定物件(例如是一按鈕、一訊息欄、一調整條等等)進行視窗偵測。意即，應用程式僅會該特定物件進行特定操作。

請參考第2A圖，應用程式例如是一新聞應用程式，且第2A圖中之訊息選項211~213以及新聞欄位214均是該應用程式所預先定義之物件。使用者可按下訊息選項211~213以開啟在相應之訊息選項中之同類型的新聞。使用者亦可按下新聞欄位214以觀看該則新聞之詳細內容。

請參考第2B圖，應用程式例如是一設定應用程式，用以設定行動裝置之各種功能。在第2B圖中，該應用程式係預先定義了訊息工具列221、亮度條222、及按鈕223~231，其中按鈕223~231係分別為Wifi按鈕、藍芽按鈕、勿打擾按鈕、無SIM卡按鈕、飛航模式按鈕、拍照模式按鈕、位置按鈕、遠端播放按鈕、音效設定按鈕等等。使用者可滑動訊息工具列221以查看相關的提示訊息、或是滑動亮度條222以調整觸控螢幕140之亮度、亦或是按下按鈕223~231之其中一者來開啟或關閉相應的功能。

當使用者在觸控螢幕140上進行觸控操作時，例如按下按鈕227時，行動裝置100即會開啟或關閉飛航模式，也就是說在使用者按下按鈕227時，按鈕227中間之圖示也會相應地改變，故應用程式需通知繪圖處理單元115繪製需更新之區域影像。

更進一步而言，應用程式可利用預定義法進行視窗偵測，並依據視窗偵測結果決定輸出影像之影像格式，例如是在影像中需更新之部份區域的大小及位置。舉例來說，需更新之區域影像的形狀係以長方形為主，或是可為方形或L形，但本發明並不限於此。

以後分析法為例，應用程式在進行視窗偵測時，係將進行軟體行為前之目前影像與觸控操作以進行軟體行為後之調整影像相減，以得出需更新之區域影像。舉例來說，目前影像可由應用程式先暫存至系統記憶體120，待得出調整影像後，則可將調整影像與目前影像相減以得到需更新之區域影 像，包括其大小及位置。舉例來說，需更新之區域影像的形狀係以長方形為主，或是可為方形或L形，但本發明並不限於此。

請參考第3A圖及第3B圖，應用程式例如是一設定應用程式，用以設定行動裝置之各種功能，類似於第2B圖中之各種工具列、亮度條、按鈕之功能。然而，該應用程式並未預先定義在使用者介面中之各物件之大小及位置。舉例來說，使用者可在亮度條320之位置進行滑動，藉以調整觸控螢幕140之亮度。例如在第3A圖中之亮度設定為95%，藉由觸控操作以調整至第3B圖中之亮度設定40%。應用程式則會將第3B圖中之調整影像與第3A圖中之目前影像相減以得到需更新的區域影像。

第4A~4G圖係顯示依據本發明一實施例中不同類型之智慧影像的示意圖。

在一實施例中，當應用程式進行視窗偵測以取得需更新之區域影像後，應用程式中之圖形單元係可輸出不同形式之影像至繪圖處理單元115，例如可輸出智慧影像或區域影像至繪圖處理單元115。舉例來說，智慧影像400例如可包括需更新之區域影像410以及填充影像(dummy image)420，且智慧影像之解析度係與觸控螢幕140之解析度相同。

舉例來說，觸控螢幕140之解析度為1920x1080，如第4A圖所示，區域影像410係為智慧影像400之下半部份，例如是從第420條線至第1080條線的部分。又例如第4B圖所示，區域影像510係佔了智慧影像500之中間部份，例如是從第420條線至第700條線之部分。類似地，如第4C圖所示，區域影像410係佔了智慧影像500之上半部份，例如是從第1條線至第600 條線之部分。

需注意的是，區域影像之高度及形狀並無限制，可視應用程式之需求進行更新。例如在第4D及4E圖所示，區域影像410係佔了智慧影像400之中間部份及上半部份，例如分別為從第200條線至第500條線、以及第1條線至第200條線之部分。

在一些實施例中，區域影像410並非長方形。如第4F圖所示，區域影像410係佔了智慧影像400之下半部份，例如從第200條線之第1000點像素開始至第1080條線之範圍。

在一些實施例中，區域影像410可為智慧影像400之內部的一部份影像，例如為從第200條線至第500條線的第1000點至第1400點像素，如第4G圖所示。

在一實施例中，當繪圖處理單元115接收到來自應用程式之區域影像或智慧影像，實際上需僅要對智慧影像中需要更新的區域影像進行相應的繪圖處理以繪製輸出影像，並輸出至觸控螢幕140進行顯示。舉例來說，若繪圖處理單元115係輸出與觸控螢幕140之解析度相同的輸出影像，即智慧影像中包括了區域影像及填充影像，填充影像可以是無效影像或是利用目前畫面來進行填充。在一實施例中，若填充畫面為無效影像，則繪圖處理單元115係可通知觸控螢幕140之顯示控制器144僅更新在輸出影像緩衝器(未繪示)中之區域影像的資料，意即將目前影像中有一部份係由區域影像所取代。

在一些實施例中，繪圖處理單元115可以僅傳送區域影像至顯示控制器144，且顯示控制器144可以僅更新在輸出 影像緩衝器(未繪示)中之區域影像的資料，意即將目前影像中有一部份係由區域影像所取代。

更進一步而言，在本發明中之繪圖處理單元115並不需要完整地繪製每張輸出影像，而是可依據觸控操作所相應的軟體行為來更新部分的畫面。相較於傳統的行動裝置，本發明中之繪圖處理單元115能更快速地對觸控操作進行反應並產生輸出影像至觸控螢幕140，使得觸控操作與相應之輸出影像播放的延遲時間大幅縮短，進而增進使用者體驗。舉例來說，若智慧影像包括區域影像及填充影像，則觸控操作與相應之輸出影像播放的延遲時間約可縮短17毫秒。若繪圖處理單元僅傳送區域影像至顯示控制器，則觸控操作與相應之輸出影像播放的延遲時間約可縮短34毫秒。相較於傳統觸控操作至輸出影像播放的延遲時間約為75至200毫秒，本發明之觸控畫面更新方法可大幅縮短觸控操作與相應之輸出影像播放之間的延遲時間，進而增進使用者體驗。

第5圖係顯示依據本發明一實施例中之觸控畫面更新方法的流程圖。在步驟S510，利用觸控螢幕偵測一觸控事件並回報該觸控事件至處理器，其中該觸控事件包括一觸控座標位置。

在步驟S520，依據該觸控事件執行相關的一軟體行為。舉例來說，應用程式則可依據該觸控事件執行對應的軟體行為，例如是調整聲音、刪除檔案、選取物件、寄送郵件等等。需注意的是上述的軟體行為僅為舉例說明之用，各應用程式所執行之不同軟體行為並不限於此。

在步驟S530，依據該觸控座標位置執行一視窗偵測。舉例來說，本發明中之應用程式可依據兩種不同的方法在進行視窗偵測，例如前預定義法(pre-defined method)及後分析法(post-analysis method)。

在步驟S540，依據該視窗偵測之結果決定一智慧影像之一影像格式。

在步驟S550，利用該應用程式之圖形單元輸出該智慧影像至繪圖處理單元115。舉例來說，當應用程式進行視窗偵測以取得需更新之區域影像後，應用程式係可輸出不同形式之影像至繪圖處理單元115，例如可輸出智慧影像或區域影像至繪圖處理單元115。舉例來說，智慧影像例如可包括需更新之區域影像以及填充畫面(dummy image)，且智慧影像之解析度係與觸控螢幕140之解析度相同。

在步驟S560，利用該繪圖處理單元115對該智慧影像進行繪圖處理以產生一輸出影像至觸控螢幕140。舉例來說，當繪圖處理單元115接收到來自應用程式之區域影像或智慧影像，實際上需僅要對智慧影像中需要更新的區域影像進行相應的繪圖處理以繪製輸出影像，並輸出至觸控螢幕140進行顯示。舉例來說，若繪圖處理單元115係輸出與觸控螢幕140之解析度相同的輸出影像，即智慧影像中包括了區域影像及填充影像，填充影像可以是無效影像或是利用目前畫面來進行填充。在一實施例中，若填充畫面為無效影像，則繪圖處理單元115係可通知觸控螢幕140之顯示控制器144僅更新在輸出影像緩衝器(未繪示)中之區域影像的資料，意即將目前影像中有一 部份係由區域影像所取代。

在一些實施例中，繪圖處理單元115可以僅傳送區域影像至顯示控制器144，且顯示控制器144可以僅更新在輸出影像緩衝器(未繪示)中之區域影像的資料，意即將目前影像中有一部份係由區域影像所取代。

綜上所述，本發明係提供一種行動裝置及其觸控畫面更新方法，其可透過不同方法計算在進行觸控操作時實際需要更新的區域影像，並且可大幅節省繪圖處理單元所需繪製的輸出影像之時間，使得觸控操作與相應之畫面顯示之間的延遲時間得以大幅降低，進而提昇使用者體驗。

本發明雖以較佳實施例揭露如上，然其並非用以限定本發明的範圍，任何所屬技術領域中具有通常知識者，在不脫離本發明之精神和範圍內，當可做些許的更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。

Claims (10)

1. 一種行動裝置，包括：一處理器，用以執行一應用程式；一繪圖處理單元；以及一觸控螢幕，包括：一觸控面板，用以偵測一觸控事件，並回報該觸控事件至該處理器，其中該觸控事件包括一觸控座標位置；以及一顯示控制器，用於控制該觸控面板以顯示畫面；其中該應用程式係依據該觸控事件執行相關之一軟體行為，並依據該觸控座標位置執行一視窗偵測，其中該應用程式係依據該視窗偵測之結果決定一智慧影像之一影像格式，且該智慧影像包括一區域影像，且該區域影像之解析度小於該觸控螢幕之解析度，其中該應用程式係輸出該智慧影像至該繪圖處理單元，且該繪圖處理單元係對該智慧影像中之該區域影像進行一繪圖處理以產生一輸出影像，並將該輸出影像傳送至該觸控螢幕，其中該顯示控制器係將該觸控螢幕之一影像緩衝器所儲存之一目前影像之一部分更新為該輸出影像，並將更新後之該目前影像於該觸控螢幕進行播放。
2. 如申請專利範圍第1項所述之行動裝置，其中該應用程式係執行一前預定法以進行該視窗偵測，其中該前預定法係指預先定義該應用程式之一使用者介面中之各物件的尺寸及位置，並依據該觸控座標位置對該使用者介面中所相應之該物件 以得到該區域影像以做為該視窗偵測之結果。
3. 如申請專利範圍第1項所述之行動裝置，其中該應用程式係執行一後分析法以進行該視窗偵測，其中該後分析法係指該應用程式將在執行該軟體行為前之一目前影像以及在執行該軟體行為後之一調整影像相減以得到該區域影像以做為該視窗偵測之結果。
4. 如申請專利範圍第1項所述之行動裝置，其中該智慧影像之解析度係等於該觸控螢幕之解析度，且該智慧影像包括該區域影像及一填充影像。
5. 如申請專利範圍第1項所述之行動裝置，其中該智慧影像之解析度係小於該觸控螢幕之解析度，且該智慧影像僅包括該區域影像。
6. 一種觸控畫面更新方法，用於一行動裝置，其中該行動裝置包括一處理器、一繪圖處理單元以及一觸控螢幕，且該觸控螢幕包括一觸控面板，該方法包括：利用該觸控面板偵測一觸控事件，並回報該觸控事件至該處理器，其中該觸控事件包括一觸控座標位置；依據該觸控事件執行相關之一軟體行為；依據該觸控座標位置執行一視窗偵測；依據該視窗偵測之結果決定一智慧影像之一影像格式，其中該智慧影像包括一區域影像，且該區域影像之解析度小於該觸控螢幕之解析度；輸出該智慧影像至該繪圖處理單元；利用該繪圖處理單元對該智慧影像中之該區域影像進行 一繪圖處理以產生一輸出影像，並將該輸出影像傳送至該觸控螢幕；以及將該觸控螢幕之一影像緩衝器所儲存之一目前影像之一部分更新為該輸出影像，並將更新後之該目前影像於該觸控螢幕進行播放。
7. 如申請專利範圍第6項所述之觸控畫面更新方法，更包括：執行一前預定法以進行該視窗偵測，其中該前預定法係指預先定義該應用程式之一使用者介面中之各物件的尺寸及位置，並依據該觸控座標位置對該使用者介面中所相應之該物件以得到該區域影像以做為該視窗偵測之結果。
8. 如申請專利範圍第6項所述之觸控畫面更新方法，更包括：執行一後分析法以進行該視窗偵測，其中該後分析法係指該應用程式將在執行該軟體行為前之一目前影像以及在執行該軟體行為後之一調整影像相減以得到該區域影像以做為該視窗偵測之結果。
9. 如申請專利範圍第6項所述之觸控畫面更新方法，其中該智慧影像之解析度係等於該觸控螢幕之解析度，且該智慧影像包括該區域影像及一填充影像。
10. 如申請專利範圍第6項所述之觸控畫面更新方法，其中該智慧影像之解析度係小於該觸控螢幕之解析度，且該智慧影像僅包括該區域影像。