TWI540864B - 資訊傳輸方法與無線顯示系統 - Google Patents

Description

資訊傳輸方法與無線顯示系統

本發明係關於一種資訊傳輸方法與無線顯示系統，尤指一種可經由使用者輸入回應通道在接收端操作來源端且即時地顯示來源端操作後之視訊畫面的資訊傳輸方法與無線顯示系統。

以Wi-Fi直連(Wi-Fi Direct)為基礎的無線顯示標準(Miracast^TM)可讓一來源端(Source)與一接收端(Sink)間透過無線方式來分享視訊畫面。例如支援無線顯示標準之手機(來源端)可經由已建立之無線連線將視訊畫面傳輸至支援無線顯示標準之電視(接收端)並直接在電視上顯示手機上之視訊畫面。另外，接收端除被動地接收及顯示來源端之視訊畫面外，接收端亦可接收使用者所輸入之操作資訊，並經由無線顯示標準中另定義之使用者輸入回應通道(User Input Back Channel，UIBC)將操作資訊傳輸至來源端，以讓使用者可反過來由接收端操作來源端，而來源端再將操作後所產生之視訊畫面傳輸給接收端來顯示。

在此情形下，來源端需由使用者輸入回應通道接收操作資訊且執行操作資訊中所包含之指令，同時來源端亦需將指令執行後所產生之視訊畫面透過無線連線傳輸到接收端。然而，當來源端之運算處理能力較低時，來源端將無法同時處理指令之執行與視訊畫面之傳輸，使接收端無法即時地接收到視訊畫面而出現視訊畫面嚴重延遲顯示之現象，進而影響到使用者之操作感受。因此，如何經由使用者輸入回應通道讓接收端操作來源端且可即時地在接收端顯示出來源端操作後之視訊畫面，已成為業界努力的目標之一。

因此，本發明提供一種資訊傳輸方法與無線顯示系統，其可經由使用者輸入回應通道在接收端操作來源端且即時地顯示來源端操作後之視訊畫面。

本發明揭露一種資訊傳輸方法，用於一無線顯示系統中，該無線顯示系統包含有已建立一無線連線之一來源端與一接收端，該資訊傳輸方法包含有該接收端經由該無線連線中一傳輸通道接收及顯示該來源端所傳送之畫面資訊，並取得一操作資訊；該接收端根據該操作資訊，產生一控制資訊，並經由該無線連線中一使用者輸入回應通道將該控制資訊傳輸至該來源端；該來源端執行該控制資訊中所包含之一指令後輸出一結果資訊；以及該來源端根據該控制資訊中對應於該指令之一傳輸設定，決定是否調整該結果資訊為較小資訊量之一顯示資訊，並經由該傳輸通道將該顯示資訊傳輸至該接收端。

本發明另揭露一種無線顯示系統，包含有一來源端；以及一接收端，用來與該來源端間建立一無線連線，經由該無線連線中一傳輸通道接收及顯示該來源端所傳送之畫面資訊，並取得一操作資訊，且根據該操作資訊，產生一控制資訊，並經由該無線連線中一使用者輸入回應通道將該控制資訊傳輸至該來源端；其中，該來源端用來執行該控制資訊中所包含之一指令後輸出一結果資訊，且根據該控制資訊中對應於該指令之一傳輸設定，決定是否調整該結果資訊為較小資訊量之一顯示資訊，並經由該傳輸通道將該顯示資訊傳輸至該接收端。

10‧‧‧無線顯示系統

100‧‧‧來源端

102‧‧‧接收端

CON‧‧‧無線連線

TRAN‧‧‧傳輸通道

UIBC‧‧‧使用者輸入回應通道

200~210‧‧‧步驟

20‧‧‧流程

IN‧‧‧輸入裝置

LINK‧‧‧連結圖像

第1圖為本發明實施例一無線顯示系統之示意圖。

第2圖為本發明實施例一資訊傳輸流程之示意圖。

第3A~3D圖為本發明描述一來源端與一接收端間之資訊傳輸一實施例之運作示意圖。

請參考第1圖，第1圖為本發明實施例一無線顯示系統10之示意圖。如第1圖所示，無線顯示系統10包含有一來源端100與一接收端102，來源端100與接收端102經由所建立之一無線連線CON並根據以Wi-Fi直連(Wi-Fi Direct)為基礎之無線顯示標準(Miracast^TM)來分享視訊畫面。其中，來源端100利用無線連線CON中一傳輸通道TRAN將畫面資訊傳輸至接收端102，讓接收端102可同步地接收及顯示來源端100所顯示之畫面資訊。再者，接收端102取得使用者所輸入之操作資訊後，利用無線連線CON中一使用者輸入回應通道UIBC將操作資訊傳輸至來源端100，讓使用者可在接收端102操作來源端100，並在接收端102顯示來源端100操作後所顯示之畫面資訊。其中，來源端100與接收端102係為電腦、智慧型電視、智慧型手機或平板電腦等電子裝置，並可利用特殊應用積體電路(application-specific integrated circuit，ASIC)來實現，或利用處理器及具有程式碼之儲存裝置來實現等，並不受限。儲存裝置可為唯讀式記憶體(read-only memory，ROM)、隨機存取記憶體(random-access memory，RAM)、光碟唯讀記憶體(CD-ROMs)、磁帶(magnetic tapes)、軟碟(floppy disks)、光學資料儲存裝置(optical data storage devices)等等，而不限於此。

詳細來說，請參考第2圖，第2圖為本發明用於無線顯示系統10中一資訊傳輸流程20的示意圖。資訊傳輸流程20包含以下步驟：

步驟200：開始。

步驟202：接收端102經由無線連線CON中傳輸通道TRAN接收及顯示來源端100所傳送之畫面資訊，並取得操作資訊OP。

步驟204：接收端102根據操作資訊OP，產生控制資訊CTL，並經由無線連線CON中使用者輸入回應通道UIBC將控制資訊CTL傳輸至來源端100。

步驟206：來源端100執行控制資訊CTL中所包含之一指令COM 後輸出一結果資訊RES。

步驟208：來源端100根據控制資訊CTL中對應於指令COM之一傳輸設定CFG，決定是否調整結果資訊RES為較小資訊量之顯示資訊OUT，並經由傳輸通道TRAN將顯示資訊OUT傳輸至接收端102。

步驟210：結束。

因此，根據資訊傳輸流程20，本發明在接收端102對使用者所輸入之操作資訊OP進行分析，先過濾掉多餘之控制內容而只留下具有實質控制意義之控制資訊CTL，再經由使用者輸入回應通道UIBC將控制資訊CTL傳輸至來源端100，使來源端100不需多耗費運算處理資源來執行不具有顯示變化結果之操作內容。再者，本發明之接收端102先根據指令COM是否需即時反應來源端100所顯示之內容，預先在控制資訊CTL中加入相對應之傳輸設定CFG，通知來源端100是否調整結果資訊RES為較小資訊量之顯示資訊OUT，使來源端100可根據傳輸設定CFG，決定是否將指令COM執行後所輸出之結果資訊RES調整為較小資訊量之顯示資訊OUT，讓來源端100可彈性地使用較小之運算處理資源來傳輸顯示資訊OUT至接收端102。藉此，來源端100將可同時處理指令COM之執行與顯示資訊OUT之傳輸，使接收端102可即時地顯示來源端100操作後之顯示資訊OUT，避免出現畫面延遲之現象。

具體而言，於步驟202中，接收端102透過傳輸通道TRAN接收來源端100所傳送之網路封包後，再由網路封包獲得來源端100所傳送之畫面資訊，並將畫面資訊顯示在螢幕上。另外，使用者觀看接收端102之螢幕上所顯示之畫面後，透過接收端102之輸入裝置IN來執行操作，例如，使用者可利用指標裝置點擊接收端102上顯示畫面之應用程式圖像、利用指標裝置圈選接收端102上顯示畫面中之文字或利用鍵盤輸入文字等來輸入操作資訊OP等。接著，接收端102會將使用者所操作之內容轉存為操作資訊OP，而操作資訊OP之內容可為指標裝置由位置A移動至位置B後再於位置C執 行點擊、在位置A點擊後再移動至位置B或鍵盤所輸入之文字資訊等。其中，輸入裝置IN為指標裝置(如滑鼠)或鍵盤之外，亦可為觸控板等並不受限。

於步驟204中，接收端102對操作資訊OP進行分析，過濾掉操作資訊OP中不會使來源端100產生不同顯示變化之操作內容，而產生具有實質控制意義之控制資訊CTL，再經由使用者輸入回應通道UIBC將控制資訊CTL傳輸至來源端100。舉例來說，當使用者透過指標裝置來操作接收端102時，操作資訊OP之內容包含有指標裝置被點擊及移動之資訊，由於當指標裝置未被點擊而只有移動時，來源端100並不會產生不同之顯示變化(即來源端100只會顯示出指標圖像在移動而不會有畫面之變化)，因此，接收端102會先根據操作資訊OP之內容，判斷指標裝置之按鍵是否被點擊，以將指標裝置之按鍵未被點擊前之操作內容過濾掉，只產生具有實質控制意義之控制資訊CTL。

詳細來說，當接收端102判斷出指標裝置之按鍵被點擊時，接收端102進一步地根據操作資訊OP之內容，判斷指標裝置之按鍵是否持續地被點擊。當接收端102判斷出指標裝置之按鍵未持續地被點擊時，接收端102便產生操作資訊OP之內容為一點擊指令COM1，並在操作資訊OP中再加入指標裝置被點擊時之位置座標。值得注意地，指標裝置之按鍵被點擊前後之移動位置座標將會被過濾而不會加入到控制資訊CTL中，讓來源端100不會執行指標裝置移動之指令。另外，當接收端102判斷出指標裝置之按鍵持續地被點擊時，接收端102可產生操作資訊OP之內容為一拖曳指令COM2，並在操作資訊OP中再加入指標裝置持續地被點擊時之移動位置座標，讓來源端100根據指標裝置持續地被點擊之移動位置座標來執行拖曳指標裝置之指令，顯示出相對應之結果。

舉例來說，以操作資訊OP之內容為指標裝置由位置A移動至位置B並於位置C執行點擊後不再點擊為例，接收端102可判斷出操作資訊OP之內容為點擊指令COM1，並過濾掉操作資訊OP中指標裝置由位置A移 動至位置B之內容(因來源端100不會因指標裝置由位置A移動至位置B而產生畫面之變化)。最後，接收端102只產生在位置C執行點擊指令COM1之內容為控制資訊CTL，以通知來源端100執行位置C之點擊指令COM1。

於步驟206中，來源端100由使用者輸入回應通道UIBC接收到控制資訊CTL後，執行控制資訊CTL中所包含之指令COM，如上述之點擊指令COM1或拖曳指令COM2等，並在指令COM執行後，輸出包含有顯示畫面之結果資訊RES。

於步驟208中，來源端100先判斷控制資訊CTL中對應於指令COM之傳輸設定CFG是否顯示指令COM需在接收端102即時反應出來源端100所顯示之內容，以決定是否調整結果資訊RES為較小資訊量之顯示資訊OUT。當傳輸設定CFG顯示指令COM需即時反應時，來源端100會將結果資訊RES中所包含之畫面的解析度縮小，輸出較小資訊量之顯示資訊OUT，使來源端100可彈性地使用較小之運算處理資源來處理及傳輸較少資訊量之顯示資訊OUT至接收端102，讓接收端102即時地顯示來源端100執行指令COM後之顯示內容。

需注意的是，傳輸設定CFG係由接收端102預先在控制資訊CTL中所加入，以通知來源端100是否調整結果資訊RES為較小資訊量之顯示資訊OUT。接收端102可根據指令COM之特性來設定傳輸設定CFG為需即時反應或不需即時反應，例如當指令COM為點擊指令COM1時，接收端102可預先研判來源端100將執行點擊並改變顯示畫面，並將傳輸設定CFG設定為需即時反應來通知來源端100。其中，傳輸設定CFG之設定方法，當可據以變化而不受限。

另一方面，在來源端100執行指令COM之一預定時間後，由於來源端100不需再額外增加處理運算資源來執行指令COM並足以處理正常資訊量之結果資訊RES的傳輸，因此，來源端100可選擇性地不再傳輸較小資訊量之顯示資訊OUT至接收端102，而直接將結果資訊RES傳輸到接收端 102，即讓接收端102可接收到解析度與來源端100相同之畫面資訊，以真實地顯示出來源端100之畫面內容。

簡單來說，在資訊傳輸流程20中，接收端102先過濾掉操作資訊OP中對來源端100不具有顯示變化之操作內容，再經由使用者輸入回應通道UIBC將過濾後之控制資訊CTL傳輸至來源端100，使來源端100不會耗費處理運算資源來執行不具有顯示變化之操作內容。再者，接收端102在控制資訊CTL中加入傳輸設定CFG來通知來源端100調整結果資訊RES為較小資訊量之顯示資訊OUT，使來源端100可使用較少之處理運算資源處理較小資訊量之顯示資訊OUT之傳輸。藉此，透過資訊傳輸流程20，來源端100將不會來不及同時處理指令之執行與視訊畫面之傳輸，使接收端102可即時地接收及顯示源端100操作後之顯示資訊OUT，避免出現畫面延遲之現象。

關於資訊傳輸流程20之具體實現方式，另可參考第3A~3D圖，第3A~3D圖為本發明描述來源端100與接收端102間之資訊傳輸一實施例之運作示意圖。如第3A~3D圖所示，來源端100為手機裝置，接收端102為電腦裝置，來源端100經由傳輸通道TRAN將視訊畫面傳輸到接收端102來顯示，接收端102具有輸入裝置IN(為一滑鼠)可讓使用者操作，並經由使用者輸入回應通道UIBC將操作資訊傳輸至來源端100，以反過來操作來源端100。

詳細來說，在第3A圖中，透過傳輸通道TRAN之傳輸，接收端102接收來源端100所顯示之畫面資訊，同步地與來源端100顯示相同之畫面，其為一網頁瀏覽畫面，且網頁瀏覽畫面中具有一連結圖像LINK。另外，接收端102取得使用者由輸入裝置IN所輸入之操作資訊OP，其內容為輸入裝置IN之指標由位置A移動至位置B後再於位置C執行單次點擊，即使用者依據接收端102所顯示之網頁瀏覽畫面，進行網頁瀏覽畫面中連結圖像LINK之點擊，以進行連結位址之瀏覽。

在此情形下，在第3B圖中，接收端102對操作資訊OP進行分析 並過濾掉操作資訊OP中不會使來源端100產生不同顯示變化之操作內容，即輸入裝置IN之指標由位置A移動至位置B之操作內容。最後，接收端102只產生包含有點擊指令COM1及位置C之座標的控制資訊CTL，並經由使用者輸入回應通道UIBC將控制資訊CTL傳輸至來源端100。其中，接收端102另於控制資訊CTL中加入顯示為需即時反應之傳輸設定CFG，通知來源端100需加速執行，以即時地在接收端102顯示及反應給使用者。

接著，在第3C圖中，來源端100經由使用者輸入回應通道UIBC接收到控制資訊CTL後，來源端100開始執行控制資訊CTL中所包含之點擊指令COM1，即連結圖像LINK之點擊，以進行連結位址(位置C之座標)之內容的讀取且顯示出新的網頁瀏覽畫面，即為結果資訊RES。最後，在第3D圖中，來源端100根據控制資訊CTL中傳輸設定CFG顯示為需即時反應出顯示內容，來源端100將新開啟之瀏覽畫面的解析度縮小，產生具有較小解析度畫面之顯示資訊OUT，並經由傳輸通道TRAN將顯示資訊OUT傳輸至接收端102，讓接收端102顯示出新的網頁瀏覽畫面以反應給使用者。其中，接收端102可如第3D圖中所示將顯示資訊OUT中較小解析度之畫面按原大小比例顯示，或也可將較小解析度之畫面自行插補為原始解析度之畫面後放大顯示，當可視實際需求來加以變化而不受限。

藉此，在此實施例中，由於接收端102先過濾掉操作資訊OP中對來源端100不具有顯示變化之操作內容，只傳送包含有點擊指令COM1與位置C座標之控制資訊CTL，因此，來源端100不會耗費運算處理資源來執行不具有顯示變化之操作內容。另外，接收端102另於控制資訊CTL中加入顯示為需即時反應之傳輸設定CFG來通知來源端100調整結果資訊RES為較小資訊量之顯示資訊OUT，使來源端100可使用較少之運算資源來執行較小資訊量之顯示資訊的傳輸。在此情形下，來源端100可同時處理指令之執行與顯示資訊OUT之傳輸，讓使用者在接收端102經由使用者輸入回應通道UIBC操作來源端100時，可即時地觀看到來源端100操作後之顯示資訊OUT， 不會出現畫面延遲之現象而影響操作感受。

具體而言，本發明之資訊傳輸流程20先在接收端過濾掉不會使來源端100產生不同顯示變化之操作內容，且通知來源端100對指令執行後之顯示畫面調整為較小解析度之畫面，讓來源端100能即時處理指令之執行與顯示畫面之傳輸，避免出現畫面延遲之現象，本領域具通常知識者當可據以進行修飾或變化。舉例來說，於本實施例中，接收端102判斷指標裝置之按鍵是否被點擊，將指標裝置之按鍵未被點擊前之操作內容過濾，並只產生指標裝置之按鍵被點擊時之位置資訊為控制資訊CTL。但於其他實施例中，接收端102亦可根據使用者是否點擊鍵盤之輸入鍵(即Enter鍵)，將輸入鍵未被點擊前之操作內容過濾，只產生輸入鍵被點擊時所輸入之文字內容為控制資訊CTL，以降低來源端100之運算處理資源。凡對使用者所輸入之使用資訊進一步地進行分析，產生控制資訊CTL使來源端100可降低執行處理資源之方法，皆適用於本發明。

另外，於本實施例中，當傳輸設定CFG顯示指令COM需即時反應時，來源端100會將結果資訊RES中所包含之畫面的解析度縮小，輸出較小資訊量之顯示資訊OUT，讓來源端100可處理較少資訊量之顯示資訊OUT的傳輸。但於其他實施例中，當傳輸設定CFG顯示指令COM需即時反應時，來源端100亦可降低結果資訊RES中所包含之畫面資訊的更新頻率，即降低輸出顯示資訊OUT至接收端102的資訊更新頻率，同樣可讓來源端100處理較少資訊量之顯示資訊OUT的傳輸，其當可視實際需求來據以變化。

綜上所述，當來源端之運算處理能力較低時，來源端將會來不及同時執行指令與傳輸視訊畫面，使得接收端所顯示之視訊畫面嚴重出現延遲之現象。本發明所提出之資訊傳輸流程，在接收端對操作資訊先進行過濾，且通知來源端傳輸較小解析度之畫面資訊，以經由使用者輸入回應通道在接收端操作來源端且可即時地顯示來源端操作後之視訊畫面。

以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所 做之均等變化與修飾，皆應屬本發明之涵蓋範圍。

10‧‧‧無線顯示系統

100‧‧‧來源端

102‧‧‧接收端

CON‧‧‧無線連線

TRAN‧‧‧傳輸通道

UIBC‧‧‧使用者輸入回應通道

Claims (14)

1. 一種資訊傳輸方法，用於一無線顯示系統中，該無線顯示系統包含有已建立一無線連線之一來源端與一接收端，該資訊傳輸方法包含有：該接收端經由該無線連線中一傳輸通道接收及顯示該來源端所傳送之畫面資訊，並取得一操作資訊；該接收端根據該操作資訊，產生一控制資訊，並經由該無線連線中一使用者輸入回應通道將該控制資訊傳輸至該來源端；該來源端執行該控制資訊中所包含之一指令後輸出一結果資訊；該來源端判斷該控制資訊中對應於該指令之一傳輸設定是否顯示該指令需即時反應；以及當該傳輸設定顯示該指令需即時反應時，該來源端將該結果資訊中所包含之畫面的解析度縮小，輸出較小資訊量之一顯示資訊，並經由該傳輸通道將該顯示資訊傳輸至該接收端。
2. 如請求項1所述之資訊傳輸方法，其中該接收端根據該操作資訊，產生該控制資訊的步驟包含有：該接收端對該操作資訊進行分析，過濾掉該操作資訊中多餘之操作內容，產生具有控制意義之該控制資訊來控制該來源端執行相關指令。
3. 如請求項1所述之資訊傳輸方法，其中該操作資訊係由一使用者透過一指標裝置所輸入，且該操作資訊包含有該指標裝置點擊及移動之資訊。
4. 如請求項3所述之資訊傳輸方法，其中該接收端根據該操作資訊，產生該控制資訊的步驟包含有：該接收端根據該操作資訊，判斷該指標裝置之一按鍵是否被點擊；當該接收端判斷出該按鍵被點擊時，該接收端再根據該操作資訊，判斷該按鍵是否持續地被點擊；以及當該接收端判斷出該按鍵未持續地被點擊時，該接收端產生包含有一點 擊指令之該控制資訊；當該接收端判斷出該按鍵持續地被點擊時，該接收端產生包含有一拖曳指令之該控制資訊。
5. 如請求項4所述之資訊傳輸方法，其中該接收端在包含有該點擊指令之該控制資訊中另加入該按鍵被點擊時該指標裝置之位置座標；該接收端在包含有該拖曳指令之該控制資訊中另加入該按鍵持續地被點擊時該指標裝置所移動之位置座標。
6. 如請求項1所述之資訊傳輸方法，另包含有：該來源端於該指令執行一預定時間後，該來源端不再對該結果資訊進行調整，並將該結果資訊輸出為該顯示資訊。
7. 如請求項1所述之資訊傳輸方法，其中該無線顯示系統係根據以Wi-Fi直連為基礎的無線顯示標準來傳輸畫面資訊。
8. 一種無線顯示系統，包含有：一來源端；以及一接收端，用來與該來源端間建立一無線連線，經由該無線連線中一傳輸通道接收及顯示該來源端所傳送之畫面資訊，並取得一操作資訊，且根據該操作資訊，產生一控制資訊，並經由該無線連線中一使用者輸入回應通道將該控制資訊傳輸至該來源端；其中，該來源端用來執行該控制資訊中所包含之一指令後輸出一結果資訊，且判斷該控制資訊中對應於該指令之一傳輸設定是否顯示該指令需即時反應，當該傳輸設定顯示該指令需即時反應時，該來源端將該結果資訊中所包含之畫面的解析度縮小，輸出較小資訊量之一顯示資訊，並經由該傳輸通道將該顯示資訊傳輸至該接收端。
9. 如請求項8所述之無線顯示系統，其中該接收端用來執行以下步驟，以根據該操作資訊，產生該控制資訊：該接收端對該操作資訊進行分析，過濾掉該操作資訊中多餘之操作內容，產生具有控制意義之該控制資訊來控制該來源端執行相關指令。
10. 如請求項8所述之無線顯示系統，其中該操作資訊係由一使用者透過一指標裝置所輸入，且該操作資訊包含有該指標裝置點擊及移動之資訊。
11. 如請求項10所述之無線顯示系統，其中該接收端用來執行以下步驟，以根據該操作資訊，產生該控制資訊：該接收端根據該操作資訊，判斷該指標裝置之一按鍵是否被點擊；當該接收端判斷出該按鍵被點擊時，該接收端再根據該操作資訊，判斷該按鍵是否持續地被點擊；以及當該接收端判斷出該按鍵未持續地被點擊時，該接收端產生包含有一點擊指令之該控制資訊；當該接收端判斷出該按鍵持續地被點擊時，該接收端產生包含有一拖曳指令之該控制資訊。
12. 如請求項11所述之無線顯示系統，其中該接收端在包含有該點擊指令之該控制資訊中另加入該按鍵被點擊時該指標裝置之位置座標；該接收端在包含有該拖曳指令之該控制資訊中另加入該按鍵持續地被點擊時該指標裝置所移動之位置座標。
13. 如請求項8所述之無線顯示系統，其中該來源端另用來執行以下步驟：該來源端於該指令執行一預定時間後，該來源端不再對該結果資訊進行調整，並將該結果資訊輸出為該顯示資訊。
14. 如請求項8所述之無線顯示系統，其中該無線顯示系統係根據以Wi-Fi直連為基礎的無線顯示標準來傳輸畫面資訊。