TWI473003B - 整合式多點觸控系統及其觸控方法 - Google Patents

整合式多點觸控系統及其觸控方法 Download PDF

Info

Publication number
TWI473003B
TWI473003B TW102108415A TW102108415A TWI473003B TW I473003 B TWI473003 B TW I473003B TW 102108415 A TW102108415 A TW 102108415A TW 102108415 A TW102108415 A TW 102108415A TW I473003 B TWI473003 B TW I473003B
Authority
TW
Taiwan
Prior art keywords
input event
device
projection
input
display
Prior art date
Application number
TW102108415A
Other languages
English (en)
Other versions
TW201435714A (zh
Inventor
Kuo Lung Chang
Hsing Yung Wang
Da Fei Chen
Chin Jung Fan
Wen Shiung Wang
Meng Chung Hung
Original Assignee
Awind Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Awind Inc filed Critical Awind Inc
Priority to TW102108415A priority Critical patent/TWI473003B/zh
Publication of TW201435714A publication Critical patent/TW201435714A/zh
Application granted granted Critical
Publication of TWI473003B publication Critical patent/TWI473003B/zh

Links

Description

整合式多點觸控系統及其觸控方法

本發明係有關於觸控系統,尤其更有關於可同時顯示複數投影端設備的螢幕畫面,並據以進行單點、多點觸控的觸控系統及其觸控方法。

隨著科技發展的日新月異,各式電子產品的種類越來越多,並且其輸入方式也就越來越多元化。

舉例來說,部分電子產品僅可支援單點的輸入,例如一般個人電腦可通過滑鼠、軌跡球等進行游標的點擊與移動。再者,部分電子產品可支援多點的觸控輸入,例如平板電腦或智慧型手機可通過內建的觸控螢幕來進行多點觸控輸入。另,市面上亦有各式用來提供多點觸控輸入的輸入裝置,例如觸控板、繪圖板或智慧型白板(Intelligent White Board,IWB)等,係可在電腦可支援的情況下,協助電腦進行多點的輸入動作。如上所述的輸入方式,當該些輸入方式是於單一電子產品上進行運用時,並不會發生任何的問題。

近來市場上開發出一種螢幕畫面的投影系統(screen mirroring),係可將一電子裝置A的螢幕畫面傳輸到一電子裝置B,並通過電子裝置B的螢幕來顯示。並且,使用者可直 接對該電子裝置B進行操作,再將操作所生之指令回傳至該電子裝置A,令該電子裝置A執行該指令對應的動作。

然而,當在執行上述的投影行為時,使用不同的輸入方式將會產生相容性的問題。舉例來說,若該電子裝置A無法支援多點觸控輸入的指令,但該電子裝置B的螢幕為一可支援多點觸控輸入的觸控螢幕,則當使用者對該電子裝置B的螢幕進行觸控操作時,若將操作所生之指令回傳至電子裝置A時,該電子裝置A將無法正確執行該指令對應的動作。

再者,隨著使用者的需求不同,各式電子裝置所搭載的螢幕尺寸與解析度也就不同。而在螢幕尺寸與解析度不同的情況下,當使用者觸碰了該電子裝置B的螢幕後,即使將該被觸碰的位置的座標回傳至該電子裝置A,也可能無法對應至同一位置。於此一情況下,該電子裝置A無法執行正確的動作。

本發明之主要目的,在於提供一種整合式多點觸控系統及其觸控方法,係可令一大尺寸的播放端設備接收複數投影端設備所擷取並傳送過來的螢幕畫面,並且同時顯示於其上的顯示器,以利使用者同時查看。

本發明之另一主要目的,在於提供一種整合式多點觸控系統及其觸控方法,係可於播放端設備上接受外部觸發的輸入事件,並且判斷是對哪一台投影端設備所進行的輸入事件後,回傳給對應的投影端設備,以令投影端設備執行對應動作。

本發明之又一主要目的,在於提供一種整合式多點觸控系統及其觸控方法,係可視投影端設備是否可支援多點觸控輸入而定,將輸入事件維持為多點觸控輸入的指令格式或是轉換為單點輸入的指令格式,藉此可令播放端設備相容於任一形式的投影端設備。

為達上述目的,本發明的系統包括複數投影端設備及一播放端設備,其中播放端設備上可規劃複數顯示區域,以接收並同時顯示複數投影端設備的螢幕畫面。當一輸入事件觸發於播放端設備上的任一顯示區域時,播放端設備係先對輸入事件的指令格式與座標進行標準化處理,再將處理後的輸入事件回傳至被觸發的顯示區域所對應的投影端設備。投影端設備接收輸入事件後,判斷輸入事件為單點輸入或多點觸控輸入、及本身是否可支援多點觸控輸入。若輸入事件為多點觸控輸入,且投影端設備無法支援,則投影端設備先將此輸入事件轉換為單點輸入的輸入事件後再據以執行。

本發明對照先前技術所能達成之功效在於,複數台投影端設備可分別擷取各自的螢幕畫面,並同時傳送到同一台播放端設備上顯示,如此一來,有助於使用者通過同一台播放端設備來查看複數台投影端設備的運作狀態。再者,播放端設備係通過複數個對應的顯示區域來分別顯示各投影端設備的螢幕畫面,並且分別接收外部對各投影端設備所觸發的輸入事件,藉此,使用者只要對該播放端設備上的不同顯示區域進行操作,即可同時操作多台的投影端設備。

值得一提的是,部分投影端設備可支援多點觸控輸入,而部分投影端設備則僅能支援單點輸入。通過本發明,係可由應用軟體來判斷投影端設備是否可支援多點觸控輸入,並且於投影端設備無法支援多點觸控輸入時,先將輸入事件轉換為單點輸入的指令格式後,再令投影端設備據以執行,藉以令本發明的系統可相容於各種形式的投影端設備。

1‧‧‧投影端設備

101‧‧‧第一投影端設備

1011‧‧‧顯示單元

102‧‧‧第二投影端設備

1021‧‧‧顯示單元

11‧‧‧顯示單元

12‧‧‧處理單元

13‧‧‧第一傳輸單元

14‧‧‧第一應用軟體

141‧‧‧畫面處理模組

142‧‧‧事件執行模組

15‧‧‧輸入裝置

2‧‧‧播放端設備

21‧‧‧顯示器

22‧‧‧處理器

23‧‧‧第二傳輸單元

24‧‧‧第二應用軟體

241‧‧‧畫面展現模組

242‧‧‧標準座標矩陣

243‧‧‧對照表

25‧‧‧輸入設備

211‧‧‧顯示區域

3‧‧‧使用者

41‧‧‧單點輸入裝置

42‧‧‧多點輸入裝置

43‧‧‧人機介面裝置

51‧‧‧單點輸入設備

52‧‧‧多點輸入設備

61‧‧‧第一顯示區域

62‧‧‧第二顯示區域

S10~S20‧‧‧步驟

S30~S42‧‧‧步驟

S50~S70‧‧‧步驟

S80~S86‧‧‧步驟

第一圖為本發明的第一具體實施例的使用示意圖。

第二圖為本發明的第二具體實施例的系統架構圖。

第三圖為本發明的第二具體實施例的使用示意圖。

第四圖為本發明的第一具體實施例的投影端設備方塊圖。

第五圖為本發明的第一具體實施例的播放端設備方塊圖。

第六圖為本發明的第一具體實施例的螢幕畫面投影流程圖。

第七圖為本發明的第一具體實施例的輸入流程圖。

第八圖為本發明的第一具體實施例的執行流程圖。

第九圖為本發明的第一具體實施例的補償流程圖。

第十圖為本發明的第一具體實施例的補償示意圖。

茲就本發明之一較佳實施例,配合圖式,詳細說明如後。

首請參閱第一圖與第二圖,分別為本發明的第一具體實施例 的使用示意圖與系統架構圖。本發明主要揭露了一種整合式多點觸控系統,以及該系統所使用的觸控方法,其中該系統主要包括複數投影端設備1及一播放端設備2。該複數投影端設備1中分別安裝有一第一應用軟體(如第四圖所示的第一應用軟體14),該播放端設備2中則安裝有一第二應用軟體(如第五圖所示的第二應用軟體24)。通過該些第一應用軟體14及該第二應用軟體24的執行,該複數投影端設備1可分別與該播放端設備2建立連線(主要為無線連接,但不加以限定),並於擷取各自的螢幕畫面後,同時傳送至該播放端設備2上顯示。

如第一圖所示,該複數投影端設備1為各式具有顯示單元11,可顯示各自的螢幕畫面的電子設備,例如筆記型電腦、個人電腦、平板電腦或智慧型手機等,但不加以限定。該播放端設備2具備有一大於該些顯示單元11的顯示尺寸之顯示器21,並且該播放端設備2可通過該第二應用軟體24之執行,於該顯示器21上規劃出複數個顯示區域211。更具體而言,該複數顯示區域211的數量,對應至與該播放端設備2連線的該複數投影端的數量。

該複數投影端設備1可分別通過內部安裝的該第一應用軟體14來擷取自身的螢幕畫面,並且傳送給該播放端設備2。如此一來,該播放端設備2可在接收了該些螢幕畫面後,通過該複數顯示區域211來分別顯示,即,每一台該投影端設備1皆對應至一個該顯示區域211。於一實施例中,該些顯示區 域211的尺寸大小可為相同且固定的。於另一實施例中,亦可依據該複數投影端設備1上的該些顯示單元11的實際大小,動態將該些顯示區域211調整成對應之大小。

本發明的主要技術特徵在於,當使用者3對該播放端設備2進行操作時,該播放端設備2可以接受使用者3所觸發的一輸入事件(input event),並且回饋給對應的該複數投影端設備1。本實施例中,該輸入事件主要包含了指令資料(command)及座標資料(coordinate),該指令資料指出使用者3的點擊、雙擊、選取、移動等操作,而該座標資料則指出上述操作在該顯示器21上的觸發位置。當使用者3觸發了該輸入事件後,該播放端設備2可藉由該第二應用軟體24來判斷該輸入事件是否觸發在該複數顯示區域211的其中之一上,以及被觸發的該顯示區域211係對應至哪一台該投影端設備1。

藉此,該播放端設備2會先對該輸入事件進行指令格式的標準化處理後,再將處理後的該輸入事件回饋傳送至對應的該投影端設備1,令該投影端設備1可依據所接收的該輸入事件來執行相對應的動作。舉例來說,若一顯示區域A對應至一投影端設備A,則當使用者3雙擊該顯示區域A上的一資料夾A的圖示(icon)時,該播放端設備2就會將該輸入事件(包括此雙擊動作的指令資料及座標資料)回饋傳送給對應的該投影端設備A,藉此該投影端設備A可依據該輸入事件,執行打開該資料夾A的動作。並且,該投影端設備A持續擷取並傳送螢幕畫面至該播放端設備2,故使用者3可直接於該播放端設備 2上看到該資料夾A已被打開之狀態。

值得一提的是,該播放端設備2實可同時接受多個輸入事件的觸發,例如由不同使用者同時在不同的顯示區域211上所觸發的多個輸入事件。該播放端設備2主要係依據不同的顯示區域211來區分不同的輸入事件,並且聚集(aggregate)同一時間在同一顯示區域211上觸發的指令資料及座標資料,並經處理後回傳到對應的該投影端設備1。然而,為了方便說明,下面將於說明書內文中,以同一時間僅一個輸入事件為例,來舉例說明,但並不加以限定。

如第二圖所示,該複數投影端設備1主要可連接外部的輸入裝置,例如圖中所示的單點輸入裝置41、多點輸入裝置42及/或人機介面裝置43(Human-machine Interface Device,HID),使用者3可操作該些輸入裝置41-43以控制該些投影端設備1。其中,該單點輸入裝置41可例如為一次只能輸入一個訊號的滑鼠或軌跡球、該多點輸入裝置42可例如為一次能同時輸入多個訊號的觸控板或繪圖板等、該HID43則可例如為能輸出特定指令組合或熱鍵(Hotkey)指令的鍵盤。然而以上所述僅為本發明的較佳具體實例,不應以此為限。

同樣的,該播放端設備2亦可連接外部的單點輸入設備51及/或多點輸入設備52,使用者3可操作該單點輸入設備51(例如滑鼠)與該多點輸入設備52(例如觸控螢幕)來觸發該輸入事件,並將該輸入事件回饋傳送至該複數投影端設備1,以 對該複數投影端設備1進行控制。

續請參閱第三圖,為本發明的第二具體實施例的使用示意圖。本實施例中,該複數投影端設備1與該複數顯示區域211的數量係以兩個為例,舉例說明。如圖所示,該播放端設備2係與一第一投影端設備101及一第二投影端設備102無線連接,並且,因為該些投影端設備1的數量為兩台,故該播放端設備2於該顯示器上規劃了一第一顯示區域61及一第二顯示區域62。其中,該第一顯示區域61用以顯示該第一投影端設備101的顯示單元1011上所顯示的螢幕畫面,該第二顯示區域62用以顯示該第二投影端設備102的顯示單元1021上所顯示的螢幕畫面。

當使用者3要操作該第一投影端設備101時,可通過該第一投影端設備101所連接的該單點輸入裝置41、該多點輸入裝置42與該HID43來操作。或者,也可直接於該第一顯示區域61上觸發該輸入事件,藉以於將該輸入事件回饋傳送至該第一投影端設備101後,令該第一投影端設備101執行對應的動作。當使用者3要操作該第二投影端設備102時,亦可依此類推,不再贅述。

參閱第四圖,為本發明的第一具體實施例的投影端設備方塊圖。如圖所示,該複數投影端設備1分別具有該顯示單元11、一處理單元12、一第一傳輸單元13及一輸入裝置15,其中該處理單元12電性連接該顯示單元11、該第一傳輸單元13及該輸入裝置15,並且該處理單元12用以執行該第一應用軟體 14。下面實施例中,將以一台該投影端設備1來舉例說明。

該顯示單元11用以顯示該投影端設備1運作所產生的螢幕畫面,例如平板電腦或智慧型手機執行作業系統(Operating System,OS)的畫面。該第一傳輸單元13與該播放端設備2無線連接,藉以將該投影端設備1的螢幕畫面傳送至該播放端設備2,並接收該播放端設備2回傳的該輸入事件。

該處理單元12係用以執行該第一應用軟體14,藉以擷取該螢幕畫面以傳送給該播放端設備2,以及執行與所接收的該輸入事件相對應的動作。更具體而言,該第一應用軟體14被執行後,係於該投影端設備1上運行一畫面處理模組141與一事件執行模組142。該畫面處理模組141用以擷取該顯示單元11上所顯示的該螢幕畫面,並且對所擷取的該螢幕畫面進行編碼(encoding)處理,藉此令該第一傳輸單元13傳送編碼後的該螢幕畫面給該播放端設備2。該事件執行模組142則用以接收該播放端設備2回饋回來的該輸入事件,並且據以進行處理,藉此令該投影端設備1可以執行對應至該輸入事件的動作。

該投影端設備1更可包括一輸入裝置15,該輸入裝置15電性連接該處理單元12,用以接受外部觸發,以對該投影端設備1進行操作。於一實施例中,該輸入裝置15係可內建於該投影端設備1中,例如為平板電腦的觸控螢幕、或是筆記型電腦內建的鍵盤等,不加以限定。於另一實施例中,該輸入裝置15亦可為該投影端設備1所外接的裝置,例如為第二圖中 所示的該單點輸入裝置41、該多點輸入裝置42與該HID裝置43等。

續請參閱第五圖,為本發明的第一具體實施例的播放端設備方塊圖。本實施例中,該播放端設備2具有該顯示器21、一處理器22、一第二傳輸單元23及一輸入設備25,其中該處理器22電性連接該顯示器21、該第二傳輸單元23及該輸入設備25,並且該處理器22用以執行該第二應用軟體24。

該顯示器21用以顯示該複數投影端設備1傳送過來的螢幕畫面。該第二傳輸單元23用以與該複數投影端設備1中的該第一傳輸單元13無線連接,藉以接收各該投影設備1傳送過來的該螢幕畫面,並將該輸入事件回饋傳送至對應的該投影端設備1。該輸入設備25用以接受使用者外部操控,藉以觸發該輸入事件。於一實施例中,該輸入設備25可為該播放端設備2所外接之設備,例如第二圖中所示的該單點輸入設備51與該多點輸入設備52等。於另一實施例中,該輸入設備25可內建於該播放端設備2中,例如該輸入設備25可與該顯示器21整合為一體(即,該顯示器21為一支援多點觸控的觸控螢幕)。如此一來,使用者可直接觸碰該播放端設備2上的該顯示器21,以觸發該輸入事件。

該處理器22用以執行該第二應用軟體24,藉以判斷該輸入事件係觸發在哪一個顯示區域211上、以及被觸發的該顯示區域211對應至哪一台該投影端設備1。並且,該處理器22還通過該第二應用軟體24對該輸入事件的指令格式進行標準化處 理,藉以令該第二傳輸單元23傳送轉換後的該輸入事件至對應的該投影端設備1。

更具體而言,該第二應用軟體24被執行後,係於該播放端設備2上運行一畫面展現模組241。該畫面展現模組241用以依據與該播放端設備2連線的該複數投影端設備1的數量,於該顯示器21上規劃對應數量的該顯示區域211。並且,該畫面展現模組241還對該第二傳輸單元23所接收的該螢幕畫面進行解碼(decoding)處理,藉以將解碼後的該螢幕畫面顯示(rendering)於對應的該顯示區域211上。

參閱第六圖,為本發明的第一具體實施例的螢幕畫面投影流程圖。本實施例中,要建構該整合式多點觸控系統,首先該複數投影端設備1與該播放端設備2需分別執行該第一應用軟體14與該第二應用軟體24,藉以令該些投影端設備1與該播放端設備2建立連線(步驟S10)。接著,該播放端設備2(通過該畫面展現模組241)依據該複數投影端設備1的連線數量,於該顯示器21上規劃對應數量的該顯示區域211(步驟S12)。該複數投影端設備1於連線成功後,分別擷取自身於該顯示單元11上顯示的螢幕畫面(步驟S14),並且通過網路傳送給該播放端設備2(步驟S16)。該播放端設備2係接收該複數投影端設備1傳來的螢幕畫面,並且分別於對應的該些顯示區域211上顯示(步驟S18)。

最後,持續判斷該複數投影端設備1與該播放端設備2間的連線是否中斷(步驟S20)。若連線正常,則回到步驟S14,持續 接收與顯示該些投影端設備1所傳來的螢幕畫面。當任一投影端設備1與該播放端設備2間的連線中斷時,該播放端設備2立即停止接收並顯示已中斷連線的該投影端設備1的螢幕畫面。值得一提的是,該播放端設備2可以保留已中斷連線的該投影端設備1所對應的該顯示區域211,亦可將該顯示區域211關閉,並不加以限定。另外,該畫面展現模組241可以是動態的偵測,例如當該播放端設備2與兩台投影端設備1連線,並且通過兩個該顯示區域211來分別顯示該二投影端設備1的螢幕畫面時,若有一投影端設備C連線加入,則該播放端設備2可動態於該顯示器21上新增一顯示區域C,並即時顯示該投影端設備C傳來的螢幕畫面。藉此,該多點觸控系統的運作不需為了新增該投影端設備C而中斷。

參閱第七圖,為本發明的第一具體實施例的輸入流程圖。當使用者3要通過該播放端設備2來操控該複數投影端設備1時,係由該播放端設備2來接受使用者3觸發的該輸入事件(步驟S30)。更具體而言,該播放端設備2係可通過該輸入設備25,或是觸控式的該顯示器21來接受觸發。為方便說明,下面實施例中將以觸控式的該顯示器21為例,以舉例說明。

步驟S30後,該播放端設備2對該輸入事件的觸發位置的座標進行標準化(normalize)(步驟S32),藉以依據標準化的座標,判斷該輸入事件屬於該複數顯示區域211中的哪一個(步驟S34)。更具體而言,該第二應用軟體24內預設有一標準座標矩陣242(如第五圖中所示),該標準座標矩陣242係大於該 複數投影端設備1的該顯示單元11的座標矩陣,例如可為一64x64(0-4095)或一256x256(0-65535)的座標矩陣,但不加以限定。該步驟S32中,該第二應用軟體24係依據該標準座標矩陣242對該輸入事件的觸發位置的座標進行標準化,並依據標準化座標來確認該輸入事件觸發了哪一個該顯示區域211。通過上述程序,該第二應用軟體24可進一步得知該輸入事件對應至哪一台該投影端設備1,即,使用者3是要對哪一台該投影端設備1進行操作。

步驟S34後,該第二應用軟體24係先對該輸入事件進行指令格式的標準化處理(normalize)後,再將處理後的該輸入事件回饋傳送至該被觸發的顯示區域211所對應的該投影端設備1。本發明中,使用者3可能通過不同類型的該輸入設備25(例如滑鼠、觸控板、繪圖板等),或是觸控式的該顯示器21來觸發該輸入事件,藉以進行單點或多點的輸入。然而,並非所有的該投影端設備1都可以直接接收並處理上述輸入設備25與顯示器21的輸入指令。步驟S34的目的在於,定義一個可相容於所有輸入設備的指令之指令格式(superset),藉此,無論使用者3通過哪一種輸入設備來觸發該輸入事件,皆可將指令轉換為標準化格式。該播放端設備2係傳送標準化格式的該輸入事件給該投影端設備1,故投影端設備1可通過該第一應用軟體14將該標準化的輸入事件的指令格式轉換成本身適用的指令格式後,再據以執行,如此一來可解決指令格式的相容性問題。

更具體而言,該第二應用軟體24內可預設有一對照表243(如第五圖中所示),該對照表243記錄了各種觸控手勢所對應的人機介面裝置(Human-machine Interface Device,HID)指令(例如可為鍵盤的熱鍵(Hotkey)指令)。舉例來說,該對照表243可記錄兩指觸碰並向上滑動的動作對應至「上一頁」的HID指令、兩指觸碰並向下滑動的動作對應至「下一頁」的HID指令、或三指觸碰並向右滑動的動作對應至「切換桌面」的HID指令等。

例如,通過上述該對照表243的比對,當使用者3以兩指同時觸碰該顯示器21上的其中一個顯示區域211,並向下滑動時,該播放端設備2不會將此一輸入事件的指令資料及座標資料傳送給該投影端設備1,而是會將此一輸入事件轉換成對應的HID指令後,再傳送給該投影端設備1。

回到第七圖,該步驟S34後,該第二應用軟體24係先判斷該輸入事件為一預設手勢輸入事件或是一指標(pointing)輸入事件(步驟S36)。若判斷該輸入事件為該指標輸入事件,則該第二應用軟體24將該輸入事件的指令格式轉換為上述標準化的指令格式(步驟S38);而若判斷該輸入事件為該預設手勢輸入事件,則該第二應用軟體24依據該對照表243的內容,將該輸入事件轉換為對應的HID指令(步驟S40)。於該步驟S38或該步驟S40執行完畢後,該播放端設備2再將轉換後的該輸入事件回饋傳送至被觸發的該顯示區域211所對應的該投影端設備1(步驟S42)。

參閱第八圖,為本發明的第一具體實施例的執行流程圖。首先,由被觸發的該顯示區域211所對應的該投影端設備1,接收該播放端設備2回饋傳送的該輸入事件(步驟S50),接著,通過該第一應用軟體14,判斷該輸入事件為該指標輸入事件或是該HID指令(步驟S52)。若該輸入事件為該HID指令,則該投影端設備1直接依據該HID指令來執行對應的動作(步驟S54)。更具體而言,該投影端設備1係通過該第一應用軟體14所運行的該事件執行模組142來處理該HID指令,以令該投影端設備1可執行對應的動作(例如上一頁、下一頁、放大/縮小頁面或切換桌面等)。

若於該步驟S52中,判斷所接收的該輸入事件為該指標輸入事件,則該第一應用軟體14依據該投影端設備1的該顯示單元11的解析度,將該指標輸入事件的觸發位置的座標逆轉換(de-normalize)為該投影端設備1上的對應座標(步驟S56)。

並且,若該輸入事件為該指標輸入事件,則該第一應用軟體14進一步判斷該指標輸入事件為單點的指標輸入事件(例如單指觸碰該顯示器21),或多點的指標輸入事件(例如兩指同時觸碰該顯示器21)(步驟S58)。若該輸入事件為單點的指標輸入事件,則該第一應用軟體14將該指標輸入事件的指令格式轉換為該投影端設備1可執行之指令格式(步驟S60),並且令該投影端設備1依據轉換後的該單點指標輸入事件執行對應動作(步驟S62),例如移動游標,或選取一物件等。

若於該步驟S58中,判斷該指標輸入事件為多點的指標輸入事件,則該第一應用軟體14進一步判斷該投影端設備1是否可以支援多點觸控輸入之操作(步驟S64)。若該投影端設備1可支援多點觸控輸入(例如該投影端設備1為內建有觸控螢幕的平板電腦或智慧型手機等),則該第一應用軟體14將該指標輸入事件的指令格式轉換為該投影端設備1可執行之指令格式(步驟S66),並且令該投影端設備1依據轉換後的該多點指標輸入事件執行對應動作(步驟S68),例如同時繪製多條線條、或是同時搬移多個物件等。

再者,若於該步驟S64中,判斷該投影端設備1無法支援多點觸控輸入(例如該投影端設備1為只能接受滑鼠點擊或鍵盤輸入的個人電腦),則該第一應用軟體14將該多點指標輸入事件轉換為單點指標輸入事件(步驟S70)。並且,於轉換完成後,再執行上述該步驟S60與步驟S62,以令該投影端設備1依據轉換後的該單點指標輸入事件執行對應動作。

本發明的技術特徵在於,該第一應用軟體14可適時地將多點的指標輸入事件轉換為單點的指標輸入事件,藉以令無法支援多點觸控輸入的投影端設備1也可以適用於該多點觸控系統。於一實施例中,該第一應用軟體14主要可省略該多點指標輸入事件中的至少一個觸控點,並且僅保留其中的一個觸控點。例如,若使用者3同時以三指觸碰該顯示區域211,則該第一應用軟體14捨棄其中的兩點,並僅保留其中一個觸控點,藉此將多點指標輸入事件轉換為單點指標輸入事件。再 例如,若使用者3同時以兩指觸碰該顯示區域211並進行移動,則該第一應用軟體14可控制單一游標高速地往返兩個觸控點所經之軌跡,藉此將多點指標輸入事件轉換為單點指標輸入事件,並令該單點指標輸入事件看起來像是多點觸控的輸入動作。然而,以上所述僅為本發明的較佳具體實例,不應以此為限。

續請同時參閱第九圖與第十圖,分別為本發明的第一具體實施例的補償流程圖與補償示意圖。本發明中,該播放端設備2主要係依據該投影端設備1的數量,於該顯示器21上規劃對應數量的該顯示區域211。而如第十圖所示,該顯示器21上實會存在不屬於任何顯示區域211的部分。於一般的使用情況下,若使用者3觸碰了上述不屬於任何顯示區域211的部分,將不會觸發任何的輸入事件,故該些投影端設備1不會有任何的反應。

為了因應使用者3在操作上的誤差,本發明還設置了一個補償機制。如第九圖所示,該播放端設備2係接受使用者3觸發的輸入事件(步驟S80),並且,判斷該輸入事件的觸發位置是否在該複數顯示區域211的其中之一上,即,判斷該輸入事件是否觸發於一有效位置(步驟S82)。若該輸入事件不是觸發在有效位置,則該播放端設備2暫存該輸入事件(步驟S84),並且回到步驟S80,持續接收使用者3觸發的輸入事件。

接著,若使用者3後續觸發的輸入事件進入到有效位置,則 該播放端設備2會於該輸入事件觸發的該顯示區域211上,補償先前省略且暫存的輸入事件(步驟S86),接著再對該輸入事件進行處理。

如第十圖所示之例子,當使用者觸發了一無效位置(例如點擊),接著移動至一有效位置(例如該第一顯示區域61內),則該播放端設備2會將使用者3於無效位置上觸發的輸入事件,視為與在該第一顯示區域61上觸發的輸入事件為同一事件,因此將其補償於本次的輸入事件中。舉例來說,使用者3要移動游標時,係需經過點擊(down)及滑動(move)兩個步驟,於上述實施例中,雖然該輸入事件中「點擊」的動作是觸發在無效位置,但通過該播放端設備2的補償機制,當使用者3執行「滑動」的動作且進入有效位置(該第一顯示區域61)時,該播放端設備2會將先前省略且暫存的「點擊」動作補償至此一輸入事件中,因此使用者不需要再次點擊該第一顯示區域61,就可以直接通過「滑動」的動作來移動游標。如此一來,可以解決使用者3因觸碰動作的誤差而無法成功操作投影端設備1的問題。

以上所述僅為本發明之較佳具體實例,非因此即侷限本發明之專利範圍,故舉凡運用本發明內容所為之等效變化,均同理皆包含於本發明之範圍內,合予陳明。

1‧‧‧投影端設備

11‧‧‧顯示單元

2‧‧‧播放端設備

21‧‧‧顯示器

211‧‧‧顯示區域

3‧‧‧使用者

Claims (14)

  1. 一種整合式多點觸控系統,包括:複數投影端設備,內部分別安裝有一第一應用軟體,該複數投影端設備分別執行該第一應用軟體,以擷取各自的螢幕畫面,並且對外傳送;一播放端設備,與該複數投影端設備連接,接收各該投影端設備傳來的螢幕畫面,該播放端設備具有一顯示器,並且內部安裝有一第二應用軟體,該播放端設備執行該第二應用軟體,以於該顯示器上規劃複數顯示區域,該複數顯示區域分別對應至該複數投影端設備,並分別顯示該複數投影端設備的該螢幕畫面;其中,該播放端設備接受外部觸發的一輸入事件時,該第二應用軟體判斷該輸入事件所觸發的該顯示區域為何,並對該輸入事件的指令格式進行標準化處理後,將該輸入事件傳送至被觸發的該顯示區域所對應的該投影端設備,令該投影端設備執行對應至該輸入事件的動作。
  2. 如請求項1所述的整合式多點觸控系統,其中該複數投影端設備分別包括:一顯示單元,顯示該投影端設備運作所產生的該螢幕畫面;一第一傳輸單元,與該播放端設備連接,以傳送該螢幕畫面,並接收該輸入事件;一輸入裝置,用以接受外部觸發,以對該投影端設備進行操 作;及一處理單元,電性連接該顯示單元、該第一傳輸單元及該輸入裝置,該處理單元執行該第一應用軟體以運行一畫面處理模組及一事件執行模組,其中該畫面處理模組擷取該顯示單元上顯示的該螢幕畫面,並進行編碼處理,該事件執行模組處理該第一傳輸單元接收的該輸入事件,並令該投影端設備執行與該輸入事件相對應的動作。
  3. 如請求項2所述的整合式多點觸控系統,其中該播放端設備包括:一顯示器;一輸入設備,用以接受外部操控,以觸發該輸入事件;一第二傳輸單元,分別與該複數投影端設備上的該第一傳輸單元連接,以接收該些螢幕畫面,並傳送該輸入事件;及一處理器,電性連接該顯示器、該第二傳輸單元及該輸入設備,該處理器執行該第二應用軟體以運行一畫面展現模組,該畫面展現模組依據該複數投影端設備的數量規劃對應數量的該複數顯示區域,並對各該投影端設備的該螢幕畫面進行解碼處理後,於該複數顯示區域上分別顯示;其中,該處理器更通過該第二應用軟體的執行,判斷該輸入事件所觸發的該顯示區域為何,並對該輸入事件的指令格式進行標準化處理。
  4. 如請求項3所述的整合式多點觸控系統,其中該輸入設備與該顯示器整合為一體,該顯示器為一支援多點觸控之觸控螢幕。
  5. 如請求項3所述的整合式多點觸控系統,其中該第二應用軟體內預設有一標準座標矩陣,該第二應用軟體係依據該標準座標矩陣對該輸入事件的觸發位置的座標進行標準化,並依據標準化座標確認該輸入事件觸發了哪一個該顯示區域。
  6. 如請求項3所述的整合式多點觸控系統,其中該第二應用軟體內預設有一對照表,該第二應用軟體依據該對照表判斷該輸入事件為一指標輸入事件或一預設手勢輸入事件,並且於該輸入事件為指標輸入事件時,將該輸入事件的指令格式轉換為標準化的指令格式;於該輸入事件為預設手勢輸入事件時,依據該對照表之內容,將該輸入事件轉換為對應的人機介面裝置(Human-machine Interface Device,HID)指令。
  7. 如請求項6所述的整合式多點觸控系統,其中該HID指令為鍵盤熱鍵(Hotkey)指令。
  8. 一種請求項1所述的整合式多點觸控系統使用的觸控方法,包括:a)該播放端設備接受外部觸發之輸入事件;b)對該輸入事件的觸發位置的座標進行標準化,藉以判斷該輸入事件的觸發位置屬於該顯示器上的哪一個該顯示區域;c)對該輸入事件進行指令格式的標準化處理(normalize);d)將處理後的該輸入事件回傳至被觸發的該顯示區域所對應的該投影端設備;e)該投影端設備接收該輸入事件,並依據該投影端設備的解析度,將該輸入事件的觸發位置的座標逆轉換(de-normalize)為該投影端設備上的對應座標; f)判斷該輸入事件為單點的指標輸入事件或多點的指標輸入事件;g)若該輸入事件為多點的指標輸入事件,且該投影端設備無法支援多點觸控輸入,將該多點指標輸入事件轉換為單點指標輸入事件;h)將該指標輸入事件轉換為該投影端設備可執行之指令格式;及i)該投影端設備依據轉換後的該指標輸入事件執行對應動作。
  9. 如請求項8所述的觸控方法,其中該步驟a之前更包括下列步驟:a01)該複數投影端設備與該播放端設備建立連線;a02)該播放端設備依據該複數投影端設備的數量,於該顯示器上規劃對應數量的該複數顯示區域;及a03)接收該複數投影端設備傳來的螢幕畫面,並且分別於該複數顯示區域上顯示。
  10. 如請求項8所述的觸控方法,其中該步驟c更包括下列步驟:c1)判斷該輸入事件為一指標輸入事件或一預設手勢輸入事件;c2)若該輸入事件為該指標輸入事件,將該輸入事件的指令格式轉換為標準化的指令格式;及c3)若該輸入事件為該預設手勢輸入事件,依據一對照表的內容,將該輸入事件轉換為對應的一人機介面裝置(Human-machine Interface Device,HID)指令。
  11. 如請求項10所述的觸控方法,其中該步驟e包括下列步驟:e1)該投影端設備接收該播放端設備回傳的該輸入事件,並判斷該輸入事件為該指標輸入事件或該HID指令;e2)若該輸入事件為該HID指令,該投影端設備依據該HID指令執行對應的動作;及e3)若該輸入事件為該指標輸入事件,該投影端設備依據內建的一顯示單元的解析度,將該指標輸入事件的觸發位置的座標轉換為該顯示單元上的對應座標。
  12. 如請求項8所述的觸控方法,其中更包括下列步驟:j)步驟b後,判斷該輸入事件的觸發位置是否在該複數顯示區域的其中之一上;k)若該輸入事件的觸發位置沒有在該複數顯示區域的其中之一,暫存該輸入事件;及l)若該輸入事件的觸發位置在任一該顯示區域上,補償先前暫存的該輸入事件,並執行步驟c至步驟i。
  13. 如請求項8所述的觸控方法,其中更包括一步驟m:步驟f後,若該輸入事件為單點的指標輸入事件,執行步驟h及步驟i。
  14. 如請求項8所述的觸控方法,其中更包括一步驟n:步驟f後,若該輸入事件為多點的指標輸入事件,且該投影端設備可支援多點觸控輸入,執行步驟h及步驟i。
TW102108415A 2013-03-11 2013-03-11 整合式多點觸控系統及其觸控方法 TWI473003B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW102108415A TWI473003B (zh) 2013-03-11 2013-03-11 整合式多點觸控系統及其觸控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW102108415A TWI473003B (zh) 2013-03-11 2013-03-11 整合式多點觸控系統及其觸控方法

Publications (2)

Publication Number Publication Date
TW201435714A TW201435714A (zh) 2014-09-16
TWI473003B true TWI473003B (zh) 2015-02-11

Family

ID=51943381

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102108415A TWI473003B (zh) 2013-03-11 2013-03-11 整合式多點觸控系統及其觸控方法

Country Status (1)

Country Link
TW (1) TWI473003B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060079214A1 (en) * 2004-10-12 2006-04-13 Nokia Corporation Method and apparatus for showing wireless mobile device data content on an external viewer
US20100070842A1 (en) * 2008-09-15 2010-03-18 Andrew Aymeloglu One-click sharing for screenshots and related documents
US20100328469A1 (en) * 2009-06-30 2010-12-30 Kabushiki Kaisha Toshiba Information processing apparatus and capture image transmitting method
TW201203097A (en) * 2010-02-17 2012-01-16 Ibm Metadata capture for screen sharing
TW201310258A (zh) * 2011-08-23 2013-03-01 Htc Corp 行動裝置以及於行動裝置上運行兩種平台系統或應用程式的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060079214A1 (en) * 2004-10-12 2006-04-13 Nokia Corporation Method and apparatus for showing wireless mobile device data content on an external viewer
US20100070842A1 (en) * 2008-09-15 2010-03-18 Andrew Aymeloglu One-click sharing for screenshots and related documents
US20100328469A1 (en) * 2009-06-30 2010-12-30 Kabushiki Kaisha Toshiba Information processing apparatus and capture image transmitting method
TW201203097A (en) * 2010-02-17 2012-01-16 Ibm Metadata capture for screen sharing
TW201310258A (zh) * 2011-08-23 2013-03-01 Htc Corp 行動裝置以及於行動裝置上運行兩種平台系統或應用程式的方法

Also Published As

Publication number Publication date
TW201435714A (zh) 2014-09-16

Similar Documents

Publication Publication Date Title
JP5270537B2 (ja) マルチタッチ利用、ジェスチャ及び実装
US9898180B2 (en) Flexible touch-based scrolling
US8751955B2 (en) Scrollbar user interface for multitouch devices
EP2511812B1 (en) Continuous recognition method of multi-touch gestures from at least two multi-touch input devices
US10353566B2 (en) Semantic zoom animations
US7924271B2 (en) Detecting gestures on multi-event sensitive devices
US8754855B2 (en) Virtual touchpad
TWI511027B (zh) 分屏顯示方法、裝置及其電子設備
TWI502503B (zh) 應用程式物件之多觸控操縱
US20160085357A1 (en) Information processing apparatus, information processing method, and program
US20130067398A1 (en) Semantic Zoom
US20110018828A1 (en) Touch device, control method and control unit for multi-touch environment
US20140223490A1 (en) Apparatus and method for intuitive user interaction between multiple devices
US9491501B2 (en) Mobile terminal, television broadcast receiver, and device linkage method
KR20130062996A (ko) 전자 디바이스 디스플레이 위의 공중에서 오브젝트를 이동시킴으로써 전자 디바이스 어플리케이션과 상호작용하는 방법들 및 장치
US20120266079A1 (en) Usability of cross-device user interfaces
US20130176244A1 (en) Electronic apparatus and display control method
US20120192110A1 (en) Electronic device and information display method thereof
US20100149099A1 (en) Motion sensitive mechanical keyboard
KR101117481B1 (ko) 멀티터치 방식 입력제어 시스템
RU2541223C2 (ru) Устройство обработки информации, способ обработки информации и программа
US20110216015A1 (en) Apparatus and method for directing operation of a software application via a touch-sensitive surface divided into regions associated with respective functions
US20090315841A1 (en) Touchpad Module which is Capable of Interpreting Multi-Object Gestures and Operating Method thereof
EP1835386A2 (en) Touchpad-based input system and method for portable device
US8717323B2 (en) Determining when a touch is processed as a mouse event