TWI405106B

TWI405106B - 互動式多點觸控電腦系統及控制方法

Info

Publication number: TWI405106B
Application number: TW99112868A
Authority: TW
Inventors: Rung Huei Liang; Wen Jong Wu; Chih Ying Yang; Yang Bee Lee; Yi Chu Lin; Cheng Dar Chiang; Shiang Wen Cheng
Original assignee: Wen Jong Wu
Priority date: 2010-04-23
Filing date: 2010-04-23
Publication date: 2013-08-11
Also published as: TW201137694A

Description

互動式多點觸控電腦系統及控制方法

本發明是有關於一種電腦系統，特別是指一種藉由偵測實體物件之狀態而對應運作的互動式多點觸控電腦系統。

電子產品與網路科技在近二十年間迅速發展，也改變了多數人的溝通模式。然而，對於年長者而言，礙於視力、生活習慣及興趣，往往不善於使用這些功能。

為克服前述問題，不論產官學界皆投入資源研發適合年長者操作的電子產品，但許多年長者面對鍵盤、滑鼠等輸入裝置以及電腦使用者介面仍心存恐懼，即便單純用來播放數位相片的數位相框都敬而遠之，更難以適應網路分享的技術。其兒孫因此難以透過先進的電子產品及網路科技與長輩分享生活中的點滴。

因此，本發明之目的，即在提供一種藉由偵測實體物件在互動板上之狀態而產生操控指令的互動式多點觸控電腦系統。

本發明之另一目的，在於提供一種藉由偵測實體物件在互動板上之狀態而產生操控指令的互動式多點觸控控制方法。

於是，本發明互動式多點觸控電腦系統，包含一供光線部分穿透且部分反射的互動板、一對該互動板擷取影像的影像擷取裝置、一物件資料庫、一與該影像擷取裝置及該物件資料庫連接的處理器及一與該處理器連接的投影裝置。

該物件資料庫儲存有多數筆物件識別資料，每一筆物件識別資料包括一對一實體物件所作的特性描述及對應該特性描述的一控制指令。

處理器讀取紀錄於一記憶體的程式軟體而執行該互動式多點觸控控制方法，針對該影像擷取裝置所擷取之影像與該等物件識別資料的特性描述比對，當比對符合，則判斷為有一符合該特性描述之實體物件接觸該互動板，並計算該實體物件之座標，且執行該特性描述所對應之控制指令。

投影裝置依據該處理器執行該控制指令的結果投影至該互動板。

較佳地，該特性描述是一具有方向性的唯一可辨識圖形。該控制指令是依據對應該特性描述的一組檢索條件至一預設之相片資料庫進行檢索；該相簿資料庫中包括多數張數位相片，每一張數位相片預先記錄了供檢索使用的關鍵字；該處理器執行該控制指令還將檢索到的相片進行顯示。當該處理器依據比對結果得知有複數個實體物件接觸該互動板，且當兩兩實體物件座標距離大於一第一臨界值，則分別依據該二實體物件之特性描述所對應的檢索條件進行相片檢索及顯示；當兩兩實體物件座標距離小於該第一臨界值但大於一第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件聯集後進行相片檢索及顯示；當兩兩實體物件座標距離小於該第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件交集後進行相片檢索及顯示。當該處理器依據比對結果得知有複數個實體物件接觸該互動板；且當其中一特性描述是對應「時」之物件，該特性描述對應的控制指令中的檢索條件為一預設之特定時間，則該處理器依據該特定時間與其他實體物件之特性描述所對應的檢索條件交集後進行相片檢索及顯示。

較佳地，該處理器顯示相片的方式，是依據該實體物件之座標呈現一環繞該實體物件的光環，並使該等相片散布於該光環週遭；該處理器還讀取一物理引擎程式而執行該等相片的移動行為之顯示，該物理引擎程式中預先設定該光環以及相片的特性參數，並預先設定該光環與相片之間、該相片與相片之間的物理關係及物理參數。當該特性描述被定義為對應「人」或「事」之物件，該控制指令中的檢索條件即預設之人名或事件名稱之聯集；該控制指令還包括使該預設之人名或事件名稱形同標籤地標示於該光環旁。當該處理器依據連續比對結果得知該實體物件旋轉，則使該光環以及散布於該光環週遭的相片以該實體物件為中心隨之旋轉。當特性描述被定義為對應「時」之物件，該控制指令中的檢索條件即一預設之特定時間；該控制指令還包括使該預設之時間形同標籤地標示於該光環旁。當該處理器依據連續比對結果得知該實體物件順時針旋轉，則使設定為檢索條件的預設時間往後調整為較晚之時間；當該處理器依據連續比對結果得知該實體物件逆時針旋轉，則使設定為檢索條件的預設時間往前調整為較早之時間；再依據調整後的時間為檢索條件重新檢索。當特性描述被定義為對應「地」之物件，該控制指令中的檢索條件即預設之地名之聯集；該控制指令還包括使該預設之地名形同標籤地標示於該光環旁。該處理器使該光環上出現可轉動的指針，並以該等標籤位置作為刻度；當該處理器依據連續比對結果得知該實體物件順時針旋轉，則使該指針呈現順時針轉動而指向下一標籤；當該處理器依據連續比對結果得知該實體物件逆時針旋轉，則使該等標籤逆時針旋轉，再依據該指針正指之標籤所代表的地名為檢索條件重新檢索。

較佳地，該處理器依據該實體物件之座標為中心，並以使該等檢索到的相片散布於該實體物件周圍為原則，計算該等相片之預設座標，而使該等相片顯示於預設座標。該物件資料庫中的其中一筆物件識別資料的特性描述是一實體物件所形成之陰影尺寸，當該處理器針對擷取之影像比對符合該特性描述，則判斷為有一手指接觸，該特性描述對應的控制指令是使該手指接觸處的相片放大顯示。

較佳地，該系統還包含一與該處理器連接的通訊模組，該通訊模組與一遠端之JAVA訊息伺服器連接，JAVA訊息伺服器將該處理器透過該通訊模組傳出之即時訊息處理後傳送至預設之另一互動式多點觸控電腦系統而執行對應的顯示。該物件資料庫中的其中一筆物件識別資料的特性描述是一實體物件所形成之陰影尺寸，當該處理器針對擷取之影像比對符合該特性描述，則判斷為有一手指接觸，該特性描述對應的控制指令是在該實體物件之座標顯示一第一互動效果。當該處理器自該通訊模組接收來自另一互動式多點觸控電腦系統傳來之帶座標資訊的手指接觸訊息，則在該互動板對應該手指接觸訊息中之座標處顯示一第二互動效果。

較佳地，在該系統啟動時先進入一環境模式，該處理器播放一二十四節氣動畫並在當時之節氣位置進行明顯標示，並透過該投影裝置投影至該互動板；當該二十四節氣動畫播放完畢，該處理器以當時之節氣為檢索條件至一預設之相片資料庫進行檢索，並將檢索結果進行播放；在該環境模式下，若比對判斷有該實體物件接觸該互動板，則結束該環境模式。

較佳地，該系統還包含一對該互動板投射紅外光的紅外線投光器，且該影像擷取裝置是一紅外線攝影機。

本發明之功效在於：利用二維圖形等特性描述辨識人們對實體物件操控行為，做出特定之反應，並透過預先設定群組，使得近端的實體物件操作行為能同步在遠端反應，感覺上拉近彼此距離；整體而言，提供一種自然且親切的操作介面，讓不熟悉電子產品的使用者也能輕鬆透過操作實體物件而操控該電腦系統。

有關本發明之前述及其他技術內容、特點與功效，在以下配合參考圖式之一個較佳實施例的詳細說明中，將可清楚的呈現。

參閱圖1及圖2，本發明互動式多點觸控電腦系統100之較佳實施例呈一桌形外觀，包含一當作桌面使用的互動板1，及安裝於互動板1下方的一紅外線投光器2、一在本實施例為紅外線攝影機3的影像擷取裝置、一投影裝置4、一處理器5、一記憶體6，與一通訊模組7。

互動板1可供實體物件8擺放其上，並供光線部分穿透、部分反射，例如由一透明壓克力板11下方黏貼投影布幕12製成，投影布幕12並具有使投射其上的光線散射之功能。紅外線投光器2由下往上對該互動板1投射紅外光(IR)，當任一實體物件8接觸互動板1上表面，紅外光即受阻而反射回來由紅外線攝影機3接收。

為了使處理器5能夠針對紅外線攝影機3擷取之影像進行適當處理，記憶體6儲存有互動式多點觸控控制方法之程式軟體及一物件資料庫60。物件資料庫60中儲存有多數筆物件識別資料，每一筆物件識別資料包括一對一實體物件8所作的特性描述及對應該特性描述的一控制指令。本實施例之特性描述有的是具方向性之可辨識的唯一圖形，例如reacTIVision 1.4所提供的的二維圖形，有的是一些條件描述。下表列舉五筆物件識別資料。

值得一提的是，本實施例將實體物件除手指之外，區分為人、事/物、時、地四大類，以下簡稱人的物件、事的物件、時間物件及地點物件，分別預先在物件底部設有二維圖形；不同類型的物件擺放在互動板1上，即觸發不同的互動態樣，且可多個物件同時擺放在互動板1上，但時間物件最多只擺一個。有關各種互動態樣將詳述於下文。

處理器5與紅外線攝影機3及記憶體6連接，讀取該互動式多點觸控控制方法之程式軟體而執行互動式多點觸控控制方法。以下配合圖3及圖4說明本實施例互動式多點觸控電腦系統100之處理器5執行該互動式多點觸控控制方法之整體技術。

當該互動式多點觸控電腦系統100啟動，如圖3所示，先進入環境模式(步驟S1)。在環境模式下，處理器5播放一如圖5所示的二十四節氣動畫，並在當時之節氣位置進行明顯標示，例如加強亮度(步驟S11)，當動畫播放完畢，則以當時之節氣為時間檢索條件，至一預設之相片資料庫進行檢索，並將檢索結果進行播放(步驟S12)，播放之影像透過投影裝置4投影至互動板1。前述相片資料庫，在本實施例是一儲存於遠端伺服器9的網路相簿資料庫舉例說明，該網路相簿的伺服器9必須有可以對不同相片做tag的功能。處理器3下達指令通過通訊模組7送出，遠端伺服器9收到指令，檢索完成後將檔案傳回讓處理器5播放。

在執行前述步驟S11及S12同時，紅外線投光器2對互動板1投射紅外光，且紅外線攝影機3連續擷取影像傳送至處理器5。處理器5針對該影像與物件資料庫60中的特性描述進行比對，判斷是否有實體物件接觸互動板(步驟S21)。例如，當影像中某一處與陰影尺寸描述符合，則判斷為有手指接觸互動板1並計算得知實體物件之座標；此時，一方面在實體物件座標處顯示一第一互動效果，例如光暈(步驟S22)，顯示之影像透過投影裝置4投影至互動板1，也就是對使用者手指觸壓互動板1的行為產生直接互動；另一方面，產生手指觸碰訊息並透過通訊模組7傳送至一Java訊息伺服器(圖未示)，再傳遞至預先設定好之另一互動式多點觸控電腦系統100’(步驟S23)。接收到從遠端傳來之手指觸碰訊息的互動式多點觸控電腦系統100’，則是在對應之座標處顯示一第二互動效果，例如水波紋，模擬有看不見的手指觸碰其互動板1’而引起漣漪，讓兩者產生互動的效果。需說明的是，前述步驟S21至S23，在以下要說明的互動模式中亦適用。

若影像比對時，影像中某一處與其中一二維圖形符合即使用者將預先貼有二維圖形的實體物件─例如孫女的學步鞋，放置於互動板1上方；則處理器5判斷為特定實體物件放置於互動板1並計算實體物件之座標；此時，終止環境模式而切換為互動模式(步驟S24)。

當該互動式多點觸控電腦系統100進入互動模式，執行流程主要如圖4所示。

針對已比對符合其中一二維圖形的影像，處理器5讀取對應該二維圖形的控制指令─例如依據預設之關鍵字「孫女」、「小荳荳」、「娃娃」為檢索條件至網路相簿http://picasaweb.google.com.tw/...檢索相片(步驟S31)，接著並播放顯示(步驟S32)，顯示影像透過投影裝置4投影至互動板1。本實施例中，針對人的物件以及事的物件，處理器5顯示相片的方式，是如圖6所示，依據實體物件之座標呈現一環繞該實體物件之光環，使「孫女」、「小荳荳」、「娃娃」之類的人名關鍵字形同標籤地標示於光環旁，並使該等相片散佈於該光環週遭。原則上，處理器5是依據實體物件之座標為中心，並以相片平均散佈於該實體物件周圍為原則，計算該等相片之預設座標，而使該等相片顯示於預設座標位置。

在近端顯示相片之外，處理器5還產生一帶有檢索條件的觸發指令並傳送到Java訊息伺服器，該伺服器進行資料庫檢索後將檢索結果傳遞到預設的遠端互動式多點觸控電腦系統100’，該遠端的互動式多點觸控電腦系統100’則執行對應的顯示。

設若是時間物件擺放於互動板1上，執行步驟S31及S32為共同流程，但除顯示環繞實體物件之光環之外，還會呈現如圖7所示的附刻度的光圈，且一預設的對應該時間物件的時間或其他時間相關字詞數字形同標籤地標示於光環旁。

設若是地點物件擺放於互動板1上，執行步驟S31及S32為共同流程，但還會在光環上出現可轉動的指針，且例如「家」、「學校」、「公園」之類的地名關鍵字形同標籤地標示於光環旁，該等標籤位置作為刻度，指針正指其中一標籤位置。該指針的操作方式說明於下文。

另一方面，紅外線攝影機3持續傳送擷取影像至處理器5，處理器5依據連續影像比對結果判斷互動板1上實體物件8之狀態(步驟S41)。當透過連續影像比對發現實體物件移動或旋轉，則呼叫一同樣儲存於該記憶體6的二維物理引擎程式，例如Box2D Flash Actionscript 3來處理移動行為，使光環及相片仿物理運動態樣移動或旋轉(步驟S42)。在此步驟中，由於程式中預先設定有光環、相片的特性參數，例如大小、質量、摩擦係數、彈性係數等，以及預先設定光環與相片之間、相片與相片之間的物理關係，處理器5執行物理引擎程式時，將要顯示的相片套用該等特性參數即可賦予相片如同實體的物理特性，讓光環與相片再移動或旋轉時產生碰撞、拖曳、相吸或互斥等行為。

以下說明本實施例對於各種類實體物件旋轉行為所對應的互動反應。

人或事的物件：

當處理器5在步驟S41中比對得知實體物件旋轉，則使光環以及散佈於光環週遭的相片，以該實體物件為中心隨之旋轉。

時間物件：

當處理器5在步驟S41中比對得知實體物件順時針旋轉，則使原先設定為檢索條件的預設特定時間往後調整為較晚的時間；若得知實體物件逆時針旋轉，則使該預設特定時間往前調整為較早的時間。接著，再依據調整後的時間作為檢索條件重新執行步驟S31及S32。此外，在顯示時間調整的畫面同時，還輸出齒輪轉動的音效，模擬實體時鐘調整轉動的聲音。

地點物件：

當處理器5在步驟S41中比對得知實體物件順時針旋轉，則使指針順時針轉動而指向下一標籤；當得知實體物件逆時針旋轉，則使該等標籤逆時針旋轉。接著，再依據指針正指的標籤所代表的地名為檢索條件重新檢索。

互動板1上的實體物件，不以單一個為限，以下說明本實施例互動式多點觸控電腦系統100對於多數個實體物件同時接觸互動板1的處理方式。

在步驟S41中，若處理器5依據連續影像比對結果判斷互動板1上出現另一實體物件8，則先判斷接觸互動板1的實體物件中，是否有時間物件(步驟S43)？若有，則使非時間物件的檢索條件與時間物件的時間檢索條件進行交集，然後進行檢索(步驟S50)，再將檢索結果進行播放(步驟S51)。也就是說，只要時間物件擺放於互動板1上，即可影響同樣擺放於互動板1上的其他物件。

若在步驟S43中判斷無時間物件，則計算兩兩實體物件之間的座標距離。當座標距離大於一預設的第一臨界值δ₁ ，則分別依據該二實體物件之二維圖形所對應的檢索條件進行相片檢索及顯示，也就是說，該二實體物件互不影響。當座標距離小於等於該第一臨界值δ₁ 但大於一第二臨界值δ₂ (步驟S44)，則依據該二實體物件之二維圖形分別對應的檢索條件聯集後進行相片檢索及顯示(步驟S45、S46)。當座標距離小於等於第二臨界值δ₂ (步驟S47)，則依據該二實體物件之二維圖形所對應的檢索條件交集後進行相片檢索及顯示(步驟S48、S49)。

在互動模式下，當處理器5針對擷取的影像比對符合手指的特性描述，則判斷為有手指接觸，則執行控制指令使該手指接觸處的相片放大顯示。

綜上所述，本發明互動式多點觸控電腦系統100藉由實體物件的偵測觸發控制指令，並設計各種互動型態，例如擺放實體物件觸發相片顯示、相片隨著實體物件移動及旋轉、藉由旋轉實體物件調整檢索條件、手指接觸顯示光暈等等，更可與遠端互動式多點觸控電腦系統100’連線，讓遠端發生的事件透過網路同步呈現在眼前，拉近使用者的距離。藉由本發明，年長者不需要操作滑鼠或鍵盤，只要利用其熟悉的實體物件即可進行電腦系統之操控及遠端聯繫，故確實能達成本發明之目的。

惟以上所述者，僅為本發明之較佳實施例而已，當不能以此限定本發明實施之範圍，即大凡依本發明申請專利範圍及發明說明內容所作之簡單的等效變化與修飾，皆仍屬本發明專利涵蓋之範圍內。

100、100’‧‧‧互動式多點觸控電腦系統

1、1’‧‧‧互動板

11‧‧‧壓克力板

12‧‧‧投影布幕

2‧‧‧紅外線投光器

3‧‧‧紅外線攝影機

4‧‧‧投影裝置

5‧‧‧處理器

6‧‧‧記憶體

60‧‧‧物件資料庫

7‧‧‧通訊模組

8‧‧‧實體物件

9‧‧‧遠端伺服器

S1、S11、S12、S21-23、S31-32、S41-51‧‧‧步驟

圖1是一系統方塊圖，說明本發明互動式多點觸控電腦系統的較佳實施例；

圖2是一示意圖，說明該實施例中紅外線投光器、紅外線攝影機、投影裝置與互動板配合的關係；

圖3是本發明互動式多點觸控控制方法之較佳實施例的流程圖，說明兩種模式之切換；

圖4是一流程圖，說明本實施例中互動模式的主要流程；

圖5是一在環境模式時播放的二十四節氣動畫畫面；及

圖6、圖7是投影在互動板的畫面示意圖。

S31-32．．．步驟

S41-51．．．步驟

Claims

一種互動式多點觸控電腦系統，包含：一互動板，供光線部分穿透、部分反射；一影像擷取裝置，對該互動板擷取影像；一物件資料庫，儲存有多數筆物件識別資料，每一筆物件識別資料包括一對一實體物件所作的特性描述及對應該特性描述的一控制指令；一處理器，與該影像擷取裝置及該物件資料庫連接，針對該影像擷取裝置所擷取之影像與該等物件識別資料的特性描述比對，當比對符合，則判斷為符合該特性描述之實體物件接觸該互動板，並計算該實體物件之座標，且執行該特性描述所對應之控制指令；及一投影裝置，與該處理器連接，依據該處理器執行該控制指令的結果投影至該互動板；其中，該特性描述是一具方向性之可辨識唯一圖形；該控制指令是依據對應該特性描述的一組檢索條件至一預設之相片資料庫進行檢索；該相簿資料庫中包括多數張數位相片，每一張數位相片預先記錄了供檢索使用的關鍵字；該處理器執行該控制指令還將檢索到的相片進行顯示；當該處理器依據比對結果得知有複數個實體物件接觸該互動板，且當兩兩實體物件座標距離大於一第一臨界值，則分別依據該二實體物件之特性描述所對應的檢索條件進行相片檢索及顯示；當兩兩實體物件座標距離小於該第一臨界值但大於一第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件聯集後進行相片檢索及顯示；當兩兩實體物件座標距離小於該第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件交集後進行相片檢索及顯示。
依據申請專利範圍第1項所述之互動式多點觸控電腦系統，其中，當該處理器依據比對結果得知有複數個實體物件接觸該互動板；且當其中一特性描述是對應「時」之物件，該特性描述對應的控制指令中的檢索條件為一預設之特定時間，則該處理器依據該特定時間與其他實體物件之特性描述所對應的檢索條件交集後進行相片檢索及顯示。
依據申請專利範圍第1項所述之互動式多點觸控電腦系統，其中，該處理器顯示相片的方式，是依據該實體物件之座標呈現一環繞該實體物件的光環，並使該等相片散布於該光環週遭；該處理器還讀取一物理引擎程式而執行該等相片的移動行為之顯示，該物理引擎程式中預先設定該光環以及相片的特性參數，並預先設定該光環與相片之間、該相片與相片之間的物理關係及物理參數。
依據申請專利範圍第3項所述之互動式多點觸控電腦系統，其中，當該特性描述被定義為對應「人」或「事」之物件，該控制指令中的檢索條件即預設之人名或事件名稱之聯集；該控制指令還包括使該預設之人名或事件名稱形同標籤地標示於該光環旁。
依據申請專利範圍第4項所述之互動式多點觸控電腦系統，其中，當該處理器依據連續比對結果得知該實體物件旋轉，則使該光環以及散布於該光環週遭的相片以該實體物件為中心隨之旋轉。
依據申請專利範圍第3項所述之互動式多點觸控電腦系統，其中，當特性描述被定義為對應「時」之物件，該控制指令中的檢索條件即一預設之特定時間；該控制指令還包括使該預設之時間形同標籤地標示於該光環旁。
依據申請專利範圍第6項所述之互動式多點觸控電腦系統，其中，當該處理器依據連續比對結果得知該實體物件順時針旋轉，則使設定為檢索條件的預設時間往後調整為較晚之時間；當該處理器依據連續比對結果得知該實體物件逆時針旋轉，則使設定為檢索條件的預設時間往前調整為較早之時間；再依據調整後的時間為檢索條件重新檢索。
依據申請專利範圍第3項所述之互動式多點觸控電腦系統，其中，當特性描述被定義為對應「地」之物件，該控制指令中的檢索條件即預設之地名之聯集；該控制指令還包括使該預設之地名形同標籤地標示於該光環旁。
依據申請專利範圍第8項所述之互動式多點觸控電腦系統，其中，該處理器使該光環上出現可轉動的指針，並以該等標籤位置作為刻度；當該處理器依據連續比對結果得知該實體物件順時針旋轉，則使該指針呈現順時針轉動而指向下一標籤；當該處理器依據連續比對結果得知該實體物件逆時針旋轉，則使該等標籤逆時針旋轉，再依據該指針正指之標籤所代表的地名為檢索條件重新檢索。
依據申請專利範圍第3項所述之互動式多點觸控電腦系統，其中，該處理器依據該實體物件之座標為中心，並以使該等檢索到的相片散布於該實體物件周圍為原則，計算該等相片之預設座標，而使該等相片顯示於預設座標。
依據申請專利範圍第10項所述之互動式多點觸控電腦系統，其中，該物件資料庫中的其中一筆物件識別資料的特性描述是一實體物件所形成之陰影尺寸，當該處理器針對擷取之影像比對符合該特性描述，則判斷為有一手指接觸，該特性描述對應的控制指令是使該手指接觸處的相片放大顯示。
依據申請專利範圍第1至11項中任一項所述之互動式多點觸控電腦系統，還包含一與該處理器連接的通訊模組，該通訊模組與一遠端之JAVA訊息伺服器連接，JAVA訊息伺服器將該處理器透過該通訊模組傳出之即時訊息處理後傳送至預設之另一互動式多點觸控電腦系統而執行對應的顯示。
依據申請專利範圍第12項所述之互動式多點觸控電腦系統，其中，該物件資料庫中的其中一筆物件識別資料的特性描述是一實體物件所形成之陰影尺寸，當該處理器針對擷取之影像比對符合該特性描述，則判斷為有一手指接觸，該特性描述對應的控制指令是在該實體物件之座標顯示一第一互動效果。
依據申請專利範圍第13項所述之互動式多點觸控電腦系統，當該處理器自該通訊模組接收來自另一互動式多點觸控電腦系統傳來之帶座標資訊的手指接觸訊息，則在該互動板對應該手指接觸訊息中之座標處顯示一第二互動效果。
依據申請專利範圍第1項所述之互動式多點觸控電腦系統，其中，在該系統啟動時先進入一環境模式，該處理器播放一二十四節氣動畫並在當時之節氣位置進行明顯標示，並透過該投影裝置投影至該互動板；當該二十四節氣動畫播放完畢，該處理器以當時之節氣為檢索條件至一預設之相片資料庫進行檢索，並將檢索結果進行播放；在該環境模式下，若比對判斷有該實體物件接觸該互動板，則結束該環境模式。
依據申請專利範圍第1項所述之互動式多點觸控電腦系統，還包含一對該互動板投射紅外光的紅外線投光器，且該影像擷取裝置是一紅外線攝影機。
一種互動式多點觸控控制方法，由一處理器讀取紀錄於一記憶體的程式軟體而執行，該處理器與一影像擷取裝置及一預先建立的物件資料庫連接，該物件資料庫中儲存有多數筆物件識別資料，每一筆物件識別資料包括一對一實體物件所作的特性描述及對應該特性描述的一控制指令；該方法包含以下步驟：接收該影像擷取裝置擷取之多數影像；針對該影像與該物件資料庫中該等物件識別資料的特性描述比對，當比對符合，則判斷為有一符合該特性描述之實體物件接觸，並計算該實體物件之座標；及執行該特性描述所對應之一控制指令；其中，該控制指令是依據對應該特性描述的一組檢索條件至一預設之相片資料庫進行檢索；該相簿資料庫中包括多數張數位相片，每一張數位相片預先記錄了供檢索使用的關鍵字；該處理器執行該控制指令還將檢索到的相片進行顯示；本方法還依據比對結果得知有複數個實體物件接觸該互動板，且當兩兩實體物件座標距離大於一第一臨界值，則分別依據該二實體物件之特性描述所對應的檢索條件進行相片檢索及顯示；當兩兩實體物件座標距離小於該第一臨界值但大於一第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件聯集後進行相片檢索及顯示；當兩兩實體物件座標距離小於該第二臨界值，則依據該二實體物件之特性描述所對應的檢索條件交集後進行相片檢索及顯示。
依據申請專利範圍第17項所述之互動式多點觸控控制方法，還包含在系統啟動後先執行的環境模式下的步驟：放一二十四節氣動畫並在當時之節氣位置進行明顯標示；當該二十四節氣動畫播放完畢，以當時之節氣為檢索條件至一預設之相片資料庫進行檢索，並將檢索結果進行播放。
依據申請專利範圍第17項所述之互動式多點觸控控制方法，其中，所執行的控制指令，是依據該實體物件之座標呈現一環繞該實體物件的光環，並使該等相片散布於該光環週遭；該方法還包含讀取一物理引擎程式而執行該等相片的移動行為之顯示，該物理引擎程式中預先設定該光環以及相片的特性參數，並預先設定該光環與相片之間、該相片與相片之間的物理關係及物理參數。