TWI567588B - 轉換經接收觸碰輸入 - Google Patents

轉換經接收觸碰輸入 Download PDF

Info

Publication number
TWI567588B
TWI567588B TW104130915A TW104130915A TWI567588B TW I567588 B TWI567588 B TW I567588B TW 104130915 A TW104130915 A TW 104130915A TW 104130915 A TW104130915 A TW 104130915A TW I567588 B TWI567588 B TW I567588B
Authority
TW
Taiwan
Prior art keywords
touch input
event type
pad
touch
input associated
Prior art date
Application number
TW104130915A
Other languages
English (en)
Other versions
TW201633064A (zh
Inventor
亞曼 阿里米安
迪歐古 史魯柏 德 梨瑪
布萊德利 尼爾 蘇格斯
伊曼紐 阿默
尼可拉斯Ｐ 里昂司
伊凡 威爾斯
露絲 安 林
Original Assignee
惠普研發公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 惠普研發公司 filed Critical 惠普研發公司
Publication of TW201633064A publication Critical patent/TW201633064A/zh
Application granted granted Critical
Publication of TWI567588B publication Critical patent/TWI567588B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1601—Constructional details related to the housing of computer displays, e.g. of CRT monitors, of flat displays
    • G06F1/1605—Multimedia displays, e.g. with integrated or attached speakers, cameras, microphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1639—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being based on projection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1662—Details related to the integrated keyboard
    • G06F1/1673—Arrangements for projecting a virtual keyboard
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G06F3/0426—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected tracking fingers with respect to a virtual keyboard projected or printed on the surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Description

轉換經接收觸碰輸入
本發明係有關觸碰輸入之轉換的方法、系統及儲存媒體。
許多計算系統係包含至少一顯示器以及至少一輸入裝置。該顯示器例如可包含一監視器、一螢幕、或類似者。範例的輸入裝置係包含一滑鼠、一鍵盤、一觸控板、或類似者。某些計算系統係包含一觸碰感測的(touch-sensitive)顯示器，以顯示該計算系統的輸出並且接收實體(例如，觸碰)輸入。
在一實施例中揭示一種方法，其係包括：在一計算系統的一觸碰感測墊上接收和一第一事件類型相關的一觸碰輸入；決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及根據該決定來傳送相關一事件類型的該觸碰輸入至一應用程式。
在另一實施例中揭示一種系統，其係包括：一支撐結構，其包含一底座、一從該底座向上延伸的直立的構件、以及一懸臂的頂端，其係從該直立的構件向外延伸並且包含一摺疊反射鏡以及複數個感測器；一投影器組件，其可附接至該直立的構件；一計算裝置，其可附接至該投影器組件；以及一觸碰感測墊，其係通訊地耦接至該計算裝置，該投影器是 用以投影一影像於該觸碰感測墊上，其中該投影器是用以向上投影該影像以從該反射鏡反射出而到該墊上，並且其中該計算裝置是用以使得：該墊接收和一第一事件類型相關的一觸碰輸入；該計算裝置決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及該計算裝置根據該決定來傳送相關一事件類型的該觸碰輸入至一執行在該計算裝置上的應用程式。
在又另一實施例中揭示一種非暫態的機器可讀取的儲存媒體，其係包括可藉由一計算系統的一處理資源執行的指令，該計算系統係包括一觸碰感測墊、一用以將影像投影在該墊上的投影器組件、以及複數個被設置在該墊之上而且指向該墊的感測器，該些指令是可執行以：在該墊上接收和一第一事件類型相關的一觸碰輸入；決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及根據該決定來傳送相關一事件類型的該觸碰輸入至一可執行在該處理資源上的應用程式。
15‧‧‧支撐表面
25‧‧‧指示筆
26‧‧‧尖端
35‧‧‧手
40‧‧‧物體
100‧‧‧計算系統
110‧‧‧支撐結構
120‧‧‧底座
120A‧‧‧第一端(前端)
120B‧‧‧第二端(後端)
122‧‧‧凸起的部分
140‧‧‧直立的構件
140A‧‧‧第一端(上方端)
140B‧‧‧第二端(下方端)
140C‧‧‧第一側(正面側)
140D‧‧‧第二側(背面側)
150‧‧‧計算裝置
150A‧‧‧第一側(頂端側)
150B‧‧‧第二側(底部側)
150C‧‧‧正面側
150D‧‧‧背面側
152‧‧‧顯示器
155‧‧‧中心軸(中心線)
160‧‧‧頂端
160A‧‧‧第一端(近端)
160B‧‧‧第二端(遠端)
160C‧‧‧頂表面
160D‧‧‧底表面
162‧‧‧反射鏡
162A‧‧‧高度反射的表面
164‧‧‧感測器束
164A‧‧‧RGB相機
164B‧‧‧IR相機
164C‧‧‧深度相機(深度感測器)
164D‧‧‧環境光感測器
168‧‧‧空間
170‧‧‧分割引擎
180‧‧‧投影器單元
182‧‧‧殼體
182A‧‧‧第一端(上方端)
182B‧‧‧第二端(下方端)
183‧‧‧凹處
184‧‧‧投影器組件
184A‧‧‧第一端(上方端)
184B‧‧‧第二端(下方端)
186‧‧‧耦接構件(安裝構件)
187‧‧‧可見光
188‧‧‧投影器顯示空間
188L‧‧‧長度
188W‧‧‧寬度
200‧‧‧投影螢幕
200A‧‧‧第一側(前側)
200B‧‧‧第二側(後側)
202‧‧‧觸碰感測的區域
205‧‧‧中心軸(中心線)
700‧‧‧系統
702‧‧‧硬體
704‧‧‧韌體
706‧‧‧觸碰處理控制器(TPC)
708‧‧‧作業系統(OS)
710‧‧‧應用程式
810‧‧‧處理資源
820‧‧‧機器可讀取的儲存媒體
822、824、826‧‧‧指令
900‧‧‧方法
905、910、915‧‧‧步驟
以下的詳細說明係參考圖式，其中：圖1是一種範例的計算系統的概要立體圖；圖2是圖1的範例的計算系統的另一概要立體圖；圖3是圖1的範例的計算系統的概要側視圖；圖4是圖1的範例的計算系統的概要前視圖；圖5是圖1的範例的計算系統在一範例的操作期間的概要側視圖；圖6是圖1的範例的計算系統在一範例的操作期間的概要前視圖； 圖7是描繪一種用於智能地處理在一觸碰致能的裝置上接收到的觸碰輸入之系統的管線，以作為一個例子；圖8是圖1的計算系統的一範例的部分的方塊圖；以及圖9是描繪實施一個例子的步驟的流程圖。
現在參照該圖式，圖1-6是一種包括一分割(segmentation)引擎170之範例的計算系統100的概要的視圖。如同將會進一步敘述的，在某些例子中，分割引擎170可以根據一捕捉到的影像來決定代表一物體的至少一外部的邊緣之一分割邊界。在圖1-6的例子中，系統100大致係包括一支撐結構110、一計算裝置150、一投影器單元180、以及一投影螢幕200。
計算裝置150可包括任何符合在此揭露的原理之適當的計算裝置。如同在此所用的，一"計算裝置"可包括一電子顯示裝置、一智慧型手機、一平板電腦、一晶片組、一全一體化電腦(例如，一種包括一顯示裝置之裝置亦容置有電腦的處理資源)、一桌上型電腦、一筆記型電腦、工作站、伺服器、任何其它的處理裝置或設備、或是其之一組合。在此例子中，裝置150是一全一體化電腦，其具有一中心軸或是中心線155、第一或是頂端側150A、一與該頂端側150A軸向相對的第二或是底部側150B、一軸向地延伸在側150A與150B之間的正面側150C、一亦軸向地延伸在側150A與150B之間而且大致與正面側150C徑向相對的背面側150D。一顯示器152係沿著正面側150C而被設置，並且界定計算系統100的一觀看表面以顯示影像以供系統100的使用者觀看。在此所述的例子中，一顯示器可包含任何適合用於顯示影像、視訊、或類似者之技術的構件。
在某些例子中，顯示器152可以是一觸碰感測的顯示器。在此所述的例子中，一觸碰感測的顯示器例如可包含任何用於顯示影像、視訊、或類似者之適當的技術(例如，構件)，並且可包含任何用於偵測實體接觸(例如，觸碰輸入)之適當的技術(例如，構件)，例如是一電阻式、電容式、表面聲波、紅外線(IR)、應變計、光學成像、聲波脈衝識別、色散(dispersive)信號感測、或是內嵌式(in-cell)系統、或類似者。在此所述的例子中，顯示器152可被稱為一觸碰感測的顯示器152。裝置150可以進一步包含一相機154，例如，其可以是一網路攝影機。在某些例子中，相機154可以捕捉一位在顯示器152的前面的使用者的影像。在某些例子中，裝置150亦可包含一麥克風或是其它裝置，以接收聲音輸入(例如，來自使用者的語音輸入)。
在圖1-6的例子中，支撐結構110係包含一底座120、一直立的構件140、以及一頂端160。底座120係包含一第一或是前端120A、以及一第二或是後端120B。底座120可以接觸一支撐表面15，以支撐系統100的至少一部分的構件(例如，構件140、單元180、裝置150、頂端160、等等)的重量。在某些例子中，底座120可以在系統100被配置以用於操作時，以此種方式接觸支撐表面15。在圖1-6的例子中，底座120的前端120A係包含一凸起的部分122，例如當底座120如同在圖2中所繪地被設置在支撐表面15上時，該凸起的部分122可被設置在支撐表面15之上而且和支撐表面15分開(此係在部分122與表面15之間產生一空間或間隙)。在此種例子中，投影螢幕200的一側邊的一部分可被設置在部分122與表面15之間所形成的空間中(例如，其係被接收在該空間之內)。在此種例子中，將螢幕200的一部分設置在藉由部分122及表面15所產生的空間之內可以協助螢幕200 之適當的對準。在其它例子中，其它適當的方法或裝置亦可被用來協助螢幕200的對準。
直立的構件140係包含一第一或是上方端140A、一和該上方端140A相對的第二或是下方端140B、一延伸在端140A與140B之間的第一或是正面側140C、以及一和該正面側140C相對而且亦延伸在端140A與140B之間的第二或是背面側140D。構件140的下方端140B係耦接至底座120的後端120B，使得構件140係從支撐表面15實質向上延伸。
頂端160係包含一第一或是近端160A、一和該近端160A相對的第二或是遠端160B、一延伸在端160A與160B之間的頂表面160C、以及一和該頂表面160C相對而且亦延伸在端160A與160B之間的底表面160D。頂端160的近端160A係耦接至直立的構件140的上方端140A，使得遠端160B係從直立的構件140的上方端140A向外的延伸。就此而論，在圖2所示的例子中，頂端160係在端160A之處被支撐(因而不是在端160B之處)，並且在此可以被稱為一懸臂的頂端。在某些例子中，底座120、構件140、以及頂端160可以單體地加以形成。在其它例子中，底座120、構件140、以及頂端160中的兩個或多個可以是由個別的片所形成的(亦即，並非單體地形成)。
投影螢幕200可包含一中心軸或是中心線205、一第一或是前側200A、以及一和該前側200A軸向地相對的第二或是後側200B。在圖1-6的例子中，螢幕200可包括一與軸205實質對準的觸碰感測的區域202。區域202可包括如上所述的任何用於偵測實體接觸(例如，觸碰輸入)之適當的技術(例如，電容式觸控墊(touch mat))。例如，觸碰感測的區域202可包 括任何用於偵測(以及在某些例子是追蹤)使用者的一或多個觸碰輸入之適當的技術，以使得該使用者能夠經由此種觸碰輸入來與正在藉由裝置150或是其它計算裝置執行的軟體互動。在圖1-6的例子中，區域202係延伸在小於全部的螢幕200之上。在其它例子中，區域202可以延伸在實質全部的螢幕200之上(例如，可以是和螢幕200實質相同範圍的)。在此所述的例子中，投影螢幕200可以是任何適當的平面物體，例如一墊(例如，一觸控墊)、桌面、紙張、等等。在某些例子中，投影螢幕200可以被水平的設置(或是大致或實質水平的)。例如，螢幕200可被設置在支撐表面15上，而該支撐表面15可以是水平的(或是大致或實質水平的)。
如上所述，螢幕200可以是與結構110的底座120對準，以協助螢幕200之適當的對準(例如是至少在系統100的操作期間)。在圖1-6的例子中，螢幕200的後側200B可被設置在底座120的凸起的部分122與支撐表面15之間，使得後端200B係與底座120的前側120A對準，以協助螢幕200與系統100的其它構件之適當的整體對準(以及特別是區域202與系統100的其它構件的適當的對準)。在某些例子中，螢幕200可以與裝置150對準，使得裝置150的中心線155係與螢幕200的中心線205實質對準。在其它例子中，螢幕200可以是與裝置150不同地對準。
在某些例子中，螢幕200的區域202以及裝置150可以是彼此通訊地連接(例如，電耦接)，使得藉由區域202接收到的使用者輸入可以被傳遞到裝置150。區域202以及裝置150可以經由任何適當的有線或無線的通訊技術或機構來和彼此通訊，例如是WI-FI、藍芽、超音波技術、電纜線、電導線、導電體、具有磁性保持力的電性彈簧加載的頂針(pogo pin)、 或類似者、或是其之一組合。在圖1-6的例子中，被設置在螢幕200的後側200B上之露出的電性接點可以接合在底座120的部分122內之對應的電性頂針導線，以在系統100的操作期間，在裝置150與區域202之間傳遞資訊(例如，傳輸信號)。在此種例子中，該些電性接點可以藉由相鄰的磁鐵(位在底座120的部分122與表面15之間的間隙中)而被保持一起，以磁性地吸引及保持(例如，機械式地)沿著螢幕200的後側200B所設置的一對應的含鐵及/或磁性的材料。
參照圖3，投影器單元180係包括一外部的殼體182以及一被設置在殼體182內的投影器組件184。殼體182係包含一第一或是上方端182A、一和該上方端182A相對的第二或是下方端182B、以及一內部的凹處183。在圖3的例子中，殼體182進一步包含一耦接或安裝構件186以接合並且支撐裝置150(例如是至少在系統100的操作期間)。構件186可以是用於懸吊且支撐如同在此所述的任何適當的計算裝置150之任何適當的機構或裝置。例如，構件186可包括一鉸鏈，其係包含一旋轉軸以使得裝置150可以繞著該旋轉軸而被旋轉(例如，藉由使用者)，以到達一所要的用於觀看顯示器152之角度。在某些例子中，裝置150可以永久地或是半永久地附接至單元180的殼體182。在某些例子中，殼體180以及裝置150可以是一體地或是單體地被形成為單一單元。
參照圖4，在某些例子中，當裝置150係經由在殼體182上的安裝構件186而從結構110被懸吊時，當從正面觀看系統100時(亦即，實質面對被設置在裝置150的正面側150C上的顯示器152)，投影器單元180(亦即，殼體182以及組件184兩者)可以實質隱藏在裝置150之後。此外， 如同在圖4中所示，當裝置150是從如上所述的結構110被懸吊時，投影器單元180(亦即，殼體182以及組件184兩者)以及任何藉此所投影的影像可以相對裝置150的中心線155而被實質對準或是定中心。
再次參照圖3，投影器組件184係被設置在殼體182的凹處183之內，並且包含一第一或是上方端184A、一和該上方端184A相對的第二或是下方端184B。上方端184A係接近殼體182的上方端182A，而下方端184B係接近殼體182的下方端182B。投影器組件184可包括任何適當的數位光學投影器組件，其係用於從一計算裝置(例如，裝置150)接收資料並且投影對應該輸入資料的影像(例如，從上方端184A)。例如，在某些實施方式中，投影器組件184可包括一數位光學處理(DLP)投影器、或是一液晶覆矽(LCoS)投影器，其有利的是小型而且有能源效率的投影引擎，其能夠有多個顯示解析度及尺寸，例如是具有4：3寬高比之標準的XGA解析度(1024×768像素)、或是具有16：10寬高比之標準的WXGA解析度(1280×800像素)。投影器組件184係進一步通訊地連接(例如，電耦接)至裝置150，以便於從其接收資料，並且根據該接收到的資料來從端184A產生(例如，投影)光及影像。投影器組件184例如可以經由任何適當類型的電性耦接、或是任何在此所述的其它適當的通訊技術或機構來通訊地連接至裝置150。在某些例子中，組件184可以經由電性導體、WI-FI、藍芽、一光學連接、一超音波連接、或是其之一組合來通訊地連接至裝置150。在圖1-6的例子中，裝置150係透過被設置在安裝構件186之內的電性導線或導體(例如，如上相關於螢幕200以及底座120所述的)來通訊地連接至組件184，使得當裝置150係從結構110透過構件186而被懸吊時，被設置在構件186之內的電性 導體係接觸被設置在裝置150上之對應的導線或導體。
仍然參考圖3，頂端160進一步包含一摺疊反射鏡162以及一感測器束(bundle)164。反射鏡162係包含一高度反射的表面162A，其係沿著頂端160的底表面160D而被設置，並且在操作期間被定位以反射從投影器組件184的上方端184A朝向螢幕200投影的光、影像、等等。反射鏡162可包括任何適當類型的反射鏡或是反射的表面。在圖1-6的例子中，摺疊反射鏡162可包括一標準的前表面真空金屬化的塗覆鋁的玻璃反射鏡，其係作用以將從組件184所發射的光向下折到螢幕200。在其它例子中，反射鏡162可以具有一複雜的非球面曲率來作用為一反射的透鏡元件，以提供額外的聚焦功率或是光學校正。
感測器束164係包含複數個感測器(例如，相機、或是其它類型的感測器)，以根據一在感測器束164與螢幕200之間的區域的狀態(例如，發生在該區域中的活動)來偵測、量測、或者是獲得資料。在感測器束164與螢幕200之間的區域的狀態可包含在螢幕200上或是上方的物體、或是發生在螢幕200上或是靠近螢幕200之處的活動。在圖3的例子中，束164係包含一RGB相機164A(或是另一類型的彩色相機164A)、一IR相機164B、一深度相機(或是深度感測器)164C、以及一環境光感測器164D。
在某些例子中，RGB相機164A可以是一用以捕捉彩色影像(例如，靜止影像及視訊中的至少一個)的相機。在某些例子中，RGB相機164A可以是一用以根據RGB色彩模型來捕捉影像的相機，該影像在此可以被稱為"RGB影像"。在某些例子中，RGB相機164A例如可以捕捉具有相當高解析度，例如幾百萬像素(MP)的數量級的解析度之影像。舉例而言，RGB 相機164A可以捕捉具有14MP的解析度的彩色(例如，RGB)影像。在其它例子中，RBG相機164A可以捕捉具有不同解析度的影像。在某些例子中，RGB相機164A可以是朝向螢幕200，並且可以捕捉螢幕200、被設置在螢幕200與RGB相機164A之間(例如，在螢幕200上或是上方)的物體、或是其之一組合的影像。
IR相機164B可以是一用以偵測在該相機164B的視野中的複數個點之IR光的強度之相機。在此所述的例子中，IR相機164B可以結合系統100的一IR光投射器來運作，以捕捉IR影像。在此種例子中，每一個IR影像可包括複數個像素，每一個像素是代表在一藉由該像素來加以表示的點之處偵測到的IR光的強度。在某些例子中，系統100的頂端160可包含一IR光投射器以朝向螢幕200投射IR光，並且IR相機164B可以朝向螢幕200。在此種例子中，IR相機164B可以偵測由螢幕200、被設置在螢幕200與IR相機164B之間(例如，在螢幕200上或是上方)的物體、或是其之一組合所反射的IR光的強度。在某些例子中，IR相機164B可以專門偵測由IR光投射器所投射的IR光(例如，如同從螢幕200、物體、等等所反射的、或是直接接收到的)。
深度相機164C可以是一用以偵測在深度相機164C的視野中的物體的部分之個別的距離(或是深度)的相機(感測器、等等)。如同在此所用的，藉由一深度相機所偵測到的資料在此可以被稱為"距離"或是"深度"資料。在此所述的例子中，深度相機164C可以捕捉一個多像素的深度影像(例如，一深度圖)，其中每一個像素的資料係代表在一藉由該像素來加以表示的點之處的一物體的一部分之距離或是深度(從相機164C量測的)。深度 相機164C可以利用任何適當的技術來加以實施，例如是立體視覺(stereovision)相機、具有均勻的IR光流的單一IR相機感測器、一具有均勻的IR光流的雙重IR相機感測器、結構化光深度感測器技術、飛行時間(TOF)深度感測器技術、或是其之一組合。在某些例子中，深度感測器164C可以指出一物體(例如，一個立體的物體)何時是在螢幕200上。在某些例子中，深度感測器164C可以偵測一被置放在螢幕200上的物體(或是其之部分)的存在、形狀、輪廓、運動、以及個別的距離中的至少一個。
環境光感測器164D可被配置以量測在系統100周圍的環境中的光強度。在某些例子中，系統100可以使用感測器164D的量測以調整系統100的其它構件，例如是系統100的感測器或相機(例如，相機164A-164C)的曝光設定、從系統100的光源(例如，投影器組件184、顯示器152、等等)發射的光強度、或類似者。
在某些例子中，感測器束164可以省略感測器164A-164D中的至少一個。在其它例子中，除了感測器164A-164D之外，感測器束164可包括其它相機、感測器、或類似者、或是替代感測器164A-164D中的至少一個。例如，感測器束164可包含一包括任何適當的裝置(例如，感測器、相機)的使用者介面感測器，以用於追蹤一使用者輸入裝置，例如是一手、指示筆、指向裝置、等等。在某些例子中，該使用者介面感測器可包含一對相機，其係被配置以實立體鏡地(stereoscopically)追蹤當一使用者輸入裝置(例如，一指示筆)被使用者繞著該螢幕200(例如，繞著螢幕200的區域202)移動時的位置。在其它例子中，該使用者介面感測器可以額外或是替代地包含IR相機或感測器，其係被配置以偵測藉由一使用者輸入裝置所發射或 反射的紅外光。
在此所述的例子中，束164的感測器164A-164D的每一個係通訊地連接(例如，耦接)至裝置150，使得在束164內產生的資料(例如，藉由該些相機所捕捉的影像)可被提供至裝置150，並且裝置150可以提供命令至感測器束164的感測器及相機。束164的感測器164A-164D可以經由任何適當的有線或無線的通訊技術或機構來通訊地連接至裝置150，該通訊技術或機構的例子係在以上被描述。在圖1-6的例子中，電性導體可以從束164被指定路由透過頂端160、直立的構件140、以及投影器單元180，並且透過被設置在安裝構件186(如上所述)內的導線而進入到裝置150中。
參照圖5及6，在系統100的操作期間，投影器組件184可以投影可見光187以從反射鏡162反射朝向螢幕200，來藉此在螢幕200的一投影器顯示空間188上顯示可見的影像。在圖5-6的例子中，空間188可以是實質矩形的，其具有一長度188L以及一寬度188W。在某些例子中，長度188L可以是大約16吋，而寬度188W可以是大約12吋。在其它例子中，長度188L及寬度188W可以具有不同的值。
在某些例子中，感測器束164的相機164A-164C係被配置在系統100之內，使得相機164A-164C的每一個的視野係包含螢幕200的一空間168，該空間168可以和顯示空間188的一部分或是全部重疊、或是可以是和顯示空間188相同範圍的。在此所述的例子中，相機164A-164C的視野可被說為包含空間168，儘管螢幕200有時可能會至少部分地被在螢幕200上或是上方的物體所阻擋。在此種例子中，在螢幕200上或是上方的物體可以是在相機164A-164C中的至少一個的視野中。在此種例子中，感測器 束164的感測器可以根據一在感測器束164與螢幕200的空間168之間的區域的狀態(例如，發生在該區域中的活動、被設置在該區域中的物體)而獲得資料。在某些例子中，空間188以及空間168兩者是重合或對應到螢幕200的區域202，使得觸碰感測的區域202、投影器組件184以及感測器束164的功能都是相關於相同界定的區域而被執行的。
現在參照圖5-6，裝置150可以指示投影器組件184來投影影像到螢幕200的區域202之上。裝置150亦可以在顯示器152上顯示影像(其可以是和藉由投影器組件184而被投影到區域202之上的影像相同或是不同的)。藉由組件184所投影的影像可包括藉由裝置150執行的軟體所產生的資訊及/或影像。在某些例子中，使用者可以藉由實際上用任何適當的方式來接觸螢幕200的觸碰感測的區域202，以和被投影在區域202上以及顯示在顯示器152之上的影像互動，其例如是利用使用者的手35(例如，經由觸碰、點擊、姿勢、或是其它觸碰輸入)、利用一指示筆25、或是經由任何其它適當的使用者輸入裝置。觸碰感測的區域202可以偵測此種經由與區域202的實體接觸之互動。再者，在某些例子中，組件184亦可以(至少部分地)投影影像在被設置於螢幕200之上的物體(例如，如同在圖5中所示的手35)上。
舉例而言，當使用者(例如，利用一如同在圖5中所示的手35)與螢幕200的區域202互動時，觸碰感測的區域202可以產生觸碰輸入的資訊，並且透過任何適當的連接(其例子係在以上被描述)來將其提供至裝置150。在某些例子中，該觸碰輸入的資訊可被提供至一在裝置150上執行的作業系統(OS)，並且可以進一步藉由該OS來傳遞到另一在裝置150上執 行的應用程式(例如，程式、等等)。作為響應的是，該執行的OS或應用程式可以改變藉由投影器組件184所投影的影像、被顯示在顯示器152之上的影像、或是其之一組合。如同在此所用的，一"應用程式"(或是"電腦應用程式")是可藉由一處理資源執行的機器可讀取的指令的一群集。在某些例子中，使用者可以類似地和被顯示在顯示器152(其可以是一觸碰感測的顯示器)之上的影像、或是裝置150的任何其它輸入裝置(例如，一鍵盤、滑鼠、等等)互動。在某些例子中，區域202(以及藉由組件184而被投影在其上的影像)可以作為在系統100內之一第二或替代的觸碰感測的顯示器。
在某些例子中，感測器束164的感測器亦可以產生系統輸入，其可被提供至裝置150以供進一步的處理。例如，系統100可以至少利用束164的感測器(或相機)以及分割引擎170，以偵測一物體(例如，如同在圖5中所示的一使用者的手35或是一指示筆25)的存在及位置中的至少一個，並且提供代表偵測到的資訊之系統輸入資訊至裝置150。該被提供的系統輸入資訊可被傳遞至藉由裝置150所執行的一OS以及應用程式中的至少一個，並且如上相關於觸碰輸入所述的，其可以改變藉由系統100所顯示的影像。例如，束164可包含一對被配置以執行(例如，指示筆25的)實立體鏡的指示筆追蹤的相機或感測器。在其它例子中，指示筆25係包含一被塗覆有一紅外線逆反射的(retro-reflective)塗層(例如，漆)之尖端26，使得尖端26可以作為一紅外線逆反射器。在此種例子中，束164可包含如上所述的IR相機(或感測器)，其係偵測從尖端26反射出的IR光以使得裝置150能夠追蹤當尖端26橫跨區域202移動時的位置。
在某些例子中，系統100可以捕捉二維的(2D)影像或是產生 一實體物體的一個三維的(3D)掃描，使得該物體的一影像或是其它相關於該物體的資訊接著可以被投影到區域202之上，以進一步供其之利用及處理。例如，如同在圖6中所示，一物體40可被置放在區域202上，使得束164的感測器(例如，相機164A-164C中的至少一個)可以捕捉該物體40的一影像。在此種例子中，如上所述，藉由束164的感測器所捕捉的影像可被提供至裝置150(例如，一OS、應用程式、等等)。物體40例如可以是一本書、一文件、一照片、或是任何其它實體物體。
在某些例子中，一旦物體藉由束164的感測器加以掃描後，代表該物體的影像的背景可被移除(例如，經由一分割程序)，並且該前景物體之所產生的影像、或是相關於該物體的資訊可以被投影到區域202之上(或是被展示在顯示器152上)。在此種例子中，實體物體(例如，物體40)的影像可被捕捉、處理以及顯示在區域202之上，以快速且輕易地產生該實體物體的一數位版本以容許其之進一步的處理，即如同將會進一步敘述者。代表該物體40的影像之被移除的背景可以對應於該螢幕200的至少一部分。在某些例子中，一分割程序可包括判斷用於藉由束164的感測器所捕捉的影像中所表示的物體之一分割邊界。如同在此所用的，用於一影像中所表示的一物體之一"分割邊界"可以是代表一項估計該影像的哪些部分是代表該物體，並且該影像的哪些部分是代表除了該物體之外的特點，例如是該投影螢幕200之資訊。在某些例子中，用於在一影像中所表示的一物體之一分割邊界可包含代表如同在該影像中所表示的該物體的至少一外部的邊緣之資訊。當執行一分割程序時，該系統100可以使用該分割邊界以從一至少包含該投影螢幕200的一部分之較大的捕捉到的影像取出該物 體的一影像。
觸碰致能的裝置傾向於將所有偵測到的觸碰輸入傳送至該OS，並且其可以進一步藉由該OS傳送至另一應用程式(例如，一程式或是執行的應用程式)。例如，觸碰輸入可以在一系統中的較低階(例如，硬體、韌體、驅動程式)加以感知及處理，並且在該系統上執行的應用程式可以從該OS接收該觸碰的使用者輸入資訊。然而，該些偵測到的觸碰輸入可能包含有效及無效的觸碰輸入兩者。舉例而言，無效的觸碰輸入可能包含使用者錯誤地刷過該觸碰表面、或是當使用者將其手掌擱置在該觸碰裝置上以使用一指示筆、或是在該觸碰表面上作畫時。
在此揭露的例子係提供一種用以智能地處理在一觸碰致能的裝置上所接收到的觸碰輸入之系統。舉例而言，該系統可以區別有效及無效的觸碰輸入，並且只傳送有效的觸碰輸入至該OS或是一執行的應用程式。除了區別有效及無效的觸碰輸入之外，該系統可以結合在該觸碰致能的裝置上偵測到的觸碰輸入與來自該系統之其它的輸入事件及/或資訊，可以在傳送被轉換的輸入至該OS或是應用程式之前，先轉換該些偵測到的觸碰輸入成為不同類別的輸入，即如同將會進一步敘述者。在觸碰致能的裝置出現且普及之下，在此揭露之創新的觸碰處理功能可以強化使用者的體驗。
圖7是描繪一種用於智能地處理在一觸碰致能的裝置上接收到的觸碰輸入之系統700的管線，以作為一個例子。該系統700可以是圖1的計算系統100的一部分。舉例而言，硬體702以及韌體704可以對應於投影螢幕200之至少該觸碰感測的區域202(例如，墊202)以及可藉由一在該 系統100中的處理器執行的對應的韌體。硬體702亦可包含該系統100的其它輸入裝置，例如是該感測器束164。其並非是傳送所有偵測到的觸碰輸入至該作業系統(OS)708(其可能包含無效的輸入)，而是一觸碰處理控制器(TPC)706可以從該韌體704攔截偵測到的觸碰輸入。
如同將會進一步敘述的，該TPC 706可以容許藉由該硬體702所產生的觸碰輸入能夠被指定路由到該OS預先定義的特性之外，其可能不是由於無效的觸碰輸入以及其它的輸入事件。例如，該TPC 706可被利用以便於區別有效及無效的觸碰輸入，藉此拒斥無效的觸碰輸入。此外，該TPC 706可以結合來自該墊202之偵測到的觸碰輸入與例如是來自感測器束164之其它的輸入事件、及/或來自該系統的資訊，其可以在傳送被轉換的輸入至該OS或應用程式之前，先轉換該些偵測到的觸碰輸入成為不同類別的輸入。然而，該TPC 706亦可以從該韌體704傳送所攔截的觸碰輸入至該OS 708，例如是若該TPC 706並無法處理該觸碰輸入時。
參照圖7，在該系統700上之一執行的應用程式710於是可以具有從該OS 708或是該TPC 706接收觸碰輸入的選項。該TPC 706可以用硬體來加以實施、被實施為可在處理器上執行的機器可讀取的指令、或是被實施為硬體及機器可讀取的指令的一組合。在其中該TPC 706是至少部分利用機器可讀取的指令加以實施之例子中，這些機器可讀取的指令可以是具有可在處理器上執行的軟體、或是可藉由在該計算裝置150中的一處理器(例如，在圖8中的處理資源810)執行的軟體或韌體的形式。
為了智能地處理在一觸碰致能的裝置(例如，墊202)上接收到的觸碰輸入，該系統700之較高階的構件(例如是該OS 708或是應用程式 710)可以程式化地修改有效的觸碰之過濾程序，以更佳的匹配該系統700的需求。舉例而言，為了從該TPC 706接收觸碰輸入，一針對於應用程式710的應用程式開發者可以利用一應用程式介面(API)以自訂該系統700的觸碰輸入，並且提供各種體驗給最終使用者。例如，該API可被利用以在該墊202上提供虛擬的構件或層，例如是一鍵盤及/或一軌跡墊。該TPC 706接著可以攔截任何觸碰以用於和被投影到該墊202之上的虛擬的構件互動，並且在該較高階的軟體(例如，該OS 708或是應用程式710)的控制下過濾該些觸碰。
根據在該墊202上的觸碰位置，在攔截該觸碰之後，該TPC 706可以拒斥該觸碰(例如，在該些虛擬的構件的幾何區域之外的無效的觸碰)、將該觸碰注入到該OS 708或是應用程式710中、或是根據該所選的層以及在該系統中的其它可能的構件的需求來執行其它動作。舉例而言，其它動作可以是指(但並不限於)結合該被攔截的觸碰與來自其它輸入裝置(例如該感測器束164)的資料，並且決定要如何處理它。要如何處理該觸碰的決策可以根據在該TPC 706中所界定的層來加以完成。舉例而言，若該API是在該墊202上提供一虛擬的軌跡墊，則該TPC 706可以在注入被轉換的輸入到該OS 708或是應用程式710之前，先將任何在該軌跡墊上接收到的觸碰輸入轉換為一滑鼠輸入或是滑鼠事件。該API可被利用以存取、產生、移除、以及編輯所有藉由該TPC 706所管理的層。
圖8是圖1的計算系統100的一部分的方塊圖，其係包括分割引擎170。尤其，圖8係描繪計算裝置150的一個例子，其係包括分割引擎170並且通訊地連接至投影器組件184、感測器束164、以及投影螢幕 200(觸碰感測墊202)的觸碰感測的區域202。儘管未顯示在圖8中，如上所述，計算裝置150亦可以是通訊地連接至系統100的其它構件。
計算裝置150(或是任何實施分割引擎170的其它計算裝置)可包含至少一處理資源。在此所述的例子中，一處理資源例如可包含一處理器、或是內含在單一計算裝置中或是被分散在橫跨多個計算裝置處的多個處理器。如同在此所用的，一"處理器"可以是一中央處理單元(CPU)、一半導體為基礎的微處理器、一繪圖處理單元(GPU)、一被配置以擷取及執行指令之現場可程式化的閘陣列(FPGA)、其它適合用於取出及執行被儲存在一機器可讀取的儲存媒體上的指令之電子電路、或是其之一組合中的至少一個。
參照圖8，該計算裝置150係包含一處理資源810、以及一包括(例如，被編碼有)指令822、824及826之機器可讀取的儲存媒體820。在某些例子中，儲存媒體820可包含額外的指令。在其它例子中，指令822、824及826以及任何在此相關於儲存媒體820所述的其它指令可被儲存在位於計算裝置150及處理資源810的遠端、但是可存取的一機器可讀取的儲存媒體上。處理資源810可以提取、解碼及執行被儲存在儲存媒體820上的指令，以實施以下敘述的功能。在其它例子中，儲存媒體820的任何指令的功能都可以用電子電路的形式、用編碼在一機器可讀取的儲存媒體上的可執行的指令的形式、或是其之一組合來加以實施。機器可讀取的儲存媒體820可以是一種非暫態的機器可讀取的儲存媒體。
在某些例子中，該些指令可以是一安裝套件的部分，當被安裝時，其可以藉由該處理資源810來加以執行。在此種例子中，該機器可 讀取的儲存媒體可以是一種例如是光碟、DVD、或隨身碟之可攜式的媒體、或是一種藉由伺服器所維持的記憶體，而該安裝套件可以從其加以下載及安裝。在其它例子中，該些指令可以是已經被安裝在一包含該處理資源的計算裝置(例如，裝置150)之上的一應用程式或是多個應用程式的部分。在此種例子中，該機器可讀取的儲存媒體可包含例如是硬碟機、固態硬碟、或類似者之記憶體。
如同在此所用的，一種"機器可讀取的儲存媒體"可以是任何電子、磁性、光學、或是其它實體儲存裝置，以包含或儲存例如是可執行的指令、資料、與類似者的資訊。例如，任何在此所述的機器可讀取的儲存媒體可以是儲存碟(例如，一硬碟機)的任一種、快閃記憶體、隨機存取記憶體(RAM)、任意類型的儲存碟片(例如，一光碟、一DVD、等等)、與類似者、或是其之一組合。再者，任何在此所述的機器可讀取的儲存媒體都可以是非暫態的。
在圖8的例子中，一例如是以上相關於圖1所述的計算系統100之計算系統可包括計算裝置150、投影器組件184、感測器束164、以及觸碰感測墊202。在某些例子中，指令822可包含用於在該觸碰感測墊202上接收和一第一事件類型相關的一觸碰輸入之指令。墊202可包括任何用於偵測實體接觸(例如，觸碰輸入)之適當的技術。參照回圖7，該TPC 706可以攔截從該墊202接收到的觸碰輸入。如同將會進一步敘述的，該TPC 706可以在注入或提供被轉換的輸入至該OS或是應用程式之前，先重新規劃或是轉換該攔截到的觸碰輸入成為一不同類型的輸入或是事件類型。舉例而言，該TPC 706可以從該墊202接收觸碰輸入，並且在注入滑鼠事件到該 OS或是應用程式之前，先將其改變成為一滑鼠事件。儘管觸碰及滑鼠輸入對於使用者而言可能看起來是類似的，但是該OS可能會個別地或是不同地處理觸碰及滑鼠輸入。
指令824可包含用於決定是否將相關該第一事件類型的觸碰輸入轉換成為一不同的事件類型之指令。舉例而言，一API可被利用以在該墊202上提供虛擬的構件或層，例如是一鍵盤及/或軌跡墊(例如，經由投影器組件184而被投影到該墊202之上的虛擬的構件的影像)。每一個被投影到該墊202之上的虛擬的構件影像可以具有幾何區域，以用於判斷在該墊202上接收到的觸碰輸入是否落在該幾何區域之內。如上所述，該TPC706可以攔截在該墊202上的觸碰輸入，並且根據該些觸碰輸入是否落在該些幾何區域的任一個中來將其轉換成為不同的事件類型。舉例而言，若任何觸碰輸入是落在該些虛擬的構件之被投影的影像的幾何區域之外，則該TPC 706可以將此種觸碰輸入視為無效的(例如，由使用者非故意地觸碰在該墊202上)。然而，若該TPC 706判斷觸碰輸入是發生在該些幾何區域中的一個上，則該TPC 706可以將此種觸碰輸入轉換為和一對應於該幾何區域的事件類型相關的一觸碰輸入。舉例而言，若該TPC 706偵測到一在該墊202上的觸碰輸入是落在一虛擬的軌跡墊的幾何區域之內，則該TPC 706可以將該觸碰輸入轉換成為一對應於該軌跡墊的事件類型，例如是一滑鼠事件。
由於可以有各種的具有對應的幾何區域之虛擬的構件被投影到該墊202之上，因此該些幾何區域中的一些幾何區域可能會重疊。例如，一對應於鍵盤事件之虛擬的鍵盤可能具有一幾何區域是至少部分地和 一對應於滑鼠事件之虛擬的軌跡墊的幾何區域重疊。舉例而言，提供該些虛擬的構件之API可以相對於另一虛擬的構件來優先化(prioritize)一虛擬的構件。用於決定優先化的步驟可以變化。例如，該虛擬的軌跡墊可以相對於該鍵盤具有一預先指定的優先化，使得在該墊202的一具有重疊的幾何區域之區域上接收到的觸碰輸入可被轉換成為滑鼠事件。
舉例而言，除了優先化虛擬的構件之外，該些虛擬的構件亦可以動態地被致能或是禁能。例如，儘管一虛擬的構件可以被投影到該墊202之上，但是若該構件被禁能，則任何在該構件的幾何區域中的觸碰輸入可以不加以偵測。舉例而言，當使用者正在利用該虛擬的鍵盤打字時，該虛擬的軌跡墊可以被禁能。一旦該使用者完成打字後，該虛擬的軌跡墊可以再次被致能以用於偵測觸碰輸入。除了致能或是禁能虛擬的構件之外，該虛擬的構件可以動態地被重新配置。例如，一虛擬的構件的一幾何區域可加以修改，例如是該幾何區域在該墊202上的尺寸或位置。此種重新配置可藉由該系統100本身、或是藉由該系統100的使用者而被起始。例如，使用者可以移動或是重新定尺寸一被投影到該墊202之上的虛擬的構件的幾何區域。
如上所述，該系統的TPC 706可以結合在該墊202上偵測到的觸碰輸入與來自該系統之其它的輸入事件及/或資訊，其可以在傳送被轉換的輸入至該OS或應用程式之前，先轉換該些偵測到的觸碰輸入成為不同類別的輸入。舉例而言，該TPC 706可以從該系統的其它輸入裝置接收有關在該墊202上的觸碰輸入之資訊，並且因此可能根據從該其它輸入裝置接收到的資訊來轉換該觸碰輸入。參照圖5，該TPC可以從感測器束164接收 有關在該墊202上的觸碰輸入(例如，藉由手35)之資訊，並且決定是否拒斥該觸碰輸入的部分。例如，該感測器束164可能會偵測到亂真的輸入(例如是一手掌觸碰)，其中該感測器束164在該墊202上的一觸碰輸入的位置處看到一隻手。在該手掌區域中的輸入觸碰可以藉由該TPC 706來加以拒斥，因為該感測器束164知道該手掌的位置。
作為結合偵測到的在該墊202上的觸碰輸入與來自該系統的資訊之一個例子，該TPC 706可以使用觸碰輸入及位置的歷史來拒斥不大可能的事件，例如是使用者在該墊202之上快速地移動其手指。先前的觸碰的狀態資訊可被使用來計算一時間間隔及距離以給出一手指速度。
指令826可包含用於根據上述的決定來發送或傳送相關一事件類型的觸碰輸入至例如是一執行的應用程式之指令。舉例而言，如同在圖7中所繪，該觸碰輸入亦可被傳送至一OS。該應用程式可以決定其是否想要從該OS或是從該TPC接收該觸碰輸入。藉由具有接收在該OS預先定義的特性之外的觸碰輸入之功能，所敘述的創新的觸碰處理功能可以強化使用者的體驗。
圖9是一種用於判斷是否轉換一接收到的觸碰輸入之範例的方法900的流程圖。儘管方法900的執行係在以下參考圖1的計算系統100來加以描述，但是其它用於方法900的執行之適當的系統亦可被利用。此外，方法900的實施方式並不限於此種例子。
在方法900的905之處，系統100可以在系統100的觸碰感測墊202上接收和一第一事件類型相關的一觸碰輸入。參照回到圖7，該TPC 706可以攔截從該墊202接收到的觸碰輸入。
在910之處，該系統100可以決定是否將相關該第一事件類型的觸碰輸入轉換成為一不同的事件類型(例如，滑鼠事件或是鍵盤事件)。舉例而言，一API可被利用以在該墊202上提供虛擬的構件或層，例如是一鍵盤及/或軌跡墊。每個虛擬的構件可以在該墊202上被指定一幾何區域。舉例而言，該系統100可以判斷和該第一事件類型相關的觸碰輸入是否發生在上述的幾何區域中之一上。若該觸碰輸入是發生在該些幾何區域中之一上，則該系統100可以將相關該第一事件類型的觸碰輸入轉換成為和一對應於該幾何區域的事件類型相關的一觸碰輸入。舉例而言，若該系統100判斷觸碰輸入是落在一虛擬的軌跡墊的幾何區域之內，則該系統100可以將該觸碰輸入轉換成為一對應於該軌跡墊的事件類型，例如是一滑鼠事件。
舉例而言，該系統100可以從該系統100的其它輸入裝置(例如，感測器束164)接收有關和該第一事件類型相關的觸碰輸入之資訊。該系統100可以根據從該些其它輸入裝置接收到的資訊來轉換和該第一事件類型相關的觸碰輸入。舉例而言，若該感測器束164被利用以提供有關觸碰輸入的資訊，則該系統100可以決定來拒斥該觸碰輸入的部分(例如，手掌的拒斥)。在915之處，該系統100可以根據上述的決定來傳送相關一事件類型的觸碰輸入至一應用程式。
儘管圖9的流程圖係展示某些功能的執行的一特定順序，但是方法900並不限於該順序。例如，在該流程圖中被展示為連續的功能可以用一不同的順序加以執行、可以同時或是部分同時地加以執行、或是其之一組合。在某些例子中，在此相關於圖9所述的特點及功能可以結合在 此相關於圖1-8的任一圖所述的特點及功能來加以提供。
15‧‧‧支撐表面
100‧‧‧計算系統
110‧‧‧支撐結構
120‧‧‧底座
120A‧‧‧第一端(前端)
122‧‧‧凸起的部分
140‧‧‧直立的構件
140A‧‧‧第一端(上方端)
140C‧‧‧第一側(正面側)
150‧‧‧計算裝置
150A‧‧‧第一側(頂端側)
150B‧‧‧第二側(底部側)
150C‧‧‧正面側
150D‧‧‧背面側
152‧‧‧顯示器
155‧‧‧中心軸(中心線)
160‧‧‧頂端
160A‧‧‧第一端(近端)
160B‧‧‧第二端(遠端)
164‧‧‧感測器束
170‧‧‧分割引擎
200‧‧‧投影螢幕
200A‧‧‧第一側(前側)
200B‧‧‧第二側(後側)
202‧‧‧觸碰感測的區域
205‧‧‧中心軸(中心線)

Claims (15)

  1. 一種方法，其係包括：在一計算系統的一觸碰感測墊上接收和一第一事件類型相關的一觸碰輸入；決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及根據該決定來傳送相關一事件類型的該觸碰輸入至一應用程式。
  2. 如申請專利範圍第1項之方法，其中該決定係包括：從該計算系統的其它輸入裝置接收有關相關該第一事件類型的該觸碰輸入的資訊；以及根據從該些其它輸入裝置接收到的該資訊來轉換和該第一事件類型相關的該觸碰輸入。
  3. 如申請專利範圍第1項之方法，其中該決定係包括：從複數個被設置在該墊之上而且指向該墊的感測器接收有關和該第一事件類型相關的該觸碰輸入的資訊；以及根據從該複數個感測器接收到的該資訊來決定是否拒斥和該第一事件類型相關的該觸碰輸入的部分。
  4. 如申請專利範圍第1項之方法，其係包括：將該墊的幾何區域指定給不同的事件類型。
  5. 如申請專利範圍第4項之方法，其中該決定係包括：判斷和該第一事件類型相關的該觸碰輸入是否發生在該些幾何區域中之一上；以及 若和該第一事件類型相關的該觸碰輸入是發生在該些幾何區域中之一上，則將相關該第一事件類型的該觸碰輸入轉換成為和一對應於該幾何區域的事件類型相關的一觸碰輸入。
  6. 如申請專利範圍第5項之方法，其中該墊的對應於不同的事件類型的該些幾何區域係被優先化，其中該判斷和該第一事件類型相關的該觸碰輸入是否發生在該些幾何區域中之一上係根據該優先化而被判斷出。
  7. 如申請專利範圍第4項之方法，其係包括：在藉由使用者輸入或是該計算系統的起始之際，動態地重新配置該些幾何區域。
  8. 一種系統，其係包括：一支撐結構，其包含一底座、一從該底座向上延伸的直立的構件、以及一懸臂的頂端，其係從該直立的構件向外延伸並且包含一摺疊反射鏡以及複數個感測器；一投影器組件，其可附接至該直立的構件；一計算裝置，其可附接至該投影器組件；以及一觸碰感測墊，其係通訊地耦接至該計算裝置，該投影器是用以投影一影像於該觸碰感測墊上，其中該投影器是用以向上投影該影像以從該反射鏡反射出而到該墊上，並且其中該計算裝置是用以使得：該墊接收和一第一事件類型相關的一觸碰輸入；該計算裝置決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及該計算裝置根據該決定來傳送相關一事件類型的該觸碰輸入至一 執行在該計算裝置上的應用程式。
  9. 如申請專利範圍第8項之系統，其中該計算裝置是藉由以下來決定：從該計算系統的其它輸入裝置接收有關和該第一事件類型相關的該觸碰輸入的資訊；以及根據從該些其它輸入裝置接收到的該資訊來轉換和該第一事件類型相關的該觸碰輸入。
  10. 如申請專利範圍第8項之系統，其中該計算裝置是藉由以下來決定：從該複數個感測器接收有關和該第一事件類型相關的該觸碰輸入的資訊；以及根據從該複數個感測器接收到的該資訊來決定是否拒斥和該第一事件類型相關的該觸碰輸入的部分。
  11. 如申請專利範圍第8項之系統，其中該計算裝置是用以使得：該計算裝置將該墊的幾何區域指定給不同的事件類型；以及該投影器組件投影對應於該些不同的事件類型的影像到該墊之上，其中每一個影像是在其被指定的幾何區域之內。
  12. 如申請專利範圍第11項之系統，其中該計算裝置是藉由以下來決定：判斷和該第一事件類型相關的該觸碰輸入是否發生在一被投影到該墊之上的該些影像中之一上的幾何區域之內；以及若和該第一事件類型相關的該觸碰輸入是發生在該些影像中之一上，則將相關該第一事件類型的該觸碰輸入轉換成為和一對應於該影像的事件類型相關的一觸碰輸入。
  13. 一種非暫態的機器可讀取的儲存媒體，其係包括可藉由一計算系統 的一處理資源執行的指令，該計算系統係包括一觸碰感測墊、一用以將影像投影在該墊上的投影器組件、以及複數個被設置在該墊之上而且指向該墊的感測器，該些指令是可執行以：在該墊上接收和一第一事件類型相關的一觸碰輸入；決定是否將相關該第一事件類型的該觸碰輸入轉換成為一不同的事件類型；以及根據該決定來傳送相關一事件類型的該觸碰輸入至一可執行在該處理資源上的應用程式。
  14. 如申請專利範圍第13項之儲存媒體，其中可執行以決定的該些指令係包括：從該複數個感測器接收有關和該第一事件類型相關的該觸碰輸入的資訊；以及根據從該複數個感測器接收到的該資訊來決定是否拒斥和該第一事件類型相關的該觸碰輸入的部分。
  15. 如申請專利範圍第13項之儲存媒體，其係包括可執行以下的指令：將該墊的幾何區域指定給不同的事件類型；以及經由該投影器組件來投影對應於該些不同的事件類型的影像到該墊之上，其中每個影像是在其被指定的幾何區域之內。
TW104130915A 2014-09-24 2015-09-18 轉換經接收觸碰輸入 TWI567588B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2014/057312 WO2016048313A1 (en) 2014-09-24 2014-09-24 Transforming received touch input

Publications (2)

Publication Number Publication Date
TW201633064A TW201633064A (zh) 2016-09-16
TWI567588B true TWI567588B (zh) 2017-01-21

Family

ID=55581635

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104130915A TWI567588B (zh) 2014-09-24 2015-09-18 轉換經接收觸碰輸入

Country Status (5)

Country Link
US (2) US10275092B2 (zh)
EP (1) EP3198366B1 (zh)
CN (1) CN107003717B (zh)
TW (1) TWI567588B (zh)
WO (1) WO2016048313A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI653563B (zh) * 2016-05-24 2019-03-11 仁寶電腦工業股份有限公司 投影觸控的圖像選取方法
JP6971772B2 (ja) * 2017-10-20 2021-11-24 シャープ株式会社 入力装置及びプログラム
US11637153B2 (en) * 2019-09-26 2023-04-25 Apple Inc. Displays with optical edge sensors

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110047459A1 (en) * 2007-10-08 2011-02-24 Willem Morkel Van Der Westhuizen User interface
US20110130019A1 (en) * 2009-11-30 2011-06-02 Molex Incorporated Electrical connector and electrical connector assembly
US20130257748A1 (en) * 2012-04-02 2013-10-03 Anthony J. Ambrus Touch sensitive user interface
WO2013175389A2 (en) * 2012-05-20 2013-11-28 Extreme Reality Ltd. Methods circuits apparatuses systems and associated computer executable code for providing projection based human machine interfaces

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2261780B1 (en) 2000-10-27 2012-03-14 Tyco Electronics Corporation Dual sensor touchscreen system and method of operating one
US7710391B2 (en) 2002-05-28 2010-05-04 Matthew Bell Processing an image utilizing a spatially varying pattern
US20050078092A1 (en) 2003-10-08 2005-04-14 Clapper Edward O. Whiteboard desk projection display
US7561146B1 (en) 2004-08-25 2009-07-14 Apple Inc. Method and apparatus to reject accidental contact on a touchpad
US7599561B2 (en) 2006-02-28 2009-10-06 Microsoft Corporation Compact interactive tabletop with projection-vision
US20080018591A1 (en) 2006-07-20 2008-01-24 Arkady Pittel User Interfacing
US7749479B2 (en) * 2006-11-22 2010-07-06 Hexcel Corporation Carbon fibers having improved strength and modulus and an associated method and apparatus for preparing same
JP2010521022A (ja) 2007-02-23 2010-06-17 ティーピーアイ カンパニー リミテッド デジタル機器に使われるポインティング装置を利用した仮想キーボード入力システム
US8199117B2 (en) 2007-05-09 2012-06-12 Microsoft Corporation Archive for physical and digital objects
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US8121640B2 (en) 2009-03-19 2012-02-21 Microsoft Corporation Dual module portable devices
US20100302190A1 (en) 2009-06-02 2010-12-02 Elan Microelectronics Corporation Multi-functional touchpad remote controller
US20110069021A1 (en) 2009-06-12 2011-03-24 Hill Jared C Reducing false touchpad data by ignoring input when area gesture does not behave as predicted
US8390583B2 (en) 2009-08-31 2013-03-05 Qualcomm Incorporated Pressure sensitive user interface for mobile devices
TWI423096B (zh) 2010-04-01 2014-01-11 Compal Communication Inc 具可觸控投影畫面之投影系統
US8384683B2 (en) 2010-04-23 2013-02-26 Tong Luo Method for user input from the back panel of a handheld computerized device
US8648809B2 (en) * 2010-06-16 2014-02-11 International Business Machines Corporation Reconfiguration of virtual keyboard
US9360959B2 (en) 2010-10-12 2016-06-07 Tactonic Technologies, Llc Fusing depth and pressure imaging to provide object identification for multi-touch surfaces
KR101855250B1 (ko) 2010-11-03 2018-05-09 삼성전자 주식회사 터치 제어 방법 및 이를 지원하는 휴대 단말기
KR101242620B1 (ko) * 2011-01-18 2013-03-19 주식회사 애트랩 터치 센서 제어기에서의 터치 신호 처리 방법 및 그 장치
US8736583B2 (en) 2011-03-29 2014-05-27 Intel Corporation Virtual links between different displays to present a single virtual object
EP2748675B1 (en) * 2011-07-29 2018-05-23 Hewlett-Packard Development Company, L.P. Projection capture system, programming and method
US20130080932A1 (en) 2011-09-27 2013-03-28 Sanjiv Sirpal Secondary single screen mode activation through user interface toggle
US8672262B2 (en) * 2012-01-10 2014-03-18 Textron Innovations Inc. Mechanically optimized liquid inertia vibration eliminator and aircraft pylon system
AU2013239179B2 (en) 2012-03-26 2015-08-20 Apple Inc. Enhanced virtual touchpad and touchscreen
KR20130139432A (ko) 2012-05-24 2013-12-23 백형종 컴퓨터·스마트폰·전자사전 키보드 영어 알파벳 자모 및 각종 키의 배열
US9423871B2 (en) 2012-08-07 2016-08-23 Honeywell International Inc. System and method for reducing the effects of inadvertent touch on a touch screen controller
JP2014109876A (ja) 2012-11-30 2014-06-12 Toshiba Corp 情報処理装置、情報処理方法及びプログラム
US20140160085A1 (en) 2012-12-07 2014-06-12 Qualcomm Incorporated Adaptive analog-front-end to optimize touch processing
AU2014232432A1 (en) * 2013-03-15 2015-09-24 Tactual Labs Co. Fast multi-touch noise reduction
US20150242009A1 (en) * 2014-02-26 2015-08-27 Qeexo, Co. Using Capacitive Images for Touch Type Classification

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110047459A1 (en) * 2007-10-08 2011-02-24 Willem Morkel Van Der Westhuizen User interface
US20110130019A1 (en) * 2009-11-30 2011-06-02 Molex Incorporated Electrical connector and electrical connector assembly
US20130257748A1 (en) * 2012-04-02 2013-10-03 Anthony J. Ambrus Touch sensitive user interface
WO2013175389A2 (en) * 2012-05-20 2013-11-28 Extreme Reality Ltd. Methods circuits apparatuses systems and associated computer executable code for providing projection based human machine interfaces

Also Published As

Publication number Publication date
CN107003717B (zh) 2020-04-10
TW201633064A (zh) 2016-09-16
US20170300174A1 (en) 2017-10-19
EP3198366A4 (en) 2018-05-09
EP3198366A1 (en) 2017-08-02
EP3198366B1 (en) 2021-01-06
US10275092B2 (en) 2019-04-30
WO2016048313A1 (en) 2016-03-31
CN107003717A (zh) 2017-08-01
US10481733B2 (en) 2019-11-19
US20190220146A1 (en) 2019-07-18

Similar Documents

Publication Publication Date Title
TWI531929B (zh) 基於影像來識別觸控表面的目標接觸區域之技術
TWI559174B (zh) 以手勢爲基礎之三維影像操控技術
CN105723300B (zh) 基于表示对象的图像确定分割边界
TWI529475B (zh) 具有投影機單元和電腦之系統
CN106415439B (zh) 用于镜面反射红外光的投影屏幕
TWI545463B (zh) 投影系統及管理投影系統之方法
TWI582676B (zh) 物件指示符顯示技術
US10664090B2 (en) Touch region projection onto touch-sensitive surface
TWI530863B (zh) 投影運算系統、用以修改其中觸控輸入之方法及相關非暫態電腦可讀儲存裝置
US10481733B2 (en) Transforming received touch input
EP3486815A1 (en) Model data of an object disposed on a movable surface
US20170357373A1 (en) Unintended touch rejection
TW201621554A (zh) 物件影像之捕捉及投影技術

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees