TW201142633A - Image identification using trajectory-based location determination - Google Patents

Description

201142633 六、發明說明： 【發明所屬之技術領域】 本文中所揭示的標的係關於使用手持行動設備的成像 設備來獲取關於目標物件的資訊。 【先前技術】 包括數位相機的諸如行動電話或個人數位助理（pda ) 之類的手持行動設備的流行度持續增長。此種設備可儲存 在稱後的時間來查看的數張照片。諸照片可連同關於該照 片被拍攝的時間、像素大小、孔徑和曝光設置等的資訊一 起儲存。然而，關於照片中的物件的資訊是可期望的。 【發明内容】 在一實施中，一種過程可包括決定手持行動設備的近似

3 201142633 且所主張的標的並 通篇所揭不和論述的方法的特定實例 不限於此特定實例。 【實施方式】 個特徵」、「—實 貫穿本說明書引述的「一個實例」 例」或「一特徵」意謂著結合該特徵及/或實例所描述的: 疋特徵、結構或特性被包括在所主張的標的的至少一個牿 徵及/或實例中。由此，用語「在一個實例中」、「_實例特 「在-個特徵中」《「特徵」貫穿本說明書在各處的出」現 並非必然全部引述相同特徵及/或實例。此外，特定特徵、 結構或特性在-或多個實例及/或特徵中可被組合。 本文中所描述的諸實施包括在選擇了在輕合至手持行 動設備（HMD )的顯示哭由&园―t 的顯不器中所圖不的照片中的特定目標物 件之後使用該HMD來識別並隨後接收關於該特^目標物 件的資訊。例如，此種目標物件可包括建築物或雕像，此 處僅列舉了少數實例。使用此種顯示器和HMD的使用者 介面’使用者可㈣取到的时中的若干顯示出的目標物 件之中選擇特定的目標物件。在選擇了目標物件之後， HMD就可經歷用於識別此種選中的目標物件的過程，如以 下更詳細地描述的一般。 在一特定實施中，若HMD尚未在HMD的記憶體中保存 關於特定目標物件的資訊’則對該特定目標物件的選擇可 能導致HMD從遠程源獲取關於該特定目標物件的資訊。 諸如基於陸地的基地台之類的此種遠端源可被用來識別 201142633 目標物件。此種遠端源可包括資料庫，該資料庫包括由服 務產生及/或維護的目標物件資訊，該服務例如決定訂閱此 種服務的使用者可能對哪些物件（例如，目標物件 > 感興 趣。此種資訊可包括關於目標物件及/或目標物件的歷史的 因素。此種資訊的至少一部分可在耦合至HMD的顯示器 中圖示出，但是所主張的標的並不被如此限定。 為了圖示特定實例’數個大博物館可（例如，付費）提 供專用手持設備’該專用手持設備被配置成在其緊鄰個體 藝術品物件時顯示或可聽地陳述關於該特定的藝術品物 件的資訊。在此種情形中，博物館可經由在個體藝術品物 件附近傳送的無線信號來提供此類資訊。然而，在如以上 所描述的HMD的-實施中，由博物館提供的此種專用手 持設備可能不能提供關於此類藝術品物件的資訊。取而代 之的是，使用者的個人HMD (例如，行動電話）可被用來 搜集資訊而不與博物館互動，因為此類資訊可獨立於博物 來提供ί列如’此種HMD可無線地（如以下詳細解釋 的一般）與維護藝術品物件的資料庫的伺服器通訊以識別 及/或搜集關於選中的特定藝術品物件的資訊。在此種情形 中使用者可以期望關於特定藝術品物件的資訊，此時使 用者可以擷取此種物件的圖像，並在聽D的顯示器中選 擇該物件的圖像。在一特 将疋實施中，HMD可能已儲存了關 於選中的物件的資却， 幻貢訊’否則HMD可向基地台傳送請求以 識別該物件並提供關 别％这物件的資訊。因此，hmd可隨後 從基地台接收所諳龙沾达 的資訊’ HMD可隨後向使用者顯示該 201142633 資訊。當然，此種特定HMD的詳情僅是實例，並且所主 張的標的並不被如此限定。 圖1是根據一實施圖示HMD 150和目標物件16〇的示意 圖。此種HMD可包括例如擷取目標物件16〇的圖像的圖 像擷取設備。關於目標物件160的資訊可藉由使用固定地 附連至HMD 150的圖像擷取設備來獲取。例如，此種圖像 擷取設備可被安放（對準）以擷取目標物件16〇的圖像， 而HMD 150的位置155可使用若干可用的定位技術中的任 何一種定位技術來決定，如以下所描述的一般。另外，可 以決定HMD 150的一或多個旋轉角。選中的目標物件的位 置可以至少部分地基於所決定的HMD的位置及/或一或多 個旋轉角來估計。此類旋轉角例如可被用來估計hmd 15〇 與目標物件160之間的位移170<)位置155和估計位移17〇 一起可被用來估計目標物件160的位置。使用目標物件16〇 的此類估計位置和擷取到的圖像，可以決定選中的目標物 件的身份。HMD 150可隨後獲取關於識別出的目標物件 160的資訊。HMD 150可包括顯示此類識別出的目標物件 及/或相關聯的資訊的顯示設備（圖3)。 作為此種實施的實例，使用者可將包括在蜂巢式電話中 的相機對準使用者期望的關於其的資訊的特定建築物。此 種蜂巢式電話可被實現成使用一或多個定位技術來決定 自身的位置。此種蜂巢式電話亦可被實現成決定蜂巢式電 話關於特定參考方向的旋轉角中的一或多個旋轉角。例 如，位於新澤西，卡尼鎮内的Br〇adway和巧卜⑽大街的 201142633 角落處的使用者可能正在將相機導引向北偏西〗〇度而同 時將該相機對準特錢築物。若使用者對料定建築物拍 照，則包括該相機的蜂巢式電話的此種位置及/或旋轉角可 以與照片—起被記錄。使用此種位置資訊、—或多個旋轉 角及/或對特定建築物的圖像應用的圖像辨識過程，可以決 定該特^建築物的身份。使用此種識別，可以顯示關於該 特定建築物的資訊。蜂巢式電話可包括此種資訊及/或此種 資訊可回應於來自蜂巢式電話的對此種資訊的請求而從 基於陸地的基地台無線地提供。當然，獲取關於目標物件 的資訊的此類詳情僅是實例，並且所主張的標的並不被如 此限定。 在一實施中，描述HMD的位置的位置資訊可由使用者 提供給HMD及/或使用若干可用的定位技術中的任何—種 定位技術來決定。此類定位技術的列表可包括衛星定位系 統（SPS )、個人區域網路（pAN )、區域網路（LAN )、廣 域網路（WAN)、超寬頻（UWB )、AFLT、數位TV、無線 中繼器、RFID、無線電位置信標、細胞服務區塔臺id及/ 或藍芽，此處僅列舉少數實例》與其他定位技術相比，一 些定位技術可能提供精確度較低的位置資訊。精確度較低 的位置資訊例如可能僅將HMD的位置定點到相對較大的 區域内’諸如建築物、城市街區、州等等。為了進行圖示， 位置資訊可確定HMD位於卡尼鎮内，或者HMD位於三蕩 市金融區的地鐵站中或附近。在此類精度相對較低的位置 資訊的情形中，HMD可利用諸如手動輸入的使用者輸入、 7 201142633 感測器資訊及/或圖像辨識技術之類的額外資訊來決定更 精確的位置資訊。此類改良的位置資訊可隨後被用來由此 類位置處的HMD決定在圖像中擷取到的目標物件的身 份。當然，獲取位置資訊的此類詳情僅是實例，並且所主 張的標的並不被如此限定。 在另一實施中，使用者可操縱HMD將光束導引到目標 物件上以在該目標物件上產生被照亮的斑點。HMD可隨後 在榻取到的目標物件圖像中偵測此種被照亮的斑點。因 此’可以至少部分地基於偵測到的被照亮的斑點來選擇並 進一步識別目標物件。例如，擷取到的圖像可包括多個目 標物件，其中HMD可藉由偵測特定目標物件上被照亮的 斑點來決定選中的目標物件。 在另一實施中，使用者可操縱HMD將測距波束導引到 目標物件上。此種HMD 可包括用於發射和接收聲能、光

目標物件離HMD的決定 疗中的任何一種技術所量測得的 距離來決定選中的目標物件的身 201142633 份。當然，此類用於使用距離來識別目標物件的過程僅是 實例’並且所主張的標的並不被如此限定。 圖2圖示根據一實施可以彼此通訊以識別目標物件的部 件的系統207。特定言之，HMD 2〇4可包括能夠接收衛星 導航信號21〇和能夠向/從基地台2〇8傳送/接收無線通訊 仏號212的各種行動接收機中的任何一種行動接收機。 HMD 204亦可具有與目標物件26〇的視線接觸。信號21〇 例如可以從諸如衛星飛行器（SVs) 206之類的參考站及/ 或從諸如基於陸地的信標或基地台2〇8之類的地面位置發 射。HMD 204可包括行動電話、手持導航接收機及/或個 人數位助理（PDA)，此處僅列舉少數實例。如以上所提及 的，HMD 204可採用若干技術中的任何一種技術來計算自 身的位置。在一特定實施中，此種定位技術可分別至少部 分地基於從衛星206及/或基於陸地的基地台2〇8接收到的 無線信號210及/或無線信號212。在一些實施中，HMD 204 可整合SPS接收機和無線通訊設備兩者以進行語音及/或 資料通訊。因此，儘管可以在本文中描述sps系統的特定 實例，但是此類原理和技術可適用於其他衛星定位系統或 者諸如無線網路之類的地面定位系統。當然，系統2〇7的 此類詳情僅是實例，並且所主張的標的並不被如此限定。 圖3是根據一實施圖示導引向目標物件31〇、目標物件 320及/或目標物件330的HMD 300的示意圖eHMD 3〇〇 可包括圖像機取設備302、顯示器3〇4、小鍵盤3〇6及/或 天線308。此種圖像擷取設備（例如，相機）可在顯示器 201142633 3 04中顯示取景器圖像及/或擷取到的圖像。3⑻可包 括專用處理器（圖9)以主存一或多個應用程式，如以下 更詳細地描述的—般。HMD 3〇〇可包括諸如小鍵盤3〇6及 /或可例如包括觸控螢幕的顯示器3〇4之類的一或多個使 用者介面。天線308可包括由HMD 3 00用來諸如從定位系 統及/或向/從基地台發射及/或接收各種信號的發射機/接 收機（圖9)的一部分。在一應用中，HMD 3 〇〇可被導引 或對準’以使得擷取到的圖像的中心在任何特定目標物件 上被用作圖像擷取設備300的取景器的顯示器304可包 括疋義圖像邊界或視角340和圖像中心線350的取景器 (圖4)’其可輔助使用者決定場景的哪個部分被擷取為圖 像。例如’多個目標物件310、目標物件32〇及/或目標物 件330可被包括在視角340内’並且圖像操取設備3〇〇可 被對準，以使得目標物件32〇在擷取到的圖像的中心。此 類目標物件可包括人、建築物、雕像、湖泊、山及/或地標， 此處僅列舉少數實例。儘管可在圖像中擷取此類目標物 件’但疋並非所有的目標物件，諸如人，可由本文中所描 述的過程及/或技術來識別。例如，某人可能在林肯紀念碑 旁擺姿勢以進行拍照（擷取到的圖像）。此種紀念碑可以 如以下所描述的一般被識別，而該人和擷取到的圖像内的 其他物件則不必被識別❶以下將詳細描述用於識別哪個目 標物件要被識別的過程。 圖4是根據一實施表示導引向目標物件410、目標物件 42〇和目標物件430的諸如圖像擷取設備300之類的圖像 201142633 擷取設備的取景器圖像400的示意圖。如以上所提及的’ 此種取景器圖像可由顯示器綱圖示。視角34。可定義取 景器圖像40G的邊緣。中心，線35()可定義圖像中心彻， 該圖像中心460可包括例如向使用者指示圖像中心的十字 準線、圓圈及/或其他符號或配置。取景器圖像彻可包括 諸如亮度級、快門速度、所拍攝的照片數目等的拍照資訊 (未圖示）。當然，此種取景器圖像的詳情僅是實例，並 且所主張的標的並不被如此限定。 圖5是根據一實施表示擷取到的包括目標物件Η。、目 標物件520和目標物件53〇的圖像5〇〇的示意圖。此類目 標物件可以例如由諸如標記515、標記525及/或標記 之類的覆蓋的及/或疊加的物件指示符來標示。例如，此類 標記可包括疊加在目標物件上的半透通的數字及/或字 母。此種標示可向使用者提供在複數個目標物件之中選擇 特定目標物件的一種方式。在一個特定實施中，Hmd可決 定包括在擷取到的圖像中的哪些目標物件是可識別的，並 且由此將諸標記放置在此類識別出的目標物件上。hmd可 使用圖像辨識技術來分析擷取到的圖像以決定擷取到的 圖像的哪些部分包括目標物件而哪些部分僅包括背景圖 像。例如，擷取到的圖像可包括擷取到的圖像的中心區域 中的由背景圖像圍繞的三個毗鄰雕像。在此種情形中，圖 像辨識技術可被用來決定擷取到的圖像的哪些部分是目 標物件（例如，雕像）而哪些部分僅是背景圖像。若此類 目標物件在此類過程期間被成功識別出，則HMD可以如 11 201142633 以上所描述的—般標示此類目標物件。在另一實施t，在 不存在此類標記的情況下，使料可經由諸如滑鼠及/或觸 摸板之類的指示設備來選擇特定目標物件以將圖示或符 號導航至顯示出的擷取到的圖像中的特定目標物件以選 擇特定目標物件。在又一實施中，HMD可在顯示設備中顯 不選擇私不符或符號以指示顯示出的擷取到的圖像中的 多個目標物件之中的哪個目標物件目前正被選擇。此種指 示可包括藉由與擷取到的圖像的其他部分相比較而言使 該選擇變亮，在該選擇關顯示框架，及/或增大該選擇的 圖像大小的方式來突出顯示目前的選擇，此處僅列舉少數 實例。使用者可隨後翻轉選擇指示符的位置以在顯示出的 擷取到的圖像中的目標物件之中跳躍。例#，使用者可以 針對從一個目標物件到下一目標物件的每次選擇跳躍而 按鍵一:欠。因&，使用者可隨冑至少冑分地基於此種選擇 才曰不符的位置來選擇顯示出的擷取到的圖像中的一或多 個目標物件。 圖6疋根據一實施的用於獲取關於目標物件的資訊的過 程600的流程圖。在方塊61〇處，使用者可將圖像擷取設 備導引向該使用者期望的關於其的資訊的目標物件。使用 者可對準圖錢取設備，以使得此類目標物件至少近似地 在取景器圖像的例如如由圖像中心46〇指示的中心。或 者，使用者可在擷取到圖像之後在多個目標物件之中選擇 此類目標物件，例如如以上所描述的一般。在方塊62〇處， Η M D可至少近似地決定自身的位置。此種決定可以例如不 12 201142633 時地、連續地、遇期性地或者隨著如在方塊630處擷取圖 像而作出。類似地，在方塊64〇處，HMD可以例如不時地、 連續地、週期性地或者隨著如在方塊630處擷取圖像而決 定自身的方位。在一個特定實施中，此種HMD可包括一 或多個感測器以決定一或多個方位角。例如，此類感測器 可包括加速計、磁力計、羅盤、壓力感測器及/或陀螺儀， 此處僅列舉少數實例。因此，此類感測器可在圖像擷取過 程期間量測HMD的方向、標高、傾斜度等。此類感測器 資訊可以例如被儲存在記憶體中並與擷取到的圖像相關 聯。當然，此類感測器的詳情僅是實例，並且所主張的標 的並不被如此限定。 在方境650處’可以至少部分地基於棟取到選中的目標 的圖像的HMD的所決定的位置和所決定的一或多個旋轉 角來估計選中的目標物件的位置。例如，Hmd可決定選中 的目標物件位於HMD的北偏西2Q度、地平線以上㈣ 傾斜度處。此種卿亦可決定自身的位置，諸如經由^ 技術所決定的大地測量學位置。在一個特定實施中，旋轉 角可被用來估計HMD與目標物件之間的位移。所決 ==此種估計位移一起可被用來估計目標物件的 _處’使用此種位置估計及/或圖像辨識過 :的一：Γ中的目標物件的身份，如以下更詳細地描 關於仙屮方塊6704 ’可以在HMD的顯示器中圊示 關於識別出的選中的目標物件的資訊。當然，決^ 件的身份的此類詳情僅是實 # 、 示 並且所主張的標的並不被 13 201142633 如此限定。 圖7是根據一實施圖示用於識別擷取到的圖像中的目標 物件的過程700的流程圖。此類過程可包括例如在圖6中 的方塊660處所執行的過程。在方塊7 10處，可以例如使 用以上識別出的若干技術中的任何一種技術來決定HMD 的位置。此類位置決定可以是近似的。例如，對於過程700 而言，決定HMD所位於的市、縣及/或區域可以是足夠的。 或者，使用者可藉由經由觸控螢幕、小鍵盤等輪入位置的 方式來手動地提供HMD的位置。 在方塊720處，HMD可至少部分地基於此類位置決定及 /或使用者輸入來向基地台或其他此類基於陸地的實體請 求識別資訊的資料庫。此類資料庫可包括關於圍繞hme 的當前位置的區域中的目標物件的資訊。在一個實施中， 如以上所提及的，此類資訊可以由服務產生及/或維護，該 服務決定訂閱此類服務的使用者可能對哪些物件感興 趣。例如，抵達紐約城的使用者可以攜帶HMD，該HMD 可以下載關於胃HMD的-公里半徑内的目標物件的資 訊此類半徑的大小可取決於此類半徑内的目標物件的數 目及/或HMD的記憶體容量，但是所主張的標的並不被如 此限定。例如，紐約城中一公里的半徑可包括與亞 州的沙漠區域中一百公里的半徑相同數㈣目標物件（例 如，已被記錄到資料庫中的感興趣物件）βΗΜ〇 前HMD位置的眘却，、，m w 廿鱼 5用於目標物件識別。識別資訊可包 括用於可由HMD執杆以砷.往士 匕 執仃以識別選中的目標物件的圖像辨識 14 201142633 過程的圖像資訊。例如’在F an的美國專利申請公開案第 US2007/0009159號中描述了一種此類圖像辨識過程。例 如’此類資訊可例如包括根據位置決定位於HMD附近的 地標、建築物、雕像及/或記號的圖像。在一個特定實施中， HMD可不時地、週期性地、隨著HMD的位置的顯著變化 (例如’抵達機場）及/或隨著擷取圖像而請求此類資訊。 因此，此類HMD可不斷地儲存此類關於HMD的當前位置 的資訊並可清除關於HMD不再處於其中的區域的過期資 訊。此類記憶體更新/清除過程可以例如容適HMD的有限 的記憶體大小。 在方塊730處，儘管HMD的位置已在先前被決定，如 在方塊710處一般，但是HMD可隨著用HMD擷取圖像（拍 照）而再次決定自身的位置。另外’可以決定如以上所描 述的方位，諸如HMD相對於參考方向的一或多個角度。 然而，右HMD已包含從新近的位置決定獲取到的充分當 前的位置資訊，則方塊730可被跳過及/或修改，以使得在 圖像擷取時決定方位。 在方塊740處，可以在圖像辨識過程期間將選中的目標 物件的圖像的特徵與儲存在HMD的記憶體中的一或多個 圖像的特徵相比較。在方塊745 4，若找到匹配的圖像， 則可以識別目標物件。例如，選中的目標物件可包括自由 女神像的圖像。此類圖像的—或多個特徵可以與紐約城區 域中的地標和其他物件的多個儲存著的圖像的特徵的資 料庫相比較。若選中的目標物件的圖像與已知實體（本實 15 201142633 例中為自由女神像）的圖像相匹配，則該選中的目標物件 可被識別，並且此類資料庫可提供關於該目標物件的資 Λ。另一方面，若沒有找到匹配，則過程7 〇 〇可行進至方 塊760，在此可存取較大的資料庫。在一特定實施中，HMD 可以向基於陸地的站或遠離該HMD的其他實體傳送選中 的目標物件的圖像的至少一部分並請求在此類基於陸地 的站處執行圖像辨識過程。當然.，圖像資訊的此類較大資 料庫可位於另一行動設備處，並且所主張的標的不限於基 於陸地的實體。 在方塊770處，可以在圖像辨識過程期間將選中的目標 物件的圖像的特徵與儲存在基地台的記憶體中的一或多 個圖像的特徵相比較。在方塊775處，若找到匹配的圖像， 則可以識別目標物件。因此，基地台可向HMD傳送與識 別出的目標物件相關聯的資訊。另一方面，若沒有找到匹 配，則在方塊790處，基地台可向HMD傳送指示目標識 別過程沒有成功的訊息《當然，識別過程的此類詳情僅是 實例並且所主張的標的並不被如此限定。 圖8是根據一實施表示顯示器8〇0的示意圖。HMD可包 括此類顯示器，該顯示器可包括擷取到的圖像的縮略圖 81〇、指示選中的目標物件83〇的圖形82〇及/或顯示關於 選中的目標物件830的資訊的訊窗840。包括擷取到的圖 像的經大小縮減的版本的此類縮略圖8 1 0可比完整大小的 榻取到的圖像佔據更小的顯示區域，由此允許顯示器8〇〇 包括用於顯示訊窗840的區域。以此種方式，顯示器可向 16 201142633 使用者提供關於目標物件的在訊窗84〇中被顯示為文字的 資訊，而同時顯不選中的目標物件83 〇。當然，此類顯示 器僅是實例，並且所主張的標的不被如此限定。 圖9是根據一個貫施的能夠與無線網路通訊並感測自身 的運動的設備的示意圖。此類設備可包括圖像擷取設備。 在一特定實施中，諸如圖1中所示的HMD 1〇4之類的hmd 可包括设備900，該設備9〇〇能夠處理在天線914處接收 到的sps信號以決定虛擬距離量測並經由天線9丨〇與無線 通訊網路通訊。此處，無線電收發機9〇6可被調適成用基 頻資訊來調制RF載波信號，諸如將資料、語音及/或SMS 訊息調制到RF載波上，以及解調已調制RF載波以獲得此 類基頻資訊。天線910可被調適成在無線通訊鏈路上發射 已調制RF載波並且在無線通訊鏈路上接收已調制rf載 波。 基頻處理器908可被調適成將來自中央處理單元（cpu) 902的基頻資訊提供給收發機9〇6以供在無線通訊鏈路上 傳輸。此處，CPU 902可從本端介面916獲得此類基頻資 訊’該等資訊可包括例如環境感測資料、運動感測器資 料、海拔資料、加速資訊（例如，來自加速計）、與其他 網路（例如’ ZigBee、藍芽、WiFi、同級間）的鄰近度。 此類基頻資訊亦可包括諸如對設備9〇〇的位置的估計之類 的位置資訊及/或諸如虛擬距離量測及/或Es位置資訊之 類的可被用於計算位置資訊的資訊。此種Es &置資訊亦 可從使用者輸入接收，正如以上所提及的_般。cpu 9〇2 17 201142633 可被調適成至少部分地基於量測得的運動資料來估計設 備900的軌跡。CPU 902亦可以有能力計算候選轨跡。通 道解碼器920可被調適成將從基頻處理器908接收到的通 道符號解碼成底層源位元。 SPS接收機（SPS Rx) 912可被調適成接收並處理來自 SV的傳輸’並且向相關器918提供經處理的資訊。相關器 918可被調適成根據接收機912所提供的資訊來推導相關 函數。相關器918亦可被調適成根據收發機906所提供的 關於引導頻信號的資訊來推導與引導頻相關的相關函 數。此資訊可被設備用於獲取無線通訊網路。 記憶體904可被調適成儲存可執行以執行已被描述或建 議過的過程、實例、實施或其實例中的一或多項的機器可 讀取指令。可包括專用處理器的CPU 902可被調適成存取 和執行此類機器可讀取指令。然而，該等僅僅是在特定態 樣中可由CPU執行的任務的實例，並且所主張的標的在該 等方面並不被限定。此外，記憶體904可被調適成儲存— 或多個預定的候選執跡，其中CPU 902可被調適成至少部 分地基於估計的轨跡與一或多個預定候選轨跡的比較來 決定設備900的位置。在一特定實施中，CPU 902可被調 適成至少部分地基於ES位置資訊來縮減該一或多個預定 候選轨跡的數目。 在一實施中，運動感測器9 5 0可包括一或多個換能器以 量測設備900的運動。此類換能器可以例如包括加速計、 羅盤、壓力感測器及/或陀螺儀。設備900的此類運動可以 18 201142633 包括旋轉及/或平移。對一或多個此類運動的量測可被儲存 在記憶體904 t ’從而可以取得儲存著的量測以供例如在 決定設傷900的軌跡時使用，i如以上所解釋的一般。 在-實施中，圖像擷取設備_可包括相機，該相機例 如包括光感測器的電荷輕合設備（CCD)陣列及/或cm〇s 光感測器陣列、聚焦光學裝置、取景器及/或與cpu 9〇2 和記憶體904通訊的介面電子裝置。顯示設備985可包括 在-些實&中可以是觸敏的以冑供用力使用I互動的手 段的液晶顯示器（LCD)e顯示設備985可以作為圖㈣取 設備980的取景器來工作，但是所主張的標的並不被如此 限定。諸圖像可被儲存在記憶體9()4巾，以使得儲存著的 圖像可被取得為選中的目標物件，如以上所描述的一般。 本文中描述的方法取決於根據特定特徵及/或實例的應 用可以藉由各種手段來實施。例如，該等方法可在硬體、 韌體、軟體及/或其組合中實施。在硬體實施中，例如，處 理單元可在一或多個特殊應用積體電路（ASICs)、數位信 號處理器（DSPs)、數位信號處理設備（DspDs)、可程式 邏輯設備（PLDs)、現場可程式閘陣列（FpGAs)、處理器、 控制器、微控制器、微處理器、電子設備、設計成執行本 文中描述的功能的其他設備單元及/或其組合内實施。 對於韌體及/或軟體實施，該等方法可以用執行本文中所 描述功能的模組（例如，程序、函數等等）來實施。任何 有形地實施指令的機器可讀取媒體可被用來實施本文中 所描述的方法°例如’軟體代碼可被儲存在記憶體中__ 19 201142633 例如行動站的夺，陪μ Λ , t "it、體中，並由處理器執行。記憶體可以實 施在處理器内部或處理器外部。如本文中所使用的’術狂 「記憶體」代表任何類型的長期、短期、揮發性、非揮發 性或其他記憶體，並且不被限定於任何特定類型的記憶體 或記憶體數目，或# ^ 次3己隐體儲存於其上的媒體的類型。 诸如無線終端的實贈可盘娘1 貰體了與網路通訊以請求資料和其他 資源。行動設備（㈣），包括蜂巢式電話、個人數位助理 (p叫或無線電腦僅是此類實體的幾個實例。 的通訊可包括存取網路資料，此舉會對通訊網路、電 其他系統硬體的資源造成負擔。在無線通訊網路令，可在 於網路中操作的諸實體之間請求和交換資料。例如，腕〇 可向無線通訊網路請求資料以

疋任’路内刼作的HMD 的位置：接收自該網路的資料 疋有益的，或者另外為 此類位置決定所需。然而，該等

^ 特疋態樣中在HMD 與網路之間的資料交換的實 方面並不受限定。 纟且所^的標的在該等 儘管已圖示和描述了目前考慮 六θ , ^ 應作為不例性特徵的内 二=技藝人士將理解，可作出其他各種修改並 =用等效技術方案而不會脫離所主張的標的。此外， 可作出許多修改以使特定境況適 一 t ~r· k ^王張的標的的教 不而不會脫離本文中所描述的中心概念。因此，並非意欲 使所主張的標的被限定於所揭#的特定 、 如此主張的標的亦可包括落γ ，，而是意欲使 包括洛在所附請求項及其等效开” 的範疇内的所有態樣。 、等效心式 20 201142633 【圖式簡單說明】

將參照以下附圖來描述非限定性和非窮盡性 似兀件符號貫穿各附圖代表類似部分。 特徵，其中 圖1是根據一實施圖示圖像擷取設備和 圖 目標物件的示意 的示意圖。 圖像擷取設 圖2是根據—實施的衛星定位系統（sps ) 圖3是根據—實施圖示導引向諸目標物件的 備的示意圖。 圖4是根據一實施表示耗合至導引向肖目標&件的圖像 祿取設備的取景器圖像的示意圖。 圖5是根據一實施表示擷取到的包括諸目標物件的圖像 的示意圖。 圖6是根據一實施圖示用於獲取關於目標物件的資訊的 過程的流程圖^ 圖7是根據一實施圖示用於識別目標物件的過程的流程 圖。 圖8是根據一實施表示顯示器的示意圖。 圖9是根據一實施的能夠感測自身的運動並與無線網路 通訊的行動設備的示意圖。 【主要元件符號說明】 150 HMD 155 位置 160 目標物件 21 201142633 170 204 206 207 208 210 212 260 300 302 304 306 308 310 320 330 340 350 400 410 420 430 460 5 00 位移

HMD 衛星飛行器（SV) /衛星 系統 基地台 衛星導航信號/無線信號 無線通訊信號/無線信號 目標物件 HMD/圖像擷取設備 圖像擷取設備 顯示器 小鍵盤 天線 目標物件 目標物件 目標物件 視角 中心線 取景器圖像 目標物件 目標物件 目標物件 圖像中心 圖像 22 201142633 5 10 目標物件 515 標記 520 目標物件 525 標記 530 目標物件 535 標記 600 過程 610 方塊 620 方塊 630 方塊 640 方塊 650 方塊 660 方塊 670 方塊 700 過程 710 方塊 720 方塊 730 方塊 740 方塊 745 方塊 760 方塊 770 方塊 775 方塊 790 方塊 201142633 800 810 820 830 840 900 902 904 906 908 910 912 914 916 918 920 950 980 985 顯示器 縮略圖 圖形 選中的目標物件 訊窗 設備 中央處理單元（CPU) 記憶體 無線電收發機 基頻處理器 天線 SPS 接收機（SPS Rx) 天線 本端介面 相關器 通道解碼器 運動感測器 圖像擷取設備 顯示設備 24

Claims (1)

1. 201142633 七、申請專利範圍： 1 · 一種方法，其包括以下步驟： 決定一手持行動設備的一近似位置； 使用一成像設備來擷取一或多個目標物件的一圖像，該成 像設備固定地附連至該手持行動設備； 至少部分地基於回應於該操縱而從該手持行動設備的感 測器獲得的量冑來決定該手持㈣設備相對於該近似位 置的一或多個旋轉角； 至少部分地基於該近似位置和該一或多個旋轉角來估計 該一或多個目標物件中一選中的目標物件的一位置； 至少部分地基於該選中的目標物件的該估計位置和該擷 取到的圖像來接收該選中的目標物件的—身份；及 手持行動設備上 至少部分地基於該接收到的身份來在該 顯示描述該選中的目標物件的資訊。 2.如請求項1之方法^ ^ . 万去，進一步包括以下步驟： 在該插取到的圖像上4r Jra } 家上覆蓋一或多個物件指示符；及 基於對該一或多個物株扣__ w 物件“符的-選擇來選擇該選中的 目標物件。 3.如請求項2 覆蓋該一或多個 方法’其中該-或多個物件指示符分別 目標物件中相應的目標物件。 25 201142633 4·如請求…之方法，其進一步包括以下步驟： 將該擷取到的圖像的一或多個特徵與複數個 像的-或多個特徵相比較。 存考的圖 如°月长項4之方法’其中該將該擷取到的圖像的該一 或多個特徵與該複數個儲存著的圖像的—或多個特徵相 比較之步驟進一步包括以下步驟： 向包括儲存該複數個儲存著的圖像的一記憶體的一位置 :送該操取到的圖像的至少-部分，*中該位置遠離該行 動設備。 6. 如凊求項1之方法，其中該決定該手持行動設備的該 近似位置之并 • 直〈步驟至少部分地基於近場通訊（NFC )信號、 WiFi信號、鈇^ 監芽k號、超寬頻（UWB )信號、廣域網路（WAN ) 信號數位電視信號及/或細胞服務區塔臺⑴。 7. 如請求t 之方法，其中該決定該手持行動設備的該 近似位置之牛跡s , 步帮至；>、部分地基於在該行動設備處對一或 多個衛星定位系統信號的獲取。 8. 如請求堵,> 喝1之方法’其中該決定該手持行動設備的該 近似位置之IE f <步驟至少部分地基於使用者輸入。 9. 如請求js 1 ’ 1之方法，其進一步包括以下步驟： 26 201142633 操縱該手持行動設備將一光束導引到該目標物件上以在 該目標物件上產生一被照亮的斑點； 在該擷取到的圖像中偵測該被照亮的斑點；及 至少部分地基於該偵測到的被照亮的班點來進—步決定 該目標物件的一身份。 10.如凊求項1之方法’其進一步包括以下步驟： 將一測距波束導引到該目標物件上； 量測該測距波束的一行程時間； 至少部分地基於該行程時間來決定至該目標物件的一距 離；及 至少部分地基於該距離來進一步決定該目標物件的一身 11.如請求項1之方法， 其進一步包括以下步驟： 將一至少一個測距波束導引到該目標物件上； 量測該至少一個測距波束的一發散度； 至少部分地基於該發散度來決定至該目標物件的 離；及

   該目標物件的一距

   12.如請求項1 磁力計、羅盤、 27 201142633 13. —種裝置，其包括·· 用於決定一手持行動設備的一近似位置的構件； 用於使用固定地附連至該手捭轩叙> 卞秤仃動设備的一成像設備來 擷取一或多個目標物件的一圖像的構件； 用於至少部分地基於回應於續握护而〜—$ u 心化系耜縱而從該手持行動設備 的感測器獲得的量測來決定兮车姑^ 去 里』水戌疋該手持订動設備相對於該近 似位置的一或多個旋轉角的構件，· 用於至少部分地基於該近似 位置和該一或多個旋轉角來 估計該一或多個目標物件中一 TT 遇Ψ的目標物件的一位置 的構件； ::至少部分地基於該選中的目標物件的該估計位置和 件；友圖像來接收該選中的目標物件的一身份的構 用於至少部分地基 備上顯干^ 決定的身份來在該手持行動設 ..肩不描返該選中的目標物件的資訊的構件。 如請求項 用之裝置，其進一步包括： 用於在該擷取到 王J的圖像上覆蓋—或容/私 件；及 蓋次多個物件指示符的構 用於基於對診一 .^ Λ 或多個物件指示符的一選瘥*、联城 中的目標物件的構件。 子的4擇來選擇該選 15.如請求項14 〈裝置，其中該一或多個物件指示符分別 28 201142633 覆π該或多個目標物件中相應的目標物件。 16. 如請求項13之裝置，其進一步包括： 用於將名擷取到的圖像的一或多個特徵與複數個儲存 的圖像的—或多個特徵相比較的構件。 17. 如請求項16之裝置，其中該用於將㈣取到的圖像的 該一或多個特徵與該複數個儲存著的圖像的-或多個特 徵相比較的構件進—步包括： · 用於向包括儲存該複數個儲存著的圖像的一記憶體的一 位置傳送該_取到的圖像的至少—部分的構件，其中該位 置遠離該行動設備。 18‘如明求項13之裝置，其中該用於決定該手持行動設備 ，該近似位置的構件至少部分地基於近場通訊（c )信 號、WlFl仏號、藍芽信號、超寬頻（UWB )信號、廣域網 路（WAN)信號、數位電視信號及/或細胞服務區塔臺①。 19. 如請求項13之裝置，其中該用於決定該手持行動設備 的該近似位置的構件至少部分地基於在該行動設備處對 一或多個衛星定位系統信號的獲取。 20. 如5月求項13之裝置’其中該用於決定該手持行動設備 的該近似位置的構件至少部分地基於使用者輸入。 29 201142633 21.如請求項13之裝置，其進一步包括： 用於操縱該手持行動設備將—光束導0該目標物件上 以在該目標物件上產生一被照亮的斑點的構件； 用於在該擷取到的圖像中偵測該被照亮的斑點的構件 用於至少部分地基於該债測到的被照亮的斑點來進 決定該目標物件的一身份的構件。 及 步 22·如請求項13之裝置，其進一步包括： 用於將一測距波束導引到該目標物件上的構件 用於量測該測距波束的一行程時間的構件· 用於至少部分地基於該行程時間來 一距離的構件；及 用於至少部分地基於該距離來進一 一身份的構件。 決定至該目標物件的 步決定該目標物件的 磁 ·叫τ蛾剛器爸 力計、羅盤、壓力感測器及/或—陀螺儀 24. 種行動設備，其包括 一接收機，其用於接收RF信號； 一成像設備，其用於_取_或多個目標 :或Γ感測器’其用於量測該行動設備的-或多圖:旋轉 30 201142633 專用计异设備，其調適成在一 RF環境中工作以. 至少部分地基於該等RF信號來決定該行動設備的一 近似位置； 至少部分地基於該近似位置和該—或多個旋轉角來 估計該-或多個目標物件中一選中的目標物件的一位置； 至少部分地基於該選中的目標物件的該估計位置和 該擷取到的圖像來接收該選中的目標物件的一身份；及 至少部分地基於該所決定的身份來處理供：該行動 設備上顯示的描述該選中的目標物件的資訊。 &如請求項24之行動設備，其中該專用計算設備被進一 步調適成在一 RF環境中工作以執行以下動作： 在該擷取到的圖像上覆蓋一或多個物件指示符；及 基於對該一或多個物件指示符的一 J選擇來接收對該選中 的目標物件的一選擇。 &如請求項25之行動設備，其中該一或多個物件指示符 分別覆蓋該-或多個目標物件中相應的目標物件。 27.如請求項24之行動設備，其中該專用計算㈣被進一 步調適成在一RF環境中工作以執行以下動作： 將該棟取到的圖像的―或多個特徵與複數個儲存著的圖 像的一或多個特徵相比較。 31 201142633 8’如明求項27之行動設備’其中該專用計算設備被進一 步調適成在一 RF環境中工作以藉由向包括儲存該複數個 儲存著的圖像的一記憶體的一位置傳送該擷取到的圖像 的至少一部分的方式來將該擷取到的圖像的該一或多個 特徵與該複數個儲存著的圖像的一或多個特徵相比較，其 中該位置遠離該行動設備。 29·如°月求項24之行動設備，其中該專用計算設備被進一 步調適成在一 RF環境中工作以至少部分地基於近場通訊 (NFC)信號、WiFi信號、藍芽信號、超寬頻（uwb)信 號、廣域網路（WAN)信號、數位電視信號及/或細胞服務 區塔2： ID來決定該手持行動設備的該近似位置。 30. 如明求項24之行動設備，其中該專用計算設備被進一 步調適成在一 RF環境中工作以至少部分地基於在該行動 設備處對一或多個衛星定位系統信號的獲取來決定該手 持行動設備的該近似位置》 31. 如請求項24之行動設備，其中該專用計算設備被進一 步調適成在一 RF環境中工作以至少部分地基於使用者輸 入來決定該手持行動設備的該近似位置。 32. 如請求項24之行動設備，其中該專用計算設備被進一 步調適成在一 rF環境中工作以執行以下動作： 32 201142633 在該目標物件的該擷取到的圖像中偵測由從該行動設備 發射的一光束產生的一被照亮的斑點；及 至少部分地基於該偵測到的被照亮的斑點來進一步決定 該目標物件的一身份。 33·如請求項24之行動設備’其中該專用計算設借被進一 步調適成在一 RF環境ψ工作以執行以下動作： 量測從該行動設備向該目標物件發射的一測距波束的一 行程時間； 至少部A地基於該行程時間來決定至該目考票物件的一距 離；及 至少部分地基於該距離來進一步決定該目_件的一身 份。 34. 如請求項24之行動設備，《中該等感測器包括一加速 計、磁力計、羅盤、壓力感測器及/或一陀螺儀。 35. 種製。σ ’其包括.包括儲存於其上的機器可讀取指 令的一儲存媒體，該等機器可讀取指令若由一專用計算設 備執行則被調適成使該專用計算設備： 決定一手持行動設備的一近似位置； 使用固定地附連至該手持行動設備的—成像設備來榻取 一或多個目標物件的一圖像； 至少部分地基於回應於該操縱而從該手持行動設備的感 33 201142633 測器獲得的量測來決定該手持行動設備相對於該近似位 置的一或多個旋轉角； 1 至少部分地基於該近似位置和該一或多個旋轉角來估計 該一或多個目標物件中一選中的目標物件的一位置； 至少部分地基於該選中的目標物件的該估計位置和該擷 取到的圖像來決定該選中的目標物件的—身份；及 至少部分地基於該所決定的身份來獲得供在該手持行動 設備上顯不的描述該選中的目標物件的資訊。 36.如請求項35之製品，其中該等機器可讀取指令若由該 專用計算設備執行則被進一步調適成： 在該擷取到的圖像上覆蓋-或多個物件指示符；及 或多個物件指示符的-選擇來選擇該選中的 37.如請求項36之古、土 覆蓋該-或多铜曰或多個物件指示符分別 個目標物件中相應的目標物件。 38·如請求項q 真用*+置“ 之方法，其中該等機器可讀取指令若由該 專用汁算设備執行則被進一步調適成： 將該祿取到％ 像的-或多：牲或多個特徵與複數個儲存著的圖 個特徵相比較。 39·如請求項 之方法，其中該等機器可讀取指令若由該 34 201142633 專用十叹備執行則破進一步調適成藉由向包括儲存該 複數個儲存著的圖像的一記憶體的一位置傳送該擷取到 的圖像的至少—部分的方式來將該擷取到的圖像的該一 或夕個特徵與該複數個儲存著的in象的-或多個特徵相 比較’其中該位置遠離該行動設備。 40·如請求項35之方法，其中該等機器可讀取指令若由該 f用汁#叹備^行則4皮進一步調冑成至少部y分地基於近 場通訊（kfc 號、WiFi信號、藍芽信號、超寬頻（uwB) 仏號廣域網路（WAN )信號、數位電視信號及/或細胞服 務區塔臺ID來決定該手持行動設備的該近似位置。 41 ·如μ求項35之方法’其中該等機器可讀取指令若由該 專用冲算叹備執行則被進一步調適成在該行動設備處對 或*夕個衛星定位系統信號的獲取來決定該手持行動設 備的該近似位置。 •如請求項35之方法，其中該等機器可讀取指令若由該 專用什算設備執行則被進一步調適成至少部分地基於使 用者輸入來決定該手持行動設備的該近似位置。 43.如印求項35之方法’其中該等機器可讀取指令若由該 專用計算設備執行則被進一步調適成： 在該目^物件的該擷取到的圖像中偵測由從該行動設備 35 201142633 發射的一光束產生的一被照亮的斑點；及 至少部分地基於該偵測到的被照亮的斑點來進—步決— 該目標物件的—身份。 、疋 由該 距 44.如請求項35之方法，其中該等機器可讀取指令若 專用計算設備執行則被進一步調適成： 將一測距波束導引到該目標物件上； 量測該測距波束的一行程時間； 至少部分地基於該行程時間來決定至該目標 離；及 、 至少部分地基於該距離來進一步決定該目 份0 標物件的— 身 45·如請求項35之方法，其中該等感測 u估一加速 磁力計、羅盤、壓力感測器及/或一陀螺儀。 。 36