TW201013158A - Mobile imaging device as navigator - Google Patents

Description

201013158 六、發明說明· 【發明所屬之技術領域】 本發明係著重在根據一行動成像裝置之定向性方位來 獲取資訊，更具體來說，其讓使用者得以藉由定位行動成 像裝置來獲取定向性導引之視覺提示來在實體及/或虛擬世 界中進行方向性定位。 【先前技術】 籲 現今，3D向量地圖被應用在全球定位系統(GPS)地圖系 統上，例如由 TomTom International BV 及 Garmin Ltd.等 公司所提供之地圖系統。該等地圖可提供得自空中「鳥瞰」 * 視野或是得自地平面視野之方位透視圖。其透視圖可讓使 用者衡量距離一個位置有多遠。現有的GPS向量地圖系統 經常會將地方上特定的目的地（如餐廳或咖啡店）預先進行 程式處理。駕啟人可在GPS所追蹤之空間區域中進行直線 運動而讓該向量地圖自動捲動。然而這類地圖之資訊通常 是根據運動的方向。此外，這類直線運動之尺度以及其於 罾地圖上所對應之導航一般都是以駕駛而非步行的觀點來調 整。 同樣地，現今的行動搜尋系統，如那些個人資料助理 (PDAs)所使用之搜尋系統，典型都會使用2D鳥瞰地圖 之視野來顯示該行動裝置現在位置之半徑範圍内的當地搜 尋結果，而非使用者所面對之方向。因此，目前的21^及3〇 地圖系統一般會提供在行進方向上或區域半徑内的資訊。 但該等系統通常不能決定駕驶人或使用者現在所面對之方 位。例如在倒車的狀態中，駕駛人可能是面朝前方或人行 4 201013158 道，而非朝行動裝置所指向之方向。本發明即基於此考量 與其他著重之觀點而提出。 【實施方式】 現在下文中將參照隨附圖式對本發明進行更完整的描 述，該些圖式構成了本發明之一部分，且藉由圖說方式來 表示本發明可據以實施之特定實施範例。然而，本發明可 以許多不同形式來體現，不應被理解為侷限在文中所提出 之實施例中；應瞭解此等實施例係提供來讓本發明得以被 • 透徹且完整地揭露，並將向本領域之熟習技藝人士完整傳 達本發明之範疇。此外，本發明可以方法或裝置等型態來 體現。據此，本發明可採行完全為硬體之實施例形式、完 * 全為軟體之實施例形態，或是結合軟硬體觀點之實施例形 態等。故此，本發明下列的細節描述將不會以限制的角度 來加以看待與理解。 綜觀本發明說明及申請專利範圍，除非語境中有清楚地 指定，否則下列詞語皆採用與文中有明確關聯之意涵。儘 Φ 管有可能，文中所使用之片語「在一具體實施例中」並不 一定指的是同一個實施例。再者，儘管有可能，文中所用 之片語「在另一具體實施例」並不一定指的是一個不同的 實施例。因此，如下方所述，本發明各種不同的具體實施 例可以輕易地加以結合，不悖離本發明之範疇或精神。 此外，文中所用之連接詞「或」是一具有包含性質之「或」 運算子，除非語境中有清楚地指定，否則其與連接詞「及/ 或」均等。連接詞「根據」並非為排他性質，除非語境中 有清楚地指定，否則其可允許以文中所未描述之其他因素 為依據。此外，綜觀本發明說明書，「一」、「其」等詞係包 5 201013158 含，3稱之意含。而介詞「在其中」則包含有「在其中」 及「在其上」之意含。 簡言之’本發明之具體實施例係著重在根據—行動成像 =定：性方位來獲取資訊。本發明之具體實施例讓使 =以精由定位其行動成像裝置來操取定向性引導用之 視而定位其自身所在。該視覺線索會用來判定 灯動裝置的疋向性方位、根據該方位進行搜尋、進行三維 視覺世界的綠性齡、以及進行其他類㈣作等。該定 向性方位資tfl亦可結合㈣資絲舰或過濾現有資訊。 —在本發明-具體實施例中，行動地圖制程式會與手持 式打動電話相機一起用來改善使用者導航以及找尋已識別 景點(point of interest，ροι)之功能。手持式相機會被用來追 蹤方位性運動及小範圍的直線運動。一旦使用者位置被精 確定位（如透過GPS、使用者輸入、或其他類似方式），該 使用者可藉由原地打轉或是使用手持式相機擷取交叉路 口、店面或標誌等視覺/光學提示之方式來收集定向性方位 I面的資訊。該些視覺線索會與31)向量地圖中預先定義之 資訊產生關聯，以進行定向性的引導。在另一具體實施例 中，來自手持式相機的光學輸入（如追蹤背景中的圖案以 辨別手持式相機的速度和方向）會被用來進行、犯向量地圖 之動態導航。例如，實作中的街道、建築物、路標、或其 =點可能有數街之遙’且可能為使用者目前所處環境中 =的建築物所隱蔽。故先將預先定義的向量地圖資訊傳 =手持裝置中能較容易找到已織別的地點。同樣地，向 二圖上亦可，供出自一或多個來源的當地商家資訊。使 用者可藉由指示-方位來管理不同的資訊_與資訊量， 而不需進行直線運動來識別出-個方向。有了方位資料及 6 201013158 多種類型的内容資訊，本發明之具體實施例將能夠取得更 多相關的行動搜尋結果、行動導覽、或其他資訊。 ，，定向性方位資訊讓使用者可在一個方向上進行“無遠弗 屆的搜尋’且每一個搜尋結果皆可標上相對該使用者現在 位距離。該距離指示可以尺寸比例較小之圖示、在結 果清單上的排序、透明程度、或其他指示方式來表示。例 如’使用者可以停在一街角，試圖判定要往哪彎可以找到 最近的（或其偏好廠家的）加油站，不需實際走過每條街， 也=需捲動視覺地圖或改變其縮放程度’使用者可簡單地 將们動裝置指向每條街的方向來接收帶有距離指示之社 果。 、、、口 本發明具體實施例中亦可利用那些關於行動裝置方位 性=的資訊。初期’行動裝置歧過Gps、使用者輸入、 現场景之影像分析等方式來建立其現有的物理位置。^ 動裝置亦使用其成像組件來建立其初期的定向性方位。 該方位可以藉由將—影像與已知的定向性影像作比較而划 此種比較動作可以在多種影像上進行，如由行2 裝置所擷取及儲存的影像、取景器中疊加有已知物 像甘或影像組合等，或是可使用其他影像處理技術乂 進灯。其他或額外的技術可能還包括了分析某—日期 間下的太陽位置、接收指令將行動裝置纽在特定的^ 上並點選確認、分析已知地點處標上的文字或符號等。° -旦建立起初期方位，之後某㉟具體實施例會涉及 方位上的改變及/或仙運動後㈣方位。例如，行動番 可债測裝置在繞使用者打轉㈣或期後所指之新方向 初?方位、運動期間、及⑼在新方位處時，行動裝置可= 據其方位和方位上的變化來顯示並移動其地圖。 ^ 7 201013158 亦可進行一或多個内容搜尋，或是獲取與該行動裝置所指 方向上景點有關之内容資料。該内容資料可以疊加在所顯 示的地圖上’且可根據其方位及方位上的變化來移動及/或 改變。本發明其他的實施範例將在下文中參照圖式作進一 步細節的描述。 操作環培.説明 第一圖說明了本發明可在其中運作的一環境實施例。然 而’實作中並非需要所有這類的元件才得以實施本發明，

且其組成元件在不悖離本發明的精神及範疇下得以進行設 置與類型上的變化。 如圖所示’系統100包括客戶端裝置1〇2_1〇4、網路 105、及伺服器1 〇6等組件。網路1 〇5係與每一客戶端裝置 102-104及伺服器106連接，且讓伺服器1〇6得以與每一客 戶端裝置102-104通訊。 客戶端裝置102-104實際上可包含任何運算裝置，其可 透過網路(如網路105)與另一運算裝置（如内容伺服器1〇8) 相互接收及傳送訊息。這類裝置可包含典型使用無線通訊 ，介進行連接之裝置，如手機、智慧型手機、傳呼器、對 講機、射頻裝置、紅外線裝置、民用波段裝置（CBs)、妗合 一或多個前述裝置的整合型裝置、或實際上任何的行g裝 樣地’客戶繼_4可為任何能夠使用有線 或無線通_介進行連接之裝置，如個人數位助理 、 二可穿戴式電腦、及任何其他裝備來在有線及/ ，.，，、線通㈣介上進行通訊之裝置。這縣置亦可能包括 典型使用有線通訊媒介進行連接之裝置，如個人電腦 處理器㈣、微處理H式或可程式化肖 網路電腦等。 β胃㈣子產〇口 8 201013158 客戶端裝置102-104中的每個客戶端裝置可以含有一瀏 覽器程式設置來傳送、接收、及顯示網頁等。瀏覽器程式 可以設置來接收與顯示圖形、文字、及多媒體等資訊類型， 其實際上使用任何以網頁為基礎的程式語言，其包括但不 限於.^示準通用標記§吾言（Standard Generalized Markup Language，SMGL )，如超文件標記語言（HyperText Markup Language，HTML)、可延伸性標示語言（extensible markup language，XML)、手持裝置標不語言（Handheld Device Markup Language，HDML)，如無線傳輸標記語言（wireless • Markup Language (WML)、WMLScript、JavaScript 等。客 戶端裝置102-104更可含有一傳訊程式設置來接收與/或將 一訊息傳送至另一採用其他機制的運算裝置，其包括但不 限於：即時訊息（Instant Messaging，IM)、電子郵件、簡訊 服務（Short Message Service, SMS )、多媒體傳訊服務 (Multimedia Message Service, MMS )、網路即時聊天 (internet relay chat，IRC)、mIRC、Jabber 等通訊程式。 網路105係設置來將一運算裝置耦接到另一運算裝置使 其間得以進行通訊。網路105可利用任何形式的電腦可讀 籲 取式媒介將資訊從一電子裝置傳送到另一電子裝置。此 外，網路105亦可包含一無線介面、及/或一有線介面（如網 際網路），此外尚有區域網路(LANs)、廣域網路(WANs)、直 接連結等，如透過一通用序列匯流排（USB)槔、其他形式 的電腦可讀取式媒介、或其中任何的組合來達成。在一組 互連的區域網路上（包括那些根據不同架構及通訊協定 者），路由器會作為區域網路間的鏈結，使訊息可從一端傳 至另一端。此外，區域網路間的通訊鏈結一般還包含雙絞 線或同轴線纜’而網路間的通訊鏈結則可採用類比電話線 9 201013158 、規、專用或兼用的數位線路，其包括了 ΤΙ、Τ2、T3及Τ4、 數位信號位準3(Digital Signal level3, DS3)、光學載體3 (Optical Carrier 3，OC3)、光學載體 12 (OC12)、光學載 體 48 ( OC48 )、非同步傳輸模式（Asynchronous Transfer Mode, ATM)、整合服務數位網路（integrated Services Digital Networks，ISDNs )、數位用戶線路（Digital Subscriber Lines， DSLs)、或是包括衛星連結在内的無線連結、或其他熟習技 藝人士所知之通訊鍵結方式等。再者，遠端電腦及其他相 關的電子裝置可透過數據機與暫時性的電話鏈結來遠端連 • 接至區域網路（LANs)或廣域網路（WANs)之任一者。網路 105係建置來與各種不同的通訊協定及技術一起使用，其包 括傳輸控制協定/網路協定（transmission control protocol / internet protocol, TCP/IP)、用戶資料訊息協定（user datagram protocol, UDP )、無線應用協定（wireless application protocol, WAP)、全球移動通訊系統（global system for mobile communications，GSM)、分碼多工存取（code division multiple access，CDMA )、分時多工存取(time division multiple access, TDMA)、通用分組無線服務（general packet ❹ radio service, GPRS)、超寬頻（ultra wideband，UWB)、 IEEE 802.16、全球互通微波存取（Worldwide Interoperability for Microwave Access，WiMax)等。本質上，網路 105 包括 了任何資訊可藉以於客戶端裝置102-104及/或伺服器i〇6 之間傳輸之通訊方法。 用以在前述通訊鏈結上傳送資訊的媒介通常包括任何 可由運算裝置存取之媒介。電腦可讀取式媒介可包括電腦 儲存媒介、有線及無線通訊媒介，或其中任何的組合。此 外，電腦可讀取式媒介一般會包含電腦可讀取式指令、資 201013158 料結構、程式模組等資料。這類 訊 號形式透過資訊傳送媒介來進行.可以調製後的資料叫 訊號、或其他傳輸機制來傳輸，二例如以栽波、資料 媒介。「調製後資料訊號」一詞及、「'=含任何的資訊傳輪 具有-或多個特性的訊號，其會以號」-詞包括了 對資訊、指令、資料等進行編竭類^式設定或改變來 介包括了供聲波、射頻、紅外線 ，，而言，通訊媒 流體或空間，以及雙絞線、同轴線、:線訊號傳遞之 線媒介。 呢先纖、波導器等有 本發明伺服器106可包含複數個 裝置。伺服器106可提供影後八 置或單一個運算 計圖表、執行光學影像辨識=像S3直方統 =對' 判定影像相關資訊、進行資料庫之“=之影 為等等，器 :盖線上期刊（如部落袼）、照片、評論、線 ^網 搜尋、、構物、廣告蝴其他類似者)1服(器;專06訊、 # 理服務’例如對網路資源(如網頁等)之間關 ;、車Lit改及管理。簡言之，祠服器106可包含任何 圖中可作·％di—s端裝置1G2.1G4上的使用者。 ^ φJ服器106的裴置包含了專用的伺服器裝置、 程式化消費桌上型電腦、多處理器系統、微處理器式或可 ，相ΗΒΪ電子產品、網路電腦、或其他類似者。在實 彡ι〇6及/或任一客戶端裝置102-104可在一或 實行。异t上實行，如在參照第二圖所描述之客戶端i 201013158 览已端装夏敦发 # f 根據本發明實施例一作為參考資料收集器 2^0异A 一一^置範例。在一具體實施例中，客戶端裝置 動裴置，如一膝上型電腦。此處行動裝置的其 .^ ^ ^ 了 PDa或行動電話，其係安排來透過一或多 士 ^、抵^ I介面發送及接收音訊傳輸與簡訊服務等訊息。

:候’行動電子裝置能夠藉由下列方式進行個人 j j接到—或多個無線網路、連接到—單—無線網路 的多^卩點、經由—或多㈣道連往-或多個網路，或是 加入或多個通訊對話中（session)。通常，客戶端裝置2〇〇 可包3任何行動式或固定式的電子裝置。這類裝置包括膝 上型電腦、掌上型電腦、個人數位助理(PDA)、手持電腦、 手機、智慧型手機、傳呼^、射縣置、紅外線裝置、结 合一或多個前述裝置的整合型裝置等。客戶端裝置2〇〇亦 可，括其他電子|置，如個人電腦、多處理^系統、微處 理器式或可程式化消費性電子產品、網路電腦、可戴式 電腦等。 客戶端裝置200可能含有比第二圖所示者更多或更少的 組成元件。然而，圖中所示元件已足以揭露實施本發明之 具體實施例。如第二圖所示，客戶端裝置2〇〇含有一處理 器單元222，其透過一匯流排224與一大容量記憶體230通 訊連接。 大谷置§己憶體230可包括隨機存取記憶體（ram ) 232、 唯讀記憶體（ROM) 234、及其他儲存手段。實施例的大容 量記憶體230說明了儲存資訊之電腦儲存媒介的另一態 樣’其儲存之資訊可包括電腦可讀取式指令、資料結構: 程式模組、或其他資料等。大容量記憶體23〇會存J 一基 12 201013158 本輸入/輸出系統(BI〇S)24〇來控制客 操作。大容量記憶體230亦可儲在广f 及低丨皆 客戶端裝置2。。之操作。閱二=二 ϊ 的如 、_、或 L_ ⑧ 2二二1 :訊作業系統，如 t1 r ' J "ΓμΓ ° ^^ fur _模組來作為通訊介面，以便透過

Java應用程式控制硬體元件及/或作業系統之操作。 ❹ 或多個資料儲存單元 :置包含電觸可執行式指令’當其為客戶端 ===、缺、呈現、及/或處理 :==如;求?接收頁的= 拿、）、音訊、〜，/MS，MMS, IM，電子郵件及/或其他訊 之間的通信:二它應動:程其他客戶端農置使用者 管理工具、事務^用程式的例子則包括了日曆、聯絡人 理程式:表格程二二等等轉碼器、資料庫程式、文書處 230 246 ^ 固稞砠24 8，其可在作業系統2 4丨控制 =藉如由頁中的外掛程式(_模組， 像資:置情境資:”二 灯動裝取得或接收之相關影像資料進行初期處理或完整 13 201013158 處理。地圖模組248可管理地圖資訊以執行顯示、透視、 動作、與影像或内容整合、以及其他地圖操作等動作。 客戶端裝置200亦可包括一電源供應器226，一或多個 ❹ 無線介面250’ 一音訊介面252, 一顯示器254, 一鍵盤256, 一照明器258, 一選配的資料擷取模組259, 一輸入/輸出介 面260 ’ 一選配的觸感介面（haptic interface)262，一選配的 全球定位系統(GPS)接收器264,以及一選配來感測客户端 裝置之運動、方向及/或方位的感測器266。電源供應器226 會供應電源給客戶端裝置200。可充電式或不可充電式電池 則可用來提供供應器電源。該電源亦可由一外接式電源來 供應，如交流電轉接器或一用來對電池充電的底座。 客戶端裝置200亦可選擇性地連接到一基地台，或直接 連接到另一客戶端裝置。無線介面25〇包括了用以將客戶 端裝置200耦接到一或多個無線網路的電路系統，其係建 置來與一或多個通訊協定及技術一起使用，其包括但不限 於：TCP/IP、UDP、GSM、CDMA、TDMA、SMS、GPRS、 WAP、UWB、IEEE 802.16 (WiMax)等技術或協定等。 音訊介面252係安排來產生及/或接收音頻訊號，例如 人聲、音樂、或其他類似者。舉例言之，音訊介面252可 以柄擴音器或麥克風（圖中未顯示）以與其他人通 信及/或產生對某些動作的音訊通知。顯示器25 晶(LCD)、電衆、發光二極體（L ^ = 置的其:顯示器類型。顯示器254亦可包括觸控;= 以接收來自物體（如觸控筆）或是手指之輸入。 盤256亦可包括那些與遘擇及進行可變程序;=命: 201013158 照明器具體言之， 特定事件。例如，當==== 裝置通電期間維持 …月器乃8亦可在特定動作進行時（如撥接 置時)以多種樣式照亮這類按鍵，或是使 = 或半透明盒體内的光源發光以回應—動作。 作為擷取影像用之閃光燈。資料擷取模;且259(如

::::)可：括在客戶端裝置2〇〇中，可為該客戶端裝置 獲取衫像、視訊、溫度、壓力、或其他資料。 客戶端裝置200亦包括了用以與外部裝置(如手持裝置) 通訊的輸入/輸出介面260,或其他第二圖中未表示之輸入 或輸出裝置。輸入/輸出介面260可利用一或多種通^技 術，如USB、紅外線、藍芽（Bluet00thTM)#。選配的觸感介 面262可安排來對客戶端裝置之使用者提供觸覺回饋。例 如，當另一客戶端裝置之使用者正在呼叫時，該觸感介面 可以特定方式振動該客戶端裝置提醒使用者。 選配的全球定位系統(GPS)接收器264可決定客戶端裝 置200在地球表面上的物理座標’其典型為輸出經緯度座 標值。全球定位系統接收器264亦可採用其他地理定位機 制，其包括但不限於：三角測量、辅助型全球定位系統 (AGPS)、增強型時間差觀測（Enhanced Observed Time

Difference, E-OTD)、區胞識別符（cell identifier, Cl)、服務 區域識別符（service area identifier )、增強型時間先行法 (enhanced timing advance，ETA )、基地台子系統（base station subsystem，BSS)等，以進一步判定客戶端裝置200 在地球表面上的物理位置。可瞭解到全球定位系統(GPS)接 15 201013158 :ΐ二在有裝差置範一的物理 判定出之物理 可忐在一米或更大的範圍内。 是％圍 選甘配的感測器266可相到行動裝置的方向、方仇 貝成，如該仃動裝置貧訊的任何改變 = 度計、陀螺儀、羅盤、或其他可偵測動；、方向等；力二 器。此外’感測器266還可句万㈣的感測 •處理元件等其他元件。1括或搞接到傳感凡件、訊號 網路裝罾說明 第三圖係表示了依據本發明—網路之 -2而網路上置：〇可，^ 然而，圖巾所耗件已足叫露實 牛 二=置圖所示之飼服器 描述為-飼服=目的’下文中的網路裝置3。。會 ❹ 如圖所示，伺服器裝置300含有一處理單元322，装读 過匯流排324與大容量記憶體33()連結。大 、 儲==取:.” 332、唯讀記憶體辦、二他 介^其33() #明了電腦可讀取式媒 稱為電腦儲存媒介。電腦儲存媒介 口 ;=ΠΓ式媒介，其可儲存電腦= ^巧”構、或其他資料等資訊。電腦儲存媒介的其 他例逛包括電子可抹寫編程式唯讀記憶體氏丨沉岀⑶办 Erasable Programmable Read_〇nly Mem〇ry，EEpR〇M)、快 16 201013158 閃記憶體(flash)等其他半導體記憶科技’光碟(cd_r 、 數位影音光碟(DVD)等其他光學儲存裝置 ，磁匣、磁帶、磁 存裝置’或任何其他可用來儲存所需資訊 並了為運算裝置所存取之媒介。

大容量記憶體330會儲存一基本的輸入/輸出系統 (BIOS)340以控制伺服器裝置3〇〇的低階操作。大容量記憶 體330亦會儲存一作業系统341用以控制飼服器裝置· 之操作。可瞭解的是這類組件可包含一般用途型的作業系 統，如 Windows、UNIX、LINUX、8〇1_ 等作業系: 統亦可包括或以一 Java®虛擬機器模組作為通訊介面，使其 得以透過Java應用程式來控制硬體元件及/或作業系統之操 作。 ’、 大容量記憶體330更含有一或多個資料儲存單元342， 其可為伺服器裝置300用來儲存程式344及/或其他資料。 程式344可包括電腦可執行式指令，其可被伺服器裝置3〇〇 執行來實行一標記處理器程式’如用以傳送、接收或處理 HTTP通訊之HTTP處理器程式、用以傳送、接收或處理 WAP通訊之WAP處理器程式等。同樣地，程式344可包括 用以處理安全連結的安全套接層通訊協定（secure s〇cket layer，SSL)處理器程式’如在一安全機制下初始與一外部應 用之連結。其他應用程式之例子還包括内容管理程式、^ 訊程式、行事暦、日曆、網路服務、轉碼器、資料庫^式、 文書處理程式、表格程式等。據此，程式344可處理影像 音訊 '視訊、或標記頁面等資訊，使其得以與其他電子 置與/或服務之使用者通信。 此外，大容量記憶體330會儲存影像處理模組346。影 像處理模組346可包括電腦可執行式指令，其在作業系統 17 201013158 341控制下會運作來進行影像分析、影像 訊、存取與地理位置相關之資訊、評估 資 判定搜尋詞、或其他影像相關等處理。乂―曰者丁為貝料、 影像處理模組346通常會與客戶端裝置;的、^2中模 組通訊。大容量記憶體330亦可含有—搜尋模組=^模 :乍為影像處理模組346之一部分或與 連 ;: 組348可包含-般用來進行資料搜尋的 J^模 内容搜尋、網路資源鏈結之搜尋、f二擎如進仃 ❿ 伺服器裝置300亦含有用以與輪入庫輪搜出尋裝等置溝 入/輸出介面360，如鍵盤、滑氡、滾輪、搖 關輪 數字鍵盤、印表機、掃描器、及/或其 =關、 置3。。的使用者可以二:入Si 置和使用者介面溝通，該介面可與作業系統34ι、 ^裝 及/或其賴組分開或整合。與該使財介面之 、 2= 之視覺互動。此外’發明中還含有-心 本發明之伺服器裝置300可含有用於電腦 式、不可移除式媒體。其儲存資 可移除 令、資料結構、程式模組、或其二 學儲存裝置，鍊、料、)等其他光 任何其他可料絲w有丨他雜料裝置，或 介了具他了用_存所需資訊並可為運算裝置所存取之媒 201013158 透過網路通訊介面單元350，伺服器裝置3〇〇可與廣域 ，路溝通連接，如網際網路、區域網路、有線電話網路、 行動電話網路，或一些其他的通訊網路，如第一圖所示之 網路105。網路通訊介面單元350有時會被認知為收發器、 收發裝置、網路介面卡（Netw〇rk interface card, NIC)等。 邏輯說明_ 第四圖說明了用以根據行動裝置所指方向來判定搜尋 結果之邏輯流程圖範例。在此實施例中，處理程序主要是 魯在客戶端行動裝置進行，但其中至少部分操作程序可以透 過網路在伺服器裝置端執行。 步驟402中會決定該行動裝置現處的實體地理位置。該 • 現處位置可透過内建的GPS元件、射頻標籤(RFID)、位於 已知地點之讀取器、或其他的定位元件來建立。或者，使 用者可以輸入、點選、或是指定所顯示地圖上的一個點， 其了回傳緯度、經度、街址、稅務包裹號碼（tax parcel number)、或其他地點資訊。在其他實施例中，使用者可以 簡單地輸入地點資訊，如地址、路口、建築物名稱、地標 % 名稱、或其他地點資訊。 在另一具體實施例中，行動裝置之攝影機可以擷取影 像’其之後會被用來分析與相對已知地點資訊之關係。例 如’攝影機可擷取街道標誌、告示牌、店面、建築物或其 他場景的影像。從該影像中可分析出文字、符號、地標或 其他資訊以判定一地點。影像分析及地點偵測的細節在共 有的美國專利申請第Π/121，259號(2008/5/22日提申），標 通名稱「Data Access Based On Content Of Image Recorded By AMobile Device」的專利中有進一步的描述，其所有内 容在此併入做為參考文獻。 201013158 在步驟404中，行動裝置會用來建立行動裝置所指向的 初始定向性方向。此初始方向可以多種方式建立，且會用 來將行動裝置與地圖模組或其他服務同步化。例如，根據 所判定的初始位置，行動裝置可顯示一訊息來指示使用者 將行動裝置沿著已知街道指向一已知的實體物件、指向一 已知的羅盤方向或其他使用者可輕易辨識的方向。行動裝 置亦可顯示所判定初始位置周邊區域的2D或3D地圖，且 該地圖可顯示箭頭、強調的圖示、或街道、物件等其他指 示、或是行動裝置可指示使用者將行動裝置所指向處的其 φ 他方向項目。所顯示的地圖可幫助使用者進行定位以將該 行動裝置指向所指示方向。行動裝置亦可進一步指示使用 者按下行動裝置上的按鈕，以表示該使用者已依指示定位 該行動裝置。 在另一具體實施例中，行動裝置可使用初始判定位置周 邊區域的3D第一人稱透視地圖。更確切地說，3D地圖可 顯示使用者應將行動裝置指向的建築物、地形、或其他已 表現物件的3D圖形場景。該3D圖像場景可以顯示成半透 明或輪廓狀的重疊層疊加在行動裝置攝影機饋入的畫面 ® 上。當使用者移動行動裝置的相機鏡頭到不同方向時，使 用者將可“辨識”相機取景器中的影像在何時會與所顯示的 3D地圖相符。同樣地，行動裝置可連續掃瞄攝影機饋入之 晝面並比較3D透視的重疊晝面以進行特定圖樣的影像識 別。假如有偵測到相符的情況，當使用者將相機鏡頭指向 正確的方向時行動裝置即可自動進行識別。 在進一步的具體實施例中，行動裝置可以使用GPS模 組偵測到裝置正朝某特定方向移動，並指示使用者將行動 裝置指向使用者正在行進的方向上（例如藉由汽車、大眾 20 201013158 再一次地’行動裝置可指示使用 置被定位在所指示的方向上。 的相機鏡頭指向二的=裝行動裝置 裝置可得到目前時辰方上===行: 計算該行動裝置所指之方向。 ^的地點來 陰!。在進-步的具二=置= 參 讀取方向。該按按下独時行動裝置可從羅盤 门補鈕可為一般的實體按 ，可為㈣在絲上的虛擬独， ===)’ 紐，或其他形式的按^ μ為專㈣「方向」 置可存取與初始位以_ _ 來判定方向上施例中，初始方向可作為-參考方向 在此具體實施例的步驟406中 的變化。例如，行動裝置 丁動：置會判定方向上 間或期後偵測到新的定位性方向：行置周，動期 像的移換。該影像移換:指出運=:卜)，以判定影 動裝置可以計算新的方向 ^與總量，因此行 :連續拍下-連串的影像並分析二::像 條、方塊等等。行勒 二〜像之圖案，如線 得當使用者將行動裝、 5平估這些圖像的動作，使 挪動時’行動裝置可判、心目景的方向（或方位) 由類似的動作量值（其實際二可。行動裝置亦可藉 顯示或其他所顯示之内 ^相反方向）修訂地圖 冬π第一圖樣與最後所擷取 21 201013158 影像的最後圖樣_移換。此機 圖是固定在實體世界空間中的印象，而地 正在此地圖上追拍遙攝。 丹使用之仃動装置 r螺在/:ΓΓ，行動裝置可含有-或多個加速度，、 方向、或其他性質的組件。例如，：_„貝】動作、 := 方:動作。其中之於初始— 方向^

在步驟4G8中，當行動裝置正在移動，或是行動 向新的方向後，行動裝置會取得與該最新方向有關^内容 資訊。該行動裝置會存取儲存在行動裝置及/或遠端伺服器 的内容資訊。行動裝置可存取資料庫或根據目前地點與方 向資訊來提交搜尋請求。使用者亦可輸入關鍵字或其他搜 尋參數。例如，使用者可輸入在行動裝置現在指向的方向 上所發現之地址、商號名稱、產品類型、或其他使用者感 興趣的搜尋詞。行動裝置或搜尋伺服器可根據所輸入的搜 尋詞、目前方向、及目前位置來進行搜尋或過濾搜尋結果。 同樣地，使用者玎輸入一離目前位置最大的距離，或是搜 尋系統可採用預設的最大距離。其搜尋可限制在位於此特 定距離内之結果，或是位於此特定距離周遭一定範圍内之 結果。 内容資訊會以地理位置資訊來標示。搜尋系統可以判定 相對於該行動裝置目前位置與方向的地理位置範圍。之後 搜尋系統可判定那些位於所判定範圍内、標示有地理位置 之内容。其結果町進一步根據關鏈字或其他參數來加以判 定。例如，行動裝置的使用者可允許搜尋系統或其他服務 追蹤其移動、網路亙動、購買行為、遊戲活動、或其他行 22 201013158 動裝置之用途。該些資訊可編譯在與行動裝置有關聯的設 定檔中。總合統計資訊資訊(aggregate information)亦可進行 編譯與統計分析來獲得其他一些裝置或使用者之行為。搜 尋系統可使用該設定檔資訊及/或總合統計資訊來進一步將 搜尋結果筛選成與該行動裝置使用者更為相關之資訊。 在其他例示中，使用者在行動裝置所顯示的地圖上可能 已選擇了指示某種資訊類型的標籤，如餐廳等。對應該所 選標籤之搜尋詞可連同位置、方向、距離與關鍵字等資訊

一起提交’以將搜尋結果限制在位於目前方向上的餐廳。 同樣地’使用者可以選擇一標藏，或是指明使用者想要 那些目前位於行動裝置所指方向上之使用者的個人資訊。 例如’使用者可以使用傳訊系統，以使用者帳號登入一入 口服務網站來使用社交網路系統。該系統可管理依不同關 ，程度區分的人群關係，或者提供可為搜尋系統存取之目 則地，資訊。在其中一種場合中，可能會有兩個使用者正 2時試圖在街道上、建築物内某處、擁擠吵雜房間内、或 ς他，，中定位彼此。此時，使用者可使用所選定的「人 」，籤、所輸入的名字、所輸入的使用者ID、或其他相 于搜号岡來將結果限制在那些與搜尋詞、目前方向、及目 置有關聯之資訊。發明中，選擇性呈現之資訊亦可為 一者系統用來判定其最後結果。例如，自用的使用者可指 他使用者將其行動裝置指向該使用者所在方向時該 或者者對於其他使用者仍維持在「隱身」（不顯示）的狀態。 I#I群級使用者可指明只讓群組使用者聯絡人名單内的 者知道其存在。 該進t列定搜尋結果時，搜尋系統亦可計算每個搜尋結果與 人仃拽尋之行動裝置目前位置間的距離。同樣地，搜尋 23 201013158 系統亦可計算每個搜尋結果與行動裝置所指方向之間的偏 移量。該偏移量可以是相對於該方向線的角度偏移、直線 偏移，或是其他偏移等。 、在步驟410中，距離資訊和最終結果會提供給行動裝置 並由該行動裝置顯示。行動裝置可將搜尋結果顯示成簡單 的列表或以圖形方式展*。例如，行動裝置可根據離該行 動裝置目前位置之轉順序來鮮朗表。使肖者可具體 指明將該距離值顯示在每—搜尋結果後面。同樣地，行動 =可在每—搜尋結果後指出其偏移量。其搜尋結果可能 3有可指明資訊類型的圖示或其他圖形。例如，可用化身 ㈣來代表㈣者型態之搜尋結果。加油 之 ^結果則可用加油符號來表示。同樣地，顏色、字型、 〆，、他指不符皆可用來區分不同搜尋結果。/ 妒顯在亍*體/施例中，行動裝置會將搜尋結果疊加到圖 二果品 行動裝置可將圖示、文字、或豆他搜尋 可能會抱助= 向^圖部分的搜尋結果 ❹ 二ί根據使用者所選標籤、輸人關鍵字、預先定義之偏 〇又疋、在線參數(Presence parameter)、過往杆或始釦絲 或其他過咖來加以顯示。二：尋= 的搜尋結ί 動裝置在四處移_以動態更新實際 上，動定的30透視地圖 寸订動*置移動時該顯示畫面看起來像是在該向量 24 201013158 =ΐΪί遙攝°在一具體實施例中’半透明3DiH、目a 的方景影像上描綠有物件的輪廓，如街道^透視地圖 r二立於行動裝置目前位置鄰近周邊、作未在目- 切㈣離上限）的搜尋結果可先可視 果行動裝置在-特定方向上保持不H此面外i者)’如 搜尋結果從該裝置目前位置處不斷地顯越來 明中亦可藉由搜尋沾果指干二，不出來。發 ❹ 參 程度’以對空間上較近或較為不近的搜尋示距離 ;搜尋結果的結果圖示後方可能會有關於現距離圖==

本發明進一步的具體實施例中可提供「X Ϊ裝給予使用者類似x光觀點」的感ΐ、: 與地形以顯現某特定方向上障礙物後 =障，:呈半透明顯示。搜尋結4以1 :站、商店、使用者自行產生之内容、或=二 其相對應之圖示或其他結果類型之指示符 經大約知道自己在尋找什麼的情況下非；：在：：：土 欲搜尋之資訊類別或特定字串等。 如使用者 搜种，假若㈣錢w是地址資訊， 不同方向。在此情形下，使用者可移動行動„ 動到輸入地址所在4上時可顯示=红:行動裝置被: 、'工點。il使使用者 25 201013158 得以找到方向以前往所欲的地址處。 同樣地，本發明又一具體實施例中可提供「疊加」 (overlay)及「發現」（discovery)功能。此具體實施例可給予 使用者在實體位置上放上一數位或虛擬疊加物的感覺， 讓使用者不需尋找任何特殊的標的物即可發現内容資訊。 例如，使用者所產生之内容(如帶有地點標示之影像或由其 他使用者提供之評論等）可顯示在行動裝置使用者目前位置 的周遭。當使用者移動行動裝置的方向時，該具有地點標 示之影像、評論、或其他内容可以被顯示出來。此作法通 • 常可以應用在社群服務中。 在步驟412中’行動裝置可以偵測到使用者在行動裝置 上啟用之縮放功能。行動裝置會判定其視野方面的變化。 在一具體實施例中’視野上的變化可簡單地以行動裝置所 指方向上距離範圍的延伸來表示。在另一具體實施例中， 視野的改變可以目前位置上偏移值的變化來代表。透視計 算亦可判定一方向線在角度偏移或直線偏移上的變化。 在步驟414中’搜尋結果的顯示會被更新來反應視野上 的變化。或者，可請求一新的搜尋，其搜尋結果可被加以 更新。 上述說明書、範例、及資料提供了本發明組成在製造及 使用方面完整的描述。例如’搜尋結果可透過音訊輸出裝 置來提供’其對於駕駛人或盲人使用者是非常有用的。而 在其他具體實施例中，可移動式成像裝置（如網路攝影機) 可耦接到一運算裝置，且只有該可移動式成像裝置會移動 其位置及/或方向。由於在不悖離本發明精神及範嘴的前提 下本發明有許多具體實施例得以實行，本發明將寓於下文 所附之申請發明範圍中。 26 201013158 【圖式簡單說明】 明 類似的元件符號會代外指明，否則在邱圖式中 •為了更了解本發明’本發明實施方式將參照下列圖式加以說 ί3明；本發:得在其中運作之範例性系統實施例； ΐ一Ξ表不了一行動裝置實施範例之示意圖； 裝置實施範例之示意圖;以及 輯流程圖範例。 仃動裝置職μ來決定搜尋結果之彳

【主要元件符號說明】 100 系統 102 客戶端裝置 103 客戶端裝置 104 客戶端裝置 105 網路 106 伺服器 200 客戶端裝置 222 處理器單元 224 匯流排 226 電源供應器 230 大容量記憶體 27 201013158 ❿ 232 隨機存取記憶體 234 唯讀記憶體 240 基本輸入/輸出系統(BIOS) 241 作業系統 242 資料儲存單元 244 程式 246 影像處理模組 248 地圖模組 250 無線介面 252 音訊介面 254 顯示器 256 鍵盤 258 照明器 259 資料擷取模組 260 輸入/輸出介面 262 觸感介面 264 全球定位系統(GPS)接收器 266 感測器 300 伺服器裝置 322 處理單元 324 匯流排 330 大容量記憶體 28 201013158 參 332 隨機存取記憶體 334 唯讀記憶體 340 基本輸入/輸出系統 341 作業系統 342 資料儲存單元 344 程式 346 影像處理模組 348 搜尋模組 350 網路通訊介面單元 352 可移除式媒體驅動裝置 354 影像顯示轉接器 355 電腦儲存媒體 356 永久式媒體驅動裝置 360 輸入/輸出介面 402 步驟 404 步驟 406 步驟 408 步驟 410 步驟 412 步驟 414 步驟 29

Claims (1)

1. 201013158 七 申請專利範圍： 一種判疋内容之方法，其包括下列步驟： 判^一行動裝置之初始地理位置； 判=該行動裝置之成像元件所指向之初始方向； 判定該行動裝置之成像元件被指向一新方向時之方向 Πΐ巾該方向變化至少部分是藉由使賴行動裝置之成 像70件來判定； —2疋與該新方向有關以及與位於該初始地理位置預先 定義範圍内之内容位置有關之内容 :以及 距 Λ錄提供S判定内容至一輸出元件以輸出帶有内容地點指 不之内，，指出該初始地理位置與該内容位置之間的 離’並指軸對於該财向上_容地點。 2. 申明專利範圍第i項所述之方法’其中該判定方向 栝下列步驟： =該行動裝置之成像元件擷取複數個影像； 分析該每一複數個影像以判定該每一複數個影像中實 貨相同的影像圖樣； 數個景像巾第-影像H像圖樣與該複 像中最後衫像之最後影像圖樣之間的轉變；以及 根據該轉變判定該新方向。 句;利圍第1項所述之方法，其中該判定該初始方向 L括下列其一步驟： 自該仃動裝置成像元件之相機饋人晝面上； 判定該行動裝置之成像元件已被指向一已知方向； 侏的該彳τ動裝置上顯示位於已知地理位置處之已知物 Α二樣’並偵測該行動裝置已被移動來使該圖樣重疊在來 30 201013158 偵測該行動装置之成像元件已被指向所偵測到 動裴置之直線運動方向上； 仃 亥行動裝置已被指向太陽並根據該初始地理位 置、目前日期、及目前時間來決定該新方向；以及 讀取羅盤。 4. =請專概圍第1項所述之方法，其巾刻定内容之步驟 包括： 過網路向一遠端搜尋系統傳送一搜尋請求，其中該 搜尋請求包含該初始地理位置及該新方向；以及 透過網路從該遠端搜尋系統接收一搜尋結果， 搜尋結果包含該已判定内容。 / 5. 如申請專利範圍帛】項所述之方法，其中該判定内容之 包括： 透過該行動裝置之一使用者輸入元件接收一搜尋夂 數；以及 β 根據該搜尋參數、該初始地理位置、及該新方向 尋一内容資料庫。 6.如申請專利範圍第i項所述之方法，更包括根據下列至少其 中一者過濾該内容： 、 與該行動裝置有關的使用者資訊設定檔；以及 複數個使用者與至少一網路資源互動方面之總合 資訊。 ' 7.如申請專利範圍第！項所述之方法，其中該提供所判定内容 至輸出元件包括下列其中之一步驟·· 31 201013158 將該所判定之内容疊加在所顯示之地圖上；以及 將該所判定之内容叠加在該相機饋入畫面上。 8. 如申請專利範圍第1項所述之方法，其中該提供已判定内容 至輸出元件之步驟包括： 偵測該行動裝置之成像元件進一步的定向性運動；以及 假如該成像元件被移動到指向該已判定内容之方向 上，則指出s亥已判定内容位於該成像元件的視野内。

   9. 如申請專利範圍第1項所述之方法，更包括： 偵測該成像元件之縮放操作； 根據該縮放操作來判定一縮放範圍；以及 細與另一内容位置有關聯之另一内容，該另一内容位 =位於相對於_始地雖置及相騎該财向上的縮 固内。 申料概圍第1酬叙方法，其巾該已贼内容包 3另一行動裝置之地點資訊。 ❹ 齡㈣腦可讀取式，該齡可使電子裝置 進仃包括巾請專利範圍第丨項中步驟之複數個運作。 12. —種判定内容之系統，其包括： •-處理器； 一成像元件，其與該處理器通訊連接； 一輸出元件，其與該處理器通訊連接； 二使用者輸入介面’其與該處理器通訊連接；以及 抑1，憶體’其與該處理器通訊連接並儲存資料及指令， Μ扎々可使該處理器進行複數個運作，其包括. 32 201013158 判定該成像元件之初始地理位置； 判定該成像元件所指向之初始方向； 判定該成像元件被指向一新方向時的方向變化，其 中該方向變化至少部分是藉由使用該成像元件來判定.、 決定與該新方向有關以及與位於初始地理位置預 先定義範圍内之内容位置有關之内容；以及

   點# 4至—輸丨元件以輸出帶有内容地 .0曰曰不付之内谷，指出該初始地理位置與該内容位置之 離’並知麵_財肖上_容地點。

   33 201013158 ，其中該指令更使該處 13.如申請專利範圍第12項所述之系統 理器進行下列之運作： 使該成像元件擷取複數個影像； 分析該每一複數個影像以判定該每一 質相同的影像·; 叫像中實 判定該複數個影像中第一影像之第一影像圖樣與該複 數個影像巾最後f彡紅最後轉圖樣之_轉變；以及 根據該轉變判定新方向。

   14.二如申請專利範圍帛12項所述之系統，更包括一與處理器通 訊連接並判定該初始位置之位置感測器。 I5·如申请專利範圍第12項所述之系統，更包括一與處理器通 訊連接及與網路通訊連接之網路介面，其中該指令更使處理 器進行下列運作： 透過網路向一遠端搜尋系統傳送一搜尋請求，其中該搜 尋請求包含該初始地理位置及該新方向；以及 透過網路從該遠端搜尋系統接收一搜尋結果’其中該搜 尋結果包含該已判定内容。 16.如申請專利範圍第12項所述之系統，其中該指令更使處理 器根據下列至少其中一者過濾該内容： 與該行動裝置有關的使用者資訊設定標；以及 複數個使用者與至少一網路資源互動方面之總合統計 資訊。 Π.如申請專利範圍第12項所述之系統，其中該指令更使處理 34 201013158 器進行下列其中之一步驟： 將該已判定内容疊加在所顯示的地圖上；以及 將該已判定内容疊加在相機饋入畫面上。 18. 如申請專利範圍第12項所述之系統，其中該系統包含一行 動裝置。 19. 一種判定感興趣方向之方法，其包括下列步驟： 判定一行動裝置之初始地理位置； 判定與一内容位置有關聯之内容，該内容位置位於該初 泰 始地理位置預先定義的範圍内； 判定該行動裝置所指向之一初始方向； 顯示位於該初始地理位置預先定義範圍内的一區域之 ^ 第—部=，其中該區域之第—部份與該初始方向有關； . 判定該成像元件所指向之新方向上的方向變化； 如果該新方向是指向該内容位置所在該區域之 分’則顯示該判定之内容。 ° 20.如中請專利範圍第19項所述之方法，更包括下列至少 IP 驟· 以加速度計判定方向變化；以及 將該判定之内容疊加在該區域之第二部分的影像上。 35