TWI671502B - 基於場所的資訊處理方法及裝置 - Google Patents

基於場所的資訊處理方法及裝置 Download PDF

Info

Publication number
TWI671502B
TWI671502B TW103134020A TW103134020A TWI671502B TW I671502 B TWI671502 B TW I671502B TW 103134020 A TW103134020 A TW 103134020A TW 103134020 A TW103134020 A TW 103134020A TW I671502 B TWI671502 B TW I671502B
Authority
TW
Taiwan
Prior art keywords
information
place
user
marked
image
Prior art date
Application number
TW103134020A
Other languages
English (en)
Other versions
TW201546420A (zh
Inventor
蔣雪婷
董雨林
Original Assignee
香港商阿里巴巴集團服務有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 香港商阿里巴巴集團服務有限公司 filed Critical 香港商阿里巴巴集團服務有限公司
Publication of TW201546420A publication Critical patent/TW201546420A/zh
Application granted granted Critical
Publication of TWI671502B publication Critical patent/TWI671502B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/169Annotation, e.g. comment data or footnotes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/52Network services specially adapted for the location of the user terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
    • H04W4/185Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals by embedding added-value information into content, e.g. geo-tagging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2101/00Indexing scheme associated with group H04L61/00
    • H04L2101/60Types of network addresses
    • H04L2101/69Types of network addresses using geographic information, e.g. room number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Instructional Devices (AREA)

Abstract

本申請公開了基於場所的資訊處理方法及裝置,其中,所述方法包括:接收使用者輸入的標注資訊;獲取所述移動終端設備所在的地理位置資訊;將所述標注資訊以及所述地理位置資訊發送到伺服器,以便伺服器根據所述地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,用於將該標注資訊提供給該場所內的查詢方用戶。通過本申請,使得場所中能夠留下用戶的“痕跡”,並且不會受到具體場所中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。

Description

基於場所的資訊處理方法及裝置
本申請涉及移動終端設備中的應用技術領域,特別是涉及基於場所的資訊處理方法及裝置。
現實生活中,人們經常有在某場所留言的需求。例如,當人們到某飯店用餐時,一般可能會需要對某菜品進行評價,或者抒發就餐時的心情、記錄就餐當天有紀念意義的事件,等等。為此,有些店主會為顧客提供一些貼紙和筆,顧客可以將其想要寫的評價、心情、事件等寫在紙上,並黏貼在飯店的牆壁等處。以後再有顧客到該飯店用餐時,可以查看之前的其他顧客在此地的留言,或者同一顧客以後再到同一飯店用餐時,還可以查看自己之前在此地的留言等等。類似的場所還有很多,例如,當遊客到某旅遊名勝地旅遊時,有時也會有留言的需求,或者想要留下自己的名字,證明自己曾經來到過這裡,例如,“某某到此一遊”等等。
但是,對於店主沒有提供紙筆或者不允許在牆壁上黏貼的情況下,顧客將無法及時將其在店內想要書寫的留言 表達出來,對於在旅遊景點而言,出於保護景觀等目的,現在的遊客們也一般不會再將自己的名字等刻在景點處,但是這樣也使得遊客們想要對自己曾經到過此處進行記錄等需求無法實現。
因此,在使用者需要在某場所進行留言的情況下,如何為使用者提供幫助,使得用戶可以隨時隨地進行留言,同時又不會受到書寫場地所提供條件的限制,成為需要本領域技術人員解決的技術問題。
本申請提供了基於場所的資訊處理方法及裝置,使得場所中能夠留下用戶的“痕跡”,並且不會受到具體場所中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
本申請提供了如下方案:一種基於場所的資訊處理方法,包括:接收使用者輸入的標注資訊;獲取所述移動終端設備所在的地理位置資訊;將所述標注資訊以及所述地理位置資訊發送到伺服器,以便伺服器根據所述地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,用於將該標注資訊提供給該場所內的查詢方用戶。
一種基於場所的資訊處理方法,包括:接收查詢方使用者發出的查看周邊標注資訊的請求; 獲取所述查詢方使用者所在的地理位置資訊;將所述地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;將伺服器返回的各條標注資訊提供給該查詢方用戶。
一種基於場所的資訊處理方法,包括:接收標注方用戶端上傳的標注資訊以及使用者移動終端設備所在的地理位置資訊;根據所述地理位置資訊確定該使用者所在的場所資訊;建立所述標注資訊與所述場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並將該目標場所對應的標注資訊返回給該查詢方用戶端。
一種基於場所的資訊處理方法,包括:接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;根據所述地理位置資訊確定查詢方使用者所在的目標場所;根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並返回給該查詢方用戶端。
一種基於場所的資訊處理裝置,包括:標注資訊接收單元,用於接收使用者輸入的標注資訊;第一地理位置資訊獲取單元,用於獲取所述移動終端設備所在的地理位置資訊;第一發送單元,用於將所述標注資訊以及所述地理位置資訊發送到伺服器,以便伺服器根據所述地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,用於將該標注資訊提供給該場所內的查詢方用戶。
一種基於場所的資訊處理裝置,包括:查看請求接收單元,用於接收查詢方用戶發出的查看周邊標注資訊的請求;第二地理位置資訊獲取單元,用於獲取所述查詢方使用者所在的地理位置資訊;第二發送單元,用於將所述地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;標注資訊提供單元,用於將伺服器返回的各條標注資訊提供給該查詢方用戶。
一種基於場所的資訊處理裝置,包括:資訊接收單元,用於接收標注方用戶端上傳的標注資 訊以及使用者移動終端設備所在的地理位置資訊;場所資訊確定單元,用於根據所述地理位置資訊確定該使用者所在的場所資訊;保存單元,用於建立所述標注資訊與所述場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並將該目標場所對應的標注資訊返回給該查詢方用戶端。
一種基於場所的資訊處理裝置,包括:請求接收單元,用於接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;目標場所確定單元,用於根據所述地理位置資訊確定查詢方使用者所在的目標場所;標注資訊返回單元,用於根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並返回給該查詢方用戶端。
根據本申請提供的具體實施例,本申請公開了以下技術效果:通過本申請實施例,用戶可以利用其移動終端設備中安裝的應用,實現在其所在的場所中標注具體的資訊內容,這種資訊內容可以不限於文字,還可以是圖片,或者語音等等,通過各種形式的資訊內容,使得該場所中能夠留下關於該用戶的“痕跡”,並且不會受到具體場所中實 際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
當然,實施本申請的任一產品並不一定需要同時達到以上所述的所有優點。
601‧‧‧標識資訊
602‧‧‧標識資訊
603‧‧‧標識資訊
1001‧‧‧標注資訊接收單元
1002‧‧‧第一地理位置資訊獲取單元
1003‧‧‧第一發送單元
1101‧‧‧查看請求接收單元
1102‧‧‧第二地理位置資訊獲取單元
1103‧‧‧第二發送單元
1104‧‧‧標注資訊提供單元
1201‧‧‧資訊接收單元
1202‧‧‧場所資訊確定單元
1203‧‧‧保存單元
1301‧‧‧請求接收單元
1302‧‧‧目標場所確定單元
1303‧‧‧標注資訊返回單元
為了更清楚地說明本申請實施例或現有技術中的技術方案,下面將對實施例中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖僅僅是本申請的一些實施例,對於本領域普通技術人員來講,在不付出創造性勞動的前提下,還可以根據這些附圖獲得其他的附圖。
圖1是本申請實施例提供的第一方法的流程圖;圖2是本申請實施例中的第一使用者介面示意圖;圖3是本申請實施例中的第二使用者介面示意圖;圖4是本申請實施例中的第三使用者介面示意圖;圖5是本申請實施例提供的第二方法的流程圖;圖6是本申請實施例中的第四使用者介面示意圖;圖7是本申請實施例中的第五使用者介面示意圖;圖8是本申請實施例提供的協力廠商法的流程圖;圖9是本申請實施例提供的第四方法的流程圖;圖10是本申請實施例提供的第一裝置的示意圖;圖11是本申請實施例提供的第二裝置的示意圖;圖12是本申請實施例提供的第三裝置的示意圖;圖13是本申請實施例提供的第四裝置的示意圖。
下面將結合本申請實施例中的附圖,對本申請實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例僅僅是本申請一部分實施例,而不是全部的實施例。基於本申請中的實施例,本領域普通技術人員所獲得的所有其他實施例,都屬於本申請保護的範圍。
在本申請實施例中,可以通過開發移動終端設備(例如手機、平板電腦等移動終端)中的應用,來實現用戶將其想要表達的心情、想要描寫的故事等資訊“放置”在某場所的需求,這樣,即使該場所沒有提供紙和筆,或者不允許黏貼、不允許刻劃,也可以使得用戶在該場所留下曾經到過這裡的“痕跡”,雖然這種“痕跡”是虛擬的,無法直接用肉眼查看到,但是可以通過用戶的移動終端設備查看到,也相當於是一種實際的存在,並且更加順應資訊化時代的潮流。下面對具體的實現方式進行詳細地介紹。
實施例一
參見圖1,本申請實施例一首先提供了一種基於場所的資訊處理方法,該方法可以包括以下步驟:S101:接收使用者輸入的標注資訊;在本申請實施例中,各個步驟的執行主體可以是為移動終端設備開發的應用,該應用可以為用戶端-伺服器架構。其中的用戶端可以安裝在用戶的移動終端設備中,用 於與用戶之間進行交互,伺服器運行於後臺伺服器中,在資料庫等方面提供服務。在具體實現時,該應用也可以整合在其他的應用中,例如,也可以在現有的即時通訊、社交網路等應用中標注本申請實施例中的相關功能。其中,該實施例一主要從用戶端角度對本申請實施例的方案進行介紹。
無論應用本身具體以何種形式存在,對於應用的用戶端而言,都可以為使用者提供標注資訊內容的操作入口。例如,參見圖2,在用戶進入該應用之後,可以為使用者顯示出如圖2所示的使用者介面,在該使用者介面中,如果使用者點擊“留下自己”則可以進入到圖3所示的使用者介面。該圖3所示的使用者介面中,可以為使用者提供一個用於編輯資訊內容的編輯介面,具體的,可以為使用者提供文本輸入、語音輸入等多種輸入方式。也即,本申請實施例中所述的標注資訊,就是指使用者需要在其所在場所中“留下”的資訊,這種資訊以文本、語音等多種形式存在,可以通過終端設備中的應用,與用戶所在場所建立關聯關係。例如,在文本輸入編輯介面中,可以提供用於輸入文本內容的鍵盤、編輯方塊等控制項,還可以提供用於添加圖片、表情等元素的控制項(如按鈕)。當使用者輸入完成之後,例如,輸入文本“嘗嘗老闆新到的越南咖啡,很好味~”,則可以點擊使用者介面中的“放哪”按鈕,相應的,應用用戶端就可以將使用者當前輸入的資訊內容確定為需要在當前場所中留下的標注資訊。
S102:獲取所述移動終端設備所在的地理位置資訊;在確定了使用者需要在當前場所標注的資訊內容之後,還可以確定出當前使用者所在的地理位置資訊。當然,在實際應用中,該步驟S102也可以在S101之前進行,例如,只要用戶進入該應用的用戶端,在使用者輸入具體的標注資訊之前,就可以獲取使用者所在的地理位置資訊。
具體在獲取地理位置資訊時可以有多種方式,例如,現有的移動終端設備中一般都帶有GPS等定位系統,可以通過這種定位系統獲取到使用者所在位置的座標。此外,還可以採用通信基地台定位、WIFI定位等多種定位方式,以確定地理位置資訊。當然,在具體實現時,還可以為用戶提供手動輸入其所在地理位置資訊的操作入口,在用戶未開啟GPS定位功能,或者其移動終端設備上未帶有GPS定位功能的情況下,可以由使用者手動編輯其所在的地理位置資訊。
S103:將所述標注資訊以及所述地理位置資訊發送到伺服器,以便伺服器根據所述地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,並將該標注資訊提供給之後到該場所的用戶。
用戶端在接收到使用者的標注資訊以及所在的地理位置資訊之後,可以將這些資訊上傳到伺服器,在伺服器可以對這些資訊進行保存。在保存之前,伺服器還可以首先根據地理位置資訊確定出使用者所在的場所,這樣,最終 在保存時,保存的是標注資訊與場所之間的對應關係,以此實現基於場所的資訊標注以及查詢。
其中,本申請實施例中所謂的“場所”,一般可以包括一些餐廳、咖啡廳等室內場所,或者也可以包括旅遊景點等室外場所,這種場所所在的位置一般不會發生變化,有明顯的區域界限,並且場所內的裝飾、佈景、物品等發生變化的機率也比較低。對於這些場所,可以預先建立一個地圖資料庫,記錄有各個場所與所在地理區域範圍之間的對應關係。這樣,在接收到當前使用者所在的地理位置資訊之後,可以與地圖資料庫中保存的各個場所的區域範圍資訊進行匹配,如果發現用戶當前所在位置位於某場所的區域範圍內,則可以確定出該用戶當前正位於該場所內。
伺服器在確定了使用者當前所在場所的資訊之後,就可以將標注資訊與該場所資訊之間的對應關係保存到伺服器資料庫中。這樣,對於伺服器的資料庫而言,可以保存多條類似的對應關係,後續如果有其他用戶到達該場所,則可以查看該用戶之前在該場所標注的資訊內容。例如,這種對應關係在資料庫中的保存形式可以如表1所示:
其中,資訊內容的具體形式可以有文本、圖片、語音等多種,或者還可以是多種形式的結合,例如,文本+圖片,等等。具體如,某用戶在某餐廳用餐時,可以用文字形式抒發自己的心情,同時拍攝一張照片,此時,這段用於描述心情的文字以及這張照片,就相當於是該用戶想要留在該餐廳的標注資訊。
在具體實現時,隨著使用該功能的用戶的增多,用戶在各個場所中標注的資訊內容會不斷增加,使得資料庫的規模會不斷增大,此時,還可以對保存的各條對應關係按照場所進行管理。例如,可以按照場所進行分表保存,亦即,將同一場所中標注的資訊內容放在同一資料表中進行保存,相應的,不同場所中標注的資訊內容則會出現在不同的資料表中,每個場所對應一個資料表,這樣,後續在向某場所的用戶提供其他使用者標注的資訊內容時,就可以首先確定出場所,然後找到該場所對應的資料表,從該資料表中提取匹配的資訊內容並返回,這樣可以便於進行快速的檢索。
在以上所述的實現方式中,在一個使用者在某場所標注了某條標注資訊之後,其他使用者只要到了該場所,就可以使用其移動終端設備中安裝的本申請實施例的應用用戶端,查看到該用戶標注在該場所的標注資訊內容(關於查看標注資訊的具體實現過程,後文中會有詳細介紹)。
如前文所述,隨著時間的累積,同一個場所中被標注 的資訊內容可能會非常多,此時,如何提供一種有效的資訊篩選機制,進而也更加提高該功能的趣味性,成為需要進一步考慮的問題。
為此,在本申請的較佳實施例中,除了可以記錄使用者的標注資訊與場所資訊之間的對應關係,還可以記錄標注資訊在場所中的具體標注位置資訊之間對應關係。例如,某使用者將其標注資訊標注在了某場所的某張桌子上,則其他用戶或者該用戶自己後續再查看標注資訊時,也可以在發現該標注資訊在該桌子上,而不會出現在場所內的其他位置。這樣更符合實際在某場所留一張紙條或者刻字的情況。具體實現時,標注資訊與具體標注位置之間的對應關係,可以做得很精確,例如精確到具體某個點,或者也可以粗略地精確到某個範圍內,下面對具體的實現方式進行詳細介紹。
具體實現方式一
在該具體實現方式一中,可以將標注資訊的標注位置精確到某個區域範圍內。在記錄位置資訊時,可以使用放置位置所在場景區域內的圖像特徵資訊來描述標注位置資訊。具體的,可以如下進行:在接收到一個使用者輸入的需要標注的資訊內容之後,可以捕捉場所內的場景圖像資訊,當使用者觸發放置操作後,則在上傳標注資訊以及當前的地理位置資訊時,還可以將當前捕捉到的圖像的特徵資訊上傳到伺服器。這樣,伺服器在記錄標注資訊與場所 之間的對應關係時,可以將對應的圖像特徵資訊也記錄在該對應關係中。
例如,為了捕捉場所內的場景圖像資訊,可以自動啟動使用者移動終端設備的圖像攝取裝置,這樣,移動終端設備的使用者介面中會出現圖像攝取裝置捕捉到的場所內場景的圖像,隨著視角的改變,使用者介面中的圖像內容也在不斷發生變化。例如,在用戶點擊了圖3所示的“放哪”按鈕之後,可以啟動圖像攝取裝置,其中,某時刻的顯示狀態可以如圖4所示,該使用者介面中顯示捕捉到的圖像的過程中,還為使用者提供一個可操作物件。例如,圖4中所示的“here”按鈕,該按鈕在螢幕中的絕對位置可以是不變的,隨著使用者改變攝像裝置的視角,該按鈕與映射之間的相對位置可以不變發生變化。當使用者調整好視角之後,就可以按下該按鈕,通過操作該可操作物件,通知應用用戶端,將其輸入的資訊內容標注到該位置。相對應的,對於應用用戶端而言,在接收到使用者確認標注的消息之後,可以提取圖像攝取裝置當前捕捉到的圖像的特徵資訊,作為該標注位置的圖像特徵資訊,進而,可以將該標注位置的圖像特徵資訊發送到伺服器。
其中,具體在提取圖像特徵資訊時,可以提取多個維度上的特徵資訊,例如,圖像各個像素的顏色、圖像中可識別物體的形狀或輪廓、圖像的紋理、局部特徵等等。其中,所謂圖像中的可識別物體,一般可以是圖像中的電器(如顯示器、電腦、電視等)、傢俱(如桌子、椅子、凳 子、留言板等)、工藝品(如花瓶、裝飾品等)等有比較固定形狀的物體,還可以是雕像、房門、牆壁等結構建築。現有的圖像識別技術中,可以從攝取到圖像中識別出這種物體的部分或全部形狀和/或輪廓。而這種物體一般還具有以下特點:第一,其在場所中的位置一般不會發生變化;第二,對識別具體的位置資訊具有比較明顯的標識性作用;第三,使用者在標注資訊時,可能會根據在現實世界中的習慣,尋找到某件物體,並將資訊標注該物體上,或者該物體旁邊。例如,用戶在通過鏡頭查看當前場所的影響時,發現該場所中有台電腦的顯示器,於是就可能會將其想要標注的資訊內容標注在該顯示器的右上角,等等。類似地,用戶也可以將想要標注的資訊內容標注在電器、傢俱、工藝品等有比較固定形狀的物體,還可以標注在結構建築上。
總之,在針對各條標注資訊在提取標注位置出的圖像特徵資訊時,各條標注資訊都可以對應一個圖像特徵集合,也即,從多個維度上的特徵來描述一幅圖像。在將該圖像特徵集合上傳到伺服器之後,伺服器就可以將其添加到標注資訊與場所資訊的對應關係中進行保存。如表2所示。
這樣,伺服器後續在向查詢方使用者提供標注資訊時,不僅可以考慮場所資訊,還可以考慮標注資訊具體放置位置的圖像特徵資訊。例如,後續在為進入該場所的其他用戶提供標注在該場所的資訊內容時,也可以先啟動使用者的圖像攝取裝置,利用捕捉到的圖像特徵資訊與該場所中各個資訊內容的標注位置的圖像特徵進行匹配,匹配成功後,將相應的資訊內容提供給使用者。也就是說,在同一場所內,用戶在不同的拍攝範圍內看到的資訊內容可能是不同的,通過具體標注位置以及拍攝範圍對資訊內容進行篩選,避免使用者收到過多的資訊,並且也使得整個實現過程更加有趣,也更接近現實世界中“在某位置標注了‘紙條’,只能在該位置才能看到”的實際情況。
具體的,為了實現後續的查詢操作,伺服器在收到各條標注資訊的圖像特徵集合之後,可以根據各個維度上的圖像特徵建立索引。在具體收到一查詢請求時,可以從請求中提取出查詢方圖像資訊中的特徵,將該圖像資訊的圖像特徵集合與資料庫中記錄的各條標注資訊對應的圖像特 徵集合進行匹配。在進行匹配時,可以從各個維度上對圖像特徵分別進行匹配。為了提高檢索的效率,在提取圖像的特徵資訊時,可以將特徵資訊區分為一級特徵資訊和二級特徵資訊,其中,一級特徵資訊一般是比較淺顯的資訊,例如,顏色、圖像中物體的形狀、輪廓等資訊;二級特徵資訊則一般是比較深層的資訊,包括紋理、局部特徵等。這樣,在後續為其他使用者提供資訊內容時,可以從當前所在場所的各條資訊內容中,首先根據所述一級特徵資訊建立資訊內容的一級索引,在進行初步檢索後,再根據二級特徵資訊建立二級索引,最終檢索出匹配的資訊內容。
通過上述具體實現方式一,使得標注資訊可以精確到其放置位置所在場景區域範圍內,例如,某標注資訊的圖像特徵集合對應的是圖像A,而查詢者使用者在上傳其圖像特徵資訊時,該圖像特徵對應的是圖像B,圖像A與圖像B可能並不是完全相同,但是其中的圖像特徵具有比較高的相似度,則可以將該標注資訊提供給該查詢者用戶,以此類推。這樣,對於某個查詢者用戶而言,在某視域範圍內可能會收到很多條標注資訊(因為只要能與該視域範圍內的圖像特徵集合之間的相似度符合一定的要求,都可以認為是符合條件)。但是,由於沒有進一步的位置資訊,因此,在向查詢者使用者顯示這些符合條件的標注資訊時,各個標注資訊在查詢者使用者視域範圍內的圖像中的位置可以是隨機放置的。也即,只能將標注資訊顯示在 一個大致的範圍內。
具體實現方式二
在前述具體實現方式一中,能夠將標注資訊的放置位置精確到一個範圍內,在該具體實施方式二中,為了能夠進一步提高放置位置的精確度,還可以在保存圖像特徵時,進行進一步的處理。具體的,由於在提取圖像特徵時,能夠提取出圖像中的可識別物體,而使用者在標注資訊時,一般都會選擇一個有比較明顯特點的物體,並放置在該物體的某個位置上。基於此,在本具體實現方式二中,在提取圖像特徵的基礎上時,如果發現圖像中包括某可識別物體,則可以記錄標注資訊與該可識別物體之間的關聯關係,並發送到伺服器,這樣,伺服器可以在保存標注資訊與場所、圖像特徵集合之間的對應關係時,將與可識別物體之間的關聯關係也添加進去。
具體的,伺服器保存對應關係時,可以如以下表3所示:
在按照表3保存了上述對應關係之後,在向查詢者使 用者提供標注資訊時,可以將標注資訊顯示在這種可識別物體的附近。具體的,接收到查詢者用戶發送的請求之後,可以首先利用實現方式一中的各種圖像特徵,將查詢者使用者捕捉到的圖像中的特徵,與各條標注資訊對應的可識別物體的圖像特徵進行匹配,確定出匹配的標注資訊,並將匹配的標注資訊以及對應的可識別物體的圖像特徵返回給查詢方用戶端;查詢方用戶端可以據此從當前捕捉到的圖像中定位到可識別物體,並在該可識別物體的附近提供各條標注資訊。例如,假設有用戶在某場所中某顯示器附近標注了一條資訊,則其他使用者的圖像攝取裝置捕捉到該顯示器時,則可以將這條標注資訊提供給查看者使用者,並仍然顯示在顯示器附近。當然,在這種方式下,標注資訊具體在可識別物體的什麼位置處,是無法確定的,也即,假設某使用者將標注資訊放置在了某顯示器的右上角,但最終在向查詢者用戶提供時,可能出現在顯示器的左下角,等等,但都顯示在顯示器的附件。
具體實現方式三
在該具體實現方式三中,為了實現更精確的定位,在上傳標注資訊時,還可以進一步確定出標注資訊與該可識別物體之間的相對位置關係,並將該相對位置關係資訊上傳到伺服器,這樣,伺服器在保存標注資訊與場所、關聯的可識別物體的圖像特徵之間的對應關係時,還可以將前述相對位置關係資訊添加進去,以便後續在向查詢者使用 者提供標注資訊時,實現更精確位置的匹配。
其中,具體在確定標注資訊與圖像中可識別物體之間的相對位置關係時,可以首先確定出具體的圖像,在使用者指定確定放置的動作時,還可以記錄下放置的點在終端設備顯示幕中的座標。由於拍攝的圖像中各個像素的座標與顯示幕的座標是相對應的,因此,在已知了放置的點在顯示幕中的座標後,相當於確定了放置的點在拍攝到的圖像中的具體座標,接下來,可以從拍攝到的圖像中確定出可識別物體,由於一個物體一般都會占多個像素,因此可以從眾多的像素中選取出一個像素來代表該可識別物體的位置。例如,在圈定出一個可識別物體所在的區域之後,可以通過一定的演算法計算出該區域的中心點,用該中心點來代表該可識別物體所在的位置。之後,可以以該中心點為原點建立坐標系,再根據標注資訊在圖像中的位置,確定出標注資訊在該坐標系中的座標。這樣,就可以用該座標來表達標注資訊與圖像中可識別物體之間的相對位置關係,並將其發送到伺服器進行保存。如表4所示:
上述表2中的座標,就是指標注資訊所在的位置點在 以可識別物體所在位置點為原點的坐標系下的座標。需要說明的是,關於可識別物體所在的位置點,也可以是通過其他的規則確定,例如,除了可以如前文所述選取所在區域中心點之外,還可以選取所在區域的左上角,或者右下角,等等。但具體的選取方式最好與後續查詢時使用的選取方式一致,以保證匹配的精度。
通過上述實現方式二,後續其他使用者在來到該場所,並且需要查看周邊標注的資訊內容時,如果用其圖像攝取裝置捕捉到圖像之後,可以首先利用實現方式一中的各種圖像特徵進行匹配,在匹配成功之後,可以將各個匹配的標注資訊在圖像中關聯的可識別物體以及對應的座標資訊返回給查詢方用戶端,查詢方用戶端當前攝取到的圖像中可識別物體所在的區域,確定出可識別物體所在的位置點,再根據座標資訊,確定出需要將標注資訊顯示該可識別物體的什麼位置。這樣,假設有用戶在某場所中某顯示器附近(例如,右上角)標注了一條資訊,則其他使用者的圖像攝取裝置捕捉到該顯示器時,如果經過比對發現圖像中的其他特徵與該條資訊內容的標注位置圖像特徵之間的相似度很高,則可以將這條標注在顯示器右上角的標注資訊,仍然在顯示器的右上角提供給查看者用戶。
以上所述的方式中,伺服器是直接將用戶端上傳的圖像特徵資訊添加到標注資訊與場所之間的對應關係中,這樣,後續在有使用者查詢標注資訊時,都可將查詢方使用者上傳的圖像資訊與各個標注資訊對應的圖像特徵資訊進 行匹配。但是在前述各種實現方式下,需要為每條標注資訊都對應保存一個圖像特徵集合,會佔用伺服器的儲存空間,並且,隨著資料庫規模的不斷增大,檢索所需的時間也會增長,導致回應速度變慢。另外,在前述各種實現方式下,標注者使用者可以隨意選擇標注位置,這樣雖然增大了放置操作的靈活性,但是也可能存在以下缺點:第一,如果用戶選擇的標注位置所在場景的圖像不具有顯著的區分度,則後續在進行匹配時,可能會出現匹配錯誤等情況;例如,用戶標注的地方可能是一面白牆,這樣的圖像提取出的特徵會很單一,不太容易根據圖像特徵確定出標注資訊的標注位置。第二,在伺服器端保存使用者自行拍攝的圖像,則一方面由於使用者的拍攝品質等原因,可能導致圖像品質不高,後續匹配時難度較高,另一方面,不同使用者使用的終端設備由於像素等因素的影響,在進行匹配時,也可能無法得到準確的結果。考慮到上述各種因素,在本申請實施例中提供了其他的實現方式,以下進行介紹。
具體實現方式四
在該實現方式下,伺服器可以預先對各個場所進行建模,分別為各個場所建立起圖像特徵庫,在該圖像特徵庫中,針對每個場所,可以保存場所內一個或多個標誌性物體的圖像特徵,其中,標誌性物體就可以是一些傢俱、電器等等,這些圖像特徵可以是預先到場所內對標誌性物體 進行拍攝並提取的。在拍攝標誌性物體時,可以根據場所內的實際佈局情況等,預測使用者可能會希望將其標注資訊放置在什麼物體附近,然後將這些物體作為該場所內比較有代表性的標誌性物體進行拍照,並分別對進行特徵提取,用提取出的圖像特徵集合來代表各個標誌性物體。總之,伺服器可以預先建立表5所示的標誌性物體的圖像特徵庫:
其中,每個場所中可以有多個標誌性物體,每個標誌性物體的圖像特徵也可以由多個維度上的特徵集合來表示。這樣,在收到標注者使用者上傳的標注資訊以及對應場景的圖像特徵資訊時,伺服器可以首先判斷場景的圖像中是否存在與某標誌性物體的圖像特徵相匹配的內容,如果是,則可以保存標注資訊與場所之間的對應關係,並將相匹配的標誌性物體的標識到該對應關係中。例如,假設某場所中包含桌子、顯示器、空調等標誌性物體,某使用者需要將某標注資訊放置在顯示器附近,則可以將終端設備的鏡頭對準該顯示器,用戶端上傳標注資訊以及該場所的圖像特徵之後,伺服器分析出該圖像中包含顯示器這一 標誌性物體,於是就可以從圖像特徵庫中取出該顯示器對應的標識,並添加到當前標注資訊與場所之間的對應關係中。例如,如表6所示:
後續在接收到查詢方用戶發送的查詢某場所內的標注資訊的請求時,可以首先識別查詢方使用者上傳的圖像中是否包含當前場所內的某標誌性物體,如果包括,則可以從對應關係中提取出匹配的標誌性物體對應的標注資訊,並返回給查詢方用戶。在提供標注資訊時,也可以將標注資訊顯示在該標誌性物體的附近。可見,通過上述表6所記錄的對應關係,與表3中記錄的對應關係所能達到的效果類似甚至比其更好,但是儲存結構上更簡單,對應關係中不需要再保存圖像特徵資訊,只需要保存關聯的標誌性物體即可。
通過這種方式,使得一個場所內哪些地方可以放置標注資訊是預先設定好的,避免用戶隨意標注引起的各種可能的問題。並且,不需要每條標注資訊都對應保存一個使用者上傳的圖像特徵集合,可以節省儲存空間。對於一個場所而言,保存的標誌性物體的數目並不會非常多,並且 是固定的,這樣可以使得每次針對該場所的查詢請求進行圖像特徵的匹配時,所需的工作量基本是固定的。當然,在這種方式下,仍然只能確定標注資訊與標誌性物體之間的關聯關係,但是關於兩者之間具體的相對位置關係並沒有確定,因此,在向查詢者使用者展示標注資訊時,可以隨機顯示在標誌性物體附近,與最初放置的位置可能並不是完全一致的。
具體實現方式五
為了使得標注資訊與標誌性物體之間的相對位置關係更加準確的提供給查詢者用戶,也可以採用類似具體實現方式三中的方式,亦即,在上傳圖像特徵資訊的過程中,計算出標注資訊的放置點相對於可識別物體的座標,並在伺服器端進行保存,或者,為了簡化該過程,在本具體實現五中還提供了進一步的優化方法。
具體實現方式五是在具體實現方式四的基礎上實現的,具體的,在對各個場所進行建模的過程中,除了針對各個場所保存標誌性物體的圖像特徵之外,還可以為各個標誌性物體指定可選擇的標注點,並保存在圖像特徵庫中。其中,各個標注點的位置也可以由標注點相對於標誌性物體的中心點等位置的座標來表示。這樣,圖像特徵庫保存的對應關係可以如以下表7所示:
也就是說,同一個場所內的同一個標誌性物體,可以存在多個可選的標注點,並在圖像特徵庫中分別記錄各個標注點相對於標誌性物體的座標。
這樣,在接收到標注者用戶的標注請求時,首先從標注者使用者上傳的圖像特徵集合中識別出其中包含的標誌性物體,然後將該標誌性物體的圖像特徵以及該標誌性物體中各個可選的標注點的相對座標返回給標注者用戶端。這樣,標注者用戶端可以根據返回的圖像特徵定位到當前攝取到的圖像中包含的可識別物體,並根據座標在該可識別物體對應的位置處顯示出可選擇的標注點圖示,並提供選擇操作入口。這樣,標注者用戶就可以選擇標注點,相應的,用戶端可以將用戶選擇的標注點的標識上傳給伺服器,這樣伺服器就可以將用戶選擇的標注點的資訊,添加到標注資訊與場所以及標誌性物體之間的對應關係中。如表8所示:
其中,同一個場所的同一個標誌性物體附近的不同位置可能標注了多條標注資訊,關於其他標誌性物體以及其他場所的記錄以上表8中省略。
通過這種方式,伺服器端在之後在接收到查詢標注資訊的請求時,可以首先判斷查詢方用戶端上傳的場景圖像資訊是否存在匹配的標誌性物體,如果存在,則可以將與該標誌性物體關聯的各個標注資訊返回,並返回對應的標注點的座標資訊。查詢方用戶端在收到之後,可以根據標誌性物體資訊以及標注點的座標資訊,確定出各個標注資訊應該顯示的位置,並在對應位置上提供各條標注資訊即可。
可見,通過這種方式最終的標注資訊與標注位置匹配的精確程度與表4所示的方式是相似的甚至更好,但是,表8所示的儲存結構更簡單,可以提高實現效率。
以上對各種實現方式分別進行了詳細地介紹,在實際應用中,可以根據實際的需要選擇其中任意一種方式來實現,這裡不做限定。
另外,具體實現時,一般情況下,可以是在使用者登錄的情況下,進行標注資訊內容的操作,此時,還可以將 標注者使用者的身份標識資訊也發送給伺服器,伺服器可以將身份標識資訊也加入到對應關係中進行保存。這樣,使得資料庫中保存了以下資訊:各個場所中標注了哪些資訊內容,這些資訊內容分別是由哪個使用者標注的,以及被標注在了具體什麼位置。後續在為其他使用者提供這種資訊內容時,除了可以參考標注位置資訊,還可以根據標注者的身份標識資訊進行篩選。例如,只有在具有好友關係的情況下,才能查看標注的資訊內容的詳細資訊;或者只有相同偏好的用戶可才可以查看到,等等。對於標注者用戶而言,還可以向其回饋查看資訊,例如,統計有多少好友查看了其發佈的標注資訊等等。當然,在實際應用中,也可以設置為:非好友用戶之間也可以互相查看對方的標注資訊,此時,也可以將查看者的身份標識資訊顯示給標注者,並且可以提示用戶加對方為好友,等等。
在保存了使用者身份標識資訊的情況下,資料庫中的對應關係可以如表9所示:
總之,通過本申請實施例,用戶可以利用其移動終端設備中安裝的應用,實現在其所在的場所中標注具體的資 訊內容,這種資訊內容可以不限於文字,還可以是圖片,或者語音等等,通過各種形式的資訊內容,使得該場所中能夠留下關於該用戶的“痕跡”,這種“痕跡”可以體現出用戶在過去某時刻在該場所中發表的感想,或者記錄的所見所聞等等,並且不會受到具體場所中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
實施例二
以上實施例一主要從如何進行資訊內容的標注的角度對本申請實施例進行了詳細的介紹,在該實施例二中,主要從如何查詢標注資訊的角度進行介紹。各個步驟的執行主體仍然是應用的用戶端。在實際應用中,該用戶端與實施例一中所提到的用戶端可以是相同的,也就是說,同一用戶端,既可以實現在場所中標注資訊的功能,也能夠實現查看場所中其他使用者的標注資訊的功能。
參見圖5,本申請實施例二提供了一種基於場所的資訊處理方法,該方法可以包括以下步驟:S501:接收查詢方使用者發出的查看周邊標注資訊的請求;當用戶啟動應用用戶端時,用戶端就可以接收到使用者需要查看當前場所內的標注資訊的請求。當然,也可以是進入該應用的使用者介面之後,在該介面中分別提供兩種功能的操作入口。例如,參見圖2,其中除了顯示有“留下自己”這一操作入口外,還顯示有“尋找周邊”操 作入口,也可以將用戶在圖2所示的使用者介面中點擊該“尋找周邊”操作入口的操作,確定為使用者發出的查看周邊資訊內容的請求。
S502:獲取所述查詢方使用者所在的地理位置資訊;接收到查看周邊資訊內容的請求後,同樣可以首先獲取到使用者所在的地理位置資訊。當然,在實際應用中,該步驟S502也可以說在步驟S501之前進行的。具體的實現過程與實施例一中類似,這裡不再贅述。
S503:將所述地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;由於在使用者標注資訊內容的過程中,伺服器的資料庫中保存了各個使用者標注的資訊內容與所在場所之間的對應關係,因此,在查看當前場所中標注的資訊內容的請求時,就可以將該請求發送到伺服器,伺服器在確定了場所資訊之後,就可以獲取到該場所對應的各條標注資訊,並返回給查詢方用戶端。
S504:接收伺服器返回的各條標注資訊,以供使用者查詢方用戶查看。
在獲取到該場所中對應的各條標注資訊之後,就可以將其提供給當前用戶。具體在提供這種資訊內容資訊時,可以有多種形式。例如,可以直接將各條資訊內容展示出現,或者也可以先在使用者介面中以清單等形式提供各個 資訊內容的提示資訊(例如,圖示等,不同類型的標注資訊可以用不同的圖示,例如,音訊的標注資訊可以用“喇叭”等圖案的圖示表示,文本的標注資訊可以用“省略號”等圖案的圖示表示),當使用者點擊查看某提示資訊後,再將該提示資訊對應的資訊內容的詳細內容展現給使用者。
當然,如果資料庫中還保存有資訊內容在場所中的具體標注位置資訊,則在向使用者提供其他用戶在該場所標注的資訊內容時,同樣可以首先捕捉到場所內的圖像資訊,並發送到伺服器,伺服器在查詢該場所的標注資訊時,還可以根據該圖像資訊,找出對應標注位置上的標注資訊並返回。例如,如果伺服器保存的是各條標注資訊對應的圖像特徵資訊,則可以從資料庫中獲取使用者當前所在場所中各條標注資訊的標注位置的圖像特徵資訊,並將當前捕捉到的圖像的特徵資訊與各條標注資訊對應的標注位置的圖像特徵資訊進行匹配。或者,可以接收伺服器返回的各條標注資訊關聯的可識別物體的圖像特徵資訊,並據此將各條標注資訊顯示在當前捕捉到的場景圖像中該可識別物體的附近。或者,還可以接收伺服器返回的各條標注資訊關聯的可識別物體的圖像特徵資訊,以及各條標注資訊與該可識別物體之間的相對位置關係資訊,並據此將各條標注資訊顯示在當前捕捉到的場景圖像中該可識別物體的對應位置處。
在上述根據資訊內容的具體標注位置圖像,來向查看 方用戶提供其他用戶標注在當前場所中的資訊內容時,可以在捕捉到的圖像圖層上層建立另一個圖層,在該圖層中顯示出當前視域範圍內的標注資訊的標識。例如,如圖6中所示,在用戶點擊了圖2中的“查看周邊”按鈕之後,就可以自動啟動移動終端設備的圖像攝取裝置,圖6中的背景圖即為當前拍攝範圍內的圖像,在其上層顯示的標識資訊601、602、603均為該拍攝範圍內標注的資訊內容的標識資訊。假設在使用者點擊了標識資訊601對應的標識資訊之後,就可以將資訊內容的詳細資訊展示出來,如圖7所示,其中可以包括標注者用戶的用戶名,如“Rachel”,該用戶當時標注在該場所的是一段語音資訊,因此,在該詳細內容頁面中還可以提供一個播放該語音資訊的播放按鈕,等等。
如果檢索的結果是沒有找到相似的標注位置圖像,相當於沒有其他使用者曾在該用戶當前拍攝範圍內標注過資訊內容,此時,可以提示用戶調整拍攝角度,改變拍攝範圍,其他拍攝範圍內可能能夠找到使用者標注的資訊內容。
另外,在具體實現時,對於本申請實施例提供的應用的各個用戶而言,一般都可以在應用中註冊自己的帳戶,在使用自己帳戶的身份標識資訊登錄之後,才進行具體的標注資訊內容或者查看其他使用者資訊內容的操作,也就是說,對於各個使用者而言,無論是資訊內容的標注者,還是查看者,系統都可以獲知使用者的身份標識資訊。並 且,在實際應用中,用戶與用戶之間還可以建立好友關係,因此,在本申請的其他實施例中,還可以實現在好友使用者之間的資訊內容的查看。也就是說,對於一個使用者標注在某場所的資訊內容而言,只有該使用者的好友才能查看到。相應的,當一個使用者需要在某場所內查看其他使用者標注的資訊內容時,該使用者只能看到其好友標注在該場所內的資訊內容。具體實現時,在保存標注的資訊內容與場所資訊之間的對應關係的同時,還可以保存標注者使用者的身份標識資訊,如表3所示。這樣,當接收到某用戶查看當前場所標注的資訊內容的請求是,可以首先獲取當前用戶的各個好友使用者的身份標識資訊,然後從伺服器的資料庫中獲取使用者當前所在場所中各條資訊內容的標注者使用者的身份標識資訊,並判斷其中是否包含當前查看者用戶的好友用戶,如果存在,則可以將當前用戶的好友用戶在當前所在場所標注的資訊內容提供給該使用者。
實施例三
以上實施例一以及實施例二主要從用戶端的角度對本申請的具體技術方案進行了介紹,下面從伺服器的角度對該方案進行介紹,其中,在該實施例三中,主要介紹在標注者用戶進行標注的過程中,伺服器端的具體實現過程。
參見圖8,該實施例三提供了一種基於場所的資訊處理方法,該方法可以包括以下步驟: S801:接收標注方用戶端上傳的標注資訊以及使用者移動終端設備所在的地理位置資訊;S802:根據所述地理位置資訊確定該使用者所在的場所資訊;S803:建立所述標注資訊與所述場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並將該目標場所對應的標注資訊返回給該查詢方用戶端。
為了能夠精確到具體的標注位置進行更準確的匹配,伺服器還可以接收標注方用戶端上傳的標注資訊在該場所內的標注位置資訊,將標注位置資訊添加到所述對應關係中並保存;這樣,在接收到所述查詢標注資訊的請求時,可以將查詢方用戶端上傳的場景位置資訊與目標場所內各個標注資訊對應的標注位置資訊進行匹配,然後將匹配成功的標注資訊返回給該查詢方用戶端。
其中,具體實現時,標注位置資訊可以是標注方用戶端上傳場所內的場景圖像的圖像特徵資訊。或者,標注位置資訊也可以是標注方用戶端上傳場所內的場景圖像中包含的可識別物體的圖像特徵資訊,這樣可以將標注資訊的位置精確到一個具體的可識別物體的附近。或者,標注位置資訊還可以是標注方用戶端上傳場所內的場景圖像中包含的可識別物體的圖像特徵資訊,以及所述標注資訊與該可識別物體之間的相對位置關係資訊。
在另一種實現方式下,伺服器端可以預先針對所述場所建立第一圖像特徵庫,所述第一圖像特徵庫中保存有場所內至少一個標誌性物體的標識以及對應的圖像特徵。此時,在接收到標注方用戶端上傳場所內的場景圖像的圖像特徵資訊時,可以判斷其中是否包含該場所內其中某標誌性物體,如果是,則將該標誌性物體的標識確定為所述標注資訊在該場所內的標注位置資訊。
或者,還可以預先針對所述場所建立第二圖像特徵庫,該第二圖像特徵庫中保存有場所內至少一個標誌性物體的標識、對應的圖像特徵,以及各個標誌性物體中至少一個可選的標注點與所述標誌性物體的相對座標資訊。在這種情況下,在接收標注方用戶端上傳場所內的場景圖像的圖像特徵資訊時,可以判斷其中是否包含該場所內其中某標誌性物體,如果是,則返回該標誌性物體的圖像特徵以及所述標注點的相對座標資訊,後續在接收到標注方用戶端上傳的被選中的標注點的資訊後,將該標誌性物體的標識以及標注點的資訊確定為該標注資訊的標注位置資訊。
實施例四
在該實施例四中,主要是在支持查詢方查詢方面,對伺服器端的具體實現進行詳細介紹。
參見圖9,該實施例四提供了一種基於場所的資訊處理方法,該方法可以包括以下步驟: S901:接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;S902:根據所述地理位置資訊確定查詢方使用者所在的目標場所;S903:根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並返回給該查詢方用戶端。
其中,該對應關係中還可以包括標注資訊在該場所內的標注位置資訊,在這種情況下,還可以獲取查詢方用戶在當前場所內的場景位置資訊,然後根據各條標注資訊對應的標注位置資訊獲取匹配的標注資訊,並將匹配的標注資訊返回給查詢方用戶端,以便查詢方用戶端在對應的標注位置提供所述標注資訊。
其中,具體的標注位置資訊可以是標注方用戶端上傳場所內的場景圖像的圖像特徵資訊,此時,可以接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊,並根據接收到的圖像特徵資訊與各條標注資訊對應的圖像特徵資訊進行比對,獲取匹配的標注資訊。
或者,標注位置資訊也可以是場所內可識別物體的圖像特徵資訊,此時,可以接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊,然後根據接收到的圖像特徵資訊,判斷是否存在可識別物體;如果是,將該可識別物體的圖像特徵與各條標注資訊對應的可識別物體的圖像特徵進行比對,獲取匹配的標注資訊。其中,可識別物體的圖 像特徵資訊可以是標注者用戶端上傳的,或者也可以是保存在伺服器端預先建立的圖像特徵庫中,在所述對應關係中保存可識別物體的標識。
標注位置資訊還可以是場所內可識別物體的圖像特徵資訊,以及標注資訊與該可識別物體之間的相對位置資訊,此時,可以接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊,根據接收到的圖像特徵資訊,判斷是否存在可識別物體;如果是,將該可識別物體的圖像特徵與各條標注資訊對應的可識別物體的圖像特徵進行比對,獲取匹配的標注資訊,並將匹配的標注資訊對應的可識別物體的圖像特徵資訊以及相對位置關係資訊返回給所述查詢方用戶端。其中,可識別物體的圖像特徵資訊以及所述相對位置關係資訊,可以是標注者用戶端上傳的,或者也可以是保存在伺服器端預先建立的圖像特徵庫中,在所述對應關係中保存可識別物體的標識,以及標注點的標識。
需要說明的是,關於上述實施例二、三、四,其具體實現中的細節均可參見實施例一中的介紹,這裡不再贅述。
與本申請實施例一提供的基於場所的資訊處理方法相對應,本申請實施例還提供了一種基於場所的資訊處理裝置,參見圖10,該系統可以包括:標注資訊接收單元1001,用於接收使用者輸入的標注資訊;第一地理位置資訊獲取單元1002,用於獲取所述移 動終端設備所在的地理位置資訊;第一發送單元1003,用於將所述標注資訊以及所述地理位置資訊發送到伺服器,以便伺服器根據所述地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,用於將該標注資訊提供給該場所內的查詢方用戶。
具體實現時,為了能夠提供位置更精準的標注資訊,該裝置還可以包括:標注位置資訊發送單元,用於將標注資訊在該場所內的標注位置資訊發送到伺服器,以便將所述標注位置資訊添加到所述對應關係中進行保存,用於將標注資訊提供給該場所內且視域範圍包含了該標注位置的查詢方用戶。
其中,標注位置資訊發送單元具體可以包括:場景圖像資訊捕捉子單元,用於接收所述使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;圖像特徵資訊發送單元,用於當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊,並作為所述標注位置資訊發送到伺服器。
其中,伺服器將接收到的圖像特徵資訊添加到所述對應關係中進行保存。
或者,伺服器預先針對所述場所建立第一圖像特徵庫,所述第一圖像特徵庫中保存有場所內至少一個標誌性物體的標識以及對應的圖像特徵;伺服器收到所述場景圖像的圖像特徵之後,判斷其中是否包含該場所內其中某標 誌性物體,如果是,則將該標誌性物體的標識添加到所述對應關係中進行保存。
或者,伺服器預先針對所述場所建立第二圖像特徵庫,所述第二圖像特徵庫中保存有場所內至少一個標誌性物體的標識、對應的圖像特徵,以及各個標誌性物體中至少一個可選的標注點與所述標誌性物體的相對座標資訊;伺服器收到所述場景圖像的圖像特徵之後,判斷其中是否包含該場所內其中某標誌性物體,如果是,則返回該標誌性物體的圖像特徵以及所述標注點的相對座標資訊;所述裝置還可以包括:標誌性物體定位單元,用於根據接收到的標誌性物體的圖像特徵,在當前捕捉到的場景圖像中定位所述標誌性物體,並根據所述相對座標資訊,在所述場景圖像的上層展示各個可選的標注點;標注點資訊發送單元,用於在接收到用戶的選擇操作之後,將被選中的標注點的資訊發送到伺服器,以便伺服器將所述標誌性物體的標識以及標注點的資訊作為該標注資訊的標注位置資訊,添加到所述對應關係中進行保存。
在另一種實現方式下,標注位置資訊發送單元具體可以包括:圖像資訊捕捉子單元,用於接收所述使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;特徵資訊提取子單元,用於當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊; 判斷子單元,用於判斷所述特徵資訊中是否包含可識別物體的圖像特徵,如果是,則將所述可識別物體的圖像特徵作為所述標注位置資訊發送到伺服器。
再或者,在另一種實現方式下,標注位置資訊發送單元具體可以包括圖像資訊捕捉子單元,用於接收所述使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;特徵資訊提取子單元,用於當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊;判斷子單元,用於判斷所述特徵資訊中是否包含可識別物體的圖像特徵;相對位置關係獲取子單元,用於如果判斷子單元的判斷結果為是,則獲取所述標注資訊與該可識別物體之間的相對位置關係資訊;發送子單元,用於將所述可識別物體的圖像特徵資訊以及所述相對位置關係資訊作為所述標注位置資訊發送到伺服器。
其中,相對位置關係資訊獲取子單元具體可以用於:確定能夠代表所述可識別物體的位置點在所述場景圖像中的位置,並根據使用者的操作確定所述標注資訊的標注位置點在終端設備顯示幕上的位置;以所述可識別物體的位置點為原點建立坐標系,並確定所述標注位置點在該坐標系中的座標,將該座標作為標注資訊與該可識別物體之間的相對位置關係資訊。
在實際應用中,該裝置還可以包括:使用者身份資訊獲取單元,用於獲取該使用者的身份標識資訊;使用者身份資訊發送單元,用於將該使用者的身份標識資訊發送到伺服器,以便伺服器將所述身份標識資訊添加到所述對應關係中並保存。
與本申請實施例二提供的基於場所的資訊處理方法相對應,本申請實施例還提供了一種基於場所的資訊處理裝置,參見圖11,該裝置可以包括:查看請求接收單元1101,用於接收查詢方用戶發出的查看周邊標注資訊的請求;第二地理位置資訊獲取單元1102,用於獲取所述查詢方使用者所在的地理位置資訊;第二發送單元1103,用於將所述地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;標注資訊提供單元1104,用於將伺服器返回的各條標注資訊提供給該查詢方用戶。
其中,所述伺服器還保存有各條標注資訊對應的標注位置資訊;所述裝置還可以包括:圖像資訊捕捉並發送單元,用於捕捉場所內的場景圖像資訊,並發送到伺服器,以便所述伺服器根據接收到的 場景圖像資訊確定該場所內位於查詢方用戶視域範圍內的標注資訊並返回。
具體實現時,該裝置還可以包括:可識別物體資訊接收單元,用於接收伺服器返回的各條標注資訊關聯的可識別物體的圖像特徵資訊,並據此將各條標注資訊顯示在當前捕捉到的場景圖像中該可識別物體的附近。
另外,該裝置還可以包括:相對位置關係資訊接收單元,用於接收伺服器返回的各條標注資訊關聯的可識別物體的圖像特徵資訊,以及各條標注資訊與該可識別物體之間的相對位置關係資訊,並據此將各條標注資訊顯示在當前捕捉到的場景圖像中該可識別物體的對應位置處。
另外,該裝置還可以包括:第一提示資訊提供單元,用於如果伺服器返回的資訊為不存在匹配的標注資訊,則提供第一提示資訊,所述第一提示資訊用於提示使用者改變視域範圍。
其中,如果所述伺服器還保存有資訊內容的標注者使用者的身份標識資訊;則所述裝置還可以包括:身份標識資訊發送單元,用於將查詢方使用者的身份標識資訊發送到伺服器,以便伺服器獲取查詢方用戶的好友使用者的身份標識資訊,獲取使用者當前所在場所中各條資訊內容的標注者使用者的身份標識資訊,並判斷其中是否包含當前用戶的好友用戶,
返回單元,用於如果是,返回查詢方用戶的好友用戶在該場所的標注資訊。
另外,該裝置還可以包括:第二提示資訊提供單元,用於向所述查詢方使用者提供第二提示資訊,所述第二提示資訊用於提示所述查詢方用戶可在當前場所內留下其標注資訊。
與本申請實施例三提供的基於場所的資訊處理方法相對應,本申請實施例還提供了一種基於場所的資訊處理裝置,參見圖12,該裝置具體可以包括:資訊接收單元1201,用於接收標注方用戶端上傳的標注資訊以及使用者移動終端設備所在的地理位置資訊;場所資訊確定單元1202,用於根據所述地理位置資訊確定該使用者所在的場所資訊;保存單元1203,用於建立所述標注資訊與所述場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並將該目標場所對應的標注資訊返回給該查詢方用戶端。
具體實現時,該裝置還可以包括:標注位置資訊接收單元,用於接收標注方用戶端上傳的標注資訊在該場所內的標注位置資訊,並將所述標注位置資訊添加到所述對應關係中進行保存,以便將標注資訊提供給該場所內且視域範圍包含了該標注位置的查詢方用戶, 其中,所述標注位置資訊包括標注方用戶端上傳場所內的場景圖像的圖像特徵資訊。
或者,所述標注位置資訊包括標注方用戶端上傳場所內的場景圖像中包含的可識別物體的圖像特徵資訊。
再或者,所述標注位置資訊包括標注方用戶端上傳場所內的場景圖像中包含的可識別物體的圖像特徵資訊,以及所述標注資訊與該可識別物體之間的相對位置關係資訊。
具體實現時,可以預先針對所述場所建立第一圖像特徵庫,所述第一圖像特徵庫中保存有場所內至少一個標誌性物體的標識以及對應的圖像特徵,所述標注位置資訊接收單元具體可以包括:圖像特徵資訊接收子單元,用於接收標注方用戶端上傳場所內的場景圖像的圖像特徵資訊;判斷子單元,用於判斷其中是否包含該場所內其中某標誌性物體,如果是,則將該標誌性物體的標識確定為所述標注資訊在該場所內的標注位置資訊。
或者,預先針對所述場所建立第二圖像特徵庫,所述第二圖像特徵庫中保存有場所內至少一個標誌性物體的標識、對應的圖像特徵,以及各個標誌性物體中至少一個可選的標注點與所述標誌性物體的相對座標資訊,所述標注位置資訊接收單元具體可以包括:圖像特徵資訊接收子單元,用於接收標注方用戶端上傳場所內的場景圖像的圖像特徵資訊; 判斷子單元,用於判斷其中是否包含該場所內其中某標誌性物體,如果是,則返回該標誌性物體的圖像特徵以及所述標注點的相對座標資訊;標注點資訊接收單元,用於接收標注方用戶端上傳的被選中的標注點的資訊,將所述標誌性物體的標識以及標注點的資訊確定為該標注資訊的標注位置資訊。
與本申請實施例四提供的基於場所的資訊處理方法相對應,本申請實施例還提供了一種基於場所的資訊處理裝置,參見圖13,該裝置具體可以包括:請求接收單元1301,用於接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;目標場所確定單元1302,用於根據所述地理位置資訊確定查詢方使用者所在的目標場所;標注資訊返回單元1303,用於根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並返回給該查詢方用戶端。
其中,所述對應關係中還包括標注資訊在該場所內的標注位置資訊;所述裝置還可以包括:場景位置資訊獲取單元,用於獲取查詢方用戶在當前場所內的場景位置資訊;匹配標注資訊獲取單元,用於根據各條標注資訊對應的標注位置資訊獲取匹配的標注資訊,並將匹配的標注資訊返回給查詢方用戶端,以便所述查詢方用戶端在對應的 標注位置提供所述標注資訊。
其中,所述標注位置資訊包括標注方用戶端上傳場所內的場景圖像的圖像特徵資訊;所述場景位置資訊獲取單元具體用於:接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊;所述匹配標注資訊獲取單元具體可以用於:根據接收到的圖像特徵資訊與各條標注資訊對應的圖像特徵資訊進行比對,獲取匹配的標注資訊。
或者,所述標注位置資訊包括場所內可識別物體的圖像特徵資訊;所述場景位置資訊獲取單元具體用於:接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊;所述匹配標注資訊獲取單元具體可以用於:根據接收到的圖像特徵資訊,判斷是否存在可識別物體;如果是,將該可識別物體的圖像特徵與各條標注資訊對應的可識別物體的圖像特徵進行比對,獲取匹配的標注資訊。
再或者,所述標注位置資訊包括場所內可識別物體的圖像特徵資訊,以及標注資訊與該可識別物體之間的相對位置資訊;所述場景位置資訊獲取單元具體用於: 接收查詢方用戶端上傳的場所內場景圖像的圖像特徵資訊;所述匹配標注資訊獲取單元具體可以用於:根據接收到的圖像特徵資訊,判斷是否存在可識別物體;如果是,將該可識別物體的圖像特徵與各條標注資訊對應的可識別物體的圖像特徵進行比對,獲取匹配的標注資訊;此時,所述裝置還可以包括:將匹配的標注資訊對應的所述可識別物體的圖像特徵資訊以及所述相對位置關係資訊返回給所述查詢方用戶端。
通過本申請實施例,用戶可以利用其移動終端設備中安裝的應用,實現在其所在的場所中標注具體的資訊內容,這種資訊內容可以不限於文字,還可以是圖片,或者語音等等,通過各種形式的資訊內容,使得該場所中能夠留下關於該用戶的“痕跡”,並且不會受到具體場所中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
總之,通過本申請實施例,用戶可以利用其移動終端設備中安裝的應用,實現在其所在的場所中標注具體的資訊內容,這種資訊內容可以不限於文字,還可以是圖片,或者語音等等,通過各種形式的資訊內容,使得該場所中能夠留下關於該用戶的“痕跡”,並且不會受到具體場所 中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
通過以上的實施方式的描述可知,本領域的技術人員可以清楚地瞭解到本申請可借助軟體加必需的通用硬體平臺的方式來實現。基於這樣的理解,本申請的技術方案本質上或者說對現有技術做出貢獻的部分可以以軟體產品的形式體現出來,該電腦軟體產品可以儲存在儲存介質中,如ROM/RAM、磁碟、光碟等,包括若干指令用以使得一台電腦設備(可以是個人電腦,伺服器,或者網路設備等)執行本申請各個實施例或者實施例的某些部分所述的方法。
本說明書中的各個實施例均採用遞進的方式描述,各個實施例之間相同相似的部分互相參見即可,每個實施例重點說明的都是與其他實施例的不同之處。尤其,對於系統或系統實施例而言,由於其基本相似於方法實施例,所以描述得比較簡單,相關之處參見方法實施例的部分說明即可。以上所描述的系統及系統實施例僅僅是示意性的,其中所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位於一個地方,或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部模組來實現本實施例方案的目的。本領域普通技術人員在不付出創造性勞動的情況下,即可以理解並實施。
以上對本申請所提供的基於場所的資訊處理方法及裝 置,進行了詳細介紹,本文中應用了具體個例對本申請的原理及實施方式進行了闡述,以上實施例的說明只是用於幫助理解本申請的方法及其核心思想;同時,對於本領域的一般技術人員,依據本申請的思想,在具體實施方式及應用範圍上均會有改變之處。綜上所述,本說明書內容不應理解為對本申請的限制。

Claims (15)

  1. 一種基於場所的資訊處理方法,其特徵在於,包括:接收第一使用者輸入的標注資訊;於接收該第一使用者輸入的該標注資訊之前或之後,捕捉該場所內的第一場景圖像;提取該第一場景圖像的特徵資訊;獲取該移動終端設備所在的地理位置資訊;將該標注資訊、該特徵資訊以及該地理位置資訊發送到伺服器,其中發送該標注資訊、該特徵資訊以及該地理位置資訊致使該伺服器:根據該地理位置資訊確定該第一使用者所在的場所的資訊,建立該標注資訊與該場所的該資訊之間的對應關係並保存,確定是否該第一場景圖像的該特徵資訊符合由第二使用者的圖像攝取裝置於該場所捕捉的第二場景圖像的特徵資訊,以及當該第一場景圖像的該特徵資訊符合該第二場景圖像的該特徵資訊時,將該標注資訊提供給該第二使用者。
  2. 根據申請專利範圍第1項所述的方法,其中,還包括:將標注資訊在該場所內的標注位置資訊發送到伺服器,以便將該標注位置資訊添加到該對應關係中進行保存,以及其中將該標注資訊提供給該場所內的該第二使用者包括當該圖像攝取裝置之捕捉範圍包括了該標注位置時,提供該標注資訊給該第二使用者。
  3. 根據申請專利範圍第2項所述的方法,其中,該將標注資訊在該場所內的標注位置資訊發送到伺服器,包括:接收該第一使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊,並作為該標注位置資訊發送到伺服器。
  4. 根據申請專利範圍第2項所述的方法,其中,該將標注資訊在該場所內的標注位置資訊發送到伺服器,包括:接收該第一使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊;判斷該特徵資訊中是否包含可識別物體的圖像特徵,如果是,則將該可識別物體的圖像特徵作為該標注位置資訊發送到伺服器。
  5. 根據申請專利範圍第2項所述的方法,其中,該將標注資訊在該場所內的標注位置資訊發送到伺服器,包括:接收該第一使用者輸入的標注資訊之前或之後,捕捉場所內的場景圖像資訊;當接收到確認標注的消息時,提取當前捕捉到的場景圖像的特徵資訊;判斷該特徵資訊中是否包含可識別物體的圖像特徵;如果是,則獲取該標注資訊與該可識別物體之間的相對位置關係資訊;將該可識別物體的圖像特徵資訊以及該相對位置關係資訊作為該標注位置資訊發送到伺服器。
  6. 一種基於場所的資訊處理方法,其特徵在於,包括:接收查詢方使用者發出的查看周邊標注資訊的請求;於自該查詢方使用者接收該請求之前或之後,藉由圖像攝取裝置捕捉該場所內的場景圖像;獲取該查詢方使用者所在的地理位置資訊;將該地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;當儲存於該預先保存的對應關係中的特徵資訊符合該場景圖像的特徵資訊時,將伺服器返回的各條標注資訊提供給該查詢方用戶。
  7. 根據申請專利範圍第6項所述的方法,其中,該伺服器還保存有各條標注資訊對應的標注位置資訊;該方法還包括:捕捉場所內的場景圖像資訊,並發送到伺服器,以便該伺服器根據接收到的場景圖像資訊確定該場所內位於查詢方用戶視域範圍內的標注資訊並返回。
  8. 一種基於場所的資訊處理方法,其特徵在於,包括:接收標注方用戶端上傳的標注資訊以及使用者移動終端設備所在的地理位置資訊;於接收該標注方用戶端上傳的該標注資訊之前或之後,捕捉該場所內的場景圖像;根據所述地理位置資訊確定該使用者所在的場所資訊;建立該標注資訊與該場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並當儲存於該對應關係中的特徵資訊符合該場景圖像的特徵資訊時,將該目標場所對應的標注資訊返回給該查詢方用戶端。
  9. 根據申請專利範圍第8項所述的方法,其中,還包括:接收標注方用戶端上傳的標注資訊在該場所內的標注位置資訊,並將該標注位置資訊添加到該對應關係中進行保存,以便將標注資訊提供給該場所內且視域範圍包含了該標注位置的查詢方用戶。
  10. 一種基於場所的資訊處理方法,其特徵在於,包括:接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;於自該查詢方用戶端接收該請求之前或之後,藉由圖像攝取裝置捕捉該場所內的場景圖像;根據該地理位置資訊確定查詢方使用者所在的目標場所;根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並當儲存於該預先建立的對應關係中的特徵資訊符合該場景圖像的特徵資訊時,返回該標注資訊給該查詢方用戶端。
  11. 根據申請專利範圍第10項所述的方法,其中,該對應關係中還包括標注資訊在該場所內的標注位置資訊;該方法還包括:獲取查詢方用戶在當前場所內的場景位置資訊;根據各條標注資訊對應的標注位置資訊獲取匹配的標注資訊,並將匹配的標注資訊返回給查詢方用戶端,以便該查詢方用戶端在對應的標注位置提供該標注資訊。
  12. 一種基於場所的資訊處理裝置,其特徵在於,包括:標注資訊接收單元,用於接收使用者輸入的標注資訊,該標注資訊接收單元組態以於接收該使用者輸入的該標注資訊之前或之後,接收該場所內捕捉的第一場景圖像;第一地理位置資訊獲取單元,用於獲取該移動終端設備所在的地理位置資訊;第一發送單元,用於將該標注資訊以及該地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定使用者所在的場所資訊,建立標注資訊與場所資訊之間的對應關係並保存,用於當該第一場景圖像的特徵資訊符合查詢方用戶的圖像攝取裝置於該場所捕捉的第二場景圖像的特徵資訊時,將該標注資訊提供給該場所內的該查詢方用戶。
  13. 一種基於場所的資訊處理裝置,其特徵在於,包括:查看請求接收單元,用於接收查詢方用戶發出的查看周邊標注資訊的請求;第二地理位置資訊獲取單元,用於獲取該查詢方使用者所在的地理位置資訊;第二發送單元,用於將該地理位置資訊發送到伺服器,以便伺服器根據該地理位置資訊確定查詢方使用者所在的目標場所,並根據預先保存的各條標注資訊與場所資訊之間的對應關係,確定該目標場所對應的各條標注資訊並返回;標注資訊提供單元,用於當儲存於該預先保存的對應關係中的特徵資訊符合該查詢方用戶的圖像攝取裝置於該場所捕捉的場景圖像的特徵資訊時,將伺服器返回的各條標注資訊提供給該查詢方用戶。
  14. 一種基於場所的資訊處理裝置,其特徵在於,包括:資訊接收單元,用於接收標注方用戶端上傳的標注資訊以及使用者移動終端設備所在的地理位置資訊,該資訊接收單元組態以於接收該標注方用戶端上傳的標注資訊之前或之後,接收該場所內捕捉的第一場景圖像;場所資訊確定單元,用於根據該地理位置資訊確定該使用者所在的場所資訊;保存單元,用於建立該標注資訊與該場所資訊之間的對應關係並保存,以便在接收到查詢方用戶端發送的查詢標注資訊的請求時,根據請求中攜帶的地理位置資訊,確定查詢方使用者所在的目標場所,並當該第一場景圖像的特徵資訊符合該查詢方用戶端的圖像攝取裝置於該場所捕捉的第二場景圖像的特徵資訊時,將該目標場所對應的標注資訊返回給該查詢方用戶端。
  15. 一種基於場所的資訊處理裝置,其特徵在於,包括:請求接收單元,用於接收查詢方用戶端發送的查詢標注資訊的請求時,該請求中攜帶有查詢方使用者所在的地理位置資訊;目標場所確定單元,用於根據該地理位置資訊確定查詢方使用者所在的目標場所;標注資訊返回單元,用於根據預先建立的標注資訊與場所資訊之間的對應關係,確定該目標場所對應的標注資訊,並當儲存於該預先建立的對應關係中的特徵資訊符合該查詢方用戶端的圖像攝取裝置於該場所捕捉的場景圖像的特徵資訊時,返回給該查詢方用戶端。
TW103134020A 2014-06-09 2014-09-30 基於場所的資訊處理方法及裝置 TWI671502B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
??201410253628.2 2014-06-09
CN201410253628.2A CN105338479B (zh) 2014-06-09 2014-06-09 基于场所的信息处理方法及装置

Publications (2)

Publication Number Publication Date
TW201546420A TW201546420A (zh) 2015-12-16
TWI671502B true TWI671502B (zh) 2019-09-11

Family

ID=54769695

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103134020A TWI671502B (zh) 2014-06-09 2014-09-30 基於場所的資訊處理方法及裝置

Country Status (8)

Country Link
US (2) US10922480B2 (zh)
EP (2) EP3474586B1 (zh)
JP (1) JP6753785B2 (zh)
KR (1) KR102319621B1 (zh)
CN (1) CN105338479B (zh)
HK (1) HK1218364A1 (zh)
TW (1) TWI671502B (zh)
WO (1) WO2015191448A1 (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105338479B (zh) 2014-06-09 2020-03-10 阿里巴巴集团控股有限公司 基于场所的信息处理方法及装置
CN105610868B (zh) * 2016-03-03 2019-08-06 腾讯科技(深圳)有限公司 一种信息交互的方法、设备及系统
US10334134B1 (en) * 2016-06-20 2019-06-25 Maximillian John Suiter Augmented real estate with location and chattel tagging system and apparatus for virtual diary, scrapbooking, game play, messaging, canvasing, advertising and social interaction
US10805696B1 (en) * 2016-06-20 2020-10-13 Pipbin, Inc. System for recording and targeting tagged content of user interest
US11044393B1 (en) * 2016-06-20 2021-06-22 Pipbin, Inc. System for curation and display of location-dependent augmented reality content in an augmented estate system
US10638256B1 (en) 2016-06-20 2020-04-28 Pipbin, Inc. System for distribution and display of mobile targeted augmented reality content
US11201981B1 (en) * 2016-06-20 2021-12-14 Pipbin, Inc. System for notification of user accessibility of curated location-dependent content in an augmented estate
US10108859B1 (en) * 2016-06-20 2018-10-23 Pipbin, Inc. System for curation, distribution and display of location-dependent augmented reality content
US11876941B1 (en) * 2016-06-20 2024-01-16 Pipbin, Inc. Clickable augmented reality content manager, system, and network
US11785161B1 (en) * 2016-06-20 2023-10-10 Pipbin, Inc. System for user accessibility of tagged curated augmented reality content
CN106447433B (zh) * 2016-09-13 2020-09-18 北京三快在线科技有限公司 用于选择桌位的方法及装置
CN106982387B (zh) * 2016-12-12 2020-09-18 阿里巴巴集团控股有限公司 弹幕的显示、推送方法及装置及弹幕应用系统
CN107292248B (zh) * 2017-06-05 2023-04-07 广州诚予国际市场信息研究有限公司 一种基于图像识别技术的商品管理方法及系统
CN107333087B (zh) * 2017-06-27 2020-05-08 京东方科技集团股份有限公司 一种基于视频会话的信息共享方法和装置
US9980100B1 (en) * 2017-08-31 2018-05-22 Snap Inc. Device location based on machine learning classifications
CN109728995A (zh) * 2017-10-31 2019-05-07 百步资讯有限公司 一种基于地理位置的信息发送方法及其装置
CN108810422B (zh) * 2018-06-11 2020-11-20 北京小米移动软件有限公司 拍摄环境的补光方法、装置及计算机可读存储介质
JP7091940B2 (ja) * 2018-08-27 2022-06-28 日本電信電話株式会社 照合装置、照合方法および照合プログラム
US11218639B1 (en) * 2018-10-12 2022-01-04 Staples, Inc. Mobile interface for marking and organizing images
CN109800329B (zh) * 2018-12-28 2021-07-02 上海依图网络科技有限公司 一种监控方法及装置
CN110569265A (zh) * 2019-09-10 2019-12-13 浪潮商用机器有限公司 一种服务器配件信息显示方法、装置、ar眼镜及介质
US10848920B1 (en) * 2019-09-17 2020-11-24 Microsoft Technology Licensing, Llc Generation of precise geospatial coordinates
CN110491090B (zh) * 2019-09-20 2021-07-09 苏州智博汇能电子科技股份有限公司 基于手机终端的中老年人群监护方法
CN110650573A (zh) * 2019-09-27 2020-01-03 阿里巴巴集团控股有限公司 交互方法、装置、智能镜子、电子设备及计算机存储介质
US11157763B2 (en) * 2020-02-07 2021-10-26 Wipro Limited System and method for identifying target sections within images
WO2022260961A1 (en) * 2021-06-06 2022-12-15 Apple Inc. Presenting labels in augmented reality

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070032244A1 (en) * 2005-08-08 2007-02-08 Microsoft Corporation Group-centric location tagging for mobile devices
US20090081959A1 (en) * 2007-09-21 2009-03-26 Motorola, Inc. Mobile virtual and augmented reality system
TWI416928B (zh) * 2009-01-21 2013-11-21 Htc Corp 管理與顯示行動裝置影像及關聯地理位置資料的方法、系統及裝置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8432414B2 (en) 1997-09-05 2013-04-30 Ecole Polytechnique Federale De Lausanne Automated annotation of a view
US20020143769A1 (en) 2001-03-23 2002-10-03 Kirk Tecu Automatic content generation for images based on stored position data
JP2007164534A (ja) * 2005-12-14 2007-06-28 Matsushita Electric Ind Co Ltd 電子機器および撮像装置
US20070161382A1 (en) * 2006-01-09 2007-07-12 Melinger Daniel J System and method including asynchronous location-based messaging
US8072448B2 (en) 2008-01-15 2011-12-06 Google Inc. Three-dimensional annotations for street view data
US8676001B2 (en) 2008-05-12 2014-03-18 Google Inc. Automatic discovery of popular landmarks
JP5436559B2 (ja) 2008-09-02 2014-03-05 エコール・ポリテクニーク・フェデラル・ドゥ・ローザンヌ(エーペーエフエル) ポータブル・デバイス上での画像アノテーション
US7966024B2 (en) * 2008-09-30 2011-06-21 Microsoft Corporation Virtual skywriting
US8194102B2 (en) 2008-10-06 2012-06-05 Microsoft Corporation Rendering annotations for images
DE102009049073A1 (de) * 2009-10-12 2011-04-21 Metaio Gmbh Verfahren zur Darstellung von virtueller Information in einer Ansicht einer realen Umgebung
KR101719982B1 (ko) 2010-07-19 2017-03-27 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9179278B2 (en) * 2011-09-01 2015-11-03 Qualcomm Incorporated Systems and methods involving augmented menu using mobile device
US9980692B2 (en) 2011-11-08 2018-05-29 Koninklijke Philips N.V. System and method for interactive annotation of an image using marker placement command with algorithm determining match degrees
US20140081904A1 (en) 2012-09-14 2014-03-20 David H. Sitrick Systems And Methods Of Collaboration Comprising, Providing A Presentation Of An Underlying Image; Generating Annotation Data Representative Of Annotations Made By A Respective User, Generating Events Comprising Event Content, Then Defining A Selected Set Of Events, And Generating A Display Presentation Responsive To Processing Said Selected Set Of Events
US20140156787A1 (en) 2012-12-05 2014-06-05 Yahoo! Inc. Virtual wall for writings associated with landmarks
CN105338479B (zh) 2014-06-09 2020-03-10 阿里巴巴集团控股有限公司 基于场所的信息处理方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070032244A1 (en) * 2005-08-08 2007-02-08 Microsoft Corporation Group-centric location tagging for mobile devices
US20090081959A1 (en) * 2007-09-21 2009-03-26 Motorola, Inc. Mobile virtual and augmented reality system
TWI416928B (zh) * 2009-01-21 2013-11-21 Htc Corp 管理與顯示行動裝置影像及關聯地理位置資料的方法、系統及裝置

Also Published As

Publication number Publication date
US20150356063A1 (en) 2015-12-10
EP3152948A1 (en) 2017-04-12
EP3152948A4 (en) 2018-01-03
CN105338479B (zh) 2020-03-10
US20190243888A1 (en) 2019-08-08
KR20170015313A (ko) 2017-02-08
CN105338479A (zh) 2016-02-17
EP3474586A1 (en) 2019-04-24
TW201546420A (zh) 2015-12-16
JP6753785B2 (ja) 2020-09-09
EP3152948B1 (en) 2019-03-06
HK1218364A1 (zh) 2017-02-10
WO2015191448A1 (en) 2015-12-17
EP3474586B1 (en) 2021-02-17
US10922480B2 (en) 2021-02-16
JP2017526032A (ja) 2017-09-07
KR102319621B1 (ko) 2021-11-03

Similar Documents

Publication Publication Date Title
TWI671502B (zh) 基於場所的資訊處理方法及裝置
JP6706647B2 (ja) 画像に表されたオブジェクトの認識及び照合のための方法及び装置
CN103620600B (zh) 用于实现虚拟标记的方法及设备
KR20110135178A (ko) 컨텐츠 서비스 방법
CN104182780A (zh) 一种自动生成就餐点评的方法及终端设备
EP4254222A2 (en) Visual menu
WO2016050223A1 (zh) 一种基于图格的即时通信方法、客户端及系统
US20140350844A1 (en) Method for searching data and method for planning itinerary
JP6012061B1 (ja) ナビゲーションシステム及びナビゲーションプログラム
CN117991950A (zh) 内容交互方法、装置、电子设备及计算机存储介质
CN117991958A (zh) 用户交互方法、装置、计算机设备及计算机可读存储介质