TWI591575B - 用於增進已擷取資料的方法及系統 - Google Patents

用於增進已擷取資料的方法及系統 Download PDF

Info

Publication number
TWI591575B
TWI591575B TW102120139A TW102120139A TWI591575B TW I591575 B TWI591575 B TW I591575B TW 102120139 A TW102120139 A TW 102120139A TW 102120139 A TW102120139 A TW 102120139A TW I591575 B TWI591575 B TW I591575B
Authority
TW
Taiwan
Prior art keywords
data
retrieved
audio
link
audio element
Prior art date
Application number
TW102120139A
Other languages
English (en)
Other versions
TW201407533A (zh
Inventor
班可赫爾沃耶
迪耶茲保羅哈利
萊塔史蒂芬G
喬瑟爾凱文
巴希克史帝文納比爾
Original Assignee
微軟技術授權有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to US13/526,033 priority Critical patent/US20130335594A1/en
Application filed by 微軟技術授權有限責任公司 filed Critical 微軟技術授權有限責任公司
Publication of TW201407533A publication Critical patent/TW201407533A/zh
Application granted granted Critical
Publication of TWI591575B publication Critical patent/TWI591575B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/10Map spot or coordinate position indicators; Map reading aids

Description

用於增進已擷取資料的方法及系統
本發明係關於增進已擷取之資料。
數位相機如今可在多種不同類型的裝置中發現,包括專用數位元相機、蜂巢電話、電腦、遊戲控制台等。數位相機的此廣泛可用性允許使用者拍攝大量數位照片,但是問題仍然存在。一個此類問題係當前的數位相機通常為具有基本功能的簡單影像擷取裝置。此情況對使用者而言具有限制性,因為使用者僅能夠擷取在特定場景時為快照的數位照片。
提供此【發明內容】以用簡化形式介紹一些概念,在下文的【實施方式】中進一步描述該等概念。此【發明內容】不意欲標識所主張標的之關鍵特徵結構或基本特徵結構,且此【發明內容】亦不意欲用於限制所主張標的的範疇。
根據一或更多個態樣,獲得關於環境的已擷取資料。至少部分地基於已擷取資料決定一或更多個額外的元素,且添加與已擷取資料有關之一或更多個額外元素的鏈接。賦能 使用一或更多個額外元素及已擷取資料的至少一部分之已增進內容的構造。
根據一或更多個態樣,決定相片的照相元素是否為可替換的,包括識別可替換的照相元素及一或更多個替代照相元素。從相片中移除可替換的照相元素,且添加一或更多個替代照相元素的一或更多個鏈接,產生壓縮相片。亦添加與可替換的照相元素或替代照相元素相關聯之額外元素的鏈接。使用壓縮相片及一或更多個替代照相元素及額外元素的鏈接賦能增進相片的構造。
100‧‧‧示例性系統
102‧‧‧擷取裝置
104‧‧‧回放裝置
106‧‧‧群眾外包資料服務
108‧‧‧網路
200‧‧‧示例性資料增進系統
202‧‧‧環境擷取模組
204‧‧‧鏈接插入模組
206‧‧‧群眾外包資料模組
208‧‧‧回放模組
210‧‧‧資料儲存庫
212‧‧‧已擷取資料
214‧‧‧鏈接資料
216‧‧‧增進資料
218‧‧‧已增進內容
300‧‧‧示例性程式
302‧‧‧動作
304‧‧‧動作
306‧‧‧動作
308‧‧‧動作
400‧‧‧示例性程式
402‧‧‧動作
404‧‧‧動作
406‧‧‧動作
408‧‧‧動作
410‧‧‧動作
412‧‧‧動作
414‧‧‧動作
500‧‧‧示例性計算裝置
502‧‧‧處理系統
504‧‧‧電腦可讀媒體
506‧‧‧I/O介面
508‧‧‧硬體元件
510‧‧‧記憶體/儲存器
520‧‧‧已擷取資料增進系統
所有圖式中使用相同元件符號指示相似特徵結構。
第1圖圖示根據一或更多實施例實施增進已擷取資料的示例性系統。
第2圖圖示根據一或更多實施例的示例性資料增進系統。
第3圖係圖示根據一或更多實施例用於增進已擷取資料之示例性程式的流程圖。
第4圖係圖示根據一或更多實施例用於增進已擷取資料之另一示例性程式的流程圖。
第5圖圖示根據一或更多實施例可經配置以實施增進已擷取資料的示例性計算裝置。
本文論述增進已擷取資料。獲得已擷取資料,該已擷取資料可包括各種類型的已記錄資料(例如,影像資料、 音訊資料、視訊資料等)及/或描述擷取裝置的各種態樣及/或記錄資料之方式的元資料。決定可由一或更多個替代元素代替之已記錄資料的一或更多個元素。從已記錄資料移除可替換的元素,且替代元素的鏈接與已擷取資料相關聯。增進已擷取資料之額外元素的鏈接亦與已擷取資料相關聯。隨後可基於已記錄資料以及替代元素及額外元素的鏈接構造已增進內容。
第1圖圖示根據一或更多實施例實施增進已擷取資料的示例性系統100。系統100包括向一或更多個回放裝置104擷取及提供資料的一或更多個擷取裝置102。回放裝置104經由網路108與群眾外包(crowd sourcing)資料服務106通訊。網路108可為各種不同的網路,包括網際網路、區域網路(LAN)、公用電話網路、內部網路、其他公用及/或專屬網路、以上之組合等。一或更多個擷取裝置102亦可視情況經由網路108與群眾外包資料服務106及/或一或更多個回放裝置104通訊。儘管圖示為分離裝置,但是應注意,特定裝置可為擷取裝置102與回放裝置104兩者。
擷取裝置102擷取關於特定環境的資料,該特定環境亦稱為與擷取資料相關聯的環境。關於或針對環境擷取資料的該環境意指擷取資料時擷取裝置102的周圍環境。環境可為例如建築物的內部、外部、音樂會、體育活動、派對等。每一擷取裝置102可為能夠擷取關於環境之資料之各種不同類型裝置的任一者,諸如,相機或攝錄像機、平板電腦或記事本電腦、蜂巢電話或其他無線電話、遊戲控制台、汽車電 腦、專屬資料擷取裝置(除了擷取資料外,提供極少的額外功能性)等。擷取裝置102中的不同擷取裝置可為相同或不同類型的裝置。
擷取資料意指記錄關於環境的資料及/或元資料。記錄關於環境的資料意指記錄或感測環境本身的特徵。可記錄關於環境之各種類型資料的任一或更多者(諸如,靜止影像資料、視訊資料、音訊資料、以上的組合等)。舉例而言,擷取裝置102可記錄特定環境的靜止影像(例如,相片)、特定環境中感測的音訊等等。
記錄關於環境的元資料意指記錄描述擷取裝置102之各種態樣、擷取資料的方式及/或環境之其他態樣的元資料。此元資料可包括在記錄關於環境的資料時擷取裝置的觀察點或方向(例如,由擷取裝置之指南針或其他方向組件決定)。此元資料亦可包括在記錄關於環境的資料時擷取裝置之(且因此亦為環境之)地理位置(諸如,由擷取裝置之全球導航衛星系統(GNSS)或其他定位組件決定的地理位置)。此元資料亦可包括記錄關於環境之資料的日期及/或時間。在擷取裝置102記錄元資料同時裝置102記錄關於環境之資料的情況下(或在由裝置102記錄關於環境之資料的臨限時間量內),元資料亦被認為與已記錄資料相關聯。
在又一個實施例中,僅在接收了使用者同意記錄擷取裝置102之地理位置後執行此操作。此使用者同意可為選擇加入(opt-in)同意,其中使用者採取肯定動作,要求記錄地理位置。或者,此使用者同意可為選擇退出(opt-out)同意,其 中使用者採取肯定動作,要求不記錄地理位置。若使用者不選擇此地理位置記錄的選擇退出,則使用者默示同意記錄地理位置。私密陳述亦可顯示給使用者,向使用者解釋如何保持已記錄地理位置的機密性。此外,應注意裝置地理位置的記錄不必且通常不包括識別特定使用者的任何個人資訊。因此,儘管可記錄特定使用者的地理位置,但是不記錄對彼特定使用者的指示。
在一或更多個實施例中,擷取裝置102記錄描述擷取裝置之各種態樣、擷取資料的方式及/或環境之其他態樣的元資料,但是不擷取或記錄關於環境的其他資料。舉例而言,擷取裝置102可記錄擷取裝置之觀察點或方向以及擷取裝置之地理位置(以及視情況地記錄記錄元資料的日期及/或時間),但是不記錄環境的任何靜止影像、視訊及/或音訊。因此,擷取裝置102可簡單地僅記錄如下文所論述增進已擷取資料技術可使用的擷取裝置之位置(並且視情況記錄觀察點或方向、日期及/或時間等)。
回放裝置104係回放使用本文所論述之技術增進的擷取資料的裝置。可藉由用替代元素或部分的鏈接代替擷取資料之元素或部分來增進已擷取資料。亦可藉由添加一或更多個額外元素的鏈接來增進已擷取資料。用替代元素或部分代替元素或部分及/或添加一或更多個額外元素的鏈接賦能或允許基於已擷取資料構造已增進內容。在下文以額外細節論述用於增進已擷取資料的此等技術。
每一回放裝置104可為各種不同類型的裝置,諸如 桌上型電腦、伺服器電腦、膝上型電腦或輕省筆電電腦、平板電腦或記事本電腦、行動台、娛樂電器、可通訊地耦接至顯示裝置的機頂盒、電視或其他顯示裝置、蜂巢電話或其他無線電話、遊戲控制台、汽車電腦等。因此,回放裝置104的範圍可從具有大量記憶體及處理器資源的完整資源裝置(例如,個人電腦、遊戲控制台)至具有有限記憶體及/或處理資源的低資源裝置(例如,傳統機頂盒、電視)。不同的回放裝置104可為相同及/或不同類型的裝置。
擷取裝置102向一或更多個回放裝置104提供已擷取資料及已記錄元資料。或者,可在擷取裝置上回放已擷取資料,在此情況下擷取裝置102亦為回放裝置104。擷取裝置102可以各種方式(諸如,經由網路108、經由另一鏈接或連接(例如,有線連接或無線連接,諸如通用串列匯流排(USB)或無線USB連接)、經由可移除式記憶體裝置(例如,從擷取裝置102移除且插入回放裝置104的快閃記憶體裝置)或其他儲存裝置等)提供已擷取資料及已記錄元資料至回放裝置。
群眾外包資料服務106維持用於增進已擷取資料的資料。在一或更多個實施例中,由擷取裝置102擷取的資料提供至群眾外包資料服務106。另外或或者,用於增進已擷取資料的資料可從其他源提供至服務106。舉例而言,資料集合或資料館可從各種源提供至服務106。服務106稱為群眾外包服務係因為服務106依憑從多個源接收用以增進已擷取資料的資料而非從單個源接收的資料。
使用各種不同類型裝置之一個或更多者實施群眾外包服務106。舉例而言,可使用如上文相對於回放裝置104所論述之各種類型裝置的任一者實施服務106。可使用相同及/或不同類型裝置之一個或更多者實施服務106。
第2圖圖示根據一或更多實施例的示例性資料增進系統200。系統200包括環境擷取模組202、鏈接插入模組204、群眾外包資料模組206及回放模組208。儘管特定模組圖示於第2圖中,但是應注意額外模組可包括在資料增進系統200中。另外,應注意資料增進系統200中所圖示之多個模組的功能可組合至單個模組中,及/或資料增進系統200中所圖示之一或更多個模組的功能可分離至多個模組。
可藉由一或更多個裝置實施模組202至模組208。在一或更多個實施例中,由不同裝置分別實施模組202至模組208。或者,模組202至模組208之兩個或兩個以上者可至少部分地實施在相同裝置中。
環境擷取模組202包括在擷取裝置(諸如,第1圖之擷取裝置102)中且擷取關於環境的資料。可如上文所論述擷取已擷取資料212,且提供至鏈接插入模組204,該已擷取資料212可為關於環境的各種類型之資料及/或元資料。鏈接插入模組204可包括在與環境擷取模組202相同或者不同的裝置中。擷取模組202可以各種方式將已擷取資料212提供至鏈接插入模組204,該等方式諸如在調用模組204之介面時包括已擷取資料212作為參數、在模組204可存取的位置中保存已擷取資料212、發電子郵件或使用其他訊息傳遞協定以 將已擷取資料212傳達至模組204等。
鏈接插入模組204識別可被來自儲存在資料儲存庫210中之其他資料的元素代替之已擷取資料212的元素。對於模組204識別的、可由來自其他資料的元素代替的已擷取資料212之元素(亦稱為可替換元素),鏈接插入模組204從已擷取資料212移除可被代替的元素,且添加代替彼識別元素的替代元素之鏈接(與已擷取資料212相關聯)。可基於已擷取之資料的類型識別不同類型的元素,諸如若已擷取資料212包括照相資料或影像資料則識別為照相元素;若已擷取資料212包括音訊資料則識別為音訊元素等。
資料儲存庫210維持用於增進已擷取資料的資料,且可由第1圖之群眾外包資料服務106實施該資料儲存庫210。包括在資料儲存庫210中的資料可從各種源(諸如,第1圖之各種擷取裝置102、其他資料集合或資料館等)獲得。
鏈接插入模組204藉由識別與資料儲存庫210中之資料相同或類似的已擷取資料之元素(亦稱為部分)決定可由來自其他資料的元素代替的已擷取資料212之元素。可使用用於執行圖案匹配及/或物件匹配之各種不同公開可用的技術及/或專屬技術的任一者識別此等元素。使用此等技術識別已擷取資料212中的物件或圖案,且識別包括相同或類似物件或圖案的資料儲存庫210中的其他資料。舉例而言,若已擷取資料212為相片,則由模組204識別相片中的建築物或地標,且亦識別包括相同建築物或地標之資料儲存庫210中的一或更多個其他相片。
圖案匹配及/或物件匹配可考慮來自包括在已擷取資料212之已記錄資料的各種因素,諸如影像中的線位置及頂點位置、影像中的顏色、音訊中的聲音圖案等。圖案匹配及/或物件匹配亦可考慮來自包括在已擷取資料212中之元資料的各種因素。舉例而言,來自元資料的此等因素可包括已擷取資料之裝置的地理位置、在裝置擷取資料時裝置的觀察點或方向、擷取資料的日期及/或時間等。
對於鏈接插入模組204識別的、可由來自其他資料之元素代替的已擷取資料212之元素,鏈接插入模組204自已擷取資料212移除可被代替的已識別元素。可以不同的方式自已擷取資料212移除此可替換的元素。在一或更多個實施例中,用一些其他資料(通常可以高壓縮比壓縮)(諸如一連串所有「0」位元值或所有「1」位元值)替換已識別元素的資料。舉例而言,若移除相片(已擷取資料212)的元素,則在相片的資料中,可用值「0」或「1」替換包括在彼元素中之圖元的資料。在其他實施例中,可維持識別已移除元素及其在資料中之對應位置的表格或其他記錄,並簡單刪除已識別元素的資料。舉例而言,若移除相片(已擷取資料212)的元素,則可維持識別相片中哪個圖元對應於元素的表格或其他記錄,且在相片的資料中,可簡單刪除對應於元素之圖元的資料。
對於鏈接插入模組204移除之已擷取資料212的每一元素,鏈接插入模組204添加與已擷取資料212相關聯的代替彼已識別元素之替代元素的鏈接。替代元素的鏈接包括 識別替代元素保存在何處及/或可如何檢索替代元素的各種資訊,允許如下文更詳細論述隨後檢索替代元素。
在一或更多個實施例中,替代元素保存為其本身的個別資料(例如,其本身的檔案),且鏈接指示彼個別資料保存在資料儲存庫210中的何處。個別資料保存在何處的指示可採取不同形式,諸如檔案路徑名、統一資源指示符(URI)、資料庫中的位置等。可以不同方式(諸如,藉由另一裝置或服務,藉由鏈接插入模組204(例如,回應於識別可由替代元素代替的元素,模組204可將彼替代元素保存為獨立檔案))產生個別資料。
在其他實施例中,替代元素保存為其他資料的一部分(例如,包括為保存其他資料之檔案的一部分),且鏈接指示彼其他資料保存在資料儲存庫210中的何處以及替代元素在其他資料的何處兩者。其他資料保存在何處的指示可採取不同形式,諸如檔案路徑名、URI、資料庫中的位置等。替代元素在其他資料中的何處的指示可採取不同形式,諸如特定資料範圍、與特定圖元相關聯的資料等。
指示亦記錄可替換元素位於已擷取資料212的何處。可替換元素在已擷取資料212中的何處的指示可採取不同形式,諸如特定資料範圍、與特定圖元相關聯的資料等。如下文更詳細地論述,維持可替換元素位於已擷取資料212的何處的此指示允許在產生已增進內容時添加替代元素。可以不同的方式保存可替換元素在已擷取資料212的何處的指示,諸如保存為替代元素之鏈接的一部分、保存在與已擷取 資料212相關聯的額外資料中等。
應注意,用於識別可由替代元素代替之已擷取資料212的元素的圖案匹配及/或物件匹配技術可選擇與已擷取資料212之已識別元素類似的替代元素。與已識別元素類似的替代元素意指與已識別元素不同之元素,但是與已識別元素具有較小臨限差異。可以不同的方式(諸如,具有相同的至少一臨限部分(例如,相片中至少一臨限量的圖元為相同值),具有在已識別元素之臨限量內的至少一臨限部分(例如,相片中的至少一臨限量的圖元在彼此的臨限量內),具有在彼此之臨限值內的已產生劃線等)決定此臨限差異等等。
在一或更多個實施例中,在可替換元素及替代元素不相同的情況下,鏈接插入模組204亦記錄指示可替換元素與替代元素之間的差異的變化資料。可以不同的方式記錄此變化資料。舉例而言,若已擷取資料212為相片,則變化資料可為可替換元素與替代元素之對應圖元的值的差異。可以不同的方式保存此變化資料(諸如,保存為替代元素之鏈接的一部分,保存在與已擷取資料212相關聯的額外資料中等)。
或者,在可替換元素及替代元素不相同的情況下,鏈接插入模組204記錄關於可替換元素與替代元素之間的差異的無變化資料。因此,鏈接插入模組204可用彼元素的其他視圖(例如,移除地標上的塗鴉的視圖、移除站在地標前面之人物的視圖等)代替影像之元素。使用者介面可視情況由鏈接插入模組204提供,允許模組204接收識別元素之多個可能的視圖之何者將用作可替換元素之替代元素的使用者 輸入。
鏈接插入模組204提供已鏈接資料214至回放模組208。已鏈接資料214為已擷取資料212,其中已經移除可替換元素。在一或更多個實施例中,已鏈接資料214亦包括(例如,作為關聯元資料)代替可替換元素的替代元素之鏈接,並且視情況亦包括與已擷取資料212相關聯的其他額外資料。因此,在此等實施例中,已鏈接資料214包括已擷取資料212(除去已移除元素)以及替代元素之鏈接(以及視情況地與已擷取資料212相關聯的其他額外資料)。
或者,除了包括替代元素之鏈接及/或與已鏈接資料214中之已擷取資料212相關聯的其他額外資料,可以其他方式維持已鏈接資料214和與已擷取資料相關聯的鏈接及/或其他額外資料之間的關聯。在一或更多個實施例中,與已擷取資料212相關聯的鏈接及/或其他額外資料維持在回放模組208可存取的表格或其他記錄中。可用不同的方式(諸如,基於已擷取資料212之識別符(例如,由擷取裝置指派的,基於已擷取資料212本身產生的(例如,基於已擷取資料212產生的雜湊值)等))將與已擷取資料212相關聯的鏈接及/或其他額外資料識別為與已擷取資料212相關聯。與已擷取資料212相關聯的鏈接及/或其他額外資料可保存在資料儲存庫210中或者保存為另一服務或模組的一部分,並且經存取以如下文更詳細地論述產生已增進內容。
應注意,鏈接插入模組204可識別可用不同替代元素替換的已擷取資料212中之多個元素。在此等情況下,對 於多個已識別元素的每一者,模組204從已擷取資料212移除已識別元素並且將添加代替彼已識別元素的替代元素之鏈接。
亦應注意,鏈接的替代元素可具有不同於被代替之元素的解析度。舉例而言,若已擷取資料212為具有特定解析度的相片,則替代元素可包括在具有較高解析度(例如,每平方吋更多的圖元)的相片中。因此,替代元素可具有在被代替之已識別元素中之前不可用的額外細節。此額外細節可允許例如使用者在隨後觀察已增進內容及查看在被代替之已識別元素中不可用的細節(例如,文字、人物、原圖等)時放大替代元素。
鏈接插入模組204亦可將一或更多個額外元素的鏈接添加至已鏈接資料214。在一或更多個實施例中,除了移除可替換元素以及添加替代元素鏈接之外,模組204亦添加一或更多個額外元素的鏈接。在其他實施例中,模組204添加一或更多個額外元素的鏈接,而不移除可替換元素以及添加替代元素之鏈接。因此,在一些實施例中,系統200不用替代元素代替已擷取資料之元素。
一或更多個額外元素的鏈接可為資料儲存庫210中之資料的鏈接,且此等鏈接可識別額外元素保存在何處及/或如何可以各種方式檢索額外元素,此等鏈接類似於如上文所論述之替代元素的鏈接。可包括一或更多個額外元素的此等鏈接作為與已鏈接資料214相關聯的元資料,或者與已鏈接資料214相關聯,類似於如上文所論述之替代元素的鏈接。
一或更多個額外元素的鏈接藉由添加各種類型之資料至已擷取資料來增進已擷取資料212。一或更多個額外元素可為與已擷取資料212相同類型的資料及/或與已擷取資料212不同類型的資料。
在一或更多個實施例中,一或更多個額外元素包括與已擷取資料212相同類型之資料的元素。舉例而言,若已擷取資料212為影像(相片),則一或更多個額外元素包括影像資料。鏈接插入模組204可以各種方式決定包括額外元素。在一或更多個實施例中,模組204使用各種圖案匹配及/或物件匹配技術以識別與資料儲存庫210中之資料相同或類似之已擷取資料212(及/或鏈接至與已擷取資料212相關聯的替代元素)的元素。可以與如上文所論述識別可被來自其他資料之元素代替的已擷取資料之元素的方式相同的方式執行與資料儲存庫210中之資料相同或類似之元素的此識別。由於基於已擷取資料之元素識別額外元素及/或該等額外元素鏈接至與已擷取資料212相關聯的替代元素,所以此等額外元素亦稱為與已擷取資料之元素及/或替代元素相關聯。
相同類型的額外元素可為與已識別元素相比包括額外資料或細節的元素。舉例而言,若已擷取資料212為包括特定地標的相片作為已識別元素,則額外元素可為提供關於彼相同地標之額外細節的相片。鏈接插入模組204可以不同的方式決定與已識別元素相比包括額外資料或細節的額外元素。在一或更多個實施例中,模組204決定包括在以與已識別元素之解析度相比較高的解析度(例如,對於影像資料為 每平方吋更多的圖元,對於音訊資料為較高的取樣頻率等)處擷取之資料中的額外元素與已識別元素相比包括額外資料或細節。在其他實施例中,模組204決定用於已識別元素及額外元素兩者的元素解析度。元素之解析度意指元素中包括多少資料或細節(例如,多少圖元、資料之位元元組數量等)。模組204決定若額外元素具有與額外元素相比較高的元素解析度,則額外元素與已識別元素相比包括額外資料或細節。
應注意,鏈接插入模組204可決定多個額外元素與相同的已識別元素相比具有額外資料或細節。在此等情況下,模組204可在已鏈接資料214中包括多個額外元素之一者的鏈接,或多個額外元素之多者(例如,每一者)的鏈接。
鏈接插入模組204可另外或或者以其他方式決定包括與已擷取資料212相同類型之資料的一或更多個額外元素。在一或更多個實施例中,鏈接插入模組204基於已擷取資料212之元資料決定一或更多個額外元素包括在已鏈接資料214中。此元資料可包括各種資訊,諸如擷取裝置之地理位置、擷取裝置之觀察點或方向,以及如上文所論述擷取資料的日期及/或時間。資料儲存庫210中包括的資料亦包括相關聯的元資料,該元資料可包括和與已擷取資料212相關聯之元資料相同的資訊。舉例而言,資料儲存庫210中包括的資料可具有相關聯元資料,該元資料識別在擷取資料時擷取資料之裝置的地理位置、在擷取資料時擷取資料之裝置的觀察點或方向、擷取資料的日期及/或時間等。
鏈接插入模組204識別在資料儲存庫210中的資 料,該資料具有匹配已擷取資料212之元資料的相關聯元資料。若元資料中的資訊相同或在彼此之臨限量內,則元資料匹配。舉例而言,若已擷取資料212之元資料包括擷取裝置之地理位置,且與資料儲存庫210中之資料相關聯的元資料包括地理位置,則在兩個元資料中的地理位置為相同的或在彼此之臨限距離內(例如,10公尺、50公尺等)的情況下,兩個元資料匹配。經由進一步的實例,若已擷取資料212之元資料亦包括擷取裝置之方向,且與資料儲存庫210中之資料相關聯的元資料包括方向,則在兩個元資料中的地理位置為相同的或在彼此之臨限距離內且方向為相同的或在彼此之臨限量(例如,3度、10度等)內的情況下,兩個元資料匹配。
因此,即使額外元素不為與已擷取資料212中之元素相同或類似之元素,鏈接插入模組204仍可識別在資料儲存庫210中增進已擷取資料212的額外元素。此等額外元素可例如擴展影像或視訊的視野、擴展已擷取音訊等。舉例而言,若已擷取資料212為在特定地理位置處、用指向特定方向的擷取裝置在當天的特定時間擷取的影像,則額外元素可為已擷取資料212中不包括的環境之額外部分(例如,在擷取影像時位於擷取裝置之視野外部的人物、建築物、風景等),但是該等額外部分為自相同(或靠近的)地理位置處、由指向相同(或類似的)方向的裝置在當天的相同(或類似的)時間擷取的。因此,即使已擷取資料212不包括環境之彼等額外部分,已鏈接資料214中仍可包括彼等額外部分。
在一或更多個實施例中,一或更多個額外元素包括與已擷取資料212不同類型之資料的元素。舉例而言,若已擷取資料212為影像(相片),則一或更多個額外元素可包括音訊資料、視訊資料等。此等不同類型的資料可為可由擷取裝置(例如,第1圖之擷取裝置102)擷取之資料類型的任一者,或者可為其他類型之資料。舉例而言,一或更多個額外元素可為文字類型的資料(例如,百科全書條目或其他書面描述)、圖式類型的資料等。一或更多個額外元素亦可包括除了由擷取裝置支援之彼等類型資料之外的資料類型。舉例而言,若已擷取資料212由不記錄音訊資料的裝置擷取,則一或更多個額外元素可包括音訊資料。
鏈接插入模組204可以各種方式決定額外元素包括在已鏈接資料214中。在一或更多個實施例中,鏈接插入模組204基於與已擷取資料212相關聯的元資料以及與資料儲存庫210中之資料相關聯的元資料決定不同資料類型之額外元素包括在已鏈接資料214中。類似於上文關於決定與已擷取資料212相同資料類型之額外元素的論述,鏈接插入模組204識別在資料儲存庫210中具有相關聯元資料的資料,該相關聯元資料匹配與已擷取資料212相關聯之元資料,但是額外元素與已擷取資料212相比為不同類型的資料。
因此,鏈接插入模組204可識別資料儲存庫210中的額外元素,該等額外元素藉由提供已擷取資料212中不包括之資料類型來增進已擷取資料。舉例而言,若已擷取資料212為在特定地理位置處及在特定日的特定時間擷取的影 像,則額外元素可為彼環境之額外類型的資料(例如,音訊資料),該等額外類型的資料不包括在已擷取資料212中,但是為相同日的相同(或類似的)時間在相同(或靠近的)地理位置處擷取的。因此,即使已擷取資料212不包括彼等額外類型的資料,已鏈接資料214中仍可包括彼等額外類型的資料。
除使用已擷取資料212之元資料之外或代替使用已擷取資料212之元資料,鏈接插入模組204亦可以其他方式決定不同資料類型之額外元素包括在已鏈接資料214中。在一或更多個實施例中,鏈接插入模組204基於已擷取資料212決定不同資料類型之額外元素包括在已鏈接資料214中(或鏈接至與已擷取資料212相關聯的替代元素)。舉例而言,模組204可使用各種圖案匹配及/或物件匹配技術以識別已擷取資料212之特定元素(或鏈接至替代元素),該等特定元素諸如特定地標、特定個人等。此等技術亦可用於識別各種一般環境類型,諸如音樂會、運動賽事等。諸如基於資料本身或基於已識別元素或包括在與資料儲存庫210中之資料相關聯的元資料中之一般環境類型的指示,亦識別資料儲存庫210中之資料的已識別元素或一般環境類型。由於基於已擷取資料之元素識別額外元素及/或該等額外元素鏈接至與已擷取資料212相關聯的替代元素,此等額外元素亦稱為與已擷取資料之元素及/或替代元素相關聯。
此等各種圖案匹配及/或物件匹配技術可用於(基於資料儲存庫210中之資料本身或與資料儲存庫210中之資料 相關聯的元資料)識別資料儲存庫210中之資料的特定元素,且鏈接插入模組204可識別在資料儲存庫210中包括相同特定元素的資料。舉例而言,模組204可決定擷取資料212的特定環境類型(例如,運動賽事的影像資料),並且將在資料儲存庫210中具有相同環境類型之其他類型資料識別為額外元素(例如,運動賽事音訊資料)。經由另一實例,模組204可決定擷取資料212(例如,影像及/或視訊資料)的特定地標,並且將在資料儲存庫210中具有相同特定地標之其他類型資料(例如,文字描述)識別為額外元素。
應注意,由鏈接插入模組204決定的額外元素可為其他資料的部分或完整的其他資料。舉例而言,已擷取資料212可為影像或視訊,且額外元素可為其他影像、視訊及/或音訊的部分,或者可為完整的其他影像、視訊及/或音訊。額外元素可基於與已擷取資料212相關聯的元資料、已擷取資料212本身及/或替代元素,由模組204以如上文所論述之不同的方式決定。舉例而言,模組204可將在由擷取已擷取資料212的時間之前臨限量的時間(例如,十五秒)的一或更多個影像識別為額外資料。
亦應注意,環境擷取模組202可擷取描述擷取裝置之各種態樣(例如,裝置之地理位置、裝置之方向或觀察點等)的元資料,但是不記錄關於環境的任何其他資料(例如,不擷取影像、不擷取音訊、不擷取視訊等)。擷取模組202因此可包括在不具有用於感測環境特徵之環境感測器(例如,無記錄環境中之影像或音訊的感測器)的裝置中,或包 括在記錄元資料但不用用於感測環境特徵的環境感測器記錄關於環境的資料的裝置中。然而,基於元資料,可由鏈接插入模組204決定一或更多個額外元素,從而將影像、音訊、視訊等添加至已鏈接資料214。因此,擷取裝置可不包括影像擷取元件、不包括音訊擷取元件等,但僅記錄描述擷取裝置之態樣(例如,裝置之地理位置及方向或觀察點)的元資料。資料儲存庫210中的影像資料及/或音訊資料可如上文所論述基於元資料被識別為額外元素,且額外元素的鏈接可由模組204添加至已鏈接資料214。
可出現已擷取資料212包括多個類型的資料(例如,視訊資料及音訊資料)的情況。鏈接插入模組204可視情況藉由決定替代元素及/或額外元素來代替彼等類型的資料之一者。舉例而言,一種類型的資料(例如,影像資料或視訊資料)可用於識別已擷取資料的特定環境類型,且可識別具有相同的環境類型的額外元素(例如,音訊資料)。模組204可用額外元素的鏈接代替已擷取資料212中對應類型的資料。因此,例如,已擷取資料212中一種類型的資料(例如,影像資料或視訊資料)可保持在已鏈接資料214中,且已擷取資料212中其他類型之資料(例如,音訊資料)可替換為額外元素的鏈接。
已鏈接資料214提供至回放模組208。鏈接插入模組204可以各種方式提供已鏈接資料214至回放模組208,該等方式諸如在調用模組208之介面時包括資料214作為參數,在模組208可存取的位置處保存資料214,發電子郵件或 使用其他訊息傳遞協定以將資料214傳達至模組208等。回放模組208在來自群眾外包資料模組206的資料214中要求鏈接的元素。如上文所論述,由元素的鏈接識別替代元素(及/或額外元素)保存在何處及/或可如何檢索替代元素(及/或額外)。群眾外包資料模組206自資料儲存庫210獲得鏈接的元素,並提供鏈接的元素至回放模組208,作為增進資料216。
回放模組208接收增進資料216,並組合增進資料216與已鏈接資料214以產生或構造已增進內容218。可基於包括在增進資料216中的元素類型以不同的方式組合資料214與資料216。舉例而言,替代元素可添加至資料214(在可替換元素位於已擷取資料212中的位置處)。經由另一實例,額外元素可添加至資料214。舉例而言,可增進相片以包括不包括在已擷取資料212中的額外部分,音訊資料可添加至影像資料,已擷取音訊資料可替換為其他音訊資料,可增進不具有關於環境之其他已擷取資料的已擷取元資料以包括音訊及/或視訊資料等。回放模組208可回放(例如,顯示或呈現)已增進內容218,或者對已增進內容218採取其他動作(例如,將已增進內容218保持在特定儲存裝置上,將已增進內容218傳送至另一裝置或模組等)。
第3圖係圖示根據一或更多實施例用於增進已擷取資料之示例性程式300的流程圖。程式300為由一或更多個模組(諸如,第2圖之鏈接插入模組204)執行的方法或方案,並且可實施在軟體、韌體、硬體或以上的組合中。程式300 圖示為動作的集合,且不局限於所圖示的用於執行各種動作之操作的順序。程式300為用於增進已擷取資料的示例性程式,本文包括關於不同諸圖之增進已擷取資料的額外論述。
在程式300中,獲得關於環境的已擷取資料(動作302)。如上文所論述,可以各種方式將已擷取資料擷取或提供至實施程式300的一或更多個模組。
決定一或更多個額外元素(動作304)。基於如上文所論述的已擷取資料決定此等一或更多個額外元素。可視情況接收促進決定一或更多個額外元素的使用者輸入(例如,指示用於識別額外元素之因素或技術的使用者輸入,指示用於額外元素之資料類型的使用者輸入,多個額外元素之一個或更多者的使用者選擇等)。
添加與已擷取資料相關聯之一或更多個額外元素的一或更多個鏈接(動作306)。如上文所論述,可以各種不同的方式添加此等一或更多個鏈接。
賦能使用一或更多個額外元素及已擷取資料的至少一部分之已增進內容的構建(動作308)。一或更多個額外元素的鏈接允許構造已增進內容。如上文所論述,此構造包括組合一或更多個額外元素與已擷取資料的至少一部分。
第4圖係圖示根據一或更多實施例用於增進已擷取資料之另一示例性程式400的流程圖。程式400為由一或更多個模組(諸如,第2圖之鏈接插入模組204)執行的方法或方案,並可實施在軟體、韌體、硬體或以上的組合中。程式400圖示為動作的集合,且不局限於所圖示的用於執行各種動 作之操作的順序。程式400為用於增進已擷取資料的示例性程式,本文包括關於不同諸圖之增進已擷取資料的額外論述。
在程式400中,獲得關於環境的已擷取資料(動作402)。如上文所論述,可以各種方式將已擷取資料擷取或提供至實施程式400的一或更多個模組。
作出關於已擷取資料之一或更多個元素是否可替換為一或更多個替代元素的決定(動作404)。如上文所論述,此決定包括以下步驟:識別一或更多個可替換元素與一或更多個替代元素。
從已擷取資料移除一或更多個已識別可替換元素(動作406)以產生壓縮相片。如上文所論述,可以不同的方式移除此等可替換元素。
添加一或更多個替代元素的一或更多個鏈接(動作408)。添加與已擷取資料相關聯之此等一或更多個鏈接,並且如上文所論述可以各種不同的方式添加。可視情況接收促進決定一或更多個替代元素的使用者輸入(例如,指示用於識別替代元素之因素或技術的使用者輸入,多個替代元素之一者的使用者選擇等)。
亦決定一或更多個額外元素(動作410)。基於已擷取資料(及/或替代元素)決定此等一或更多個額外元素,且如上文所論述,此等一或更多個額外元素與可替換元素及/或替代元素相關聯。可視情況接收促進決定一或更多個額外元素的使用者輸入(例如,指示用於識別額外元素之因素或技術的使用者輸入,指示用於額外元素之資料類型的使用者 輸入,多個額外元素之一個或更多者的使用者選擇等)。
添加一或更多個額外元素的一或更多個鏈接(動作412)。此等一或更多個鏈接與已擷取資料相關聯,並且如上文所論述可以各種不同的方式添加。由於例如從相片移除的可替換元素,以及增進鏈接的相片之額外元素而非包括在相片中之額外元素本身的鏈接,所以相片被壓縮。
賦能使用壓縮的已擷取資料以及一或更多個替代元素及額外元素的鏈接之已增進內容的構造(動作414)。一或更多個替代元素及/或一或更多個額外元素的鏈接允許構造已增進內容。如上文所論述,此構造包括組合一或更多個額外元素、替代元素及壓縮的已擷取資料。
本文所論述的增進已擷取資料技術支援各種使用場景。舉例而言,使用者可對各種地標、藝術品、風景等拍照。各種地標、藝術品、風景等之照片的部分因此可替換為相同地標、藝術品、風景等之其他較高解析度照片的部分,為使用者提供比他或她所拍照片的解析度高的解析度照片(及可能比他的或她的相機能夠拍攝的照片的解析度高的解析度)。使用者因此能夠查看額外細節,視情況能夠放大照片的部分以查看在他或她所拍的照片中不可見的人物、字跡、設計等。音訊資料亦可添加至照片,允許在隨後顯示照片時回放音訊。因此,可為使用者呈現對應於彼地標、藝術品、風景等的音訊資料,即使使用者在他的或她的照片中未擷取此等音訊。
儘管本文參考擷取資料為相片進行各種論述,但是 應注意本文所論述的技術可適用於各種其他類型之已擷取資料(諸如,視訊資料)。可作為圖框序列或陣列查看視訊資料,其中每一圖框處理為如本文所論述的相片。本文所論述的技術可適用於序列或陣列中之圖框的多個圖框(例如,每一個圖框)。對於視訊中的特定圖框,一或更多個替代元素可為來自其他相片或視訊的元素及/或來自相同視訊之其他圖框的元素。因此,不基於關鍵圖框以及關鍵圖框與視訊中之後續圖框之間的差異壓縮視訊,而是可藉由用視訊或其他處之其他圖框中之替代元素的鏈接代替視訊之圖框中的元素。
本文論述由各種模組執行的各種動作(諸如,傳達、接收、提供、記錄、保存、產生、獲得等)。本文論述為執行動作的特定模組包括執行動作的彼特定模組本身,或者調用或存取另一組件之彼特定模組或執行動作(或結合彼特定模組執行動作)的模組。因此,執行動作的特定模組包括執行動作的彼特定模組本身及/或由執行動作的彼特定模組調用或存取的另一模組。
第5圖圖示根據一或更多實施例可經配置以實施增進已擷取資料的示例性計算裝置500。計算裝置500可例如為第1圖之裝置102或104,實施第1圖之群眾外包資料服務106的至少一部分,實施第2圖之一或更多個模組202至208等。
如圖所示的計算裝置500包括處理系統502、一或更多個電腦可讀媒體504,以及彼此連通地耦接的一或更多個I/O介面506。儘管未圖示,但是計算裝置500可進一步包括 系統匯流排或其他資料以及使各種元件彼此耦接的命令傳輸系統。系統匯流排可包括不同匯流排結構之任何一者或組合,諸如記憶體匯流排或記憶體控制器、周邊匯流排、通用串列匯流排及/或使用各種匯流排架構中之任一者的處理器或本端匯流排。亦考慮到各種其他實例(諸如,控制線及資料線)。
處理系統502表示使用硬體執行一或更多個操作的功能。因此,處理系統502圖示為包括可配置為處理器、功能區塊等的硬體元件508。此情況可包括在硬體中實施為特殊應用積體電路或使用一或更多個半導體形成的其他邏輯裝置。硬體元件508不受限於形成硬體元件508所用的材料或硬體元件508中採用的處理機構。舉例而言,處理器可包含一或更多個半導體及/或電晶體(例如,電子積體電路(IC))。在此情形下,處理器可執行的指令可為電子可執行的指令。
電腦可讀媒體504圖示為包括記憶體/儲存器510。記憶體/儲存器510表示與一或更多個電腦可讀媒體相關聯的記憶體/儲存器容量。記憶體/儲存器510可包括揮發性媒體(諸如,隨機存取記憶體(RAM))及/或非揮發性媒體(諸如,唯讀記憶體(ROM)、快閃記憶體、光碟、磁碟等)。記憶體/儲存器510可包括固定媒體(例如,RAM、ROM、固定硬碟等)以及可移除式媒體(例如,快閃記憶體、可移除式硬碟、光碟等)。電腦可讀媒體504可以如下文進一步所描述之各種其他方式配置。
一或更多個輸入/輸出介面506表示允許使用者將命 令及資訊輸入計算裝置500,且亦允許使用各種輸入/輸出裝置將資訊呈現給使用者及/或其他元件或裝置的功能。輸入裝置的實例包括鍵盤、遊標控制裝置(例如,滑鼠)、麥克風(例如,用於語音或其他音訊輸入)、掃描器、觸控式功能(例如,經配置以偵測實體觸摸的電容性感測器或其他感測器)、相機(例如,可使用可見波長或不可見波長(諸如,紅外頻率)偵測不涉及觸摸的移動(如,手勢)的相機)等。輸出裝置之實例包括顯示裝置(例如,監視器或投影儀)、揚聲器、印表機、網路卡、觸覺回應裝置等。因此,計算裝置500可以各種方式經配置以支援使用者互動。
計算裝置500亦包括已擷取資料增進系統520。已擷取資料增進系統520提供各種功能用於增進已擷取資料,包括如上文所論述之擷取資料、插入鏈接、構造用於回放的已增進內容及/或提供群眾外包資料。已擷取資料增進系統520可為例如第2圖之一或更多個模組202至208。
本文可描述軟體、硬體元件或程式模組的大環境中的各種技術。一般而言,此等模組包括執行特定任務或實施特定抽象資料類型的常式、程式、物件、元件、組件、資料結構等。如本文所使用的術語「模組」、「功能」及「組件」大體表示軟體、韌體、硬體或以上的組合。本文描述之技術的特徵結構為平臺獨立的,意謂此等技術可實施在具有各種處理器的各種商業計算平臺上。
所描述之模組及技術的實施可保存在一些形式的電腦可讀媒體上或跨此等電腦可讀媒體傳送。電腦可讀媒體可 包括可由計算裝置500存取的各種媒體。經由舉例而非限制,電腦可讀媒體可包括「電腦可讀儲存媒體」及「電腦可讀訊號媒體」。
「電腦可讀儲存媒體」意指賦能與僅訊號傳輸、載波或訊號本身相比的資訊之永久性及/或非短暫性儲存的媒體及/或裝置。因此,電腦可讀儲存媒體意指非訊號承載的媒體。電腦可讀儲存媒體包括以適於資訊(諸如,電腦可讀指令、資料結構、程式模組、邏輯元件/電路或其他資料)儲存的方法或技術實施的硬體(諸如,揮發性及非揮發性媒體、可移除式及不可移除式媒體及/或儲存裝置)。電腦可讀儲存媒體之實例包括(但不限於)RAM、ROM、EEPROM、快閃記憶體或其他記憶體技術、CD-ROM、數位化通用光碟(DVD)或其他光學儲存器、硬碟、磁帶盒、磁帶、磁碟儲存器或其他磁性儲存裝置,或其他儲存裝置、有形媒體,或適於保存所要資訊且可由電腦存取的製品。
「電腦可讀訊號媒體」意指經配置以諸如經由網路將指令傳送至計算裝置500之硬體的訊號承載媒體。訊號媒體通常包含電腦可讀指令、資料結構、程式模組,或調變資料訊號中的其他資料(諸如,載波)、資料訊號或其他傳送機構。訊號媒體亦包括任何資訊傳遞媒體。術語「調變資料訊號」意謂具有其特徵集合之一個或更多者或以編碼訊號中之資訊的此方式變化的訊號。經由舉例而非限制,通訊媒體包括有線媒體(諸如,有線網路或直接有線連接),以及無線媒體(諸如,聲波、射頻、紅外及其他無線媒體)。
如前文所述,硬體元件508及電腦可讀媒體504表示以硬體形式實施之指令、模組、可程式化裝置邏輯及/或固定裝置邏輯,該硬體形式可用於一些實施例中來實施本文描述之技術的至少一些態樣。硬體元件508可包括積體電路或晶片上系統、特殊應用積體電路(ASIC)、現場可程式化閘陣列(FPGA)、複合可程式邏輯裝置(CPLD)以及矽或其他硬體裝置中的其他實施之組件。在此上下文中,硬體元件可操作為執行由指令、模組及/或邏輯定義之程式任務的處理裝置,該等指令、模組及/或邏輯包含在硬體元件以及用於保存執行指令之硬體裝置(例如,前文所述的電腦可讀儲存媒體)中。
上述的組合亦可用於實施本文描述之各種技術及模組。因此,軟體、硬體或程式模組及其他程式模組可實施為以某種形式的電腦可讀儲存媒體及/或一或更多個硬體元件508體現的一或更多個指令及/或邏輯。計算裝置500可經配置以實施對應於軟體及/或硬體模組的特定指令及/或功能。因此,可例如經由使用電腦可讀儲存媒體及/或處理系統之硬體元件508至少部分地在硬體中實現可由計算裝置500執行為軟體的模組之實施。指令及/或功能可由一或更多個製品(例如,一或更多個計算裝置500及/或處理系統502)執行/操作以實施本文描述之技術、模組及實例。
儘管已經用特定於結構特微及/或方法論動作的語言描述了標的,但是應瞭解由隨附申請專利範圍定義的標的不必局限於所如上所述的特定特徵結構或動作。而是,以實施申請專利範圍的實例形式揭示如上所述的特定特徵結構及 動作。
200‧‧‧示例性資料增進系統
202‧‧‧環境擷取模組
204‧‧‧鏈接插入模組
206‧‧‧群眾外包資料模組
208‧‧‧回放模組
210‧‧‧資料儲存庫
212‧‧‧已擷取資料
214‧‧‧鏈接資料
216‧‧‧增進資料
218‧‧‧已增進內容

Claims (20)

  1. 一種用於增進已擷取資料的方法,該方法包含以下步驟:獲得關於一環境的已擷取資料;決定來自該已擷取資料能被替換的一音訊資料元素,其中決定能被替換的該音訊資料元素之步驟包括搜尋已儲存資料以識別出關聯於該音訊資料元素的一替代音訊元素,且其中該替代音訊元素對應於先前儲存的資料,該資料不同於該已擷取資料且不包括在該已擷取資料中;回應於該搜尋步驟而將該音訊資料元素自該已擷取資料移除,來建立不包含經移除之該音訊資料元素的一壓縮資料檔;藉由添加替換經移除的該音訊資料元素的該替代音訊元素之一鏈接來與該壓縮資料檔相關聯以替換經移除的該音訊資料元素,該鏈接的資料大小小於經移除之該音訊資料元素的資料大小;及回應於使用者嘗試要檢視或播放已增進的內容,賦能使用該替代音訊元素之鏈接及該壓縮資料檔的至少一部分來構造包括了該替代音訊元素的已增進內容。
  2. 如請求項1所述之方法,其中識別出該替代音訊元素的步驟包括將來自該已擷取資料之該音訊資料元素中的聲音圖案與該替代音訊元素匹配。
  3. 如請求項1所述之方法,其中該鏈接指示出該替代音訊元素儲存在資料儲存庫的何處,且該鏈接包含檔案路徑名、統一資源指示符(URI)、或資料庫位址中之一者。
  4. 如請求項1所述之方法,該方法進一步包含以下步驟:至少部分地根據該已擷取資料來決定一額外元素,該額外元素與該已擷取資料相關聯;添加該額外元素之一鏈接來與該已擷取資料相關聯,該額外元素之鏈接連同該替代音訊元素之鏈接的資料大小小於經移除之該音訊資料元素的資料大小,及其中賦能構造該已增進內容的步驟也使用該額外元素之鏈接。
  5. 如請求項4所述之方法,其中該額外元素包括關於該環境的視訊資料。
  6. 如請求項4所述之方法,其中該額外元素包括關於該環境的影像資料。
  7. 如請求項4所述之方法,其中該已擷取資料包含描述在由一裝置擷取該已擷取資料時該裝置之一地理位置的元資料,但是該已擷取資料不包括在該地理位置處擷取的影像。
  8. 如請求項7所述之方法,其中該額外元素包括在該地理位置處由另一裝置擷取的一影像。
  9. 如請求項4所述之方法,其中該已擷取資料包含描述在由一裝置擷取該已擷取資料時該裝置之一地理位置的元資料,且決定與該已擷取資料相關聯之該額外元素的步驟乃進一步基於該元資料。
  10. 如請求項9所述之方法,其中該元資料進一步描述該裝置之一觀察點或方向。
  11. 如請求項4所述之方法,其中該額外元素經儲存在遠離於擷取該已擷取資料之裝置的一資料儲存庫中。
  12. 如請求項1所述之方法,該方法進一步包含以下步驟:回放該已增進內容。
  13. 一種用於已增進影像的壓縮方法,該壓縮方法包含以下步驟:決定一已增進影像之已擷取資料中之一音訊元素是否可替換,該決定步驟是藉由識別出一可替換音訊元素及關聯於該可替換音訊元素的一替代音訊元素,其中識別出該可替換音訊元素之步驟包括搜尋已儲存資料以識別出該替代音訊元 素,且其中該替代音訊元素對應於先前儲存的資料,該資料不同於該已擷取資料且不包括在該已擷取資料中;移除該可替換音訊元素以產生一壓縮影像;藉由添加該替代音訊元素之一鏈接來替換經移除的該可替換音訊元素,該替代音訊元素之鏈接所具有的資料大小小於經移除的該可替換音訊元素的資料大小;及回應於使用者嘗試檢視該已增進影像,賦能使用該壓縮影像及該替代音訊元素之鏈接來構造該已增進影像。
  14. 如請求項13所述之壓縮方法,其中該決定步驟包含以下步驟:回應於該可替換音訊元素與該替代音訊元素相同或與該替代音訊元素的差異小於一臨限差異,決定可替換該可替換音訊元素。
  15. 如請求項13所述之壓縮方法,添加該替代音訊元素之鏈接的步驟進一步包含以下步驟:對於該可替換音訊元素保存變化資料,該變化資料指示該可替換音訊元素與該替代音訊元素之間的一差異。
  16. 如請求項13所述之壓縮方法,其中該替代音訊元素的該鏈接指示出該替代音訊元素儲存在資料儲存庫中的何處,且該鏈接包含檔案路徑名、統一資源指示符(URI)、或資料庫位址中之至少一者。
  17. 如請求項13所述之壓縮方法,該壓縮方法進一步包含下列步驟:添加一額外元素之一鏈接,該額外元素相關聯於該可替換音訊元素或該替代音訊元素且該額外元素擴展該影像的視野,該額外元素之鏈接連同該替代音訊元素之鏈接的資料大小小於經移除之該可替換音訊元素的資料大小。
  18. 如請求項13所述之壓縮方法,該壓縮方法進一步包含下列步驟:添加一額外元素之一鏈接,該額外元素相關聯於該可替換音訊元素或該替代音訊元素且該額外元素包含與影像資料不同類型的資料,該額外元素之鏈接連同該替代音訊元素之鏈接的資料大小小於經移除之該可替換音訊元素的資料大小。
  19. 如請求項18所述之壓縮方法,其中該不同類型的資料包含文字資料。
  20. 一種用於增進已擷取資料的系統,包含:一計算裝置;一或更多處理器;及 具有多個指令保存於上的電腦可讀取儲存媒體,該等指令能由該一或更多處理器執行以引起該計算裝置執行以下步驟:決定一已增進影像之已擷取資料中之一音訊元素是否可替換,該決定步驟是藉由識別出該可替換音訊元素及與該可替換音訊元素相關聯的一替代音訊元素,其中識別出該可替換音訊元素之步驟包括搜尋已儲存資料以識別出該替代音訊元素,且其中該替代音訊元素對應於先前儲存的資料,該資料不同於該已擷取資料且不包括在該已擷取資料中;自該影像移除該可替換音訊元素以產生一壓縮影像;藉由添加該替代音訊元素之一鏈接來與該影像相關聯,以替換經移除的該可替換音訊元素;基於與該影像相關聯的元資料決定一額外元素,該元資料描述在由一擷取裝置擷取該影像時該擷取裝置的一地理位置;添加該額外元素之一鏈接來與該影像相關聯,該額外元素之鏈接連同該替代音訊元素之鏈接所具有的資料大小小於經移除之該可替換音訊元素的資料大小;及回應於使用者嘗試檢視該影像,賦能使用該壓縮影像及該替代音訊元素及該額外元素的鏈接來構造該影像。
TW102120139A 2012-06-18 2013-06-06 用於增進已擷取資料的方法及系統 TWI591575B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/526,033 US20130335594A1 (en) 2012-06-18 2012-06-18 Enhancing captured data

Publications (2)

Publication Number Publication Date
TW201407533A TW201407533A (zh) 2014-02-16
TWI591575B true TWI591575B (zh) 2017-07-11

Family

ID=48628950

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102120139A TWI591575B (zh) 2012-06-18 2013-06-06 用於增進已擷取資料的方法及系統

Country Status (7)

Country Link
US (1) US20130335594A1 (zh)
EP (1) EP2862103A1 (zh)
JP (1) JP6300792B2 (zh)
KR (1) KR20150023406A (zh)
CN (1) CN104395903A (zh)
TW (1) TWI591575B (zh)
WO (1) WO2013191899A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9058375B2 (en) * 2013-10-09 2015-06-16 Smart Screen Networks, Inc. Systems and methods for adding descriptive metadata to digital content
TWI509426B (zh) * 2014-09-17 2015-11-21 Prophetstor Data Services Inc 用於達成無干擾性資料重建的系統
US10379497B2 (en) * 2015-03-07 2019-08-13 Apple Inc. Obtaining and displaying time-related data on an electronic watch
US10572571B2 (en) 2015-06-05 2020-02-25 Apple Inc. API for specifying display of complication on an electronic watch
US10175866B2 (en) 2015-06-05 2019-01-08 Apple Inc. Providing complications on an electronic watch
US11327640B2 (en) 2015-06-05 2022-05-10 Apple Inc. Providing complications on an electronic device
KR20170010485A (ko) * 2015-07-20 2017-02-01 엘지전자 주식회사 단말 장치 및 단말 장치의 제어 방법
CN111163138B (zh) * 2019-12-18 2022-04-12 北京智明星通科技股份有限公司 一种降低游戏期间网络负载的方法、装置和服务器

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7859551B2 (en) * 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
JP4785168B2 (ja) * 2000-01-13 2011-10-05 ディジマーク コーポレイション メタデータの認証および媒体信号の透かしへのメタデータの埋込
GB2372165A (en) * 2001-02-10 2002-08-14 Hewlett Packard Co A method of selectively storing images
US7042470B2 (en) * 2001-03-05 2006-05-09 Digimarc Corporation Using embedded steganographic identifiers in segmented areas of geographic images and characteristics corresponding to imagery data derived from aerial platforms
US7444656B2 (en) * 2001-08-02 2008-10-28 Intellocity Usa, Inc. Post production visual enhancement rendering
US20040012601A1 (en) * 2002-07-18 2004-01-22 Sang Henry W. Method and system for displaying a first image as a second image
JP4294592B2 (ja) * 2002-10-28 2009-07-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ メディア・コンテンツ・アイテムを置き換える装置及び方法
US7185284B2 (en) * 2002-12-20 2007-02-27 Motorola, Inc. Method and apparatus for providing a hyperlink indication on a display for an image in a web page
US20060139475A1 (en) * 2004-12-23 2006-06-29 Esch John W Multiple field of view camera arrays
US7512262B2 (en) * 2005-02-25 2009-03-31 Microsoft Corporation Stereo-based image processing
EA200702509A1 (ru) * 2005-05-13 2008-06-30 КЭПЧЕ-КЭМ АйПи ПиТиУай ЛТД. Способ и система для передачи видеосигнала на мобильный терминал
JP5162928B2 (ja) * 2007-03-12 2013-03-13 ソニー株式会社 画像処理装置、画像処理方法、画像処理システム
CN100562894C (zh) * 2007-03-23 2009-11-25 北京中星微电子有限公司 一种图像合成方法及装置
JP5188101B2 (ja) * 2007-06-01 2013-04-24 株式会社キーエンス 拡大観察装置、拡大画像撮影方法、拡大画像撮影プログラム及びコンピュータで読み取り可能な記録媒体
US7973655B2 (en) * 2007-11-27 2011-07-05 Yahoo! Inc. Mobile device tracking and location awareness
US20090193021A1 (en) * 2008-01-29 2009-07-30 Gupta Vikram M Camera system and method for picture sharing based on camera perspective
JP4970302B2 (ja) * 2008-02-14 2012-07-04 富士フイルム株式会社 画像処理装置,画像処理方法及び撮像装置
US8122468B2 (en) * 2008-11-07 2012-02-21 At&T Intellectual Property I, L.P. System and method for dynamically constructing audio in a video program
US8700072B2 (en) * 2008-12-23 2014-04-15 At&T Mobility Ii Llc Scalable message fidelity
FR2948760A1 (fr) * 2009-07-31 2011-02-04 Trading Corp Consulting Procede et systeme cartographique destines a construire une representation cartographique numerique d'une zone geographique
US9241185B2 (en) * 2009-09-30 2016-01-19 At&T Intellectual Property I, L.P. Apparatus and method for media detection and replacement
CN102063610B (zh) * 2009-11-13 2013-08-28 鸿富锦精密工业(深圳)有限公司 影像辨识系统及方法
EP2389004B1 (en) * 2010-05-20 2013-07-24 Sony Computer Entertainment Europe Ltd. 3D camera and imaging method
US8442716B2 (en) * 2010-10-31 2013-05-14 Microsoft Corporation Identifying physical locations of entities
US9336240B2 (en) * 2011-07-15 2016-05-10 Apple Inc. Geo-tagging digital images

Also Published As

Publication number Publication date
JP2015523018A (ja) 2015-08-06
KR20150023406A (ko) 2015-03-05
JP6300792B2 (ja) 2018-03-28
TW201407533A (zh) 2014-02-16
CN104395903A (zh) 2015-03-04
EP2862103A1 (en) 2015-04-22
US20130335594A1 (en) 2013-12-19
WO2013191899A1 (en) 2013-12-27

Similar Documents

Publication Publication Date Title
TWI591575B (zh) 用於增進已擷取資料的方法及系統
JP6349031B2 (ja) 画像に表されたオブジェクトの認識及び照合のための方法及び装置
US8885960B2 (en) Linking photographs via face, time, and location
US20140152852A1 (en) Predetermined-area management system, communication method, and computer program product
US9465802B2 (en) Content storage processing system, content storage processing method, and semiconductor integrated circuit
US9641761B2 (en) Electronic device for playing-playing contents and method thereof
US9973649B2 (en) Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program
CN105247850A (zh) 对视频方向的自动调节
US20150062287A1 (en) Integrating video with panorama
US10326905B2 (en) Sensory and cognitive milieu in photographs and videos
TW201503675A (zh) 媒體檔案管理方法及系統
US11238622B2 (en) Method of providing augmented reality contents and electronic device therefor
JP6345191B2 (ja) ビジュアル検索のための自動画像修正
US20120284426A1 (en) Method and system for playing a datapod that consists of synchronized, associated media and data
JP2018536212A (ja) 情報捕捉および提示のための方法および装置
US20120271911A1 (en) Program, information processing apparatus and information processing method to change location information of slideshow
JP2014120878A (ja) 所定領域管理システム、所定領域管理方法、及びプログラム
JP2016091079A (ja) 情報処理装置及び情報処理プログラム
JP5060636B1 (ja) 電子機器、画像処理方法及びプログラム
KR20170025732A (ko) 여행 기록을 제공하기 위한 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
JP2012089928A (ja) 画像処理装置、画像処理方法
KR20120080379A (ko) 디지털 카메라의 이미지 어노테이션 처리 방법 및 장치
JP6720734B2 (ja) 画像処理装置及び画像処理プログラム
KR102289293B1 (ko) 전자장치에서 콘텐츠 재생 방법 및 장치
KR102165339B1 (ko) 전자장치에서 콘텐츠 재생 방법 및 장치

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees