TW201118792A - Capture and display of digital images based on related metadata - Google Patents

Capture and display of digital images based on related metadata Download PDF

Info

Publication number
TW201118792A
TW201118792A TW099109404A TW99109404A TW201118792A TW 201118792 A TW201118792 A TW 201118792A TW 099109404 A TW099109404 A TW 099109404A TW 99109404 A TW99109404 A TW 99109404A TW 201118792 A TW201118792 A TW 201118792A
Authority
TW
Taiwan
Prior art keywords
image
content
data
images
view
Prior art date
Application number
TW099109404A
Other languages
English (en)
Other versions
TWI457854B (zh
Inventor
Horst W Haussecker
Yoram Gat
Scott M Ettinger
Igor Kozintsev
Yi Wu
Oscar Nestares
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of TW201118792A publication Critical patent/TW201118792A/zh
Application granted granted Critical
Publication of TWI457854B publication Critical patent/TWI457854B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

201118792 六、發明說明 【發明所屬之技術領域】 大致地,本發明有關數位影像,且更特定地,有關根 據相關元資料之數位影像的捕捉與顯示。 【先前技術】 在數位相機和數位攝影(或相片)以前,人們典型地以 相簿、幻燈片展示來顯示其之相片集至他人,或單純地傳 遞一疊相片至他人以供檢視之用。數位相機已允許使用者 拍攝及儲存大量的個人數位相片。再者,數位相片可在" 數位幻燈片展示"之內分別顯示於電腦螢幕上,或數位相 框中。 人們可藉由上傳其之影像至網路服務(例如,Flickr®) 且與他人共享此上傳之蒐集,而分享其之數位相片集。然 而,使用者會受限於分別地觀看該等圖像,或受限爲"縮 圖"之聚集,亦即,該等相片之縮減尺寸的型式以允許同 時顯示一或更多個影像於顯示裝置上。 然而,數位相片的個別或縮圖之顯示會給予觀看者極 爲受限的感覺,亦即,拍攝相片者在當捕捉影像時所經歷 的感覺。 數位視訊資料會以同樣受限之方式被上傳及分享。此 外,聚集之數位視訊資料亦常被總結成爲縮圖之聚集,其 中,縮圖表示聚集中之各個數位視訊之個別的框。除了上 述限制之外,縮圖總結並未輸送關於數位視訊聚集的內容 -5- 201118792 之足夠資訊至觀看者。 本文之若干細節及實施的說明包含可陳明所述之一些 或所有實施例之該等圖式的說明,以及在此所給予之發明 槪念的其他潛在實施例或實施的討論。本發明實施例之綜 覽係參照圖式而提供於由更詳細之說明所伴隨的敘述之 中。 【發明內容及實施方式】 本發明之實施例有關數位相片及視訊資料的繪製及顯 示。本發明之實施例可藉由繪製及顯示處理而顯現。 在一實施例中,繪製裝置可接收複數個影像檔案以及 與該複數個影像檔案相關聯的元資料。在下文所敘述的實 施例中,可將影像"之術語使用成表示數位相片及數位視 訊之訊框二者。 繪製裝置可產生包含複數個影像檔案之各影像檔案的 視景,其中各個影像檔案的配置係根據影像的內容。在視 景之內的各個影像的配置可進一步根據與各個影像相關聯 的元資料。 諸如Microsoft PhotosynthTM之先前技藝的繪製及顯 示處理係使用大的相片集,且純粹根據各個相片的影像內 容而自相片提取多維資訊。因爲該等處理係純粹根據各個 相片的影像內容,所以將被顯示在視景之中的相片內容必 須重疊。因此,在相片集之內無重疊至任何其他影像的影 像係自視景丟棄。針對顯示及分享其持有的個人相片集之 -6- 201118792 人而言,自相片集丟棄相片並非可接受的結果。然而,觀 看相片集內之冗餘的資訊可使觀看者厭煩。例如’包含相 同背景之具有相當小的改變於各個影像中之若干影像並不 會引起觀看的興趣。 再者,當相片及視訊資料係以不同的檔案格式而儲存 時,其中可儲存及組織相片及視訊資料的方式會受限於先 前技藝中。因此,儲存及組織與相片及視訊資料的內容一 致之該相片及視訊資料係麻煩的。例如,使用先前技藝之 用於儲存及組織的方法,通常並不會儲存及/或組織包含 在空間上及/或時間上接近之內容的相片及/或視訊以反映 此接近。 在一實施例中’繪製裝置接收複數個影像及相關的元 資料’以產生該等影像的浸沒式視景。因爲影像係與相關 的元資料一起被接收’所以該繪製裝置無需接收大的相片 集’且接收之相片的內容無需重疊。 影像元資料可由具有環境及取向感測功能之任一裝置 或裝置的聚集所捕捉》與影像檔案相關聯的元資料可包含 地理資訊,磁場資訊(例如,磁極方向性資訊),空間資訊 (包含與移動相關之資訊-亦即,加速度及角動量),以及 時間資訊。該等環境及取向感測元資料的任一組合可被選 擇性地稱爲三維(3D)取向元資料。其他的標記可被選擇性 地施加至相關的影像元資料。例如,3 D取向元資料可藉 由地理感測器、加速度計、磁強計、及陀螺儀之組合而接 收。 201118792 地理資訊可包含相片或影像之內容的資訊。地理資訊 亦可(或選擇性地)包含捕捉將被繪製及顯示之各個相片或 視訊的影像捕捉裝置(或裝置的聚集)之地理資訊-亦即, 當影像捕捉裝置捕捉相片或視訊時之有關該裝置的位置及 取向之資訊。 在一實施例中,地理資訊係自全球導航衛星系統(例 如,全球定位系統)接收,磁場資訊係自磁強計接收,以 及空間和時間資訊係根據接收自加速度計(測量加速度)和 陀螺儀(測量角動量)之資訊。在另一實施例中,上述所有 資訊係自單一裝置接收。 繪製裝置可接收伴隨有足夠相關之元資料的相片及視 訊資料之聚集,且以其之全部或成爲該聚集之總結來產生 視景而顯示該聚集。相片及視訊資料之檔案格式可不相 同。再者,視訊資料可包含額外的相關聯之資料(例如, 視訊資料檔案可包含將與視訊影像資料一起被重放之對應 的聲音資料)。繪製裝置仍可一起處理相片及視訊資料, 以產生包含相片及視訊資料之視景。例如,可將視訊資料 當成連續的單一影像(亦即,訊框)之聚集來處理,其中視 訊之各像框係與個別相片相似地被處理。 在一實施例中,顯示係產生成爲浸沒式視景。例如, 可將浸沒式視景繪製成3D浸沒式環境,其中影像及/或視 訊之內容係與其相對於在視訊/相片擷取期間之相機位置 及取向的正確尺寸成比例地顯示,且移動係以該內容之適 當的空間及/或時間之前後關係而顯示。 201118792 藉由根據相關聯的元資料以繪製影像內容,相片及視 訊可以以各式各樣的方式來顯示。在一實施例中,視點係 根據聚集之相片及視訊的其中一者之擷取期間的相機位置 及取向而建立,以用於觀看者,且相片及視訊聚集係相對 於此視點而顯示。在另一實施例中,係分析相片及/或視 訊之聚集的內容以偵測冗餘之內容。可將具有冗餘之內容 的影像縫補在一起,以顯示重疊所有冗餘內容的影像,藉 以提供任一個別相片或視訊訊框包含更多內容的影像。 在一實施例中,產生第一影像之視景,其中第一影像 的配置係根據第一影像之相關聯的元資料。而且,產生第 一及第二影像之視景,其中在視景中之第一影像的配置係 根據與第一影像相關聯之元資料,以及相對於第一影像之 第二影像的配置係根據與第一影像相關聯之元資料、與第 二影像相關聯之元資料、及第一影像的配置。因此,產生 影像之相對位置及取向的視景,且若重疊存在時,在該視 景或該等視景之內的影像之位置可根據影像的內容而改 善。 與移動相關之影像元資料可使用以繪製橫過顯示器而 ”移動"之物件。在一實施例中,可將包含(相對地)靜態背 景內容之相片的聚集繪製成背景,以及可顯示移動內容以 模擬橫過該背景之"移動"。 影像元資料可使用以以各式各樣的方式來組織相片及 視訊聚集。在一實施例中’元資料係顯示於視景之內’以 做爲導航該等相片及/或視訊集之介面(例如’時間條圖’ -9 - 201118792 或位置路徑)。元資料亦可結合於使用者介面之中,以觀 看該聚集之內容的空間及/或時間前後關係之內的相片或 視訊聚集。 第1圖係依據本發明實施例之繪製及顯示影像資料的 系統或設備之方塊圖。系統或設備100可包含繪製裝置 103,該繪製裝置103係操作地耦接至影像捕捉裝置102 及資料儲存器101。與相片及/或視訊相關之額外的元資料 亦可包含於影像捕捉裝置102及資料庫101之中。然後, 繪製裝置可傳遞出將被顯示於顯示器104上之繪製的資 料。 在一實施例中,可將影像捕捉裝置1 02、資料儲存器 101、繪製裝置103、及顯示器104包含於單一設備之 中。例如,數位相機(102)可操作地耦接至安全數位(SD) 卡(101),且包含繪製模組(103)以繪製在數位相機之液晶 顯示器(LCD)單元上之顯示。在另一實施例中,影像捕捉 裝置102及資料儲存器101係可包含將由繪製裝置〗03所 繪製之相片/或視訊的分離裝置。影像捕捉裝置1 02及資 料儲存器1 0 1亦可各自地包含與相片及/或視訊相關的3 D 取向元資料。 例如,影像捕捉裝置1 02可爲能捕捉相片,視訊,及 相關之元資料的手機相機。當影像捕捉裝置1 〇2之本地貯 存接近容量時,影像捕捉裝置102可轉移本地貯存之內容 至外部的資料儲存器丨01。接著,可請求繪製裝置1 〇3繪 製來自影像捕捉裝置102及資料儲存器101二者之資料。 -10- 201118792 然後,可對顯示器104全部地傳送或對顯示器104分段地 緩衝所繪製之視景,而所繪製之視景則根據空間或時間以 緩衝。 第2圖係由繪製裝置所產生之包含影像的聚集之視景 圖。影像201、202,及203包含重疊的內容。在由第2 圖所描繪的實例中,影像20 1的內容係與影像202的內容 重疊。例如,來自影像201之與影像202之內容冗餘的內 容(標記之參考元件201 a)可不顯示於視景200之內。影像 202及203的內容係以相似之方式重疊,且因此,影像 202之冗餘的內容(標記之參考元件202a)可不顯示於視景 之內。所以,影像201至203之內容係"縫補"在一起,且 顯示成爲影像206。 在由第2圖所描繪的實例中,影像2 04並未包含有與 影像201、202、及203之內容重疊的內容。先前技藝之 機制將無法以相對於影像20 1至203之內容的適當空間前 後關係來顯示影像204之內容。在一實施例中,相對於合 倂影像206之影像204的配置(亦即,影像204與206間 之間隔205的計算)係由與各個影像相關聯之地理定位的 元資料所衍生出。視點2 1 0係至少部分地根據相關聯之元 資料以決定,而顯現視訊/相片擷取期間之影像捕捉裝置 的位置和取向。 在一實施例中,視點2 1 0係進一步由影像20 1至204 之內容所衍生出。例如,經由GP S單元所捕捉之地理定 位的元資料僅可包含當捕捉影像20 1至204時之影像捕捉 201118792 裝置的位置之10米內的準確度。而且’ GPS資料無法準 確地報告當捕捉影像201至204時之影像捕捉裝置的位置 之垂直(例如,3D之x,y及z軸250的y軸)配置。因 此,除了地理定位的元資料(及額外的3D取向元資料)之 外,可使用影像201至204之內容以建立視點210。 第3圖係用以根據所接收之影像及元資料以產生視景 之處理的實施例之流程圖。如此處所描繪之流程圖提供各 式各樣處理動作之順序的實例。雖然係以特定之順序或次 序而顯示,但除非另有指明,否則該等動作之次序可加以 修正。因此,應瞭解的是,所描繪之實施僅爲實例,以及 所描繪之處理可以以不同的次序來執行,且某些動作可被 並列地執行。此外,可將一或更多個動作省略於本發明之 各式各樣的實施例中;因此,在每個實施中並不一定需要 所有的動作,而其他的處理流程亦係可行的。 繪製裝置可接收第一及第二相片,301。該等相片可 包含或不包含重疊的內容。繪製裝置可進一步接收與第一 及第二影像相關聯的元資料,3 02。在一實施例中,用於 第一及第二影像之元資料必須包含相對於各個影像的內容 之地理定位的資料。根據所接收之影像的內容及所接收之 元資料’可決定視點’ 303。該視點係做爲視訊/相片擷取 期間之相機位置和取向的估計。與影像之內容相關(例 如,影像捕捉裝置在影像捕捉期間使用變焦透鏡)和與地 理定位的元資料相關(亦即,地理定位資訊之準確度位準) 之若干因素可增加或減少決定之視點的準確度。第一影像 -12- 201118792 係根據該視點而配置於視景之內,3 04。第二影像係相對 於第一影像及該視點而配置於視景之內,305 »然後,產 生該視景且將其傳送至顯示裝置,3 06。 第4圖描繪包含"移動"在一繪製視景內之聚集影像的 非靜態內容之視景的實例。視景400包含影像401至405 的聚集。在此實例中,該等影像均包含重疊的內容。因 此,該等影像係以相似於第2圖參考元件206之連續方式 而被顯示及繪製於視景400之中。然而,相對於此圖所敘 述之特性並未受限於其中所有影像均包含重疊之內容的聚 集。 影像 40 1至 405各包含至少一部分之靜態內容 411(樹),412(樹),及413(雲)。影像401、402、及405 分別包含移動之物件410a、410b、及410c(鳥飛翔)。在 一實施例中,視景400係以根據與各個影像相關聯之相關 的3D取向元資料而繪製成穿過視景400以"移動"之移動 內容來顯示。例如,假定影像401至405係由影像捕捉裝 置使用固定成恆定焦距之變焦透鏡而在固定位置所捕捉》 在此實例中,物件410a至410c之移動的時序可僅根據時 間元資料而決定。然而,若影像401至405係在當影像裝 置正移動(例如,以鳥飛行之相反方向),且變焦透鏡之焦 距係針對各個影像以變化時之同時而被捕捉時,則可使用 諸如地理資訊、磁場資訊(例如,磁極方向之資訊)、及空 間資訊(包含相關於移動之資訊,亦即,加速度及角動量) 之額外的3D取向元資料以決定物件410a至41〇c之移動 -13- 201118792 的時序。 在一實施例上,繪製裝置計算移動物件之估計的"飛 行路徑"420,且配合飛行路徑420投影物件410a至 410c。在另一實施例中,觀看者可選擇聚焦於物件410a 之上,且因此,在視景400內之靜態內容會配合飛行路徑 420 —起移動。 第5圖描繪可使用各個影像之影像內容及相關的元資 料而繪製用於影像之浸沒式3D環境及若干影像顯示特性 的實施例。若干特性係藉由特定用語或標記而表示於下 文。選擇性地,可施加其他的標記至下文所述之各個例示 的顯示特性。 再者,在下文敘述成使用"視訊內容"之特性亦可使用 相片特性》當其中使用視訊內容於該處以描繪特性時,熟 習本項技藝之該等人士應瞭解的是,視訊內容包含複數個 視訊訊框,而各個視訊訊框係與相片相似。因此,可將相 片的聚集使用於下文所述之特性中,亦即,討論例示實施 例中之顯示視訊資料的特性中》 特性5 0 1係繪製影像使得每個像素被繪製於其之適當 空間位置的視訊/相片全景顯示特性。在一實施例中,視 訊內容係藉由以其中顯示可自視點目視之每個像素且排除 冗餘資訊之方式來縫補"連續”視訊訊框在一起而被總結且 顯示。關於視訊內容’在一實施例中,連續的視訊訊框可 縫補在一起而成爲全景視景’使得在視訊中之可視的每個 像素將被繪製於其適當的空間位置中。假定在視點中有視 -14- 201118792 訊捕捉裝置的任何移動時,該全景視景將比單一的視訊訊 框大。在一實施例中,相片全景顯示特性係以相似方式而 繪製,其中連續的相片係"縫補"在一起。非連續的相片可 以以第2圖中所描繪的實施例之參考元件204及206的相 似方式而顯示。 操縱成爲視訊訊框之聚集的視訊內容於各個訊框造成 大量的冗餘內容。在影像之聚集中的冗餘資訊可藉由統計 技術來加以濾除,該等統計技術包含,但未受限於,跨越 多重訊框以計算符合靜態背景、結合冗餘資訊以降低影像 捕捉裝置(例如,相機)雜訊、及視訊超解析度以增加超出 原始解析度之上的全景解析度之統計計量。在一實施例 中,繪製之視訊/相片影像的全景50 1係顯示成爲包含視 訊/相片影像內容之扁平的壁紙型式之全景。在另一實施 例中,3 D取向元資料係可用於每個視訊或相片影像,且 因此,繪製之內容可被使用以產生其中全景係翹曲且映像 至3D空間中的平面上之3D表示。在一實施例中,全景 的初始視點係視訊/相片擷取期間之相機位置及取向的估 計。 在一實施例中,在最低影像解析度之下所捕捉的相片 或視訊決定繪製之全景的解析度。在另一實施例中,係使 用本項技藝中所熟知之用以增加相片及視訊解析度的方 法,而盡可能以最高的解析度來繪製全景。 特性502提供影像內容之額外側(例如,相反側)的繪 製。在一實施例中,繪製物件之相反側允許觀看者移動其 -15- 201118792 顯示的,,視點"至該內容之內的物件相反側。例如’繪製影 像內容之額外側可允許觀看者觀看到實際建物或結構之真 實空間關係中之建物或結構的多重面。注意的是’如上文 所陳述地,該相片或視訊內容無需包含重疊的影像內容一 例如,可使用地理定位之元資料以合適地配置適當的影像 資料。 特性503提供繪製視訊或"移動影像"之重放於所繪製 的全景之內,藉以顯示"全景錄影"。雖然下文之實例使用 視訊資料以描繪此特性,但任何類型之"移動"影像繪製 (例如,具有鳥410a至410c "飛翔"穿過顯示400之第4 圖的例示實施例)可由此特性所使用。 如上述地,特性5 0 1可製作視訊內容之靜態3 D空間 表示;然而,處理該視訊內容成爲訊框之聚集以及將它們 "縫補"在一起會失去各個訊框的時間關係。特性5 0 3可顯 示視訊內容成爲”全景錄影"-視訊之混合空間一時間顯 示,其中時間變化之資訊係繪製於藉由特性5 0 1所繪製的 視訊全景之內。此特性允許同時繪製的資訊跨越空間及時 間顯示。在一實施例中,視訊資料可以以重放全部視訊 (以及透過其廻旋)之預設模式來予以自動地顯示。在另一 實施例中’視訊內容可經由使用者介面而被控制(例如, 在全景之內所顯示之"時間滑尺"條)。 在一實施例中,"全景錄影"包含製作特性50 1中所述 之靜態全景顯示,以及以視訊內容的訊框速率來顯示視訊 內容於全景內之適當空間位置處(由地理定位資料所決定) -16- 201118792 的靜態全景之內。此產生觀看到全景內之涵蓋視訊內容的 整個空間延伸之視訊的功效。此將使觀看者經歷出現在視 訊中的不同時間之"靜態"內容的人造”週邊視覺",且同時 即時地聚焦在"移動的"動作之上。 在另一實施例中,"全景錄影"包含顯示同時發生在全 景內之不同位置中的視訊內容於該全景的個別位置內。此 產生跨越整個全景的同時動作之功效,其中,不同位置之 "移動"影像對應於視訊內的不同時間窗口。 在另一實施例中,若靜態全景顯示係藉由提取靜態背 景像素而產生時,則對應於移動物件之像素可經由統計技 術加以識別。例如,不同於顯示全部的視訊訊框於全景之 內,也可在適當的時間只將分段的前景像素顯示於全景之 內(亦即,視訊之時間上的準確顯示),藉以產生個別物件 跨越全景之移動而無需顯示全部視訊訊框之輪廓的功效。 特性504允許全景內之區域的相片/視訊內容對齊及 顯示。此特性提供觀看者具有對某些全景區域變焦以顯現 既有之更高解析度相片或視訊內容的能力。在一實施例 中,一旦變焦位準超過全景解析度時,變焦係藉由在視訊 與相片之間平滑地調和而達成。在另一實施例中,可將相 片對齊且集成至全景之內,以置換涵蓋區域中之全景的前 —所繪製的部分。 特性505允許根據影像捕捉裝置的地理定位及3D取 向之相片及視訊內容的顯示。多重重疊之相片可幾何地對 齊成無縫補綴的相片,且以它們的絕對位置和相對取向而 -17- 201118792
顯示。此產生以相對彼此互相不同的相片來描繪內容的幾 何位置之3D相片全景。如上文在第2圖中所敘述地,由 於相關聯的元資料(例如,地理定位之元資料,額外的3D 取向元資料)’所以以不具有重疊資料之相當少的相片之 此顯示係可行的。 特性506允許所繪製的視訊全景內之所有視訊及相片 的同時顯示’以產生由該等視訊及相片的內容所涵蓋之空 間資訊的無縫3 D視景。此允許在某一位置所拍攝之所有 相片及視訊內容的便利綜覽。相片及視訊資料可包含用於 各個項目’或無縫地混合於繪製的全景之內的可見訊框。 因此,該繪製之全景顯示可包含靜態及移動之內容。 特性507使用相片/視訊之相關聯的元資料,以顯示 捕捉該等相片/視訊之影像捕捉裝置的路徑,亦即,使用 者拍攝之路徑。在一實施例中,使用者拍攝的全部路徑係 根據連續記錄之GPS資料而顯示。在另一實施例中,係 顯示估計之路徑,且經由圖像507a至507c以強調GPS 事件資料(例如,僅爲捕捉相片影像時才被記錄之GPS元 資料)。在另一實施例中,所顯示之路徑可使用相關之3 D 取向元資料及所顯示的相片/視訊之內容’而以與影像捕 捉裝置捕捉相關之相片或視訊資料之相同的速度及位置來 回移動。 可使用所顯示之路徑以瀏覽繪製之相片/視訊聚集。 在一實施例中,由特性507所產生之顯示路徑允許觀看者 藉由跟隨沿著捕捉影像之路徑’或藉由沿著路徑點擊圖像 -18- 201118792 507a至507c,而瀏覽相片/視訊聚集。在一實施例中,經 由繪製之路徑的顯示係由使用者介面手動地控制。在另一 實施例中,繪製之路徑係依據相關之3D取向元資料而被 進行,且聚集係根據時間元資·料以一速度觀看。 特性5 0 8允許由特性5 0 3所製作之任何繪製的全景錄 影顯示於可用的地形資料上。在一實施例中,地形資料係 使用以顯示依據內容之3D拓撲學所繪製的相片或視訊聚 集。地形資料可根據影像內容及相關的3 D取向元資料而 決定。而且’除了相關的影像元資料之外,可提供地形資 料。 特性5 09允許繪製的影像及視訊全景依據位置及/或 時間而被組群,以便促進大型資料組之管理及調查。例 如,觀看者會想觀看不同時間在相同位置處所拍攝的所有 相片及視訊。在該情況中,將獲得該位置之密集的空間範 圍。在另一實施例中,相片及視訊係依據時間資料而顯 示’因此’來自各種位置的全景係根據所繪製之相片及/ 或視訊被捕捉的時間而顯示於使用者。 特性510允許內容依據3D分段而顯示。影像及相片 資料可以以相關聯的3 D取向元資料來繪製,以產生顯 示’使得例如移動像素係以3 D顯示,以準確地顯示移動 內容的空間性質。 除了上述特性之外,影像及視訊聚集可以以附帶於該 等相片及視訊聚集的文本、聲頻、及視訊資訊來加以增 大。 -19- 201118792 第6圖描繪爲顯示依據本發明實施 視訊內容之使用者介面的實施例。使用 張相片之繪製聚集的攝影顯示之實例。 根據相關聯的3 D取向元資料而結合成 60 1至608包含重疊的內容,以及相片 疊的內容。相片聚集係受限於其中具有 捕捉之區域(亦即,影像6 1 1與6 0 1 I 此,顯示係不連續的;然而,相片611 彼此相互準確的空間關係而配置。 如上文在描述第5圖中之特性507 繪製3D取向元資料以提供一路徑,其 片之處所以及拍攝它們的時間。此繪製 像捕捉裝置的路徑(亦即,使用者拍攝白 切換於位置之間,以瀏覽該聚集,且進 隨空間及時間而變地瀏覽相片聚集。 地圖620顯示此特殊子集之影像如 定的空間位置(在第6圖中,影像601 班牙一此係由位置點690所表示)。在 視景的視點位置係顯示成爲資料640 » 於時間條圖6 8 0之中。 其他的相片聚集係總結於UI6 00中 之內。注意的是,相片聚集60 1至611 示,例如該圖像係顯示爲比圖像62 1至 對於相片聚集601至611的資訊可顯开 例所繪製的相片及 者介面600係十~ 相片601至61 1係 爲3D視覺。相片 609至61 1包含重 未由該相片聚集所 匕間的空缺),且因 及601的內容仍以 中所提及地,亦可 中描述拍攝該等相 允許觀看者隨著影 勺路徑),或隨機地 一步地允許觀看者 何在地球上分開特 至6 1 1係拍攝於西 UI600內之所繪製 時間元資料係顯示 的圖像621至623 係由圖像6 3 0所表 623大。再者,相 :於UI內而成爲資 -20- 201118792 訊631。在一實施例中,係使用影像相關之元資料以顯示 聚集中之相片數目 '所拍攝之該等相片的時間跨距、以及 相片聚集的中央位置。 可使用所有相片聚集之元資料以產生相片聚集總結 68 0。該相片聚集總結可告知觀看者整個聚集之內的相片 數目、該等相片的時間跨距、以及聚集或”群集"的數目。 觀看者可選擇藉由虛擬地飛過3D空間,點擊聚集變 焦放大及縮小,或類似者,以躍遷穿過"群集"。在一實施 例中,可使用附帶於相片聚集的影像資料(例如,任何可 用的地圖或地形之影像資料)來繪製地圖620上之與"群集 ”之內容無關的區域。在另一實施例中,觀看者可選擇特 定的時間跨距,且UI600將顯示影像之對應的時間群集。 在又一實施例中,空間及時間二者的選用配備係關係的。 因此,聚焦在特定的時間跨距之上(例如,在時間條圖上 移動圖像)會自動地引起導航至空間中之適當位置及區 域,且點擊在地圖620的區域上會引起導航至適當時間分 類之群集。 除了提供用以瀏覽個人相片聚集的直覺方式之外, UI600具有藉由透過對齊以去除重疊相片區域之冗餘的自 動總結功效,以取代顯示大量的個別縮圖。例如,在一實 施例中,相片6 0 1至6 1 1係以相同的解析度捕捉;然而, 相片601至61 1係根據各個個別影像的重疊內容及相關的 3D取向元資料而以各式各樣之形狀及取向來顯示。在空 間及時間中的群集可透過影像及相關元資料的群集效應而 -21 - 201118792 自動地產生。 除了本文中所敘述之外,可對本發明所揭示之實施例 及實施作成各式各樣的修正,而不會背離它們的範疇。因 此,本文中之圖繪及實例應以描繪性,且非以限制性的觀 念來予以闡釋。本發明之範疇應僅藉由參考下文之申請專 利範圍來加以判定。 本文中所敘述之所謂處理,伺服器,或工具的各式各 樣之組件可爲用以執行所述功能的裝置。在此所述之各個 組件包含軟體或硬體,或它們的組合。該等組件可實施成 爲軟體模組,硬體模組,特殊目的之硬體(例如,應用特 定硬體,應用特定積體電路(ASIC),數位信號處理器 (DSP),等等),嵌入式控制器,硬佈線電路,等等。軟體 內容(例如,資料,指令,組態)可經由包含電腦儲存可讀 取媒體之製造物品以提供,該電腦可讀取儲存媒體提供代 表可被執行之指令的內容。該內容可導致電腦執行本文中 所述之各式各樣的功能/操作。電腦可讀取儲存媒體包含 以電腦(例如,計算裝置,電子系統,等等)可存取之形式 來提供(亦即,儲存及/或傳送)資訊的任何機制,諸如可記 錄式/不可記錄式媒體(例如,僅讀記憶體(ROM),隨機存 取記億體(RAM),磁碟儲存媒體,光學儲存媒體,快閃記 憶體裝置,等等)。該內容可爲可直接執行的(”物件''或''可 執行的"形式),源代碼,或相差碼(”開源"或”插入”代 碼)。電腦可讀取儲存媒體亦可包含可自其下載內容之貯 存器或資料庫。電腦可讀取儲存媒體亦可包含在販售或運 -22- 201118792 送時已將內容儲存於其上之裝置或產品。因此,運送具有 儲存之內容的裝置,或在通訊媒體上提供用於下載之內容 可理解爲提供具有本文中所述之該內容的製造物品》 【圖式簡單說明】 本發明之詳細說明包含圖式之討論,該等圖式具有利 用本發明實施例之實施實例所給定的圖繪。該等圖式應被 理解爲實例,且非爲限制。如此處所使用地,針對一或更 多個"實施例"之提及應被瞭解爲敘述本發明之至少一實施 例中所包含之特定的特性、結構、或特徵。因此,在此所 呈現之諸如"在一實施例中"或"在選擇性的實施例中"之用 語將描述本發明之各式各樣的實施例和實施,而無需全部 述及同一實施例。而且,它們亦無需—定要相互排斥。 第1圖係依據本發明實施例之繪製及顯示影像資料的 系統或設備之方塊圖; 第2圖係由繪製裝置所產生之影像聚集的視景之圖 式; 第3圖係用以根據所接收之影像及元資料來產生視景 的方法實施例之流程圖; 第4圖描繪包含在一所繪視景內”移動”影像之聚集的 非靜態內容之視景的實例; 第5圖描繪可被繪製用於影像之浸沒式3D環境及若 干影像顯示特性的實施例:以及 第6圖描繪顯示繪製之相片及視訊內容的使用者介面 -23- 201118792 之實施例。 【主要元件符號說明】 1 0 0 :系統或設備 1 〇 1 :資料儲存器 102 :影像捕捉裝置 103 :繪製裝置 1 04,400 :顯示器 201 〜203,204,206,401 〜405:影像 200,400 :視景 2 0 5 :間隔 2 1 0 :視點 2 5 0 : 3 D 之 x,y,及 z 軸 301〜306:動作 41 1,412 :樹 4 1 3 :雲 410a〜410c:移動物件 420 :飛行路徑 501 ~ 5 10 :特性 507a〜507c,621〜623:圖像 600 :使用者介面(UI) 601〜61 1 :相片(影像) 620 :地圖 6 9 0 :位置點 -24- 201118792 6 8 0 :時間條圖 6 3 1 :資訊 -25

Claims (1)

  1. 201118792 七、申請專利範圍 1. 一種方法,包含: 接收第一影像和與該第一影像相關聯的第一元資料’ 該第一影像係經由影像捕捉裝置以捕捉且該第一元資料包 含該第一影像的內容之地理資訊; 接收第二影像和與該第二影像相關聯的第二元資料, 該第二元資料包含該第二影像的內容之地理資訊; 決定該第一影像之視點,該視點表示當捕捉該第一影 像時之該影像捕捉裝置的位置和取向;以及 產生包含該第一影像及該第二影像之視景,其中 在該.視景中之該第一影像的配置係根據該第一元 資料和該第一影像之該視點,且 相對於該第一影像之該第二影像的配置係根據該 第一及第二元資料和該第一影像之該視點。 2 ·如申請專利範圍第丨項之方法,其中該視景進— 步包含三維(3D)之視景。 3·如申請專利範圍第1項之方法,其中該第一及第 二元資料包含該等個別之第一及第二影像的該等內容之磁 場資訊。 4·如申請專利範圍第1項之方法,其中該第一及第 二元資料包含該等個別之第一及第二影像的該等內容之空 間資訊。 5·如申請專利範圍第1項之方法,其中該第—及第 二兀資料包含該等個別之第一及第二影像的該等內容之時 -26- 201118792 間資訊。 6. 如申請專利範圍第5項之方法,進一步包 該第一及第二影像的靜態內容和移動內容。 7. 如申請專利範圍第6項之方法,其中該第 二影像之該等移動內容係根據該等個別之第一及第 的該等時間資訊,而顯示於該視景之內》 8· —種設備,包含: 資料儲存器,其包含 第一影像和與該第一影像相關聯的第一元 該第一影像係經由影像捕捉裝置以捕捉且該第一元 含該第一影像的內容之地理資訊; 第二影像和與該第二影像相關聯的第二元 該第二元資料包含該第二影像的內容之地理資訊; 繪製模組’係操作地耦接至該資料儲存器,以 第一及第二影像和該第一及第二元資料,該繪製模 決定該第一影像之視點,該視點表示當捕 一影像時之該影像捕捉裝置的位置和取向,且 產生包含該第一影像及該第二影像之視景 在該視景中之該第一影像的配置係根據該第一元資 第一影像之該視點,且相對於該第一影像之該第二 配置係根據該第一及第二元資料和該第一影像之該 以及 顯示器’係操作地耦接至該繪製模組,以存取 該產生之視景。 含決定 一及第 二影像 資料, 資料包 資料, 存取該 組 捉該第 ,其中 料和該 影像的 視點; 及顯示 -27- 201118792 9 ·如申請專利範圍第8項之設備 步包含3維(3D)之視景。 1〇·如申請專利範圍第8項之設備 二元資料包含該等個別之第—及第二影 場資訊。 1 1 ·如申請專利範圍第8項之設備 一元資料包含該等個別之第一及第二影 間資訊。 1 2·如申請專利範圍第8項之設備 二元資料包含該等個別之第一及第二影 間資訊。 1 3 ·如申請專利範圍第1 2項之設 第二影像係繪製以決定各影像的靜態內 14. 如申請專利範圍第13項之設 該等移動內容係依據該等個別之第—及 內容的該等時間資訊,而顯示於該視景 15. —種製造之物品,包含電腦可 該電腦可讀取式儲存媒體具有儲存於其 令’而使電腦執行包含以下之操作:· 決定第一影像之視點,該第一影像 置以捕捉’該視點表示當捕捉該第一影 裝置的位置和取向;以及 產生包含該第一影像及第二影像之 在該視景中之該第一影像的配 ’其中該視景進一 ’其中該第一及第 像的該等內容之磁 ’其中該第一及第 像的該等內容之空 ’其中該第一及第 像的該等內容之時 備,其中該第一及 容和移動內容。 備,其中各影像之 第二影像的該移動 之內。 讀取式儲存媒體, 上的內容以提供指 係經由影像捕捉裝 像時之該影像捕捉 視景,其中 置係根據與該第一 -28- 201118792 影像相關聯的第一元資料和該第—影像之該視點’該第〜 元資料包含該第一影像的內容之地理資訊’且 相對於該第一影像之該第二影像的配置係根據該 第一元資料、該第一影像之該視點、及與該第二影像相關 聯的第二元資料,該第二元資料包含該第二影像的內容之 地理資訊。 16.如申請專利範圍第15項的製造之物品’其中該 第一及第二元資料包含該等個別之第一及第二影像的該等 內容之磁場資訊。 1 7.如申請專利範圍第1 5項的製造之物品’其中該 第一及第二元資料包含該等個別之第一及第二影像的該等 內容之空間資訊。 1 8 .如申請專利範圍第1 5項的製造之物品,其中該 第一及第二元資料包含該等個別之第一及第二影像的該等 內容之時間資訊。 1 9.如申請專利範圍第1 8項的製造之物品,其中該 第一及第二影像係繪製以決定各影像的靜態內容和移動內 容》 20.如申請專利範圍第1 9項的製造之物品,其中各 影像之該等移動內容係依據該等個別之第一及第二影像的 該移動內容之該等時間資訊,而顯示於該視景之內。 -29-
TW099109404A 2009-03-31 2010-03-29 根據相關元資料之數位影像的捕捉與顯示 TWI457854B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/416,040 US8862987B2 (en) 2009-03-31 2009-03-31 Capture and display of digital images based on related metadata

Publications (2)

Publication Number Publication Date
TW201118792A true TW201118792A (en) 2011-06-01
TWI457854B TWI457854B (zh) 2014-10-21

Family

ID=42785844

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099109404A TWI457854B (zh) 2009-03-31 2010-03-29 根據相關元資料之數位影像的捕捉與顯示

Country Status (4)

Country Link
US (1) US8862987B2 (zh)
JP (1) JP5053404B2 (zh)
CN (1) CN101854560B (zh)
TW (1) TWI457854B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10141022B2 (en) 2013-07-10 2018-11-27 Htc Corporation Method and electronic device for generating multiple point of view video
US11431911B2 (en) 2017-10-19 2022-08-30 Sony Corporation Imaging device and signal processing device

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102474638B (zh) * 2009-07-27 2015-07-01 皇家飞利浦电子股份有限公司 组合3d视频与辅助数据
US8436891B2 (en) * 2009-09-16 2013-05-07 Disney Enterprises, Inc. Hyperlinked 3D video inserts for interactive television
US8531504B2 (en) 2010-06-11 2013-09-10 Intel Corporation System and method for 3D video stabilization by fusing orientation sensor readings and image alignment estimates
US20120002004A1 (en) * 2010-06-30 2012-01-05 Apple Inc. Immersive Navigation and Rendering of Dynamically Reassembled Panoramas
JP5672966B2 (ja) 2010-10-29 2015-02-18 株式会社デンソー 車両運動制御システム
US20120159326A1 (en) * 2010-12-16 2012-06-21 Microsoft Corporation Rich interactive saga creation
US20130106990A1 (en) 2011-11-01 2013-05-02 Microsoft Corporation Planar panorama imagery generation
US8612442B2 (en) 2011-11-16 2013-12-17 Google Inc. Displaying auto-generated facts about a music library
US10008021B2 (en) 2011-12-14 2018-06-26 Microsoft Technology Licensing, Llc Parallax compensation
US9406153B2 (en) 2011-12-14 2016-08-02 Microsoft Technology Licensing, Llc Point of interest (POI) data positioning in image
US9324184B2 (en) 2011-12-14 2016-04-26 Microsoft Technology Licensing, Llc Image three-dimensional (3D) modeling
SE1250048A1 (sv) * 2012-01-24 2013-07-25 Wesdyne Sweden Ab En bildförbättringsanordning för reduktion av brus i digitala bilder
US20130330019A1 (en) * 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Arrangement of image thumbnails in social image gallery
US20150156247A1 (en) * 2012-09-13 2015-06-04 Google Inc. Client-Side Bulk Uploader
GB2506411B (en) * 2012-09-28 2020-03-11 2D3 Ltd Determination of position from images and associated camera positions
US9311310B2 (en) * 2012-10-26 2016-04-12 Google Inc. System and method for grouping related photographs
US9933921B2 (en) 2013-03-13 2018-04-03 Google Technology Holdings LLC System and method for navigating a field of view within an interactive media-content item
US9886173B2 (en) 2013-03-15 2018-02-06 Ambient Consulting, LLC Content presentation and augmentation system and method
US9626365B2 (en) 2013-03-15 2017-04-18 Ambient Consulting, LLC Content clustering system and method
US9460057B2 (en) 2013-03-15 2016-10-04 Filmstrip, Inc. Theme-based media content generation system and method
US10365797B2 (en) 2013-03-15 2019-07-30 Ambient Consulting, LLC Group membership content presentation and augmentation system and method
US10674075B2 (en) * 2013-04-30 2020-06-02 Sony Corporation Image processing device, image processing method, and program
US20140354768A1 (en) * 2013-05-30 2014-12-04 Microsoft Corporation Socialized Mobile Photography
US9686466B1 (en) * 2013-06-27 2017-06-20 Google Inc. Systems and methods for environment content sharing
TWI535282B (zh) * 2013-07-10 2016-05-21 宏達國際電子股份有限公司 用於產生多視點視訊的方法和電子裝置
WO2015013145A2 (en) * 2013-07-19 2015-01-29 Google Inc. View-driven consumption of frameless media
US9766786B2 (en) 2013-07-19 2017-09-19 Google Technology Holdings LLC Visual storytelling on a mobile media-consumption device
EP3022934A1 (en) 2013-07-19 2016-05-25 Google Technology Holdings LLC Small-screen movie-watching using a viewport
US10430015B2 (en) * 2013-08-09 2019-10-01 International Business Machines Corporation Image analysis
US20150106373A1 (en) * 2013-10-15 2015-04-16 Indooratlas Oy Generating search database based on earth's magnetic field measurements
US20150106403A1 (en) * 2013-10-15 2015-04-16 Indooratlas Oy Generating search database based on sensor measurements
US10242400B1 (en) 2013-10-25 2019-03-26 Appliance Computing III, Inc. User interface for image-based rendering of virtual tours
US9691133B1 (en) 2013-12-16 2017-06-27 Pixelworks, Inc. Noise reduction with multi-frame super resolution
US9851868B2 (en) 2014-07-23 2017-12-26 Google Llc Multi-story visual experience
US10341731B2 (en) 2014-08-21 2019-07-02 Google Llc View-selection feedback for a visual experience
US9824481B2 (en) 2014-12-30 2017-11-21 Qualcomm Incorporated Maintaining heatmaps using tagged visual data
US10582105B2 (en) 2014-12-30 2020-03-03 Qualcomm Incorporated Changing camera parameters based on wireless signal information
US10298827B2 (en) 2015-10-13 2019-05-21 Huawei Technologies Co., Ltd. Shooting method and mobile device
WO2017218834A1 (en) 2016-06-17 2017-12-21 Kerstein Dustin System and method for capturing and viewing panoramic images having motion parralax depth perception without images stitching
CN106210535A (zh) * 2016-07-29 2016-12-07 北京疯景科技有限公司 全景视频实时拼接方法及装置
KR102630681B1 (ko) * 2016-10-11 2024-01-30 삼성전자주식회사 디스플레이 장치 및 캡처 이미지 생성 방법
US10332317B2 (en) 2016-10-25 2019-06-25 Microsoft Technology Licensing, Llc Virtual reality and cross-device experiences
US20180157717A1 (en) * 2016-12-02 2018-06-07 William James Yurt PhotoFracking - mining metadata from various / multiple sources to recreate an event, person, place or thing in time
TWI632812B (zh) * 2016-12-16 2018-08-11 財團法人工業技術研究院 視訊串流之接合與傳輸方法、視訊串流閘道裝置及視訊串流觀看裝置
US10242503B2 (en) 2017-01-09 2019-03-26 Snap Inc. Surface aware lens
US10628959B2 (en) 2017-05-03 2020-04-21 International Business Machines Corporation Location determination using street view images
US10861359B2 (en) * 2017-05-16 2020-12-08 Texas Instruments Incorporated Surround-view with seamless transition to 3D view system and method
US20190130526A1 (en) * 2017-10-27 2019-05-02 Avago Technologies General Ip (Singapore) Pte. Ltd. Metadata based quality enhancement post-video warping
WO2020027349A1 (ko) * 2018-07-31 2020-02-06 엘지전자 주식회사 다중 뷰포인트 기반 360 비디오 처리 방법 및 그 장치
US11030813B2 (en) * 2018-08-30 2021-06-08 Snap Inc. Video clip object tracking
US11176737B2 (en) 2018-11-27 2021-11-16 Snap Inc. Textured mesh building
US11501499B2 (en) 2018-12-20 2022-11-15 Snap Inc. Virtual surface modification
US11783443B2 (en) 2019-01-22 2023-10-10 Fyusion, Inc. Extraction of standardized images from a single view or multi-view capture
US11176704B2 (en) 2019-01-22 2021-11-16 Fyusion, Inc. Object pose estimation in visual data
US10949978B2 (en) * 2019-01-22 2021-03-16 Fyusion, Inc. Automatic background replacement for single-image and multi-view captures
US10887582B2 (en) 2019-01-22 2021-01-05 Fyusion, Inc. Object damage aggregation
US10984575B2 (en) 2019-02-06 2021-04-20 Snap Inc. Body pose estimation
US11763503B2 (en) * 2019-02-25 2023-09-19 Life Impact Solutions Media alteration based on variable geolocation metadata
US11189098B2 (en) 2019-06-28 2021-11-30 Snap Inc. 3D object camera customization system
US11232646B2 (en) 2019-09-06 2022-01-25 Snap Inc. Context-based virtual object rendering
US11263817B1 (en) 2019-12-19 2022-03-01 Snap Inc. 3D captions with face tracking
US11227442B1 (en) 2019-12-19 2022-01-18 Snap Inc. 3D captions with semantic graphical elements
US11776142B2 (en) 2020-01-16 2023-10-03 Fyusion, Inc. Structuring visual data
US11562474B2 (en) 2020-01-16 2023-01-24 Fyusion, Inc. Mobile multi-camera multi-view capture
US11660022B2 (en) 2020-10-27 2023-05-30 Snap Inc. Adaptive skeletal joint smoothing
US11615592B2 (en) 2020-10-27 2023-03-28 Snap Inc. Side-by-side character animation from realtime 3D body motion capture
US11748931B2 (en) 2020-11-18 2023-09-05 Snap Inc. Body animation sharing and remixing
US11734894B2 (en) 2020-11-18 2023-08-22 Snap Inc. Real-time motion transfer for prosthetic limbs
US11450051B2 (en) 2020-11-18 2022-09-20 Snap Inc. Personalized avatar real-time motion capture
US11605151B2 (en) 2021-03-02 2023-03-14 Fyusion, Inc. Vehicle undercarriage imaging
US11831988B2 (en) 2021-08-09 2023-11-28 Rockwell Collins, Inc. Synthetic georeferenced wide-field of view imaging system
US11880947B2 (en) 2021-12-21 2024-01-23 Snap Inc. Real-time upper-body garment exchange

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6278466B1 (en) * 1998-06-11 2001-08-21 Presenter.Com, Inc. Creating animation from a video
CN1305620A (zh) * 1998-06-11 2001-07-25 普里赞特.Com 自视频产生动画的方法
JP3605292B2 (ja) 1998-06-30 2004-12-22 株式会社兼古製作所 ビス,ネジ等の螺入部材を回動させる為の補助具
US7292261B1 (en) * 1999-08-20 2007-11-06 Patrick Teo Virtual reality camera
US6798897B1 (en) * 1999-09-05 2004-09-28 Protrack Ltd. Real time image registration, motion detection and background replacement using discrete local motion estimation
US7522186B2 (en) 2000-03-07 2009-04-21 L-3 Communications Corporation Method and apparatus for providing immersive surveillance
JP2002209208A (ja) * 2001-01-11 2002-07-26 Mixed Reality Systems Laboratory Inc 画像処理装置及びその方法並びに記憶媒体
JP3838150B2 (ja) * 2002-05-02 2006-10-25 ソニー株式会社 モニタリングシステムおよび方法並びにプログラムおよび記録媒体
DE60320169T2 (de) * 2002-05-02 2009-04-09 Sony Corp. Überwachungssystem und Verfahren sowie zugehöriges Programm- und Aufzeichnungsmedium
JP4048907B2 (ja) * 2002-10-15 2008-02-20 セイコーエプソン株式会社 複数の画像データのパノラマ合成
JP4127178B2 (ja) * 2003-10-06 2008-07-30 セイコーエプソン株式会社 複数画像のレイアウト処理
JP2005277670A (ja) * 2004-03-24 2005-10-06 Hiroo Iwata 全方位映像作成装置、地図連動全方位映像記録・表示装置及び地図連動全方位映像利用装置
US20070070069A1 (en) * 2005-09-26 2007-03-29 Supun Samarasekera System and method for enhanced situation awareness and visualization of environments
CN101366027B (zh) 2005-11-15 2013-03-20 耶路撒冷希伯来大学伊森姆研究发展公司 用于产生视频概要的方法和系统
JP4332525B2 (ja) 2005-12-16 2009-09-16 ソフトバンクモバイル株式会社 移動体通信端末
JP4889351B2 (ja) * 2006-04-06 2012-03-07 株式会社トプコン 画像処理装置及びその処理方法
US9069957B2 (en) 2006-10-06 2015-06-30 Juniper Networks, Inc. System and method of reporting and visualizing malware on mobile networks
US8094182B2 (en) * 2006-11-16 2012-01-10 Imove, Inc. Distributed video sensor panoramic imaging system
WO2008073109A1 (en) * 2006-12-15 2008-06-19 Thomson Licensing System and method for interactive visual effects compositing
US20080278481A1 (en) * 2007-05-08 2008-11-13 Microsoft Corporation Photo generated 3-d navigable storefront
US7843451B2 (en) * 2007-05-25 2010-11-30 Google Inc. Efficient rendering of panoramic images, and applications thereof
JP2009015583A (ja) * 2007-07-04 2009-01-22 Nagasaki Univ 画像処理装置及び画像処理方法
JP5097480B2 (ja) * 2007-08-29 2012-12-12 株式会社トプコン 画像測定装置
EP2253131B1 (en) * 2008-02-08 2014-06-25 Google, Inc. Panoramic camera with multiple image sensors using timed shutters
US8103134B2 (en) * 2008-02-20 2012-01-24 Samsung Electronics Co., Ltd. Method and a handheld device for capturing motion

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10141022B2 (en) 2013-07-10 2018-11-27 Htc Corporation Method and electronic device for generating multiple point of view video
US11431911B2 (en) 2017-10-19 2022-08-30 Sony Corporation Imaging device and signal processing device

Also Published As

Publication number Publication date
US20100251101A1 (en) 2010-09-30
CN101854560A (zh) 2010-10-06
CN101854560B (zh) 2012-12-05
JP5053404B2 (ja) 2012-10-17
TWI457854B (zh) 2014-10-21
US8862987B2 (en) 2014-10-14
JP2010244534A (ja) 2010-10-28

Similar Documents

Publication Publication Date Title
TWI457854B (zh) 根據相關元資料之數位影像的捕捉與顯示
US10367997B2 (en) Enriched digital photographs
US8584015B2 (en) Presenting media content items using geographical data
CA2722924C (en) 3d content aggregation built into devices
KR101688753B1 (ko) 관련된 사진들의 그룹화
JP5769813B2 (ja) 画像生成装置および画像生成方法
US8542255B2 (en) Associating media content items with geographical data
WO2018157464A1 (zh) 一种图像显示方法及电子设备
TW200921555A (en) Map information display apparatus, map information display method, and program
WO2017032336A1 (en) System and method for capturing and displaying images
BRPI0806239A2 (pt) aparelhos de processamento de imagem e de reprodução de imagem em movimento, método de processamento de imagem em um aparelho de processamento de imagem, e, programa em um aparelho de processamento de imagem
CN102693677A (zh) 信息处理设备、信息显示方法及计算机程序
KR20160087573A (ko) 원본 컨텐츠와 연계된 편집 영상의 생성 및 디스플레이
CN112740261A (zh) 全景光场捕获、处理和显示
JP2007078842A (ja) 表示制御装置及び表示制御方法
Zhang et al. Annotating and navigating tourist videos
Tompkin et al. Video collections in panoramic contexts
WO2017022296A1 (ja) 情報管理装置及び情報管理方法、並びに映像再生装置及び映像再生方法
JP2006270940A (ja) 電子アルバム編集システム、電子アルバム編集方法、及び電子アルバム編集プログラム
JP2007259002A (ja) 画像再生装置ならびにその制御方法およびその制御プログラム
JP5695493B2 (ja) マルチ映像再生装置及びマルチ映像再生方法
JP6302421B2 (ja) コンテンツ検索装置、コンテンツ検索方法、コンテンツ格納装置およびコンテンツ格納方法
KR102204721B1 (ko) 증강현실 기록물 서비스 제공 방법 및 사용자 단말
KR101934799B1 (ko) 파노라마 영상을 이용하여 새로운 컨텐츠를 생성하는 방법 및 시스템
JP2013120477A (ja) 画像表示装置、画像表示方法、及びプログラム

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent
MM4A Annulment or lapse of patent due to non-payment of fees