TW201203170A - Information processing device, information processing system, and program - Google Patents

Information processing device, information processing system, and program Download PDF

Info

Publication number
TW201203170A
TW201203170A TW100115656A TW100115656A TW201203170A TW 201203170 A TW201203170 A TW 201203170A TW 100115656 A TW100115656 A TW 100115656A TW 100115656 A TW100115656 A TW 100115656A TW 201203170 A TW201203170 A TW 201203170A
Authority
TW
Taiwan
Prior art keywords
information
tag
view
image data
label
Prior art date
Application number
TW100115656A
Other languages
English (en)
Inventor
Tatsuya Igarashi
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201203170A publication Critical patent/TW201203170A/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/487Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/787Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/004Annotating, labelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Environmental Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Ecology (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

201203170 六、發明說明: 【發明所屬之技術領域】 本發明係關於資訊處理器件、資訊處理系統,及程式。 【先前技術】 藉由使用文字或其類似者將關於拍攝位置之資訊疊印於 由相機所擷取之視訊上而增強現實世界活動的技術自20世 紀90年代初已被迅速地研究並發展為增強之現實(AR),且 使用頭戴式顯示器之AR已部分地開始實際用於軍事目 的。 最近’ AR已藉由如下終端機器件而實現:具有相機及 伴隨有小型電子器件之高效能的全球定位系統(GPS)之功 能。在AR之此實例中,使用者能夠使用ar技術添加文字 至真貫視訊並經由網路將所添加之文字資訊提供給其他使 用者。如上文所描述,AR用作一類型之通信工具以及用 於資訊供應之實際目的。作為關於AR之技術,例如,存 在專利文獻1之景觀標示系統。 專利文獻1之景觀標示系統疊印與視訊中基於地球之三 維空間座標上所展示的結構之位置相關聯的標籤。因此, 此在標籤上所展示之資訊為與標籤相關聯之結構的名稱或 其類似者時係非常合適的。 引文清單 專利文獻 PTL1:曰本專利第3225882號 【發明内容】 153600.doc 201203170 技術問題 然而’僅在藉由使用者希望共用為標籤的資訊中之預定 拍攝條件自摘取視訊所在之位置及擷取視訊所在之方位所 觀察的視訊中存在有意義之資訊。共用上述資訊之方法在 相關技術中未考慮且可能係必要的。 依據前述内容,需要提供可使用與所擷取視訊之視場空 間上的座標相關聯之標籤的新穎及改良之資訊處理器件、 資訊處理系統及程式。 問題之解決方案 本發明之一實施例係針對一種資訊處理裝置,其包括: 一獲取單元’其經組態以獲取對應於榻取影像資料之一成 像器件之一位置的第一資訊’及對應於擷取該影像資料之 該成像器件之一視場的第二資訊;及一處理器,其經組態 以基於該第一資訊及該第二資訊產生標籤資訊。 該標籤資訊可包括如下視點資訊:包括對應於該成像器 件之一緯度及一經度的資訊、對應於該成像器件之一高度 的資訊,及指示包括於該標籤資訊_的對應於該成像器件 之位置資訊之一精度的誤差資訊中之一或多者。 該標籤資訊可包括如下視場資訊:包括對應於該成像器 件之一方位的資訊、對應於該成像器件之一視場角的資 訊,及對應於該所擷取之影像資料之一高度及一寬度的資 訊中之一或多者。 該標籤資訊可包括-資訊標藏,該資訊標藏包括對應於 在該成像器件與所擷取影像之一主題之間的一距離之資 I53600.doc
S -4 201203170 訊、識別該標籤待顯示於所顯示之影像資料上之一位置的 資訊,及待顯示於所顯示之影像資料上之—字元串中的一 或多者。 本發明之另-實施例係針對一種資訊處理方法,其包 含獲取對應㈣取影像資料之—成像器件之-位置的第 -資訊;獲取對應於操取該影像資料之該成像器件之一視 場的第二資訊;及藉由—處理器基於該第—資訊及該第二 資訊產生標籤資訊。 本發明之另-實施例係、針對_種包括電腦程式指令之非 暫時性電腦可讀媒體,該等電腦程式指令在由—資訊處理 裝置執行時使該資訊處理裝置執行—方法,該方法包含: 獲取對應於擷取影像資料之一成像器件之一位置的第一資 訊;獲取對應於棟取該影像資料之該成像器件之—視場的 第二資訊;及基於該第-資訊及該第:資訊產生標藏資 訊。 本發明之另一實施例係針對一種資訊處理器件,其包 含:-S取單元’彡經組態以獲取對應於所再現之影像資 料之拍攝資訊;及-處理ϋ,其經組態以基於該拍攝資訊 與所儲存之標籤資訊的一比較而獲取標籤資訊,並基於該 比較之一結果將標籤資訊疊印於該所再現之影像資料上。 該拍攝資訊可包括對應於擷取該所再現之影像資料的一 成像器件之一位置的位置資訊,且該處理器可經組態以基 於該位置資訊與包括於該所儲存之標籤資訊中之位置資訊 的一比較而獲取該標籤資訊。 ° 153600.doc 201203170 該拍攝資訊可包括對應於擷取該所再現之影像資料的該 成像器件之一視場的視場資訊,且該處理器可經組態以基 於該視場資訊與包括於該所儲存之標籤資訊中之視場資訊 的一比較而獲取該標籤資訊。 該拍攝資訊可包括對應於在擷取該所再現之影像資料之 一成像器件與該所再現的影像資料之一主題之間的一距離 之範圍資訊。 該處理器可經組態以基於該範圍f訊與包括於該所儲存 之標籤資訊中之腳資訊的_比較而獲取該標籤資訊。 本發明之另一實施例係針對一種資訊處理方法,其包 含:獲取對應於所再現之料f料之拍攝f訊;基於該拍 攝資訊與儲存於記憶體中之標籤資訊的—比較而獲取標藏 資訊,及基於該比較之一社要脏 、,、°果將軚臧資訊疊印於該所再現 之影像資料上。 本發明之另-實施例係針對—種包括電腦程式指令之非 暫時性電腦可讀媒體’該等電腦程式指令在由一資訊處理 裝置執行時使該資訊處理裝置執行—方法,該方法包含: 獲取對應於所再現之影像資料之拍攝資訊;基於該拍=資 訊與儲存於記憶體中之標籤資訊的一比較而獲取標籤資 訊;及基於該比較之一結果將標鐵資訊疊印於該所 影像資料上。 本發明之有利效應
根據如上文所描述之本發明,Tfc- Afa IB 畀了此k供可使用與所擷 取視訊之視場空間上的座標相關聯之標籤的新穎及改良之 153600.doc 201203170 資訊處理器件、資訊處理系統及程式。 【實施方式】 現將參看所附圖式詳細描述本發明之較佳實施例。在本 說明書及圖式中,具有實質上相同之功能組態的元件係藉 .由相同參考數字來表示,且省略對其之冗餘描述。 按以下次序提供描述。 1.概述 2. 組態 3. 藉由關聯式資料庫之標籤資訊管理方法 4·藉由機碼-值(key_vaiue)類型資料儲存之標籤資訊管理 方法 5·效應之實例 6 ·應用實例 <1.概述> 首先,將使用圖1至圖3來描述根據本發明之實施例的資 訊處理系統10之概述》圖1為展示根據本發明之實施例的 資Λ處理系統1〇之概述的組態圖。圖2為展示記錄於成像 器件中之與拍攝有關的補充資訊之實例的表。圖3為展示 資訊處理系統1 〇之有利效應之實例的說明圖。 根據此實施例之資訊處理系統10具有:成像器件2〇〇, 其拍攝視訊内容;終端機器件300,其為用以回應於使用 者之操縱而接收指派標籤至自成像器件200所輸入之内容 3000的操縱或其類似者的資訊處理器件;具有標籤資訊產 生伺服器100之資料中心1000 ’標籤資訊產生伺服器1 〇〇為 153600.doc 201203170 用以產生標籤資訊的資訊處理器件,標籤資訊中的用於在 拍攝内容時指定視場空間之視場資訊添加至所指派標藏之 資訊,及再現器件400,其藉由使用由資料中心1000所管 理的h致資说將標藏疊印於視訊上而執行再現。經由網路 500分別連接資料中心1000内之每一器件、終端機器件3〇〇 及再現器件400。 在資料中心1000中,安裝用於提供移動影像共用服務之 伺服器群組《終端機器件300可將視訊内容上傳至視訊散 佈祠服器,該伺服器未展示於資料中心1〇〇〇内。再現器件 400可下載並再現自資料中心丨〇〇〇内之視訊散佈飼服器所 散佈的視訊内容。 使用者使用通用串列匯流排(USB)或其類似者將成像器 件200連接至終端機器件3〇〇,且藉由終端機器件3〇〇之應 用軟體接收來自成像器件200的視訊3〇〇〇之内容資料。此 時,終端機器件300接收視訊3〇〇〇之補充拍攝資訊連同視 讯3000之内容資料。使用者藉由終端機器件300上傳視訊 3000及視訊3000之補充拍攝資訊至資料肀心1〇〇〇内之視訊 散佈祠服器。使用者可藉由終端機3〇〇指派標籤6〇〇至視訊 3000 °使用者上傳由終端機器件3〇〇指派至視訊3〇〇〇的標 籤600之資訊(例如,標籤6〇〇在視訊上之位置、標籤6〇〇之 字元串資訊’及其類似者)至資料中心1〇〇〇内之標籤資訊 產生伺服器100。 此處,成像器件200具有(例如)Gps功能及電子羅盤功 旎,且可記錄位置資訊及方位資訊以及諸如作為所擷取視 153600.doc 201203170 λ之補充拍攝·貝況之拍攝時間及日期與焦距的拍攝條件。 在基於AVCHD;f示準的視訊相機中,例如,將圖2中所展示 之拍攝資訊記錄於經記錄為MPEG2-TS之基本_流斤8)之 使用者·貝料的經修改之數位視訊套件中。以預定時間間隔 週期性地記錄拍攝資訊。 此處僅展示終端機器件300,但可自多個終端機器件 300存取資料中心]_。同樣,在再現器件_方面,多個 再現器件400可存取資料中心丨〇〇〇。 再現器件400再現視訊,在該視訊中標籤600疊印於在與 視訊3000之視點及視場相同的視點及視場中所擷取的另一 視訊4000上。在圖!之實例中,具有字元串資訊「富士山 在本栖湖之上」之標籤6〇〇疊印並再現於視訊4〇〇〇上。 由上述標籤600所指示的資訊為關於以下内容之有意義 的資訊:藉由自擷取視訊3000所處之視點拍攝相同視場空 間所獲得的視訊。亦即,若視訊並非富士山展示於本栖湖 之上之視訊,則(例如)甚至在富士山作為主題出現的視訊 中顯示標籤600仍並非較佳的。舉例而言,圖3中所展示之 視訊4005為自Gotemba所擷取之富士山的視訊。在此狀況 下,本栖湖未見於視訊4〇〇5中。因此,顯示標籤6〇〇並非 較佳的。視訊4010為自靠近富士山之位置而非擷取視訊 3000所在的位置所擷取之視訊。在此狀況下,即使以相同 方向角擷取視訊4010及視訊3000,在視訊4010上顯示標籤 6〇〇仍並非較佳的。視訊4〇15為在與視訊3000之拍攝位置 相同之拍攝位置中所擷取的視訊。然而,視訊4〇丨5具有不 153600.doc 201203170 同於視讯3000之拍攝條件,且為藉由在比視訊3〇〇〇之距離 短的距離處擷取景色(view)所獲得之視訊。甚至在此狀況 下,顯不標籤600仍並非較佳的,此係因為本栖湖未見於 視訊4015中。 在相關技術之系統中,將標籤標示至主題之基於地球的 二維空間座標。在此狀況下,因為富士山之基於地球之三 維空間座標位置係相同的,所以標籤6〇〇亦疊印於類似於 圖3中所展示之視訊4〇〇5、視訊4〇1〇及視訊4〇15的視訊 上。然而,標籤600為關於以下内容之有意義的資訊:藉 由自與上文所描述相同之視點擷取相同視場所獲得之視 訊。根據此實施例之資訊處理系統1〇藉由將標籤與所擷取 視訊之視場空間上的座標位置相關聯而管理標籤。因此, 標籤600未疊印於具有不同視點及不同方位之視訊4〇〇5、 具有不同視點之視訊4010,及具有相同視點及相同方位但 因為拍攝條件不同而具有不同視場空間之視訊4〇15上。 因此,自視點自某一視場空間所見的複數個物件之位置 關係中的有意義之資訊以及物件之簡單名稱可作為標籤來 共用。 此處,視訊相機展示為成像器件2〇〇,但本發明不限於 此。舉例而言,成像器件200可為具有拍攝功能之器件, 諸如行動電話、攜帶型音樂播放器件、攜帶型視訊處理器 件或攜帶型遊戲器件。說明終端機器件3〇〇為個人電腦 (pc)之狀況,但本發明不限於此實例。舉例而言,終端機 器件300可為具有通信功能及使用者輸入操縱所藉以之輸 153600.doc
S •10· 201203170 入區段的任何資訊處理器件,諸如家用視訊處理器件 (DVD錄影機、視訊磁帶錄影機或其類似者)、個人數位助 理(PDA)、家用遊戲器件、家用電器、行動電話、攜帶型 音樂播放器件、攜帶型視訊處理器件或攜帶型遊戲器件。 或者’若成像器件200可具有通信功能且可與資料中心 1000内之每—器件通信’則成像器件2〇〇自身亦可具有終 端機器件300之功能。 此處,内容可為視訊内容、靜止影像内容或移動影像内 容。再現器件400藉由將標籤疊印於藉由資料中心1 〇〇〇所 供之視訊共用服務所散佈的視訊上而執行再現,但本發 明不限於此實例。舉例而言,再現器件4〇〇可藉由將標籤 疊印於儲存於本端儲存區段中之視訊内容上而執行再現。 或者’再現器件400可在亦具有成像功能之器件中於即時 拍攝期間將標籤疊印於視訊上。 如上文所描述,根據此實施例之資訊處理系統丨〇藉由將 標籤與自拍攝内容所在之視點的視場空間上之座標位置相 關聯而管理該標籤。因此,疊印在再現器件4〇〇中的與自 相同視點之相同視場空間相關聯的僅一標藏。因此,使用 此標籤資訊,再現器件400可僅在自擷取視訊所處之拍攝 位置及藉由預定拍攝條件擷取視訊之方位所見的視訊中適 當地顯示有意義之資訊。接下來將描述用於展現此效應之 標籤資訊產生器件100的功能組態。 <2.組態> 圖4為展示標籤資訊產生器件100之功能組態的方塊圖。 153600.doc 11 201203170 仏籤資efL產生器件! 〇G為主要具有通信區段! 及控制區段 12〇之資訊處理器件。標籤資訊產生器件ι⑽自視訊分析結 果產生標籤資訊。 此處,在標藏資訊產生器#100中所產生的標藏資訊為 包括拍攝資訊之資訊及指示標籤資訊之内容的字元串資 訊’拍攝資訊包括拍攝位置之資訊、關於自拍攝位置之視 場的視場資訊、以拍攝位置資訊及視場資訊為基礎所指定 之視場空間中的座標位置。 為產生上述標籤資訊,標籤資訊產生器件1〇〇之控制區 知· 120主要具有視點資訊獲取區段丨21、視場資訊獲取區段 U2及標籤資訊產生區段124之功能。 視點資訊獲取區段121獲取指示拍攝内容的成像器件之 位置(下文中,稱為視點位置)的視點資訊。舉例而言,視 點資訊獲取區段121自拍攝資訊獲取視點資訊,拍攝資訊 為指示視訊内容資料之補充拍攝條件的資訊。如上文所描 述’拍攝資訊為藉由成像器件200之功能所記錄的資訊。 舉例而言,視點資訊獲取區段121自儲存於視訊散佈伺服 器(其儲存自終端機器件300所上傳之視訊)中之視訊内容資 料的補充拍攝資訊提取並獲取視點資訊。或者,視點資訊 獲取區段121可藉由直接獲取來自上傳視訊之終端機器件 3 〇〇之視訊内容資料來獲取視點資訊。 此處’視點資訊為自諸如GPS之位置獲取器件所獲取之 (例如)由全球大地座標系統(WGS)或其類似者所指示的經 度、緯度及高度的資訊。視點資訊可包括位置資訊之誤差 153600.doc 201203170 精度的資訊。 當自視點位置拍攝内容時’視場資訊獲取區段122獲取 指示視場空間的視場資訊。舉例而言,視場資訊獲取區段 122自視訊内容資料之補充拍攝資訊獲取視場資訊。 此處’例如’視場資訊包括自視點位置之方位及視場角 的貧訊。舉例而言’由具有成像器件之電子羅盤所獲取的 方位資㈣於自視點位置之方財。視場角之資訊變為對 應於成像器件之設定值的值。方位及視場角之資訊係自視 訊内容資料之補充拍攝資訊獲取。 標籤資訊產生區段124產生與藉由視點資訊、視場資訊 及視場S間之深度資訊所指定之視場空間上之座標位置相 關聯的標籤資訊。舉例而言’標籤資訊產生區段124產生 包括自終端機器件3〇〇經由通信區段丨丨〇所獲取的標籤之字 元串資訊、視讯中之標籤位置的資訊、視點資訊、視場資 訊及自視點至被指派標籤之物件之距離的資訊的標籤資 訊。 此處視场空間之深度資訊為至内容中之拍攝物件的距 離。在主題距離方面,例如,若可自内容之補充拍攝資訊 獲取主題距離之值,則使用所獲取之主題距離值。可使用 以内容之拍攝資訊為基礎所計算的超焦距。 上述標籤資訊產生器件100之每一區段的詳細操作根據 標籤資訊官理方法而不同。此處,接下來將分別描述兩種 官理方法’其包括最廣泛使用之採用關聯式資料庫的管理 方法及採用機碼-值類型資料儲存之適於較大規模資料管 153600.doc •13· 201203170 理或散佈處理之管理方法。 <3.藉由關聯式資料庫之標籤資訊管理方法> 首先,將使用圖5及圖6描述藉由關聯式資料庫之標籤資 讯管理方法。圖5為展示在標籤資訊由關聯式資料庫管理 時標籤之空間模型之實例的說明圖。圖6為展示管理由圖5 之空間模型所定義之標籤資訊的關聯式資料庫之表定義之 實例的說明圖。 在如上文所描述之此實施例中,以視點為基礎將標籤標 示至視訊之視場的三維空間上,視點為擷取被添加有標籤 之視訊之成像器件的位置。視點為由WGS所指示之經度、 緯度及咼度的資訊。在此狀況下,視點為緯度N1、經度 E1及尚度A1。視場之三維空間上的位置係藉由二維視場 平面上之位置來表達,該一維視場平面係藉由使用拍攝方 向向量作為軸線正交地配置所擷取視訊(其中所擷取視訊 的中心點彼此匹配),藉由藉助於水平視角及距視點之距 離來定義視場平面而獲得。 視場平面之座標係藉由水平χ軸及垂直¥軸來定義,且 中心點指定為(0,0)。影像之水平方向的解析度…變為水平 解析度。標籤之視場平面的位置係藉由(χ,γ)來表達。 有可能與另一視訊共用標籤,並藉由在視訊之視點位 置、視場角、方位及自視點至被添加有標藏之物件的短距 離之條件下自貧料庫執行搜尋來疊印及使用標籤。除位置 資訊及方位資訊之外’藉由視場角及距視點之距離對標藏 資訊的搜尋在判定對於取景器所聚焦之主題是否存在標藏 153600.doc 55 201203170 資訊方面亦係重要的。 接下來,將參看圖6描述管理藉由上述空間模型所定義 之標籤資訊的關聯式資料庫之表定義的實例。圖6之表的 每-列指示資訊標籤U個記錄。表之行分類成視點資 訊、視場資訊及資訊標籤三者。 視點資訊具有經度行、緯度行、高度行及誤差行。緯度 具有自-90度請度之範圍料職,北緯表達為正值;^ 且南緯表達為負值、經度具有自.度至⑽度之浮點 值’東經表達為正值,且西經表達為負值。高度為表達為 整數之公尺值。此處’誤差為位置資訊之精度表達為公尺 值的值。誤差係自GPS中之精度因子(D〇p)之值計算。若 誤差不清楚’則輸入值_ i。 視場資訊具有方位行、視場角行、高度行及寬度行。方 位指示拍攝方向之角。方位之值係在G度浮點值與则度浮 點值之間,北指定為〇度(36G度),東表達為%度,南表達 為⑽度,且西表達為270度。視場角表達為十進位浮點數 之度數°高度及寬度為㈣取視訊之水平解析度及垂直解 析度,且表達為像素值。舉例而言,在全高清晰度視訊 中,垂直解析度及水平解析度分別為⑽及刪。視訊解 析度可自内容資料之補充拍攝資訊獲取。若視場角為2了, 則其係自以下關係獲得。 tan Τ=(拍攝元件框架大小)/(焦距) 資訊標籤具有距離行、Χ座標值行、Υ座標值行及標籤 名稱行4離為距視場空間上之視點的距離,且以公尺為 153600.doc -15· 201203170 單位表達為整數。X座標值及γ座標值為參看圖5所描述之 視場平面上的位置,且表達為像素值。標鐵名稱表達為字 元串。標籤名稱為待由標籤共用的資訊。 可不針對每一標籤來量測標籤距離。因此,將所擷取視 訊的主題距離簡單地用作標籤距離。對於主題距離,可使 用在移動影像狀況下的圖2中所展示之與拍攝相關的補充 資訊或在靜止影像狀況下的EXIF檔案中所記錄之影像資訊 的主題距離標籤之值。若主題距離並非自上述資訊獲取, 則使用以下方程式所計算的超焦距可用作標籤距離。 容許之模糊圓直徑=對角影像元素大小/容許之模糊圓常 數(=1300) 超焦距=(焦距*焦距)/(容許之模糊圓直徑*F值)(單位: 毫米) 若35毫米轉換之焦距r FocalLengthIn35mm」標籤記錄 於EXIF資訊中,則35毫米底片中之成像元素之對角線大小 已知為43.266615毫米。因此,超焦距係使用記錄於 「ApertureValue」標籤上的光圈ρ值來計算。 或者,藉由分析所擷取視訊使用用於每一主題之焦距的 量測技術所量測之距離可用作標籤距離。舉例而言,若使 用能夠記錄視差資訊之器件(如3D相機),則藉由使用資訊 分析所獲得之值可用作標籤距離。 有可能根據如上文所描述之圖5的空間模型使用圖6之表 定義之關聯式資料庫管理添加至影像的標藏。然而,如上 文所描述之關聯式資料庫的特徵在於其可能不能容易地執 153600.doc •16· 201203170 行大規模資料管理及散佈處理。此處,接下來提出在充當 待管理之物件的資訊之量為大時藉由應用恰當之雲端計算 技術來管理標籤資訊的方法。 <4.藉由機碼-值類型資料儲存之標籤資訊管理方法> 圖7為根據此實施狀用於提供时偏服務之資料中 心内的組態圖。為了提供視訊内容共用服務,有必要對大 量經上傳之視訊内容資料執行影像轉換處理,管理記錄, 並處理自大量使用者對視訊内容f料之存取^因此,提出 使用大規模散佈處理類型之雲端計算技術的標籤資訊管理 方法。 資料中心1000具有複數個web词服器170、複數個視訊散 佈伺服器180、複數個標籤資訊管理伺服器19〇及複數個標 籤資訊產生伺服器100。 web伺服器170提供待顯示於終端機器件3〇〇之瀏覽器上 之HTML文件及VR資訊。視訊散佈伺服器18〇散佈視訊至 再現器件。標籤資訊管理伺服器丨9〇在機碼_值類型資料儲 存中管理由標籤資訊產生伺服器1〇〇所產生的標籤資訊。 t籤資訊產生伺服器1〇〇產生適於在機碼-值類型資料儲存 中管理的標籤資訊。使用雲端計算技術用於限制性地處理 大量内容資料及來自終端機器件之存取係有益的。在此實 施例中,使用已知為適於散佈式雲端計算之機碼_值類型 資料儲存來管理標籤資訊的方法得以使用。 如圖8中所展示,機碼-值類型資料儲存藉由一列中具有 一對機碼及值之簡單表來管理資料。與關聯式資料庫相 153600.doc •17· 201203170 比,機碼-值類型資料儲在 複雜資料結構定義或關係在不支援使用 可藉由複數個伺服器以機 4 近,此機碼-值類型資料儲在 取 存已開始用於目標為大量用戶 端之網際網路服務中。 /機碼-值類型資料儲存中,表係藉由機碼值來排序及 官理。因此’ 4了執行高速且低負載之處理,設計機碼值 之格式使得相關資料位於表之部分中係相當有效的。 (空間模型) 圖9為展示在標籤f訊由此實施例中之機碼-值類型資料 儲存管理時待使料標籤之空間座標的空間模型。在此空 間模型中,標籤位置資訊係由視點位置資訊(緯度lANt、 經度LNGT及高度ΑΤΤτ)及自視點位置之方位資訊(水平方 位角τΤΗ及垂直方位角Ττν)指示。 藉由以下方程式執行自圖5中所展示之空間模型上的座 標至圖9中所展示之空間座標的轉換。當方位跨越正北 時,校正係必要的。 標籤之水平方位角:Tth=Tfh+Tfw*(Xt/Wf-1/2) 標籤之垂直方位角:Ttv=Tfv+(Tfw*Hf/Wf)*(1/2-Yf/Hf) 此處’符號具有以下含義。 標籤之影像平面上的座標:(Χτ,Υτ) 影像之拍攝水平視角:TFW 影像之水平像素的數目:WF 影像之垂直像素的數目:Hf 153600.doc jg s 201203170 像素縱橫比:1 :1
景夕像之拍攝水平方位角:TFH 景夕像之拍攝垂直方位角:tfv 垂直方向之方位角資訊藉由將底部位置指定為基點而具 有自〇度至180度之值。此處,為便於描述,水平線表達為 〇度,向上方向表達為正角,且地面方向表達為負角。若 方位角資訊不包括於内容資料之補充拍攝資訊中且不青 楚,則垂直方位角可簡單地自視角及主題距離分配。/ (觀察雜湊(View Hash)) 若標籤資訊係由機碼·值類型資料儲存管理,則視點資 訊及視場資訊用於機碼之部分中,且有必要藉由上述資訊 搜尋資料。因此,有可能使用此次所提出的觀察雜湊將經 度、緯度、位置精度、視場角、視場方向及標籤距離有效 地編碼成字元串β
觀察雜湊組態展示於圖10中。在觀察雜湊位元序列中, 指示位置資訊、位置精度、視場資訊及如至標籤之距離的 主題距離的位元序列經順序地配置。位置資訊之位元序列 係自經度(自-90度至90度)及緯度(自-180度至180度)之座標 由解析度精度表達的值產生^若解析度精度之位元的數目 由R表示且位元之經度及緯度由η及e表示,則由解析度精 度所表達之經度N及緯度E的值係自以下方程式獲得。 N=180*(n+90)/2R-l E=360*(e+180)/2R N及E值為十進位浮點數’且n及e藉由在小數點後截斷 153600.doc •19- 201203170 而設定為整數值。經度之解析度精度設定為緯度之解析度 系統的1/2,以便將分解圖上之分割區設定為接近正方 形。 如圖10中所展示,位置資訊之位元序列具有交替地配置 在方程式中所獲得之經度之位元序列(E_bn、E-bn.丨、... ΕΝ 、 E-b。)與經 度的位 元序列 (N_bn 〗 、 … N-b, 、 N-b〇) 的格 式。此處,最高有效位元分別為匕]311及;^-1311_1。 可藉由以上述格式設定位置資訊之位元序列而指定基於 地球之地理分割區,該分割區之位置可藉由小的位元序列 指示,且亦可表達該分割區之長度。在此實施例中,GPS 位置精度被認為是1公尺至100公尺,且R使用自22至25之 值。此時’位置資訊為43個位元之最小值及49個位元之最 大值。 圖11為展示在位置資訊之位元的數目為45時經劃分之地 理为割區之貫例的說明圖。地理分割區之北-南方向的長 度係固定的而與經度無關,且為約4.75公尺。另一方面, 地理分割區之東-西方向的長度取決於緯度且在或其 類似者之35度經度周圍變為3 86公尺。另一方面,地理分 割區之東-西方向的長度在St〇ckh〇lm或其類似者之6〇度緯 度周圍變為約2.35公尺。 位置精度係藉由指示由位置資訊之位元序列所指定的地 理分割區之北·南方向之距離所乘以的值的位元序列來表 達,D-h為最高有效位元,且D_bQ為最低有效位元。若由 位置資訊之位元序列所指定的地理分割區之北南方向之 153600.doc 201203170 距離所乘以的值為1,則位元序列之值為〇。若由位置資訊 之位元序列所指定的地理分割區之北南方向之距離所乘 以的值大於1且等於或大於2,則位元序列之值變為丨。若 由位置資訊之位元序列所指定的地理分割區之北-南方向 之距離所乘以的值大於2且等於或小於4,則位元序列之值 變為3。若由位置資訊之位元序列所指定的地理分割區之 北-南方向之距離所乘以的值大於4,則位元序列之值變為 4。位置誤差之位元數目變為 視%資訊為指示標籤方位所屬於之視場的資訊。如圖^ 2 及圖13中所展示,視場資訊為4至6個位元之序列,且由如 下位το序列表示:指示藉由將在具有正東之起點的順時針 方位中之360度之座標除以解析度精度所獲得的值。若具 有正東之起點的順時針方位之度數由4表示且解析度精度 之位元精度由Α表示,則視場資訊〇係藉由以下方程式計 算。為便於以下描述藉由將正北指定為起點來表達方位,
但實際上使用藉由將正東指定為起點而轉換的所有值。 D=360*d/2A 在此實施例中,解析度精度之位元的數目具有4、5及6 三種類型,且位元之數目可回應於視場角而不同。36〇度 之空間藉由位元之數目而劃分成22.5度、π·25度及8125 度。在此實㈣巾,回應於㈣所添加至㈣像之所棟取 的視角而改變位元之數目。若視角等於或大於牝度,則可 分配4位元精度。若視角小於46度且等於或大於以度,貝 則可分配6位元精 可分配5位元精度。若視角小於18度 153600.doc -21 · 201203170 度。位70之數目指示在360度之空間劃分成22 5度、1125 度及8.125度的狀態中其所屬於的方位。圖12展示在4個位 元之狀況下每一方位之位元數目。舉例而言,若北·西北 在資訊標籤之水平方位t為315度,貝“見場資訊冑為11〇1 之位7G值。當方位資訊不清楚時,位元數目變為 如上文所描述,有可能藉由回應於視場角而使視場資訊 之位元的數目不同及使用由位^所指示的視場資訊作為機 碼-值類型資料之機碼的部分而自包括於機碼中的視場之 位元的數目瞭解視場角之資訊。因為可瞭解視場角之資 訊,所以有可能更準確地知曉每一視訊内容内之拍攝範 圍。 主題距離係藉由8位元之公尺值來表達,且用作藉由以 如上文所描述的内容資料之補充拍攝資訊為基礎計算至主 題之距離所獲得的值。嚴格而言,所擷取影像之超焦距與 標籤資訊之距離不相同,但誤差經處置以包括於原始距離 資訊中。等於或大於255公尺之距離指定為255,且若距離 資訊不清楚則位元數目變為〇。 圖14為展示位置資訊之位元之數目的分配方案的說明 圖。為了藉由機碼-值類型資料儲存之機碼有效地執行搜 尋,決定適於標籤資訊搜尋方案的機碼值係有效的。在此 實施例中,構成標籤機碼值的觀察雜湊之位置位元的數目 藉由標籤之視場位元之數目及距離資訊而改變。舉例而 言,若視場資訊之位元的數目為3,則標籤所添加至的視 訊係以廣角拍攝。若主題距離為遠的(超過丨〇〇公尺),則甚 153600.doc
S -22 - 201203170 至在位置資訊之精度為差時因為可使用標籤資訊所以仍使 用43位元位置資訊。另一方面,若視場資訊之位元的數目 為5(亦即’若標籤f訊添加至在超級望遠鏡中所擷取之視 訊),則在所有距離處所使用的位置資訊之位元的數目為 49,此係因為位置資訊之精度亦係必要的。有可能藉由改 變如上文所描述之位置資訊之位元的數目來有效地搜尋有 益的標籤資訊。因為標籤之位置誤差取決於如上文所描述 之位置資訊之位元的數目,所以有可能藉由比較/對比視 點之位置精度來決定待用於搜尋標籤資訊的觀察雜湊之位 置資訊之位元的數目。下文將詳細描述標籤搜尋。 可如上文所描述獲得構成觀察雜湊之每一位元序列。然 而’為了將位元序列用#機碼_值類型資料儲存之機碼值 或為了將位元序列用作URL或其類似者,#由字元串處置 表達式係容易的。因此,位元序列被編碼成字元串。舉例 而言,存在使用BASE64以便將位元序列編码成字元串的 方法。然而,在此實施财,《出可變位元序列/字元碼 轉換方案’使得資料可藉由取決於每一位元序列之機碼值 而排序。 此處,所提出之可變位元序列/字元碼轉換方案具有如 當藉由連接可變長度位元序列產生機竭時:、可‘ 位兀序列之片段(segment)。因此,甚至 使用此方案轉換成碼字元之位元序= 訊的片段。因此,有可能在位元序列用作機T:::-資 料儲存之機碼時以資訊值為基礎執行搜尋H值類㈣ 153600.doc •23- 201203170 圖15展示可變位元序列編碼/轉換表之實例。在此轉換 方案中,資訊包括複數個可變長度位元序列(0或更多位 元)。該轉換方案在識別位元序列之邊界時係有效的。將 描述此轉換方案》在每一可變長度位元序列中,片段係自 最高有效位元以4位元單位順序地提取並由對應於4位元值 的字元碼(U至z)替代。若所提取之片段之位元的數目低於 4 ’則3個位元、2個位元及1個位元分別由字元碼(e至T)、 (6至D)、(2至5)及(0,1)替代。當最後提取之片段之四個位 元或相應位元序列之位元的數目為〇時,添加字元碼「_」 (短劃)。當然,此處所展示之轉換表為例示性的。只要位 兀序列及碼字元以--對應關係定義,則各種類型之修改 實例係可能的。 圖16展示轉換實例。若在轉換前的資訊包括兩個位元序 列(其分別為「0111010010010」及「10010」),則在轉換 後之字元串變為「im8w_」。轉換成字元串之某一者藉由轉 換方案而用作圖财所展示之觀察雜凑值。藉由觀察雜 凑’藉由任何精度所劃分的視場之三維空間可藉由將藉由 任何精度所劃分之地面座標上的分割區之中心指 而唯-地指定。將描述使用觀察雜凑在機碼_值類型資料 儲存中管理標籤資訊之方法。 接下來,將描述根據此實施例H值類型資料$ 的表。用於此實施例中之機碼·值類型資料儲存之表f 如圖8中所展示之-對「機錄ey)」值及「值」值^ 將用以管理標籤資訊的Java(註冊商標)類別定義展示3 153600.doc
.24- 201203170 瑪值類型資料。標籤類别指示標籤資訊且包括 仙別及值㈣卜㈣㈣存中將—對機碼類別及 值類別官理為機碼-值。 =類別之真實資料為可變機碼,且機碼為藉由連接自 標臧資㈣產生的觀察雜凑、字元争類型及字元串時間戮 斤,件的子70串°類型用以適當地排序相同觀察雜凑值 之標籤資訊。在此實施例中’顯示標籤之優先權指定為類 '值且〇位元優先權值為由圖15之轉換表所產生的字元 串主要目的係將唯一機碼分配給相同觀察雜凑值之標籤 資訊。藉由標籤所產生之時間及曰期係藉由與註冊商 標)之日期類別之值相同的8位元組㈣獲得,且係使用圖 15之轉換表藉由字元串產生。 值類別之真實資料為以下變數。 name :標籤名稱之字元串 咖:標籤顯示之優先權(與用於機碼產生中之值相同的 值)
UmeStamp :標籤產生時間及日期(與用於機碼產生中之 值相同的值) tagPosition .標鐵之視點位置(例如,圖之[αΝτ、 LNGT、ΑΤΤτ或其類似者) tagDirection .自視點的標籤方位(例如,圖⑺之ΤτΗ或 Τχν) tagSource ·充當產生標籤資訊所藉以的基礎之影像資訊 及標籤之螢幕資訊座標 153600.doc -25- 201203170 才示籤源類別之真實資料為以下變數。
ImageSource :影像資訊 tagX.影像平面之標籤的X座標值(例如,圖10之χτ) tagY.影像平面之標籤的γ座標值(例如,圖1〇之丫丁) 影像源類別之真實資料為以下變數。 url :影像檀案(靜止影像或移動影像)之唯—資源定位器 (URL) imagePos.n:操取影像所在的視點之座標(例如,血 圖9之LANt、LNGt、ΑΤΤτ或其類似者相同) ^ imageDirection : Μ見點至影像之中心點的方位(例如, 圖9中之TFH或TFV) 之影像資訊 scene:影像檔案(靜止影像或移動影像) %景類別之真實資料為以下變數。 加则.在靜止影像狀況下圖框值為。,且在彩 況下影像®框係藉由自開始起的時間(毫秒)表示 angleHorizontal :影偾夕払植, 像之拍攝水平視角(例如,圖9 1 FW) 圖 ,圖9之Hf)
Width:影像之水平像素的數目(例如 height:影像之垂直像素的數目(例如 觀察位置之真實資料為以下變數。 latitude :視點之緯度 longitude :視點之經度 altitude :視點之高度(毫米單位) range :視點之誤差(毫米單位) 153600.doc •26· 201203170 觀察方向之真實資料為以下變數。 directionHorizontal :自視點至物件點之水平方位 directionVertical :自視點至物件點之垂直方位 distance :自視點至物件點之距離(毫米單位) 接下來’圖18及圖19為展示標籤資訊搜尋之實例的說明 圖。圖1 8展示如下狀況:自視點位置(北緯35度’其與 Tokyo之緯度相同)以50度之視角拍攝正北,但發現用於由 圖13中所展示之針對一視場方位及一視角的視場資訊位元 所指定之每一視場的標籤》在此實例中,有必要搜尋關於 劃分成25度之四個視場劃分區的視場。甚至當視場位置之 量測誤差等於或小於由位置資訊位元所指定的分割區之 北-南方向之長度時’若視點位置存在於分割區之邊緣 中,則其歸因於誤差而實際上仍可位於周邊分割區中。因 此’有必要搜尋指定分割區周邊之分割區。若誤差為3公 尺’則有必要搜尋總共9個分割區。在此狀況下,在搜尋 中執行32(=4*8)個操縱。 圖19展示視點位置為靠近Stockholm之北緯60度之實 例。在此狀況下’因為分割區之東·西方向短於上述狀況 之方向’所以甚至在相同位置誤差精度下仍有必要搜尋較 寬範圍之分割區。 接下來’將描述執行上述搜尋處理之再現器件的功能組 態。圖20為展示再現器件4〇〇之組態的方塊圖。再現器件 400主要具有通信區段41〇、控制區段42〇及顯示區段43〇。 控制區段420主要具有分析區段421之功能、搜尋區段422 153600.doc -27- 201203170 之功此、叠印區段423之功能’及顯示控制區段424之功 能。 通k區410為用於經由諸如網際網路之網路與另一 器件通信之網路介面。控制區段42〇控制再現器件4〇〇之整 體操作。舉例而言,顯示區段430包括陰極射線管(CRT)顯 示器件、液晶顯示(LCD)器件、有機發光二極體(〇LED)器 件,或諸如燈之顯示器件。 分析區段421具有分析待由再現器件4〇〇再現之内容的功 能。舉例而言,分析區段421具有藉由分析内容資料之補 充拍攝資訊而獲取搜尋區段422搜尋標籤資訊所必需之資 訊的功能•。必要時,分析區段421可具有分析内容視訊自 身之功能。 搜尋區段422具有搜尋待疊印於待自資料中心ι〇〇〇内之 資料庫再現之内容資料上的標籤資訊之功能。此處,搜尋 區段422產生適於搜尋儲存於機碼-值類型資料儲存中之標 籤資訊的搜尋條件,傳輸搜尋條件至資料巾心、麵内之標 籤資訊管理飼服器19〇,並獲取搜尋結果。接下來,將使 用圖21描述標籤資訊搜尋處理之細節。 /印區段423執行將標籤疊印於待自藉由搜尋區段422所 獲取的t藏資Λ再現之視訊内容上的處理1後將描述疊 :處理之細郎。|頁示控㈣區段424具有再現内容資料之功 此’且再現標籤藉由疊#區段似疊印⑤上面的内容資 料。 圖21為展示標籤搜尋操作之流程圖。在機碼-值類型資 153600.doc
S •28· 201203170 料儲存中,可藉由指定機碼值之開始與結束在一範圍中配 置機碼值。因此,自所擷取影像之位置資訊、方位,及所 擷取影像之主題距離的範圍重複藉由ViewHashBegin& ViewHashEnd進行的機碼-值類型資料儲存之搜尋以及視場 及分割區之搜尋。就此而言,易於在如上文所描述之機 碼-值類型資料儲存中執行散佈式處理。因此,若並行執 行搜尋請求’則有可能散佈並處理該等搜尋請求。 當再現器件400獲取充當物件之影像之拍攝資訊(s丨〇3) 時,首先開始標籤資訊搜尋處理。搜尋區段422自所獲取 之拍攝資訊的視角之資訊決定視場位元之數目(sl〇6)。接 下來,搜尋區段422自視場位元之所決定數目及自拍攝資 訊所獲取的距離之資訊決定待搜尋的柵格之位置位元之數 目(S109)。 接下來’搜尋區段422判定量測誤差值是否等於或小於 柵格之北-南寬度(S112)。若藉由在步驟S112中之判定而判 定量測誤差大於柵格之北-南寬度,則處理藉由移至B而終 止’此係因為不可能指定搜尋物件之柵格。 另一方面’若藉由步驟s 112之判定而判定量測誤差等於 或小於柵格之北-南寬度’則搜尋區段422計算待搜尋之柵 格之位置資訊且在一配置中設定位置資訊(S115)。搜尋區 段422自視角及視場位元之數目計算並配置相應視場 (S118)。 搜尋區段422初始化Tags[]之配置以儲存結果(s 121),並 將距離精度值設定為〇(S 124)。接下來,搜尋區段422藉由 153600.doc -29- 201203170 移至圖21B而選擇第一觀察位置(S127),並決定搜尋距離 範圍(S130)。 搜哥區段422計算ViewHashBegin(S133),並計算
ViewHashEnd(S13 6)。搜尋區段422搜尋在步驟S133及S136 中所計算之ViewHashBegin與ViewHashEnd之間的範圍之 標籤。 具體s之’搜尋區段422產生搜尋條件並傳輸搜尋條件 至標籤資訊管理伺服器190。搜尋區段422獲取滿足所傳輸 搜尋條件之搜尋結果。搜尋區段422添加並儲存所獲取之 搜尋結果至Tags[](S 139)。 判定是否搜尋所有觀察方向(S 142)並判定是否搜尋所有 觀察位置(S148),且重複自步驟S130之處理直至完成完全 搜尋為止。 接下來,將參看圖22描述疊印處理’其係藉由再現器件 400之疊印區段423執行。圖22為展示將藉由搜尋所獲得之 標籤資訊疊印於另一視訊上之方法的說明圖。 若已知三邊之距離,則夾角可自餘弦定理獲得,且投射 至自拍攝視點所觀察之視場的標籤之方位可自標籤之視點 座標及方位藉由以下方程式獲得。 投射標籤之水平方位角:
TuH^TTH-cos'DtAD’-DD^VpD^Ds),其中 τ >= ΤτΗ
TuhsTth+cos-'D^+D’-DdA/WDu*!^),其中 Tsh<Tth 投射標籤之垂直方位角: •30· 153600.doc
S 201203170
TuvsTTv+cos-VDuhD^-DDvV^Du^Ds),其中 Tsv>= Ττν ,其中 Tsv<Ttv 此處,資訊係藉由以下符號指示。 標籤之位置資訊:LANT、LNGT、ΑΤΤτ 拍攝點之位置資訊:LANS、LNGS、ATTS 視點之間的水平方向距離:Ddh 視點之間的垂直方向距離:ddv 標籤之水平方位角:Tth 標籤之垂直方位角:Ττν 標籤距離:DT 主題距離:Ds 若Ddh為兩個視點之水平距離且在視點之間無高差的情 兄下垂直距離Ddv為〇,則DDHh為由Hubeny公式自該兩點之 經度及緯度所獲得的距離。DSh為所擷取影像之主題距 離此處,使用超焦距且DTh為標籤資訊之距離。因為垂 直距離Ddv為〇 ’所以所投射之垂直方位角變為等於標藏之 垂直方位角。 右所搜哥之標籤投射至所擷取視訊,則上述座標轉換經 執仃以用於所有所搜尋標籤且僅選擇並投射適合拍攝視角 之標籤方位角。以標籤資訊為基礎,例如,僅具有在上述 類型中所指定的高優先權之某一者被顯示或篩選並被顯 /|、 〇 若獲得所投射標籤之水平方位角及垂直方㈣,則可在 153600.doc •31· 201203170 以下方程式中獲得所擷取視訊之影像平面中的座標。 所技射標鐵位置 Xs=((TUH-TSHyTsw+1/2p ws 所投射標籤位置 Ys=(l/2-(Tuv-Tsv)/(Tsw*Hs/Ws))*Hs 所擷取視訊之水平視角:Tsw 所祿取視訊之水平像素之數目: 所擷取視訊之垂直像素之數目:Hs 像素縱橫比:1:1 拍攝方向之水平方位角:TSH 拍攝方向之垂直方位角:Tsv <5.效應之實例> 上文已展示在機碼_值類型資料儲存中管理添加至影像 之標籤資訊、搜尋_投射另—影像之拍攝f訊之標藏資 訊,及疊印並顯示標籤資訊的方法。 根據此組態’有可能產生、共用及使用與自某-視點位 置所觀察的視場空間上之座標相關聯的標籤資訊。藉此, 有可此僅在自藉由預定拍攝條件擁取視訊之位置及藉由預 定拍攝條件擷取視訊之方位所觀察的視訊中共用有意義的 資訊。 最近已提出此夠簡要地表達標籤資訊、視點位置資訊、 題距離及位置資讯之誤差精度的觀察雜湊。若標藏資 矾係藉由機碼-值類型資料儲存藉由使用觀察雜凑來管 理’則甚至在標籤資訊之量為大時仍有可能以高速及輕的 處理負載執行搜尋。 <6.應用實例> 153600.doc
S •32· 201203170 接下來’將描述能夠藉由應用根據本發明之實施例的標 籤資訊管理方法實現的服務之實例。 舉例而言’圖23為疊印並顯示標籤於使用視訊相機即時 拍攝的景觀之視訊上的實例。待疊印之視訊為圖1中預先 拍攝及儲存之視訊内容,但本發明不限於此實例。如圖23 中所展不,可在即時拍攝期間顯示用於視訊之標籤。 在上述實施例中經由諸如網際網路之網路獲取標籤資 訊,但本發明不限於此實例。舉例而言,若拜訪目的地之 區域之標籤資訊預先儲存於成像器件内的儲存區段中,則 有可能在不建立至網路之連接的情況下顯示標籤。 圖24為顯示標籤連同地圖資訊一起顯示於預先擷取之視 訊上的視訊4025之實例。當標籤資訊疊印於即時視訊上 時,標籤貧訊不必係有意義的。若已知在所觀察之景觀上 的物件為何物,則標籤資訊可疊印並展示於先前視訊上。 根據此組態,即使不執行將成像器件之透鏡指向主題的操 作,仍有可能在與(例如)在行動電話中執行用於郵件之文 字操縱時相同之情況下自然地獲得所要資訊。當標籤疊印 於即時視訊上時有必要將成像器件之透鏡指向物件,但在 歸因於時間及空間而難以執行上述操作時此組態係有效 的。 圖24之器件可將適於拍照之地點的資訊通知使用者。舉 例而言,具有内容資料之視訊散佈伺服器18〇可藉由分析 私不所儲存内容資料之拍攝位置的視點資訊而實現上述服 務。舉例而言,存在收集大量視點資訊之地點將適於拍照 153600.doc •33· 201203170 的很大可能性。因&,此資訊可用以提供推薦拍攝位置之 功能。 已在上文參看所附圖式詳細地描述本發明之較佳實施 例’但本發明不限於此。熟習此項技術者應理解,各種修 ’’且a子組合及變更可在其在所附申請專利範圍或其 等效物之範疇内的情況下視設計要求及其他因素而發生。 舉例而δ,在數位靜止相機及數位視訊相機中提供Gps 功能及方位功能,且機碼·值類型資料儲存之資料係自由 該等功能記錄於檔案中的拍攝資訊及此實施例中藉由使用 者使用PC添加至其影像之標籤產生,但在已知物件之座標 位置及與其相關之資訊(例如,山名及其類似者)時有可能 藉由電腦之處理自某一視點自動地產生標籤資訊。 可歸因於相關技術中之G P s之量測誤差而不使用在標籤 資》fl之座標中具有大誤差的標籤資訊,但根據此實施例, 有"T月b易於搜尋存在於標織資訊之鄰近分割區中之另一標 籤,且亦有可能基於自標藏資訊之標籤產生而獲得影像資 訊。因此,標籤之位置資訊可易於藉由基於標籤產生分析 影像、近似物件及自鄰近分割區搜尋具有準確位置精度之 影像而校正。 在此實施例中,可歸因於GPS之量測誤差而不使用在標 鐵資訊之座標中具有大誤差的標籤資訊。然而,因為根據 此實施例’有可能易於搜尋存在於標籤資訊之鄰近分割區 中的另一標籤’且亦有可能基於自標籤資訊之標籤產生而 獲得影像資訊,所以標籤之位置資訊可易於藉由分析其影 153600.doc • 34· 201203170 像、近似物件及自鄰近分割區搜尋具有準確位置精度之影 像而校正。 若經擷取以執行標籤資訊搜尋的影像之座標資訊亦具有 GPS之大的量測誤差’則可能不使用標籤資訊,但可自所 榻取影像之座標資訊搜尋鄰近分割區之標籤資訊。因此, 所擷取影像之座標資訊可易於以如下影像之座標為基礎而 校正:其特徵量係藉由基於在其拍攝座標周圍的標籤資訊 比較所擷取影像之資訊與影像之特徵量而近似。此方案可 經調適以校正執行即時拍攝的視訊相機之位置資訊。 在上述實施例中已描述自内容之補充拍攝資訊獲取視場 空間之深度資訊或使用超焦距的實例,但本發明不限於此 實例。舉例而言,可使用能夠表達可使用所有分析技術所 獲取的至主題之距離(如標籤距離)的值。 在本說明書中,流程圖中所展示之步驟不僅包括根據其 中所描述之序列以時間次序所執行的處理,而且包括並行 或個別地執行而不必以時間次序處理的處理。此外,以時 間次序所處理之步驟可視情況而在適當時以不同序列執 行。 【圖式簡單說明】 圖1為展示根據本發明之實施例的資訊處理系統之示竟 組態的組態圖; 思 圖2為展示拍攝資訊之實例的表; 圖3為展示資訊處理系統之有利效應之實例的說明圖; 圖4為展示標籤f訊產生器件之功能組態的方塊圖; 153600.doc -35- 201203170 圖為展示在使用關聯式資料庫時標籤資訊之空間模塑 的說明圖; 圖6為藉由關聯式資料庫之標籙資訊之表定例; 圖7為資料中心之組態圖; 圖8為機碼—值類型資料儲存之概述的說明圖; 圖9為展示在使用機碼_值類型資料儲存時標籤資訊之空 間模型的說明圖; 圖丨〇為展示標籤資訊之關鍵組態之實例的說明圖; 圖u為展不拍攝位置之柵格之實例的說明圓; 圖12為視場資訊位元之說明圖; 圖13為展示視場資訊之位元分配之實例的表; 圖14為展示視點資訊之位元分配之實例的表; 圖15為可變位元序列/字元碼轉換表的實例; 圖16為展示將可變位元序列轉換成字元串的實例之說明 圖; 圖17為展示使用標籤資訊之Java(註冊商標)的類別定義 之實例的說明圖; 圖18為展示標籤資訊搜尋方法之實例(北緯的說明 圖19為展示標籤資訊搜尋方法之實例(北緯的度)的說明 圖20為展示再現器件之功能組態之方塊圖; 圖21A為展示標籤資訊搜尋操作之流程圖; 圖21B為展示標籤資訊搜尋操作之流程圖; 153600.doc -36- 201203170 圖22為投射標籤資訊至視訊之說明圖; 圖23為資訊處理系統所應用於的服務之實例;及 圖24為資訊處理系統所應用於的服務之另一實例。 【主要元件符號說明】 10 資訊處理系統 100 標籤資訊產生伺服器/標籤資訊產生器件/ 標籤資訊產生伺服器群組 110 通信區段 120 控制區段 121 視點資訊獲取區段 122 視場資訊獲取區段 124 標籤資訊產生區段 170 web伺服器 180 視訊散佈伺服器 190 標籤資訊管理伺服器 200 成像器件 300 終端機器件/終端機 400 再現器件 410 通信區段 420 控制區段 421 分析區段 422 搜尋區段 423 疊印區段 424 顯示控制區段 153600.doc -37- 201203170 430 顯不區段 500 網路 600 標籤 1000 資料中心 3000 内容/視訊 4000 視訊 . 4005 視訊 4010 視訊 4015 視訊 4020 視訊 4025 視訊 153600.doc 38 s

Claims (1)

  1. 201203170 七、申請專利範圍: 1. 一種資訊處理裝置,其包含: 一獲取單元,其經組態以獲取對應於擷取影像資料之 一成像器件之—位置的第一資訊,及對應於擷取該影像 資料之該成像器件之一視場的第二資訊;及 一處理器’其經組態以基於該第一資訊及該第二資訊 產生標籤資訊。 2. 如凊求項1之資訊處理裝置,其中該標籤資訊包括對應 於該成像器件之一緯度及一經度的資訊。 3. 如請求項1之資訊處理裝置,其中該標籤資訊包括對應 於該成像器件之一高度的資訊。 4·如請求項1之資訊處理裝置,其中該標籤資訊包括誤差 資訊,該誤差資訊指示包括於該標籤資訊中之對應於該 成像器件的位置資訊之一精度。 5·如請求項1之資訊處理裝置’其中該標籤資訊包括對應 於該成像器件之一方位的資訊。 6. 8. 如請求項1之資訊處理裝置’其中該標籤資訊包括對應 於該成像器件之一視場角的資訊。 之資訊處理裝置,其中該標籤資訊包括對應 所擷取之影像資料之-高度及-寬度的資气 如請求項1之資訊處理裝置,其中該標藏資訊包括對鹿 於在該成像器件與該所榻取影像之、 之資訊。 4之間的-距離 其中該標籤資訊包括識別 9.如凊求項1之資訊處理裝置, 153600.doc 201203170 該钛籤待顯示於所顯示之影像資料上的一位置之資訊。 10. 如凊求項1之資訊處理裝置,其中該標籤資訊包括待顯 不於所顯示之影像資料上的一字元串。 11. 一種資訊處理方法,其包含: 獲取對應於擁取影像資料之一成像器件之一位置的第 一資訊; 獲取對應於擷取該影像資料之該成像器件之一視場的 第'一資訊;及 藉由一處理器基於該第一資訊及該第二資訊產生標籤 資訊。 12. —種包括電腦程式指令之非暫時性電腦可讀媒體,該等 電腦程式指令在由一資訊處理裝置執行時使該資訊處理 裝置執行一方法,該方法包含: 獲取對應於擷取影像資料之一成像器件之一位置的第 一資訊; 獲取對應於擷取該影像資料之該成像器件之一視場的 第二資訊;及 基於該第一資訊及該第二資訊產生標籤資訊。 13. —種資訊處理器件,其包含: 一獲取單元’其經組態以獲取對應於所再現之影像資 料之拍攝資訊;及 一處理器’其經組態以基於該拍攝資訊與所儲存之0 籤資訊的一比較而獲取標籤資訊,並基於哕& 、w 較之一結 果將標籤資訊疊印於該所再現之影像資料上。 153600.doc S 201203170 14. 15. 16. 17. 18. 19. 20. 如請求項U之資訊處理器件,其中該拍攝資訊包括對應 :操取該所再現之影像資料的—成像器件之一位 置資訊。月求項14之資訊處理器件,其中該處理器經組態以基 於該位置資訊與包括於該所儲存之標籤f訊中之位置資 汛的一比較而獲取該標籤資訊。 如請求項13之資訊處理器件,其中該拍攝資訊包括對庫 於操取該所再現之影像資料㈣成像H件之-視場的視 場資訊。 如請求項16之資訊處理器件,其中該處理器經組態以基 於該視場資訊與包括於簡鍺存之標籤資财之視場 訊的—比較而獲取該標籤資訊。 如請求項13之資訊處理器件,其中該拍攝資訊包括對應 於在掏取該料現之影料料之―成像^件與該所再現 的〜像資料之一主題之間的—距離之範圍資訊。 如請求項18之資訊處理器件,其㈣處理m態以基 於該範圍資訊與包括於該所储存之標籤資訊中之範圍^ 訊的一比較而獲取該標籤資訊。 —種資訊處理方法,其包含: 獲取對應於所再現之影像資料之拍攝資訊; 基於該拍攝資訊與儲存於記憶體中之標藏資訊的—比 較而獲取標籤資訊;及 基於該比較之一結果將標籤資訊疊印於該所再 像資料上。 影 153600.doc 201203170 21 種匕括電腦程式指令之非暫時性電腦可讀媒體,該等 電腦程式指令在由一資訊處理裝置執行時使該資訊處理 裝置執行一方法,該方法包含· 獲取對應於所再現之影像資料之拍攝資訊; 基於該拍攝資訊與儲存於記憶體中之標籤資訊的—比 較而獲取標籤資訊;及 基於該比較之一結果將標籤資訊疊印於該所再現之影 像資料上。 ~ 153600.doc -4·
TW100115656A 2010-05-14 2011-05-04 Information processing device, information processing system, and program TW201203170A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010111944A JP2011244058A (ja) 2010-05-14 2010-05-14 情報処理装置、情報処理システム、及びプログラム

Publications (1)

Publication Number Publication Date
TW201203170A true TW201203170A (en) 2012-01-16

Family

ID=44914154

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100115656A TW201203170A (en) 2010-05-14 2011-05-04 Information processing device, information processing system, and program

Country Status (7)

Country Link
US (1) US9191693B2 (zh)
EP (1) EP2569933A4 (zh)
JP (1) JP2011244058A (zh)
KR (1) KR20130085942A (zh)
CN (1) CN102884400B (zh)
TW (1) TW201203170A (zh)
WO (1) WO2011142093A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9823821B2 (en) 2012-04-11 2017-11-21 Sony Corporation Information processing apparatus, display control method, and program for superimposing virtual objects on input image and selecting an interested object

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120085474A (ko) * 2011-01-24 2012-08-01 삼성전자주식회사 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
US9317860B2 (en) 2011-03-08 2016-04-19 Bank Of America Corporation Collective network of augmented reality users
US9773285B2 (en) 2011-03-08 2017-09-26 Bank Of America Corporation Providing data associated with relationships between individuals and images
US9224166B2 (en) 2011-03-08 2015-12-29 Bank Of America Corporation Retrieving product information from embedded sensors via mobile device video analysis
US20120233033A1 (en) * 2011-03-08 2012-09-13 Bank Of America Corporation Assessing environmental characteristics in a video stream captured by a mobile device
US9317835B2 (en) 2011-03-08 2016-04-19 Bank Of America Corporation Populating budgets and/or wish lists using real-time video image analysis
GB2489685B (en) * 2011-03-31 2017-01-25 Geovs Ltd A Display System
US9432564B2 (en) * 2011-06-30 2016-08-30 Nokia Corporation Method and apparatus for tagging information based on contextual criteria
US8952364B2 (en) * 2011-11-10 2015-02-10 Nitto Denko Corporation Light-emitting devices comprising nanostructures
JP6044079B2 (ja) 2012-02-06 2016-12-14 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP2013161390A (ja) * 2012-02-08 2013-08-19 Sony Corp サーバ、クライアント端末、システム、およびプログラム
WO2013150724A1 (ja) * 2012-04-03 2013-10-10 パナソニック株式会社 送信装置、再生装置及び送受信方法
JP5965773B2 (ja) * 2012-08-06 2016-08-10 株式会社Nttファシリティーズ 変換装置、逆変換装置、変換システム、及びプログラム
US9294709B2 (en) * 2012-09-27 2016-03-22 JVC Kenwood Corporation Imaging device, image processing device, imaging method, image processing method, and computer program product
JP6157094B2 (ja) * 2012-11-21 2017-07-05 キヤノン株式会社 通信装置、設定装置、通信方法、設定方法、及び、プログラム
JP5450864B1 (ja) * 2013-02-01 2014-03-26 征治 久保 結合システム
US9719790B2 (en) 2013-03-15 2017-08-01 International Business Machines Corporation Mapping uncertain geometries to graticules
US9602129B2 (en) * 2013-03-15 2017-03-21 International Business Machines Corporation Compactly storing geodetic points
JP6225538B2 (ja) * 2013-07-24 2017-11-08 富士通株式会社 情報処理装置、システム、情報提供方法および情報提供プログラム
US9633083B2 (en) * 2013-12-05 2017-04-25 Lenovo (Singapore) Pte. Ltd. Organizing search results using smart tag inferences
KR102332752B1 (ko) * 2014-11-24 2021-11-30 삼성전자주식회사 지도 서비스를 제공하는 전자 장치 및 방법
US9858676B2 (en) * 2015-01-08 2018-01-02 International Business Machines Corporation Displaying location-based rules on augmented reality glasses
JP2016219980A (ja) * 2015-05-19 2016-12-22 株式会社パスコ 対象物情報表示装置
KR102647735B1 (ko) * 2015-06-11 2024-03-15 가시오게산키 가부시키가이샤 촬영 장치, 정보 취득 장치, 정보 취득 시스템, 송신 제어 방법, 정보 취득 방법 및 기록 매체에 저장된 컴퓨터 프로그램
DE112017004150T5 (de) * 2016-08-19 2019-06-13 Fyusion, Inc. Automatisches markieren von dynamischen objekten in einer multiview-digital-darstellung
US11294951B2 (en) * 2017-03-06 2022-04-05 Micware Co., Ltd. Information processing device, information processing system, and information processing program
CN107101633A (zh) * 2017-04-13 2017-08-29 清华大学 一种可呈现疏散指令的智能穿戴设备及疏散指令呈现方法
CN107454329A (zh) * 2017-08-24 2017-12-08 北京小米移动软件有限公司 信息处理方法及设备
JP6771503B2 (ja) * 2018-03-27 2020-10-21 株式会社日立製作所 データ管理システム及び関連データ推薦方法
JP7087844B2 (ja) * 2018-08-31 2022-06-21 トヨタ自動車株式会社 画像処理装置、画像処理システム及び車両
CN109625265B (zh) * 2018-12-11 2022-03-18 青海三新农电有限责任公司 一种无人机同步一体化勘测设计系统
CN109979468B (zh) * 2019-03-05 2020-11-06 武汉三江中电科技有限责任公司 一种雷击光学路径监测系统及方法
US11093691B1 (en) * 2020-02-14 2021-08-17 Capital One Services, Llc System and method for establishing an interactive communication session
JP7427615B2 (ja) 2021-01-04 2024-02-05 株式会社東芝 情報処理装置、情報処理方法およびプログラム
CN116805277B (zh) * 2023-08-18 2024-01-26 吉奥时空信息技术股份有限公司 一种视频监控目标节点像素坐标转换方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6222583B1 (en) * 1997-03-27 2001-04-24 Nippon Telegraph And Telephone Corporation Device and system for labeling sight images
JP3225882B2 (ja) 1997-03-27 2001-11-05 日本電信電話株式会社 景観ラベリングシステム
JP3695119B2 (ja) * 1998-03-05 2005-09-14 株式会社日立製作所 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体
JP4274656B2 (ja) * 1999-12-08 2009-06-10 カシオ計算機株式会社 カメラ装置及び被写体名称表示方法
JP2004333261A (ja) * 2003-05-07 2004-11-25 Fisheries Research Agency 水中観測記録装置及びその装置を用いて魚群情報をモニタリングする方法
JP4363642B2 (ja) * 2004-07-02 2009-11-11 富士フイルム株式会社 地図表示システム及びデジタルカメラ
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
KR100775123B1 (ko) * 2006-09-15 2007-11-08 삼성전자주식회사 영상 객체 인덱싱 방법 및 이를 이용한 영상 객체 인덱싱시스템
JP5396708B2 (ja) * 2007-11-28 2014-01-22 株式会社ニコン 電子カメラ

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9823821B2 (en) 2012-04-11 2017-11-21 Sony Corporation Information processing apparatus, display control method, and program for superimposing virtual objects on input image and selecting an interested object

Also Published As

Publication number Publication date
CN102884400A (zh) 2013-01-16
EP2569933A4 (en) 2013-11-06
WO2011142093A1 (en) 2011-11-17
US20120320248A1 (en) 2012-12-20
CN102884400B (zh) 2016-08-24
KR20130085942A (ko) 2013-07-30
JP2011244058A (ja) 2011-12-01
US9191693B2 (en) 2015-11-17
EP2569933A1 (en) 2013-03-20

Similar Documents

Publication Publication Date Title
TW201203170A (en) Information processing device, information processing system, and program
USRE43545E1 (en) Virtual skywriting
US9558559B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
US9646406B2 (en) Position searching method and apparatus based on electronic map
CN106170101B (zh) 内容供应系统、信息处理设备和内容再现方法
US20140300775A1 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
US20150187139A1 (en) Apparatus and method of providing augmented reality
JP2015505384A (ja) 画像アノテーション方法およびシステム
JP5467177B2 (ja) 情報提供装置、情報提供方法、情報提供処理プログラム、情報提供処理プログラムを記録した記録媒体、及び情報提供システム
KR20100065918A (ko) 사진의 촬영 위치 및 방향 정보 태깅 방법과 그 장치
CN111680238B (zh) 信息分享方法、装置和存储介质
JP2012053776A (ja) 表示画像検索装置、表示装置、表示画像検索システム、および、表示画像検索方法
CN112288878B (zh) 增强现实预览方法及预览装置、电子设备及存储介质
US20150185992A1 (en) Providing geolocated imagery related to a user-selected image
WO2016011763A1 (zh) 图像展现方法、装置、设备及非易失性计算机存储介质
KR20110094970A (ko) 멀티미디어 컨텐츠의 태그 관리 방법 및 장치
Verstockt et al. Geolocalization of crowdsourced images for 3-D modeling of city points of interest
JP6302421B2 (ja) コンテンツ検索装置、コンテンツ検索方法、コンテンツ格納装置およびコンテンツ格納方法
JP5739239B2 (ja) 撮影支援システム及び撮像装置
JP2011095867A (ja) 見所スポット配信方法および装置
KR20130082755A (ko) 사물 인식을 통한 서비스 서버 및 방법
JP2012208558A (ja) 表示制御装置、端末装置、通信システムおよびプログラム
JP2013214158A (ja) 表示画像検索装置、表示制御システム、表示制御方法、およびプログラム
US20210035343A1 (en) Apparatus, system, and method for data management, and recording medium
Park et al. Identification of scene locations from geotagged images