TWI231140B - Middle data editing device, middle data generation device, middle data transmission device, middle data searching device, middle data regeneration condition configuration device, and middle data transmission method - Google Patents

Middle data editing device, middle data generation device, middle data transmission device, middle data searching device, middle data regeneration condition configuration device, and middle data transmission method Download PDF

Info

Publication number
TWI231140B
TWI231140B TW092107243A TW92107243A TWI231140B TW I231140 B TWI231140 B TW I231140B TW 092107243 A TW092107243 A TW 092107243A TW 92107243 A TW92107243 A TW 92107243A TW I231140 B TWI231140 B TW I231140B
Authority
TW
Taiwan
Prior art keywords
intermediary
data
information
intermediary data
scene
Prior art date
Application number
TW092107243A
Other languages
English (en)
Other versions
TW200306114A (en
Inventor
Yoshimi Moriya
Hirofumi Nishikawa
Shunichi Sekiguchi
Yoshihisa Yamada
Kenji Otoi
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of TW200306114A publication Critical patent/TW200306114A/zh
Application granted granted Critical
Publication of TWI231140B publication Critical patent/TWI231140B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/785Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using colour or luminescence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1415Saving, restoring, recovering or retrying at system level
    • G06F11/1435Saving, restoring, recovering or retrying at system level using file system or storage system metadata
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/786Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Description

1231140 五、發明說明(j) 發明所屬之技術領域 裝置本ΐ:ΐ::ι中介資料編輯裝置、… 貝科傳送裝置、中介資粗认ί中介資料產生 # j生條件設定裝置及中介資料傳送二:裝置、申介資料 聲音的多i某體内容分、L,將包含影像及 個分割後的場景。 個…產生中介資料於每 先前技術 在習知的動畫營 二對各場景:重現所'必須的::& 二集合的索引做編輯,而製作:景號碼與代 会主在各索彳丨中賦予表示檢索目的於個以上之索 對標題對索引做檢索,並按心:之裝置,以 重現的裝置所構成。;號碼之順向 2: :t,:僅重現所需之場景(例如:Ϊ合併所須之 =―號公報,第1頁,第1圖)。本特開 :、、、而,在上述習知的動書管. 景重現所必須之區間資訊、場。^:主只不過藉由場 作中介身料,有無法管‘資 場景之影像製 資料的構造的問題。 像貝枓的階層性等及影像 顆逸:且ΐ Ϊ已登錄影像之際,因為用由索引 通進了,為传到適當的檢 :所賦予的標 這也是一個問題。 果乂y貝輪入適當的標題, 本發明之目的在提供— 決上述之問題,在場景之區:;:=:,置,為解 _ 面’可產生影 2031-5559-PF(Nl).ptd 五、發明說明(2) 象m今t:持構造索引資訊的中介資料。 介資料傳送ΐ置7供-種中介資料產生裝置、中 件設定裝置及中介料;索裝置、中介資料再產生條 置所產生的中介資料德,方法’用藉由中介資料編輯裝 用中介資料所記述的特徵;η::,:的場景’並使 發明内容 专倣里荨,可檢索想看的場景。 少包含動,、二i::^裝置設有:場景分割部,將至 景,並產生場景的區間媒體内容分割成複數個場 之每-場景的開始位匕:π介資料,以顯示已分割場景 據來自上述場景分割部的;::位置;4景記述編輯部’根 上述多媒體内容之上c間資訊中则,不進行 多媒體内容之階層構造:p:層的編輯’而產生記述上述 料記述部,統合上述區二::、;造資訊中则;中介資 中介資料,按照指定之^=巾介資料以及場景構造資訊 容與構造的中介資料。工生§己述上述多媒體内容之内 本發明之中介資料傳读 解析中介資料最佳化提示次f置設有··提示資訊解析部, 介資料之記述子的種類與二J::1Ϊ:f記述包含於中 部,根據關於上述所解柄 ,中’丨貝料解析·再產生 中介資料再產生的條件,解广資料最佳化提示資訊以及 之一的多媒體内容之内容 °己述至少包含動畫聲音其中 中介資料;中介資料傳逆2造的中介資料後,再產生第 针傳咬部,藉由上述中介資料解析弟 1231140 *------- 五、發明說明(3) 戶端。 對記述包 示資訊做 訊以及關 晝、聲音 做解析, 中介資料 再產i:日將:再產生之第二中介資料傳送至用 含於中介資料之印、ϋ傳方法包括下列步驟: 解析;奸摅^、+、σ述子種類的中介資料最佳化提 於中介‘料再產二解析之中介資料最佳化提示資 其件,對已記述至少包含動 而再產生第人a谷之内容及構造的中介資料 輪=戶第::介資料;將上述所再產生的第二 實施方式 以下針對有關於本發明杏 料編輯裝置、 第及第一實施例 有關於本發明之第二 伺服器、 伺服器、 器,根據 有關於本發明之例的中介資料產生 有關於本發明之第五的内容傳送系統 有關於本發明之第丄二鉍例的中介資料傳送 有關於本發明之第::施例的中介資料檢索 以及有關於本發=實:例的用戶端、 圖面加以說明。 貝施例内谷傳送伺服 第一實施例 於該第一實施例中 内容分割成複數個場景「制含動畫及聲音的多媒體 以及各場景特徵量之中介二士 τ=含場景階層的構造記述 輯裝置做說明。 為;’、引 > 訊)的中介資料編 對本發明第-實施…介資料…置…圓面 2031^5559-PF(Nl).ptd 第9頁 1231140 五、發明說明(4) _ =^ ^第i圖表示本發明第一實施 同的部分。方塊圖。而且’各圖中同-符號表示同―輯或破相 示部2在义中介資料編輯裝置100包括内容再生·顯 部5,文字;;;部3,樣本影像產生部4,·景記述編: A巾八+貝汛給予部6,特徵抽出部7,使用去^ 、扁軏 及中介資料記述部9等。 便用者輸入部8以 的編: ·示部2將由影像資料及聲音資料等構* ^ ^ yV ..之夕媒體内容做再生•顯示。場I ^ 冓成 = 數個場景。樣本影像產生部4^^^ 二3所八本晝面抽出。場景記述編輯部景的
產生等,對場Λ 化、場景的結合、場景關係資J 應於各場景的字資訊給予部6附加對 又心ΪΓ身訊。特徵抽出部7抽出場景的特徵。 景分則邱3样者+輸入部8係對應於内容再生·顯示部2、場 字資訊給予部6 部4、場景記述編輯部5以及文 入資訊U而輸出 者的指示資訊作為使用者輪 # $ Γ且,中介資料記述部9統合由場景分割部3、樣太π 被抽出部7所輸出的場景區間資訊中介資料12、場六樣太 畫面貝訊中介資料13、場景構造資訊中介資料14、文字次 訊中介資料15以及特徵記述中介資料16,並產生按照規= 之格式對多媒體内容之内容及構造做記述的中介資料Η。
2031-5559-PF(Nl).ptd I麵 第10頁 1231140 -------- 五、發明說明(5) 作,參照圖:ΐ :弟;2貫:表例二中,資料編輯裝置之動 料編輯裝置之編輯對象之一例心f 一實施例之中介資 首先,輯構二新聞畫面為例做說明。 當記憶於内容記 圖°之内容再生·顯示部2, 容1。經由網路等輪入時,做編輯容等的多媒體内 中介資料編輯裝置100的使?放、顯不。 作為場景而切出的位置,即場到播放的影像, 由輸入部8輪入時,場景分割部3產K位3終了位置藉 的開始位置盥炊了 屋生顯不由使用者所輸入 第3圖Α、二的場景區間資訊中介資料12。 第3圖為本貫施型之中介資 =竹 部之場景之區間資訊中介資料編輯裝置之場景分割 對應於從新聞蚩面内二子。第3圖所示,由場景分割部 聞」以及「新聞摘要」、「國内新 置與終了位置之 i專各穷厅、,而產生表示場景開始位 在場景的Λ間用資:中介資料12。 生場景編輯指令::插二使用者經由使用者輸入部8產 訊中介資料12,在場:場景分割部3的場景區間資 編輯,而輸出場旦μ刀口口p不做連續切出的場景階層 2而輸=场“冓造資訊中 =例如場景的群組化、場景的再分割的; 景的刪除。所謂場景的群組化,例如從表二v的新场 麵
IIH 2031-5559-PF(Nl).ptd 第11頁 1231140 五 發明說明(6) 口晝面’例如第4圖所示之「國内新聞」、「國際新 集U濟新聞」等在某特定之特徵上有關連的場景藤 :判成、固齡新聞」#組。又’場景之再分割係將-個場旦 一個場景。 。係將稷數個%景匯集成 述編C第—實施型態之中介資料編輯裝置之場景圮 之、扁輯4之場景構造資訊中介資料之一例。 厅…己 述編ΐ :::所示之場景構造資訊中介資料14記述場景-己 在、ί4圖輯的結果t所產生的畫面内容之階層構: 二景:再分割、場景之結合等 =景= = 集m編=「新聞摘要」、「新聞:特 聞」、「國際新聞」、「經濟新n新聞」、為輯成國内新 然後,在場景編輯部5產生:」二;層::。 14,^山圖所不的中介眘姐 輸出至中介資料記述部9。 貝枓 一方面’在樣本影像產生部4 的場景區間資訊中介資料12 根據來自h分割部3 場景中產生代表影格所切出的各 的樣本資訊作為樣本畫面資訊中八為&樣本里面,將所產生 記述部9,並登錄於中介資 /^貝料13輸出至中介資料 使用者輸入部8,可進杆枵太二述邛9。於此,使用者經由 與固定時間間隔之複數影格作選擇’自動地將先頭影格 景變換點,該等場景亦可作為代表;:格樣=
2031-5559-PF(Nl).Ptd 第12頁 1231140 五、發明說明(7) __ ;丨資料1 3成為影像内容中的樣本 間),或樣本畫面之飢等的位置資衫格編號或時 間資:中ί=Γ2出:7各’二據中來自广景分割部3的場景區 =場景内的物件之形狀等,ς景維或包含 為特徵記述中介她心以:= 又’在文字資訊給予部6,根據來自揚旦八 ί區:Γ中介!料12,相對於各場景,使V者 訊。文字資訊的給予,當從使用】J”:各種文字資 j藉由解析包含於内容之聲音資訊及字幕 予。文字資訊作為文字資訊中 :”: 記述部9並登錄在中介資料記述部^5冑出至中介資料 第5圖表示第一實施例之中介資料編輯裝容 i播:用者輸入部8之晝面影像例。在第5圖中二 =當於内容再生、顯示部2之畫面影像例, 播放 「停止 迴 ί二雖:明面G1中’對編輯用内容做再生、顯示。在 第5圖中’雖未明示,但具有「城, r,^· 轉」、「快轉」、「邊看邊抑 1wΝ —」: 般影像播放設備所且有的使用丄J放用的指示按鈕等,一 放畫面G1的下方Hi 介面。錢’在該影像播 -*^Γ9倒4 f不%厅、刀割指示畫面G2。該場景分割指 不晝面G2,例如成為幻燈片之 m ^ ^ 放畫面G1的影像,使用者可扑,〆,』不於影像播 考了“不顯示於影像播放畫面G1之 2031-5559-PF(Nl).ptd 第13頁 1231140 五、發明說明(8) 影像場景之開始位置盥炊 G2可同時在場f 了位置。又,場景分割指示畫面 位置。☆此終了位置之間,指示樣本的 時,從影像内容之所扣不畫面以指定樣本之位置 產生樣本影像。 3疋之位置之影格樣本影像產生部4 係作為場t的分:彳;:晝面G2 ’指定位置的樣本影像 G3。在該場景;=顯:於場景分割資訊顯示畫面 第3圖所示之每^貝/顯/乂㈣中,樣本影像之外,如 的資訊。 7、”示場景之開始位置與終了位置 接著’在樹狀結構產生指 使用者而指示場景之編輯。』:者;貝::面G4中’對應於 訊顯示書面G3的# m &使用者見到顯不於場景分割資 像内容階層、纟的場景分割資訊,產生表示影 狀結:如進行場景群組化的狀態中,在樹 景。場旦ΪΓ 並追加在該節點上已群组化的場 等的方法。在場景分 r〇p在即點上追加場景 -^ * .04 ^ ^ I ;8 ^ 應:該場景’經由文字資訊給予部6而;:字 Κι:;二可輸入對應㈣景:文二^ 部4、場Λ 統合由場景分割部3、樣本影像產生 °迷、為輯部5、文字資訊給予部6以及特徵抽出 2031-5559-PF(Nl).ptd 第14頁 1231140 五、發明說明(9) 部7所輪出的各種中介資 生中介資料擋。中介資料,並伴隨規定的記述格式而產 義之格式記述。在第二每之規定之記述格式亦可用獨自定 肝別-7。該MPEG_7規施例中,使用以ISO所標準化的 ml檔案袼式與二進位的述内容之構造與特徵的格式, 接著,如第一 的槽案格式。 設有階層地編°輯;【:::::::編輯裝置100 ’由於 特徵的特徵抽出部7, ’、°己述、·爲輯部5以及從場景抽出 層式構造與各場ft^^可/生記述影像資料等内容之階 而且,内容介資料。 設為從網路上所且有的内Γ °卩2輸入的多媒體内容10係假 況,從中介資料編=二伺二 示)取得的狀況,從⑶及,儲:媒部(未圖 的狀況等種種狀況。同人ϋ體(未圖示)取得 介資料係假設為儲存至網路L :::2述部9輪出的中 2的狀;兄,儲存至中介資料編輯裝置 :(未圖 吞己憶部(未圖示)的狀況,儲存至CDADVD^t的内容 (未圖示)的狀況等種種狀況。 洁存媒體 又,在第一實施例中雖設有場景記述 抽出部7之兩者,但不限於此,僅設有場景輯/5與特徵 又僅設有特徵抽出部7亦可。 °述編輯部5, 第二實施例 在上述第一實施例中,場景的分割全部以 — 但在第二實施例中,針對具有自動檢出場景變換點=景 2031-5559-PF(Nl).ptd 第15頁 1231140 五、發明說明(10) 變換:出部的資料蝙輯裝置做說明 圖面而說明。二Λ二實施例之中介,料編輯褒置,參照 輯裳置之構造的方塊圖不。本發明第一貫施例之中介資料編 輯部5、文字資$:! =、樣本影像產生部4、場景記述編 8、中介資料記述予部6、特徵抽出部7、使用者輸入部 號40為自動檢出Λ 場景變換點檢出部39。而且,符 7目動檢出之場景開始位置資訊。 付 ^ 2著,針對該第二實施例之中介資料編輯f i 11 作,參照圖面做說明。 、了叶 '屏輯裝置之動 之動^7。圖°兒明本發明之第二實施例之中介資料編輯裝置 述第一;$ =占3出部3 9與場景分割部3以外的動作*上 場二實施例特有的動作做說明 料她认k換檢出邛39自動地進行場景變換、停止。:P旦 根T列如影格間像素差分、影格間的顏色、:二 =:=3。9所檢出的場景變換點,決定場景的開始 於此,對於場景變換檢出39 理,=象之内容以新聞影像之狀心二的明處。 作為供場景變換檢出之特徵量,以 的狀況為例做說明。 使用顔色之條f圖
1231140 五、發明說明(11) 在場景變換檢出部3 9,算出每一顏色之條帶圖。作為 表色系的有HSV、RGB、YCbCr等。在此使用HSV色空間。該 HSV色空間由色相(η )、彩度(S )、明度(V )之三要素 所構成。异出各要素之條帶圖。接著,由求出的條帶圖 根據例如下述之(式1 ),算出影格間的條帶圖差分。 場景之開始影格起,Ν個影格為同一場景(例如Ν = 3 攸 假定為非場景變換點。而且,作為場景之初期特徵旦,’即 據下述之(式2),求出最初1^影格間之條帶圖差二^根 (mean )與標準差(S(j )。 <平均 (式1 ) s u 111丨:影袼i與影袼i 一 Hi (h ) ·色相的條帶 Si ( h ):彩度的條帶 Vi (h ):亮度的條帶 1 ΛΜ 1 ί=1 ㈣1 — Wf_卿g _ _ Sm㈣+|丨糊_ (利 1之間的條帶差分和 ’bin — Η :條帶的要素數 ’ bin — S :條帶的要素數 ’ bin —V :條帶的要素數 ^ ΛΜ ' J^X(sum^mean)2 (式2 ) mean :影格間之條帶差分的平均 sd :影格間之條帶差分的標準差 然後 N+ 1個衫袼以後,將條帶圖之影格間差分比 2031-5559-PF(Nl).ptd 第17頁 !231140 五、發明說明(12) 而成為新的場景 ,著,如新聞影像 衫像插入的狀況。 播報員為背景之攝 影像等經常性樣式 經常性之影像(稱 的中介資料預先做 像顏色之條帶圖, 攝的部分動作較少 如第7圖所示,進 之比對,在相似度 之開始位置而登 差分與影格間顏色 的狀況下,從對應 本影像的特徵量做 變換點作為場景開 出至場景分割部 mean+ Λ · sd大的影格作 開始位置候補。 乍為%不變換點 妒=之開始位置候補得到複數個, '2 f以新聞之切換等經常性樣式的 ::影像係用新聞的切#,例如以 二L!;說明文,(字幕)所構成的 之為範本影像f J 將記述該等 八像)、或範本影像之特徵量 =作=範本影像之特徵量為範本影 ;j作樣 < (用新聞之切換,播報員拍 ^ 事先登錄範本影像的狀態中,例 二於场景變換點的影像與範本影像 =、士况下,將該場景變換點作為場景 ϊ帶:i;似度的比對’具有影格間的 μ +日ί樹在範本影像之特徵量預先登錄 :琢厅、是換點的影像抽出特徵量,與範 Ξ f里在相似度高的狀況下,將該場景 °。而登錄。場景開始位置的資訊輸 P旦=厅、分割部3,根據以場景變換檢出部39自動檢出的 汗始位置資訊,決定場景之開始位置以及終了位置。 在第二實施例之場景分割部3中,與上述第一實施 第18頁 1231140 五、發明說明(13) 決定場景之開始位置以 例相同,根據來自使用者 及終了位置。 曰 在場景分割部3,記述場旦 景區間資訊中介資料12輪4至厅場ϋ置與終了位置的場 變換檢出部39,檢出包含於 :釔換檢出部39,用場景 在場景記述編輯部5,根:V、自的Λ景, 間資訊中介資料〗2,對場旦豕厅〆刀割部3的場景區 景做在分割或統合。而且,尸旦欢出部3 9所自動檢出的場 述第一實施例相同。 劳厅、記述編輯部5之細節與上 接著,第二實施例之中介 一實施例相同,產生記述旦次粗楚裝置1⑽Α與上述第 場景之特徵量的中介資料=二=谷之階層構造及各 二可自動檢出内容之場景變換點。 …奐檢出 第二貫施例 第三實施例中’利用藉由上述第一及每 料編輯裝置所產生的中介資料,針對進行 放一檢索等的中介資料再生裝置做說明。 要播 針對本發明之第三實施例之中介資料再生裝置, =圖面做說明。第8圖為本發明之第三實施並多 再生裝置之構造的方塊圖。 ,丨貝枓 在=8圖中,中介資料再生裝置2〇〇包括中介資料解 。丨、構造顯示部20、樣本影像顯示部21、使用者輪入立 2 2、檢索部2 3、檢索結果顯示部2 4、摘要製作部2 5、摘^ 構造顯示部2 6以及内容再生部2 7。 第19頁 2031-5559-PF(Nl).Ptd 1231140
五、發明說明(14)
中介 及各場景 料28做解 得的場景 顯示從中 使用 係根據使 所取得的 顯示部2 6 據摘要資 做再生· 資料解 之樣本 析。構 構造29 介資料 者輸入 用者的 場景特 顯示所 訊3 5、 顯示。 析部1 9 有關的 造顯示 ,即内 解析結 部22進 檢索指 徵量與 摘錄的 内容再 資訊、各場景的 部2 0顯不從中介 容之階層構造。 果所取得的樣本 行檢索與播放等 示(檢索條件3 1 文字資訊32而進 内容之構造3 8。 生指不36、再生 容階層之場景構造 特徵量等的中介資 資料解析結果所取 樣本影像顯示部2 1 影像資訊3 0。 的指示。檢索部2 3 )以及從中介資料 行檢索。摘要構造 内容再生部2 7係根 的内容37而對内容 接著,針對第三實施例之中介資料再生裝置的動作並 參照圖面而做說明。 首先,中介資料解析部1 9將記述關於内容之階層的場 景構造及各場景之樣本的資訊、各場景之特徵量等的中介 資料做為輸入,並進行中介資料的解析。 在第三實施例中,該中介資料2 8,由於用上述第一、 二實施例之中介資料記述部9產生的MPEG — 7規定的格式做 記述,故中介資料亦可為用XML記述之文字檔,及用二進 位格式做符號化的二進位播。 因此’若中介資料28用XML做記述,則中介資料解析 部19保持做XML格式解析的xml分析功能。又,中介資料28 若用二進位格式做符號化,則具有回復中介資料28的解碼 功能。
2031-5559-PF(Nl).ptd 第20頁 1231140 五、發明說明(15) 構造顯示部2 0輸入中介眘粗s 顯示内容階層的構造29。内容之場旦:1:的解析結果,而 與各場景的標題共同以樹狀結構表:。造如第4圖所示, 樣本影像顯不部2 1輪^入·咨在、丨& 檨太與偾眘_、 Γ 枓解析部19的解析結果 樣本〜像貝桌30 ),顯示内容之樣本影像之全 _索部2 3經使用者輸入部2 2並藉由來自使用者的檢索指 ^,對包含於内容的場景進行檢索。此 浐 ::藉由關鍵字及樣本影像之提示,,輸入檢 在檢索部23,根據記述於中介資料的場景之特徵量及 J標題等的λ字資訊32,㈣一致於從使用者所提示的: 索條件(關鍵字及樣本影像之特徵)32的場景檢索。 檢索部23做的檢索終了時,檢索結果顯示部24 索部23之檢索結果,並顯示檢索的結果。作為檢索結果二 表示方法,例如顯示符合檢索條件的場景樣本影像= 、 又’摘要製作部25係根據經由使用者輸入部22的使用 者摘要指示,製作内容的摘要。此時,在使用者輪入部 2 2,輸入所摘錄的内容之再生時間及使用者嗜好等資1 例如内容或新聞影像的狀況下,想在中心見到新聞^ $運 動’或將1小時的新聞摘錄成2 0分而輸入想看的使用者的 嗜好資訊。又,在摘要製作部25,根據記述於中介資料的 場景再生時間及場景的標題等文字資訊,製作符合摘要條 件的摘要資訊35。該摘要資訊35係包含於所摘錄之内容的' 場景再生清單,内容的URL等的位置資訊係該内容中再&生、 的場景之開始位置與終了位置之列表清單。
2031-5559-PF(Nl).ptd 1231140 五、發明說明(16) 的内i之二根f;含於摘要資訊35 的場景清單,做再生,根據包含於摘要資訊 丹生之%厅、的取得•再生•顯示。又,作 另=的例子/摘錄摘要資訊的場景構造做階層的記述。 一 〃 9囷表示所摘錄的場景構造做階層的記述之一例。 】圖(a )表示原始内容之場景構造的例子。對於各場 :重要度以〇 · 〇〜1 · 0的範圍做附加。1 · 0意謂重要度最 :妊:〇钟〇曾思。二重要度最低。重要度例如係根據使用者的 :審έ士 i二-〔如’關於A隊的& $求的比赛,特別是作為 =、:果的付“暴景 '給予在I場景反映使用者嗜好的重 要時然Ϊ二=l(a)中,產生重要度最高的場景的摘 要時,摘錄的场景構造如圖(b)所示。而且, 持包含該場景的内容之UrI黧你番次 彳 > ’…、 内之位置資訊(開始位置盥玖了貝Ύ、 s亥场景之内容 所摘要的場景構造3二以= 資料。關於 ^ ^ ^ __ 旧貝Λ 到達摘要構造顯示部2 6。該 f要構造顯示部26以所摘要的場景構造為例,在第9圖(b )以條列之型態表示。 仕弟y圖⑼ 亍-二ιίϊϋί輸入部22 ’ j吏用者選擇顯示於構造顯 不。卩20或摘要構造顯示部26的場景構造,以及顯示 索結果顯示部24各場景之樣本中再生的 場】:在内容再生·顯示部27包含於内容之 接者’第三實施例之中介資料再生裝置2〇〇中,使用 第22頁 2031-5559-PF(Nl).ptd 1231140 五、發明說明(17) — 2由在上述第一、第二實施例說明之中介資料編輯裝置所 兮生的中介資料,只收集使用者想看的場景而再生,使用 °己述於中介資料的特徵量而檢索想看的場景。 八次又,在第三實施例中,内容再生·顯示部27係位在中 ^貝料再生裝置200内,即使内容再生•顯示部在另一裝 人^亦可。例如場景之構造及樣本影像之顯示等,關於中 ^ = ϋ再生的操作及顯示,在行動電話及行動資訊終端穿 在行而關於多媒體内容之再生的處理及顯示係經由 動電话及行動資訊終端裝置等的網路而連接 置(例如PC等)實施。 、鳊裝 第四實施例 在第四實施例中’將内容之中介資料對應於用戶 π二中介資料傳送飼服11 (中介資料伺服裝置)、、,、2 “傳終端的終端能力逐級地形成而傳送的 奋得迗伺服态,對此加以說明。 < 幻 以說:對iry四實施例之内容傳送系統並參照圖面加 方塊圖。圖表不本發明第四實施例之内容傳送系統之 器40 0第?二二容l。,3。0具有中介資料傳送伺服 50 0。 〜知481—48η,以及内容傳送伺服器 資料專由中介資料累積部41,中介 ^ ^月匕力判定部4 3,中介資料具姦止 以及中介資料傳送部45所構成。 U再產生部44 2031-5559.PF(Nl).ptd 第23頁 1231140 五、發明說明(18) 在中介資料累積部4 j中, 例之中介資料編輯 由、人 σ述第一、二實施 42進行對所記述= = 資料。中介資職 :端能力判定部43係:;:;::::::資㈣解析。 產,所再產生的;:二 〜48η。 合種用戶終端481 、、,且’中介資料累積部41設於第四實 1伺服器4〇。外亦可。在該狀料1中介資料傳 400係經由網路(去η Τ 甲;丨貝枓傳送伺服器 介資料49。(未圖不)等從中介資料累積部41輸入中
部47 ^構^谷傳送饲服器5〇0由内容累積部46與内容傳送 内容累積部46係累積内交R 戶終端481〜48η的内容傳逆亜七。内谷傳达部47係根據用 鱼卜士二^傳迗要求54而傳送内容56。 累積部46:於内;= 服器的狀況相同,内容 内容傳送伺服器二=二了 (° =可^狀況下, 料55。 路(未圖不)荨輸入中介資 接著,針對本實施例4 + 圖面做說明。 内容傳送系統的動作並參照 部4心積ίΚΠΠϊί1服器側,中介資料解析 介資料解析部42之動作為與:4二析。* 、上述第二貫施例之中介資料再
2031.5559-PF(Nl).ptd 第24頁 !23114〇 五、發明說明(19) 資:解析部19相同。中介資料解析部a =由中介資料的解析,取得關於各内容之構造與特徵的資
第11圖表不該第四實祐办丨士人-欠、丨A ^ 41 ^ ,,只她例中介資料輪送伺服器之中介 析部所輸出的内容(新聞影像為例)之構造資訊。 對應於各場景,在各節點對應加上各種 心:Λ L场厅、貝讯為場景的標題、摘要、場景開始與 i景的樣本、代表影格、樣本鏡頭、代 且u與動作等視覺的特徵量等的場景特徵。而 圖中’在各種場景資訊中,僅圖示場景的標題。 電。in 定為終端能力不同之各種的資訊家 像格式、影像解供庚:田ί 度、可再生·顯示的影 ^481 r - ^ y-斤又使用者輸入功能等。例如,用戶終 i入功λ通訊速度、處理速度、顯示性能、使用者 從各用戶炊心了動電外 戶終端假定為PDA等。 終嫂=Ϊ 811傳送個別之關於終端性能的資訊。 終端性能疋部Μ對從各用戶終端481〜4811所傳送的 影像解析度:内=产冗工的影像格式、最大 出。例如,;^ ί長度等’肖中Μ ^料再產生部44輸 像内容Μ θ ^ Ώ内容為用肌^ — 2符號化後之解析度大的影 ϊ原=Γ:,在具有相當性能的用戶終柳,可再 又’該用戶終端481具有上述第三實施例所 2031-5559-PF(Nl).ptd 第25頁 1231140
五、發明說明(20) 說明的影像之摘要可再生及檢索的功能。一方面,在用戶 終端482僅可再生用MPEG-4符號化後較短的影像,且可顯 示的最大解析度亦較小。 在中介資料再產生部44,根據來自終端能力判定部U 之各用戶終端481〜48η的終端性能而重組内容,並再產生 記述其構造與内容的中介資料5 2,輸出至中介資料傳送部 45。例如,相對於用戶終端481,由於按照原始内容傳° 送,故無法進行内容之重組。繼而,用重要場景之短 像鏡頭重組内容。 〜 第1 2圖表示由第四實施例之内容傳送系統之中介資料 再產生部重組後之内容的構造例。如第丨2圖所示,從各新 聞2場景中,抽出重要的場景,該場景之代表鏡頭僅用代 表影格所組成。又,用戶終端482由於不具有上述第三每 施例所說明之檢索功能,故在場景的各種資訊中,不必只 用於檢索的場景特徵量記述於中介資料。於此,中粗 再產生部44以已重組的場景構造,再產生謹記述該場景之 2表鏡頭或代表影格之位置資訊的中介至 介資料傳送部45。 儿和it!至中 該中介資料傳送部45將中介資料再產 中介資料53傳送至用戶終端481〜48n。 斤產生的 介資f481〜48n對中介資料傳送部45所傳送的中 端481' 48析,並取得内容的場景構造資訊。各用戶铁 Γ置資〜=使用者選擇已再生的場景時,所選擇的場景 位置貝訊攸各用戶終端481〜48n向内容傳送/
2031-5559-PF(Nl).Ptd 第26頁 1231140 五、發明說明(21) 傳送。 在内容傳送伺服器500的内容傳送部47,取 戶終端48卜48n傳送的場景位置資訊,並取得由各用 部46對應的内容55,向各用戶終端481〜48n傳送。在2 終端481的狀況下,傳送場景的開始位置盥故 戶 傳送^始内容之對應場景。又,用戶終端482的狀況下並 傳达場景之代表鏡頭之所在資訊(UR丨等)。而且, 鏡頭在用戶終端482不可再生?顯示之影像 代表 度、影像播案大小等的狀況下,在内:=4、7影:= =解析度轉換,進行為錢案大小變小而做㈣摘= 繼而,由本第四實施例之中介資料傳送 根據各用戶終端481〜48η之能力而在產生中人$态400, 傳送至各用戶終端。 生中"資料,而可 而且’在第10圖中’表示中介資料僂 内容傳送伺服器5 00個別之構造。在本發明S、服态400與 此,亦可在中介資料傳送伺服器中設有内容並不限於。 或者是内容傳送伺服器中設有中介資料傳=送=服器, 此,内容傳送部47由於易於從自終端能力二^服器。若如 用戶終端481〜4811的能力,因此可重組根摅^部43知悉各 481〜48η的能力轉換格式的内容,而傳 用戶終端 481〜48η。 1寻送至各用戶終端 又,在該第四實施例中,累積於中介★ 中介資料係以上述第一、二實施例之中人斗累積部41的 T ;1資料編輯裝置產
1231140 發明說明 二實施例以 生者做說明,但並不限於此,累積上述第一 外之中介資料編輯裝置產生的中介資料亦可 第五實施例 在省第五實施例中,說明用上述第四實施例說明的中 介資料傳送飼服器之另 <列。在上述第四實施例之中介資料 傳送祠服器中,根據從用戶終端傳送來的終端資訊而進行 中介資料之再產生。在第五實施例中,為進行較佳之中介 資料之再產生,使用供中介資料做再產生的提示資訊的中 介資料最佳化提示資訊,而針對具有做中介資料之再產生 的中介資料解析•再產生部的中介資料傳送伺服器(中介 資料傳送裝置)做說明。 在第13圖中,中介資料傳送伺服器4〇〇人具有提示資訊 解析部6 1、中介資料解析•再產生部6 3以及中介資料傳送 部 4 5 〇 、 提示資訊解析部61將中介資料最佳化提示資訊6〇做解 析並輸出該結果。中介資料解析?再產生部63係根據所解 析的中介資料最佳化提示資訊62、關於用戶終端之性能的 資訊、或者是關於使用者偏好等的中介資料再產生的條件 65,對記述内容之構造與特徵的中介資料49做解析而^出 重組後之中介資料64。中介資料傳送部45將中介資料^ 送至用戶終端。 在中介資料累積部41 (參照第1 〇圖)中,累積有記述 内容之構造與特徵的中介資料4 9與供再產生中介資料49 ^ 提示資訊的中介資料最佳化提示資訊6 0。供再產生中介^
1231140 五、發明說明(23) 示S'的中介資料最佳化提示資訊6〇為在該中介 ΐΓ複ί度 類的資訊,並記載中介資料49之概 、接著,針對該第五實施例之中介資料傳送伺 作並參照圖面做說明。 σ 、 最佳第,二示的構造影像内容為例,針對中介資料 琅侄化提不資訊6〇而詳述。 影像内容(Root ) (Soccer game program )係由二 ,大f景(SCene 1,Scene2)之前半場與後半場所構 成。前半場之場景由複數個場景(Scenel —丨, 二:’ Scenel—n)所構成。在第14圖中,場景間 的時間P自層構造以樹狀結構表示。 ^在對應的中介資料49中,如此的内容之時間的階層構 =j即記述場景間之時間的關係、各場景之開始時間與長 又又’相對於各場景,根據階層性的級別,除了該場景 7保有的特徵(例如顏色的條帶圖及動作之複雜性)之 I呈产^ °己述標題、摘要、形式、註釋等的文字資訊及重要 : 而且,在本實施例5中,使用ISO標準化的MPEG-7 作為中介資料之記述格式。 ^ ^ 5圖表示用MPEG-7記述中介資料的例子。用MPEG-7 述在?為影像區段」(Video Segment)為單位而記 ^ 枵f影像區段中記述時間資訊(場景之開始點與長度 守、;It二Ϊ、概要、形式等。而且,根據影像區段的階層’ ° “ ;影像區段内的資訊有不同。在第1 5圖的例子中,在 2031-5559-PF(Nl).ptd 第29頁 1231140 係再回 藉由所 做時間 述内容 」的記 的「空 的中介 的資訊 佳化提 現内容 色條帶 形式、 性的指 等級4、 .75,1 的觀點 重要度 段的哪 佳化提 料最佳 成要素 五、發明說明(24) 第2級與第3級之影像區段中 級未記述重要程度。又,色 像區段内。 場景間之時間的階層關 現。在第1 5圖的記述例中, 述’一個影像區段由複數個 成。用MPEG-7亦可同樣地記 該狀況中,所謂「時間分割 個座空間分割的區段所構成 供中介資料49之再產生 記述著包含於該中介資料4 9 容者。然後,在中介資料最 15圖之中介資料,包含有表 (「時間分割」),表現顏 子,以及表現標題、摘要、 作為表示記述之内容及複雜 造的深度最大為4 (等級1〜 的值({〇.〇,〇.25,〇_5,0 的觀點’記述在「teanl A」 「team B」的觀點觀察時的 的階層位置(記述於影像區 第16圖表示中介資料最 子。表示於第16圖的中介資 資料格式資訊及中介資料構 、°己述有重要程度,但在第4 畢及動作之特徵量僅記述於影 復地記述影像區段而表 謂「時間分割」的記 分割的影像區段所構 之空間的階層構造。在 述’用一個區段由複數 間區段」的記述代替。 資料最佳化提示資訊60 (記述子)之種類及内 示資訊60中,相對於第 之時階層構造的記述子 圖及動作複雜性的記述 重要度的記述子。又, 標’影像區段之階層構 。重要度為五個離散 • 〇})。作為該重要度 觀察時的重要度及在 。又亦包含記述重要度 個等級)。 示資訊6 0之格式的例 化提示資訊6 0包含中介 資訊。
123114〇 五發明說明(25) 中介資料袼 案大小、中介資 等格式)、中介 才當案的位置)、 里的出現要素數 中介資料的累積 料必須的處理系 介資料檔案格式 0中’規定該記 而語法檔案資訊 中介資料構 類與記述該内容 有包含於中介資 内出現的頻率( 述(完全記述性 下,该記述子包 1 5圖之中介資料 §己述子,由於最 階層深度最大為
式資訊對中介資料檔案位置、中介資料檔 料檔案格式(表示XML格式、二進位格式 資料檔案資訊(規定中介資料語法之語法 表示包含於中介資料(出現)的要素之數 等’預測供處理中介資料必要的資源(為 •解析必須的記憶體大小及為解析中介資 (S/W ))的資訊做記述。而且,規定中 的語法檔,例如中介資料用XML記述的場 述格式(語法)的DTD檔及schema檔等, 冗述DTD檔及schema檔等語法稽的所在。 成要素資訊為構成中介資料之記述子的種 的資訊。在該中介資料構成資訊中,包含 料的記述子之名稱、該記述子在中介資料 次數)、是否包含語法的全部記述子的記 )、又在該記述子再回復地記述的狀態 含時間或空間的階層性。例如,表示於第 記述例中為再回復地記述「影像區段」的 大為四階層的構造,「影像區段」記述子 1Z9 〇
贫士 ^ Ϊ ’對於包含於再回復的記述子内的記述子而言, :5 '出現的位4 (階層亦為提示資訊。例如,「重 二」為包含於「影像區段」内的記述子,包含於等級3 ^,化衫像區段」,即,不包含於等級4的影像區段 要度」出現的位置最大到等級3。而且,像這樣
第31頁 五、發明說明(26) 雖然出現位置可用階層等級指定,包含「重要彳 ΐ =現位=iD被「影像區段」本身拒絕:狀:中影 了將出現位置作為iD的清單而記述中 記述子的狀態中,記述子的型態與記述子==持的 …示資訊之_。例如重要度分別二:::值的範圍
Team B」的觀點,用五個離散的值」 。·5,U5,U"所表現的狀態下,:重0要;^25二 值為浮點數型的清單ί 0.0,0.25,0.5,〇 公传5 個中介資料的記述子反覆以上之記述。 .丨。母 第Π圖表示遵照第! 6圖之格式所記述之 化提不資訊之一例。纟示於第i 7圖之伟;卜,佳 資訊60之一例中,包含中介資料 貝科最佳化提示 區段」盥「f顥 μ +入t #式貝訊以及所謂「影像 匕权」興私題」的中介資料構成要素資訊。 〜 入吹ίί:使用中介資料最佳化提示資刪,針對實施中 介資料再產生的手法,用第13圖做說明。 t于實細中 在提示資訊解析部61中,用規定的格 的中介資料最佳化提示資訊6〇之解析。 料=v Ϊ =佳IK由,訊解析部心=2的 中二貝枓最佳化k不資訊62,而進行中介資料“的 =據中介資料再產生的條件65,輸出再產生的中介資料 讲· 示使用已解析之中介資料最佳化資編的解 Ή太* :6!之中介資料解析方法之-例。在此例中, 從土本之中,「貝料49 ’僅將保有重要度〇.5以上特徵的影 1231140 五、發明說明(27) 像區段抽出,所抽出 y 像區段而再產生所播士衫像區段,僅記述關於已抽出的影 傅烕的中介資料。 生二5 : = 再產生部63由供中介資料再產 由於僅抽出伴右i t 的中介資料(步驟一)。於此, 户乃厂史,、有重要度〇·5以上特徵的影像區段,「重要 又」1 區段」為再產生所必要的特定記述子。 定中介ΐ料3:解析的中介資料最佳化提示資訊62,判 又甲)丨貝枓49在步驟一是否 記述子「重 疋否包3特疋之圯述子(以下,以 「 要度」為例做說明)(步驟二)。 介資ί: Li度i記述子包含於中介資料的狀況中,做中 m析(步驟三),$包含「重要度」記述子的狀 况下,中介資料的解析處理結束(步驟四)。 又,在所解析的中介資料最佳化提示資訊62中,「重 下,i=:見Γ/指定為到階層構造之等級3為止的情況 4、及3為止的影像區段之解析結束的時間點(步 理(步驟行對等級4以下的階層的解析而結束解析處 而且,由於根據需要而進行其他的中介資料49的解 析,重複步驟一以後的處裡。又,在所解析的中介資料最 佳化提示資訊62中,「重要度」記述子出現次數指定為2〇 的情況下,在2〇個「重要度」記述子解析完畢的時間點 (步驟五),中介資料的解析結束(步驟六)。最後,在 步驟四或步驟六中介資料的解析完畢後,由於根據需要而 進行其他的中介資料的解析,重複步驟一以後的處裡。
Hi 2031-5559-PF(Nl).ptd 第33頁 1231140 五、發明說明(28) 第1 9圖表示使用 的中介資料解析方法 「標題」記述子的影 中是否包含「標題」 中介資料解析· 述子的情況下,判定 所記述之出現位置ID 與ID不一致的情 影像區段,故省略該 與ID —致的情況 進行該影像區段記述 其次’與出現位 情況下(步驟十七) 像區段不存在於中介 所解析 之其他 像區段 記述子 再產生 是否為 一致的 之解析 置ID — ,以上 資料内 之中介 例。在 而再產 之判定 部63, 與中介 影像區 由於為 段記述 於取得 (步驟 致的所 由於包 ,解析 資料最佳 該例中, 生中介資 與第18圖 在中介資 資料最佳 段(步驟 不含「標 之解析( 「標題」 十五)。 有影像區 含「標題 處理結束(步驟 資訊62 包含 介資料 相同。 標題記 資訊62 段解析 」記述 而且,由於根據需要進行其他的中介資料之解析, 複步驟十-以後的處裡。通過以上的解析處理,把用所抽 出之記述子而重組的中介資料6 4做輸出。
在中介資料傳送部45,將已重組的中介資料64 各種用戶終端。 I 而且,雖然未圖示,中介資料再產生後,由於中介 料播案之所在及中介資料檔案大小、出現在中介資料的 素數量、關於中介資料構成要素的資訊也改變,亦可再產 生對應於再產生後之中介資料的中介資料最佳化提示資 2031-5559-PF(Nl).ptd 第34頁 1231140 五、發明說明(29) 訊。 含於:G f知中為了中介資料的再產生,必須對包 中,中介資料最做解析,但在本第五實施例 诚;66、、主抑β 佳化貝5fl60兄述有包含於中介資料49之記 中介資::佳子的出現位置、出現次數等,由於使用 略供中介資料再產生之中介趣 件不吻‘之記J = 現次數,由於可省略與再產生條 析盥再產Μ Ϊ 因此可減低伴隨中介資料之解 /、 的处理成本(處理量與記憶體使用量等)。 第六實施例 資料ΐίϊί五實施例巾’使用供中介資料再產生的中介 ’而針對減低伴隨中介資料之解析盥 處理成本之中介資料饲服器做說明,但在此第六 ^ ^ ,使用中介資料最佳化提示資訊,而針對減輕伴 二=索中介資料之處理的中介資料檢索伺^ 檢索裝置)做說明。 、甲"貝枓 ^本發明第六實施例之中介資料檢索伺服器並來昭 圖面做說明。第20圖表示本發明第六實施二 索伺服器之構造的方塊圖。 〒"貝枓檢 在第20圖中,中介資料檢索伺服器6〇〇包括提示 解析部61,中介資料解析部71以及檢索部73。 、° 提示資訊解析部61由於與上述第五實施例相同,故 略說明。中介資料解析部71使用所解析的中介資料最佳化 2031-5559-PF(Nl).ptd 第35頁 1231140 五、發明說明(30) — " ^ 提不資訊62與檢索條件7〇,而用較少的處理成本 j内容之構造及特徵的膨脹的中介資料49做解析。二搿記 7】利用中介資料的解析結果72,而檢索合於檢索條::部 3内 並參ί二實施例之中介資料檢索飼服器的動作 *料中介資料檢索伺服器的中介 *化:ίί=:Γ:對應於各中介資料的中介資料最 *的解析,在此抽出;二Π料做解析。中介資 例如,給予事傻 枓在檢索上之必要特徵記述。 保有接近於f顏色的特徵量而作為檢索條件,對 下,有彳Γ影像區段做檢索的狀況 J示於第15圖的中介資料為之的影像區段。以 於附加顏色的特徵記述( 十^專級4的影像區段由 級4的影像區段的記述抽出/ 、條帶圖」),將關於等 效記述子的指$ 斤檢::件7〇,並進行檢索上有 之記述的特徵量,以:條件’給予遵照規 件备作遵照MPEG-7之記述的特料I衫像及關鍵字。檢索條 s己述子(顏色配置資訊,扒二里而被給予的情況下,該 題、摘要、註釋等)在檢:志^成為有效的記述子(標 其次,參照中介資料最佳化提有J的記述子。 _________ 卞為訊β 2,而進行所選 2031-5559-PF(Nl).ptd 第36頁 1231140 五、發明說明(31)
擇的記述A 檢索上所使於中介資料49中的判定(步驟22)。 中介資料49的子不包含於中介資料49的情況下,該 其他中介次袓ί析處理結束(步驟24 ),按照需要而進行 τ )丨貝枓49的解析。 所選擇 ήί] 、+、"7* ^ 中介次姓μ °己述子包含於中介資料49的情況下,則進行 與上i箆、Ϊ析(步驟23 )。針對中介資料的解析方法, 五貝施例的情況相同,用中介資料最佳化提示資 批牵挪/做表不於第1 8圖及第1 9圖的中介資料的解 驟25〜26)。通過以上的處理,由中介資料解 析州抽出檢索上必要的特徵記述。 料解5 Ϊ索部73 ’利用從中介資料解析部71輸出的中介資 條杜μ :果(檢索上必要的特徵記述)72,檢索合於檢索 Π :容。上述的例子中,由於關於顏色之特徵記述 _屮〃,^條帶圖」)的影像區段係從中介資料解析部7 1 之、ϋ人I疋作為檢索條件而給予的顏色特徵量(條帶圖) I Α表將適合的影像區段之資訊(例如「時間資訊」 )作為檢索結果74而輸出。 最佔上所I,在本第六實施例中,由於使用中介資料 mi:資訊6°而進行中介資料49的解析,可省略供中 與出ί目^金生之中介資料49本體的解析。又藉由出現位置 :彻!人數,彳節省檢索上不必要之記述子的解析,因而 =伴隨檢索中介資料的處理成本(處理量及記憶體使用 第七實施例
1231140
次,,在上述之第五實施例或第六實施例中,針對利用中介 ^丄 捉不貝訊的伺服器端做說明,但在此第七實施 i由人係針對利用中介資料最佳化提示資訊的用戶終端 料再生條件設定裝置)做說明。 ^對本發明第七實施例之用戶終端並參照圖面做說 。弟22圖表示本發明第七實施例之用戶終端之構造的方 在第22圖中 及中介資料再生 ’用戶終端4 8 A具有提示資訊解析部8 〇以 條件設定部8 2。 :且,在第22圖中,包括於用戶終端48A的功能中, 入^ ;1為料最佳化提示資訊6 0,而僅表示出關於設定中 μ _貝料再產生條件之裝置的部分。 、、’而,針對該第七實施例之用戶終端之動作並參昭圖 面做說明。 ^ 提 最佳化 述第五 中 所輸出 件設定 介資料 記述子 情況下 的記述 不貪訊 提示資 實施例 介資料 的解析 。該條 最佳化 。在用 ,無須 子0 解析部80對用規定的格式所記述之中介資料 訊6 0做解析。該提示資訊解析部8 〇由於與上 相同,故省略詳細的說明。 再產生條件設定部82係以提示資訊解析部8〇 結果8 1為基礎,而進行中介資料再產生的條 件設定為,例如在用戶終端48Α,從包含中” 提不資訊60的記述子之種類中選擇出不用的 戶終端48Α不具有用特徵量做檢索的功能的 表現顏色的條帶圖及動作之複雜性等特徵量
1231140 五、發明說明(33) 作為條件設定之其他例子,記述内容之場景關係的階 層構造變深中介資料的複雜度增加時,以記述於中介資料 最佳化提示資訊6 0的階層構造之深度的最大值為基礎,在 用戶終端設定可處理的階層構造之深度。又,在其他例子 中’記述於中介資料最佳化提示資訊6 〇的重要度取得的資 訊為基礎,以使用者著眼的觀點,設定選擇場景之重要度 的門檻值。 如上所述,重要度係從「Team A」、「Team B」分別 的觀點,取五個離散的值({〇. 〇,〇· 25,〇. 5,〇. 75, 1· 〇}),在「Team A」的觀點,以〇· 5以上的重要度為基 礎’進行針對場景做選擇的設定。 土 在中介資料再產生條件設定部8 2所設定的中介資料再 產生的條件83,傳送至中介資料傳送伺服器。在中介 傳送伺服器側,以中介資料再產生的條件,並根據用戶故 端的終端性能’重組中介資料。例如 : J層=的深度之最大值為4,在中介資料再產生條貝枓之 :,終端可處理的階層構造之深度設定為2的情、兄 層構造深度的最大值成為2,而重組中介資料2 又 隹T ;丨負料再產生的條件中,「 針對重要度0·5以上的場 」的觀 的再產生,可利用與上述第五n中二二t =。中介資料 提示資訊而有效地進行。 目同中"資料最佳化
1231140 五、發明說明(34) "'' ------- 如上所述,在本第七實施例中,由於可使 最佳化提示資訊60而設定中介資料的再產生,2二貧料 戶終端及應用程式產生適當的中介資料。 ί應於用 第8實施例 ' 在上述第五實施例或第六實施例中,用中 化提示資訊而產生中介資料,並針對所再產束佳 做傳送的錢器做說明,在本第人實 I丨資料 送伺服器(内容傳送裝置)做說明,該 j針對内容傳 用中介資料最佳化提干資1^ |傳运飼服器係 結果,再產生適於用戶終端及使用者偏好的内析的 針對本發明第八實施例之内容傳送伺服2傳送。 做說明。第23圖表示本發明第八實 容J二,圖面 之構造的方塊圖。 谷得达伺服器 在第23圖中,内容傳送伺服器5〇〇A包括 部61、中介資料解析部86以及内容重组·傳^部貝讯解析 接著,針對本第八實施例之内容傳送伺| Μ ^ ^ 參照圖面而作說明。 号、1 j服為的動作並 提不資訊解析部61的動作,由於與上述 同,故省略說明。 弟五實施例相 中介資料解析部86係使用由提示資訊解 並解析過的中介資料最佳化提示 2輸出 =析1出符合用戶終端的資訊或使用; 2有關之條件85的記述。㈣提示資訊 、’〔第五實施例相同,而與第五實施例不同的是,不=^ 第40頁 2031-5559-PF(Nl).ptd 123114ο 五、發明說明(35) 5生使用抽出之記述的中人次 " =f析部86所抽出的記述?二:而重組内容。在該中介資 重、、且•傳送部88輸出。 斤解析的中介資料87向内容 ^ 内容重組·傳送部8 8係w 士 記述為來源,進行内容89的 彳資料解析部86所抽出的 例中所述的例子作說明。 、、且。於此,用上述第五實施 資料49以重要度0.5以上 五實施例的例子中,從中介 並再產生用所抽出的關於政為基礎而抽出影像區段, 料。 衫像區段的記述所構成的中介資 在該第八實施例中,從 的特徵為基礎而抽出影傻 ;1貝枓49以重要度〇·5以上 區段的場景而構成的内容心重f =應於所抽出之影像 出的影像區段的記述中,±重忑並傳迗。在有關於所抽 像區段之内容内的位置(3::?應内容的所在與該影 場景重組出一内容90並傳▼ \貝^ ),從内容切出對應的 景並依次傳送七刀出的場^ ’但亦可從内容切出對應的場 如上所述,在太笛λ ^ 中,由於使用記述包含於内容傳送伺服器500Α 子之出現位置、出現次數==記述子,單:記述 而作中介資料的解析。χ,蕻二;斗最佳化提不資訊60 略不符合再產生條:的ί述:由=位置^現次數、’省 用戶終端及使用者偏好的内纟,伴隨著再產生適於 重組而可減低處理=的中介資料解析及内容 取+ C處理量及記憶體使用量)。 第41頁 2031-5559-PF(Nl).ptd 1231140 五、發明說明(36) 產業上利用的可能性 本發明在以上的說明中,將包含影片及聲音的多媒體 内容分割成複數個場景,編輯複數個分割的場景而產生記 述多媒體階層之構造的場景構造資訊中介資料,因此可產 生記述包含影像資料的多媒體内容之階層式構造的中介資 料。
2031-5559-PF(Nl).ptd 第42頁 1231140 圖式簡單說明 第1圖表示本發明隹—^ 構造之方塊圖; 貫施例之中介資料編輯裴置的 苐2圖表示本發明筮 ^ 編輯對象之-例,冑聞畫面了例之中介資料編輯裝置的 第3圖表示本發明第一每、β ^ ^ ^ #j ^ t ^ # ^ ^ ϊ ^ 第4圖表示本發明第—告〒;丨貝枓之一例。 # f ^ H ^ ^ ^ £ ^ 弟5圖表示本發明第一 ^、 貝; 例。 内容再生·顯示部,使—貫施例之中介資料編輯裝置的 第6圖為本發明第使二用實者,入部的畫面影像。 的方塊圖。 ^例之中介資料編輯裝置構造 第7圖為本發明第二實 的說明圖。 彳中"負料編輯裝置動作 第8圖為本發明第三實 造的方塊圖。 ”貝枓再生裝置之構 第9圖為本發明第三實 作的說明圖。 丨貝枓再生裝置之動 統之構造的 新聞影 J之内容
方塊圖 第10圖為本發明第四實施例之内容傳送系 第11圖為本發明第四實施例之 介資料解 料解析部輸出之内容(新聞,备傳送词服器之從中 厨。 衫象為例)之構造資訊 第12圖為本發明第四實施例
2031-5559-PF(Nl).ptd 第43頁 1231140 圖式簡單說明 資料再產 第13 造的方塊 第14 供針對中 例。 第15 用MPEG-7 第16 用的中介 第17 用的中介 第18 中介資料 第19 中介資料 第20 構造的方 第21 中介資料 第22 圖。 第23 的方塊圖 生部重組後的内容之構造例。 圖為本發明第五實施例之中介 圖。 圖為本發明第五實施例之中介 介資料最佳化提示資訊做說明 資料傳 送系 圖為本發 之中介資 圖為本發 資料最佳 圖為本發 資料最佳 圖為本發 解析•再 圖為本發 解析•再 圖為本發 塊圖。 圖為本發 解析部之 圖為本發 明第五實施例之中介 料的記述例。 明第五實施例之中介 化提示資訊的格式例 明第五實施例之中介 化提示資訊。 明第五實施例之中介 產生部之動作的流程圖 明第五實施例之中介 產生部之動作的流程 明第六實施例之中介 明第六實施例之中介 動作的流程圖。 明第七實施例之用戶 圖為本發明第八實施例之内容 資料傳送伺 的影像内容 資料傳送甸 資料傳送伺 〇 資料傳送伺 資料傳 資料傳送词 圖〇 資料檢索伺 資料檢索伺 終端之構造 傳送伺服器 系先之構 服器, 之一 服器, 服器所 服器所 服器之 服器之 服器之 服器之 的方塊 之構造
2031-5559-PF(Nl).ptd 第44頁 1231140 圖式簡單說明 符號說明 2〜再生•顯示部; 3〜場景分割部; 4〜樣本影像產生部; 5〜場景記述編輯部; 6〜文字資訊給予部; 7〜特徵抽出部; 8〜使用者輸入部; 9〜中介資料記述部;
10 - 、夕夕 媒 體 内 容 , 1 1〜 使 用 者 入 資 訊 9 12 - 、場 景 區 間 資 訊 中介 資料; 1 3〜場 景 樣 本 畫 面 資訊 中介資 料 1 4〜場 景 構 造 資 訊 中介 資料; 15 - ‘文 字 資 訊 中 介 資料 ;16〜 特 徵 記 述 中 介 資 料; 17 - 一中 介 資 料 j 19〜 中 介 資 料 解 析 部 9 20〜構 造 顯 示 部 ; 21〜 樣 本 影 像 顯 示 部 1 22, ‘使 用 者 輸 入 部 , 23〜 檢 索 部 , 24 - ‘檢 索 結 果 顯 示 部; 25〜 摘 要 製 作 部 , 26 - ‘摘 要 構 造 顯 示 部; 27〜 内 容 再 生 部 9 30, ‘樣 本 影 像 資 訊 39〜 場 景 變 換 點 檢 出 部; 41, ‘中 介 資 料 累 積 部; 42〜 中 介 資 料 解析 部 9 43, c終 端 能 力 判 定 部; 44〜 中 介 資 料 再 產 生 部; 45, ‘中 介 資 料 傳 送 部; 4 6〜 内 容 累 積 部 , 47, ‘内 容 傳 送 部 48A - 、用戶終端; 51, -用 戶 終 端 性 能 的資 訊; 53〜中 介 資 料 55〜 内 容 ; 56 - -内 容 , 6 0〜中 介 資 料 最 佳 化提 示資訊 2031-5559-PF(Nl).ptd 第45頁 1231140 圖式簡單說明 6 1〜資訊解析部; 6 2〜中介資料最佳化提示資訊; 6 3〜中介資料解析•再產生部; 6 4〜重組後之中介資料; 6 5〜中介資料再產生的條件; 7 0〜檢索條件; 71〜中介資料解析部; 72〜解析結果; 73〜檢索部; 74〜檢索結果; 80〜提示資訊解析部; 82〜中介資料再生條件設定部; 8 5〜與内容重組有關之條件; 8 6〜中介資料解析部; 8 7〜中介資料; 88〜内容重組•傳送部;89〜内容; 90〜内容; 100〜中介資料編輯裝置; 100A〜中介資料編輯裝置; 2 0 0〜中介資料再生裝置; 3 0 0〜内容傳送系統; 400〜中介資料傳送伺服器; 400A〜中介資料傳送伺服器; 48卜48η〜各種用戶終端; 5 0 0〜内容傳送伺服器; 50 0Α〜内容傳送伺服器; 6 0 0〜中介資料檢索伺服器; G1〜影像播放晝面; G2〜場景分割指示晝面;
2031-5559-PF(Nl).ptd 第46頁 1231140 圖式簡單說明 G3〜場景分割資訊顯示晝面; G 4〜樹狀結構產生指示、顯示畫面。 第47頁 2031-5559-PF(Nl).ptd

Claims (1)

1231140 六 申請專利範圍 1. 一種中介資料編輯裝置,包括. 場景分割部,將至少包含影片、聲立 體内容分割成複數個場景,並產 中之一的多媒 料,以顯示已分割場景之ι =场厅、的區間資訊中介資 置; 7、之母一场景的開始位置與終了位 %景記述編輯部,根據來 間資訊中介資料,不進行 ^w厅、为割部的場景區 的編輯,而產生記述上述多内容之各場景之階層 造資訊中介資料;21夕媒體内容之階層構造的場景構 中介資料記述部,鲚人μ、+、π „次 丄 景構造資訊中介資料,;::介資料以及場 體内容之内容與構造的以;之格式產生記述上述多媒 其中2更第1項所述之中介資料編輯裝置, 區間資訊中介資料,:屮根據來自上述場景分割部的場景 特倣里而產生特徵記述中介資料; 穷厅、的視覺 尸旦i ΐ t介資料記述部統合上述場景之區間資訊、,+ %景構造資訊中介咨必丨 u貝a、上述 遵照既定的格式而產生 =r"貝枓,並 資料。 座生5己述上述多媒體内容及構造的中介 置,3其Π 2範圍第1或2項所述之中介資料編輯襄 檢出上述多媒體内容之==點祀據“之間的差異, 上述場景分割部係根據上述場景變換點將上述多媒體
2031-5559-PF(Nl).ptd 第48頁 1231140 - 六、申請專利範圍 内容分割成複數個場景。 4· 一種中介資料產生裝置,包括· =介資料解析部,對記述包 片 一的多媒體内容及構造的中介資二耷曰至少其十之 檢索部,根據記述於之 果所取得的上述中介資料中的部之解析結 介資料檢索出符合既定檢索條 ^寺试里,從上述中 摘要製作部,根據記述於由上、丄次 析結果所取得的上述中介資 =二貝料解析部之 於既定摘要製作條件的上述多= 作出符合 5. —種中介資料傳送裝置,包括:、 貝訊。 中介資料解析部,對記述包含K 一的多媒體内容及構造的中 聲曰至少其中之 終端能力判定部,根據==析; 而判定上述用戶終端的能力;;戶終端之性能的資訊 中介資料再產生立 者 資料解析結果,對應ς 介資料解析部的中介 組上述多媒體内容,並再用戶終端的能力而重 料; 生。己述邊内容之第二中介資 中介資料傳送部 生的第二中介資料傳 2 V中介資料再產生部所產 6. -種中介資逃用戶終端。 提干資專运裝置,包括: 棱不貝汛解析部,解析 中介資料記述包含於中八次"貝科最佳化提示資訊,該 W貝;斗之圮述子的種類與内容; 2031-5559-PF(Nl).ptd 第49頁 1231140 六、申請專利範圍 ____ 中介資料解析部’根據上述的 化提示資訊及内容重組條件,從記述包二:,丨資料最佳 其中之一的多媒體内容及構造的中介$二S片、聲音至少 内容重組之條件的記述抽出· 、" 將符合上述 内容重組·傳送部,根據上述所抽 做重組而傳送於用戶終端。 们5己述,將内容 ίο. -種中介資料傳送方法, 對記述包含於中介資粗 』少驟· 化提示資訊做解析;、丨° 類的中介資料最佳 =據上述已解析之中介資料最佳化 中介資料再產生的條件,對已記述至少包含關於 中之一^多媒體内容之内容及構造的中介資料解,音其 再產生第二中介資料; 解析,而 將上述所再產生的第二中介資料輸送至用戶端。 11 ·如申請專利範圍第i 〇項所述之中介資料 法其中上述中介資料最佳化提示資訊係記述表示人二欠 料檔案之所在、包含於中介資料的要素之數量 :: 數,而做為中介資料檔案資訊。 $見要素 、1 2·如申請專利範圍第1 0項所述之中介資料傳送方 法’其中上述中介資料最佳化提示資訊係記述中介資 案大小、中介資料檔案格式、語法檔案資訊,而作Λ由^ 資料檔案資訊。 π為中介 1 3.如申請專利範圍第1 0項所述之中介資料傳送方 法,其中上述中介資料最佳化提系資訊作為中介資料構成
2031-5559-PF(Nl).ptd 第51頁 1231140 々、申請專利範圍 要素資訊之一,係記述包含於中介:欠 二 1 4·如申請專利範圍第丨〇項所貝的記述子之名稱。 法,其中上述中介資料最佳化提示次 介資料傳送方 要素資訊之一,係記述包含於中介資^ 2為中介資料構成 率。 、’的記述子之出現頻 1 5·如申請專利範圍第丨〇項所述之次 法,其中上述中介資料最佳化提示資訊作1貝料傳送方 16.如申請專利範圍第10項所述之 ,其中上述中介資料最佳化提示資訊作軒人傳广方 篆資訊之-’係記述包含於保有中介資料 要素資訊之一,係記述包含於中介資:"資料構成 述性。 汁的C述子之完全記 1 β 丄《士)士 老 n … 法 要素資訊之 間中的階層性。 ,* - 17.如申請專利範圍第1〇項所述之中介資 法,其中上述中介資料最佳化提示資訊作 方 要素資訊之一,係記述包含於保有中介資料&二=構天 間中的階層性。 、卄的$述子之g 1 8·如申請專利範圍第1 0項所述之中介資料傳送 法,其中上述中介資料最佳化提示資訊作為中介、 要素資訊之一,係記述包含於中介資料的記述子出/目成 現位置。 田見的出
2031-5559-PF(Nl).ptd 1 9.如申請專利範圍第1 0項所述之中介資料傳送方 法’其中上述中介資料最佳化提示資訊作為中介資料 要素資訊之一,係記述包含於中介資料的記述子的型能。 1231140 六、申請專利範圍 2 0.如申請專利範圍第1 0項所述之中介資料傳送方 法,其中上述中介資料最佳化提示資訊作為中介資料構成 要素資訊之一,係記述包含於中介資料的記述子的取得範 圍。
2031-5559-PF(Nl).ptd 第53頁
TW092107243A 2002-04-12 2003-03-31 Middle data editing device, middle data generation device, middle data transmission device, middle data searching device, middle data regeneration condition configuration device, and middle data transmission method TWI231140B (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002110259 2002-04-12
JP2002178169 2002-06-19

Publications (2)

Publication Number Publication Date
TW200306114A TW200306114A (en) 2003-11-01
TWI231140B true TWI231140B (en) 2005-04-11

Family

ID=29253534

Family Applications (1)

Application Number Title Priority Date Filing Date
TW092107243A TWI231140B (en) 2002-04-12 2003-03-31 Middle data editing device, middle data generation device, middle data transmission device, middle data searching device, middle data regeneration condition configuration device, and middle data transmission method

Country Status (10)

Country Link
US (7) US7826709B2 (zh)
EP (7) EP2202979A1 (zh)
JP (5) JPWO2003088665A1 (zh)
KR (4) KR100912984B1 (zh)
CN (1) CN100367794C (zh)
AU (1) AU2003221185A1 (zh)
CA (2) CA2482431C (zh)
SG (1) SG152905A1 (zh)
TW (1) TWI231140B (zh)
WO (1) WO2003088665A1 (zh)

Families Citing this family (146)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050162515A1 (en) * 2000-10-24 2005-07-28 Objectvideo, Inc. Video surveillance system
US7116716B2 (en) * 2002-11-01 2006-10-03 Microsoft Corporation Systems and methods for generating a motion attention model
JP4546467B2 (ja) * 2003-07-08 2010-09-15 パナソニック株式会社 コンテンツ蓄積システム、ホームサーバ装置、情報提供装置、集積回路、及びプログラム
TWI310545B (en) * 2003-10-04 2009-06-01 Samsung Electronics Co Ltd Storage medium storing search information and reproducing apparatus
EP1531626B1 (en) * 2003-11-12 2008-01-02 Sony Deutschland GmbH Automatic summarisation for a television programme suggestion engine based on consumer preferences
US8081863B2 (en) * 2004-01-30 2011-12-20 Panasonic Corporation Content playback apparatus
JP2008504719A (ja) * 2004-05-25 2008-02-14 サムスン エレクトロニクス カンパニー リミテッド Mpvプロファイルを利用したマルチメディアデータの再生方法及びその再生装置
WO2005120055A2 (en) * 2004-05-26 2005-12-15 Skipjam Corp. Method and system for displaying and selecting content of an electronic program guide
US8953908B2 (en) * 2004-06-22 2015-02-10 Digimarc Corporation Metadata management and generation using perceptual features
US8156123B2 (en) * 2004-06-25 2012-04-10 Apple Inc. Method and apparatus for processing metadata
US9053754B2 (en) * 2004-07-28 2015-06-09 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs
KR100619064B1 (ko) 2004-07-30 2006-08-31 삼성전자주식회사 메타 데이터를 포함하는 저장 매체, 그 재생 장치 및 방법
JP2006066015A (ja) 2004-08-30 2006-03-09 Sony Corp 画像情報記録装置および画像情報表示装置
KR100565080B1 (ko) * 2004-09-13 2006-03-30 삼성전자주식회사 대표 타이틀 정보가 부가된 메타 데이터를 포함한 av데이터를 기록한 정보저장매체, 그 재생장치 및 메타데이터 검색방법
KR100602388B1 (ko) * 2004-11-17 2006-07-20 주식회사 픽스트리 엠펙-21 멀티미디어 프레임워크에서의 리소스 참조 방법
KR20060065476A (ko) 2004-12-10 2006-06-14 엘지전자 주식회사 기록매체, 기록매체 내의 콘텐츠 서치방법 및 기록매체재생방법과 재생장치
US9063955B2 (en) 2004-12-24 2015-06-23 Koninklijke Philips N.V. Method and apparatus for editing program search information
JP4349277B2 (ja) * 2004-12-24 2009-10-21 株式会社日立製作所 動画再生装置
WO2006073283A1 (en) * 2005-01-07 2006-07-13 Electronics And Telecommunications Research Institute Apparatus and method for providing adaptive broadcast service using game metadata
WO2006080469A1 (ja) * 2005-01-25 2006-08-03 Nec Corporation 構造化文書検索装置、構造化文書検索方法および構造化文書検索プログラム
FR2883441A1 (fr) * 2005-03-17 2006-09-22 Thomson Licensing Sa Procede de selection de parties d'une emission audiovisuelle et dispositif mettant en oeuvre le procede
TWI309389B (en) * 2005-05-06 2009-05-01 Sunplus Technology Co Ltd Digital audio-video information reproducing apparatus and reproducing method thereof
KR100654455B1 (ko) 2005-05-26 2006-12-06 삼성전자주식회사 확장형 자막 파일을 이용하여 부가정보를 제공하는 장치 및방법
CN101243675B (zh) * 2005-06-27 2016-05-11 核心无线许可有限公司 用于动态丰富媒体场景的传送机制
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
US20080130989A1 (en) * 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
JP4514671B2 (ja) * 2005-08-03 2010-07-28 シャープ株式会社 コンテンツ編集装置、コンピュータ読み取り可能なプログラム及びそれを記録した記録媒体
US20070078883A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Using location tags to render tagged portions of media files
US20070078898A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Server-based system and method for retrieving tagged portions of media files
US20070078896A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Identifying portions within media files with location tags
KR100977580B1 (ko) * 2005-10-13 2010-08-23 엘지전자 주식회사 부호화/복호화 방법 및 장치.
US7743363B2 (en) * 2005-10-13 2010-06-22 Microsoft Corporation Extensible meta-data
US8856118B2 (en) * 2005-10-31 2014-10-07 Qwest Communications International Inc. Creation and transmission of rich content media
JPWO2007052395A1 (ja) * 2005-10-31 2009-04-30 シャープ株式会社 視聴環境制御装置、視聴環境制御システム、視聴環境制御方法、データ送信装置及びデータ送信方法
US8180826B2 (en) * 2005-10-31 2012-05-15 Microsoft Corporation Media sharing and authoring on the web
US8196032B2 (en) * 2005-11-01 2012-06-05 Microsoft Corporation Template-based multimedia authoring and sharing
JP2007179435A (ja) * 2005-12-28 2007-07-12 Sony Corp 情報処理装置、情報処理方法、プログラム
US20070204238A1 (en) * 2006-02-27 2007-08-30 Microsoft Corporation Smart Video Presentation
US7421455B2 (en) * 2006-02-27 2008-09-02 Microsoft Corporation Video search and services
US7873946B2 (en) * 2006-03-23 2011-01-18 Oracle America, Inc. Scalable vector graphics, tree and tab as drag and drop objects
JP2007265341A (ja) * 2006-03-30 2007-10-11 Sony Corp コンテンツ利用方法、コンテンツ利用装置、コンテンツ記録方法、コンテンツ記録装置、コンテンツ提供システム、コンテンツ受信方法、コンテンツ受信装置およびコンテンツデータフォーマット
JP4377887B2 (ja) * 2006-03-30 2009-12-02 株式会社東芝 映像分割装置
US7827155B2 (en) * 2006-04-21 2010-11-02 Microsoft Corporation System for processing formatted data
US8549492B2 (en) * 2006-04-21 2013-10-01 Microsoft Corporation Machine declarative language for formatted data processing
JP4760572B2 (ja) * 2006-06-30 2011-08-31 ソニー株式会社 編集装置および編集方法、並びにプログラム
US8275814B2 (en) * 2006-07-12 2012-09-25 Lg Electronics Inc. Method and apparatus for encoding/decoding signal
US20080019281A1 (en) * 2006-07-21 2008-01-24 Microsoft Corporation Reuse of available source data and localizations
US7769363B2 (en) 2006-08-01 2010-08-03 Chew Gregory T H User-initiated communications during multimedia content playback on a mobile communications device
US20080065693A1 (en) * 2006-09-11 2008-03-13 Bellsouth Intellectual Property Corporation Presenting and linking segments of tagged media files in a media services network
EP2063635A4 (en) * 2006-09-12 2009-12-09 Panasonic Corp CONTENT IMAGE FORMATION DEVICE
JPWO2008041629A1 (ja) * 2006-09-29 2010-02-04 ソニー株式会社 再生装置および方法、情報生成装置および方法、データ格納媒体、データ構造、プログラム格納媒体、並びにプログラム
JP2008099012A (ja) * 2006-10-12 2008-04-24 Mitsubishi Electric Corp コンテンツ再生システム及びコンテンツ蓄積システム
WO2008048066A1 (en) * 2006-10-19 2008-04-24 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
KR101317204B1 (ko) * 2006-11-27 2013-10-10 삼성전자주식회사 동적 영상물의 프레임 정보를 생성하는 방법 및 이를이용한 장치
KR100827241B1 (ko) * 2006-12-18 2008-05-07 삼성전자주식회사 동적 영상물을 생성하기 위한 템플릿을 편집하는 장치 및방법
FR2910769B1 (fr) * 2006-12-21 2009-03-06 Thomson Licensing Sas Procede de creation d'un resume d'un document audiovisuel comportant un sommaire et des reportages, et recepteur mettant en oeuvre le procede
EP2122482B1 (en) 2007-01-05 2018-11-14 Sonic IP, Inc. Video distribution system including progressive playback
US8671346B2 (en) * 2007-02-09 2014-03-11 Microsoft Corporation Smart video thumbnail
KR100864524B1 (ko) * 2007-02-14 2008-10-21 주식회사 드리머 디지털 방송 데이터 어플리케이션 실행 방법 및 이를실현시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한기록 매체
JP4511569B2 (ja) * 2007-03-26 2010-07-28 株式会社エヌ・ティ・ティ・ドコモ 遠隔視聴システム及び遠隔視聴方法
JP4469868B2 (ja) * 2007-03-27 2010-06-02 株式会社東芝 説明表現付加装置、プログラムおよび説明表現付加方法
US8296389B2 (en) * 2007-04-05 2012-10-23 Sony Computer Entertainment Inc. Content reproduction apparatus, content delivery apparatus, content delivery system, and method for generating metadata
EP1983755A1 (en) * 2007-04-17 2008-10-22 Thomson Licensing Method to transmit video data in a data stream and associated metadata
WO2008136466A1 (ja) * 2007-05-01 2008-11-13 Dep Co., Ltd. 動画編集装置
KR100935862B1 (ko) * 2007-07-06 2010-01-07 드리머 매체 재생 장치 기반 컨텐츠 제공 시스템
JP4360428B2 (ja) * 2007-07-19 2009-11-11 ソニー株式会社 記録装置、記録方法、コンピュータプログラムおよび記録媒体
JP4420085B2 (ja) * 2007-08-20 2010-02-24 ソニー株式会社 データ処理装置、データ処理方法、プログラムおよび記録媒体
KR101268987B1 (ko) * 2007-09-11 2013-05-29 삼성전자주식회사 메타데이터를 자동적으로 생성/갱신하는 멀티미디어 데이터기록 방법 및 장치
KR20090031142A (ko) * 2007-09-21 2009-03-25 삼성전자주식회사 컨텐츠 생성시 관련된 컨텐츠를 표시하는 gui 제공방법및 이를 적용한 멀티미디어 기기
KR101034758B1 (ko) * 2007-10-04 2011-05-17 에스케이 텔레콤주식회사 통합 멀티미디어 파일의 초기 실행 방법과 이를 위한시스템
US20090158157A1 (en) * 2007-12-14 2009-06-18 Microsoft Corporation Previewing recorded programs using thumbnails
JP2009152927A (ja) * 2007-12-21 2009-07-09 Sony Corp コンテンツの再生方法および再生システム
KR20090079010A (ko) * 2008-01-16 2009-07-21 삼성전자주식회사 프로그램 정보 표시 방법 및 장치
JP5033653B2 (ja) * 2008-01-21 2012-09-26 株式会社日立製作所 映像記録再生装置及び映像再生装置
JP5188260B2 (ja) * 2008-05-08 2013-04-24 キヤノン株式会社 画像処理装置、画像処理方法ならびにそのプログラムおよび記憶媒体
US20090287655A1 (en) * 2008-05-13 2009-11-19 Bennett James D Image search engine employing user suitability feedback
EP2257931A4 (en) * 2008-06-06 2011-03-16 Divx Inc SYSTEMS AND METHOD FOR WRITING FILES OPTIMIZATION FOR MULTIMEDIA FILES
US20090317062A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Ltd. Image processing method and apparatus
KR20100002032A (ko) * 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
US20090315980A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Image processing method and apparatus
WO2009157707A2 (en) * 2008-06-24 2009-12-30 Samsung Electronics Co,. Ltd. Image processing method and apparatus
JP5649273B2 (ja) * 2008-08-25 2015-01-07 株式会社東芝 情報処理装置、情報処理方法および情報処理プログラム
JP5091806B2 (ja) * 2008-09-01 2012-12-05 株式会社東芝 映像処理装置及びその方法
JP5322550B2 (ja) * 2008-09-18 2013-10-23 三菱電機株式会社 番組推奨装置
US8239359B2 (en) * 2008-09-23 2012-08-07 Disney Enterprises, Inc. System and method for visual search in a video media player
KR101592943B1 (ko) * 2008-12-11 2016-02-12 엘지전자 주식회사 이동 단말기 및 이동 단말기의 데이터 관리 방법
KR20110032610A (ko) * 2009-09-23 2011-03-30 삼성전자주식회사 장면 분할 장치 및 방법
KR20110047768A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 멀티미디어 컨텐츠 재생 장치 및 방법
KR101733793B1 (ko) * 2009-11-13 2017-05-11 삼성전자주식회사 데이터 관리 방법 및 장치
CN102065237B (zh) * 2009-11-13 2014-12-24 新奥特(北京)视频技术有限公司 一种方便处理字幕文件的字幕机
JP2011130279A (ja) * 2009-12-18 2011-06-30 Sony Corp コンテンツ提供サーバ、コンテンツ再生装置、コンテンツ提供方法、コンテンツ再生方法、プログラムおよびコンテンツ提供システム
EP2517466A4 (en) * 2009-12-21 2013-05-08 Estefano Emilio Isaias SYSTEM AND METHOD FOR VIDEO SEGMENT MANAGEMENT AND DISTRIBUTION
JP2011188342A (ja) * 2010-03-10 2011-09-22 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP5913788B2 (ja) * 2010-03-25 2016-04-27 ソニー株式会社 コンテンツサーバ、コンテンツ提供システム及びコンテンツ提供方法
US9066049B2 (en) 2010-04-12 2015-06-23 Adobe Systems Incorporated Method and apparatus for processing scripts
KR101746453B1 (ko) * 2010-04-12 2017-06-13 삼성전자주식회사 실감 효과 처리 시스템 및 방법
US9276986B2 (en) * 2010-04-27 2016-03-01 Nokia Technologies Oy Systems, methods, and apparatuses for facilitating remote data processing
GB2481185A (en) * 2010-05-28 2011-12-21 British Broadcasting Corp Processing audio-video data to produce multi-dimensional complex metadata
US8806340B2 (en) * 2010-09-01 2014-08-12 Hulu, LLC Method and apparatus for embedding media programs having custom user selectable thumbnails
JP5671288B2 (ja) * 2010-09-24 2015-02-18 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理方法及び情報処理システム
US9753609B2 (en) * 2010-12-03 2017-09-05 Facebook, Inc. User interface with media wheel facilitating viewing of media objects
US8587672B2 (en) 2011-01-31 2013-11-19 Home Box Office, Inc. Real-time visible-talent tracking system
US9264484B1 (en) 2011-02-09 2016-02-16 Google Inc. Attributing preferences to locations for serving content
CN102143001B (zh) * 2011-04-02 2013-10-09 西南科技大学 一种基于语义理解的音频资源管理方法
GB2491894A (en) * 2011-06-17 2012-12-19 Ant Software Ltd Processing supplementary interactive content in a television system
US9146909B2 (en) * 2011-07-27 2015-09-29 Qualcomm Incorporated Web browsing enhanced by cloud computing
KR101315608B1 (ko) * 2011-09-27 2013-10-18 엘지전자 주식회사 컨텐츠 관리 방법 및 그를 이용한 영상 표시 장치
US20130089301A1 (en) * 2011-10-06 2013-04-11 Chi-cheng Ju Method and apparatus for processing video frames image with image registration information involved therein
US9536044B2 (en) 2011-12-06 2017-01-03 Microsoft Technology Licensing, Llc Metadata extraction pipeline
US9100291B2 (en) * 2012-01-31 2015-08-04 Db Networks, Inc. Systems and methods for extracting structured application data from a communications link
US9525642B2 (en) 2012-01-31 2016-12-20 Db Networks, Inc. Ordering traffic captured on a data connection
TWI461955B (zh) * 2012-02-20 2014-11-21 Univ Nat Cheng Kung 惡意程式破壞系統及其破壞方法
WO2013130478A1 (en) * 2012-02-29 2013-09-06 Dolby Laboratories Licensing Corporation Image metadata creation for improved image processing and content delivery
KR101332834B1 (ko) * 2012-04-03 2013-11-27 모젼스랩(주) 온톨로지 기반 전시관련 서비스 제공방법
KR101952260B1 (ko) 2012-04-03 2019-02-26 삼성전자주식회사 다수의 동영상 썸네일을 동시에 표시하기 위한 영상 재생 장치 및 방법
SE537206C2 (sv) * 2012-04-11 2015-03-03 Vidispine Ab Metod och system för sökningar i digitalt innehåll
EP2680601A1 (en) * 2012-06-29 2014-01-01 Moda e Technologia S.r.l. Video streams management system for a television apparatus
US20140136545A1 (en) 2012-10-05 2014-05-15 International Business Machines Corporation Multi-tier Indexing Methodology for Scalable Mobile Device Data Collection
TWI474201B (zh) * 2012-10-17 2015-02-21 Inst Information Industry Construction system scene fragment, method and recording medium
KR101537665B1 (ko) * 2013-02-26 2015-07-20 주식회사 알티캐스트 콘텐츠 재생 방법 및 장치
EP2809077A1 (en) * 2013-05-27 2014-12-03 Thomson Licensing Method and apparatus for classification of a file
EP2809078A1 (en) * 2013-05-27 2014-12-03 Thomson Licensing Method and apparatus for managing metadata files
US9197926B2 (en) 2013-06-05 2015-11-24 International Business Machines Corporation Location based determination of related content
RU2627048C1 (ru) 2013-07-30 2017-08-03 Долби Лэборетериз Лайсенсинг Корпорейшн Система и способы для формирования сценовых стабилизированных метаданных
US20150331551A1 (en) * 2014-05-14 2015-11-19 Samsung Electronics Co., Ltd. Image display apparatus, image display method, and computer-readable recording medium
US20170091197A1 (en) * 2014-05-19 2017-03-30 Huawei Technologies Co., Ltd. Multimedia Display Method, Apparatus, and Device
KR102190233B1 (ko) 2014-10-06 2020-12-11 삼성전자주식회사 영상 처리 장치 및 이의 영상 처리 방법
KR101640317B1 (ko) 2014-11-20 2016-07-19 소프트온넷(주) 오디오 및 비디오 데이터를 포함하는 영상의 저장 및 검색 장치와 저장 및 검색 방법
KR102380979B1 (ko) * 2015-01-05 2022-04-01 삼성전자 주식회사 이미지의 메타데이터 관리 방법 및 장치
KR102306538B1 (ko) 2015-01-20 2021-09-29 삼성전자주식회사 콘텐트 편집 장치 및 방법
JP2016144080A (ja) * 2015-02-03 2016-08-08 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
KR102310241B1 (ko) 2015-04-29 2021-10-08 삼성전자주식회사 소스 디바이스, 그의 제어 방법, 싱크 디바이스 및 그의 화질 개선 처리 방법
US9554160B2 (en) * 2015-05-18 2017-01-24 Zepp Labs, Inc. Multi-angle video editing based on cloud video sharing
US10462524B2 (en) * 2015-06-23 2019-10-29 Facebook, Inc. Streaming media presentation system
US9917870B2 (en) 2015-06-23 2018-03-13 Facebook, Inc. Streaming media presentation system
US10375443B2 (en) * 2015-07-31 2019-08-06 Rovi Guides, Inc. Method for enhancing a user viewing experience when consuming a sequence of media
WO2017066778A1 (en) * 2015-10-16 2017-04-20 Tribune Broadcasting Company, Llc Video-production system with dve feature
US10645465B2 (en) * 2015-12-21 2020-05-05 Centurylink Intellectual Property Llc Video file universal identifier for metadata resolution
US11023417B2 (en) 2017-05-30 2021-06-01 Home Box Office, Inc. Video content graph including enhanced metadata
CN108829881B (zh) * 2018-06-27 2021-12-03 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置
JP6688368B1 (ja) * 2018-11-13 2020-04-28 西日本電信電話株式会社 映像コンテンツ構造化装置、映像コンテンツ構造化方法、及びコンピュータプログラム
CN112150778A (zh) * 2019-06-29 2020-12-29 华为技术有限公司 环境音处理方法及相关装置
KR102250642B1 (ko) * 2019-10-31 2021-05-11 테크온미디어(주) 효율적인 콘텐츠 유통을 위한 탈중앙화된 콘텐츠 분산 관리 시스템 및 이를 수행하기 위한 컴퓨팅 장치
JP2021132281A (ja) * 2020-02-19 2021-09-09 Jcc株式会社 メタデータ生成システムおよびメタデータ生成方法
US20210319230A1 (en) * 2020-04-10 2021-10-14 Gracenote, Inc. Keyframe Extractor
US11526612B2 (en) 2020-09-22 2022-12-13 International Business Machines Corporation Computer file metadata segmentation security system

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5119465A (en) * 1989-06-19 1992-06-02 Digital Equipment Corporation System for selectively converting plurality of source data structures through corresponding source intermediate structures, and target intermediate structures into selected target structure
US5758180A (en) * 1993-04-15 1998-05-26 Sony Corporation Block resizing function for multi-media editing which moves other blocks in response to the resize only as necessary
JP3194837B2 (ja) * 1994-07-19 2001-08-06 日本電信電話株式会社 代表画面抽出方法および装置
JP3144285B2 (ja) * 1995-11-30 2001-03-12 松下電器産業株式会社 映像処理装置
JP3529540B2 (ja) * 1996-03-07 2004-05-24 Kddi株式会社 動画像検索装置
WO1997034240A1 (en) * 1996-03-15 1997-09-18 University Of Massachusetts Compact tree for storage and retrieval of structured hypermedia documents
US5986675A (en) * 1996-05-24 1999-11-16 Microsoft Corporation System and method for animating an object in three-dimensional space using a two-dimensional input device
US20010038719A1 (en) * 1996-10-14 2001-11-08 Nikon Corporation Information processing apparatus
JP3633229B2 (ja) * 1997-09-01 2005-03-30 セイコーエプソン株式会社 発光素子の製造方法および多色表示装置の製造方法
AUPO918697A0 (en) * 1997-09-15 1997-10-09 Canon Information Systems Research Australia Pty Ltd Enhanced information gathering apparatus and method
KR100284574B1 (ko) * 1997-10-27 2001-03-15 정선종 객체자동저장시스템및그운용방법
US6134558A (en) * 1997-10-31 2000-10-17 Oracle Corporation References that indicate where global database objects reside
US6751623B1 (en) * 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
JPH11238071A (ja) 1998-02-20 1999-08-31 Toshiba Corp ダイジェスト作成装置及びダイジェスト作成方法
US6085198A (en) * 1998-06-05 2000-07-04 Sun Microsystems, Inc. Integrated three-tier application framework with automated class and table generation
US6711590B1 (en) * 1998-07-10 2004-03-23 Canon Kabushiki Kaisha Linking metadata with a time-sequential digital signal
KR100279735B1 (ko) * 1998-11-20 2001-02-01 정선종 메타데이터를 이용한 멀티미디어 컨텐츠 전달방법
JP2000253337A (ja) * 1999-02-24 2000-09-14 Sony Corp 画面の制御方法および画面の制御装置および映像再生方法および映像再生装置および映像情報の記録方法および映像情報の記録装置およびコンピュータが読み取り可能な記録媒体
US7362946B1 (en) * 1999-04-12 2008-04-22 Canon Kabushiki Kaisha Automated visual image editing system
JP4227241B2 (ja) 1999-04-13 2009-02-18 キヤノン株式会社 画像処理装置及び方法
JP2001008136A (ja) * 1999-06-21 2001-01-12 Victor Co Of Japan Ltd マルチメディアデータのオーサリング装置
JP2001028722A (ja) 1999-07-13 2001-01-30 Matsushita Electric Ind Co Ltd 動画像管理装置及び動画像管理システム
JP2001111957A (ja) * 1999-08-16 2001-04-20 Univ Of Washington ビデオシーケンスの対話型処理方法と、その記憶媒体およびシステム
WO2001020908A1 (en) * 1999-09-16 2001-03-22 Ixl Enterprises, Inc. System and method for linking media content
KR100373371B1 (ko) * 1999-09-20 2003-02-25 한국전자통신연구원 메타데이터의 중요도 결정기법을 적용한 비디오 데이터 검색방법
JP3738631B2 (ja) * 1999-09-27 2006-01-25 三菱電機株式会社 画像検索システムおよび画像検索方法
AU6973900A (en) 1999-09-29 2001-04-30 Xml-Global Technologies, Inc. Authoring, altering, indexing, storing and retrieving electronic documents embedded with contextual markup
KR100371813B1 (ko) 1999-10-11 2003-02-11 한국전자통신연구원 효율적인 비디오 개관 및 브라우징을 위한 요약 비디오 기술구조 및 이의 기록매체, 이를 이용한 요약 비디오 기술 데이터 생성 방법 및 생성시스템, 요약 비디오 기술 데이터의 브라우징 장치 및 브라우징 방법.
KR100305964B1 (ko) 1999-10-22 2001-11-02 구자홍 사용자 적응적인 다단계 요약 스트림 제공방법
JP3478331B2 (ja) * 1999-10-29 2003-12-15 株式会社リコー 構造表示方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2001167099A (ja) * 1999-12-07 2001-06-22 Nippon Hoso Kyokai <Nhk> 映像・音声オブジェクトを基本としたデータベース装置
US7212972B2 (en) 1999-12-08 2007-05-01 Ddi Corporation Audio features description method and audio video features description collection construction method
JP2001167109A (ja) 1999-12-08 2001-06-22 Kddi Corp オーディオビデオ情報の特徴記述群構成方法
KR100844816B1 (ko) * 2000-03-13 2008-07-09 소니 가부시끼 가이샤 간결한 트랜스코딩 힌트 메타데이터를 생성하는 방법 및장치
KR100739031B1 (ko) * 2000-03-27 2007-07-25 주식회사 큐론 멀티미디어 검색시스템에서 mpeg-7 표준 메타데이터의 은닉 및 검출 방법과 이를 이용한 멀티미디어 데이터의 검색 방법
JP3517631B2 (ja) * 2000-05-08 2004-04-12 株式会社リコー ダイジェスト映像蓄積方法およびダイジェスト映像蓄積装置
JP2001320693A (ja) * 2000-05-12 2001-11-16 Sony Corp サービス提供装置および方法、受信端末装置および方法、サービス提供システム
JP4953496B2 (ja) * 2000-05-15 2012-06-13 ソニー株式会社 コンテンツ検索・提示システム及び方法、並びに、ソフトウェア記憶媒体
US6646676B1 (en) * 2000-05-17 2003-11-11 Mitsubishi Electric Research Laboratories, Inc. Networked surveillance and control system
JP2001326901A (ja) * 2000-05-18 2001-11-22 Sharp Corp 動画像シーン情報管理装置
JP3600186B2 (ja) * 2000-05-19 2004-12-08 株式会社リコー 映像検索装置
JP2001357008A (ja) * 2000-06-14 2001-12-26 Mitsubishi Electric Corp コンテンツ検索配信装置およびコンテンツ検索配信方法
AUPQ867700A0 (en) 2000-07-10 2000-08-03 Canon Kabushiki Kaisha Delivering multimedia descriptions
KR100369222B1 (ko) * 2000-07-26 2003-01-24 (학)창성학원 디지털 비디오 검색 및 저작기
US7054508B2 (en) * 2000-08-03 2006-05-30 Canon Kabushiki Kaisha Data editing apparatus and method
JP4403643B2 (ja) * 2000-08-04 2010-01-27 ソニー株式会社 番組視聴サービスシステム
US6959326B1 (en) * 2000-08-24 2005-10-25 International Business Machines Corporation Method, system, and program for gathering indexable metadata on content at a data repository
EP1346559A4 (en) * 2000-11-16 2006-02-01 Mydtv Inc SYSTEM AND METHOD FOR DETERMINING THE POPULARITY OF VIDEO PROGRAM EVENTS
JP4536940B2 (ja) * 2001-01-26 2010-09-01 キヤノン株式会社 画像処理装置、画像処理方法、記憶媒体、及びコンピュータプログラム
US7254570B2 (en) * 2001-03-21 2007-08-07 Nokia Corporation Query resolution system and service
JP2003067397A (ja) 2001-06-11 2003-03-07 Matsushita Electric Ind Co Ltd コンテンツ管理システム
US20030088876A1 (en) * 2001-11-08 2003-05-08 Liberate Technologies Video on demand gateway
US20030110501A1 (en) * 2001-12-12 2003-06-12 Rafey Richter A. Personalizing media presentations based on a target duration
JP3826043B2 (ja) * 2002-01-31 2006-09-27 キヤノン株式会社 情報処理装置及び方法
JP3826048B2 (ja) * 2002-02-15 2006-09-27 キヤノン株式会社 情報処理装置及び方法
JP2007179435A (ja) * 2005-12-28 2007-07-12 Sony Corp 情報処理装置、情報処理方法、プログラム
US8386438B2 (en) * 2009-03-19 2013-02-26 Symantec Corporation Method for restoring data from a monolithic backup

Also Published As

Publication number Publication date
EP2202648A1 (en) 2010-06-30
KR20060097767A (ko) 2006-09-15
EP2202979A1 (en) 2010-06-30
KR100912984B1 (ko) 2009-08-20
US20080071836A1 (en) 2008-03-20
WO2003088665A1 (fr) 2003-10-23
EP2202977A1 (en) 2010-06-30
US20080065697A1 (en) 2008-03-13
TW200306114A (en) 2003-11-01
EP2200315A1 (en) 2010-06-23
CN1647528A (zh) 2005-07-27
US20080071838A1 (en) 2008-03-20
KR100986401B1 (ko) 2010-10-08
CN100367794C (zh) 2008-02-06
US20080071837A1 (en) 2008-03-20
US8811800B2 (en) 2014-08-19
JPWO2003088665A1 (ja) 2005-08-25
KR20040108726A (ko) 2004-12-24
KR100918725B1 (ko) 2009-09-24
JP2009171623A (ja) 2009-07-30
EP1496701A1 (en) 2005-01-12
CA2664732C (en) 2013-07-02
CA2482431A1 (en) 2003-10-23
KR20100055541A (ko) 2010-05-26
KR20080064875A (ko) 2008-07-09
EP2202978A1 (en) 2010-06-30
JP4652462B2 (ja) 2011-03-16
US7826709B2 (en) 2010-11-02
AU2003221185A1 (en) 2003-10-27
KR100997599B1 (ko) 2010-11-30
CA2482431C (en) 2013-03-19
SG152905A1 (en) 2009-06-29
JP2009171621A (ja) 2009-07-30
EP2202649A1 (en) 2010-06-30
JP2009171624A (ja) 2009-07-30
JP2009171622A (ja) 2009-07-30
CA2664732A1 (en) 2003-10-23
US20100005070A1 (en) 2010-01-07
JP4987907B2 (ja) 2012-08-01
US20050149557A1 (en) 2005-07-07
EP1496701A4 (en) 2009-01-14
US20080075431A1 (en) 2008-03-27

Similar Documents

Publication Publication Date Title
TWI231140B (en) Middle data editing device, middle data generation device, middle data transmission device, middle data searching device, middle data regeneration condition configuration device, and middle data transmission method
Truong et al. Video abstraction: A systematic review and classification
EP1229547A2 (en) System and method for thematically analyzing and annotating an audio-visual sequence
WO2017079056A1 (en) Streaming data associated with cells in spreadsheets
JP4732418B2 (ja) メタデータ処理方法
JP4652389B2 (ja) メタデータ処理方法
Sawada Recast: an interactive platform for personal media curation and distribution
CN113395587A (zh) 一种基于故事线与角色信息的数字媒体文件格式定义与实现方法
Linfoot et al. A cross-standard metadata formatting structure
Chun et al. Design and Implementation of Digital Contents Authoring Tools with Metadata
KR20150063686A (ko) 사용자가 편집한 영상을 제공하기 위한 편집영상파일을 기록한 컴퓨터로 읽을 수 있는 기록매체

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees