CN1647528A - 元数据编辑装置、元数据再生装置、元数据分发装置、元数据检索装置、元数据再生成条件设定装置和元数据分发方法 - Google Patents

元数据编辑装置、元数据再生装置、元数据分发装置、元数据检索装置、元数据再生成条件设定装置和元数据分发方法 Download PDF

Info

Publication number
CN1647528A
CN1647528A CNA038082608A CN03808260A CN1647528A CN 1647528 A CN1647528 A CN 1647528A CN A038082608 A CNA038082608 A CN A038082608A CN 03808260 A CN03808260 A CN 03808260A CN 1647528 A CN1647528 A CN 1647528A
Authority
CN
China
Prior art keywords
metadata
content
scene
mentioned
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA038082608A
Other languages
English (en)
Other versions
CN100367794C (zh
Inventor
守屋芳美
西川博文
关口俊一
浅井光太郎
山田悦久
乙井研二
黑田慎一
小川文伸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN1647528A publication Critical patent/CN1647528A/zh
Application granted granted Critical
Publication of CN100367794C publication Critical patent/CN100367794C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/785—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using colour or luminescence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1415—Saving, restoring, recovering or retrying at system level
    • G06F11/1435—Saving, restoring, recovering or retrying at system level using file system or storage system metadata
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/786—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80—Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Quality & Reliability (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

将包含运动图像和音频的多媒体“内容”分割成多个场景，对每个分割的场景生成元数据。除了场景的区间信息和标题外，还能够生成包含描述上述“内容”的分层结构的场景结构信息元数据的元数据。又，为了再生成更适当的元数据，用描述包含在上述元数据中的描述符的种类的元数据最佳化提示信息，进行元数据的再生成。

Description

元数据编辑装置、元数据再生装置、 元数据分发装置、元数据检索装置、 元数据再生成条件设定装置和元数据分发方法
技术领域
本发明涉及将包含运动图像和音频的多媒体“内容”分割成多个场景，对每个分割的场景生成元数据的元数据编辑装置、元数据再生装置、元数据分发装置、元数据检索装置、元数据再生成条件设定装置、“内容”分发装置和元数据分发方法。
背景技术
在已有的运动图像管理装置中，在将图像分割成多个场景后，对各场景再生所需的区间信息、场景号码和作为代表场景的图像的集合的索引进行编辑，由生成大于等于一个的索引的部件；将表示检索目的的标题赋予各索引的部件；当检索时，用标题检索索引，按照场景号码的顺序一个接一个地再生索引的场景的部件构成，以排列必要场景的方式编辑索引，能够只再生必要的场景(例如，请参照日本特开2001-028722号专利公报(第1页，图1))。
但是，在上述已有的运动图像管理装置中，因为只不过是由进行各场景的再生所需的区间信息、场景号码和代表场景的图像生成索引，所以存在着不能够管理到视频数据具有的分层性等的视频数据的结构那样的问题。
又，当检索登记的图像时，因为用赋予索引的标题进行，所以存在着为了得到适当的检索结果，必须输入适当的标题那样的问题。
本发明就是为了解决上述问题提出的，本发明的目的是除了得到场景的区间信息和标题外，还能够生成作为视频数据等的“内容”具有的结构等的索引信息的元数据的元数据编辑装置。
又，本发明的目的是得到能够用由元数据编辑装置生成的元数据，只汇集并再生用户想看的场景，并用在元数据中描述的特征量等，检索想看的场景的元数据再生装置、元数据分发装置、元数据检索装置、元数据再生成条件设定装置、元数据分发装置和元数据分发方法。
发明内容
与本发明有关的元数据编辑装置设置了将包含运动图像、音频中的至少一个的多媒体“内容”分割成多个场景，对每个分割的场景生成表示场景的开始位置和结束位置的场景的区间信息元数据的场景分割单元；根据来自上述场景分割单元的场景的区间信息元数据，进行上述多媒体“内容”的各场景的分层编辑，生成描述上述多媒体“内容”的分层结构的场景结构信息元数据的场景描述编辑单元；和统合上述场景的区间信息元数据和上述场景结构信息元数据，生成按照预定格式描述上述多媒体“内容”的内容和结构的元数据的元数据描述单元。
又，与本发明有关的元数据分发装置设置了解析描述元数据中包含的描述符的种类和内容的元数据最佳化提示信息的提示信息解析单元；通过根据上述被分析后的元数据最佳化提示信息和关于元数据再生成的条件，解析描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据，再生成第2元数据的元数据解析/再生成单元；和将由上述元数据解析/再生成单元再生成的第2元数据分发给客户终端的元数据分发单元。
进一步，与本发明有关的元数据分发方法包含着解析描述元数据中包含的描述符的种类的元数据最佳化提示信息的步骤；通过根据上述被分析后的元数据最佳化提示信息和关于元数据再生成的条件，解析描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据，再生成第2元数据的步骤；和将由上述再生成的第2元数据分发给客户终端的步骤。
附图说明
图1是表示与本发明的实施例1有关的元数据编辑装置的构成的方框图。
图2是表示作为与本发明的实施例1有关的元数据编辑装置的编辑对象的一个例子的新闻视频的图。
图3是表示与本发明的实施例1有关的元数据编辑装置的场景分割单元的场景的区间信息元数据的一个例子的图。
图4是表示与本发明的实施例1有关的元数据编辑装置的场景描述编辑单元的场景结构信息元数据的一个例子的图。
图5是表示与本发明的实施例1有关的元数据编辑装置的“内容”再生/显示单元、用户输入单元的画面图像例的图。
图6是表示与本发明的实施例2有关的元数据编辑装置的构成的方框图。
图7是用于说明与本发明的实施例2有关的元数据编辑装置的工作的图。
图8是表示与本发明的实施例3有关的元数据再生装置的构成的方框图。
图9是用于说明与本发明的实施例3有关的元数据再生装置的工作的图。
图10是表示与本发明的实施例4有关的“内容”分发系统的构成的方框图。
图11是表示从与本发明的实施例4有关的元数据分发服务器的元数据解析单元输出的“内容”(新闻视频例)的结构信息的图。
图12是表示由与本发明的实施例4有关的元数据分发系统的元数据再生单元再构成后的“内容”的结构例的图。
图13是表示与本发明的实施例5有关的元数据分发服务器的构成的方框图。
图14是表示用于说明由与本发明的实施例5有关的元数据分发服务器产生的元数据最佳化提示信息的视频“内容”的一个例子的图。
图15是表示当用由与本发明的实施例5有关的元数据分发服务器产生的MPEG-7时的元数据的描述例的图。
图16是表示与本发明的实施例5有关的元数据分发服务器用的元数据最佳化提示信息的格式例的图。
图17是表示与本发明的实施例5有关的元数据分发服务器用的元数据最佳化提示信息的图。
图18是表示与本发明的实施例5有关的元数据分发服务器的元数据解析/再生成单元的工作的操作程序图。
图19是表示与本发明的实施例5有关的元数据分发服务器的元数据解析/再生成单元的工作的操作程序图。
图20是表示与本发明的实施例6有关的元数据检索服务器的构成的方框图。
图21是表示与本发明的实施例6有关的元数据检索服务器的元数据解析单元的工作的操作程序图。
图22是表示与本发明的实施例7有关的客户终端的构成的方框图。
图23是表示与本发明的实施例8有关的“内容”分发服务器的构成的方框图。
具体实施方式
下面，我们根据附图说明
与本发明的实施例1和2有关的元数据编辑装置、
与实施例3有关的元数据再生装置、
与实施例4有关的“内容”分发系统、
与实施例5有关的元数据分发服务器、
与实施例6有关的元数据检索服务器、
与实施例7有关的客户终端、和
与实施例8有关的“内容”分发服务器。
实施例1
在实施例1中，我们说明将包含运动图像和音频的多媒体“内容”分割成多个场景，生成场景的分层结构描述和包含各场景的特征量的元数据(索引信息)的元数据编辑装置。
我们一面参照附图一面说明与本发明的实施例1有关的元数据编辑装置。图1是表示与本发明的实施例1有关的元数据编辑装置的构成的方框图。此外，在各图中，相同的标号表示相同或相当的部分。
在图1中，元数据编辑装置100备有“内容”再生/显示单元2、场景分割单元3、缩略图图像生成单元4、场景描述编辑单元5、文本信息赋予单元6、特征提取单元7、用户输入单元8和元数据描述单元9。
“内容”再生/显示单元2再生/显示由视频数据和音频数据等构成的编辑对象的多媒体“内容”10。场景分割单元3将“内容”分割成多个场景。缩略图图像生成单元4提取场景的代表帧作为缩略图图像。场景描述编辑单元5通过由场景分割单元3分割的场景的分组化、场景的结合、场景的删除、场景的关系信息的生成等分层地编辑场景。文本信息赋予单元6将各种文本信息附加在各场景上。特征提取单元7提取场景的特征。
又，用户输入单元8将来自用户的指示信息作为用户输入信息11输出到“内容”再生/显示单元2、场景分割单元3、缩略图图像生成单元4、场景描述编辑单元5和文本信息赋予单元6。
进一步，元数据描述单元9将由场景分割单元3、缩略图图像生成单元4、场景描述编辑单元5、文本信息赋予单元6和特征提取单元7输出的场景的区间信息元数据12、场景的缩略图图像信息元数据13、场景结构信息元数据14、文本信息元数据15和特征描述元数据16统合起来，生成按照规定的格式描述多媒体“内容”的内容和结构的元数据17。
下面，我们一面参照附图一面说明与本实施例1有关的元数据编辑装置的工作。图2是表示作为与本实施例1有关的元数据编辑装置的编辑对象的一个例子的新闻视频的构成的图。
我们将编辑图2所示的构成的新闻视频的情形作为例子进行说明。
首先，元数据编辑装置100的“内容”再生/显示单元2，当通过网络等输入存储在“内容”存储单元(图中未画出)中的视频“内容”等的多媒体“内容”10时，为了用于编辑地再生/显示它们。
当元数据编辑装置100的用户一面观看该再生图像，一面通过用户输入单元8输入作为场景的切出位置，即场景开始位置和结束位置时，场景分割单元3生成显示从用户输入的场景开始位置和结束位置的场景的区间信息元数据12。
图3是表示与本实施例1有关的元数据编辑装置的场景分割单元的场景的区间信息元数据的一个例子的图。
该图3所示的区间信息元数据12表示从图2所示的新闻视频生成的例子。如图3所示，由场景分割单元3，对于从新闻视频“内容”切出的“新闻摘要”、“国内新闻”和“国际新闻”等的各场景，生成表示场景开始位置和结束位置的区间信息的场景的区间信息元数据12。
在场景描述编辑单元5中，当具有通过用户输入单元8来自用户的场景编辑的指示时，根据来自场景分割单元3的场景的区间信息元数据12，进行由场景分割单元3连续地切出的场景的分层编辑，输出场景结构信息元数据14。所谓的场景的分层编辑指的是例如场景的分组化、场景的再分割、场景的结合、场景的删除。所谓场景的分组化指的是，例如，从图2所示的新闻视频，例如图4所示地将以“国内新闻”、“国际新闻、“经济新闻”等的某种特定特征关联的场景汇集成一个“新闻”组。又，所谓场景的再分割指的是将一个场景分割成多个场景。所谓的场景的结合指的是汇集多个场景成为一个场景。
图4是表示与本实施例1有关的元数据编辑装置的场景描述编辑单元的场景结构信息元数据的一个例子的图。
该图4所示的场景结构信息元数据14描述作为在场景描述编辑单元5中的编辑结果，生成的视频“内容”的分层结构。在图4中，在场景描述编辑单元5中，通过场景的分组化、场景的再分割、场景的结合等的场景的编辑，将称为“新闻”的场景编辑成“新闻摘要”、“新闻”、“特辑”、“体育”等，进一步将该“新闻”分层地编辑成“国内新闻”、“国际新闻、“经济新闻”显示出来。
而且，将在场景描述编辑单元5中生成的例如图4所示的元数据14输出到元数据描述单元9。
另一方面，在缩略图图像生成单元4中，根据来自场景分割单元3的场景的区间信息元数据12，从在场景分割单元3中切出的各场景中生成代表帧作为缩略图图像，将生成的缩略图信息作为缩略图图像信息元数据13输出到元数据描述单元9，登记在元数据描述单元9中。这里，用户也能够通过用户输入单元8，进行缩略图选择，但是也能够自动地将起始帧和固定时间间隔的多个帧作为代表帧，或自动检测场景变换点，将这些帧作为代表帧。缩略图图像信息元数据13成为视频“内容”中的缩略图的位置信息(帧号码或时间)、或者，缩略图图像的URL等的所处位置信息。
又，在特征提取单元7中，根据来自场景分割单元3的场景的区间信息元数据12，从各场景中，提取运动、颜色、或包含在场景内的物体的形状等场景具有的视觉特征量。将提取的特征量作为特征描述元数据16，输出到元数据描述单元9，并登记在元数据描述单元9中。
又，在文本信息赋予单元6中，根据来自场景分割单元3的场景的区间信息元数据12，用户将标题、简介、关键字、评述、场景的重要度等的各种文本信息赋予各场景。文本信息的赋予是当用户通过用户输入单元8输入时，通过解析“内容”中包含的音频信息和字幕，自动地赋予的情形。将文本信息，作为文本信息元数据15，输出到元数据描述单元9，并登记在元数据描述单元9中。
图5表示与本实施例1有关的元数据编辑装置的“内容”再生/显示单元和用户输入单元8的画面图像例。在图5中，视频再生画面G1，与在“内容”再生/显示单元2中的画面图像例相当，在该视频再生画面G1中，再生/显示编辑用的“内容”。在图5中，虽然没有明示，但是备有“再生”、“停止”、“回卷”，“快进”、“发送帧”再生用的指示按钮等通常的视频再生装置中备有的用户接口。而且，在该视频再生画面G1的下方显示出场景分割指示画面G2。该场景分割指示画面G2，例如，具有幻灯片形式，一面观看在视频再生画面G1中显示的图像，一面用户能够指示在视频再生画面G1中显示的图像场景的开始位置和结束位置。又，场景分割指示画面G2能够同时在场景的开始位置和结束位置之间，指示缩略图的位置。这里，当由场景分割指示画面G2指定缩略图的位置时，缩略图图像生成单元4从视频“内容”的指定位置的帧生成缩略图图像。
又，由场景分割指示画面G2指定位置的缩略图图像，作为场景的分割信息，在场景分割信息显示画面G3中显示出来。在该场景分割信息显示画面G3中，除了缩略图图像外，如图3所示，也能够对每个场景显示表示场景的开始位置和结束位置的信息。
接着，在树形结构生成指示/显示画面G4中，向用户指示场景编辑。一面用户观看在场景分割信息显示画面G3中显示出来的缩略图图像等的场景分割信息，一面生成表示视频“内容”具有的分层结构的树形。
作为操作方法，例如，当进行场景的分组化时，在树形上追加新的节点，将想要分组化的场景追加在该节点上。场景的追加操作，可以考虑在场景分割信息显示画面G3上选择想要追加的场景，通过拖拽，在节点上追加场景等的方法。通过在场景分割信息显示画面G3、树形结构生成指示/显示画面G4中提供用户输入单元8作为用于选择场景、经过文本信息赋予单元6将文本信息赋予该场景的用户接口，能够输入对于场景的文本信息。
元数据描述单元9将由场景分割单元3、缩略图图像生成单元4、场景描述编辑单元5、文本信息赋予单元6和特征提取单元7输出的各种元数据统合起来，生成按照规定的描述格式描述的元数据文件。元数据的规定的描述格式也能够用独自规定的格式进行描述，但是在本实施例1中，使用由ISO标准化的MPEG-7。该MPEG-7规定描述“内容”的结构和特征的格式，具有XML文件格式和二进制格式。
从而，如果根据本实施例1的元数据编辑装置100，则因为设置了分层编辑场景的场景描述编辑单元5和从场景提取特征的特征提取单元7，所以能够生成描述视频数据等的“内容”具有的分层结构和各场景的特征量的元数据。
此外，假定输入到“内容”再生/显示单元2的多媒体“内容”10，有从在网络上的“内容”服务器(图中未画出)取得的情形、从在元数据编辑装置100内的“内容”存储单元(图中未画出)取得的情形和从CD和DVD等的存储媒体(图中未画出)取得的情形等的各种情形。同样，假定将从元数据描述单元9输出的元数据，有存储在网络上的“内容”服务器(图中未画出)中的情形、存储在元数据编辑装置内的元数据存储单元(图中未画出)中的情形和与“内容”一起存储在CD和DVD等的存储媒体(图中未画出)中的情形等。
又，在本实施例1中，设置了场景描述编辑单元5和特征提取单元7两者并进行了说明，但是不限于此，当然既可以只设置场景描述编辑单元5，也可以只设置特征提取单元7。
实施例2
在上述实施例1中，我们说明全部通过手动进行场景分割的情形，但是在本实施例2中，我们说明以备有自动检测场景变换点的场景变换检测单元为特征的数据编辑装置。
我们一面参照附图一面说明与本发明的实施例2有关的元数据编辑装置。图6是表示与本发明的实施例2有关的元数据编辑装置的构成的方框图。
在图6中，元数据编辑装置100A备有“内容”再生/显示单元2、场景分割单元3、缩略图图像生成单元4、场景描述编辑单元5、文本信息赋予单元6、特征提取单元7、用户输入单元8、元数据描述单元9和场景变换检测单元39。此外，标号40是自动检测的场景开始位置信息。
下面，我们一面参照附图一面说明与本实施例2有关的元数据编辑装置的工作。
图7是用于说明与本发明的实施例2有关的元数据编辑装置的工作的图。
除了场景变换检测单元39和场景分割单元3以外的工作都与上述实施例1相同。这里我们说明实施例2特有的工作。
场景变换检测单元39自动地进行场景变换、切去点检测。场景变换检测是，例如，根据帧间象素差分、帧间颜色和亮度的直方图差分等进行的。场景分割单元3根据在场景变换检测单元39中检测出的场景变换点，决定场景开始位置和结束位置。
这里，我们将编辑对象的“内容”是新闻视频的情形作为例子详细述说场景变换检测单元39和场景分割单元3的处理。
我们以用颜色直方图作为用于场景变换检测的特征量的情形为例进行说明。
在场景变换检测检测单元39中，对每一个帧算出颜色直方图。作为表色系，具有HSV、RGB、YCbCr等，但是这里，用HSV色空间。该HSV色空间由色调(H)、色饱和度(S)、亮度(V)这样3个要素构成。算出各要素的直方图。接着，从求得的直方图，例如根据下列的(公式1)，算出帧间的直方图差分。我们假定从场景的开始帧算起的N个帧(例如N＝3)属于同一场景，即，没有场景变换点。此外，作为场景的初期特征量，根据下列的(公式2)，求得最初的N个帧间的直方图差分的平均(mean)和标准偏差(sd)。
su m i = Σ k = 1 bin _ H | H i ( k ) - H i - 1 ( k ) | + Σ k = 1 bin _ s | S i ( k ) - S i - 1 ( k ) | + Σ k = 1 bin _ v | V i ( k ) - V i - 1 ( k ) |
                                              (公式1)
其中，
sumi：帧i和帧i-1的直方图间差分和
Hi(h)：色调的直方图，bin_H：直方图的要素数
Si(h)：色饱和度的直方图，bin_S：直方图的要素数
Vi(h)：亮度的直方图，bin_V：直方图的要素数
mean = 1 N - 1 Σ i = 1 n - 1 sum i , sd = 1 N - 1 Σ i = 1 N - 1 ( sum i - mean ) 2
                                              (公式2)
其中，
mean：帧间的直方图差分的平均
sd：帧间的直方图差分的标准偏差
而且，N+1帧及其以后，将直方图的帧间差分比mean+λ·sd大的帧作为场景变换点，作为新场景的开始位置候补。
现在考虑如果得到多个场景的开始位置候补，则接着，如新闻视频那样，插入由新闻的切换等决定的模式的图像的情形。
新闻视频，在新闻的切换中，例如，插入由播音员和背景的演播室设置、说明的文字(字幕)构成的图像等、决定的模式的图像的情形是很多的。从而，预先登记这些决定的模式的图像(称为样板图像)、或描述样板图像的特征量的元数据。所谓样板图像的特征量可以举出样板图像的颜色直方图、或者，运动图案(在新闻切换中播音员写的部分具有少量的运动等)等。
在预先登记样板图像的情形中，例如图7所示，当与场景变换点对应的图像与样板图像匹配，类似度高时，将该场景变换点作为场景的开始位置进行登记。作为类似度的匹配，具有帧间差分和帧间的颜色直方图差分等。
又，在预先登记样板图像的特征量的情形中，当从与场景变换点对应的图像提取特征量，与样板图像的特征量匹配，类似度高时，将该场景变换点作为场景的开始位置进行登记。将场景的开始位置的信息输出到场景分割单元3。
在场景分割单元3中，根据由场景变换检测单元39自动检测出的场景开始位置信息，决定场景开始位置和结束位置。此外，在本实施例2的场景分割单元3中，与上述实施例1同样，也能够根据来自用户的指示，决定场景开始位置和结束位置。
在场景分割单元3中，也能够将描述场景的开始位置和结束位置的场景的区间信息元数据12输出到场景变换检测单元39，用该场景变换检测单元39，检测在该场景中包含的场景变换点。
在场景描述编辑单元5中，能够根据来自场景分割单元3的场景的区间信息元数据12，再分割和统合由场景变换检测单元39自动检测出的场景。此外，场景描述编辑单元5的详细情况与上述实施例1相同。
从而，如果根据与本实施例2有关的元数据编辑装置100，则与上述实施例1相同，能够生成描述视频数据等的“内容”具有的分层结构和各场景的特征量的元数据，并且通过设置场景变换检测单元39，可以自动检测“内容”的场景变换点。
实施例3
在本实施例中，我们说明利用由上述实施例1和2的元数据编辑装置生成的元数据，进行图像的概要再生和检索等的元数据再生装置。
我们一面参照附图一面说明与本发明的实施例3有关的元数据再生装置。图8是表示与本发明的实施例3有关的元数据再生装置的构成的方框图。
在图8中，元数据编辑装置200备有元数据解析单元19、结构显示单元20、缩略图图像显示单元21、用户输入单元22、检索单元23、检索结果显示单元24、概要生成单元25、概要结构显示单元26和“内容”再生单元27。
元数据解析单元19对描述了关于“内容”具有的分层的场景结构和各场景的缩略图的信息、各场景的特征量等的元数据28的解析。结构显示单元20显示从元数据解析结果取得的场景结构29，即“内容”的分层结构。缩略图图像显示单元21显示从元数据解析结果取得的缩略图图像信息30。
用户输入单元22进行检索和再生等的指示。检索单元23根据来自用户的检索指示(检索条件31)和从元数据取得的场景的特征量与文本信息32进行检索。检索结果显示单元24显示检索结果33。概要生成单元25根据来自用户的概要生成指示(概要生成条件34)生成概要。概要结构显示单元26显示生成概要的“内容”结构38。“内容”再生单元27根据概要信息35、“内容”再生指示36、再生的“内容”37再生/显示“内容”。
下面，我们一面参照附图一面说明与本实施例3有关的元数据再生装置的工作。
首先，元数据解析单元19将描述关于“内容”具有的分层的场景结构和各场景的缩略图的信息、各场景的特征量等的元数据28作为输入，进行元数据的解析。
在本实施例3中，因为用上述实施例1、2的元数据描述单元9生成的由MPEG-7规定的格式描述该元数据28，所以元数据既可以是用XML描述的文本文件，也可以是用二进制格式进行编码的二进制文件。
因此，元数据解析单元19，如果用XML描述元数据28，则具有进行XML文件解析的XML服务器的功能。又，如果用二进制格式对元数据28进行编码，则具有进行元数据28解码的解码器功能。
结构显示单元20，输入元数据解析单元19的解析结果，显示“内容”的分层的场景结构29。例如，如图4所示，与各场景的标题一起树形显示“内容”的场景结构。
缩略图图像显示单元21输入元数据解析单元19的解析结果(缩略图图像信息30)，显示“内容”的缩略图图像一览表。
检索单元23，根据通过用户输入单元22的来自用户的检索指示，检索“内容”中包含的场景。这时，由用户输入单元22，根据关键字和取样图像的提示等，输入检索条件。由检索单元23，根据元数据中描述的场景的特征量和场景标题等的文本信息32，检索与由用户提示的检索条件(关键字和取样图像的特征)31一致的场景。
当由检索单元23进行的检索结束时，检索结果显示单元24输入检索单元23的检索结果33，显示出检索结果。作为检索结果的显示方法，例如，显示与检索条件一致的场景的缩略图图像。
又，概要生成单元25根据通过用户输入单元22输入的来自用户的概要生成指示，生成“内容”的概要。这时，由用户输入单元22，输入生成概要的“内容”的再生时间和用户嗜好等的信息。例如，当“内容”是新闻视频时，输入将新闻中的体育作为主要的用户想看的信息、或者，将1小时新闻概括成20分钟的用户想看的信息等的用户嗜好信息。又，由概要生成单元25，根据元数据中描述的场景的再生时间和场景的标题等的文本信息32，生成与概要条件一致的概要信息35。该概要信息35是，例如，在生成概要的“内容”中包含的场景的再生清单，是记述了描述“内容”的URL等的位置信息以及该“内容”中的想要再生的场景的开始位置和结束位置的清单。
又，由“内容”再生/显示单元27，根据概要信息35中包含的“内容”的位置信息，特定对象“内容”，根据概要信息35中包含的场景清单，进行再生场景的取得/再生/显示。又，作为别的例子，也可以考虑分层地描述概括概要信息的场景结构的情形。
图9是表示分层地描述生成概要的场景结构的一个例子的图。图9(a)表示原始“内容”的场景结构的例子。对于各场景，附加在0.0～1.0范围内的重要度。1.0意味着重要度最高，0.0意味着重要度最低。重要度是，例如，根据用户嗜好计算的。例如，当预先登记关于球队A的足球赛的场景，特别是必然要看的比赛结果和得分场景那样的用户嗜好时，在各场景上附加反应用户嗜好的重要度。
而且，在图9(a)中，只用重要度最高的场景生成概要，生成概要的场景结构如图9(b)所示。此外，各场景具有包含该场景的“内容”的URL等的位置信息和该场景的“内容”内的位置信息(开始位置和结束位置)等的元数据。将关于生成概要的场景结构38的信息传送给概要结构显示单元26，该概要结构显示单元26例如以图9(b)所示的树形形式显示生成概要的场景结构。
又，当用户通过用户输入单元22从在结构显示单元20或概要结构显示单元26中显示的场景结构、以及缩略图图像显示单元21和检索结果显示单元24中显示的各场景的缩略图中选择想要再生的大于等于一个的场景时，能够在“内容”再生/显示单元27中再生/显示“内容”中包含的场景。
从而，如果根据与本实施例3有关的元数据编辑装置200，则能够用由上述实施例1、2中说明的元数据编辑装置生成的元数据，只汇集并再生用户想看的场景，或者用在元数据中描述特征量，检索想看的场景。
又，在本实施例3中，“内容”再生/显示单元27是在元数据编辑装置200内，但是“内容”再生/显示单元也可以在别的装置内。这可以考虑为，例如，关于场景结构与缩略图图像的显示等、元数据再生的操作和显示是在便携式电话和便携式信息终端等中进行的，关于多媒体“内容”的再生的处理和显示是在通过网络与便携式电话和便携式信息终端等连接的终端(例如PC等)中进行的情形。
实施例4
在本实施例4中，我们说明向客户终端分发“内容”的元数据的元数据分发服务器(元数据分发装置)和与客户终端的终端能力相应地可伸缩地构成并分发该“内容”的“内容”分发服务器。
我们一面参照附图一面说明与本发明的实施例4有关的“内容”分发系统。图10是表示与本发明的实施例4有关的“内容”分发系统的构成的方框图。
在图10中，“内容”分发系统300备有元数据分发服务器400、各种客户终端481～48n和“内容”分发服务器500。
元数据分发服务器400由元数据存储单元41、元数据解析单元42、终端能力判定单元43、元数据再生单元44和元数据分发单元45构成。
在元数据存储单元41中，存储着例如上述实施例1、2的元数据编辑装置生成的元数据。元数据解析单元42对描述“内容”的结构和特征的元数据49进行解析。终端能力判定单元43根据关于客户终端的性能的信息51，判定客户终端的终端能力。元数据再生单元44根据元数据解析结果50，与客户终端的终端能力相应地再构成“内容”，再生成描述该“内容”的元数据52。元数据分发单元45将在元数据再生单元44中再生成的元数据53分发给各种客户终端481～48n。
此外，也可以将元数据存储单元41设置在本实施例4的元数据分发服务器400的外面。这时，元数据分发服务器400通过网络(图中未画出)等从元数据存储单元41输入元数据49。
又，“内容”分发服务器500由“内容”存储单元46和“内容”分发单元47构成。
“内容”存储单元46存储“内容”55。“内容”分发单元47与来自客户终端481～48n的“内容”分发要求54相应地分发“内容”56。
与上述元数据分发服务器400的情形相同，也可以将“内容”存储单元46设置在“内容”分发服务器500的外面。这时，“内容”分发服务器500通过网络(图中未画出)输入“内容”数据55。
下面，我们一面参照附图一面说明与本实施例4有关的“内容”分发系统的工作。
首先，在元数据分发服务器400一侧，元数据解析单元42对存储在由元数据存储单元41中的元数据进行解析。元数据解析单元42的工作与上述实施例3的“内容”再生装置200的元数据解析单元19相同。元数据解析单元42通过对元数据进行解析，取得关于各“内容”的结构和特征的信息。
图11是表示从与本实施例4有关的元数据分发服务器的元数据解析单元输出的“内容”(例如新闻视频)的结构信息的图。在图11中，用树形表示“内容”的分层的场景结构。树形的各节点，与各个场景对应，将各个场景信息对应地赋予各节点。所谓的场景信息指的是作为场景的标题、摘要、场景开始位置和结束位置的时间信息、场景的缩略图、代表帧、缩略图镜头、代表镜头、颜色和运动等视觉上的特征量等的场景特征。此外，在图11中，在各种场景信息中，只图示场景的标题。
这里，假定客户终端为终端能力不同的各种信息家电设备。所谓的终端能力指的是通信速度、处理速度和可以再生/显示的图像格式、图像分辨率、用户输入功能等。例如，假定客户终端481是在通信速度、处理速度、显示性能、用户输入功能上具有充分性能的PC(个人计算机)。又，假定客户终端482是便携式电话，假定其它的客户终端是PDA等。从各客户终端481～48n发送与各个终端性能有关的信息。
终端能力判定单元43解析与从各客户终端481～48n发送的终端性能有关的信息51，决定可以分发的图像格式、最大图像分辨率、“内容”的长度等，输出到“内容”再生成单元44。例如，在原始“内容”是用MPEG-2进行编码的图像分辨率大的视频“内容”的情形中，在具有充分性能的客户终端481中，能够再生原始“内容”。又，该客户终端481具有上述实施例3中说明的可以进行图像的概要再生和检索的功能。另一方面，在客户终端482中，只可以再生用MPEG-4进行编码的短的视频镜头，并且可以显示的最大图像分辨率也很小。
在“内容”再生成单元44中，与来自终端能力判定单元43的各客户终端481～48n的终端性能相应地再构成“内容”，再生成描述其结构和内容的元数据52，输出到元数据分发单元45。例如，因为将原始的元数据原封不动地分发给客户终端481，所以不进行“内容”的再构成。另一方面，因为对于客户终端482，只具有短的视频镜头的再生功能，所以不能够再生全部场景。从而，用重要场景的短的视频镜头再构成“内容”。
图12是表示由与本实施例4有关的元数据分发系统的元数据再生单元再构成后的“内容”的结构例的图。如图12所示，从各新闻场景中，提取重要的场景，只用该场景的代表镜头或代表帧进行构成。又，因为客户终端482不具有上述实施例3中说明的检索功能，所以在场景的各种信息中，不需要将用于检索的场景的特征量描述在元数据中。因此，元数据再生单元44再生成只描述再构成的场景结构和该场景的代表镜头或代表帧的位置信息的元数据，并输出到元数据分发单元45。
该元数据分发单元45将由元数据再生单元44生成的元数据53分发给客户终端481～48n。
各客户终端481～48n对由元数据分发单元45分发的元数据53进行解析，取得“内容”的树形结构信息。各客户终端481～48n的用户，当选择想要再生的场景时，从各客户终端481～48n将选出的场景的位置信息发送给“内容”分发服务器500的“内容”分发单元47。
由“内容”分发服务器500的“内容”分发单元47，取得从各客户终端481～48n发送的场景的位置信息，从“内容”存储单元46取得对应的“内容”55，分发给客户终端481～48n。在客户终端481的情形中，发送场景的开始位置和结束位置，分发与原始“内容”的对应的场景。又，在客户终端482的情形中，发送场景的代表镜头的所在位置信息(URI等)。此外，在客户终端482中不可能再生/显示代表镜头的图像格式、图像分辨率和图像文件大小等的情形中，由“内容”分发单元47，进行格式变换和图像分辨率变换、减小文件大小的“内容”概要等，并进行发送。
从而，如果根据本实施例的元数据分发服务器400，则可以与各客户终端481～48n的能力相应地再生成元数据，分发给各客户终端。
此外，在图10中，表示分别构成的元数据分发服务器400和“内容”分发服务器500，但是本发明不限于此，也可以将“内容”分发服务器设置在元数据分发服务器中，或者将元数据分发服务器设置在“内容”分发服务器中。又，当然也可以将元数据分发服务器和“内容”分发服务器设置在同一服务器内。如果这样做，则因为“内容”分发单元47能够从顾客判定单元43简单地知道各客户终端481～48n的能力，所以可以与各客户终端481～48n的能力相应地再构成格式变换等的“内容”，分发给备客户终端481～48n。
又，在该实施例4中，我们说明了存储在元数据存储单元41中的元数据是例如上述实施例1、2的元数据编辑装置生成的元数据的情形，但是不限于此，当然也可以存储上述实施例1、2的元数据编辑装置以外的装置生成的元数据。
实施例5
在本实施例5中，我们说明上述实施例4中说明的元数据分发服务器的别的例子。由上述实施例4的元数据分发服务器，根据从客户终端发送的终端信息，进行元数据的再生。在本实施例5中，我们说明以备有为了进行更适当的元数据的再生成，用作为用于元数据的再生成的提示信息的元数据最佳化提示信息，进行元数据的再生成的元数据解析/再生成单元为特征的元数据分发服务器(元数据分发装置)。
我们一面参照附图一面说明与本发明的实施例5有关的元数据分发服务器。图13是表示与本发明的实施例5有关的元数据分发服务器的构成的方框图。
在图13中，元数据分发服务器400A备有提示信息解析单元61、元数据解析/再生成单元63和元数据分发单元45。
提示信息解析单元61解析元数据最佳化提示信息60并输出它的结果。元数据解析/再生成单元63，根据被解析出的元数据最佳化提示信息62、关于客户终端的性能的信息、或者，关于用户嗜好等的元数据再生成的条件65，解析描述“内容”的结构和特征的元数据49，输出再构成的元数据64。元数据分发单元45将元数据53分发给客户终端。
在元数据存储单元41(请参照图10)中，存储着描述“内容”的结构和特征的元数据49和用于再生成该元数据49的提示信息的元数据最佳化提示信息60。所谓用于再生成元数据49的元数据最佳化提示信息60指的是在该元数据49中，描述包含多少什么种类的信息，或元数据49的概要和复杂度的信息。
下面，我们一面参照附图一面说明与本实施例5有关的元数据分发服务器的工作。
我们将具有图14所示的结构的视频“内容”作为例子，详细述说元数据最佳化提示信息60。
视频“内容”(Root)(Soccer game program(足球赛节目))大致由2个场景(Scene1、Scene2)的前半场和后半场构成，前半场的场景进一步由多个场景(Scene1-1、Scene1-2、....Scene1-n)(球门场景、角球场景等)构成。在图14中，用树形结构表示场景间的时间上的分层结构。
在对应的元数据49中描述着这种“内容”的时间上的分层结构，即场景间的时间关系和各场景的开始时间与长度。又，对于各场景，除了与分层的层次对应地该场景具有的特征(例如，颜色直方图和运动的复杂性)外，还描述着标题、简介、类型、注释等的文本信息、重要度等等。此外，在本实施例5中，作为元数据的描述格式，用由ISO标准化的MPEG-7。
图15表示用MPEG-7时的元数据的描述例。在MPEG-7中，将各场景描述在称为“视频段”的单元中。在各视频段中，描述着时间信息(场景的开始点和长度)、标题、概要、类型等。此外，存在着与视频段的分层相应地描述在视频段内的信息不同的情形。在图15的例子中，在层次2和层次3的视频段中描述着重要度，但是在层次4中不描述重要度。又，只在层次4的视频段内描述着颜色和运动的特征量。
通过递归地描述视频段能够表现场景间的时间上的分层关系。在图15的描述例中，通过称为“时间分割”的描述，描述着由时间上分割一个视频段的多个视频段构成的情形。在MPEG-7中，也能够同样地描述“内容”具有的空间上的分层结构。这时，代替称为“时间分割”的描述，用表示由空间上分割一个视频段的多个视频段构成的“空间分割”的描述。
用于再生成元数据49的元数据最佳化提示信息60是描述该元数据49中包含的信息(描述符)的种类和内容的信息。从而，在元数据最佳化提示信息60中，对于图15的元数据，包含着表现“内容”具有的时间上的分层结构的描述符(“时间分割”)、表现颜色直方图和运动的复杂性的描述符、表现标题、简介、类型、重要度的描述符。又，作为表示描述“内容”和复杂性的指标，视频段的分层结构的深度最大为4(层次1～层次4)。重要度取5个离散的值({0.0，0.25，0.5，0.75，1.0})。作为该重要度的观点，描述着以“TeamA(球队A)”的观点观看时的重要度和以“TeamB(球队B)”的观点观看时的重要度。又，也包含着描述重要度的分层位置(描述在视频段的哪个层次上)。
图16表示元数据最佳化提示信息60的格式例。在图16表示的元数据最佳化提示信息60中，包含着元数据文件信息和元数据构成要素信息。
元数据文件信息描述元数据文件的所在位置、元数据文件大小、元数据文件格式(表示XML格式、二进制格式等的文件格式)、语法文件信息(规定元数据语法的语法文件的所在位置)、表示包含(出现)在元数据中的要素数的出现要素数等、用于预测处理元数据所需的资源(进行元数据的存储/解析所需的存储器大小和解析元数据所需的处理系统(S/W)等)的信息。此外，例如，当用XML描述元数据时，规定该描述格式(语法)的DTD文件和schema文件等与规定元数据文件的格式的语法文件相当，而语法文件信息描述DTD文件和schema文件等的语法文件的所在位置。
所谓的元数据构成要素信息是描述构成元数据的描述符的种类及其内容的信息。在该元数据构成要素信息中，包含着在元数据中包含的描述符的名称、该描述符在元数据内出现的频度(次数)、该描述符是否包含在语法上可以包含的全部描述符的描述(完全描述性)、或当递归地描述该描述符时，在该描述符持有的时间或空间中的分层性(深度最大值)。例如，在图15所示的元数据描述例中，因为“视频段”是递归地描述的描述符，最大具有4分层的结构，所以“视频段”描述符具有的分层深度最大为4。
进一步，关于在递归地描述的描述符内包含的描述符，该描述符出现的出现位置(分层层次)也是提示信息。例如，“重要度”是包含在“视频段”内的描述符，但是当包含在小于等于层次3的“视频段”内，即，不包含在层次4的视频段内时，“重要度”出现的位置最大达到3。此外，这样，也能够用分层层次指定出现位置，但是当将ID分发给包含“重要度”的“视频段”或“视频段”自身时，也可以描述出现位置作为ID的清单。又，在具有值的描述符的情形中，描述符的类型和描述符可以取得的值的范围也是一个提示信息。例如，当分别从“TeamA”、“TeamB”的观点出发，用5个离散的值({0.0，0.25，0.5，0.75，1.0})表现重要度时，重要度可以取得的值是具有浮动小数点的类型的清单{0.0，0.25，0.5，0.75，1.0}。对于每个作为元数据的构成要素的描述符重复进行以上的描述。
图17表示按照图16的格式描述的元数据最佳化提示信息的一个例子。我们看到在图17所示的元数据最佳化提示信息60的一个例子中，包含着元数据文件信息、和称为“视频段”与“标题”的元数据构成要素信息。
下面，我们用图13说明使用元数据最佳化提示信息60进行元数据的再生成的方法。
由提示信息解析单元61，解析用规定格式描述的元数据最佳化提示信息60。由元数据解析/再生成单元63中，使用从提示信息解析单元61输出的被分析后的元数据最佳化提示信息62，进行元数据49的解析，根据关于元数据再生成的条件65输出再生成的元数据64。
图18表示由使用被解析的元数据最佳化提示信息62的元数据解析/再生成单元63实施的元数据的解析方法的一个例子。在该例子中，只从原始的元数据49提取具有重要度大于等于0.5的特征的视频段，再生成只用关于提取的视频段的描述构成的元数据。
首先，元数据解析/再生成单元63根据用于元数据再生成的条件65，特定再生成所需的元数据(步骤S1)。这里，因为只提取具有重要度大于等于0.5的特征的视频段，所以“重要度”和“视频段”是再生成所需的描述符。
其次，根据被分析后的元数据最佳化提示信息62，判定在元数据49中是否包含在步骤S1特定的描述符(以下，将描述符“重要度”作为例子进行说明)(步骤S2)。
当在元数据中包含“重要度”描述符时，进行元数据的解析(步骤S3)，当不包含“重要度”描述符时，结束元数据的解析处理(步骤S4)。
又，当在被分析后的元数据最佳化提示信息62中指定“重要度”的出现位置为直到分层结构的层次3时，在结束直到层次3的视频段的解析的时刻(步骤S5)，不进行大于等于层次4的分层的解析，结束解析处理(步骤S6)。
此外，需要时为了进行别的元数据49的解析，重复步骤S1以后的处理。又，当在元数据最佳化提示信息62中指定“重要度”描述符的出现次数为20时，在结束20个“重要度”描述符的解析的时刻(步骤S5)，结束元数据的解析(步骤S6)。进一步，在步骤S4或步骤S6结束元数据的解析处理后，需要时为了进行别的元数据的解析，重复步骤S1以后的处理。
图19表示使用被分析后的元数据最佳化提示信息62的元数据的解析方法的别的例子。在该例子中，只提取包含“标题”描述符的视频段，再生成元数据。在元数据中是否包含“标题”描述符的判定与图18的例子相同。
元数据解析/再生成单元63，当在元数据中包含“标题”描述符时，判定是否是与在元数据最佳化提示信息中描述的出现位置的ID一致的视频段(步骤S13)。
当不与ID一致时，因为是不包含“标题”描述符的视频段，所以跳过该视频段的描述的解析(步骤S16)。
当与ID一致时，为了取得“标题”描述符，进行该视频段的描述的解析(步骤S15)。
接着，当结束对与出现位置的ID一致的全部视频段的解析时(步骤S17)，因为在此以上，在元数据内不存在包含“标题”描述符的视频段，所以结束解析处理(步骤S18)。
此外，为了需要时进行别的元数据的解析，重复步骤S11以后的处理。输出用通过以上的解析处理提取的描述符再构成的元数据64。
由元数据分发单元45，将再构成的元数据64分发给各种客户终端。
此外，虽然没有图示出来，但是因为在元数据再生后，元数据文件的所在位置和元数据文件大小、出现在元数据中的要素数、关于元数据构成要素的信息也发生变化，所以也可以再生成与再生成后的元数据对应的元数据最佳化提示信息。
如上所述，至今为了再生成元数据，必需解析元数据中包含的全部描述符，但是在本实施例5中，因为使用描述在元数据49中包含的描述符的清单和描述符的出现位置、出现次数等的元数据最佳化提示信息60，解析元数据49的描述符，所以能够省去用于再生成元数据的元数据49自身的解析，又，因为根据出现位置和出现次数，能够省去与再生成条件不一致的描述符的解析，所以能够减少伴随着元数据的解析和再生成的处理费用(处理量和存储器使用量等)。
实施例6
在上述实施例5中，我们说明了用为了元数据再生成的元数据最佳化提示信息60，减少伴随着元数据的解析和再生成的处理费用的元数据分发服务器，但是在本实施例6中，我们说明用元数据最佳化提示信息，减少伴随着元数据的检索的处理的元数据检索服务器(元数据检索装置)。
我们一面参照附图一面说明与本发明的实施例6有关的元数据检索服务器。图20是表示与本发明的实施例6有关的元数据检索服务器的构成的方框图。
在图20中，元数据检索服务器600备有提示信息解析单元61、元数据解析单元71和检索单元73。
因为提示信息解析单元61与上述实施例5相同，所以省略对它的说明。元数据解析单元71，用被分析后的元数据最佳化提示信息62和检索条件70，能够用很少的处理费用高效率地解析描述“内容”的结构和特征的膨大的元数据49。检索单元73利用元数据的解析结果72，检索适合于检索条件的“内容”。
下面，我们一面参照附图一面说明与本实施例6有关的元数据检索服务器的工作。
图21是表示与本实施例6有关的元数据检索服务器的元数据解析单元的工作的操作程序图。
元数据解析单元71，用与各元数据对应的元数据最佳化提示信息62进行大于等于一个的元数据的解析。所谓元数据的解析，这里指的是从元数据提取检索所需的特征描述。例如，当给出视频段的颜色特征量作为检索条件，检索具有接近该视频段的特征的视频段时，需要提取具有与颜色有关的特征描述的视频段。在图15所示的元数据例子中，因为在层次4的视频段上附加颜色的特征描述(“颜色直方图”)，所以提取与层次4的视频段有关的描述。
元数据解析单元71，解析检索条件70，特定对检索有效的描述符(步骤S21)。存在着作为检索条件给出按照在MPEG-7中规定的描述的特征量的情形和给出图像与关键字的情形等。当作为按照MPEG-7的描述的特征量(例如颜色配置信息)给出检索条件时，该描述符(颜色配置信息)成为对检索有效的描述符。又，作为关键字给出检索条件时，文本形式的描述符(标题、简述、注释等)成为对检索有效的描述符。
下面，参照元数据最佳化提示信息62，判定选出的描述符是否包含在元数据49中(步骤S22)。当用于检索的描述符不包含在元数据49中时，结束该元数据49的解析处理(步骤S24)，需要时进行别的元数据49的解析。
当选出的描述符包含在元数据49中时，进行该元数据的解析(步骤S23)。关于元数据的解析方法，与上述实施例5的情形相同，用元数据最佳化提示信息62高效率地进行图18和图19所示的元数据解析处理(步骤S25～S26)。通过以上的处理，由元数据解析单元71提取检索所需的特征描述。
由检索单元73，利用由元数据解析单元71输出的元数据的解析结果(检索所需的特征描述)，检索适合于检索条件的“内容”。在上述例子中，因为由元数据解析单元71输出与具有颜色的特征描述(“颜色直方图”)的视频段有关的描述，所以判定与作为检索条件给出的颜色特征量(直方图)的适合性，作为检索结果74输出适合的视频段的信息(例如“时间信息”)。
如以上那样，在本实施例6中，因为使用元数据最佳化提示信息60，解析元数据49，所以能够省去用于元数据再生成的元数据49自身的解析。又，因为根据出现位置和出现次数，能够省去检索不需要的描述符的解析，所以能够减少伴随着元数据的检索的处理费用(处理量和存储器使用量等)。
实施例7
在上述实施例5或实施例6中，我们说明了利用元数据最佳化提示信息的服务器一侧，但是在本实施例7中，我们说明利用元数据最佳化提示信息的客户终端(元数据再生成条件设定装置)。
我们一面参照附图一面说明与本发明的实施例7有关的客户终端。图22是表示与本发明的实施例7有关的客户终端的构成的方框图。
在图22中，客户终端48A备有提示信息解析单元80、元数据再生成条件设定单元82。
此外，在图22中，在客户终端48A中备有的功能中，只表示与利用元数据最佳化提示信息60设定用于元数据再生成的条件的部件有关的部分。
下面，我们一面参照附图一面说明与本实施例7有关的客户终端的工作。
提示信息解析单元80进行以规定的格式描述的元数据最佳化提示信息60的解析。因为该提示信息解析单元80与上述实施例5相同，所以省略对它的详细说明。
元数据再生成条件设定单元82，根据由提示信息解析单元80输出的解析结果81，进行元数据再生成的条件设定83。所谓的条件设定指的是，例如，从元数据最佳化提示信息60中包含的描述符的种类中选择客户终端48A不需要的描述符。当客户终端48A不备有用特征量的检索功能时，不需要表现颜色直方图和运动的复杂性等的特征量的描述符。
作为条件设定的别的例子，当描述“内容”的场景关系的分层结构越深，元数据的复杂性越增加时，根据在元数据最佳化提示信息60中的描述的分层结构的深度的最大值，在客户终端设定可以处理的分层结构的深度。又，在别的例子中，根据元数据最佳化提示信息60中描述的重要度可以取得的值的信息，设定用户着眼的观点和选择的场景的重要度的阈值。
如上所述，当分别从“TeamA”、“TeamB”的观点出发，重要度取5个离散的值({0.0，0.25，0.5，0.75，1.0})时，能够进行只选择从“TeamA”的观点具有大于等于0.5的重要度的场景等的设定。
将由元数据再生成条件设定单元82设定的用于元数据再生成的条件83发送给元数据分发服务器。在元数据分发服务器一侧，根据用于元数据再生成的条件和客户终端的终端性能，再构成元数据。例如，当原始的元数据的分层结构的深度的最大值为4，在元数据再生成条件中，设定在客户终端可以处理的分层结构的深度为2时，以使分层结构的深度的最大值为2的方式，再构成元数据的结构。
又，当在元数据再生成条件中，只选择并设定从“TeamA”的观点，重要度大于等于0.5的场景时，再生只由与同一条件一致的场景构成的元数据。与上述实施例5相同能够用元数据最佳化提示信息高效率地进行元数据再生成。
如以上那样，在本实施例7中，因为能够使用元数据最佳化提示信息60设定用于元数据再生成的条件，所以能够与客户终端和应用相应地生成适合的元数据。
实施例8
在上述实施例5或实施例6中，我们说明了用元数据最佳化提示信息再生成元数据，分发再生成的元数据的服务器，但是在本实施例8中，我们说明用元数据最佳化提示信息解析元数据，利用解析结果再生成适合于客户终端和用户嗜好的元数据并进行分发的“内容”分发服务器(“内容”分发装置)。
我们一面参照附图一面说明与本发明的实施例8有关的“内容”分发服务器。图23是表示与本发明的实施例8有关的“内容”分发服务器的构成的方框图。
在图23中，“内容”分发服务器500A备有提示信息解析单元61、元数据解析单元86和“内容”再构成/分发单元88。
下面，我们一面参照附图一面说明与本实施例8有关的“内容”分发服务器的工作。
因为提示信息解析单元61的工作与上述实施例5相同，所以省略对它的说明。
元数据解析单元86，使用从提示信息解析单元61输出的被分析后的元数据最佳化提示信息62，进行元数据49的解析，提取与客户终端有关的信息、或者，与用户嗜好等的“内容”再构成有关的条件85一致的描述。使用提示信息的解析方法具有与上述实施例5相同之处，但是与实施例5不同之处不是使用提取的描述再生成元数据，而是再构成“内容”这一点。将由该元数据解析单元86提取的描述，即被分析后的元数据87输出到“内容”再构成/分发单元88。
“内容”再构成/分发单元88，根据由元数据解析单元86提取的描述，再构成“内容”89。这里，我们用上述实施例5中述说的例子进行说明。在实施例5的例子中，只从元数据49提取具有重要度大于等于0.5的特征的视频段，再生成只由与提取的视频段有关的描述构成的元数据。
在本实施例8中，只从元数据49提取具有重要度大于等于0.5的特征的视频段，再生成并分发只由与提取的视频段对应的场景构成的“内容”90。因为在与提取的视频段有关的描述中，描述了对应的“内容”的所在位置和在该视频段的“内容”内的位置(时间信息)，所以也能够从“内容”切出对应的场景，再构成一个“内容”90，并分发再构成的“内容”90，但是也能够从“内容”切出对应的场景，顺次地分发切出的场景。
如以上那样，在与本实施例8有关的“内容”分发服务器500A中，因为使用描述元数据49中包含的描述符的清单和描述符的出现位置、出现次数等的元数据最佳化提示信息60，解析元数据49，所以能够省去用于元数据再生成的元数据49自身的解析，又，因为根据出现位置和出现次数，能够省去与再生成条件不一致的描述符的解析，所以能够减少伴随着当再生成并分发适合于客户终端和用户嗜好的“内容”时的元数据的解析和“内容”的再构成的处理费用(处理量和存储器使用量等)。
本发明，如以上说明的那样，因为将包含运动图像和音频的多媒体“内容”分割成多个场景，编辑分割成多个的场景，生成描述多媒体“内容”的分层结构的场景结构信息元数据，所以能够生成描述包含视频数据等的多媒体“内容”具有的分层结构的元数据。

Claims (20)

1.一种元数据编辑装置，其特征在于：它备有，
将包含运动图像、音频中的至少一个的多媒体“内容”分割成多个场景，对每个分割的场景生成表示场景的开始位置和结束位置的场景的区间信息元数据的场景分割单元；
根据来自上述场景分割单元的场景的区间信息元数据，进行上述多媒体“内容”的各场景的分层编辑，生成描述上述多媒体“内容”的分层结构的场景结构信息元数据的场景描述编辑单元；和
统合上述场景的区间信息元数据和上述场景结构信息元数据，生成按照预定格式描述上述多媒体“内容”的内容和结构的元数据的元数据描述单元。
2.根据权利要求1所述的元数据编辑装置，其特征在于：它进一步备有根据来自上述场景分割单元的场景的区间信息元数据，提取上述多媒体“内容”的各场景的视觉特征量，生成特征描述元数据的特征提取单元；
上述元数据描述单元统合上述场景的区间信息元数据、上述场景结构信息元数据和上述特征描述元数据，生成按照预定格式描述上述多媒体“内容”的内容和结构的元数据。
3.根据权利要求1或2所述的元数据编辑装置，其特征在于：它进一步备有根据帧间差分检测上述多媒体“内容”的场景变换点的场景变换检测单元；
上述场景分割单元根据上述场景变换点将上述多媒体“内容”分割成多个场景。
4.一种元数据再生装置，其特征在于：它备有，
对描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据进行解析的元数据解析单元；
根据从上述元数据解析单元的解析结果取得的上述元数据中描述的场景的视觉特征量，从上述元数据检索与预定的检索条件一致的场景的检索单元；和
根据从上述元数据解析单元的解析结果取得的上述元数据中描述的预定信息，生成与预定的概要生成条件一致的上述多媒体“内容”的概要信息的概要生成单元。
5.一种元数据分发装置，其特征在于：它备有，
对描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据进行解析的元数据解析单元；
根据关于客户终端的性能的信息，判定上述客户终端的能力的终端能力判定单元；
根据上述元数据解析单元的元数据解析结果，与上述判定的客户终端的能力相应地再构成上述多媒体“内容”，再生成描述该“内容”的第2元数据的元数据再生成单元；和
将由上述元数据再生成单元再生成的第2元数据分发给上述客户终端的元数据分发单元。
6.一种元数据分发装置，其特征在于：它备有，
对描述包含在元数据中的描述符的种类的元数据最佳化提示信息进行解析的提示信息解析单元；
通过根据上述被分析后的元数据最佳化提示信息和关于元数据再生成的条件，解析描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据，再生成第2元数据的元数据解析/再生成单元；和
将由上述元数据解析/再生成单元再生成的第2元数据分发给客户终端的元数据分发单元。
7.一种元数据检索装置，其特征在于：它备有，
对描述了元数据中包含的描述符的种类和内容的元数据最佳化提示信息进行解析的提示信息解析单元；
根据上述被分析后的元数据最佳化提示信息和检索条件，对描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据进行解析的元数据解析单元；和
利用上述元数据的解析结果，检索适合于上述检索条件的“内容”的检索单元。
8.一种元数据再生成条件设定装置，其特征在于：它备有，
对描述了元数据中包含的描述符的种类和内容的元数据最佳化提示信息进行解析的提示信息解析单元；和
根据上述被分析后的元数据最佳化提示信息，设定用于对描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据进行再生成的条件的元数据再生成条件设定单元。
9.一种“内容”分发装置，其特征在于：它备有，
对描述了元数据中包含的描述符的种类和内容的元数据最佳化提示信息进行解析的提示信息解析单元；
根据上述被分析后的元数据最佳化提示信息和关于“内容”再构成的条件，从描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据，提取与上述“内容”再构成有关的条件一致的描述的元数据解析单元；和
根据上述提取的描述，再构成“内容”并分发给客户终端的“内容”再构成/分发单元。
10.一种元数据分发方法，其特征在于：它包含，
对描述了元数据中包含的描述符的种类的元数据最佳化提示信息进行解析的步骤；
根据上述被分析后的元数据最佳化提示信息和关于元数据再生成的条件，解析描述包含运动图像、音频中的至少一个的多媒体“内容”的内容和结构的元数据，再生成第2元数据的步骤；和
将由上述再生成的第2元数据分发给客户终端的步骤。
11.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据文件的所在位置和表示元数据中包含的要素数的出现要素数作为元数据文件信息。
12.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据文件的大小、元数据文件的格式和语法文件信息作为元数据文件信息。
13.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符的名称作为一个元数据构成要素信息。
14.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符出现的频度作为一个元数据构成要素信息。
15.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符的完全描述性作为一个元数据构成要素信息。
16.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符具有的时间分层性作为一个元数据构成要素信息。
17.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符具有的空间分层性作为一个元数据构成要素信息。
18.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符出现的出现位置作为一个元数据构成要素信息。
19.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符的类型作为一个元数据构成要素信息。
20.根据权利要求10所述的元数据分发方法，其特征在于：
上述元数据最佳化提示信息，描述元数据中包含的描述符的可以取得的范围作为一个元数据构成要素信息。
CNB038082608A 2002-04-12 2003-03-20 元数据编辑装置 Expired - Fee Related CN100367794C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2002110259 2002-04-12
JP110259/2002 2002-04-12
JP2002178169 2002-06-19
JP178169/2002 2002-06-19

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN200710162216.8A Division CN101127899B (zh) 2002-04-12 2003-03-20 提示信息描述方法
CN2007101622172A Division CN101132528B (zh) 2002-04-12 2003-03-20 元数据再生、分发、检索装置、元数据再生成条件设定装置

Publications (2)

Publication Number Publication Date
CN1647528A true CN1647528A (zh) 2005-07-27
CN100367794C CN100367794C (zh) 2008-02-06

Family

ID=29253534

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB038082608A Expired - Fee Related CN100367794C (zh) 2002-04-12 2003-03-20 元数据编辑装置

Country Status (10)

Country Link
US (7) US7826709B2 (zh)
EP (7) EP2202977A1 (zh)
JP (5) JPWO2003088665A1 (zh)
KR (4) KR100918725B1 (zh)
CN (1) CN100367794C (zh)
AU (1) AU2003221185A1 (zh)
CA (2) CA2664732C (zh)
SG (1) SG152905A1 (zh)
TW (1) TWI231140B (zh)
WO (1) WO2003088665A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7764866B2 (en) 2004-12-10 2010-07-27 Lg Electronics, Inc. Recording medium, method for searching for content data from the recording medium, and method and apparatus for reproducing data from the recording medium
CN101288070B (zh) * 2005-10-13 2010-09-29 微软公司 可扩展元数据
CN102143001A (zh) * 2011-04-02 2011-08-03 西南科技大学 一种基于语义理解的音频资源管理方法
CN102576437A (zh) * 2009-10-30 2012-07-11 三星电子株式会社 再现多媒体内容的装置和方法
CN103780976A (zh) * 2012-10-17 2014-05-07 财团法人资讯工业策进会 场景的片段建构系统及其方法
CN104428744A (zh) * 2014-05-19 2015-03-18 华为技术有限公司 一种多媒体显示的方法、装置和设备
CN108829881A (zh) * 2018-06-27 2018-11-16 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置

Families Citing this family (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050162515A1 (en) * 2000-10-24 2005-07-28 Objectvideo, Inc. Video surveillance system
US7116716B2 (en) * 2002-11-01 2006-10-03 Microsoft Corporation Systems and methods for generating a motion attention model
WO2005004480A1 (en) * 2003-07-08 2005-01-13 Matsushita Electric Industrial Co., Ltd. Contents storage system, home server apparatus, information supply apparatus, integrated circuit, and program
TWI478154B (zh) * 2003-10-04 2015-03-21 Samsung Electronics Co Ltd 儲存搜尋資訊的再生方法
EP1531626B1 (en) * 2003-11-12 2008-01-02 Sony Deutschland GmbH Automatic summarisation for a television programme suggestion engine based on consumer preferences
WO2005074275A1 (ja) * 2004-01-30 2005-08-11 Matsushita Electric Industrial Co., Ltd. コンテンツ再生装置
CA2568060A1 (en) * 2004-05-25 2005-12-08 Samsung Electronics Co., Ltd. Method of reproducing multimedia data using musicphotovideo profiles and reproducing apparatus using the method
US20050289593A1 (en) * 2004-05-26 2005-12-29 Skipjam Corp. Method and system for displaying and selecting content of an electronic program guide
US8953908B2 (en) * 2004-06-22 2015-02-10 Digimarc Corporation Metadata management and generation using perceptual features
US8156123B2 (en) * 2004-06-25 2012-04-10 Apple Inc. Method and apparatus for processing metadata
US9053754B2 (en) * 2004-07-28 2015-06-09 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs
KR100619064B1 (ko) 2004-07-30 2006-08-31 삼성전자주식회사 메타 데이터를 포함하는 저장 매체, 그 재생 장치 및 방법
JP2006066015A (ja) 2004-08-30 2006-03-09 Sony Corp 画像情報記録装置および画像情報表示装置
KR100565080B1 (ko) * 2004-09-13 2006-03-30 삼성전자주식회사 대표 타이틀 정보가 부가된 메타 데이터를 포함한 ａｖ데이터를 기록한 정보저장매체, 그 재생장치 및 메타데이터 검색방법
KR100602388B1 (ko) * 2004-11-17 2006-07-20 주식회사 픽스트리 엠펙-21 멀티미디어 프레임워크에서의 리소스 참조 방법
JP4349277B2 (ja) * 2004-12-24 2009-10-21 株式会社日立製作所 動画再生装置
JP5522896B2 (ja) * 2004-12-24 2014-06-18 コーニンクレッカ フィリップス エヌ ヴェ 番組検索情報を編集する方法および装置
WO2006073283A1 (en) 2005-01-07 2006-07-13 Electronics And Telecommunications Research Institute Apparatus and method for providing adaptive broadcast service using game metadata
JP4978894B2 (ja) * 2005-01-25 2012-07-18 日本電気株式会社 構造化文書検索装置、構造化文書検索方法および構造化文書検索プログラム
FR2883441A1 (fr) * 2005-03-17 2006-09-22 Thomson Licensing Sa Procede de selection de parties d'une emission audiovisuelle et dispositif mettant en oeuvre le procede
TWI309389B (en) * 2005-05-06 2009-05-01 Sunplus Technology Co Ltd Digital audio-video information reproducing apparatus and reproducing method thereof
KR100654455B1 (ko) 2005-05-26 2006-12-06 삼성전자주식회사 확장형 자막 파일을 이용하여 부가정보를 제공하는 장치 및방법
CN101243675B (zh) * 2005-06-27 2016-05-11 核心无线许可有限公司 用于动态丰富媒体场景的传送机制
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
US20080130989A1 (en) * 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
JP4514671B2 (ja) * 2005-08-03 2010-07-28 シャープ株式会社 コンテンツ編集装置、コンピュータ読み取り可能なプログラム及びそれを記録した記録媒体
US20070078898A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Server-based system and method for retrieving tagged portions of media files
US20070078896A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Identifying portions within media files with location tags
US20070078883A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Using location tags to render tagged portions of media files
WO2007043824A1 (en) * 2005-10-13 2007-04-19 Lg Electronics Inc. Method and apparatus for encoding/decoding
US8856118B2 (en) * 2005-10-31 2014-10-07 Qwest Communications International Inc. Creation and transmission of rich content media
US8180826B2 (en) * 2005-10-31 2012-05-15 Microsoft Corporation Media sharing and authoring on the web
US20090123086A1 (en) * 2005-10-31 2009-05-14 Sharp Kabushiki Kaisha View environment control system
US8196032B2 (en) * 2005-11-01 2012-06-05 Microsoft Corporation Template-based multimedia authoring and sharing
JP2007179435A (ja) * 2005-12-28 2007-07-12 Sony Corp 情報処理装置、情報処理方法、プログラム
US20070204238A1 (en) * 2006-02-27 2007-08-30 Microsoft Corporation Smart Video Presentation
US7421455B2 (en) * 2006-02-27 2008-09-02 Microsoft Corporation Video search and services
US7873946B2 (en) * 2006-03-23 2011-01-18 Oracle America, Inc. Scalable vector graphics, tree and tab as drag and drop objects
JP2007265341A (ja) * 2006-03-30 2007-10-11 Sony Corp コンテンツ利用方法、コンテンツ利用装置、コンテンツ記録方法、コンテンツ記録装置、コンテンツ提供システム、コンテンツ受信方法、コンテンツ受信装置およびコンテンツデータフォーマット
JP4377887B2 (ja) * 2006-03-30 2009-12-02 株式会社東芝 映像分割装置
US8549492B2 (en) * 2006-04-21 2013-10-01 Microsoft Corporation Machine declarative language for formatted data processing
US7827155B2 (en) * 2006-04-21 2010-11-02 Microsoft Corporation System for processing formatted data
JP4760572B2 (ja) * 2006-06-30 2011-08-31 ソニー株式会社 編集装置および編集方法、並びにプログラム
WO2008007905A1 (en) 2006-07-12 2008-01-17 Lg Electronics Inc. Method and apparatus for encoding/decoding signal
US20080019281A1 (en) * 2006-07-21 2008-01-24 Microsoft Corporation Reuse of available source data and localizations
US7769363B2 (en) * 2006-08-01 2010-08-03 Chew Gregory T H User-initiated communications during multimedia content playback on a mobile communications device
US20080065693A1 (en) * 2006-09-11 2008-03-13 Bellsouth Intellectual Property Corporation Presenting and linking segments of tagged media files in a media services network
WO2008032739A1 (fr) * 2006-09-12 2008-03-20 Panasonic Corporation Dispositif de formation d'image de contenu
US20100215334A1 (en) * 2006-09-29 2010-08-26 Sony Corporation Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program
JP2008099012A (ja) * 2006-10-12 2008-04-24 Mitsubishi Electric Corp コンテンツ再生システム及びコンテンツ蓄積システム
WO2008048067A1 (en) 2006-10-19 2008-04-24 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
KR101317204B1 (ko) * 2006-11-27 2013-10-10 삼성전자주식회사 동적 영상물의 프레임 정보를 생성하는 방법 및 이를이용한 장치
KR100827241B1 (ko) * 2006-12-18 2008-05-07 삼성전자주식회사 동적 영상물을 생성하기 위한 템플릿을 편집하는 장치 및방법
FR2910769B1 (fr) * 2006-12-21 2009-03-06 Thomson Licensing Sas Procede de creation d'un resume d'un document audiovisuel comportant un sommaire et des reportages, et recepteur mettant en oeuvre le procede
EP2122482B1 (en) 2007-01-05 2018-11-14 Sonic IP, Inc. Video distribution system including progressive playback
US8671346B2 (en) * 2007-02-09 2014-03-11 Microsoft Corporation Smart video thumbnail
KR100864524B1 (ko) * 2007-02-14 2008-10-21 주식회사 드리머 디지털 방송 데이터 어플리케이션 실행 방법 및 이를실현시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한기록 매체
JP4511569B2 (ja) * 2007-03-26 2010-07-28 株式会社エヌ・ティ・ティ・ドコモ 遠隔視聴システム及び遠隔視聴方法
JP4469868B2 (ja) * 2007-03-27 2010-06-02 株式会社東芝 説明表現付加装置、プログラムおよび説明表現付加方法
WO2008129600A1 (ja) * 2007-04-05 2008-10-30 Sony Computer Entertainment Inc. コンテンツ再生装置、コンテンツ配信装置、コンテンツ配信システム及びメタデータ生成方法
EP1983755A1 (en) * 2007-04-17 2008-10-22 Thomson Licensing Method to transmit video data in a data stream and associated metadata
WO2008136466A1 (ja) * 2007-05-01 2008-11-13 Dep Co., Ltd. 動画編集装置
KR100935862B1 (ko) * 2007-07-06 2010-01-07 드리머 매체 재생 장치 기반 컨텐츠 제공 시스템
JP4360428B2 (ja) * 2007-07-19 2009-11-11 ソニー株式会社 記録装置、記録方法、コンピュータプログラムおよび記録媒体
JP4420085B2 (ja) * 2007-08-20 2010-02-24 ソニー株式会社 データ処理装置、データ処理方法、プログラムおよび記録媒体
KR101268987B1 (ko) * 2007-09-11 2013-05-29 삼성전자주식회사 메타데이터를 자동적으로 생성/갱신하는 멀티미디어 데이터기록 방법 및 장치
KR20090031142A (ko) * 2007-09-21 2009-03-25 삼성전자주식회사 컨텐츠 생성시 관련된 컨텐츠를 표시하는 ｇｕｉ 제공방법및 이를 적용한 멀티미디어 기기
KR101034758B1 (ko) * 2007-10-04 2011-05-17 에스케이 텔레콤주식회사 통합 멀티미디어 파일의 초기 실행 방법과 이를 위한시스템
US20090158157A1 (en) * 2007-12-14 2009-06-18 Microsoft Corporation Previewing recorded programs using thumbnails
JP2009152927A (ja) * 2007-12-21 2009-07-09 Sony Corp コンテンツの再生方法および再生システム
KR20090079010A (ko) * 2008-01-16 2009-07-21 삼성전자주식회사 프로그램 정보 표시 방법 및 장치
JP5033653B2 (ja) * 2008-01-21 2012-09-26 株式会社日立製作所 映像記録再生装置及び映像再生装置
JP5188260B2 (ja) * 2008-05-08 2013-04-24 キヤノン株式会社 画像処理装置、画像処理方法ならびにそのプログラムおよび記憶媒体
US20090287655A1 (en) * 2008-05-13 2009-11-19 Bennett James D Image search engine employing user suitability feedback
JP2011523309A (ja) * 2008-06-06 2011-08-04 ディヴィクス インコーポレイテッド マルチメディアファイルのためのフォントファイル最適化システム及び方法
US20090315980A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Image processing method and apparatus
US20090317062A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Ltd. Image processing method and apparatus
WO2009157707A2 (en) * 2008-06-24 2009-12-30 Samsung Electronics Co,. Ltd. Image processing method and apparatus
KR101539935B1 (ko) * 2008-06-24 2015-07-28 삼성전자주식회사 3차원 비디오 영상 처리 방법 및 장치
JP5649273B2 (ja) * 2008-08-25 2015-01-07 株式会社東芝 情報処理装置、情報処理方法および情報処理プログラム
JP5091806B2 (ja) * 2008-09-01 2012-12-05 株式会社東芝 映像処理装置及びその方法
JP5322550B2 (ja) * 2008-09-18 2013-10-23 三菱電機株式会社 番組推奨装置
US8239359B2 (en) * 2008-09-23 2012-08-07 Disney Enterprises, Inc. System and method for visual search in a video media player
KR101592943B1 (ko) * 2008-12-11 2016-02-12 엘지전자 주식회사 이동 단말기 및 이동 단말기의 데이터 관리 방법
KR20110032610A (ko) * 2009-09-23 2011-03-30 삼성전자주식회사 장면 분할 장치 및 방법
CN102065237B (zh) * 2009-11-13 2014-12-24 新奥特（北京）视频技术有限公司 一种方便处理字幕文件的字幕机
KR101733793B1 (ko) * 2009-11-13 2017-05-11 삼성전자주식회사 데이터 관리 방법 및 장치
JP2011130279A (ja) * 2009-12-18 2011-06-30 Sony Corp コンテンツ提供サーバ、コンテンツ再生装置、コンテンツ提供方法、コンテンツ再生方法、プログラムおよびコンテンツ提供システム
US20110154405A1 (en) * 2009-12-21 2011-06-23 Cambridge Markets, S.A. Video segment management and distribution system and method
JP2011188342A (ja) * 2010-03-10 2011-09-22 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP5913788B2 (ja) * 2010-03-25 2016-04-27 ソニー株式会社 コンテンツサーバ、コンテンツ提供システム及びコンテンツ提供方法
KR101746453B1 (ko) * 2010-04-12 2017-06-13 삼성전자주식회사 실감 효과 처리 시스템 및 방법
US9191639B2 (en) 2010-04-12 2015-11-17 Adobe Systems Incorporated Method and apparatus for generating video descriptions
US9276986B2 (en) * 2010-04-27 2016-03-01 Nokia Technologies Oy Systems, methods, and apparatuses for facilitating remote data processing
GB2481185A (en) * 2010-05-28 2011-12-21 British Broadcasting Corp Processing audio-video data to produce multi-dimensional complex metadata
US8806340B2 (en) * 2010-09-01 2014-08-12 Hulu, LLC Method and apparatus for embedding media programs having custom user selectable thumbnails
JP5671288B2 (ja) * 2010-09-24 2015-02-18 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理方法及び情報処理システム
US9753609B2 (en) * 2010-12-03 2017-09-05 Facebook, Inc. User interface with media wheel facilitating viewing of media objects
US8587672B2 (en) 2011-01-31 2013-11-19 Home Box Office, Inc. Real-time visible-talent tracking system
US9264484B1 (en) * 2011-02-09 2016-02-16 Google Inc. Attributing preferences to locations for serving content
GB2491894A (en) * 2011-06-17 2012-12-19 Ant Software Ltd Processing supplementary interactive content in a television system
US9146909B2 (en) * 2011-07-27 2015-09-29 Qualcomm Incorporated Web browsing enhanced by cloud computing
KR101315608B1 (ko) * 2011-09-27 2013-10-18 엘지전자 주식회사 컨텐츠 관리 방법 및 그를 이용한 영상 표시 장치
US20130089301A1 (en) * 2011-10-06 2013-04-11 Chi-cheng Ju Method and apparatus for processing video frames image with image registration information involved therein
US9536044B2 (en) 2011-12-06 2017-01-03 Microsoft Technology Licensing, Llc Metadata extraction pipeline
US9525642B2 (en) 2012-01-31 2016-12-20 Db Networks, Inc. Ordering traffic captured on a data connection
US9100291B2 (en) * 2012-01-31 2015-08-04 Db Networks, Inc. Systems and methods for extracting structured application data from a communications link
TWI461955B (zh) * 2012-02-20 2014-11-21 Univ Nat Cheng Kung 惡意程式破壞系統及其破壞方法
JP2015517233A (ja) 2012-02-29 2015-06-18 ドルビー ラボラトリーズ ライセンシング コーポレイション 改善された画像処理およびコンテンツ送達のための画像メタデータ生成
KR101952260B1 (ko) 2012-04-03 2019-02-26 삼성전자주식회사 다수의 동영상 썸네일을 동시에 표시하기 위한 영상 재생 장치 및 방법
KR101332834B1 (ko) * 2012-04-03 2013-11-27 모젼스랩(주) 온톨로지 기반 전시관련 서비스 제공방법
SE537206C2 (sv) * 2012-04-11 2015-03-03 Vidispine Ab Metod och system för sökningar i digitalt innehåll
EP2680601A1 (en) * 2012-06-29 2014-01-01 Moda e Technologia S.r.l. Video streams management system for a television apparatus
US20140136545A1 (en) 2012-10-05 2014-05-15 International Business Machines Corporation Multi-tier Indexing Methodology for Scalable Mobile Device Data Collection
KR101537665B1 (ko) * 2013-02-26 2015-07-20 주식회사 알티캐스트 콘텐츠 재생 방법 및 장치
EP2809078A1 (en) * 2013-05-27 2014-12-03 Thomson Licensing Method and apparatus for managing metadata files
EP2809077A1 (en) * 2013-05-27 2014-12-03 Thomson Licensing Method and apparatus for classification of a file
US9197926B2 (en) 2013-06-05 2015-11-24 International Business Machines Corporation Location based determination of related content
CN105409203B (zh) 2013-07-30 2018-07-31 杜比实验室特许公司 用于产生场景稳定元数据的系统和方法
US20150331551A1 (en) * 2014-05-14 2015-11-19 Samsung Electronics Co., Ltd. Image display apparatus, image display method, and computer-readable recording medium
KR102190233B1 (ko) 2014-10-06 2020-12-11 삼성전자주식회사 영상 처리 장치 및 이의 영상 처리 방법
KR101640317B1 (ko) 2014-11-20 2016-07-19 소프트온넷(주) 오디오 및 비디오 데이터를 포함하는 영상의 저장 및 검색 장치와 저장 및 검색 방법
KR102380979B1 (ko) * 2015-01-05 2022-04-01 삼성전자 주식회사 이미지의 메타데이터 관리 방법 및 장치
KR102306538B1 (ko) 2015-01-20 2021-09-29 삼성전자주식회사 콘텐트 편집 장치 및 방법
JP2016144080A (ja) * 2015-02-03 2016-08-08 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
KR102310241B1 (ko) * 2015-04-29 2021-10-08 삼성전자주식회사 소스 디바이스, 그의 제어 방법, 싱크 디바이스 및 그의 화질 개선 처리 방법
US9554160B2 (en) * 2015-05-18 2017-01-24 Zepp Labs, Inc. Multi-angle video editing based on cloud video sharing
US10462524B2 (en) * 2015-06-23 2019-10-29 Facebook, Inc. Streaming media presentation system
US10187684B2 (en) 2015-06-23 2019-01-22 Facebook, Inc. Streaming media presentation system
US10375443B2 (en) 2015-07-31 2019-08-06 Rovi Guides, Inc. Method for enhancing a user viewing experience when consuming a sequence of media
WO2017066736A1 (en) * 2015-10-16 2017-04-20 Tribune Broadcasting Company, Llc Media-production system with social media content interface feature
US10645465B2 (en) * 2015-12-21 2020-05-05 Centurylink Intellectual Property Llc Video file universal identifier for metadata resolution
US11023417B2 (en) 2017-05-30 2021-06-01 Home Box Office, Inc. Video content graph including enhanced metadata
JP6688368B1 (ja) * 2018-11-13 2020-04-28 西日本電信電話株式会社 映像コンテンツ構造化装置、映像コンテンツ構造化方法、及びコンピュータプログラム
CN112150778A (zh) * 2019-06-29 2020-12-29 华为技术有限公司 环境音处理方法及相关装置
KR102250642B1 (ko) * 2019-10-31 2021-05-11 테크온미디어(주) 효율적인 콘텐츠 유통을 위한 탈중앙화된 콘텐츠 분산 관리 시스템 및 이를 수행하기 위한 컴퓨팅 장치
JP2021132281A (ja) * 2020-02-19 2021-09-09 Jcc株式会社 メタデータ生成システムおよびメタデータ生成方法
US20210319230A1 (en) * 2020-04-10 2021-10-14 Gracenote, Inc. Keyframe Extractor
CN113840099B (zh) 2020-06-23 2023-07-07 北京字节跳动网络技术有限公司 视频处理方法、装置、设备及计算机可读存储介质
US11526612B2 (en) 2020-09-22 2022-12-13 International Business Machines Corporation Computer file metadata segmentation security system

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5119465A (en) * 1989-06-19 1992-06-02 Digital Equipment Corporation System for selectively converting plurality of source data structures through corresponding source intermediate structures, and target intermediate structures into selected target structure
US5758180A (en) * 1993-04-15 1998-05-26 Sony Corporation Block resizing function for multi-media editing which moves other blocks in response to the resize only as necessary
JP3194837B2 (ja) 1994-07-19 2001-08-06 日本電信電話株式会社 代表画面抽出方法および装置
JP3144285B2 (ja) 1995-11-30 2001-03-12 松下電器産業株式会社 映像処理装置
JP3529540B2 (ja) * 1996-03-07 2004-05-24 Ｋｄｄｉ株式会社 動画像検索装置
WO1997034240A1 (en) 1996-03-15 1997-09-18 University Of Massachusetts Compact tree for storage and retrieval of structured hypermedia documents
US5986675A (en) * 1996-05-24 1999-11-16 Microsoft Corporation System and method for animating an object in three-dimensional space using a two-dimensional input device
US20010038719A1 (en) * 1996-10-14 2001-11-08 Nikon Corporation Information processing apparatus
JP3633229B2 (ja) * 1997-09-01 2005-03-30 セイコーエプソン株式会社 発光素子の製造方法および多色表示装置の製造方法
AUPO918697A0 (en) * 1997-09-15 1997-10-09 Canon Information Systems Research Australia Pty Ltd Enhanced information gathering apparatus and method
KR100284574B1 (ko) * 1997-10-27 2001-03-15 정선종 객체자동저장시스템및그운용방법
US6134558A (en) * 1997-10-31 2000-10-17 Oracle Corporation References that indicate where global database objects reside
US6751623B1 (en) * 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
JPH11238071A (ja) 1998-02-20 1999-08-31 Toshiba Corp ダイジェスト作成装置及びダイジェスト作成方法
US6085198A (en) * 1998-06-05 2000-07-04 Sun Microsystems, Inc. Integrated three-tier application framework with automated class and table generation
US6711590B1 (en) * 1998-07-10 2004-03-23 Canon Kabushiki Kaisha Linking metadata with a time-sequential digital signal
KR100279735B1 (ko) * 1998-11-20 2001-02-01 정선종 메타데이터를 이용한 멀티미디어 컨텐츠 전달방법
JP2000253337A (ja) * 1999-02-24 2000-09-14 Sony Corp 画面の制御方法および画面の制御装置および映像再生方法および映像再生装置および映像情報の記録方法および映像情報の記録装置およびコンピュータが読み取り可能な記録媒体
US7362946B1 (en) * 1999-04-12 2008-04-22 Canon Kabushiki Kaisha Automated visual image editing system
JP4227241B2 (ja) 1999-04-13 2009-02-18 キヤノン株式会社 画像処理装置及び方法
JP2001008136A (ja) * 1999-06-21 2001-01-12 Victor Co Of Japan Ltd マルチメディアデータのオーサリング装置
JP2001028722A (ja) 1999-07-13 2001-01-30 Matsushita Electric Ind Co Ltd 動画像管理装置及び動画像管理システム
JP2001119666A (ja) * 1999-08-16 2001-04-27 Univ Of Washington ビデオシーケンスの対話型処理方法と、その記憶媒体およびシステム
AU7588100A (en) * 1999-09-16 2001-04-17 Ixl Enterprises, Inc. System and method for linking media content
KR100373371B1 (ko) * 1999-09-20 2003-02-25 한국전자통신연구원 메타데이터의 중요도 결정기법을 적용한 비디오 데이터 검색방법
JP3738631B2 (ja) * 1999-09-27 2006-01-25 三菱電機株式会社 画像検索システムおよび画像検索方法
AU6973900A (en) 1999-09-29 2001-04-30 Xml-Global Technologies, Inc. Authoring, altering, indexing, storing and retrieving electronic documents embedded with contextual markup
KR100371813B1 (ko) 1999-10-11 2003-02-11 한국전자통신연구원 효율적인 비디오 개관 및 브라우징을 위한 요약 비디오 기술구조 및 이의 기록매체, 이를 이용한 요약 비디오 기술 데이터 생성 방법 및 생성시스템, 요약 비디오 기술 데이터의 브라우징 장치 및 브라우징 방법.
KR100305964B1 (ko) 1999-10-22 2001-11-02 구자홍 사용자 적응적인 다단계 요약 스트림 제공방법
JP3478331B2 (ja) * 1999-10-29 2003-12-15 株式会社リコー 構造表示方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2001167099A (ja) * 1999-12-07 2001-06-22 Nippon Hoso Kyokai <Nhk> 映像・音声オブジェクトを基本としたデータベース装置
JP2001167109A (ja) 1999-12-08 2001-06-22 Kddi Corp オーディオビデオ情報の特徴記述群構成方法
US7212972B2 (en) 1999-12-08 2007-05-01 Ddi Corporation Audio features description method and audio video features description collection construction method
CA2374067C (en) * 2000-03-13 2012-09-25 Sony Corporation Method and apparatus for generating compact transcoding hints metadata
KR100739031B1 (ko) * 2000-03-27 2007-07-25 주식회사 큐론 멀티미디어 검색시스템에서 ｍｐｅｇ－７ 표준 메타데이터의 은닉 및 검출 방법과 이를 이용한 멀티미디어 데이터의 검색 방법
JP3517631B2 (ja) * 2000-05-08 2004-04-12 株式会社リコー ダイジェスト映像蓄積方法およびダイジェスト映像蓄積装置
JP2001320693A (ja) 2000-05-12 2001-11-16 Sony Corp サービス提供装置および方法、受信端末装置および方法、サービス提供システム
JP4953496B2 (ja) * 2000-05-15 2012-06-13 ソニー株式会社 コンテンツ検索・提示システム及び方法、並びに、ソフトウェア記憶媒体
US6646676B1 (en) * 2000-05-17 2003-11-11 Mitsubishi Electric Research Laboratories, Inc. Networked surveillance and control system
JP2001326901A (ja) 2000-05-18 2001-11-22 Sharp Corp 動画像シーン情報管理装置
JP3600186B2 (ja) * 2000-05-19 2004-12-08 株式会社リコー 映像検索装置
JP2001357008A (ja) 2000-06-14 2001-12-26 Mitsubishi Electric Corp コンテンツ検索配信装置およびコンテンツ検索配信方法
AUPQ867700A0 (en) 2000-07-10 2000-08-03 Canon Kabushiki Kaisha Delivering multimedia descriptions
KR100369222B1 (ko) * 2000-07-26 2003-01-24 (학)창성학원 디지털 비디오 검색 및 저작기
US7054508B2 (en) * 2000-08-03 2006-05-30 Canon Kabushiki Kaisha Data editing apparatus and method
JP4403643B2 (ja) * 2000-08-04 2010-01-27 ソニー株式会社 番組視聴サービスシステム
US6959326B1 (en) * 2000-08-24 2005-10-25 International Business Machines Corporation Method, system, and program for gathering indexable metadata on content at a data repository
EP1346559A4 (en) * 2000-11-16 2006-02-01 Mydtv Inc SYSTEM AND METHOD FOR DETERMINING THE POPULARITY OF VIDEO PROGRAM EVENTS
JP4536940B2 (ja) * 2001-01-26 2010-09-01 キヤノン株式会社 画像処理装置、画像処理方法、記憶媒体、及びコンピュータプログラム
US7254570B2 (en) * 2001-03-21 2007-08-07 Nokia Corporation Query resolution system and service
JP2003067397A (ja) 2001-06-11 2003-03-07 Matsushita Electric Ind Co Ltd コンテンツ管理システム
US20030088876A1 (en) * 2001-11-08 2003-05-08 Liberate Technologies Video on demand gateway
US20030110501A1 (en) * 2001-12-12 2003-06-12 Rafey Richter A. Personalizing media presentations based on a target duration
JP3826048B2 (ja) * 2002-02-15 2006-09-27 キヤノン株式会社 情報処理装置及び方法
JP3826043B2 (ja) * 2002-01-31 2006-09-27 キヤノン株式会社 情報処理装置及び方法
JP2007179435A (ja) * 2005-12-28 2007-07-12 Sony Corp 情報処理装置、情報処理方法、プログラム
US8386438B2 (en) * 2009-03-19 2013-02-26 Symantec Corporation Method for restoring data from a monolithic backup

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7764866B2 (en) 2004-12-10 2010-07-27 Lg Electronics, Inc. Recording medium, method for searching for content data from the recording medium, and method and apparatus for reproducing data from the recording medium
CN101288070B (zh) * 2005-10-13 2010-09-29 微软公司 可扩展元数据
CN107103560A (zh) * 2009-10-30 2017-08-29 三星电子株式会社 再现多媒体内容的装置和方法
CN102576437A (zh) * 2009-10-30 2012-07-11 三星电子株式会社 再现多媒体内容的装置和方法
US9355682B2 (en) 2009-10-30 2016-05-31 Samsung Electronics Co., Ltd Apparatus and method for separately viewing multimedia content desired by a user
US10268760B2 (en) 2009-10-30 2019-04-23 Samsung Electronics Co., Ltd. Apparatus and method for reproducing multimedia content successively in a broadcasting system based on one integrated metadata
CN102143001B (zh) * 2011-04-02 2013-10-09 西南科技大学 一种基于语义理解的音频资源管理方法
CN102143001A (zh) * 2011-04-02 2011-08-03 西南科技大学 一种基于语义理解的音频资源管理方法
CN103780976A (zh) * 2012-10-17 2014-05-07 财团法人资讯工业策进会 场景的片段建构系统及其方法
CN103780976B (zh) * 2012-10-17 2017-04-12 财团法人资讯工业策进会 场景的片段建构系统及其方法
CN104428744A (zh) * 2014-05-19 2015-03-18 华为技术有限公司 一种多媒体显示的方法、装置和设备
CN104428744B (zh) * 2014-05-19 2018-02-02 华为技术有限公司 一种多媒体显示的方法、装置和设备
CN108829881A (zh) * 2018-06-27 2018-11-16 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置
CN108829881B (zh) * 2018-06-27 2021-12-03 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置

Also Published As

Publication number Publication date
EP2202979A1 (en) 2010-06-30
KR100997599B1 (ko) 2010-11-30
JPWO2003088665A1 (ja) 2005-08-25
EP2202649A1 (en) 2010-06-30
JP2009171622A (ja) 2009-07-30
TWI231140B (en) 2005-04-11
SG152905A1 (en) 2009-06-29
EP2202977A1 (en) 2010-06-30
WO2003088665A1 (fr) 2003-10-23
KR20060097767A (ko) 2006-09-15
EP1496701A4 (en) 2009-01-14
JP2009171624A (ja) 2009-07-30
AU2003221185A1 (en) 2003-10-27
JP4987907B2 (ja) 2012-08-01
US20100005070A1 (en) 2010-01-07
KR20040108726A (ko) 2004-12-24
CA2482431C (en) 2013-03-19
US20080075431A1 (en) 2008-03-27
EP2202648A1 (en) 2010-06-30
US20080071838A1 (en) 2008-03-20
JP4652462B2 (ja) 2011-03-16
EP2202978A1 (en) 2010-06-30
JP2009171621A (ja) 2009-07-30
US20080065697A1 (en) 2008-03-13
US20080071837A1 (en) 2008-03-20
EP2200315A1 (en) 2010-06-23
KR100912984B1 (ko) 2009-08-20
US8811800B2 (en) 2014-08-19
EP1496701A1 (en) 2005-01-12
US7826709B2 (en) 2010-11-02
CA2664732A1 (en) 2003-10-23
KR100986401B1 (ko) 2010-10-08
US20080071836A1 (en) 2008-03-20
CA2664732C (en) 2013-07-02
KR20080064875A (ko) 2008-07-09
US20050149557A1 (en) 2005-07-07
CN100367794C (zh) 2008-02-06
KR20100055541A (ko) 2010-05-26
CA2482431A1 (en) 2003-10-23
JP2009171623A (ja) 2009-07-30
TW200306114A (en) 2003-11-01
KR100918725B1 (ko) 2009-09-24

Similar Documents

Publication Publication Date Title
CN1647528A (zh) 元数据编辑装置、元数据再生装置、元数据分发装置、元数据检索装置、元数据再生成条件设定装置和元数据分发方法
CN1209744C (zh) 编码装置和解码装置
CN1195301C (zh) 记录/再现装置和方法
CN1757020A (zh) 信息处理装置、信息处理方法以及计算机程序
CN1662057A (zh) 备忘录文件创建和管理方法、会议服务器及网络会议系统
CN1604634A (zh) 存储搜索信息的存储介质和再现设备及方法
CN1913625A (zh) 视频数据发送/接收方法和视频监督系统
CN1533163A (zh) 电子节目指南数据的自由文本和属性搜索
CN101051514A (zh) 记录和复现装置与记录和复现方法
CN1738440A (zh) 用于处理信息的设备，方法和计算机程序
CN1402853A (zh) 图像检索系统及图像检索方法
CN1910580A (zh) 概要再现装置和概要再现方法
CN1591428A (zh) 提供元数据索引的方法
CN1175056A (zh) 信息记录介质、以及用于上述的记录装置和重放装置
CN1848933A (zh) 内容记录系统和内容记录方法
CN1812540A (zh) 图像拍摄设备、拍摄图像数据记录方法、和拍摄图像数据处理设备及方法
CN1551212A (zh) 信息处理装置与方法
CN1773507A (zh) 特征向量生成装置，搜索装置，特征向量生成方法和搜索方法
CN1166202C (zh) 由视频重放系统从压缩数字视频信号中动态地提取特征
CN1949227A (zh) 一种针对可播放媒体文件的搜索方法、系统及装置
CN101075233A (zh) 多媒体内容收集部件、系统及其方法
CN101132528B (zh) 元数据再生、分发、检索装置、元数据再生成条件设定装置
CN1747544A (zh) 记录装置、记录方法、再生装置、再生方法、及程序
CN1290322C (zh) 再生装置
CN1848938A (zh) 内容记录系统和内容记录方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080206

Termination date: 20200320

CF01 Termination of patent right due to non-payment of annual fee