CN102812459A - 自动地标记媒体内容的方法，用于实现这种方法的媒体服务器和应用服务器 - Google Patents

自动地标记媒体内容的方法，用于实现这种方法的媒体服务器和应用服务器 Download PDF

Info

Publication number
CN102812459A
CN102812459A CN2011800135709A CN201180013570A CN102812459A CN 102812459 A CN102812459 A CN 102812459A CN 2011800135709 A CN2011800135709 A CN 2011800135709A CN 201180013570 A CN201180013570 A CN 201180013570A CN 102812459 A CN102812459 A CN 102812459A
Authority
CN
China
Prior art keywords
information
capture
media
application server
media content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011800135709A
Other languages
English (en)
Inventor
M·欧斯蒙德
S·萨阿达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alcatel Lucent SAS
Original Assignee
Alcatel Lucent SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alcatel Lucent SAS filed Critical Alcatel Lucent SAS
Publication of CN102812459A publication Critical patent/CN102812459A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/155—Conference systems involving storage of or access to video conference sessions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种自动地标记媒体内容的方法，包括以下步骤：媒体服务器在对其进行捕获的基础上从该媒体内容获得捕获标记信息，并将所述捕获标记信息和所述媒体内容发送到应用服务器。所述应用服务器使用包括所述捕获标记信息的至少一部分的标记信息来标记所述媒体内容。

Description

自动地标记媒体内容的方法,用于实现这种方法的媒体服务器和应用服务器
本发明涉及自动地标记媒体内容的方法。
诸如用户生成的内容应用或协作工具的已知的媒体管理系统广泛地使用标记（也称为元数据）来描述媒体。这些标记允许在大量的内容之间进行随后的搜索或索引。它们被手动地添加，或者通过使用在标记引擎层面可获得的信息或元数据由自动的标记引擎添加，诸如例如电影的标题、作者的姓名a.s.o.。
然而，可用于标记的一些信息可能源自媒体俘获过程自身，尤其是在交互式环境中。例如，在视频会议中，这种信息可以是，例如在给定时间处，哪个参会者在发言，或者用户交互使用的是什么。
本发明的一个目的是克服这种缺陷。
根据本发明的方法以下列方式实现了该目的：其为自动地标记媒体内容的方法，所述方法包括以下步骤：媒体服务器在对其进行捕获的基础上从所述媒体内容获得捕获标记信息，并将所述捕获标记信息和所述媒体内容发送到应用服务器；所述应用服务器使用包括所述捕获标记信息的至少一部分的标记信息来标记所述媒体内容。
这样，在由媒体服务器捕获该数据的基础上，仅可从所捕获的媒体信息获取的信息可用于应用服务器对媒体数据进行标记，其中标记引擎驻留在应用服务器上。
根据本发明的方法的实施例的附加特征在于，所述应用服务器另外从外部源获得补充标记信息，并将所述补充标记信息包括在所述标记信息中。例如，在媒体数据是电影的情况下，这种补充标记信息可以是电影的标题或者演员的姓名，如前面提及的。
根据本发明的方法的实施例的另一附加特征在于，所述媒体服务器在所述应用服务器的控制下获得所述捕获标记信息。这样，对标记信息的捕获是交互式的。
本发明还涉及用于实现上述方法的媒体服务器，所述媒体服务器包括适于捕获媒体内容的媒体内容捕获部件，其特征在于，所述媒体服务器附加地包括适于在对其进行捕获的基础上从所述媒体内容获得捕获标记信息的处理部件，和将所述捕获标记信息和所述媒体内容发送到应用服务器的发送部件。
根据本发明的媒体服务器的实施例的附加特征在于，所述媒体服务器是视频会议系统的一部分，并且所述内容捕获部件适于记录和混合视频会议的音频和视频流，所述处理部件适于如获得所述捕获标记信息一样获得涉及由所述视频会议的至少一个参与者执行的动作的信息。
在该环境中，捕获标记信息可以例如是在给定时间谁在发言或者由谁按下了什么键盘键。
根据本发明的媒体服务器的实施例的另一附加特征在于，其附加地包括适于接收控制信息的接收部件，所述处理部件附加地适于基于所述控制信息获得所述捕获标记信息。
本发明还涉及用于实现上述方法的应用服务器，所述应用服务器包括适于从媒体服务器接收媒体内容的接收部件，其特征在于，所述接收部件还适于从所述媒体服务器接收捕获标记信息，并且所述应用服务器附加地包括适于使用包括所述捕获标记信息的至少一部分的标记信息来标记所述媒体内容以获得标记的媒体内容的标记部件。
根据本发明的应用服务器的实施例的特征在于，所述接收部件附加地适于接收附加标记信息，并且所述应用服务器还包括组合所述捕获标记信息与所述附加标记信息以获得所述标记信息的处理部件。
根据本发明的应用服务器的实施例的附加特征在于，所述应用服务器是视频会议系统的一部分，并且所述捕获标记信息是涉及由所述视频会议的至少一个参与者执行的动作的信息。如上所述，在该环境中，捕获标记信息可以例如是在给定时间谁在发言或者由谁按下了什么键盘键。补充标记信息可以例如是关于参会者的地理定位（geolocalization）或者关于他们的出席状态的信息。
仅作为示例，并参考附图，在下面描述根据本发明的实施例的方法和服务器的实施例，其中：
图1表示实现了方法的实施例的视频会议系统；以及
图2示出了提供也实现了方法的实施例的交互式服务的系统。
图1中示出的视频会议系统包括经由网络（未示出）与应用服务器AS连接的媒体服务器MS。AS使用可与AS位于一处或者可经由网络访问的媒体储存库MR。MR将数据提供给也与网络（未示出）相连的应用实体AE。
AE通过该网络控制AS，并且可被用户实体UE1、UE2、UE3和UE4访问，通过上述用户实体参与者（未示出）有权访问视频会议（图1：箭头1-4）。
在替代实施例（未示出）中，用户实体直接地控制应用服务器，或者，应用服务器或者应用实体由第三方控制，第三方不必是会议的参与者。
MS混合音频和视频流并执行会议“发言权（floor）管理”，诸如选择哪个发言人应被看见。不详细描述视频会议是如何实现和管理的，因为这不是本发明的主题。关于其的更多细节可以例如在http://www.rfc-editor.org/rfc/rfc4722.txt（第5章）中找到。
当从AE请求时（图1：箭头10），视频会议经由AS由MS记录。这可以例如由参与者之一请求，以作会议记录或者保存谁说了什么的法律追踪。
在AS的控制下（图1：箭头11）MS收集适合于媒体被记录的信息，诸如，谁在给定时间发言，哪个键盘键被谁按下了a.s.o.。例如，如果AS指示MS将发言权给最大声的发言人，MS将检测谁是该最大声的发言人，并将记录该信息作为发送给AS的标记信息。
因此获得的信息与所记录的媒体一起被发送给AS（箭头4和6）。这可以即时（on-the-fly）完成，或者MS可以收集所有的数据并在视频会议后将完整的文件发送给AS。AS于是将数据转发给MR进行存储（图1：箭头8）。
这使用现有的协议（诸如，MSCML、HTML、FTP…）完成。
AS还从外部源（未示出）接收元数据，诸如，例如从地理定位服务器或者用户概况表HSS（图1：箭头7）。
图2表示交互式应用实体IAE，其行为由图像识别驱动。在替代方案中，这种应用还可以例如由语音识别或者由目标识别驱动。
在记录由用户实体UE（作为照相机）经由接口I1提供的图像时，由媒体服务器MSI获得涉及所识别的图像的标记信息（诸如图像大小和在照相机视场（field）中的位置）。该标记信息与图像一起经由I2和I3接口被传达给应用服务器IAS。IAS使用所获得的信息并可能使用从外部获得的附加信息（图2中的箭头I4）来标记图像，并将标记的图像存储在储存库IMR中（通过图2中示出的I5）。
由AS控制MSI的捕获（图2：箭头I11）。该控制由UE直接地触发或者在替代方案中通过IAE触发。
应注意的是，上述描述的功能可通过使用专用硬件以及能够执行与适当的软件有关联的软件的硬件提供。当由处理器提供时，该功能可由单一专用处理器提供、由单一共享处理器提供、或者由多个单独的处理器提供，其中的一些可共享。也可以包括其它硬件，常规的和/或自定义的。
同样，上述描述和附图只说明本发明的原理。因此将理解的是，基于该描述，本领域的技术人员将能够设计虽然没有在此明确地描述和示出但体现了本发明的原理并包括在其精神和范围内的各种排列。此外，此处列举的示例主要旨在仅明确地用于教学目的，以帮助读者理解本发明的原理和由发明人贡献的概念从而推进领域发展，并被解释为不限于这种特定地列举的示例和条件。而且，此处详述本发明的原理、方面和实施例的所有陈述及其具体示例旨在覆盖其等价物。

Claims (9)

1.一种自动地标记媒体内容的方法，所述方法包括以下步骤：
媒体服务器（MS；IMS）在对其进行捕获的基础上从所述媒体内容获得捕获标记信息，并将所述捕获标记信息和所述媒体内容发送到应用服务器（AS；IAS），
所述应用服务器使用包括所述捕获标记信息的至少一部分的标记信息来标记所述媒体内容。
2.根据权利要求1所述的方法，其特征在于，所述应用服务器（AS；IAS）另外从外部源获得补充标记信息，并将所述补充标记信息包括在所述标记信息中。
3.根据权利要求1所述的方法，其特征在于，所述媒体服务器（MS；IMS）在所述应用服务器的控制下获得所述捕获标记信息。
4.一种用于实现根据权利要求1所述的方法的媒体服务器（MS；IMS），所述媒体服务器包括适于捕获媒体内容的媒体内容捕获部件，其特征在于，所述媒体服务器附加地包括：
适于在对其进行捕获的基础上从所述媒体内容获得捕获标记信息的处理部件，以及
将所述捕获标记信息和所述媒体内容发送到应用服务器的发送部件。
5.根据权利要求4所述的媒体服务器（MS），其特征在于，所述媒体服务器是视频会议系统的一部分，并且所述内容捕获部件适于记录和混合视频会议的音频和视频流，所述处理部件适于如获得所述捕获标记信息一样获得涉及由所述视频会议的至少一个参与者执行的动作的信息。
6.根据权利要求4所述的媒体服务器（MS；IMS），其特征在于，其附加地包括适于接收控制信息的接收部件，所述处理部件附加地适于基于所述控制信息获得所述捕获标记信息。
7.一种用于实现根据权利要求1或2所述的方法的应用服务器（AS；IAS），所述应用服务器包括适于从媒体服务器（MS；IMS）接收媒体内容的接收部件，其特征在于，所述接收部件还适于从所述媒体服务器接收捕获标记信息，并且所述应用服务器附加地包括适于使用包括所述捕获标记信息的至少一部分的标记信息来标记所述媒体内容以获得标记的媒体内容的标记部件。
8.根据权利要求7所述的应用服务器（AS；IAS），其特征在于，所述接收部件附加地适于接收附加标记信息，并且所述应用服务器还包括组合所述捕获标记信息与所述附加标记信息以获得所述标记信息的处理部件。
9.根据权利要求7或8所述的应用服务器（AS），其特征在于，所述应用服务器是视频会议系统的一部分，并且所述捕获标记信息是涉及由所述视频会议的至少一个参与者执行的动作的信息。
CN2011800135709A 2010-03-12 2011-03-07 自动地标记媒体内容的方法，用于实现这种方法的媒体服务器和应用服务器 Pending CN102812459A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP10305247A EP2372578A1 (en) 2010-03-12 2010-03-12 Method for automatically tagging media content, media server and application server for realizing such a method
EP10305247.8 2010-03-12
PCT/EP2011/053359 WO2011110514A1 (en) 2010-03-12 2011-03-07 Method for automatically tagging media content, media server and application server for realizing such a method

Publications (1)

Publication Number Publication Date
CN102812459A true CN102812459A (zh) 2012-12-05

Family

ID=42232755

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011800135709A Pending CN102812459A (zh) 2010-03-12 2011-03-07 自动地标记媒体内容的方法，用于实现这种方法的媒体服务器和应用服务器

Country Status (6)

Country Link
US (1) US20130011119A1 (zh)
EP (1) EP2372578A1 (zh)
JP (1) JP2013522708A (zh)
KR (1) KR20120126101A (zh)
CN (1) CN102812459A (zh)
WO (1) WO2011110514A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105684406A (zh) * 2013-10-31 2016-06-15 阿尔卡特朗讯公司 用于提供对辅助信息的访问的方法和系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9635404B2 (en) * 2013-04-24 2017-04-25 The Nielsen Company (Us), Llc Methods and apparatus to correlate census measurement data with panel data
EP4064691A1 (en) * 2021-03-23 2022-09-28 Ricoh Company, Ltd. Communication management device, image communication system, communication management method, and carrier means

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1367502A1 (en) * 2001-03-08 2003-12-03 Fujitsu Limited Multimedia cooperative work system, client/server thereof, method therefor, recorded medium therefor, and program therefor
WO2007094537A1 (en) * 2006-02-14 2007-08-23 Olaworks, Inc. Method and system for tagging digital data

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1083401A (ja) * 1996-09-06 1998-03-31 Fuji Xerox Co Ltd マルチメディアデータベース装置
JP2004102767A (ja) * 2002-09-11 2004-04-02 Nippon Hoso Kyokai <Nhk> メタデータ収集分配システム、メタデータ収集サーバ、メタデータ収集方法、メタデータ収集プログラム、及びメタデータ収集プログラムを記録した記録媒体
JP2005267278A (ja) * 2004-03-18 2005-09-29 Fuji Xerox Co Ltd 情報処理システム及び情報処理方法、並びにコンピュータ・プログラム
JP2005341015A (ja) * 2004-05-25 2005-12-08 Hitachi Hybrid Network Co Ltd 議事録作成支援機能を有するテレビ会議システム
JP2006279111A (ja) * 2005-03-25 2006-10-12 Fuji Xerox Co Ltd 情報処理装置、情報処理方法およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1367502A1 (en) * 2001-03-08 2003-12-03 Fujitsu Limited Multimedia cooperative work system, client/server thereof, method therefor, recorded medium therefor, and program therefor
WO2007094537A1 (en) * 2006-02-14 2007-08-23 Olaworks, Inc. Method and system for tagging digital data

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ROY PEA等: "Video Collaboratories for Research and Education:An Analysis of Collaboration Design Patterns", 《IEEE TRANSACTIONS ON LEARNING TECHNOLOGIES》, 31 December 2008 (2008-12-31) *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105684406A (zh) * 2013-10-31 2016-06-15 阿尔卡特朗讯公司 用于提供对辅助信息的访问的方法和系统

Also Published As

Publication number Publication date
US20130011119A1 (en) 2013-01-10
EP2372578A1 (en) 2011-10-05
WO2011110514A1 (en) 2011-09-15
KR20120126101A (ko) 2012-11-20
JP2013522708A (ja) 2013-06-13

Similar Documents

Publication Publication Date Title
US10809069B2 (en) Location based content aggregation and distribution systems and methods
KR101521007B1 (ko) 확장된 콘텐츠 태그 공유를 위한 방법 및 장치
US8316052B2 (en) Method, computer program product and apparatus for providing media sharing services
US20160155475A1 (en) Method And System For Capturing Video From A Plurality Of Devices And Organizing Them For Editing, Viewing, And Dissemination Based On One Or More Criteria
US9584765B2 (en) Real-time visual customer support enablement system and method
KR20120112698A (ko) 무선 통신 디바이스의 사용자에 의한 지리적 위치로의 멀티미디어 콘텐트의 태깅
US20160037126A1 (en) Real-Time Visual Customer Support Enablement System and Method
CN110278399A (zh) 一种景点参观视频自动生成方法、系统、设备和存储介质
CN103561229B (zh) 会议标签生成及应用方法、装置、系统
US20140085443A1 (en) Method and apparatus for associating event information with captured media
KR20090001477A (ko) 실시간 상황정보 공유 방법 및 시스템
CN102812459A (zh) 自动地标记媒体内容的方法，用于实现这种方法的媒体服务器和应用服务器
US20120314625A1 (en) Method and apparatus for enabling internet-based emergency calls
JP4645418B2 (ja) 画像メッセージ伝達システム及びプログラム
KR20160036949A (ko) 회의록 제공 단말 및 회의록 제공 방법
CN104378278B (zh) 在移动终端进行微通信音频播放的方法及系统
US9128937B2 (en) Apparatus and method for creating, addressing and modifying related data
US20140055677A1 (en) Method for processing a multimedia stream, corresponding communications terminal, server and computer program product
JP2004164138A (ja) 情報配信システム、情報配信方法、及び情報配信プログラム
JP2006040164A (ja) 映像データの登録検索システム及び登録検索方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121205