CN101031061A - 元数据产生设备、信息处理设备、成像设备及安全系统 - Google Patents

元数据产生设备、信息处理设备、成像设备及安全系统 Download PDF

Info

Publication number
CN101031061A
CN101031061A CNA2006101212737A CN200610121273A CN101031061A CN 101031061 A CN101031061 A CN 101031061A CN A2006101212737 A CNA2006101212737 A CN A2006101212737A CN 200610121273 A CN200610121273 A CN 200610121273A CN 101031061 A CN101031061 A CN 101031061A
Authority
CN
China
Prior art keywords
data
content
metadata
information
additional information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006101212737A
Other languages
English (en)
Other versions
CN101031061B (zh
Inventor
保木本晃弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101031061A publication Critical patent/CN101031061A/zh
Application granted granted Critical
Publication of CN101031061B publication Critical patent/CN101031061B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/41Indexing; Data structures therefor; Storage structures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及元数据产生设备、信息处理设备、成像设备、视频会议系统、安全系统、产生元数据的方法及程序,其中所述元数据产生设备产生与实时连续产生的内容数据相关联的元数据,包括附加信息获取单元,该单元获取对应于至少一条内容数据的附加信息,以及链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。

Description

元数据产生设备、信息处理设备、成像设备及安全系统
相关申请的交叉对比
本发明涉及2005年8月26日在日本专利局提交的日本专利申请JP 2005-245118的主题,其全部内容在此结合以资对比。
技术领域
本发明涉及产生与实时连续产生的内容数据相关的元数据的功能。内容数据例如是图像数据或音频数据。
本发明是通过元数据产生设备、信息处理设备成像设备、视频会议系统、安全系统、产生元数据的方法及程序实施的。
背景技术
现在因特网已被开发,且通过因特网传递连续实时产生的内容数据的服务提供已经开始。例如,已经开始提供安全系统和视频会议系统,这些系统通过因特网递送捕获的图像数据和/或音频数据。采用这种服务的监控系统、数字监控记录器、以及网络监视系统分别在日本未审专利公开Nos.2003-204518、2004-146959和2005-136613公开。
发明内容
在通过因特网通信中,必须考虑数据的可靠性和/或信号处理所需的时间影响,内容数据预期使用的适当性。
例如,在安全系统中,在通信期间或在记录之后在发送机侧希望进行检测伪造的过程。在具有受限通信频带的安全系统中,希望在发送机侧,检测可移动对象或不可移动对象,以改进处理性能。
希望提供一种技术,用于产生与实时连续产生的内容数据相关联的元数据。
根据本发明的一个实施例提供一种元数据产生设备,其产生与实时连续产生的内容数据相关联的元数据,包括附加信息获取单元,该单元获取对应于至少一条内容数据的附加信息,以及链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
根据本发明的另一实施例,处理连续实时产生的内容数据的信息处理设备包括:附加信息获取单元,该单元获取对应于至少一条内容数据的附加信息;以及链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生与内容数据相关联的元数据。
根据本发明的另一实施例,连续实时产生图像数据的成像设备包括附加信息获取单元,该单元获取对应于至少一条图像数据的附加信息;以及链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条图像数据的链接信息,以产生与图像数据相关联的元数据。
根据本发明的另一实施例,视频会议系统包括成像设备;麦克风;附加信息获取单元,该单元获取对应于在成像设备和麦克风中连续实时产生的内容数据的附加信息;以及一个链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生与内容数据相关联的元数据。
根据本发明的另一实施例,安全系统包括至少一个成像设备;附加信息获取单元,该单元获取对应于在成像设备中连续实时产生的捕获的数据的附加信息;以及链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条捕获的数据的链接信息,以产生与捕获的数据相关联的元数据。
根据本发明的另一实施例,产生与连续实时产生的内容数据相关联的元数据的方法包括以下步骤,获取对应于至少一条内容数据的附加信息;以及向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
根据本发明的另一实施例提供一种程序,使计算机产生与连续实时产生的内容数据相关联的元数据,进行以下步骤,获取对应于至少一条内容数据的附加信息;以及向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
根据本发明的实施例的技术的应用,允许在连续实时产生的内容数据与元数据之间的对应关系是可靠的。其结果是,例如内容数据可无须等待元数据完全产生而被传输。还能够与元数据非同步地传输内容数据。
附图说明
图1表示元数据的一个示例性数据结构;
图2表示内容数据与元数据的一个示例性数据结构;
图3表示链接信息的一个示例性结构;
图4表示链接信息的另一示例性结构;
图5表示一个例子,说明如何使用链接信息;
图6表示链接信息的一个示例性描述;
图7A到7C表示内容数据与元数据之间对应关系的例子;
图8表示并非所有图像数据和元数据的组合具有相同链接信息的情形;
图9示出在内容数据与元数据之间一对多对应关系中相关联模式;
图10是一流程图,表示在“精确一致”下示例性相关过程;
图11是一流程图,表示在“过去邻近”下示例性相关过程;
图12是一流程图,表示在“未来邻近”下示例性相关过程;
图13表示一个示例性数据格式,其中元数据嵌入到内容数据;
图14表示当元数据包含可移动对象的检测结果时的一个输出例子;
图15是一个框图,表示元数据传输单元的一个示例性结构,该单元具有产生带有链接信息的元数据的功能;
图16示出一个示例性应用系统;
图17是一框图,表示成像设备的一个示例性内部结构;
图18示出另一个示例性应用系统;
图19示出另一个示例性应用系统;以及
图20示出另一个示例性应用系统。
具体实施方式
将描述根据本发明实施例的元数据产生设备的例子。
在本技术领域内已知或共同的技术应用于附图中未示出各部件,或在本说明书中不予描述。
以下所述的本发明实施例只是示例性的,且本发明不限于所公开的示例性实施例。
内容数据与元数据的相关联
第一实施例
将在本发明第一实施例中说明连续实时产生的内容数据的处理。
元数据是关于对应于元数据产生内容数据的信息与关于处理结果的信息的集合。根据本发明第一实施例的元数据中的信息类似于现有元数据中的信息。
例如元数据包括关于当内容数据产生时的日期和时间的信息,关于当内容时间产生时设备的设置和条件的信息(例如用来捕获图像的摄像机的摇摄值、倾斜值、变焦值),关于内容数据本身的信息,以及关于对内容数据处理结果的信息(例如来自运动检测结果的数据,关于被检测的非移动对象的数据,以及对于伪造的检测的签字)。
在第一实施例中所述的元数据中,采用以下数据结构,以允许元数据独立于内容数据被处理。
图1示出由发明人提出的元数据的一个示例性数据结构。
参见图1,该元数据包括元数据体和链接信息。链接信息是唯一标识对应于元数据体的一条或多条内容数据的描述。
如图2所示,在内容数据中布置与元数据中相同的链接信息。就是说,内容数据也包含内容数据体和链接信息。
图3示出链接信息的一个示例性结构。在这例子中,使用内容标识信息作为链接信息。
内容标识信息用来标识内容数据。例如,时戳和序号用作为内容标识信息。
时戳是指示当内容时间产生时的时间的信息(时间信息)。当内容数据是图像数据时,在摄像机设备中对图像数据进行联合图象专家组(JPEG)、运动图像专家组(MPEG)、以及其它处理。假设时戳是关于对图像数据进行以上处理之前原始数据的时间信息。于是,图像在编码之前和之后具有相同的时戳。
序号是指示内容数据产生的顺序的信息(顺序信息)。如同时戳那样,序号也是关于原始数据的顺序的信息。通常,对于毫秒的时戳序号似乎是不必要的。然而如果时戳是以秒提供的,则在同一时间存在多个图像。这种情形下,要使用序号以便标识同一时间的多条内容数据。
图4示出链接信息的另一示例性结构。在这例子中,除了内容标识信息之外,使用装置信息作为链接信息。使用装置信息用来标识用其产生内容数据的装置。该装置信息对于具有产生内容数据的多个装置的系统是有用的。例如,通用唯一标识符(UUID)或统一资源定位符(URL)可用作为装置信息。
参见图4,制造商名称、型号名称、及序列号用作为装置信息。
制造商名称指示制造用来产生内容数据的装置的制造商名称。例如,制造商名称是字符串“Sony Corporation”。“Sony”是索尼公司的注册商标。
型号名称指示制造商对装置赋予的型号名称。例如,型号名称是字符串“SNC-100”。
序列号是制造商对装置指定的序列号。例如,序列号是字符串“0123456789”。
以上三类信息一般是根据制造商特定的规范描述的。因而,难以唯一地定义这些规范。
然而,如果这种信息通过字符串的使用来表示,并保证信息之间的一致性,则尽管有不同的规范,但能够在某种程度上标识装置。
如上所述,URL可用作为装置信息。例如以上三类信息通过URL表示,http://www.sony.jp/product/security/network_camera/SNC-100/0123456789。
图5示出说明如何使用链接信息的一例。参见图5,使用四条链接信息关联四条内容数据与一条元数据。换言之,四条内容数据与一条元数据相关联。
链接信息的存在允许内容数据可稍后与分离传输的或存储的元数据相关联。
本说明书中,术语“链接信息”还意味着描述与四条内容数据对应关系的四条链接信息的集合。
在这一意义下的“链接信息”中,标识多条内容数据的各条链接信息排列在一个列表中。
图6示出链接信息以可扩展标记语言(XML)的一个示例性的描述。内容数据是图6例子中的图像数据。
参见图6,“SystemInfo”表示装置信息,其中描述了制造商名称(Manufacturer),型号名称(ModelName),以及序列号(SerialNumber)。
图6中的“FrameSet size”表示内容标识信息,指示四条内容数据与该元数据相关联。在四条内容数据中,时戳和序列号分别被描述为标识对应的内容数据条的链接信息。
内容数据与元数据之间的对应关系被分为三类:一对一,多对一,以及一对多,它们分别示于图7A到7C。
图5和6所示的例子对应于多对一类型。选择多对一或一对多类型,这取决于应用的服务。一对多类型的元数据条可能具有其中描述的相同类型的信息条,或可能具有其中描述的不同类型的信息条。
第二实施例
如上所述,关联元数据与内容数据的链接信息被嵌入在每一数据中。
然而当标识原始内容数据的信息用作为链接信息时,可能发生这样的情形,其中内容数据的链接信息不是精确地与元数据的信息相一致(内容数据与元数据之间的关联不被确认的情况)。
例如,以上情形发生在,当所有从分析的结果所得的元数据与所有被记录的内容数据不具有一对一类型的对应关系时。
以上情形还发生在,当由于在因特网上分组丢失等引起的内容数据与元数据在图像记录设备中没有被成功记录时。
具体来说,在分析过程中,诸如可移动对象的检测,对于每秒30帧(fps)的原始图像数据(内容数据)可能每秒产生对应于30帧的元数据,同时原始图像数据(内容数据)可按JPEG格式编码,且编码的图像数据可通过网络以一个fps传输。
在以上情形下,在图像记录设备中每秒记录对应于30帧的元数据和对应于一个帧的图像数据。于是,至于对应于29帧的元数据,在图像记录设备中不存在具有与该元数据的一致的链接信息的图像数据。
由于图像数据以一fps传输和显示,因而能够以一fps记录该元数据。
然而这种情形下,却丢失了在一秒钟内显现在屏幕中并立即消失的关于可移动对象的信息。
于是,必须按图8白色所示的数据产生或记录元数据条,它们没有直接与其相关联的图像数据。
如果不存在具有与元数据中描述的链接信息相一致的链接信息的图像数据,则元数据本身很容易被认为是没有意义的。
然而例如在监视摄像机中,使元数据与同最初与元数据相关联图像数据邻近的图像数据相关联,这就允许有效使用具有与图像数据不精确一致的链接信息的元数据。
本发明人提出图9所示按内容数据与元数据之间一对多对应关系的三种关联模式。这三种关联模式包括精确一致,过去邻近,以及未来邻近。
图10是一流程图,表示按“精确一致”的一示例性关联过程,这是一个基本模式。“精确一致”对应于这样的关联模式,其中内容数据与具有同内容数据的信息精确一致的链接信息的元数据相关联。
参见图10,在步骤S1,信息处理设备读出内容数据和元数据中的链接信息。这例子中,信息处理设备读出作为装置信息的制造商名称、型号名称、及序列号,并读出作为内容标识信息的时戳与顺序号。
在步骤S2,信息处理设备确定内容数据中的装置信息是否与元数据中的信息一致。
如果内容数据中的装置信息与元数据中的信息一致,在步骤S3,信息处理设备确定内容时间中的时戳是否与元数据中的一致。
如果内容数据中的时戳与元数据中的一致,在步骤S4,信息处理设备确定内容数据中的顺序号是否与元数据中的一致。
如果内容数据中的顺序号与元数据中的一致,在步骤S5,信息处理设备确定相关成功。如果任何以上信息是否定的,在步骤S6,信息处理设备确定相关失败。
精确一致的相关过程按以上所述方式进行。
图11是一流程图,表示“过去邻近”的一个示例性相关过程。
“过去邻近”对应于这样的相关模式,其中在过去内容数据中对于规定的链接信息中的时戳,具有最近时戳的内容数据与元数据相关联。
参见图11,在步骤S11,信息处理设备读出内容数据和元数据中的链接信息。在步骤S12,信息处理设备确定内容数据中的装置信息是否与元数据中的一致。
如果内容数据中的装置信息与元数据中的一致,在步骤S13,信息处理设备确定内容数据中的时戳是否与元数据中的一致。
如果内容数据中的时戳与元数据中的一致,在步骤S14,信息处理设备确定内容数据中的顺序号是否与元数据中的一致。
如果内容数据中的顺序号与元数据中的一致,在步骤S15,信息处理设备使内容数据与具有与内容数据的信息一致的链接信息的元数据相关联。
如果内容数据中的时戳与元数据中的不一致(步骤S13中的确定是否定的),则在步骤S16,信息处理设备产生在过去的内容数据中对于读取的时戳具有最近时戳的内容数据的列表。
该列表是在预定的时间周期上产生的。这是因为如果没有时间限制,则能够建立内容数据与同该内容数据没有对应关系的元数据之间的关联。例如,在读取了链接信息之后该列表从过去一秒钟内的内容数据产生。
在步骤S17,信息处理设备确定在产生的列表中是否存在至少一条内容数据。
如果在产生的列表中存在至少一条内容数据(步骤S17中的确定是肯定的),在步骤S18,信息处理设备确定一个时戳是否对应于列表中的一条内容数据。
如果在该列表中不存在具有相同时戳的多条内容数据(步骤S18中的确定是肯定的),则在步骤S20,信息处理设备使列表中具有最近时戳的内容数据与该元数据关联。
如果在该列表中存在具有相同时戳的多条内容数据(步骤S18中的确定是否定的),则在步骤S19,信息处理设备使过去的内容数据中对于读取的顺序号具有最近顺序号的内容数据,与该元数据相关联。
基本上,确定具有最大顺序号的内容数据为最近的内容数据。然而,由于当顺序号超过最大值时顺序号要回零,因而必须确定顺序号是否超过最大值。
如果步骤S12和步骤S17中的任何确定是否定的,则在步骤S21,信息处理设备确定关联失败。
过去邻近的关联过程按上述方式进行。
图12是一流程图,表示“未来邻近”的一个示例性关联过程。
“未来邻近”对应于这样的关联模式,其中在未来内容数据中对于规定的链接信息中的时戳具有最近时戳的内容数据,与该元数据相关联。
参见图12,在步骤S31,信息处理设备读出内容数据和元数据中的链接信息。在步骤S32,信息处理设备确定内容数据中的装置信息是否与元数据中的一致。
如果内容数据中的装置信息与元数据中的一致,则在步骤S33,信息处理设备确定内容数据中的时戳是否与元数据中的一致。
如果内容数据中的时戳与元数据中的一致,则在步骤S34,信息处理设备确定内容数据中的顺序号是否与元数据中的一致。
如果内容数据中的顺序号与元数据中的一致,则在步骤S35,信息处理设备使内容数据与具有与该内容数据的信息一致的链接信息的元数据相关联。
如果内容数据中的时戳不与元数据中的一致(步骤S33中的确定是否定的),则在步骤S36,信息处理设备产生内容数据的列表,所述内容数据在未来内容数据中对于读取的时戳具有最近的时戳。
该列表是在预定的时间周期上产生的。这是因为如果没有时间限制,则能够建立内容数据与同该内容数据没有对应关系的元数据之间的关联。例如,在读取了链接信息之后该列表从未来一秒钟内的内容数据产生。
在步骤S37,信息处理设备确定在产生的列表中是否存在至少一条内容数据。
如果在产生的列表中存在至少一条内容数据(步骤S37中的确定是肯定的),在步骤S38,信息处理设备确定一个时戳是否对应于列表中的一条内容数据。
如果在该列表中不存在具有相同时戳的多条内容数据(步骤S38中的确定是肯定的),则在步骤S40,信息处理设备使列表中具有最近时戳的内容数据与该元数据关联。
如果在该列表中存在具有相同时戳的多条内容数据(步骤S38中的确定是否定的),则在步骤S39,信息处理设备使未来的内容数据中对于读取的顺序号具有最近顺序号的内容数据,与该元数据相关联。
基本上,确定具有最小顺序号的内容数据为最近的内容数据。然而,由于当顺序号超过最大值时顺序号要回零,因而必须确定顺序号是否超过最大值。
如果步骤S32和步骤S37中的任何确定是否定的,则在步骤S41,信息处理设备确定关联失败。
过去邻近的关联过程按上述方式进行。
当在内容数据与元数据之间建立多对一的对应关系时,在上述过程中以元数据代替内容数据。
优点
如上所述,通过在元数据中描述用于与内容数据关联所必须的链接信息,并在内容数据中描述用于与元数据相关联所必须的链接信息,总能够保证实时连续产生的内容数据与元数据之间的对应关系。
于是,即使当元数据在不同于内容数据的数据流中与内容数据非同步传输时(参见图8),或即使当元数据独立于内容数据被记录时,也能够保持内容数据与元数据之间的对应关系。
在内容数据中嵌入了元数据的数据格式中,如图13所示,可能不规则地发生对应于产生元数据所需时间的时间延迟。即使在这样的情形下,也能够保证内容时间与元数据之间的对应关系。
在内容数据中嵌入了元数据的数据格式中,元数据可在同一数据流中与内容数据非同步传输。例如,元数据可与内容数据按内容数据、内容数据、元数据、内容数据...的顺序非同步传输。
由于即使当元数据与内容数据非同步传输时,也能够保持对应关系,因而能够作为元数据传输需要时间的信号处理结果。换言之,具有繁重处理负荷的分析过程,诸如检测可移动对象的过程,或产生用于检测伪造的签字数据的过程,能够布置在发送器侧。
使用链接信息,允许根据来自应用程序的请求任意地进行内容数据与元数据之间的关联。于是,对于使用元数据的应用程序能够给出更大的自由度。
此外,由于能够不仅以一对一的类型,而且以多对一类型和一对多类型保证内容数据与元数据之间的对应关系,元数据能够应用于或用于任何应用程序。
例如,元数据能够应用于这样的情形,其中图像数据作为内容数据以一fps被记录,以及元数据作为可移动对象检测结果以30fps被记录。
这种情形下,发展“过去邻近”与“未来邻近”的概念,使被记录的图像数据与在记录的图像数据之前或之后一秒钟内多条元数据(关于被检测的可移动对象的数据)关联,允许在屏幕上估计并输出被检测对象的运动画面(例如人物),如图14所示。
示例性元数据传输单元
图15是一框图,表示元数据传输单元1的一个示例性结构,其包括产生带有上述链接信息的元数据的装置(元数据产生器)。
元数据传输单元1包括分析器-信息获取器3、元数据产生器5、元数据发送器7、和控制器9。
分析器-信息获取器3接收内容数据,诸如图像数据或音频数据,以及标识内容数据所必须的信息,以便分析数据和/或获取附加信息。
例如,如果内容数据是图像数据,且分析过程是检测可移动对象的过程,则分析器-信息获取器3基于对应于几个过去帧的图像数据抽取关于可移动对象的信息。
元数据产生器5向从分析器-信息获取器3提供的附加信息(元数据体)添加链接信息,以产生元数据。例如,元数据产生器5在一个XML文件中表示元数据体及链接信息。
元数据产生器5中产生的一个XML文件可以不仅表示对应于一条内容数据条的元数据,而且可表示对应于多条内容数据的元数据。
元数据发送器7通过网络发送在元数据产生器5中打包的元数据。
如同内容数据作为其数据流发送那样,元数据是作为元数据流发送的。
例如,XML文件按多用途网际邮件扩充协议(MIME)或直接网际消息封装(DIME)编码,且元数据作为超文本传输协议(HTTP)流发送。
控制器9使分析器-信息获取器3、元数据产生器5、元数据发送器7彼此同步,启动并停止元数据的发送等。控制器9给元数据产生器5提供链接消息。
第一示例性应用系统
图16示出第一示例性应用系统。这一系统对应于以成像设备11(摄像机)捕获的图像数据,通过网络13作为MPEG或JPEG图像流向记录设备15发送的情形。
成像设备11包括上述的元数据发送单元1。于是,即使图像数据和元数据在分离的数据流中发送,在这系统中也能够保持对应关系。
以MPEG格式编码的图像数据可与以JPEG格式编码的图像数据同时发送。
图17的框图表示成像设备11的一个示例性内部结构。在图17的例子中,允许检测JPEG图像数据伪造的签字数据及运动检测的结果作为元数据被发送。
成像设备11包括成像单元21、图像捕获器23、MPEG编码器25、帧缓冲器27、JPEG编码器29、帧缓冲器31、上述分析器-信息获取器3、上述元数据产生器5、上述元数据发送器7,及TCP/IP单元33。
成像单元21包括信号处理单元,其进行已知的预处理,以便把从成像器提供的电信号转换为图像信号。
图像捕获器23是信号处理单元,其捕获向其添加了时戳TS和顺序号SN的图像信号。图像捕获器23向MPEG编码器25、JPEG编码器29、以及分析器-信息获取器3提供原始图像信号。
对原始图像数据在其编码为JEPG或MPEG数据之前,进行运动检测(对象检测)。
析器-信息获取器3包括用于伪造检测的签字数据产生器301和用于运动检测的图像处理器303。从通过JPEG编码之后帧图像散列编码所得的散列值,用来产生签字数据。
在元数据产生器5中的签字XML文件产生器501中,签字数据被转换为XML文件。在元数据产生器5中的运动XML文件产生器503中,运动检测的结果被转换为XML文件。
这些XML文件在元数据发送器7中被组合为一个文件,且组合的文件在网络上通过TCP/IP单元33作为与该图像数据关联的元数据被发送。元数据在不同于图像数据流的数据流中与图像数据非同步发送。
由于在第一示例性应用系统中,只使用了一个作为图像数据源的成像设备,链接信息可以只包括内容标识信息,而没有装置信息。这是因为,图像数据与元数据之间的对应关系可以用未被标识的装置标识。
内容标识信息和装置信息的组合可用作为链接信息。这同样适用于以下所述第二和第三示例性应用系统。
第二示例性应用系统
图18示出第二示例性应用系统。该系统的结构类似于图16所示的第一示例性应用系统。然而第二示例性应用系统不同于第一示例性应用系统在于,元数据发送单元1是与成像设备11分开的外部单元。
元数据发送单元1可以是成像设备11专用的发送单元,或可作为通信设备,诸如路由器、调制解调器、或移动电话、或信息处理设备的部分功能而实现。
第三示例性应用系统
图19示出第三示例性应用系统。该系统具有类似于图16所示的第一示例性应用系统的结构。然而第三示例性应用系统不同于第一示例性应用系统在于,元数据发送单元1可从成像设备11拆卸。
例如,第三示例性应用系统优选适用于这样的情形,其中元数据发送单元1覆盖在被插入到成像设备11卡插口的便携式卡盒中。
第四示例性应用系统
图20示出第四示例性应用系统。在这系统中,至少两个作为图像数据源的成像设备11连接到网络13。其余的结构类似于上述第一示例性应用系统。
第四示例性应用系统优选适用于视频会议系统或安全系统。
然而,由于在这系统中可能同时存在多条图像数据,因而必须使用内容标识信息与装置信息的组合作为链接信息。
其它实施例
虽然在以上示例性应用系统中,具有产生带链接信息的元数据的功能(元数据产生器)的元数据发送单元1安装在成像设备内,插入在其内,或与其外部连接,但元数据发送单元1可安装在能够处理连续实时产生的内容数据的任何信息处理设备中。
虽然在以上示例性应用系统中,通过网络接收的内容数据和元数据被记录在记录设备15中,但是接收设备不限于记录设备15。成像设备可连接到信息处理设备,诸如计算机,或输出设备。
虽然在以上实施例中链接信息被添加到元数据中,但链接信息可与内容数据共享,并因而链接信息可以按元数据中相同的方式被添加到内容数据。
以上实施例中所述产生带有链接信息的元数据的功能,可通过一个程序实现。这种情形下,该程序可存储在一个存储介质中,该介质可通过网络被分发或被递送。该存储介质例如是磁性存储介质、光存储介质、或半导体存储介质。
业内专业人员当可理解,就所附权利要求及其等价物范围而言,与设计要求和其它因素相关,可以出现各种修改、组合、次组合及变形。

Claims (16)

1.一种元数据产生设备,其产生与连续实时产生的内容数据相关联的元数据,该元数据产生设备包括:
附加信息获取单元,该单元获取对应于至少一条内容数据的附加信息;以及
链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
2.根据权利要求1的元数据产生设备,
其中内容数据是用成像设备捕获的图像数据。
3.根据权利要求1的元数据产生设备,
其中内容数据是音频数据。
4.根据权利要求1的元数据产生设备,
其中链接信息是标识内容数据的信息。
5.根据权利要求4的元数据产生设备,
其中标识内容数据的信息是时戳。
6.根据权利要求4的元数据产生设备,
其中标识内容数据的信息是顺序号。
7.根据权利要求4的元数据产生设备,
其中链接信息包括关于产生内容数据的装置的信息。
8.根据权利要求7的元数据产生设备,
其中关于产生内容数据的装置的信息是标识装置的制造商的信息。
9.根据权利要求7的元数据产生设备,
其中关于产生内容数据的装置的信息是标识该装置的型号名称的信息。
10.根据权利要求7的元数据产生设备,
其中关于产生内容数据的装置的信息是该装置特有的序列号。
11.一种信息处理设备,其处理连续实时产生的内容数据,该信息处理设备包括:
附加信息获取单元,该单元获取对应于至少一条内容数据的附加信息;以及
链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生与内容数据相关联的元数据。
12.一种成像设备,其连续实时产生图像数据,该成像设备包括:
附加信息获取单元,该单元获取对应于至少一条图像数据的附加信息;以及
链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条图像数据的链接信息,以产生与图像数据相关联的元数据。
13.一种视频会议系统,包括:
成像设备;
麦克风;
附加信息获取单元,该单元获取对应于在成像设备和麦克风中连续实时产生的内容数据的附加信息;以及
链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生与内容数据相关联的元数据。
14.一种安全系统,包括:
至少一个成像设备;
附加信息获取单元,该单元获取对应于在成像设备中连续实时产生的捕获的数据的附加信息;以及
链接信息添加单元,该单元向对应的附加信息添加唯一标识对应于附加信息的至少一条捕获的数据的链接信息,以产生与捕获的数据相关联的元数据。
15.一种产生元数据的方法,所述元数据与连续实时产生的内容数据相关联,该方法包括以下步骤:
获取对应于至少一条内容数据的附加信息;以及
向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
16.一种程序,其使计算机产生与连续实时产生的内容数据相关联的元数据,以进行以下步骤:
获取对应于至少一条内容数据的附加信息;以及
向对应的附加信息添加唯一标识对应于附加信息的至少一条内容数据的链接信息,以产生元数据。
CN2006101212737A 2005-08-26 2006-08-25 元数据产生设备、信息处理设备、成像设备及安全系统 Expired - Fee Related CN101031061B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005245118A JP2007060446A (ja) 2005-08-26 2005-08-26 メタデータ生成装置、情報処理装置、撮像装置、テレビ会議システム、セキュリティシステム、メタデータ生成方法及びプログラム
JP2005245118 2005-08-26
JP2005-245118 2005-08-26

Publications (2)

Publication Number Publication Date
CN101031061A true CN101031061A (zh) 2007-09-05
CN101031061B CN101031061B (zh) 2013-02-13

Family

ID=37531978

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006101212737A Expired - Fee Related CN101031061B (zh) 2005-08-26 2006-08-25 元数据产生设备、信息处理设备、成像设备及安全系统

Country Status (4)

Country Link
US (1) US8682934B2 (zh)
EP (1) EP1758034A3 (zh)
JP (1) JP2007060446A (zh)
CN (1) CN101031061B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102572443A (zh) * 2010-09-30 2012-07-11 苹果公司 用于在图像信号处理系统中同步音频和视频数据的技术

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070203927A1 (en) * 2006-02-24 2007-08-30 Intervoice Limited Partnership System and method for defining and inserting metadata attributes in files
EP2333688B1 (en) * 2007-01-10 2017-03-22 Sony Deutschland GmbH Method and device for determining a unique content instance identifier, unique content instance identifier and method and device for managing content licenses
KR101371015B1 (ko) 2007-03-15 2014-03-10 삼성전자주식회사 콘텐츠 정보 출력 장치 및 방법
US20090135264A1 (en) * 2007-11-28 2009-05-28 Motorola, Inc. Motion blur detection using metadata fields
JP5188260B2 (ja) * 2008-05-08 2013-04-24 キヤノン株式会社 画像処理装置、画像処理方法ならびにそのプログラムおよび記憶媒体
JP5397014B2 (ja) * 2009-05-21 2014-01-22 ソニー株式会社 監視システム、撮像装置、解析装置及び監視方法
GB2473858A (en) * 2009-09-25 2011-03-30 Eforce Online Ltd Media item gathering and linking system
US20110227933A1 (en) * 2010-01-25 2011-09-22 Imed Bouazizi Method and apparatus for transmitting a graphical image independently from a content control package
US8698872B2 (en) 2011-03-02 2014-04-15 At&T Intellectual Property I, Lp System and method for notification of events of interest during a video conference
US9473668B2 (en) * 2011-11-01 2016-10-18 Siemens Industry, Inc. Distributed storage and processing of mail image data
US8953882B2 (en) 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
US9743057B2 (en) 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
US9031319B2 (en) 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US9332239B2 (en) 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
US11089247B2 (en) 2012-05-31 2021-08-10 Apple Inc. Systems and method for reducing fixed pattern noise in image data
US8872946B2 (en) 2012-05-31 2014-10-28 Apple Inc. Systems and methods for raw image processing
US9142012B2 (en) 2012-05-31 2015-09-22 Apple Inc. Systems and methods for chroma noise reduction
US9105078B2 (en) 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping
US9077943B2 (en) 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US8817120B2 (en) 2012-05-31 2014-08-26 Apple Inc. Systems and methods for collecting fixed pattern noise statistics of image data
US9025867B2 (en) 2012-05-31 2015-05-05 Apple Inc. Systems and methods for YCC image processing
US8917336B2 (en) 2012-05-31 2014-12-23 Apple Inc. Image signal processing involving geometric distortion correction
US9014504B2 (en) 2012-05-31 2015-04-21 Apple Inc. Systems and methods for highlight recovery in an image signal processor
US10719385B2 (en) * 2016-03-31 2020-07-21 Hyland Software, Inc. Method and apparatus for improved error handling
CN113747113A (zh) * 2020-05-29 2021-12-03 北京小米移动软件有限公司 图像显示方法及装置、电子设备、计算机可读存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6567980B1 (en) 1997-08-14 2003-05-20 Virage, Inc. Video cataloger system with hyperlinked output
JP3738631B2 (ja) 1999-09-27 2006-01-25 三菱電機株式会社 画像検索システムおよび画像検索方法
JP2001292407A (ja) * 2000-04-07 2001-10-19 Sony Corp 編集支援システム及び方法
JP4099973B2 (ja) * 2001-10-30 2008-06-11 松下電器産業株式会社 映像データ送信方法及び映像データ受信方法、並びに映像監視システム
AUPR960601A0 (en) 2001-12-18 2002-01-24 Canon Kabushiki Kaisha Image protection
JP2003204518A (ja) 2002-01-08 2003-07-18 Matsushita Electric Ind Co Ltd 監視システム
US7107285B2 (en) * 2002-03-16 2006-09-12 Questerra Corporation Method, system, and program for an improved enterprise spatial system
JP2004120415A (ja) 2002-09-26 2004-04-15 Sony Corp 動画像データストリームの変換装置及び方法
JP2004146959A (ja) 2002-10-23 2004-05-20 Funai Electric Co Ltd デジタル監視レコーダ
EP1494237A1 (en) * 2003-07-01 2005-01-05 Deutsche Thomson-Brandt Gmbh Method and apparatus for editing a data stream
AU2004307162A1 (en) * 2003-10-29 2005-05-12 Qualcomm Incorporated High data rate interface
JP2005136613A (ja) 2003-10-29 2005-05-26 Hitachi Kokusai Electric Inc ネットワーク監視システム
JP4337541B2 (ja) 2003-12-19 2009-09-30 パナソニック株式会社 カメラ装置、監視システム及びカメラ装置制御方法
US7680808B2 (en) * 2004-01-29 2010-03-16 Panasonic Corporation Transmission apparatus, content reproduction apparatus, and content and license distribution system
JP2005245118A (ja) 2004-02-26 2005-09-08 Mitsubishi Electric Corp インバータ回路を備えた電気装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102572443A (zh) * 2010-09-30 2012-07-11 苹果公司 用于在图像信号处理系统中同步音频和视频数据的技术
US8736700B2 (en) 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
CN102572443B (zh) * 2010-09-30 2016-09-07 苹果公司 用于在图像信号处理系统中同步音频和视频数据的技术

Also Published As

Publication number Publication date
EP1758034A2 (en) 2007-02-28
US20070050397A1 (en) 2007-03-01
EP1758034A3 (en) 2007-04-18
JP2007060446A (ja) 2007-03-08
US8682934B2 (en) 2014-03-25
CN101031061B (zh) 2013-02-13

Similar Documents

Publication Publication Date Title
CN101031061A (zh) 元数据产生设备、信息处理设备、成像设备及安全系统
CN1198454C (zh) 信息处理方法及设备、内容分配服务器及其方法
CN1182715C (zh) 信号传输系统、信号发送装置和信号接收装置
CN1103981C (zh) 视频信息调节装置
CN1321945A (zh) 内容提供装置和方法以及记录介质
CN101068310A (zh) 运动图像处理设备和运动图像处理方法
CN1812540A (zh) 图像拍摄设备、拍摄图像数据记录方法、和拍摄图像数据处理设备及方法
CN1205154A (zh) 图像声音解码装置和图像声音编码装置以及信息传输系统
CN101035334A (zh) 用于移动电话的多媒体处理设备和方法
CN1992775A (zh) 信息处理设备和信息处理方法
CN1848933A (zh) 内容记录系统和内容记录方法
CN1901656A (zh) 视频和音频重放设备及方法、输出时刻改变设备及方法
CN1522536A (zh) 信息传递系统与方法,以及信息处理设备与方法
CN1444359A (zh) 代理,图像形成装置管理系统、方法和程序,存储介质
CN1754159A (zh) 信息处理装置和内容信息处理方法
CN1878222A (zh) 图像处理装置及其控制方法
CN1968409A (zh) 实现流媒体内容审查的用户终端设备及审查方法
CN1655622A (zh) 视频通信设备与视频通信方法
CN1921612A (zh) 一种自动化视频制作发布的方法及其系统
CN1573809A (zh) 活动图像转换方法和设备、活动图像传输方法和设备、程序
CN1917456A (zh) 移动监控方法及网关设备和监控系统
CN1968137A (zh) 一种媒体流审查系统及审查码流生成节点设备
CN1625883A (zh) 传送权利管理消息的方法和装置
CN1817035A (zh) 信息处理设备和方法、程序记录介质及程序
CN1498500A (zh) 用于数字项的ipmp方案描述的处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130213

Termination date: 20150825

EXPY Termination of patent right or utility model