CN1403949A - 事件图象记录系统与记录方法 - Google Patents

事件图象记录系统与记录方法 Download PDF

Info

Publication number
CN1403949A
CN1403949A CN02131990.1A CN02131990A CN1403949A CN 1403949 A CN1403949 A CN 1403949A CN 02131990 A CN02131990 A CN 02131990A CN 1403949 A CN1403949 A CN 1403949A
Authority
CN
China
Prior art keywords
event
incident
local event
local
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN02131990.1A
Other languages
English (en)
Other versions
CN100419735C (zh
Inventor
松川隆行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1403949A publication Critical patent/CN1403949A/zh
Application granted granted Critical
Publication of CN100419735C publication Critical patent/CN100419735C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19652—Systems using zones in a single scene defined for different treatment, e.g. outer zone gives pre-alarm, inner zone gives alarm
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19641—Multiple cameras having overlapping views on a single scene
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19669—Event triggers storage or change of storage policy
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19676—Temporary storage, e.g. cyclic memory, buffer storage on pre-alarm
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695—Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

预先限定与报警相关的摄象机和各台摄象机记录的图象时间周期，在报警出现时，参照限定内容编制管理数据。假定监视目标231的转移路线232，根据这一假定，利用沿该路线安装的每台摄象机203～205，每次延迟和限定与事件有关的图象的时间周期。这样，能记录监视目标在报警出现时做的可疑行为和其转移到监视区221的路线上做的可疑行为，作为一种事件图象。而且，还能缩短图象中可以拍到监视目标231的时间周期。

Description

事件图象记录系统与记录方法
技术领域
本发明涉及事件图象记录系统与记录方法，它能连续记录摄象机输入的图象，把在出现报警时记录的图象和出现报警前后记录的图象处理为一种事件图象，并利用联网的监视终端显示该事件图象。
背景技术
近年来，可以记录摄象机图象的监视系统已投入使用，这些摄象机安装在银行、停车场、便利店、大型商店或街道上。在这类系统中，在已公开的日本专利公报No.2000-339923中提到的设备，在被传感器报警触发时，可记录报警出现时间前后的图象并把它处理为一个事件，还可检索和播放该事件。该设备把出现报警时的摄象机图象记录为事件图象，当若干事件以一定顺序出现时，把这些事件定义为宏事件。再者，有了上述设备，就能编制与若干事件图象相关的管理数据，而且容易参照这类管理数据迅速地监视和分析记录区域的状况。
然而，运用上述的常规设备，当监视者想查看监视目标在监视区内做出的可疑行为和监视目标在转换到监视区的路线上做出的可疑行为时，就会出现检索每幅图象的操作复杂而且费时的问题。
发明内容
本发明旨在监视监视目标在监视区内的行为，此外，本发明还旨在监视监视目标在转移到监视区的路线上的行为。
为实现上述目的，首先，本发明与一事件图象相关，该图象记录了监视目标在监视区的行为，而且记录了监视目标在转移到监视区的路线上的行为。就是说，推测监视目标的转移路线，并按距离推算从传感器移到摄象机安装地点所需的时间，然后利用与报警出现时刻的时差限定来自每台摄像机的本地事件图象的时间周期。在报警出现时刻，参照这些规定编制事件管理数据。另外，在查看事件图象时，可以参照事件管理数据来挑选播放有关的事件图象。
这样，可以查看监视目标在传感器附近和向传感器转移的路线上做出的可疑行为，并且预先缩小记录该监视目标的图象的时间周期。
其次，通过管理报警出现状态和正常状态，使报警触发器越过这两种状态，并根据报警出现状态的开始时刻与结束时刻定出本地事件图象的时间周期。在某个报警出现时间，可参照这些规定编制事件管理数据。
这样，记录的事件图象可以包括报警发生状态前后的摄象机图象，因而不仅能查看监视目标在转移到传感器目标或区域的路线上的可疑行为，还能查看该监视目标在离开其转移路线的可疑行为。
第三，可按报警出现时刻限定不同的事件，而且摄象机与图象可同最适合该情况的时间周期相关联。
这样，情况可随报警出现时间而变化，即在某一时间，犯罪发生率很低，报警相对不重要，而在另一时间，犯罪发生率很高，报警就是一个告知发生犯罪的重要事件，事件图象可以覆盖在时间上明确表达报警意义的最合适的周期。因此，可以精细地查看报警出现时的情况，还能不浪费地利用图象记录区。
第四，有了与某一事件相关联的若干时间周期的摄象机图象，可确定每段时间的重要性。在发生报警时，可参照这些确定的重要性编制事件管理数据。
这样，将向监视者优先提供高度重要的图象。再者，当在记录图象的图象记录区中没有自由空间时，将对不重要图象作覆盖记录，因而可无丢失地记录高度重要图象。
附图说明
通过以下结合附图所作的描述，可以更全面地了解本发明的上述和其它目的与特征，其中列举了一个实例，附图中：
图1示出本发明实施例1的事件图象录放系统的结构图；
图2示出表示本发明实施例1的事件图象录放系统一特定实例的示意图；
图3表示相对于本发明实施例1的事件图象中包含的每幅摄象机图象示出一例时间周期的示意图；
图4示出表示一例本发明实施例1的事件限定内容的示意图；
图5示出本发明实施例1的事件管理数据编制过程的流程图；
图6示出表示一例本发明实施例1的事件管理数据的示意图；
图7示出本发明实施例1的局部事件管理数据编制过程的流程图；
图8示出表示一例本发明实施例1的局部事件管理数据的示意图；
图9示出本发明实施例2的事件图象录放系统的结构图；
图10表示相对于本发明实施例2的事件图象中包含的每幅摄象机图象示出一例时间周期的示意图；
图11示出表示一例本发明实施例2的事件限定内容的示意图；
图12示出表示一例本发明实施例2的报警表的示意图；
图13示出本发明实施例2的事件管理数据编制过程的流程图；
图14示出本发明实施例3的事件图象录放系统的结构图；
图15示出表示一例本发明实施例3的事件表的示意图；
图16表示相对于本发明实施例3的事件图象中包含的每幅摄象机图象示出一例时间周期的示意图；
图17示出相对于包含在本发明实施例4的事件图象中每幅摄象机图象示出一例时间周期的示意图；
图18示出本发明实施例4的事件图象录放系统的结构图；
图19示出表示一例本发明实施例4的事件限定内容的示意图；
图20示出本发明实施例4的事件管理数据编制过程的流程图；
图21示出表示一例本发明实施例4的事件管理数据的示意图；
图22示出本发明实施例4的局部事件管理数据编制过程的流程图；和
图23示出表示一例本发明实施例4的局部事件管理数据的示意图。
具体实施方式
现在参照附图描述本发明诸实施例。
(实施例1)
图1是本实施例的事件图象录放系统的结构图。图1中，101是检测报警的传感器；110是局部记录设备，可连续记录摄象机记录的图象；120是事件管理设备，用于管理局部记录设备在报警出现时刻的前后选择记录的图象及其作为事件管理数据的属性信息；102是传输网，它使若干传感器101、若干局部记录设备110、事件管理设备120和放像设备130关联起来；103是输入设备；104是显示设备。
局部记录设备110包括：监视区111；录象设备112，对来自监视摄象机的图象作数字编码与记录；临时存贮数字编码图象数据的临时记录区113；图象获取部114，可读出临时记录区113里的图象数据；局部事件编制部115，可编制包括与事件相关的图象数据的局部事件管理数据；存贮局部事件管理数据的局部事件记录区116；从局部事件记录区116获取局部事件管理数据的局部事件获取部117；控制信号通信部118，可接收来自事件管理设备120和放像设备130的控制信号；数据提供部119，可向传输网102提供图象获取部114读出的图象数据；和图象分析处理部140，可分析图象并检测记录目标运动。
事件管理设备120包括：接收发自传感器101的报警信号的报警接收部121；控制信号通信部122，可向选择的局部记录设备110发送控制信号，并从放像设备130接收控制信号；事件限定部123，可限定摄象机和来自这些摄象机的图象时间周期；事件编制部124，可对涉及事件限定部123的报警作出响应并编制事件管理数据；存贮事件管理数据的事件记录区125；和从事件记录区116获取事件管理数据的事件获取部126。
放像设备130包括：控制信号通信部131，可把来自输入设备103的指令转换成控制信号并发送给局部记录设备110和事件管理设备120；从局部记录设备110接收图象数据的数据接收部132；和播放图象数据的播放部133。
图2是运用实施例1从装在银行的ATM里的监视摄象机查看图象的实例。图2中，201～204是监视摄象机；211与212是装在ATM终端设备里的传感器；221～224是分别由摄象机201～204作记录的的记录区；231是监视目标；232是假定的监视目标的转移路线；而233是监视者。
当监视目标231用带传感器211的ATM终端设备作非法操作时，传感器211即发出报警出现信号。此时，监视者233不仅查看监视目标231对ATM终端采取的行动，还查看监视目标231向该ATM终端设备转移的路线和一路上作出的可疑行为，如同伙伴接触等，从而能准确地掌握情况。
假定监视目标231走向ATM终端的路线是依次穿过区域224、223和221的转移路线232，还可假设在报警出现时刻记录区域221的监视摄象机201的图象、在较早时刻记录区域223的监视摄象机203的图象，以及在更早时刻记录区域224的监视摄象机204的图象中，都拍到了监视目标231。根据这些假设，图3示出的摄象机已记录了监视目标231的行为并包括有关图象的时间周期。
图3中，摄象机201、203、204记录的所有图象301～303，图象的时间周期都与传感器211发出的报警相关。311是传感器211发出报警的时间。记录包括传感器211的区域221的摄象机201的图象时间周期，从报警出现时刻311之前的1分钟到之后的5分钟。记录远离传感器211的区域223的摄象机203的图象时间周期，从报警出现时刻311之前的3分钟到之后的8分钟。记录更远离传感器211的区域224的摄象机204的图象时间周期，从报警出现时刻311之前的5分钟到之后的10分钟。通过同时或交替查看这些图象，监视者233就能查验监视目标231在区域221、223和224的可疑行为。
图4示出一例在事件限定部123预定的时间限定内容，以便编制上述的事件管理数据。图4中，相对于事件类型与传感器ID限定选择数量的局部事件。局部事件指每幅摄象机的图象，包括其与某一事件相关的属性信息。局部事件限定包括摄象机ID和开始/结束时间，都用与有关报警出现时间的时差表示。在时差参数中，-1表示报警出现时刻之前1分钟。例如，事件类型“1”对应于传感器ID“1”发出的报警，它包括摄象机ID“1”在从报警出现时刻之前1分钟到之后5分钟的周期内摄取的图象，摄象机ID“3”在从报警出现时刻之前3分钟到之后8分钟的时间周期内摄取的图象，以及摄象机ID“4”在从报警出现时刻之前5分钟到之后10分钟的周期内摄取的图象。
接着用图1描述该实施例的操作。摄象机111装在每台局部记录设备中，定期记录其监视目标区域并向录象部112发送图象信号。录象部112对图象信号数字编码，并把它们录入临时记录区113。临时记录区113做成圆形记录结构，因而在将所有记录区用于记录后，录象部112就在贮存着最老的图象数据的区域开始记录。
现在用图2描述报警出现时刻的操作。传感器211检出出现的报警，把报警信号发送给报警接收部121，后者从该信号里检出传感器ID“1”，并将传感器ID发送给事件编制部124，而事件编制部124按图5的操作流程编制事件管理数据。
下面用图5描述事件编制部124的操作。事件编制部124参照事件限定部123预定的事件限定内容，如图4所示，并检索对应于传感器ID“1”的事件限定(501)。作为从所有事件类型“1”下的事件限定中检索的结果，获得摄象机ID“1”、局部事件开始时刻“-1”和局部事件结束时刻“+5”(502)。根据报警出现时刻311“2001年6月25日，10：35：10”和局部事件开始时刻“-1”，算出局部事件开始时刻“2001年6月25日10：34：10”(503)。同样地，根据以上报警出现时刻和局部事件结束时间“+5”，算出局部事件结束时刻“2001年6月25日10：40：10”，并把摄象机ID和局部事件开始/结束时刻发送给控制信号通信部122(504)。之后，以同样方式处理局部事件限定2和3下的项目，并重复502～504，直到处理完所有的局部事件(505)。在事件记录区126中保留一存贮区(506)，把事件ID“1”、事件类型“1”、传感器ID“1”、报警出现时刻“2001年6月25日，10：35：10”、事件开始/结束时刻和摄象机ID“1”、“3”与“4”记录在里面(507)，再结束操作。顺便提一下，编制的事件ID是在顺序事件中发出的连续号。还有，事件开始时刻是所有局部事件的最早时刻，本例中为摄象机ID“4”的局部事件开始时刻“2001年6月25日，10：30：10”。同样地，事件结束时刻是最后时刻，本例中为摄象机ID“4”的局部事件结束时刻“2001年6月25日，10：45：10”。
图6示出一例以上述方法编制的事件管理数据。图6中，在对应于摄象机ID的局部记录设备110中，编制的局部事件ID是顺序局部事件里发出的连续号。控制信号通信部122把局部事件开始/结束时刻发给每台对应于各个摄象机ID“1”、“3”和“4”的局部记录设备110。每台局部记录设备110里的控制信号通信部118向各局部事件编制部115发送局部事件开始/结束时刻，局部事件编制部115按图7的操作流程编制局部事件管理数据。
下面用图7描述带摄象机ID“1”的摄象机201的局部记录设备110中局部事件编制部115的操作。从第一记录区113开始，局部事件编制部115检索录象部112在局部事件开始时刻“2001年6月25日，10：34：10”记录的图象(701)，并获取存贮相关图象的地址“100”(702)。接着，局部事件编制部115把存贮区保存在局部事件记录区116中(703)，在记录了局部事件ID“1”、局部事件开始时刻和起始地址后(704)，一直等到局部事件结束时刻(705)。然后，局部事件编制部115获取存贮了局部事件结束时刻记录的图象数据的地址(706)，在记录了局部事件结束时间与结束地址后结束处理。图8示出一例以上述方法编制的局部事件管理数据。
现在描述用放像设备130播放以上述方法编制的事件。控制信号通信部131向事件管理设备120发送监视者233用输入设备103选择的某事件的事件ID。在事件管理设备120中，控制信号通信部122接收该事件ID，并把它送给事件获取部125。事件获取部125从事件记录区126里检索对应于收到的事件ID的事件管理数据，在该事件管理数据下获取摄象机ID和局部事件ID，并通过控制信号通信部122向各摄象机ID的局部记录设备110发送局部事件ID。
在局部记录设备110中，控制信号通信部118接收局部事件ID，并把它送给局部事件获取部117，而后者从局部事件记录区116里检索对应于该局部事件ID的局部事件管理数据，并获取该局部事件管理数据的图象起始地址，再把它送给图象获取部114。图象获取部114读出临时记录区113里图象起始地址的图象数据，并通过数据发送部119把读出的图象数据送给放像设备130。在放像设备130中，图象数据接收部132接收该图象数据，而图象数据播放部133作译码处理以在显示部104上显示图象。
如上所述，利用本实施例，在事件限定部123中预先限定了诸摄象机和这些摄象机与某一事件相关的图象时间周期，局部记录设备110用其管理数据保持着与报警出现时间相关的局部事件图象，而事件管理设备120保持的事件管理数据组合了来自每台局部记录设备110的局部事件管理数据，这样，监视者233就不必根据报警出现时刻检索监视目标231在报警出现时刻所做出的行为和监视目标231在每台摄象机的转移路线232上所做出的行为，使监视者233能迅速掌握情况。
例如，当传感器211附近的监视目标231的同伙在摄象机204记录的监视区域224时，使报警出现时刻与同一时刻的若干摄象机图象联系起来，也能查看同伙的可疑行为。
运用该实施例，在事件限定内容里预先记录一段时间的局部事件图象。然而，通过对局部记录设备110配备图象分析处理部140，可以按监视目标周围的情况确定局部事件图象的周期。
例如，图象分析处理部140检测摄象机录制目标的运动，把包含运动的信息保持为该图象的属性信息。在报警出现时刻，用本实施例计算局部事件图象的周期。在上述周期内的图象里，局部事件编制部115选择一系列保持运动信息的图象，编制出将这些图象处理成局部事件图象的事件管理数据。这样，可将把监视目标的转移显示成运动图象的所有图象联系起来，略去不显示监视目标的图象。
(实施例2)
根据实施例1，假定传感器只通知报警出现，事件开始与结束时刻都由与报警出现时刻的时差来限定。然而，根据本实施例的事件图象录放系统，假定传感器通知报警出现和报警取消，则事件数据摄象机图象的开始时刻根据报警出现时刻确定，同样地，结束时刻根据报警取消时刻确定。
图9示出本实施例的事件图象录放系统的结构图。图9中，事件管理设备120与实施例1的相同，二者的差别在于，前者增设了报警态管理部901，它通过识别传感器送来的报警信号是报警发生还是报警取消来管理报警状态。其它元件包括局部记录设备110、传感器101、传输网102和放像设备130的操作，都与实施例1的一样。
图2中，给出的条件是，当监视目标231对ATM终端设备作非法操作时，传感器211通知报警出现，之后在监视目标231完成操作时发出报警取消信号。运用本系统，可掌握监视目标231离开该场所的准确时刻，因而能拍摄记录监视目标231在转移到该ATM终端设备的路线上和离开该线路时所做的可疑行为，以及监视目标231在该路线上所做的可疑行为。在图2中，假定监视目标231从ATM终端设备离开的路线与转移路线232相反，还可以假设该监视目标被拍摄在报警出现时刻摄象机201的图象里、稍后时刻摄象机203的图象里和更晚时刻摄象机204的图象里。根据这些假设，图10示出的摄象机记录了监视目标231的行为和包括有关图象的一段时间。图10中，摄象机201、203和204记录的所有图象1001～1003，分别指出了与传感器211产生的报警相关的图象周期，1000是传感器211产生报警的周期，1011是传感器322的报警出现时刻，1022指示传感器322的报警取消时刻。
图11示出一例事件限定部123限定的事件限定内容，用于编制上述那样的事件图象。图11中，局部事件图象的开始/结束时间项“出现-1”和“取消+1”，分别表示在报警出现时刻之前1分钟和之后1分钟。
从传感器101收到报警信号后，报警态管理部901即参照图12所示的报警表找出该传感器ID，并确定收到的信号是报警出现还是报警取消。图12中，收到报警信号“10”后，报警态管理部901将知道报警的“出现”来自传感器ID“1”。在进一步收到报警出现后，报警态管理部901将存贮该出现时刻，并把该发报警的传感器作为报警态管理。
事件编制部124按图13的操作流程编制事件管理数据。图13的流程与图5所示实施例1中事件编制部124的流程一样，只是流程1304是根据报警取消时刻与局部事件结束时刻之差来计算局部事件结束时刻的。局部记录设备110编制局部事件管理数据的操作与实施例1一样。
如上所述，利用本实施例，通知报警出现与报警取消的传感器，能让监视者233准确地查看监视目标231在转移到ARM终端设备的路线上做出的行为和他在离开ATM终端后在转移路线上做出的行为。
另外，运用本实施例，可根据报警出现时刻限定局部事件开始时间，同样可根据报警取消时刻限定局部事件结束时间。然而，若按报警取消时刻限定局部事件开始时间，而按报警出现时刻限定局部事件结束时间，则可将报警不出现的周期的图象与某一事件联系起来。
(实施例3)
运用实施例1，每个传感器限定一个事件，相应地编制出事件管理数据。本实施例的事件图象录放系统则根据报警出现时刻，为每个传感器限定若干事件，因而可根据监视区情况，使最合适的图象联系起来。例如在图2中，若传感器211是一种有人靠近时发出报警的人检测传感器，则在人流密集的时间内连续产生报警。再者，如在银行窗口营业时会采取保安措施，犯罪率低，可将记录事件图象的时间宽度设置得很短。反之，若银行窗口不在营业或深夜很少有人进出，则犯罪率高，要把记录事件图象的时间宽度设置成很长。
图14是本实施例的事件录放系统的结构图。在图14中，事件管理设备120与实施例1的一样，差别在于前者增设了时间确定部1401，它根据报警接收部121识别出的传感器ID和报警出现时刻确定事件类型，并向事件编制部124发送该事件类型。包括局部记录设备110、传感器101、传输网102和放像设备130在内的其它部件，在操作上都与实施例1的一样。
根据传感器ID与报警出现时刻并参照图15的事件表，事件确定部1401可确定事件类型。在图15中，事件表包括发出报警的传感器的传感器ID、按报警出现时刻规定事件类型所必需的事件有效时间和事件类型。例如，当收到传感器ID“1”和报警出现时刻“2001年6月25日，10：35：10”时，收到的时刻包括在事件有效时间“9：00～11：00”里，可将事件类型定为“12”。以后的操作与实施例1相同，即根据收到的事件类型，事件编制部124参照事件限定内容编制事件管理数据，并向每个局部记录设备110发出局部事件编制指令。局部记录设备110编制局部事件管理数据的操作与实施例1相同。
图16示出以上述方法编制的事件图象的周期。在图16中，对应于在周期“11：00～15：00”内出现的报警的事件，包括相对短期的图象。另一方面，对应于在周期“17：00～24：00”内出现的报警的事件，则占用长得多的图象。
如上所述，根据本实施例，可按传感器的报警出现时刻限定各传感器不同的事件，因而即使情况随时间而变化，仍能适应该情况并联系合适的图象数据。
顺便提一下，虽然本实施例按报警限定了两个事件，但是本例不限于此种情况，可以按报警限定三个或更多的事件。
还有，虽然本例用一个传感器及其报警出现时刻限定某一事件，但是也可用噪声传感器与温度传感器来限定和编制某个事件，而且效果一样。
(实施例4)
运用实施例1～3，可将来自摄象机、包含在事件里的局部事件图象限定和编制成一个连续的图象数据。本实施例把该图象数据分成若干时间周期，而且每个图象周期配备一个决定其对相应事件重要性的参数。再者，播放图象时，将优先播放高重要性图象，而且在记录新图象时，根据圆形记录结构，将对低重要性图象周期作覆盖记录。图17示出几例用图2所示实施例编制的事件图象的周期。图17中，相对传感器发出报警的周期1700，来自每台摄象机的周期1701、1702与1703的图象都是事件图象。摄象机ID“1”的摄象机201记录监视目标231在报警出现时的行为，因而周期1701置“1”，指示最高重要度。来自摄象机ID“3”的摄象机203和摄象机ID“4”的摄象机204的图象周期1702和1703中，周期1702a、1702c、1703a与1703c记录了监视目标转移到ATM终端设备和离开ATM终端设备的路线上的行为，重要度低一级，置为“2”。另在发出报警的周期1700期间，监视目标231不在区域223或224内，故将周期1702b和1703b置“3”，表示最低重要度。
图18示出本实施例的事件图象录放系统的结构图。图18中，事件管理设备120与实施例2相同，差别在于前者增设了局部事件选择部1801，可优先选择规定重要性的局部事件。而且，局部记录设备130与实施例2的一样，区别在于前者增设了位置确定部1802，用于确定记录位置，在临时记录区113没有自由空间时记录低重要度的图象数据。
事件限定部123编制如图19的事件限定内容，可对其增设重要度项。图19中，对每台摄象机限定一局部事件组。每个局部事件组包括一个或几个重要度已确定的局部事件。至于重要度，“1”最高，“2”和“3”依次递减。例如，事件类型“1”名下的局部事件组2是摄象机ID“3”的摄象机图象，包括：覆盖报警出现时刻之前1分钟到之后3分钟这一周期的图象中重要度“2”的局部事件；覆盖报警出现时刻到报警取消时刻这一周期的图象中重要度“3”的局部事件；和覆盖从报警取消时刻到取消后3分钟这一周期的图象中重要度“2”的局部事件。
事件编制部124按图20的操作流程编制事件管理数据。图20中，事件编制部124参照如图19的事件限定内容，从传感器ID检索事件限定(2001)，然后从局部事件组项中获取摄象机ID(2002)，再获得第一局部事件开始与结束时刻(2003)。事件编制部124根据报警出现或取消时刻以及局部事件开始时间计算该局部事件开始时刻(2004)，同时计算局部事件结束时刻(2005)。
重复2003～2005，直到对该局部事件组名下包含的所有局部组都算出了开始/结束时刻(2006)。
在2002获取的摄象机ID、通过2004与2005获取的局部事件开始时间、结束时刻和局部事件的重要度，都发送给控制信号通信部122(2007)。
所有的局部事件组都应用上述2002～2007(2008)。
然后，事件编制部124为事件管理数据保留一存贮区(2009)，编制如图21的事件管理数据(2010)，再结束操作。图21中，在事件ID“1”名下摄象机ID“3”的图象包含局部事件ID“1”～“3”的局部事件。
局部事件编制部115接收一个或几个局部事件编制指令，按图22的操作流程编制局部事件管理数据。
图21中，局部事件编制部115取得第一局部事件编制指令，若当前时刻未过局部事件开始时刻，就等到该时刻(2201)。
之后，局部事件编制部115从临时记录部113检索在局部事件开始时刻记录的图象数据(2202)，并获取存贮该数据的地址(2203)。同样地，若当前时刻未过局部事件结束时刻，局部事件编制部115就等到该时刻(2204)。之后，该编制部115从临时记录部113检索在局部事件结束时刻记录的图象数据(2205)，并获取存贮数据的地址(2206)。
接着，局部事件编制部115在局部事件记录区中保留一存贮区(2207)，编制如图23的局部事件图象数据(2209)。
对所有的局部事件组应用上述的2001～2008(2009)，再结束操作。
播放事件图象时，放像设备130规定要放的事件ID和被放图象的重要度。事件管理设备120接收来自放像设备130的事件播放请求，而事件获取部125从事件记录区126检索一相关事件，并把包含在该事件里的局部事件及其重要度发送给事件选择部1801，后者选择规定重要度的局部事件，并将其局部事件ID送给每台局部记录设备110。下面在局部记录设备中获取图象数据的操作，与实施例1的操作一样。
如上所述，本实施例通过对包含在某一事件里的每个局部事件按其图象含义指定重要度，能审视重要度优先的图象并迅速掌握情况。而且，在记录摄象机图象时若缺少记录区容量，可通过在低重要度图象上记录，就不会漏录较高重要度的新记录图象。
另外，虽然本实施例是根据图象周期确定重要度的，但是本实施例不限于此，还可按传感器类型、传感器安装位置、报警出现时刻和报警等级确定重要度，且获得同样效果。
如上所述，根据本发明，首先不仅能迅速地查看监视目标在报警出现时做的可疑行为，还能查看监视目标沿转移到监视区的路线上做的可疑行为，从每台记录设备检索有关图象的操作时间也不多，而且还能查看在报警出现时有无同伙在远离监视区的某一区域的可疑行为。
其次，根据本发明，能查看监视目标从报警取消时刻起离开监视区做的可疑行为。
第三，根据本发明，在同一个传感器产生的报警根据其出现时刻包含不同的含义时，可获取最合适周期的事件图象，从而掌握随时间而变化的情况。
第四，根据本发明，在某事件图象所包含的所有图象中，首先显示最高重要度的图象，在以后要求了解详情时，就按重要度次序显示诸图象，从而能迅速有效地掌握情况，而在记录区容量短缺时，可在低重要度图象上记录，不会漏录高重要度的图象。
本发明不限于上述诸实施例，可能的各种变化和更改不背离本发明的范围。
本申请以2001年8月29日提交的日本专利申请No.2001-259281为基础，其整个内容通过引用包括在这里。

Claims (6)

1.一种事件图象记录系统，其特征在于包括：
多台摄象机，每台覆盖一独特的记录区；
记录部，对于每台摄象机连续记录来自所述多台摄象机的图象数据；
编制部，对于每台摄象机提取独特时间周期的图象数据，并编制多个各自属于某一独特时间周期的局部事件；
管理部，用于管理某一事件，使所述多个各自属于某一独特时间周期的局部事件联系起来，并作为一个事件来管理；和
播放部，用于播放多个局部事件中与一规定事件相关的图象数据。
2.如权利要求1所述的事件图象记录系统，其特征在于，所述编制部按表格编制所述多个各自属于某一独特时间周期的局部事件，其中某一事件用多个与之关联的局部事件设置，而其中所述多个局部事件中的每一个由一独特摄象机的标识信息、独特的局部事件开始时刻与结束时刻来限定，所述两个时刻都以事件出现时刻为基础。
3.如权利要求1所述的事件图象记录系统，其特征在于，所述编制部按表格编制所述多个各自属于某一独特时间周期的局部事件，其中某一事件用多个与之关联的局部事件设置，而其中所述多个局部事件中的每一个由一独特摄象机的标识信息、基于事件出现时刻的独特局部事件开始时刻和基于事件结束时刻的独特局部事件结束时刻来限定。
4.如权利要求1所述的事件图象记录系统，其特征在于，所述管理部以某种方式管理事件，使多个独特事件按每个传感器根据事件出现时刻而联系起来。
5.如权利要求1所述的事件图象记录系统，其特征在于，对于所述多个各自属于某一独特时间周期的局部事件中的每一个，使所述管理部设置的重要度对应于所述多个各自属于一独特时间周期的局部事件中每个局部事件的重要度。
6.一种事件图象记录系统，其特征在于包括：
对于每台摄象机连续记录来自多台摄象机的图象数据，所述多台摄象机各自覆盖一独特的记录区；
对于每台摄象机从记录的图象数据中提取一独特时间周期里的图象数据，并编制多个各自属于一独特时间周期的局部事件；
以某种方式管理事件，使所述多个各自属于一独特时间周期的局部事件联系起来，并作为一个事件管理；和
播放多个局部事件中与一规定事件相关的图象数据。
CNB021319901A 2001-08-29 2002-08-29 事件图像记录系统与记录方法 Expired - Fee Related CN100419735C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001259281A JP4536299B2 (ja) 2001-08-29 2001-08-29 イベント映像記録・再生システム、イベント管理装置、およびローカル記録装置
JP2001-259281 2001-08-29

Publications (2)

Publication Number Publication Date
CN1403949A true CN1403949A (zh) 2003-03-19
CN100419735C CN100419735C (zh) 2008-09-17

Family

ID=19086674

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB021319901A Expired - Fee Related CN100419735C (zh) 2001-08-29 2002-08-29 事件图像记录系统与记录方法

Country Status (5)

Country Link
US (1) US7236690B2 (zh)
EP (1) EP1292147B1 (zh)
JP (1) JP4536299B2 (zh)
CN (1) CN100419735C (zh)
DE (1) DE60215431T2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108055473A (zh) * 2013-09-03 2018-05-18 卡西欧计算机株式会社 拍摄系统、拍摄方法以及记录介质
CN111418204A (zh) * 2018-04-11 2020-07-14 海信视像科技股份有限公司 数据监视及管理装置、事件数据监视方法

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000339923A (ja) * 1999-05-27 2000-12-08 Mitsubishi Electric Corp 映像収集装置および映像収集方法
JP2005094443A (ja) * 2003-09-18 2005-04-07 Ramrock Eizo Gijutsu Kenkyusho:Kk 監視システム
JP4212486B2 (ja) * 2004-01-22 2009-01-21 三洋電機株式会社 情報記録装置
US20100033572A1 (en) * 2004-03-24 2010-02-11 Richard Steven Trela Ticket-holder security checkpoint system for deterring terrorist attacks
JP4775931B2 (ja) * 2004-06-30 2011-09-21 キヤノンマーケティングジャパン株式会社 画像処理装置、画像処理システム、画像処理方法及びプログラム
JP4578249B2 (ja) * 2005-01-13 2010-11-10 三菱電機株式会社 映像監視システム
US8902320B2 (en) 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US7876357B2 (en) 2005-01-31 2011-01-25 The Invention Science Fund I, Llc Estimating shared image device operational capabilities or resources
US8253821B2 (en) * 2005-10-31 2012-08-28 The Invention Science Fund I, Llc Degradation/preservation management of captured data
US7872675B2 (en) 2005-06-02 2011-01-18 The Invention Science Fund I, Llc Saved-image management
US9942511B2 (en) 2005-10-31 2018-04-10 Invention Science Fund I, Llc Preservation/degradation of video/audio aspects of a data stream
US9451200B2 (en) 2005-06-02 2016-09-20 Invention Science Fund I, Llc Storage access technique for captured data
US20070222865A1 (en) 2006-03-15 2007-09-27 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Enhanced video/still image correlation
US9076208B2 (en) 2006-02-28 2015-07-07 The Invention Science Fund I, Llc Imagery processing
US9191611B2 (en) 2005-06-02 2015-11-17 Invention Science Fund I, Llc Conditional alteration of a saved image
US8964054B2 (en) 2006-08-18 2015-02-24 The Invention Science Fund I, Llc Capturing selected image objects
US8681225B2 (en) 2005-06-02 2014-03-25 Royce A. Levien Storage access technique for captured data
US8072501B2 (en) * 2005-10-31 2011-12-06 The Invention Science Fund I, Llc Preservation and/or degradation of a video/audio data stream
US9621749B2 (en) 2005-06-02 2017-04-11 Invention Science Fund I, Llc Capturing selected image objects
US8233042B2 (en) * 2005-10-31 2012-07-31 The Invention Science Fund I, Llc Preservation and/or degradation of a video/audio data stream
US9967424B2 (en) 2005-06-02 2018-05-08 Invention Science Fund I, Llc Data storage usage protocol
JP4607668B2 (ja) * 2005-06-01 2011-01-05 株式会社日立製作所 監視映像記録装置及び監視映像記録システム
BRPI0613569A2 (pt) * 2005-06-10 2011-01-18 Accenture Global Services Gmbh identificação eletrÈnica de veìculo
US20070013493A1 (en) * 2005-07-18 2007-01-18 Liaw Ching D Multi-functional monitor
US20070120980A1 (en) * 2005-10-31 2007-05-31 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Preservation/degradation of video/audio aspects of a data stream
US7956735B2 (en) * 2006-05-15 2011-06-07 Cernium Corporation Automated, remotely-verified alarm system with intrusion and video surveillance and digital video recording
JP4795212B2 (ja) * 2006-12-05 2011-10-19 キヤノン株式会社 録画装置、端末装置及び処理方法
JP4945297B2 (ja) * 2007-04-19 2012-06-06 株式会社日立製作所 端末監視装置
JP4704393B2 (ja) * 2007-06-18 2011-06-15 Ｓｋｙ株式会社 画面再生システム
EP2174310A4 (en) 2007-07-16 2013-08-21 Cernium Corp DEVICE AND METHOD FOR VERIFYING VIDEO ALARMS
JP5170747B2 (ja) * 2008-02-29 2013-03-27 パナソニック株式会社 画像記録装置及び画像記録方法
US9325951B2 (en) 2008-03-03 2016-04-26 Avigilon Patent Holding 2 Corporation Content-aware computer networking devices with video analytics for reducing video storage and video communication bandwidth requirements of a video surveillance network camera system
US8427552B2 (en) * 2008-03-03 2013-04-23 Videoiq, Inc. Extending the operational lifetime of a hard-disk drive used in video data storage applications
JP5303975B2 (ja) * 2008-03-18 2013-10-02 株式会社リコー データ配信装置及びデータ配信システムと、そのエラー通知方法並びにそのプログラム及びそれを記録した記録媒体
US8558888B2 (en) * 2009-02-27 2013-10-15 Third Iris Corp. Bandwidth shaping client to capture, transform, cache, and upload images from a remote point of recordation to a network service
JP5175236B2 (ja) * 2009-03-31 2013-04-03 綜合警備保障株式会社 警備装置
JP5765920B2 (ja) * 2010-11-16 2015-08-19 キヤノン株式会社 送信装置および送信方法
US8743205B2 (en) * 2011-08-10 2014-06-03 Nice Systems Ltd. System and method for semantic video content analysis
EP2745632A1 (en) * 2011-09-22 2014-06-25 Koninklijke Philips N.V. Imaging service using outdoor lighting networks
JP5872306B2 (ja) 2012-01-30 2016-03-01 株式会社東芝 情報処理装置、情報処理方法及びプログラム
CN103248853B (zh) * 2012-02-10 2017-06-13 华为技术有限公司 实现录像检索的方法、设备和系统
US20150010289A1 (en) * 2013-07-03 2015-01-08 Timothy P. Lindblom Multiple retail device universal data gateway
AU2014202293B2 (en) * 2014-04-28 2021-02-25 Sure Technologies Pty Ltd Monitored security system including cameras
KR102586962B1 (ko) * 2016-04-07 2023-10-10 한화비전 주식회사 감시 시스템 및 그 제어 방법
KR20180020033A (ko) * 2016-08-17 2018-02-27 한화테크윈 주식회사 자원 할당 방법 및 이를 위한 장치
US10643192B2 (en) * 2016-09-06 2020-05-05 Bank Of American Corporation Data transfer between self-service device and server over session or connection in response to capturing sensor data at self-service device
KR102659618B1 (ko) 2018-01-09 2024-04-19 아카이브 오토, 인크. 차량 데이터 획득 및 액세스 시스템 및 방법
CN109977260B (zh) * 2019-02-12 2021-04-30 深圳绿米联创科技有限公司 录像获取方法、装置、系统、电子设备及存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2528789B2 (ja) 1985-06-26 1996-08-28 中央電子 株式会社 映像情報管理装置
US4814869A (en) 1987-04-27 1989-03-21 Oliver Jr Robert C Video surveillance system
JPH08171691A (ja) * 1994-12-19 1996-07-02 Mitsubishi Denki Eng Kk 画像選択画像監視装置
KR0176157B1 (ko) 1995-08-14 1999-05-01 김광호 개선된 검색기능을 갖는 cctv시스템 및 이에 적합한 검색방법
EP1450275A3 (en) 1996-10-31 2007-08-08 Sensormatic Electronics Corporation Intelligent video information management system
US5875304A (en) * 1996-10-31 1999-02-23 Sensormatic Electronics Corporation User-settable features of an intelligent video information management system
US6654060B1 (en) * 1997-01-07 2003-11-25 Canon Kabushiki Kaisha Video-image control apparatus and method and storage medium
JP3592478B2 (ja) * 1997-03-13 2004-11-24 昭和電工株式会社 吸液性包袋
US6064303A (en) * 1997-11-25 2000-05-16 Micron Electronics, Inc. Personal computer-based home security system
JP3809629B2 (ja) * 1998-01-20 2006-08-16 株式会社熊平製作所 画像撮像録画装置
JP3892143B2 (ja) * 1998-04-24 2007-03-14 松下電器産業株式会社 画像記録装置
EP0967584B1 (en) 1998-04-30 2004-10-20 Texas Instruments Incorporated Automatic video monitoring system
JP2000339923A (ja) * 1999-05-27 2000-12-08 Mitsubishi Electric Corp 映像収集装置および映像収集方法
JP2001045474A (ja) * 1999-07-28 2001-02-16 Optex Co Ltd ディジタル画像記録システム
JP2004112153A (ja) * 2002-09-17 2004-04-08 Fujitsu Ltd 映像処理システム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108055473A (zh) * 2013-09-03 2018-05-18 卡西欧计算机株式会社 拍摄系统、拍摄方法以及记录介质
CN111418204A (zh) * 2018-04-11 2020-07-14 海信视像科技股份有限公司 数据监视及管理装置、事件数据监视方法

Also Published As

Publication number Publication date
DE60215431T2 (de) 2007-02-08
US20030044168A1 (en) 2003-03-06
EP1292147B1 (en) 2006-10-18
EP1292147A2 (en) 2003-03-12
CN100419735C (zh) 2008-09-17
JP4536299B2 (ja) 2010-09-01
EP1292147A3 (en) 2004-04-21
US7236690B2 (en) 2007-06-26
DE60215431D1 (de) 2006-11-30
JP2003069987A (ja) 2003-03-07

Similar Documents

Publication Publication Date Title
CN1403949A (zh) 事件图象记录系统与记录方法
US10198923B2 (en) Wireless video surveillance system and method with input capture and data transmission prioritization and adjustment
CN1207692C (zh) 远距离监视方法和监视控制服务器
CN100348041C (zh) 在大量并行图像序列中有效进行事件检测的方法和系统
US20110187895A1 (en) Intelligent video compacting agent
CN104184986B (zh) 一种视频监控方法、装置及系统
CN104573037B (zh) 一种通过多颜色时间轴快速查询监控录像的方法及系统
US9143739B2 (en) Video analytics with burst-like transmission of video data
JP5217106B2 (ja) 映像監視システム、監視映像の異常検出方法及び監視映像の異常検出プログラム
CN103959910A (zh) 利用户外照明网络的成像服务
CN102572215A (zh) 城市级可视化视频分析方法及服务器
US10417884B2 (en) Method and system for incident sharing in a monitoring system
KR101002746B1 (ko) 쓰레기 불법투기 모니터링 시스템
JP2009171472A (ja) ネットワーク映像モニタリングシステム及びモニタ装置
JP2001045474A (ja) ディジタル画像記録システム
JP2009540460A (ja) 中央ステーションにおける警報モニターのためのビデオによる確認システム及びその方法
KR101934534B1 (ko) 카메라의 동작 상태 판단이 가능한 ip 감시 카메라
EP0764927B1 (fr) Système de vidéo surveillance
KR20120014463A (ko) 동영상 모니터링 시스템
JP2006260585A (ja) 侵害防除方法及びシステム並びに装置
CN2613956Y (zh) 自动数码图像记录装置
JP2005025533A (ja) 監視システムおよび監視方法
CN112866639B (zh) 一种巡逻警戒方法及设备
CN202600924U (zh) 一种社会治安视频监控图像智能化处理装置
JP2004200809A (ja) 室内遠隔監視システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080917

Termination date: 20120829