CN100419735C - 事件图像记录系统与记录方法 - Google Patents

事件图像记录系统与记录方法 Download PDF

Info

Publication number
CN100419735C
CN100419735C CNB021319901A CN02131990A CN100419735C CN 100419735 C CN100419735 C CN 100419735C CN B021319901 A CNB021319901 A CN B021319901A CN 02131990 A CN02131990 A CN 02131990A CN 100419735 C CN100419735 C CN 100419735C
Authority
CN
China
Prior art keywords
local event
incident
video camera
event
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB021319901A
Other languages
English (en)
Other versions
CN1403949A (zh
Inventor
松川隆行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1403949A publication Critical patent/CN1403949A/zh
Application granted granted Critical
Publication of CN100419735C publication Critical patent/CN100419735C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19652—Systems using zones in a single scene defined for different treatment, e.g. outer zone gives pre-alarm, inner zone gives alarm
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19641—Multiple cameras having overlapping views on a single scene
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19669—Event triggers storage or change of storage policy
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19676—Temporary storage, e.g. cyclic memory, buffer storage on pre-alarm
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695—Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Alarm Systems (AREA)

Abstract

预先限定与报警相关的摄像机和各台摄像机记录的图像时间周期，在报警出现时，参照限定内容编制管理数据。假定监视目标(231)的转移路线(232)，根据这一假定，利用沿该路线安装的每台摄像机(203～205)，每次延迟和限定与事件有关的图像的时间周期。这样，能记录监视目标在报警出现时做的可疑行为和其转移到监视区(221)的路线上做的可疑行为，作为一种事件图像。而且，还能缩短图像中可以拍到监视目标(231)的时间周期。

Description

事件图像记录系统与记录方法
技术领域
本发明涉及事件图像记录系统与记录方法，它能连续记录摄像机输入的图像，把在出现报警时记录的图像和出现报警前后记录的图像处理为一种事件图像，并利用联网的监视终端显示该事件图像。
背景技术
近年来，可以记录摄像机图像的监视系统已投入使用，这些摄像机安装在银行、停车场、便利店、大型商店或街道上。在这类系统中，在已公开的日本专利公报No.2000-339923中提到的设备，在被传感器报警触发时，可记录报警出现时间前后的图像并把它处理为一个事件，还可检索和播放该事件。该设备把出现报警时的摄像机图像记录为事件图像，当若干事件以一定顺序出现时，把这些事件定义为宏事件。再者，有了上述设备，就能编制与若干事件图像相关的管理数据，而且容易参照这类管理数据迅速地监视和分析记录区域的状况。
然而，运用上述的常规设备，当监视者想查看监视目标在监视区内做出的可疑行为和监视目标在转换到监视区的路线上做出的可疑行为时，就会出现检索每幅图像的操作复杂而且费时的问题。
发明内容
本发明旨在监视监视目标在监视区内的行为，此外，本发明还旨在监视监视目标在转移到监视区的路线上的行为。
为实现上述目的，首先，本发明与一事件图像相关，该图像记录了监视目标在监视区的行为，而且记录了监视目标在转移到监视区的路线上的行为。就是说，推测监视目标的转移路线，并按距离推算从传感器移到摄像机安装地点所需的时间，然后利用与报警出现时刻的时差限定来自每台摄像机的本地事件图像的时间周期。在报警出现时刻，参照这些规定编制事件管理数据。另外，在查看事件图像时，可以参照事件管理数据来挑选播放有关的事件图像。
这样，可以查看监视目标在传感器附近和向传感器转移的路线上做出的可疑行为，并且预先缩小记录该监视目标的图像的时间周期。
其次，通过管理报警出现状态和正常状态，使报警触发器越过这两种状态，并根据报警出现状态的开始时刻与结束时刻定出本地事件图像的时间周期。在某个报警出现时间，可参照这些规定编制事件管理数据。
这样，记录的事件图像可以包括报警发生状态前后的摄像机图像，因而不仅能查看监视目标在转移到传感器目标或区域的路线上的可疑行为，还能查看该监视目标在离开其转移路线的可疑行为。
第三，可按报警出现时刻限定不同的事件，而且摄像机与图像可同最适合该情况的时间周期相关联。
这样，情况可随报警出现时间而变化，即在某一时间，犯罪发生率很低，报警相对不重要，而在另一时间，犯罪发生率很高，报警就是一个告知发生犯罪的重要事件，事件图像可以覆盖在时间上明确表达报警意义的最合适的周期。因此，可以精细地查看报警出现时的情况，还能不浪费地利用图像记录区。
第四，有了与某一事件相关联的若干时间周期的摄像机图像，可确定每段时间的重要性。在发生报警时，可参照这些确定的重要性编制事件管理数据。
这样，将向监视者优先提供高度重要的图像。再者，当在记录图像的图像记录区中没有自由空间时，将对不重要图像作覆盖记录，因而可无丢失地记录高度重要图像。
附图说明
通过以下结合附图所作的描述，可以更全面地了解本发明的上述和其它目的与特征，其中列举了一个实例，附图中：
图1示出本发明实施例1的事件图像录放系统的结构图；
图2示出表示本发明实施例1的事件图像录放系统一特定实例的示意图；
图3表示相对于本发明实施例1的事件图像中包含的每幅摄像机图像示出一例时间周期的示意图；
图4示出表示一例本发明实施例1的事件限定内容的示意图；
图5示出本发明实施例1的事件管理数据编制过程的流程图；
图6示出表示一例本发明实施例1的事件管理数据的示意图；
图7示出本发明实施例1的局部事件管理数据编制过程的流程图；
图8示出表示一例本发明实施例1的局部事件管理数据的示意图；
图9示出本发明实施例2的事件图像录放系统的结构图；
图10表示相对于本发明实施例2的事件图像中包含的每幅摄像机图像示出一例时间周期的示意图；
图11示出表示一例本发明实施例2的事件限定内容的示意图；
图12示出表示一例本发明实施例2的报警表的示意图；
图13示出本发明实施例2的事件管理数据编制过程的流程图；
图14示出本发明实施例3的事件图像录放系统的结构图；
图15示出表示一例本发明实施例3的事件表的示意图；
图16表示相对于本发明实施例3的事件图像中包含的每幅摄像机图像示出一例时间周期的示意图；
图17示出相对于包含在本发明实施例4的事件图像中每幅摄像机图像示出一例时间周期的示意图；
图18示出本发明实施例4的事件图像录放系统的结构图；
图19示出表示一例本发明实施例4的事件限定内容的示意图；
图20示出本发明实施例4的事件管理数据编制过程的流程图；
图21示出表示一例本发明实施例4的事件管理数据的示意图；
图22示出本发明实施例4的局部事件管理数据编制过程的流程图；和
图23示出表示一例本发明实施例4的局部事件管理数据的示意图。
具体实施方式
现在参照附图描述本发明诸实施例。
(实施例1)
图1是本实施例的事件图像录放系统的结构图。图1中，101是检测报警的传感器；110是局部记录设备，可连续记录摄像机记录的图像；120是事件管理设备，用于管理局部记录设备在报警出现时刻的前后选择记录的图像及其作为事件管理数据的属性信息；102是传输网，它使若干传感器101、若干局部记录设备110、事件管理设备120和放像设备130关联起来；103是输入设备；104是显示设备。
局部记录设备110包括：监视区111；录像设备112，对来自监视摄像机的图像作数字编码与记录；临时存贮数字编码图像数据的临时记录区113；图像获取部114，可读出临时记录区113里的图像数据；局部事件编制部115，可编制包括与事件相关的图像数据的局部事件管理数据；存贮局部事件管理数据的局部事件记录区116；从局部事件记录区116获取局部事件管理数据的局部事件获取部117；控制信号通信部118，可接收来自事件管理设备120和放像设备130的控制信号；数据提供部119，可向传输网102提供图像获取部114读出的图像数据；和图像分析处理部140，可分析图像并检测记录目标运动。
事件管理设备120包括：接收发自传感器101的报警信号的报警接收部121；控制信号通信部122，可向选择的局部记录设备110发送控制信号，并从放像设备130接收控制信号；事件限定部123，可限定摄像机和来自这些摄像机的图像时间周期；事件编制部124，可对涉及事件限定部123的报警作出响应并编制事件管理数据；存贮事件管理数据的事件记录区125；和从事件记录区116获取事件管理数据的事件获取部126。
放像设备130包括：控制信号通信部131，可把来自输入设备103的指令转换成控制信号并发送给局部记录设备110和事件管理设备120；从局部记录设备110接收图像数据的数据接收部132；和播放图像数据的播放部133。
图2是运用实施例1从装在银行的ATM里的监视摄像机查看图像的实例。图2中，201~204是监视摄像机；211与212是装在ATM终端设备里的传感器；221~224是分别由摄像机201~204作记录的的记录区；231是监视目标；232是假定的监视目标的转移路线；而233是监视者。
当监视目标231用带传感器211的ATM终端设备作非法操作时，传感器211即发出报警出现信号。此时，监视者233不仅查看监视目标231对ATM终端采取的行动，还查看监视目标231向该ATM终端设备转移的路线和一路上作出的可疑行为，如同伙伴接触等，从而能准确地掌握情况。
假定监视目标231走向ATM终端的路线是依次穿过区域224、223和221的转移路线232，还可假设在报警出现时刻记录区域221的监视摄像机201的图像、在较早时刻记录区域223的监视摄像机203的图像，以及在更早时刻记录区域224的监视摄像机204的图像中，都拍到了监视目标231。根据这些假设，图3示出的摄像机已记录了监视目标231的行为并包括有关图像的时间周期。
图3中，摄像机201、203、204记录的所有图像301~303，图像的时间周期都与传感器211发出的报警相关。311是传感器211发出报警的时间。记录包括传感器211的区域221的摄像机201的图像时间周期，从报警出现时刻311之前的1分钟到之后的5分钟。记录远离传感器211的区域223的摄像机203的图像时间周期，从报警出现时刻311之前的3分钟到之后的8分钟。记录更远离传感器211的区域224的摄像机204的图像时间周期，从报警出现时刻311之前的5分钟到之后的10分钟。通过同时或交替查看这些图像，监视者233就能查验监视目标231在区域221、223和224的可疑行为。
图4示出一例在事件限定部123预定的时间限定内容，以便编制上述的事件管理数据。图4中，相对于事件类型与传感器ID限定选择数量的局部事件。局部事件指每幅摄像机的图像，包括其与某一事件相关的属性信息。局部事件限定包括摄像机ID和开始/结束时间，都用与有关报警出现时间的时差表示。在时差参数中，-1表示报警出现时刻之前1分钟。例如，事件类型“1”对应于传感器ID“1”发出的报警，它包括摄像机ID“1”在从报警出现时刻之前1分钟到之后5分钟的周期内摄取的图像，摄像机ID“3”在从报警出现时刻之前3分钟到之后8分钟的时间周期内摄取的图像，以及摄像机ID“4”在从报警出现时刻之前5分钟到之后10分钟的周期内摄取的图像。
接着用图1描述该实施例的操作。摄像机111装在每台局部记录设备中，定期记录其监视目标区域并向录像部112发送图像信号。录像部112对图像信号数字编码，并把它们录入临时记录区113。临时记录区113做成圆形记录结构，因而在将所有记录区用于记录后，录像部112就在贮存着最老的图像数据的区域开始记录。
现在用图2描述报警出现时刻的操作。传感器211检出出现的报警，把报警信号发送给报警接收部121，后者从该信号里检出传感器ID“1”，并将传感器ID发送给事件编制部124，而事件编制部124按图5的操作流程编制事件管理数据。
下面用图5描述事件编制部124的操作。事件编制部124参照事件限定部123预定的事件限定内容，如图4所示，并检索对应于传感器ID“1”的事件限定(501)。作为从所有事件类型“1”下的事件限定中检索的结果，获得摄像机ID“1”、局部事件开始时刻“-1”和局部事件结束时刻“+5”(502)。根据报警出现时刻311“2001年6月25日，10:35:10”和局部事件开始时刻“-1”，算出局部事件开始时刻“2001年6月25日10:34:10”(503)。同样地，根据以上报警出现时刻和局部事件结束时间“+5”，算出局部事件结束时刻“2001年6月25日10:40:10”，并把摄像机ID和局部事件开始/结束时刻发送给控制信号通信部122(504)。之后，以同样方式处理局部事件限定2和3下的项目，并重复502~504，直到处理完所有的局部事件(505)。在事件记录区126中保留一存贮区(506)，把事件ID“1”、事件类型“1”、传感器ID“1”、报警出现时刻“2001年6月25日，10:35:10”、事件开始/结束时刻和摄像机ID“1”、“3”与“4”记录在里面(507)，再结束操作。顺便提一下，编制的事件ID是在顺序事件中发出的连续号。还有，事件开始时刻是所有局部事件的最早时刻，本例中为摄像机ID“4”的局部事件开始时刻“2001年6月25日，10:30:10”。同样地，事件结束时刻是最后时刻，本例中为摄像机ID“4”的局部事件结束时刻“2001年6月25日，10:45:10”。
图6示出一例以上述方法编制的事件管理数据。图6中，在对应于摄像机ID的局部记录设备110中，编制的局部事件ID是顺序局部事件里发出的连续号。控制信号通信部122把局部事件开始/结束时刻发给每台对应于各个摄像机ID“1”、“3”和“4”的局部记录设备110。每台局部记录设备110里的控制信号通信部118向各局部事件编制部115发送局部事件开始/结束时刻，局部事件编制部115按图7的操作流程编制局部事件管理数据。
下面用图7描述带摄像机ID“1”的摄像机201的局部记录设备110中局部事件编制部115的操作。从第一记录区113开始，局部事件编制部115检索录像部112在局部事件开始时刻“2001年6月25日，10:34:10”记录的图像(701)，并获取存贮相关图像的地址“100”(702)。接着，局部事件编制部115把存贮区保存在局部事件记录区116中(703)，在记录了局部事件ID“1”、局部事件开始时刻和起始地址后(704)，一直等到局部事件结束时刻(705)。然后，局部事件编制部115获取存贮了局部事件结束时刻记录的图像数据的地址(706)，在记录了局部事件结束时间与结束地址后结束处理。图8示出一例以上述方法编制的局部事件管理数据。
现在描述用放像设备130播放以上述方法编制的事件。控制信号通信部131向事件管理设备120发送监视者233用输入设备103选择的某事件的事件ID。在事件管理设备120中，控制信号通信部122接收该事件ID，并把它送给事件获取部125。事件获取部125从事件记录区126里检索对应于收到的事件ID的事件管理数据，在该事件管理数据下获取摄像机ID和局部事件ID，并通过控制信号通信部122向各摄像机ID的局部记录设备110发送局部事件ID。
在局部记录设备110中，控制信号通信部118接收局部事件ID，并把它送给局部事件获取部117，而后者从局部事件记录区116里检索对应于该局部事件ID的局部事件管理数据，并获取该局部事件管理数据的图像起始地址，再把它送给图像获取部114。图像获取部114读出临时记录区113里图像起始地址的图像数据，并通过数据发送部119把读出的图像数据送给放像设备130。在放像设备130中，图像数据接收部132接收该图像数据，而图像数据播放部133作译码处理以在显示部104上显示图像。
如上所述，利用本实施例，在事件限定部123中预先限定了诸摄像机和这些摄像机与某一事件相关的图像时间周期，局部记录设备110用其管理数据保持着与报警出现时间相关的局部事件图像，而事件管理设备120保持的事件管理数据组合了来自每台局部记录设备110的局部事件管理数据，这样，监视者233就不必根据报警出现时刻检索监视目标231在报警出现时刻所做出的行为和监视目标231在每台摄像机的转移路线232上所做出的行为，使监视者233能迅速掌握情况。
例如，当传感器211附近的监视目标231的同伙在摄像机204记录的监视区域224时，使报警出现时刻与同一时刻的若干摄像机图像联系起来，也能查看同伙的可疑行为。
运用该实施例，在事件限定内容里预先记录一段时间的局部事件图像。然而，通过对局部记录设备110配备图像分析处理部140，可以按监视目标周围的情况确定局部事件图像的周期。
例如，图像分析处理部140检测摄像机录制目标的运动，把包含运动的信息保持为该图像的属性信息。在报警出现时刻，用本实施例计算局部事件图像的周期。在上述周期内的图像里，局部事件编制部115选择一系列保持运动信息的图像，编制出将这些图像处理成局部事件图像的事件管理数据。这样，可将把监视目标的转移显示成运动图像的所有图像联系起来，略去不显示监视目标的图像。
(实施例2)
根据实施例1，假定传感器只通知报警出现，事件开始与结束时刻都由与报警出现时刻的时差来限定。然而，根据本实施例的事件图像录放系统，假定传感器通知报警出现和报警取消，则事件数据摄像机图像的开始时刻根据报警出现时刻确定，同样地，结束时刻根据报警取消时刻确定。
图9示出本实施例的事件图像录放系统的结构图。图9中，事件管理设备120与实施例1的相同，二者的差别在于，前者增设了报警态管理部901，它通过识别传感器送来的报警信号是报警发生还是报警取消来管理报警状态。其它元件包括局部记录设备110、传感器101、传输网102和放像设备130的操作，都与实施例1的一样。
图2中，给出的条件是，当监视目标231对ATM终端设备作非法操作时，传感器211通知报警出现，之后在监视目标231完成操作时发出报警取消信号。运用本系统，可掌握监视目标231离开该场所的准确时刻，因而能拍摄记录监视目标231在转移到该ATM终端设备的路线上和离开该线路时所做的可疑行为，以及监视目标231在该路线上所做的可疑行为。在图2中，假定监视目标231从ATM终端设备离开的路线与转移路线232相反，还可以假设该监视目标被拍摄在报警出现时刻摄像机201的图像里、稍后时刻摄像机203的图像里和更晚时刻摄像机204的图像里。根据这些假设，图10示出的摄像机记录了监视目标231的行为和包括有关图像的一段时间。图10中，摄像机201、203和204记录的所有图像1001~1003，分别指出了与传感器211产生的报警相关的图像周期，1000是传感器211产生报警的周期，1011是传感器322的报警出现时刻，1022指示传感器322的报警取消时刻。
图11示出一例事件限定部123限定的事件限定内容，用于编制上述那样的事件图像。图11中，局部事件图像的开始/结束时间项“出现-1”和“取消+1”，分别表示在报警出现时刻之前1分钟和之后1分钟。
从传感器101收到报警信号后，报警态管理部901即参照图12所示的报警表找出该传感器ID，并确定收到的信号是报警出现还是报警取消。图12中，收到报警信号“10”后，报警态管理部901将知道报警的“出现”来自传感器ID“1”。在进一步收到报警出现后，报警态管理部901将存贮该出现时刻，并把该发报警的传感器作为报警态管理。
事件编制部124按图13的操作流程编制事件管理数据。图13的流程与图5所示实施例1中事件编制部124的流程一样，只是流程1304是根据报警取消时刻与局部事件结束时刻之差来计算局部事件结束时刻的。局部记录设备110编制局部事件管理数据的操作与实施例1一样。
如上所述，利用本实施例，通知报警出现与报警取消的传感器，能让监视者233准确地查看监视目标231在转移到ARM终端设备的路线上做出的行为和他在离开ATM终端后在转移路线上做出的行为。
另外，运用本实施例，可根据报警出现时刻限定局部事件开始时间，同样可根据报警取消时刻限定局部事件结束时间。然而，若按报警取消时刻限定局部事件开始时间，而按报警出现时刻限定局部事件结束时间，则可将报警不出现的周期的图像与某一事件联系起来。
(实施例3)
运用实施例1，每个传感器限定一个事件，相应地编制出事件管理数据。本实施例的事件图像录放系统则根据报警出现时刻，为每个传感器限定若干事件，因而可根据监视区情况，使最合适的图像联系起来。例如在图2中，若传感器211是一种有人靠近时发出报警的人检测传感器，则在人流密集的时间内连续产生报警。再者，如在银行窗口营业时会采取保安措施，犯罪率低，可将记录事件图像的时间宽度设置得很短。反之，若银行窗口不在营业或深夜很少有人进出，则犯罪率高，要把记录事件图像的时间宽度设置成很长。
图14是本实施例的事件录放系统的结构图。在图14中，事件管理设备120与实施例1的一样，差别在于前者增设了时间确定部1401，它根据报警接收部121识别出的传感器ID和报警出现时刻确定事件类型，并向事件编制部124发送该事件类型。包括局部记录设备110、传感器101、传输网102和放像设备130在内的其它部件，在操作上都与实施例1的一样。
根据传感器ID与报警出现时刻并参照图15的事件表，事件确定部1401可确定事件类型。在图15中，事件表包括发出报警的传感器的传感器ID、按报警出现时刻规定事件类型所必需的事件有效时间和事件类型。例如，当收到传感器ID“1”和报警出现时刻“2001年6月25日，10:35:10”时，收到的时刻包括在事件有效时间“9:00~11:00”里，可将事件类型定为“12”。以后的操作与实施例1相同，即根据收到的事件类型，事件编制部124参照事件限定内容编制事件管理数据，并向每个局部记录设备110发出局部事件编制指令。局部记录设备110编制局部事件管理数据的操作与实施例1相同。
图16示出以上述方法编制的事件图像的周期。在图16中，对应于在周期“11:00~15:00”内出现的报警的事件，包括相对短期的图像。另一方面，对应于在周期“17:00~24:00”内出现的报警的事件，则占用长得多的图像。
如上所述，根据本实施例，可按传感器的报警出现时刻限定各传感器不同的事件，因而即使情况随时间而变化，仍能适应该情况并联系合适的图像数据。
顺便提一下，虽然本实施例按报警限定了两个事件，但是本例不限于此种情况，可以按报警限定三个或更多的事件。
还有，虽然本例用一个传感器及其报警出现时刻限定某一事件，但是也可用噪声传感器与温度传感器来限定和编制某个事件，而且效果一样。
(实施例4)
运用实施例1~3，可将来自摄像机、包含在事件里的局部事件图像限定和编制成一个连续的图像数据。本实施例把该图像数据分成若干时间周期，而且每个图像周期配备一个决定其对相应事件重要性的参数。再者，播放图像时，将优先播放高重要性图像，而且在记录新图像时，根据圆形记录结构，将对低重要性图像周期作覆盖记录。图17示出几例用图2所示实施例编制的事件图像的周期。图17中，相对传感器发出报警的周期1700，来自每台摄像机的周期1701、1702与1703的图像都是事件图像。摄像机ID“1”的摄像机201记录监视目标231在报警出现时的行为，因而周期1701置“1”，指示最高重要度。来自摄像机ID“3”的摄像机203和摄像机ID“4”的摄像机204的图像周期1702和1703中，周期1702a、1702c、1703a与1703c记录了监视目标转移到ATM终端设备和离开ATM终端设备的路线上的行为，重要度低一级，置为“2”。另在发出报警的周期1700期间，监视目标231不在区域223或224内，故将周期1702b和1703b置“3”，表示最低重要度。
图18示出本实施例的事件图像录放系统的结构图。图18中，事件管理设备120与实施例2相同，差别在于前者增设了局部事件选择部1801，可优先选择规定重要性的局部事件。而且，局部记录设备130与实施例2的一样，区别在于前者增设了位置确定部1802，用于确定记录位置，在临时记录区113没有自由空间时记录低重要度的图像数据。
事件限定部123编制如图19的事件限定内容，可对其增设重要度项。图19中，对每台摄像机限定一局部事件组。每个局部事件组包括一个或几个重要度已确定的局部事件。至于重要度，“1”最高，“2”和“3”依次递减。例如，事件类型“1”名下的局部事件组2是摄像机ID“3”的摄像机图像，包括：覆盖报警出现时刻之前1分钟到之后3分钟这一周期的图像中重要度“2”的局部事件；覆盖报警出现时刻到报警取消时刻这一周期的图像中重要度“3”的局部事件；和覆盖从报警取消时刻到取消后3分钟这一周期的图像中重要度“2”的局部事件。
事件编制部124按图20的操作流程编制事件管理数据。图20中，事件编制部124参照如图19的事件限定内容，从传感器ID检索事件限定(2001)，然后从局部事件组项中获取摄像机ID(2002)，再获得第一局部事件开始与结束时刻(2003)。事件编制部124根据报警出现或取消时刻以及局部事件开始时间计算该局部事件开始时刻(2004)，同时计算局部事件结束时刻(2005)。
重复2003~2005，直到对该局部事件组名下包含的所有局部组都算出了开始/结束时刻(2006)。
在2002获取的摄像机ID、通过2004与2005获取的局部事件开始时间、结束时刻和局部事件的重要度，都发送给控制信号通信部122(2007)。
所有的局部事件组都应用上述2002~2007(2008)。
然后，事件编制部124为事件管理数据保留一存贮区(2009)，编制如图21的事件管理数据(2010)，再结束操作。图21中，在事件ID“1”名下摄像机ID“3”的图像包含局部事件ID“1”~“3”的局部事件。
局部事件编制部115接收一个或几个局部事件编制指令，按图22的操作流程编制局部事件管理数据。
图21中，局部事件编制部115取得第一局部事件编制指令，若当前时刻未过局部事件开始时刻，就等到该时刻(2201)。
之后，局部事件编制部115从临时记录部113检索在局部事件开始时刻记录的图像数据(2202)，并获取存贮该数据的地址(2203)。同样地，若当前时刻未过局部事件结束时刻，局部事件编制部115就等到该时刻(2204)。之后，该编制部115从临时记录部113检索在局部事件结束时刻记录的图像数据(2205)，并获取存贮数据的地址(2206)。
接着，局部事件编制部115在局部事件记录区中保留一存贮区(2207)，编制如图23的局部事件图像数据(2209)。
对所有的局部事件组应用上述的2001~2008(2009)，再结束操作。
播放事件图像时，放像设备130规定要放的事件ID和被放图像的重要度。事件管理设备120接收来自放像设备130的事件播放请求，而事件获取部125从事件记录区126检索一相关事件，并把包含在该事件里的局部事件及其重要度发送给事件选择部1801，后者选择规定重要度的局部事件，并将其局部事件ID送给每台局部记录设备110。下面在局部记录设备中获取图像数据的操作，与实施例1的操作一样。
如上所述，本实施例通过对包含在某一事件里的每个局部事件按其图像含义指定重要度，能审视重要度优先的图像并迅速掌握情况。而且，在记录摄像机图像时若缺少记录区容量，可通过在低重要度图像上记录，就不会漏录较高重要度的新记录图像。
另外，虽然本实施例是根据图像周期确定重要度的，但是本实施例不限于此，还可按传感器类型、传感器安装位置、报警出现时刻和报警等级确定重要度，且获得同样效果。
如上所述，根据本发明，首先不仅能迅速地查看监视目标在报警出现时做的可疑行为，还能查看监视目标沿转移到监视区的路线上做的可疑行为，从每台记录设备检索有关图像的操作时间也不多，而且还能查看在报警出现时有无同伙在远离监视区的某一区域的可疑行为。
其次，根据本发明，能查看监视目标从报警取消时刻起离开监视区做的可疑行为。
第三，根据本发明，在同一个传感器产生的报警根据其出现时刻包含不同的含义时，可获取最合适周期的事件图像，从而掌握随时间而变化的情况。
第四，根据本发明，在某事件图像所包含的所有图像中，首先显示最高重要度的图像，在以后要求了解详情时，就按重要度次序显示诸图像，从而能迅速有效地掌握情况，而在记录区容量短缺时，可在低重要度图像上记录，不会漏录高重要度的图像。
本发明不限于上述诸实施例，可能的各种变化和更改不背离本发明的范围。
本申请以2001年8月29日提交的日本专利申请No.2001-259281为基础，其整个内容通过引用包括在这里。

Claims (5)

1. 一种事件图像记录系统，其特征在于包括：
多台摄像机，每台覆盖一独特的记录区；
传感器，用于检测出报警；
多个记录部，分别对应于所述多台摄像机，对于来自所述多台摄像机中每台摄像机的图像数据，按各台摄像机进行连续记录；
多个编制部，分别对应于所述多个记录部，从各个记录部记录的各台摄像机的图像数据中提取独特时间周期的图像数据，并编制多个各自属于某一独特记录区和时间周期的多个局部事件；
管理部，使所述多个局部事件中与包含发出报警信号的传感器的位置的记录区对应的局部事件以及与不包含所述传感器的位置的记录区对应的局部事件基于事件出现时刻联系起来，并作为一个事件来管理；和
播放部，用于播放与所述一个事件相关的多个局部事件的图像数据。
2. 如权利要求1所述的事件图像记录系统，其特征在于，所述编制部按表格编制所述多个各自属于某一独特时间周期的局部事件，其中某一事件用多个与之关联的局部事件设置，而其中所述多个局部事件中的每一个由一独特摄像机的标识信息、独特的局部事件开始时刻与结束时刻来限定，所述两个时刻都以事件出现时刻为基础。
3. 如权利要求1所述的事件图像记录系统，其特征在于，所述编制部按表格编制所述多个各自属于某一独特时间周期的局部事件，其中某一事件用多个与之关联的局部事件设置，而其中所述多个局部事件中的每一个由一独特摄像机的标识信息、基于事件出现时刻的独特局部事件开始时刻和基于事件结束时刻的独特局部事件结束时刻来限定。
4. 如权利要求1所述的事件图像记录系统，其特征在于，对于与一个事件相关的所述多个各自属于某一独特时间周期的局部事件中的每一个，使所述管理部设置的重要度对应于所述多个各自属于一独特时间周期的局部事件中每个局部事件的重要度。
5. 一种事件图像记录方法，其特征在于包括：
对于来自多台摄像机中每台摄像机的图像数据，按各台摄像机进行连续记录，所述多台摄像机各自覆盖一独特的记录区；
从记录的各台摄像机的图像数据中提取一独特时间周期里的图像数据，并编制多个各自属于一独特记录区和时间周期的多个局部事件；
使所述多个局部事件中与包含发出报警信号的传感器的位置的记录区对应的局部事件以及与不包含所述传感器的位置的记录区对应的局部事件基于事件出现时刻联系起来，并作为一个事件管理。
CNB021319901A 2001-08-29 2002-08-29 事件图像记录系统与记录方法 Expired - Fee Related CN100419735C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001259281A JP4536299B2 (ja) 2001-08-29 2001-08-29 イベント映像記録・再生システム、イベント管理装置、およびローカル記録装置
JP2001-259281 2001-08-29

Publications (2)

Publication Number Publication Date
CN1403949A CN1403949A (zh) 2003-03-19
CN100419735C true CN100419735C (zh) 2008-09-17

Family

ID=19086674

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB021319901A Expired - Fee Related CN100419735C (zh) 2001-08-29 2002-08-29 事件图像记录系统与记录方法

Country Status (5)

Country Link
US (1) US7236690B2 (zh)
EP (1) EP1292147B1 (zh)
JP (1) JP4536299B2 (zh)
CN (1) CN100419735C (zh)
DE (1) DE60215431T2 (zh)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000339923A (ja) * 1999-05-27 2000-12-08 Mitsubishi Electric Corp 映像収集装置および映像収集方法
JP2005094443A (ja) * 2003-09-18 2005-04-07 Ramrock Eizo Gijutsu Kenkyusho:Kk 監視システム
JP4212486B2 (ja) * 2004-01-22 2009-01-21 三洋電機株式会社 情報記録装置
US20100033572A1 (en) * 2004-03-24 2010-02-11 Richard Steven Trela Ticket-holder security checkpoint system for deterring terrorist attacks
JP4775931B2 (ja) * 2004-06-30 2011-09-21 キヤノンマーケティングジャパン株式会社 画像処理装置、画像処理システム、画像処理方法及びプログラム
JP4578249B2 (ja) * 2005-01-13 2010-11-10 三菱電機株式会社 映像監視システム
US8902320B2 (en) 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US7876357B2 (en) 2005-01-31 2011-01-25 The Invention Science Fund I, Llc Estimating shared image device operational capabilities or resources
US8072501B2 (en) * 2005-10-31 2011-12-06 The Invention Science Fund I, Llc Preservation and/or degradation of a video/audio data stream
US9451200B2 (en) 2005-06-02 2016-09-20 Invention Science Fund I, Llc Storage access technique for captured data
US9967424B2 (en) 2005-06-02 2018-05-08 Invention Science Fund I, Llc Data storage usage protocol
US9942511B2 (en) 2005-10-31 2018-04-10 Invention Science Fund I, Llc Preservation/degradation of video/audio aspects of a data stream
US9076208B2 (en) 2006-02-28 2015-07-07 The Invention Science Fund I, Llc Imagery processing
US8233042B2 (en) * 2005-10-31 2012-07-31 The Invention Science Fund I, Llc Preservation and/or degradation of a video/audio data stream
US9621749B2 (en) 2005-06-02 2017-04-11 Invention Science Fund I, Llc Capturing selected image objects
US20070222865A1 (en) 2006-03-15 2007-09-27 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Enhanced video/still image correlation
US8964054B2 (en) 2006-08-18 2015-02-24 The Invention Science Fund I, Llc Capturing selected image objects
US8681225B2 (en) 2005-06-02 2014-03-25 Royce A. Levien Storage access technique for captured data
US9191611B2 (en) 2005-06-02 2015-11-17 Invention Science Fund I, Llc Conditional alteration of a saved image
US7872675B2 (en) 2005-06-02 2011-01-18 The Invention Science Fund I, Llc Saved-image management
US8253821B2 (en) * 2005-10-31 2012-08-28 The Invention Science Fund I, Llc Degradation/preservation management of captured data
JP4607668B2 (ja) * 2005-06-01 2011-01-05 株式会社日立製作所 監視映像記録装置及び監視映像記録システム
CA2611637C (en) * 2005-06-10 2017-10-17 Accenture Global Services Gmbh Electronic vehicle identification
US20070013493A1 (en) * 2005-07-18 2007-01-18 Liaw Ching D Multi-functional monitor
US20070120980A1 (en) * 2005-10-31 2007-05-31 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Preservation/degradation of video/audio aspects of a data stream
US7956735B2 (en) * 2006-05-15 2011-06-07 Cernium Corporation Automated, remotely-verified alarm system with intrusion and video surveillance and digital video recording
JP4795212B2 (ja) * 2006-12-05 2011-10-19 キヤノン株式会社 録画装置、端末装置及び処理方法
JP4945297B2 (ja) * 2007-04-19 2012-06-06 株式会社日立製作所 端末監視装置
JP4704393B2 (ja) * 2007-06-18 2011-06-15 Ｓｋｙ株式会社 画面再生システム
EP2174310A4 (en) 2007-07-16 2013-08-21 Cernium Corp DEVICE AND METHOD FOR VERIFYING VIDEO ALARMS
JP5170747B2 (ja) * 2008-02-29 2013-03-27 パナソニック株式会社 画像記録装置及び画像記録方法
US9325951B2 (en) 2008-03-03 2016-04-26 Avigilon Patent Holding 2 Corporation Content-aware computer networking devices with video analytics for reducing video storage and video communication bandwidth requirements of a video surveillance network camera system
US8872940B2 (en) * 2008-03-03 2014-10-28 Videoiq, Inc. Content aware storage of video data
JP5303975B2 (ja) * 2008-03-18 2013-10-02 株式会社リコー データ配信装置及びデータ配信システムと、そのエラー通知方法並びにそのプログラム及びそれを記録した記録媒体
US8558888B2 (en) * 2009-02-27 2013-10-15 Third Iris Corp. Bandwidth shaping client to capture, transform, cache, and upload images from a remote point of recordation to a network service
JP5175236B2 (ja) * 2009-03-31 2013-04-03 綜合警備保障株式会社 警備装置
JP5765920B2 (ja) * 2010-11-16 2015-08-19 キヤノン株式会社 送信装置および送信方法
US8743205B2 (en) * 2011-08-10 2014-06-03 Nice Systems Ltd. System and method for semantic video content analysis
CN103959910B (zh) * 2011-09-22 2016-11-09 皇家飞利浦有限公司 利用户外照明网络的成像服务
JP5872306B2 (ja) * 2012-01-30 2016-03-01 株式会社東芝 情報処理装置、情報処理方法及びプログラム
CN103248853B (zh) * 2012-02-10 2017-06-13 华为技术有限公司 实现录像检索的方法、设备和系统
US20150010289A1 (en) * 2013-07-03 2015-01-08 Timothy P. Lindblom Multiple retail device universal data gateway
JP5804007B2 (ja) * 2013-09-03 2015-11-04 カシオ計算機株式会社 動画生成システム、動画生成方法及びプログラム
AU2014202293B2 (en) * 2014-04-28 2021-02-25 Sure Technologies Pty Ltd Monitored security system including cameras
KR102586962B1 (ko) * 2016-04-07 2023-10-10 한화비전 주식회사 감시 시스템 및 그 제어 방법
KR20180020033A (ko) * 2016-08-17 2018-02-27 한화테크윈 주식회사 자원 할당 방법 및 이를 위한 장치
US10643192B2 (en) * 2016-09-06 2020-05-05 Bank Of American Corporation Data transfer between self-service device and server over session or connection in response to capturing sensor data at self-service device
WO2019140018A1 (en) 2018-01-09 2019-07-18 Archive Auto, Inc. Vehicle data acquisition and access system and method
WO2019198185A1 (ja) * 2018-04-11 2019-10-17 東芝映像ソリューション株式会社 データ監視及び管理装置、イベントデータ監視方法
CN109977260B (zh) * 2019-02-12 2021-04-30 深圳绿米联创科技有限公司 录像获取方法、装置、系统、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10250774A (ja) * 1997-03-13 1998-09-22 Showa Denko Kk 吸液性包袋
JP2000339923A (ja) * 1999-05-27 2000-12-08 Mitsubishi Electric Corp 映像収集装置および映像収集方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2528789B2 (ja) * 1985-06-26 1996-08-28 中央電子 株式会社 映像情報管理装置
US4814869A (en) * 1987-04-27 1989-03-21 Oliver Jr Robert C Video surveillance system
JPH08171691A (ja) * 1994-12-19 1996-07-02 Mitsubishi Denki Eng Kk 画像選択画像監視装置
KR0176157B1 (ko) * 1995-08-14 1999-05-01 김광호 개선된 검색기능을 갖는 cctv시스템 및 이에 적합한 검색방법
EP1453311A3 (en) 1996-10-31 2004-11-10 Sensormatic Electronics Corporation Intelligent video information management system
US5875304A (en) * 1996-10-31 1999-02-23 Sensormatic Electronics Corporation User-settable features of an intelligent video information management system
US6654060B1 (en) * 1997-01-07 2003-11-25 Canon Kabushiki Kaisha Video-image control apparatus and method and storage medium
US6064303A (en) * 1997-11-25 2000-05-16 Micron Electronics, Inc. Personal computer-based home security system
JP3809629B2 (ja) * 1998-01-20 2006-08-16 株式会社熊平製作所 画像撮像録画装置
JP3892143B2 (ja) * 1998-04-24 2007-03-14 松下電器産業株式会社 画像記録装置
EP0967584B1 (en) 1998-04-30 2004-10-20 Texas Instruments Incorporated Automatic video monitoring system
JP2001045474A (ja) * 1999-07-28 2001-02-16 Optex Co Ltd ディジタル画像記録システム
JP2004112153A (ja) * 2002-09-17 2004-04-08 Fujitsu Ltd 映像処理システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10250774A (ja) * 1997-03-13 1998-09-22 Showa Denko Kk 吸液性包袋
JP2000339923A (ja) * 1999-05-27 2000-12-08 Mitsubishi Electric Corp 映像収集装置および映像収集方法

Also Published As

Publication number Publication date
EP1292147A3 (en) 2004-04-21
US20030044168A1 (en) 2003-03-06
DE60215431T2 (de) 2007-02-08
JP2003069987A (ja) 2003-03-07
CN1403949A (zh) 2003-03-19
DE60215431D1 (de) 2006-11-30
EP1292147A2 (en) 2003-03-12
JP4536299B2 (ja) 2010-09-01
EP1292147B1 (en) 2006-10-18
US7236690B2 (en) 2007-06-26

Similar Documents

Publication Publication Date Title
CN100419735C (zh) 事件图像记录系统与记录方法
US10490042B1 (en) Chronological activity monitoring and review
AU765857B2 (en) Digital video logging system
CN104573037B (zh) 一种通过多颜色时间轴快速查询监控录像的方法及系统
KR100833615B1 (ko) 원격 감시 시스템 및 원격 감시 방법
CN101472146B (zh) 视频监控系统及方法
KR100696728B1 (ko) 감시정보송신장치 및 감시정보송신방법
CN103209316A (zh) 影像监视系统
CN206523976U (zh) 基于虚拟现实与互联网的三维数字化园区安防监控系统
KR101002746B1 (ko) 쓰레기 불법투기 모니터링 시스템
KR100760209B1 (ko) 바닥센서부를 이용한 방범시스템
JP5228290B2 (ja) 監視システム、監視装置及び監視方法
EP1119198A1 (en) Digital image recording system
JP2009540460A (ja) 中央ステーションにおける警報モニターのためのビデオによる確認システム及びその方法
FR2672761A1 (fr) Systeme d'intercommunication a stockage d'images.
CN201126618Y (zh) 一种多场景监控的防盗报警系统
US8179439B2 (en) Security system
CN109413386A (zh) 一种温度监控方法及系统
KR20080071224A (ko) 유비쿼터스 레코더를 이용한 긴급 상황 통합관리 서비스시스템
JP2006260585A (ja) 侵害防除方法及びシステム並びに装置
AU2013356720B2 (en) Security monitoring device and method of monitoring a location
CN115361517B (zh) 警前录像方法、装置、电子设备及可读存储介质
KR101697754B1 (ko) 이벤트 기반 모니터링 서비스 시스템 및 방법
CN212647491U (zh) 目标影像搜寻系统
US20110161819A1 (en) Video search system and device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080917

Termination date: 20120829