CN101112099A - 监控记录装置 - Google Patents

监控记录装置 Download PDF

Info

Publication number
CN101112099A
CN101112099A CNA2006800035362A CN200680003536A CN101112099A CN 101112099 A CN101112099 A CN 101112099A CN A2006800035362 A CNA2006800035362 A CN A2006800035362A CN 200680003536 A CN200680003536 A CN 200680003536A CN 101112099 A CN101112099 A CN 101112099A
Authority
CN
China
Prior art keywords
image
data
unit
recording device
monitor recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800035362A
Other languages
English (en)
Other versions
CN100568962C (zh
Inventor
外馆弘理
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101112099A publication Critical patent/CN101112099A/zh
Application granted granted Critical
Publication of CN100568962C publication Critical patent/CN100568962C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/915—Television signal processing therefor for field- or frame-skip recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

在此公开的监控记录装置(10)包括：以规定时间间隔输入图像信号的帧控制部(11)、对图像信号的数据进行压缩扩展的压缩扩展部(12)、记录压缩的图像数据的存储器(14)、检测出包含出入监控区域的人物的图像的区域的运动区域检测部(15)、从检测出的区域中提取出人物的面部图像的区域的人区域提取部(16)、判别出提取的面部图像中的最佳镜头的租价镜头判别部(17)、生成附加到最佳镜头的数据的标头信息的PinP用标头生成部(18)、基于标头信息而将最佳镜头的数据与来自压缩扩展部(12)的图像数据进行合成的PinP合成部(20)、对合成的图像进行绘制处理的绘制部(21)，由此能够记录下比现有技术更容易将监控对象特定下来的图像。

Description

监控记录装置
技术领域
本发明涉及一种记录表示例如在监控区域内出入的人物的图像的数据的监控记录装置。
背景技术
现有的监控记录装置具有：将由摄像机发送的图像信号间歇地记录到磁带的磁头；安装在磁头的磁头鼓(head drum)；以及在每次记录结束时强制提高磁头鼓的转速的强制加速单元，上述监控记录装置即使在间歇记录的间隙较短的时候，利用强制加速单元使磁头鼓的转速迅速恢复到规定转速，也能够继续正常进行间歇记录，并减少监控记录的数据量(例如，参照专利文献1)。
专利文献1：特开平7-131756号公报(第4页、第一图)
但是，现有监控记录装置中为了降低监控记录的数据量，以规定的时间间隔，间隔剔除由摄像机发送的图像信号，从而间歇地记录到磁带上，因此，存在这样的问题：表示监控者很容易特定监控对象的图像的数据，例如记录了侵入者的面部被最清楚地拍摄下来的面部的图像的数据，有可能包含于间隔剔除的图像信号中，从监控记录用的数据中遗漏，导致侵入者的特定变得困难。
发明内容
本发明为了解决这个问题而提供一种监控记录装置，其能够降低监控记录的数据量，同时能够记录表示比现有技术更容易地将监控对象特定下来的图像的数据。
本发明的监控记录装置具有这样的结构，其包括：运动物体检测单元，用于从连续拍摄的监控区域的图像的每帧中检测出规定的运动物体的图像；最佳图像判别单元，用于从所述运动物体的图像中判别出最符合规定的基准的图像作为最佳图像，以及，记录单元，用于记录所述最佳图像的数据。
利用此结构，本发明的监控记录装置即使在将表示连续拍摄的监控区域的图像的数据间歇记录下来的情况下，也能够记录表示在监控区域内行动的运动物体的最佳图像的数据，因此，降低监控记录的数据量的同时，还能记录表示比现有技术更容易将监控对象特定下来的图像的数据。
并且，本发明的监控记录装置也可以是这样的结构：所述记录单元将包含拍摄所述最佳图像的时刻信息的拍摄信息的数据与所述最佳图像的数据相关联地记录下来。
利用此结构，本发明的监控记录装置与最佳图像的数据相关联地记录包含拍摄了最佳图像的时刻信息的拍摄信息，所以能够基于拍摄信息而检索在最佳图像中的运动物体的记录。
而且，本发明的监控记录装置也可以是这样的结构，其包括：图像信号输出单元，其以规定时间间隔间歇地输出表示所述监控区域的图像的图像信号；以及图像合成单元，其基于间歇地输出的所述图像信号而将图像与所述最佳图像进行合成。
利用此结构，本发明的监控记录装置，在间歇地记录表示监控区域的图像的数据的同时，也能将监控区域的图像与监控区域内的运动物体的最佳图像进行合成，因此，可以减少监控记录的数据量，同时也能记录表示比现有技术更容易将监控对象特定下来的图像的数据。
而且，本发明的监控记录装置也可以有这样的结构：具有以所述每帧将所述监控区域的图像分割为多个分割区域的区域分割单元，所述区域分割单元将所述多个分割区域分为：检测出所述运动物体的第一分割区域群以及没有检测出所述运动物体的第二分割区域群，所述图像合成单元，在所述第一分割区域群的每个分割区域中，将与所述第一分割区域群的分割区域最接近的第二分割区域群的分割区域的图像以及所述最佳图像进行合成。
利用此结构，本发明的监控记录装置，因为与检测出运动物体的区域最接近的分割区域内进行最佳图像的合成，所以，即使监控区域的图像中包含多个人物像等对象的情况下，也能够易于识别地显示出各人物的面部等对象的最佳图像。
而且，本发明的监控记录装置也可以具有这样的结构：记录单元还记录规定的数据，并且所述监控记录装置还包括检索单元，其从由所述记录单元记录的规定的数据中检索出与通过最佳图像提取单元提取的所述最佳图像的数据相对应的数据，并且在从所述记录单元中记录的规定的数据中检索出与所述最佳图像的数据相对应的数据的时候，所述图像合成单元将基于所述间歇地输出的图像信号的图像、基于与所述记录单元中记录的所述最佳图像的数据相对应的规定的数据的图像、以及包含拍摄所述最佳图像的时刻信息的拍摄信息进行合成。
利用此结构，本发明的监控记录装置，因为图像合成单元将监控区域的图像、运动物体的最佳图像、以及拍摄信息进行合成，所以能够掌握监控区域内的人物等对象在过去拍摄时候的拍摄信息。
而且，本发明的监控记录装置也可以具有这样的结构：所述运动物体的图像含有人物的图像，所述最佳图像含有所述人物的面部的图像，所述规定的基准包含所述面部图像的尺寸、对比度、亮度、伽玛值以及面部方向信息中至少一个基准。
利用此结构，本发明的监控记录装置，间歇地记录表示监控区域的图像的数据，同时能够将监控区域内的人物的面部图像的最佳图像，以尺寸、对比度、亮度、伽玛值以及面部方向信息中的至少一个基准来记录下来，所以能够减少监控记录的数据量，同时能够记录表示比现有技术更容易地将监控对象特定下来的图像的数据。
而且，本发明的监控记录装置也可以具有这样的结构：所述运动物体的图像含有汽车的图像，所述最佳图像含有所述汽车车牌的图像，所述规定的基准包含所述车牌的图像的尺寸、对比度、亮度、伽玛值以及移动方向信息中的至少一个基准。
利用此结构，本发明的监控记录装置，间歇地记录表示监控区域的图像的数据，同时能够将在监控区域内行驶的汽车的车牌以尺寸、对比度、亮度、伽玛值以及面部方向信息中的至少一个基准来记录下来，从而能够减少监控记录的数据量，同时能够记录表示比现有技术更容易地将监控对象特定下来的图像的数据。
本发明提供一种监控记录装置，其有这样的效果：能够减少监控记录的数据量，同时能够记录表示比现有技术更容易地将监控对象特定下来的图像的数据。
附图说明
图1是本发明第一实施方式的监控记录装置的框图。
图2是表示本发明第一实施方式的监控记录装置中PinP用标头的结构示例的图。
图3是表示本发明第一实施方式的监控记录装置中记录图像数据的各步骤的流程图。
图4是表示本发明第一实施方式的监控记录装置中监控区域的显示图像的示例的图。
图5是本发明第一实施方式的监控记录装置中读出图像数据的各步骤的流程图。
图6是本发明第二实施方式的监控记录装置的框图。
图7是本发明第二实施方式的监控记录装置中读出图像数据的各步骤的流程图。
图8是表示本发明第二实施方式的监控记录装置的监控区域的显示图像的示例的图。
附图标记说明
10、50  监控记录装置
11、51  帧控制部(图像信号输出单元)
12、52  压缩扩展部
13、53  记录控制部
14      存储器(记录单元)
15、55  运动区域检测部(运动物体检测单元、区域分割单元)
16、56  人区域提取部
17、57  最佳镜头判别部(最佳图像提取单元)
18、58  PinP用标头(header)生成部
19、59  PinP用标头处理部
20、60  PinP合成部(图像合成单元)
21、61  绘制部
30      摄像机
40      监视器
54      存储器(记录单元)
62    面部检索部(检索单元)
具体实施方式
下面，参照附图说明本发明实施方式。
(第一实施方式)
首先，说明本发明第一实施方式的监控记录装置的结构。另外，在本实施方式中，以本发明的监控记录装置记录表示在规定的监控区域内出入的人物的图像的数据为例，进行说明。
如图1所示，本实施方式的监控记录装置10具有：用于拍摄监控区域并输出图像信号的摄像机30；用于以规定时间间隔来输入由摄像机30输出的图像信号的帧控制部11；用于对图像信号的数据进行压缩扩展的压缩扩展部12；用于控制存储器14的动作的记录控制部13；用于记录被压缩的图像数据的存储器14；用于基于由摄像机30发送的图像信号而从图像中检测出包含出入监控区域的人物的图像的区域的运动区域检测部15；用于从被检测出人物的区域中提取出表示人物面部的图像的区域的人区域提取部16；用于从提取出来的面部图像中判别出最清楚地拍摄到的面部图像(以下称为“最佳镜头”)的最佳镜头判别部17；用于生成被附加到最佳镜头的数据的标头信息的PinP(Picture in Picture)用标头生成部18；处理标头信息的PinP用标头处理部19；基于标头信息将最佳镜头的数据与由压缩扩展部12输出的图像数据进行合成的PinP合成部20；以及基于合成的图像数据而进行将图像绘制在监视器40的处理的绘制部21。
另外，在下述说明中，摄像机30作为输出NTSC(National TelevisionStandards Committee)格式的图像信号的模拟摄像机，每秒输出60帧具有水平方向720像素，垂直方向240像素的图像数据。并且，水平方向H像素、垂直方向V像素的结构记为H×V像素，水平方向的坐标及垂直方向的坐标分别表示为X坐标及Y坐标。
帧控制部11输入由摄像机30输出的每秒60帧图像数据，对规定帧数的图像数据进行间隔剔除，以一定时间间隔输出例如每秒1帧的图像数据。另外，帧控制部11构成本发明的图像信号输出单元。
压缩扩展部12以规定的压缩方式压缩由帧控制部11输出的图像数据，并输出到记录控制部13。并且，压缩扩展部12对于经由记录控制部13输入的记录于存储器14中的压缩图像数据，以规定的扩展方式扩展后输出到PinP合成部20。在此，规定的压缩方式以及扩展方式使用的例如是MPEG(Moving Picture Experts Group)方式和JPEG(Joint PhotographicExperts Group)方式等。
记录控制部13控制对存储器14进行图像数据的记录处理及读取处理。
存储器14例如由硬盘驱动装置构成，记录由压缩扩展部12压缩的压缩图像数据。另外，存储器14构成本发明的记录单元。
运动区域检测部15利用例如公知的差分法或运动矢量法等，基于由摄像机30输出的每秒60帧图像数据而从图像中检测出人物的图像，并根据监控区域的坐标而取得包含人物的图像的区域(以下称为：运动区域)的坐标信息。具体而言，监控区域的坐标以X坐标0～719及Y坐标0～239表示，运动区域例如表示为监控区域中的矩形区域。
并且，运动区域检测部15将摄像机30输出的720×240像素的图像数据分割为例如由180×60像素构成的16个块，并在检测人物的图像的期间内检测出存在人物图像的块(以下称为：动块)和不存在人物图像的块(以下称为：静块)。另外，运动区域检测部15构成本发明的运动物体检测单元以及区域分割单元。并且，本实施方式中，16个块构成本发明的多个分割区域，动块以及静块分别构成本发明的第一分割区域群以及第二分割区域群，但是本发明并不限于此。
人区域提取部16从通过运动区域检测部15检测到的运动区域的图像中，例如根据椭圆霍夫(Hough)算法而提取出人物的面部图像的区域，并计算出用于将面部图像的区域表示为例如矩形区域的X坐标及Y坐标。当此面部图像的区域表示为矩形区域的时候，用面部区域的开始位置的X坐标及Y坐标与面部区域的结束位置的X坐标及Y坐标来定义此时的坐标信息。
最佳镜头判别部17具有存储器(未图示)，用于保存通过人区域提取部16所提取的人物的面部图像的数据以及用于判别面部图像的预定判別基准的数据等，并且基于判別基准的数据，从提取出的面部图像中判别出最佳镜头。另外，最佳镜头判别部17构成本发明的最佳图像提取单元。
例如，从某人物进入监控区域开始到离开的期间内，对于当前帧中取得的该人物的面部图像以及从检测出该人物的面部图像的帧开始到当前帧的一帧之前为止的帧(以下称为：过去的帧)中取得的该人物的面部图像，最佳镜头判别部17以例如面部图像的尺寸、对比度、亮度、伽玛(gamma)值以及面部方向信息等作为判別基准，逐帧顺次进行比较，将拍摄得最清楚的面部图像确定为最佳镜头。在此，拍摄得最清楚的面部图像是指面部图像的颜色或形状等除鲜明、明确之外，人物容易特定。
具体而言，例如，在以面部图像的对比度、面部图像尺寸以及面部方向信息这三个要素作为最佳镜头的判別基准的情况下，可以是对于提取出来的面部图像给出每个要素的评价得分，对评价得分乘以规定的权重系数从而计算出面部图像的总的评价得分。利用总评价得分，将从当前帧提取出的面部图像与在过去的帧中提取出来的面部图像进行逐帧顺序比较，并能够将总评价得分最高的面部图像作为最佳镜头。例如，通过将正面的面部图像的评价得分设定为比侧面的面部图像的评价得分更大，或者面部图像尺寸越大，评价得分越高，来判断为最佳镜头。
PinP用标头生成部18生成图2所示的PinP用标头信息，将此PinP用标头附加到面部图像的数据，再输出到记录控制部13。图2所示的PinP用标头信息包括：用于面部图像的数据判别的索引(index)、拍摄最佳镜头的最佳镜头拍摄时刻、表示面部图像区域的X坐标及Y坐标、表示不存在人物的静块的数据。
PinP用标头处理部19根据PinP用标头信息决定当前帧的面部图像区域中最近的静块的位置。
PinP合成部20被输入由压缩扩展部12扩展的图像信号的数据，并将由PinP用标头处理部19决定的包含于静块中的监控区域的图像与最佳镜头进行合成。另外，PinP合成部20构成本发明的图像合成单元。
绘制部21向监视器40输出由PinP合成部20合成得到的合成影像的图像信号。
接下来说明本实施方式的监控记录装置10的动作。
先用图3说明，在监控区域内出现人物的情况下，将表示监控区域的图像的数据与最佳镜头数据一起记录下来的步骤。
首先，由720×240像素构成的NTSC方式的图像数据输入到帧控制部11及运动区域检测部15(步骤S11)。其次，通过帧控制部11从每秒60帧的图像数据中输出每秒1帧的图像数据(步骤S12)。因此，帧控制部11从60帧的图像数据中每秒间隔剔除59帧图像数据，以1秒钟的间隔输出1帧图像数据。
而且，压缩扩展部12例如基于MPEG方式对图像数据进行压缩(步骤S13)，作为压缩图像数据输出到记录控制部13，之后压缩图像数据被记录到存储器14中(步骤S14)。
另一方面，运动区域检测部15接收到1帧的图像数据(步骤S21)，利用差分法或运动矢量法等检测出运动区域(步骤S22)。例如，当使用差分法时，运动区域检测部15计算得到当前帧的图像与当前帧的前1帧的图像之间的差分，从监控区域的图像中检测出运动区域。此运动区域表示为监控区域的X坐标0～719及Y坐标0～239中的矩形区域，矩形区域的坐标的数据是通过运动区域检测部15得到的。
而且，通过运动区域检测部15将监控区域的图像分割为规定数目的块，在检测出运动物体的期间内，检测出存在运动物体的动块与不存在运动物体的静块(步骤S23)。
具体而言，例如如图4所示，由720×240像素构成的监控区域的图像，在X坐标方向及Y坐标方向分别分割为4块，即分割为180×60像素的16个块，根据在步骤S22中检测出的运动区域的坐标数据，检测出动块及静块。
紧接着，人区域提取部16例如基于椭圆霍夫算法而从运动物体的图像中提取出面部图像的区域(步骤S24)。此面部图像的区域表示为监控区域的X坐标0～719及Y坐标0～239中矩形区域的坐标数据。
其次，最佳镜头判别部17基于规定的判別基准，将人区域提取部16从当前帧中提取出来的面部图像与过去的帧中提取出来的面部图像进行比较，判断从当前帧中提取出来的面部图像是否是最佳镜头(步骤S25)。
例如，在以面部图像的对比度、面部图像尺寸以及面部方向信息这三个要素作为最佳镜头的判別基准的情况下，可以是对于提取出来的面部图像设置每个要素的评价得分，对评价得分乘以规定的权重系数从而计算出面部图像的总的评价得分。利用总评价得分，将从当前帧提取出的面部图像与在过去的帧中提取出来的面部图像进行逐帧顺序比较，并能够将总评价得分最高的面部图像作为最佳镜头。
在步骤S25中，当判断从当前帧中提取出来的面部图像不是最佳镜头的时候，返回步骤S21，下一帧的图像数据被输入，进行最佳镜头的判別。
另一方面，当在步骤S25中判断为最佳镜头的时候，PinP用标头生成部18生成如图2所示的PinP用标头信息(步骤S26)。
如图2所示，生成用于判别面部图像或监控区域等的预定管理数据作为索引的数据。并且，生成最佳镜头拍摄时刻的数据作为最佳镜头的拍摄信息的数据，所述最佳镜头拍摄时刻的数据是表示面部图像被拍摄时的公历年月以及时刻的数据。并且，生成X坐标用0～719的数值来表示，Y坐标用0～239的数值来表示的矩形区域的数据，作为面部区域的坐标数据。并且，生成X坐标方向及Y坐标方向的X块以及Y块分别用0～3的数值表示的数据，作为无运动的静块的区域数据。然而，拍摄信息的数据并不只限定于拍摄面部图像时的时刻信息。
而且，PinP用标头生成部18向最佳镜头数据附加PinP用标头信息(步骤S27)。
然后，由记录控制部13将附加了PinP用标头信息的最佳镜头数据记录到存储器14(步骤S28)。
其次，用图5说明将表示监控区域的图像的数据与最佳镜头数据一起显示的步骤。
首先，记录控制部13从存储器14读出压缩图像数据(步骤S31)，基于PinP用标头信息而读出压缩图像数据的图像被拍摄的时刻的最佳镜头数据(步骤S32)。在此，压缩图像数据被发送到压缩扩展部12，最佳镜头数据被发送到PinP用标头处理部19。
然后，压缩扩展部12对压缩图像数据通过例如MPEG方式进行扩展(步骤S33)。
而且，PinP用标头处理部19根据在PinP用标头信息中包含的面部图像的X坐标及Y坐标的数据以及静块的位置信息而计算出最靠近面部图像的位置的静块的位置，并将此静块确定为与最佳镜头合成的块(步骤S34)。
接着，PinP合成部20将在步骤S34中确定的静块的图像与最佳镜头进行合成(步骤S35)。
之后，绘制部21将合成图像绘制到监视器40，例如在监视器40显示图4所示的合成图像(步骤S36)。图4中，出入作为监控区域的大厅的女性及男性的最佳镜头分别表示在X块0及Y块1的位置上和X块2及Y块0的位置上。
如上所述，根据本实施方式的监控记录装置10，因为最佳镜头判别部17判别出在由人区域提取部16提取的面部图像中最符合判別基准的最佳镜头，存储器14构成为记录表示间歇地拍摄的监控区域的图像的数据以及附加了拍摄信息的最佳镜头的结构，所以能够在监控区域的图像中以嵌入最佳镜头的方式而清楚地显示被拍摄的人物的面部图像，减少了监控记录的数据量，同时也能记录表示比现有技术更容易将人物特定下来的图像的数据。
另外，上述实施方式中，以720×240像素构成的监控区域的图像被分割为180×60像素的16个块，从而检测出存在人物的图像的块，以此为例进行了说明，但是本发明并不受此限制。
(第二实施方式)
首先，说明本发明第二实施方式的监控记录装置的结构。
另外，在本实施方式的监控记录装置的结构中，与第一实施方式的监控记录装置10(参照图1)的结构相同的结构，使用与监控记录装置10的结构相同的标记，省略其详细说明。
如图6所示，本实施方式的监控记录装置50包括：拍摄监控区域而输出图像信号的摄像机30；以规定时间间隔输入由摄像机30输出的图像信号的帧控制部51；对图像信号的数据进行压缩扩展的压缩扩展部52；控制存储器54的动作的记录控制部53；记录被压缩的图像数据的存储器54；基于由摄像机30发送的图像信号而从图像中检测出包含出入监控区域的人物的图像的区域的运动区域检测部55；从被检测出人物的区域中提取人物面部图像的区域的人区域提取部56；判别出所提取的面部图像中的最佳镜头的最佳镜头判别部57；生成附加到最佳镜头的数据的标头信息的PinP用标头生成部58；对标头信息进行处理的PinP用标头处理部59；基于标头信息而将最佳镜头的数据与由压缩扩展部52输出的图像数据进行合成的PinP合成部60；基于合成的图像数据而进行将图像绘制到监视器40的处理的绘制部61；检索存储器54中记录的表示面部图像的数据的面部检索部62。
如图6所示，本实施方式的监控记录装置50的结构是在本发明第一实施方式的监控记录装置10(参照图1)中增加了面部检索部62的结构，所以省略了对面部检索部62之外的结构的说明。
面部检索部62从存储器54检索出表示人物图像的数据，该人物是由PinP用标头处理部59发送的表示面部图像的数据中的人物。存储器54构成本发明的记录单元，存储器54中记录的表示面部图像的数据构成本发明的规定的数据，面部检索部62构成本发明的检索单元。
接着，说明本实施方式的监控记录装置50的动作。另外，表示监控区域的图像的数据与最佳镜头数据一起被记录的步骤，与图3所示的步骤相同，所以省略了说明，但是用图7说明将表示监控区域的图像的数据与最佳镜头数据一起显示的步骤。
首先，记录控制部53从存储器54中读出压缩图像数据(步骤S41)，基于PinP用标头信息而读出压缩图像数据的图像被拍摄的时刻的最佳镜头数据(步骤S42)。在此，压缩图像数据被发送到压缩扩展部52，最佳镜头数据被发送到PinP用标头处理部59。
然后，压缩扩展部52以例如MPEG方式对压缩图像数据进行扩展(步骤S43)。
而且，PinP用标头处理部59根据在PinP用标头信息中包含的面部图像的X坐标及Y坐标的数据以及静块的位置信息而计算出最靠近面部图像的位置的静块的位置，并将此静块确定为与最佳镜头合成的块(步骤S44)。
并且，PinP用标头处理部59向面部检索部62输出步骤S42中读出的最佳镜头数据以及检索指示信号，该检索指示信号指示进行此最佳镜头数据之前记录下来的最佳镜头数据的检索(步骤S45)。
然后，面部检索部62检索出检索指示的最佳镜头数据(步骤S46)。在此，面部检索部62使用公知的面部认证算法，从存储器54中检索出检索指示的与最佳镜头数据中的人物相同的同一人物的最佳镜头数据(下面称为“同一人物最佳镜头数据”)。
然后，面部检索部62判断同一人物最佳镜头数据是否已被记录到存储器54中(步骤S47)。当判断为同一人物最佳镜头数据已记录到存储器54的时候，面部检索部62向PinP合成部60发送被附加到同一人物最佳镜头数据的拍摄信息的数据(步骤S48)。
接着，PinP合成部60将在步骤S44中确定的静块的图像、最佳镜头数据、以及在步骤S48中取得的拍摄信息数据进行合成(步骤S49)。
另一方面，在步骤S47中，判断为存储器54中没有同一人物最佳镜头数据的时候，PinP合成部60将步骤S44中确定的静块的图像以及最佳镜头数据进行合成(步骤S50)。
之后，绘制部61将合成图像绘制到监视器40，在存储器54中有同一人物最佳镜头数据的情况下，例如图8所示的合成图像在监视器40中得以显示(步骤S51)。图8是表示出入作为监控区域的大厅的人物的拍摄示例，出入大厅的女性及男性的最佳镜头分别显示在X块0及Y块5的位置和X块2及Y块0的位置上，与男性的最佳镜头一同显示了此男性之前拍摄的时刻信息。另外，与最佳镜头一同显示的拍摄信息，不限定为时刻信息，例如也可以显示出入管理区域的次数的数据与时刻信息。
如上所述，根据本实施方式的监控记录装置50，面部检索部62从存储器54中检索到同一人物最佳镜头数据，并且存储器54中有同一人物最佳镜头数据的情况下，PinP合成部60将间歇地拍摄的监控区域的静块的图像、最佳镜头数据、过去拍摄的同一人物的拍摄信息数据进行合成，所以能够在监控区域的图像中显示最佳镜头以及此最佳镜头中的人物的过去的拍摄信息。
并且，在现有监控记录装置中，记录的是经过间隔剔除的影像信号，不能获得对检索而言有效的图像数据的可能性，但是本实施方式的监控记录装置50中，存储器54与间隔剔除处理无关地记录了最佳镜头，因此能够记录比现有技术更多的对检索有效的图像数据，提高检索的精度。
并且，在上述实施方式中，以人物作为监控对象为例进行了说明，但是本发明并不受此限定，对例如出入停车场的车辆、行驶于规定区间的道路的车辆、进出监控区域的动物等进行监控的结构，都能达到同样的效果。并且，在本实施方式中，监控记录装置10具有从运动区域检测部15检测出的运动区域的图像中、提取出人物的面部图像的区域的人区域提取部16，最佳镜头判别部17的结构是：基于由人区域提取部16提取出来的人物的面部图像的数据和用于判别面部图像的预定判别基准的数据，而从所提取的面部图像中判别出最佳镜头，但是本发明并不受此限定。例如，当监控在高速道路的规定区间内行驶的汽车的时候，取代用于提取人物面部图像的区域的人区域提取部16，而具有用于提取汽车的图像区域的提取部，最佳镜头判别部从所提取的汽车的图像中判别出最佳镜头的结构等，可以根据用途而改变。另外，提取部当然也可以是提取汽车车牌的图像区域的结构。
如上所述，本发明中的监控记录装置具有能够记录表示比现有技术更容易将监控对象特定下来的图像的数据的效果，作为记录出入监控区域的人物的行动的监控记录装置等来应用。

Claims (7)

1.一种监控记录装置，其特征在于，所述监控记录装置包括：
运动物体检测单元，用于从连续拍摄的监控区域的图像的每帧中检测出规定的运动物体的图像；
最佳图像判别单元，用于从所述运动物体的图像中判别出最符合规定的基准的图像作为最佳图像；以及，
记录单元，用于记录所述最佳图像的数据。
2.根据权利要求1所述的监控记录装置，其特征在于，
所述记录单元将包含拍摄了所述最佳图像的时刻信息的拍摄信息的数据与所述最佳图像的数据相关联地记录下来。
3.根据权利要求2所述的监控记录装置，其特征在于，所述监控记录装置还包括：
图像信号输出单元，其以规定时间间隔间歇地输出表示所述监控区域的图像的图像信号；以及，
图像合成单元，其基于间歇地输出的所述图像信号而将图像与所述最佳图像进行合成。
4.根据权利要求3所述的监控记录装置，其特征在于，所述监控记录装置包括：
将所述监控区域的图像的所述每帧分割为多个分割区域的区域分割单元，
所述区域分割单元将所述多个分割区域分为：检测出所述运动物体的第一分割区域群以及没有检测出所述运动物体的第二分割区域群，
所述图像合成单元，在所述第一分割区域群的每个分割区域中，将与所述第一分割区域群的分割区域最接近的第二分割区域群的分割区域的图像以及所述最佳图像进行合成。
5.根据权利要求3所述的监控记录装置，其特征在于，
所述记录单元还记录规定的数据，
并且所述监控记录装置还包括检索单元，其从由所述记录单元记录的规定的数据中检索出与由最佳图像提取单元提取的所述最佳图像的数据相对应的数据，
从所述记录单元中记录的规定的数据中检索出与所述最佳图像的数据相对应的数据的时候，所述图像合成单元将基于所述间歇地输出的图像信号的图像、基于与所述记录单元中记录的所述最佳图像的数据相对应的规定的数据的图像、以及包含拍摄所述最佳图像的时刻信息的拍摄信息进行合成。
6.根据权利要求1所述的监控记录装置，其特征在于，
所述运动物体的图像含有人物的图像，所述最佳图像含有所述人物的面部的图像，所述规定的基准包含所述面部图像的尺寸、对比度、亮度、伽玛值以及面部方向信息中的至少一个基准。
7.根据权利要求1所述的监控记录装置，其特征在于，
所述运动物体的图像含有汽车的图像，所述最佳图像含有所述汽车车牌的图像，所述规定的基准包含所述车牌的图像的尺寸、对比度、亮度、伽玛值以及移动方向信息中的至少一个基准。
CNB2006800035362A 2005-02-01 2006-01-31 监控记录装置 Expired - Fee Related CN100568962C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP025491/2005 2005-02-01
JP2005025491A JP4685465B2 (ja) 2005-02-01 2005-02-01 監視記録装置

Publications (2)

Publication Number Publication Date
CN101112099A true CN101112099A (zh) 2008-01-23
CN100568962C CN100568962C (zh) 2009-12-09

Family

ID=36777179

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006800035362A Expired - Fee Related CN100568962C (zh) 2005-02-01 2006-01-31 监控记录装置

Country Status (4)

Country Link
US (1) US8355045B2 (zh)
JP (1) JP4685465B2 (zh)
CN (1) CN100568962C (zh)
WO (1) WO2006082795A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101783881A (zh) * 2010-03-05 2010-07-21 公安部第三研究所 一种具有视频结构化描述功能的智能网络摄像机
CN101790064A (zh) * 2010-02-23 2010-07-28 公安部第三研究所 具有视频结构化描述功能的硬盘录像设备及其方法
CN102457657A (zh) * 2010-10-19 2012-05-16 鸿富锦精密工业（深圳）有限公司 摄影机装置及利用其进行人型侦测的方法
CN101510956B (zh) * 2008-02-15 2012-06-13 索尼株式会社 图像处理设备、照相机设备和图像处理方法
CN102801962A (zh) * 2012-08-22 2012-11-28 华南师范大学 用于物联网的在线物体图像信息获取装置及获取方法
WO2015032267A1 (zh) * 2013-09-04 2015-03-12 杭州海康威视数字技术股份有限公司 图像存储方法及其装置

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4459788B2 (ja) * 2004-11-16 2010-04-28 パナソニック株式会社 顔特徴照合装置、顔特徴照合方法、及びプログラム
JP4466585B2 (ja) * 2006-02-21 2010-05-26 セイコーエプソン株式会社 対象物が表現された画像の数の算出
JP2008131617A (ja) * 2006-11-27 2008-06-05 Hitachi Ltd 映像処理装置
US8264545B2 (en) * 2006-12-11 2012-09-11 Nikon Corporation Electronic camera
KR101310230B1 (ko) * 2007-01-17 2013-09-24 삼성전자주식회사 디지털 촬영장치, 그 제어방법 및 제어방법을 실행시키기위한 프로그램을 저장한 기록매체
JP4939968B2 (ja) * 2007-02-15 2012-05-30 株式会社日立製作所 監視画像処理方法、監視システム及び監視画像処理プログラム
JP4998026B2 (ja) * 2007-03-15 2012-08-15 ソニー株式会社 画像処理装置、撮像装置、および画像表示制御方法、並びにコンピュータ・プログラム
KR101362381B1 (ko) * 2007-07-13 2014-02-13 삼성전자주식회사 얼굴 인식 기반의 실시간 선별 녹화 장치 및 방법
JP4835545B2 (ja) * 2007-08-24 2011-12-14 ソニー株式会社 画像再生装置、撮像装置、および画像再生方法、並びにコンピュータ・プログラム
JP2009212935A (ja) * 2008-03-05 2009-09-17 Omron Corp 画像処理装置および方法、並びにプログラム
JP4905723B2 (ja) * 2008-03-31 2012-03-28 富士フイルム株式会社 画像処理システム、画像処理方法、およびプログラム
JP5108635B2 (ja) * 2008-06-02 2012-12-26 株式会社日立製作所 商品販売装置、商品販売管理システム、顧客視線データ取得方法および顧客注視商品データ取得方法
JP5156982B2 (ja) * 2008-06-05 2013-03-06 富士フイルム株式会社 画像処理システム、画像処理方法、およびプログラム
JP4636130B2 (ja) * 2008-06-27 2011-02-23 ソニー株式会社 画像処理装置、撮像装置、画像処理方法、およびプログラム
JP5136335B2 (ja) * 2008-09-30 2013-02-06 カシオ計算機株式会社 カメラ装置及び画像切り出し方法、プログラム
US20110199499A1 (en) * 2008-10-14 2011-08-18 Hiroto Tomita Face recognition apparatus and face recognition method
JP4877319B2 (ja) * 2008-12-24 2012-02-15 カシオ計算機株式会社 画像生成装置、プログラム、画像表示方法、及び、撮像方法
JP4748250B2 (ja) 2009-02-27 2011-08-17 ソニー株式会社 画像処理装置、画像処理システム、カメラ装置、画像処理方法、およびプログラム
JP5485004B2 (ja) * 2010-04-23 2014-05-07 パナソニック株式会社 撮像装置
JP5649429B2 (ja) 2010-12-14 2015-01-07 パナソニックＩｐマネジメント株式会社 映像処理装置、カメラ装置および映像処理方法
JP6080417B2 (ja) * 2011-08-19 2017-02-15 キヤノン株式会社 画像処理装置、及び画像処理方法
WO2014045843A1 (ja) * 2012-09-19 2014-03-27 日本電気株式会社 画像処理システム、画像処理方法及びプログラム
US9396538B2 (en) * 2012-09-19 2016-07-19 Nec Corporation Image processing system, image processing method, and program
CN103297761B (zh) * 2013-06-03 2016-04-20 贝壳网际（北京）安全技术有限公司 视频解析的监控方法及系统
JP5906556B1 (ja) * 2014-10-17 2016-04-20 パナソニックＩｐマネジメント株式会社 モニタリング装置、モニタリングシステムおよびモニタリング方法
GB201419438D0 (en) * 2014-10-31 2014-12-17 Microsoft Corp Modifying video call data
TWI533240B (zh) * 2014-12-31 2016-05-11 拓邁科技股份有限公司 資料顯示方法及系統，及相關電腦程式產品
US9516255B2 (en) 2015-01-21 2016-12-06 Microsoft Technology Licensing, Llc Communication system
CN104899261B (zh) * 2015-05-20 2018-04-03 杜晓通 一种构建结构化视频图像信息的设备和方法
CA3133908A1 (en) * 2020-10-20 2022-04-20 Sean David Paul Rutherford Method and system for capturing student images

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5043811A (en) * 1989-06-15 1991-08-27 Sharp Kabushiki Kaisha Scanning line number converting device for video signal, and down-converter and picture-in-picture TV receiver using the same
JPH03162188A (ja) * 1989-11-21 1991-07-12 Toko Denki Kk 監視装置
JPH07131756A (ja) 1993-10-30 1995-05-19 Sanyo Electric Co Ltd タイムラプスビデオテープレコーダ
JPH09224237A (ja) * 1996-02-16 1997-08-26 Hitachi Ltd 画像監視システム
DE69921237T2 (de) * 1998-04-30 2006-02-02 Texas Instruments Inc., Dallas Automatische Videoüberwachungsanlage
JP2000059758A (ja) * 1998-08-05 2000-02-25 Matsushita Electric Ind Co Ltd 監視カメラ装置、監視装置、及びこれらを用いた遠隔監視システム
JP3729660B2 (ja) * 1998-09-04 2005-12-21 松下電器産業株式会社 ネットワークカメラ監視システム
JP3826598B2 (ja) * 1999-01-29 2006-09-27 株式会社日立製作所 画像監視装置及び記録媒体
JP3727798B2 (ja) * 1999-02-09 2005-12-14 株式会社東芝 画像監視システム
JP4249866B2 (ja) * 1999-11-19 2009-04-08 パナソニック株式会社 録画方法及び録画システム
US6411209B1 (en) * 2000-12-06 2002-06-25 Koninklijke Philips Electronics N.V. Method and apparatus to select the best video frame to transmit to a remote station for CCTV based residential security monitoring
US20020175997A1 (en) * 2001-05-22 2002-11-28 Matsushita Electric Industrial Co., Ltd. Surveillance recording device and method
JP2003046911A (ja) * 2001-05-22 2003-02-14 Matsushita Electric Ind Co Ltd 監視記録装置及びその方法
SE520949C2 (sv) * 2002-01-15 2003-09-16 Sven-Aake Afsenius Digitalkamera med sökare avsedd för skärpedjupsförbättrad avbildning
US6975346B2 (en) * 2002-06-27 2005-12-13 International Business Machines Corporation Method for suspect identification using scanning of surveillance media
US20040001149A1 (en) * 2002-06-28 2004-01-01 Smith Steven Winn Dual-mode surveillance system
US7729563B2 (en) * 2002-08-28 2010-06-01 Fujifilm Corporation Method and device for video image processing, calculating the similarity between video frames, and acquiring a synthesized frame by synthesizing a plurality of contiguous sampled frames
US7664292B2 (en) * 2003-12-03 2010-02-16 Safehouse International, Inc. Monitoring an output from a camera
US7542588B2 (en) * 2004-04-30 2009-06-02 International Business Machines Corporation System and method for assuring high resolution imaging of distinctive characteristics of a moving object

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101510956B (zh) * 2008-02-15 2012-06-13 索尼株式会社 图像处理设备、照相机设备和图像处理方法
CN101790064A (zh) * 2010-02-23 2010-07-28 公安部第三研究所 具有视频结构化描述功能的硬盘录像设备及其方法
CN101783881A (zh) * 2010-03-05 2010-07-21 公安部第三研究所 一种具有视频结构化描述功能的智能网络摄像机
CN102457657A (zh) * 2010-10-19 2012-05-16 鸿富锦精密工业（深圳）有限公司 摄影机装置及利用其进行人型侦测的方法
CN102801962A (zh) * 2012-08-22 2012-11-28 华南师范大学 用于物联网的在线物体图像信息获取装置及获取方法
WO2015032267A1 (zh) * 2013-09-04 2015-03-12 杭州海康威视数字技术股份有限公司 图像存储方法及其装置
CN104427310A (zh) * 2013-09-04 2015-03-18 杭州海康威视数字技术股份有限公司 图像存储方法及其装置
CN104427310B (zh) * 2013-09-04 2017-11-10 杭州海康威视数字技术股份有限公司 图像存储方法及其装置
US9870509B2 (en) 2013-09-04 2018-01-16 Hangzhou Hikvision Digital Technology Co., Ltd. Image storage method and apparatus thereof

Also Published As

Publication number Publication date
JP4685465B2 (ja) 2011-05-18
US20090009598A1 (en) 2009-01-08
CN100568962C (zh) 2009-12-09
WO2006082795A1 (ja) 2006-08-10
US8355045B2 (en) 2013-01-15
JP2006217070A (ja) 2006-08-17

Similar Documents

Publication Publication Date Title
CN100568962C (zh) 监控记录装置
KR101337060B1 (ko) 화상 처리 장치 및 화상 처리 방법
CN100413321C (zh) 摄像装置及其控制方法
JP3727798B2 (ja) 画像監視システム
US7973824B2 (en) Digital camera that uses object detection information at the time of shooting for processing image data after acquisition of an image
US20060159370A1 (en) Video retrieval system and video retrieval method
CN101673346B (zh) 对图像进行处理的方法、设备和系统
US20020175997A1 (en) Surveillance recording device and method
EP3043555B1 (en) Image storage method and device thereof
US10037467B2 (en) Information processing system
US20070222858A1 (en) Monitoring system, monitoring method and program therefor
JP5106302B2 (ja) 移動物体追跡装置
KR101634242B1 (ko) 블랙박스의 유휴시간을 활용한 차량용 블랙박스 및 그 제어방법
US20060274177A1 (en) Image processing apparatus
US20070024710A1 (en) Monitoring system, monitoring apparatus, monitoring method and program therefor
JP4208450B2 (ja) 顔画像監視システム
JP4021873B2 (ja) 顔画像監視システム
KR100696226B1 (ko) 차량 감시 방법과 특정 문자 패턴 인식 장치 및 차량 감시시스템
JP4702015B2 (ja) 画像表示装置及びプログラム
JP2012098907A (ja) ドライブレコーダ、ドライブレコード管理装置及びドライブレコーダシステム
JP3257948B2 (ja) 画像抽出装置
KR102426591B1 (ko) 머신러닝 모델을 이용한 객체 인식 방법 및 시스템
JP5111269B2 (ja) 画像処理装置、画像処理方法
JP3498875B2 (ja) 動画像処理システム
CN105825188A (zh) 一种智能动态人脸识别人证核实系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20091209

Termination date: 20190131