CN113923344A - 运动侦测方法及图像传感器装置 - Google Patents

运动侦测方法及图像传感器装置 Download PDF

Info

Publication number
CN113923344A
CN113923344A CN202110753158.6A CN202110753158A CN113923344A CN 113923344 A CN113923344 A CN 113923344A CN 202110753158 A CN202110753158 A CN 202110753158A CN 113923344 A CN113923344 A CN 113923344A
Authority
CN
China
Prior art keywords
motion event
image
image sensor
interest
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110753158.6A
Other languages
English (en)
Other versions
CN113923344B (zh
Inventor
吴志桓
柯怡贤
姚文翰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pixart Imaging Inc
Original Assignee
Pixart Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US16/924,285 external-priority patent/US11212484B2/en
Priority claimed from US17/151,625 external-priority patent/US11336870B2/en
Priority claimed from US17/326,298 external-priority patent/US11405581B2/en
Application filed by Pixart Imaging Inc filed Critical Pixart Imaging Inc
Priority to CN202311854488.XA priority Critical patent/CN117729438A/zh
Publication of CN113923344A publication Critical patent/CN113923344A/zh
Application granted granted Critical
Publication of CN113923344B publication Critical patent/CN113923344B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • H04N23/651Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种应用于图像传感器装置的运动侦测方法,包括:提供在监控图像上的多个感兴趣区域;对于每一个感兴趣区域:侦测是否有运动事件发生于该每一个感兴趣区域;以及根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及根据该多个感兴趣区域的多个优先级别,决定用户的该多个感兴趣区域的警报排程。多个感兴趣区域的多个警报视频/图像可基于该些感兴趣区域的优先级别而被排程为周期地输出给该用户,令该用户可以较早地看到重要的警报视频/图像。

Description

运动侦测方法及图像传感器装置
技术领域
本发明涉及安防监控机制,特别有关于运动侦测方法以及图像传感器装置。
背景技术
请参照图1所示,其显示已知的影像系统,包含图像传感器11及后端电路13。所述图像传感器11用于监视环境变化,并输出符合超高画质(Full HD)或更高分辨率格式的视频至所述后端电路13。该后端电路13记录所述视频并接着进行图像分析以对记录的视频中的图像特征进行标记。
一般而言,后端电路13的耗能较高,在现今节能省电的趋势下,需要尽量降低系统耗能。
有鉴于此,本发明提供一种智能型摄像系统,其可降低后端电路的数据处理量来降低整体耗能。
另外,请参阅图5,图5为现有技术中监控系统50的示意图。监控系统50包括电连接于外部主机56的被动式传感器52以及图像传感装置54。被动式传感器52可在侦测到温度变化时发送触发讯号给外部主机56,外部主机56受触发讯号的触发被唤醒并且启动图像传感装置54,使得图像传感装置54可在启动后进行曝光调整、接着开始取得监控图像或记录监控录像。因此,即使被动式传感器52感测到温度变化,图像传感装置54仍须待触发讯号的传送完成、外部主机56与图像传感装置54的唤醒等待时间、以及图像传感装置54的曝光调整时间过去后才能开始获取监控图像,故监控系统50无法在被动式传感器52感测到异常情形时立即记录监控录像。
发明内容
因此,本发明的目的之一在于公开一种图像传感器装置及应用于该图像传感器装置中的一种运动侦测方法,以解决上述的难题。
本发明提供一种包含图像传感器、第一输出接口、第二输出接口以及处理器的摄像装置。所述图像传感器用于获取一连串图像数据。所述第一输出接口耦接所述图像传感器并用于输出相对所述一连串图像数据的第一部分并具有第一尺寸的第一图像帧。所述第二输出接口耦接所述图像传感器并用于输出相对所述一连串图像数据的第二部分并具有第二尺寸的第二图像帧。所述处理器用于接收所述第一图像帧,当判断所述第一图像帧包含预定特征时控制所述图像传感器通过所述第二输出接口输出所述第二图像帧,及在输出的所述第二图像帧加上标记。
本发明还提供一种包含图像传感器、输出接口以及处理器的摄像装置。所述图像传感器用于获取图像数据。所述输出接口耦接所述图像传感器并用于输出相对所述图像数据的图像帧。所述处理器耦接所述输出接口并用于从所述输出接口接收所述图像帧,及当判断所述图像帧包含预定特征时,在被输出的所述图像帧加上与所述预定特征相关的标记。
本发明还提供一种包含图像传感器、第一输出接口以及第二输出接口的摄像装置。所述图像传感器用于获取多个像素的图像数据。所述第一输出接口耦接所述图像传感器并用于输出相对获取的所述图像数据的一部分并具有第一尺寸的第一图像帧。所述第二输出接口耦接所述图像传感器并用于输出相对获取的所述图像数据并具有第二尺寸的第二图像帧,其中所述第二尺寸大于所述第一尺寸。
本发明实施例的特征标记为时间标记以外的任何标记,例如包含移动物标记、身份标记、人脸标记、肤色标记、人形物标记、车辆标记、车牌标记等。所述标记为附加于第二图像帧的像素数据的额外信息。
再者,本发明公开一种运动侦测装置,该装置能够避免红外线侦测器的错误警报以及具有能量经济效益与立即反应的优点,以解决上述传统技术的缺点。
本发明进一步公开一种移动侦测装置,搭配于可侦测对象并相应产生触发讯号的被动式传感器。该移动侦测装置包括图像获取单元以及运算处理器。该运算处理器电连接该图像获取单元。该运算处理器受到该触发讯号的触发时将该图像获取单元从省电模式切换到唤醒模式以进行移动侦测,并且进一步根据该移动侦测的分析结果选择性启动外部主机。
本发明进一步公开一种移动侦测方法,应用于移动侦测装置,该移动侦测装置搭配可侦测对象并相应产生触发讯号的被动式传感器。该移动侦测方法包括接收该触发讯号,根据该触发讯号将图像获取单元从省电模式切换到唤醒模式以取得低质量的第一监控图像,分析该第一监控图像以判断该对象的存在,以及依照该第一监控图像的分析结果启动外部主机。
本发明进一步公开一种移动侦测装置,搭配于可侦测对象并相应产生触发讯号的被动式传感器。该移动侦测装置包括图像获取单元以及运算处理器。该运算处理器电连接该图像获取单元。该运算处理器受到该触发讯号的触发时将该图像获取单元从省电模式切换到唤醒模式以进行移动侦测。该图像获取单元在该省电模式时操作在低影格率以判断曝光参数、但不将该图像获取单元取得的监控图像储存到存储器,该图像获取单元进一步在该唤醒模式操作在高影格率以判断对象的存在、并且将该监控图像储存到该存储器。
本发明进一步公开一种移动侦测装置,搭配于可侦测对象并相应产生触发讯号的被动式传感器。该移动侦测装置包括图像获取单元以及运算处理器。该运算处理器电连接该图像获取单元。该运算处理器受到该触发讯号的触发时将该图像获取单元从省电模式切换到唤醒模式以进行移动侦测。该图像获取单元在唤醒模式时取得的多个监控图像储存于存储器,该运算处理器通过该多个监控图像判断该对象的存在后,该图像获取单元切换到录像模式以记录监控录像。
本发明的移动侦测装置电连接在被动式传感器与外部主机之间,移动侦测装置可在被动式传感器将移动侦测装置从省电模式切换为唤醒模式之后启动外部主机。移动侦测装置处于省电模式时,移动侦测装置可在低影格率的模式下不时被唤醒、或是在省电模式中进行曝光参数的调整以取得背景图像;移动侦测装置处于唤醒模式时,移动侦测装置则是操作在高影格率以取得低质量监控图像。移动侦测装置首先利用低质量监控图像的感兴趣区域执行简易图像分析,判断是否启动外部主机;外部主机启动后,移动侦测装置取得并储存高质量监控图像,让外部主机可根据高质量监控图像进行精确的图像分析,以便启动相关应用程序。本发明的移动侦测装置可有效缩短监控系统的开机时间,不需耗时等待外部主机的唤醒时间以及移动侦测装置的曝光调整时间。
本发明另涉及一种在处理器被唤醒前仍不会丢失监控图像的智能型运动侦测装置及其相关判断方法。
本发明进一步公开一种智能型运动侦测装置,其包括记忆模块、处理器以及传感模块。该处理器具有休眠模式与唤醒模式。该传感模块直接耦接于该记忆模块并且电连接该处理器。该传感模块取得的图像由该处理器进行图像处理。该传感模块用来在该处理器操作于该休眠模式时预先储存该图像至该记忆模块,且该预先储存图像在该处理器操作于该唤醒模式时由该处理器接收。该传感模块包括比较器,用来根据该预先储存图像的比较结果产生警告信号以将该处理器从该休眠模式切换到该唤醒模式。
本发明进一步公开该智能型运动侦测装置含包括被动传感器,电连接于该处理器以及该传感模块。该被动传感器用来输出警告信号以驱动该传感模块将该图像预先储存至该记忆模块、并且将该处理器从该休眠模式切换为该唤醒模式。此外,该传感模块可包括比较器,用来将该预先储存图像与参考图像相比较。该传感模块在该预先储存图像与该参考图像之间的强度变化超出默认值的时候,将该图像预先储存至该记忆模块。
本发明进一步公开一种智能型运动侦测装置,能够接收警告信号以监控物体的移动。该智能型运动侦测装置包括传感模块、记忆模块以及处理器。该传感模块用来在接收该警告信号之后的第一时间取得图像。该记忆模块直接耦接于该传感模块,并且用来预先储存该取得图像。该处理器耦接于该传感模块,并且用来在接收该警告信号之后的第二时间通过该记忆模块对该取得图像进行图像处理。其中该第二时间晚于该第一时间。
本发明进一步公开一种应用于智能型运动侦测装置的判断方法。该智能型运动侦测装置具有电连接在一起的记忆模块、传感模块与处理器。该判断方法包括该处理器在该传感模块受致发而取得图像时分析该传感模块取得的该图像,以及该处理器在该传感模块没有致发时分析预先储存在该记忆模块的图像。其中该处理器受到警告信号的影响而唤醒。
本发明进一步公开一种智能型运动侦测装置,包括记忆模块、处理器以及传感模块。该处理器具有休眠模式与唤醒模式。该传感模块直接耦接于该记忆模块,并且进一步电连接该处理器。该传感模块取得的图像由该处理器进行图像处理。该传感模块在该处理器操作于该休眠模式时所取得的图像被预先储存到该记忆模块,该传感模块在该处理器操作于该唤醒模式时所取得的图像被传送到该处理器。
本发明进一步公开一种智能型运动侦测装置,包括记忆模块、处理器以及传感模块。该传感模块直接耦接于该记忆模块,并且进一步电连接该处理器。该传感模块与该处理器在非工作模式时都被关闭,当该智能型运动侦测装置接收触发信号的时候,该传感模块在该处理器送出请求给该传感模块以欲接收该传感模块所取得图像之前,直接取得并传送该图像给该记忆模块。
警告信号可由传感模块或是被动传感器产生。警告信号用来致发传感模块的预先储存功能以及处理器的模式切换功能。接收到警告信号的时候,传感模块可因此致发并在第一时间取得预先储存图像,且预先储存图像会传送到记忆模块。待过去一段时间,处理器已从休眠模式切换为唤醒模式之后,接收到警告信号的处理器可在第二时间送出关联于实时图像及预先储存图像的请求给传感模块。第二时间晚于第一时间,记忆模块里的预先储存图像在第一时间之后进行图像处理,实时图像则是直接传送到处理器进行图像处理、而不会储存到记忆模块。本发明的智能型运动侦测装置及其相关判断方法不需等待唤醒处理器即可取得侦测图像,可有效缩短智能型运动侦测装置的启动时间。
根据本发明的实施例,另公开了一种应用于一图像传感器装置的运动侦测方法。该方法包含有:提供在监控图像上的多个感兴趣区域;对于每一个感兴趣区域:侦测是否有运动事件发生于该每一个感兴趣区域;以及根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及根据该多个感兴趣区域的多个优先级别,决定用户的该多个感兴趣区域的警报排程。
根据本发明的实施例,另公开了一种应用于图像传感器装置的运动侦测方法。该方法包括:当侦测到从该图像传感器装置所产生的第一监控图像上的第一感兴趣区域内的第一运动事件时,产生该第一运动事件的第一特征信息以及第一时间戳;根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
根据本发明的实施例,另公开了一种图像传感器装置。图像传感器装置包括一感测电路及一处理电路。感测电路用来产生监控图像以及提供该监控图像上的多个感兴趣区域。处理电路耦接于该感测电路,并用来:对于每一个感兴趣区域:侦测是否有运动事件发生于该每一个感兴趣区域;以及根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及根据该多个感兴趣区域的多个优先级别,决定该多个感兴趣区域的警报排程给用户。
根据本发明的实施例,另公开了一种图像传感器装置。图像传感器装置包括一感测电路与一处理电路。感测电路用来产生监控图像以及提供该监控图像上的多个感兴趣区域。处理电路耦接于该感测电路,并用来:对于每一个感兴趣区域:侦测是否有运动事件发生于该每一个感兴趣区域;以及根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及根据该多个感兴趣区域的多个优先级别,决定该多个感兴趣区域的警报排程给用户。
根据本发明的实施例,另公开了一种图像传感器装置。图像传感器装置包括一感测电路与一处理电路。感测电路用来感测第一监控图像。处理电路耦接于该感测电路,并用来:侦测从该感测电所产生的该第一监控图像上的第一感兴趣区域内的第一运动事件;产生该第一运动事件的第一特征信息及第一时间戳;根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
附图说明
图1为已知的影像系统的方框图。
图2为本发明实施例的摄像系统的方框图。
图3为本发明实施例的摄像装置的运作示意图。
图4为本发明另一实施例的摄像系统的方框图。
图5为现有技术中监控系统的示意图。
图6为本发明实施例的移动侦测装置的示意图。
图7为本发明实施例的可应用于移动侦测装置的移动侦测方法的流程图。
图8为本发明其它实施例的应用在移动侦测装置的移动侦测方法的流程图。
图9为本发明前述实施例中图像获取单元所展示影格率变化的示意图。
图10为本发明第一实施例的智能型运动侦测装置的功能方块图。
图11为本发明第一实施例的智能型运动侦测装置的程序示意图。
图12为本发明第二实施例的智能型运动侦测装置的功能方块图。
图13为本发明第二实施例的智能型运动侦测装置的程序示意图。
图14为本发明第三实施例的智能型运动侦测装置的功能方块图。
图15为本发明第三实施例的智能型运动侦测装置的程序示意图。
图16为本发明实施例的判断方法的流程图。
图17为本发明一实施例图像传感器装置应用于一安防监控系统的方块示意图。
图18为本发明一实施例一监控图像上的多个感兴趣区域的示意图。
图19为本发明一实施例图17中的该图像传感器装置的方法的流程示意图。
图20为本发明一实施例该图像传感器装置应用于安防监控系统中的方块示意图。
图21为本发明一实施例分别被包含或安装于在一安防监控系统中的不同位置上所设置的多个不同摄像头装置内的多个图像传感器装置的范例示意图。
图22为根据本发明的一不同实施例该些图像传感器装置的一范例的示意图。
图23为根据本发明的另一不同实施例该些图像传感器装置的一范例的示意图。
图24为本发明的实施例合并多个不同图像传感器装置的多个图像流的方法以及预录图像流的方法的流程示意图。
其中,附图标记说明如下:
9、13 后端电路
11 图像传感器
20、40 摄像装置
21、41 图像传感器
22 第一输出接口
23 第二输出接口
24、44 处理器
25、45 缓存器
43 输出接口
200、400 摄像系统
50 现有技术的监控系统
52 现有技术的被动式传感器
54 现有技术的图像传感装置
56 现有技术的外部主机
60、60’ 移动侦测装置
62 被动式传感器
64 外部主机
66 图像获取单元
68 运算处理器
70 存储器
72 发光单元
80、80’、80” 智能型运动侦测装置
82 记忆模块
84 处理器
86、86’、86” 传感模块
88 外部储存模块
90 比较器
92 被动传感器
I1 预先储存图像
I2 实时图像
1700、1700A、1700B、1700C 图像传感器装置
1701 后端系统
1702 系统储存区
1705、1705A、1705B、1705C 感测电路
1710、1710A、1710B、1710C 处理电路
具体实施方式
本发明适用于将所获取的图像帧传送至后端电路进行后处理的图像处理系统,该图像处理系统例如是安全监控系统。
本发明的一个目的在于减少后端电路的工作量以降低系统的整体耗能。后端电路可配置成纪录摄像装置输出的多个图像(或称为视频),并在屏幕上拨放视频时通过选择所记录的特征标记,即可选择所欲观看的视频区间,从而实现智能型摄像系统。
请参照图2所示,其为本发明实施例的智能型摄像系统200的方框图,其包含相互耦接的摄像装置20以及后端电路9;其中,后端电路9具有图像录像(例如记录于内存)及播放(例如通过屏幕)的功能。后端电路9为电脑系统,例如笔记本电脑、平板电脑、桌面计算机或中央监视系统等。根据不同实施方式,后端电路9可具有快速拨放、倒带、选择视频区间等不同拨放模式。某些实施方式中,摄像系统200还可记录环境声音且后端电路9具有拨放音频资料的功能。
摄像装置20及后端电路9可配置成单一装置,或配置成彼此有线或无线耦接的两个装置,并无特定限制。后端电路9例如是摄像装置20外部的遥控中央服务器。
摄像装置20例如是感测芯片并形成为积体电路封装,并具有引脚(pin)以与外部电子组件通讯。摄像装置20包含图像传感器21、第一输出接口22、第二输出接口23以及处理器24。
第一输出接口22耦接处理器24,用于输出第一尺寸的第一图像帧Im1至处理器24进行图像辨识及分析。第二输出接口23通过引脚(未绘示)或通过其他有线或无线方式耦接摄像装置20外部的后端电路9,用于输出第二尺寸的第二图像帧Im2至后端电路9,例如通过传输线、总线和/或无线通道等方式。
一种非限定的实施方式中,所述第一尺寸优选远小于所述第二尺寸。例如,第二尺寸具有符合超高画质(full HD)或更高画质格式的尺寸,以记录适合用户观看的视频;第一尺寸具有符合标准画质(SD)或更低画质格式的尺寸,以降低处理器24所处理的数据量。
图像传感器21例如为CCD图像传感器、CMOS图像传感器或其他用于将光能量转换为电信号的感光装置。图像传感器21包含多个像素,用于在每个帧周期产生图像数据至第一输出接口22或第二输出接口23。例如,图像传感器21包含像素阵列用以产生图像数据,并具有取样电路(例如相关性双重取样电路,CDS)取样出每个像素的图像数据后,经由模拟数字转换单元(ADC)转换为数字数据以形成第一图像帧Im1或第二图像帧Im2。
图像传感器21以预定图框率获取相对连续图像帧的一连串图像数据。第一图像帧相对所述一连串图像数据的第一部分而第二图像帧相对所述一连串图像数据的第二部分。所述一连串图像数据的第一部分及第二部分是相同图像帧或不同图像帧的图像数据。
为了实现第一图像帧Im1小于第二图像帧Im2,一种实施方式中,所述第一图像帧Im1例如是通过在所述帧周期中关闭图像传感器21的像素阵列的部分像素所获取而得,亦即第一图像帧Im1包含像素阵列的部分像素输出的图像数据。另一种实施方式中,所述第一图像帧Im1是根据所述图像传感器输出的所述图像数据通过降低取样频率(downsampling)所产生,但本发明不限于此,其他用于降低图像传感器输出的图像帧尺寸的工艺亦可适用于本发明。
处理器24例如是特殊用途集成电路(ASIC)或数字处理器(DSP),用于接收第一图像帧Im1并判断所述第一图像帧Im1中是否包含预定特征。例如,当第一图像帧Im1包含移动物体(例如通过比对多个图像帧)时即判断包含预定特征,但并不限于此。处理器24还可判断(例如通过机器学习或与预存特征比对)第一图像帧Im1中的人脸、人形物体、预定人物身份(ID)、预定车辆、预定车牌、肤色等,以表示第一图像帧Im1包含预定特征。当第一图像帧Im1包含所述预定特征时,处理器24则通知图像传感器21输出连续图像帧(或称视频),即第二图像Im2,至后端电路9进行录像。
请参照图3,其为本发明某些实施例的摄像装置20的几种运作方式的示意图。图3中的每个箭号表示一个图像帧。图3中的第一行表示图像传感器21产生的图像帧,且图3中的每个箭号表示获取一个图像帧的图像数据。
实施方式I中,当处理器24判断第一图像帧Im1(例如时间T0的图像帧)包含预定特征时,控制图像传感器20通过第二输出接口23连续输出预定期间(例如时间T1至T2的期间)的第二图像帧Im2(且在所述预定期间不输出第一图像帧Im1),并在所述预定期间输出的每个第二图像帧Im2加上与所述预定特征相关的标记tag。
标记tag例如包含于每个第二图像帧Im2的资料标头(data header),如图2以填满斜线的区域表示。所述标记tag可根据不同图像特征而不同,例如所述标记tag可包含移动物标记、身份标记、人脸标记、肤色标记、人形物标记、车辆标记、车牌标记至少其中一者,但不限于此。处理器24例如通过缓存器(register)25改变数字值以根据不同的预定特征来对第二图像帧Im2加入一个或数个标记tag;其中,处理器24可配置为可标记预定种类的不同特征,种类的数目则根据不同应用及处理器24的处理能力而定。
更详言之,在实施方式I中,在处理器24判断第一图像帧Im1包含预定特征之前,图像传感器21不通过第二输出接口23输出任何第二图像帧Im2至后端电路9。当处理器24判断第一图像帧Im1包含预定特征时,表示被摄环境包含需要记录的信息,故进入录像模式(例如T1至T2期间)。录像模式中,后端电路9同时储存第二图像帧Im2的图像数据及标记资料。预定期间T1~T2中,图像传感器21不通过第一输出接口22输出第一图像帧Im1,且为了进一步节省耗能可关闭处理器24或使处理器24进入休眠模式。
预定期间T1~T2中,为了使图像传感器21正常实施自动曝光,图像传感器21还接收来自后端电路9的自动曝光控制信号(auto exposure control signal)AE2,其例如是后端电路9的处理器(例如中央处理器或微处理单元)通过判断第二图像帧Im2的亮度所产生。同时,由于处理器24休眠或关闭,处理器24不输出自动曝光控制信号AE1(其例如是处理器24通过判断第一图像帧Im1的亮度所产生)至图像传感器21。自动曝光控制信号AE1仅在进入录像模式之前被传送至图像传感器21。
预定期间在T2结束后,图像传感器21再度通过第一输出接口22输出(自动或受控于处理器24)第一图像帧Im1至处理器24(例如时间T3的图像帧),处理器24判断时间T3以后(包含时间T3)的第一图像帧Im1是否包含预定特征并停止通过第二输出接口23输出第二图像帧Im2至摄像装置20的下游(例如是后端电路9)。当处理器24再度判断时间T3以后的某个第一图像帧Im1包含预定特征时,再度进入录像模式,由于从辨识预定特征到进入录像模式的运作方式已描述于前,故于此不再赘述。
一种非限定的实施方式中,第一输出接口22在所述预定期间T0~T2偶尔(预定的)输出第一图像帧Im1至处理器24。若处理器24在所述预定期间T0~T2持续判断到所述预定特征或其他新的预定特征,处理器24可自动延长所述预定期间T0~T2。更详言之,预定期间T0~T2根据所述预定期间T0~T2中所述第一图像帧Im1是否存在预定特征而可延长。
实施方式II中,当处理器24判断第一图像帧Im1(例如时间T0的图像帧)包含预定特征时,控制图像传感器21交互地通过第二输出接口23输出第二图像帧Im2(例如时间T1的图像帧)及通过第一输出接口22输出第一图像帧Im1,并在第二图像帧Im2加上与所述预定特征相关的至少一个标记tag,其已说明于上,故于此不再赘述。
更详言之,在实施方式II中,在处理器24判断第一图像帧Im1包含预定特征之前,图像传感器21不通过第二输出接口23输出任何第二图像帧Im2至摄像装置20的下游。进入录像模式(例如T1至T2期间)后,处理器24以较低的频率(例如图3显示为一半,但并不限于此)接收第一图像帧Im1,并判断每个第一图像帧Im1是否包含所述预定特征,但图像传感器21的图框率不变。亦即,当判断某个第一图像帧Im1包含预定特征时,处理器24则控制图像传感器21通过第二输出接口23输出至少一张(例如图3显示一张,但并不限于此)第二图像帧Im2至后端电路9并对其进行标记;其中该标记是根据输出的第二图像帧Im2前一个第一图像帧Im1所决定。当处理器24判断所述预定特征从第一图像帧Im1(例如时间T3的图像帧)消失时,则控制图像传感器21仅通过第一输出接口22输出第一图像帧Im1而不再通过第二输出接口23输出第二图像帧Im2。
实施方式II中,录像模式(例如T1至T2期间)中,由于处理器24仍持续运作,图像传感器21可根据来自处理器24的自动曝光控制信号AE1执行自动曝光运作,或根据来自后端电路9的自动曝光控制信号AE2执行自动曝光运作,并无特定限制。
更详言之,第一实施方式及第二实施方式中,由于第一图像帧Im1与第二图像帧Im2的使用目的不同,图像传感器21不同时通过第一输出接口22及第二输出接口23输出图像帧。当第一图像帧Im1不包含预定特征时,摄像系统200单纯根据第一图像帧Im1持续判断所述预定特征但不进行录像,例如后端电路9关闭。当第一图像帧Im1包含预定特征时,则选择连续输出第二图像帧Im2或相隔至少一个第一图像帧Im1输出第二图像帧Im2以供后端电路9进行录像,如图3所示。
另外,在第三实施方式III中,第一输出接口22及第二输出接口23平行输出第一图像帧Im1及第二图像帧Im2,例如第一图像帧Im1及第二图像帧Im2从相同的图像帧的图像数据抽取。处理器24判断第一图像帧Im1是否包含预定图像特征。若第一图像帧Im1经判断包含所述预定特征,第二输出接口23输出具有至少一个标记tag的第二图像帧Im2。反之,若第一图像帧Im1经判断不包含所述预定特征,第二输出接口23不将第二图像帧Im2输出至摄像系统200之外。
某些实施方式中,本发明实施例的智能型摄像系统200还包含红外线人体传感器(PIR)。此时,处理器24同时根据所述红外线人体传感器与图像传感器21的输出结果判断(例如判断其中之一是否侦测到移动物体或人体)是否通过第二输出接口23输出第二图像帧Im2至后端电路9进行录像,其实施方式与上述实施例类似,仅处理器24还接收红外线人体传感器的检测结果并据以判断人体,故于此不再赘述。
请参照图4,其为本发明另一实施例的摄像系统400的方框图。摄像系统400包含一个输出接口43用于输出图像帧至下游电路以及处理器44。处理器44判断所述图像帧Im是否包含预定特征。若所述图像帧Im经判断包含所述预定特征,输出接口43输出具有与所述预定特征相关的至少一个标记tag的图像帧至后端电路9。然而,若所述图像帧Im经判断不包含所述预定特征,输出接口43不输出图像帧Im至后端电路9。亦即,所述图像帧Im是等待处理器24的判断程序后才被输出至后端电路9。
本实施例的运作同样以图3实现,例如图3的Im1以Im2取代。更详言之,图4与图2的差异在于,图4中单一输出接口43以两个方向输出同一图像帧Im,且此运作是通过切换开关或多任务器来实现。
本发明实施例中,自动曝光控制信号例如用于控制图像传感器21的曝光时间、光源亮度、增益值等,以改变图像传感器21产生的图像帧的平均亮度至适当范围。
其他实施方式中,所述标记tag亦可仅表示第一图像帧Im1的简单分析结果,例如表示第一图像帧Im1包含人脸、人体肤色、人形物体或车辆。后端电路9的处理器是具有较强运算能力的处理器,其可根据第二图像帧Im2进一步执行身份辨识或车牌辨识等需要更多计算量的运作。
综上所述,已知的安全监控系统中,后端电路同时进行录像以及特征标示,且图像传感器仅输出单一尺寸的图像帧至所述后端电路以供录像。因此,本发明另提供一种可产生两种尺寸图像帧的摄像装置(参照图2),其利用较低分辨率的图像帧判断出触发物体后,再输出标示后的高分辨率的图像帧至外部后端电路进行录像,由于所记录的连续图像已包含图像标记,后端电路可无须再进行特征标记的运作。
请参阅图6,图6为本发明实施例的移动侦测装置60的示意图。移动侦测装置60可搭配于被动式传感器62和外部主机64,以提供优选的智能型移动侦测功能。移动侦测装置60电连接在被动式传感器62与外部主机64之间。被动式传感器62用来感测是否发生特定情况,例如有活体通过监控区或监控区内的门板开启,以触发移动侦测装置60去分析特定情况中是否存在与标准相符的事件,例如被动式传感器62所感测到的该事件可能被确认为预期对象。该事件被确认之后,移动侦测装置60传送相关数据给外部主机64以判断是否启动安全警报。
在可能的实施态样中,被动式传感器62可能是温度传感器,例如红外线传感器,并且移动侦测装置60可以选择性在省电模式与唤醒模式之间切换。被动式传感器62在监控区属于正常状态时不会感测到温度变化,此时移动侦测装置60保持在省电模式;当监控区内发生异常的特定情况,例如有活体通过,被动式传感器62可侦测到温度变化并且产生触发讯号,用来将移动侦测装置60从省电模式切换到唤醒模式。
移动侦测装置60可包括图像获取单元66、运算处理器68、存储器70以及发光单元72。运算处理器68可驱动图像获取单元66保持在省电模式或唤醒模式,并且进一步还可驱动图像获取单元66选择性地获取低质量以及高质量的监控图像。在可能的实施态样中,发光单元72只在图像获取单元66获取图像时致发以提供补光,既能节省能源消耗、也可改善图像获取单元66取得图像的质量。
图像获取单元66可在省电模式下操作在低影格率以获取背景图像,并且在唤醒模式时操作在高影格率以取得多张监控图像。背景图像可能为低质量图像,并作为图像获取单元66的自动曝光调整依据。监控图像可包括低质量第一监控图像与高质量第二监控图像,其中第一监控图像提供给运算处理器68、辨识该事件是否发生;第二监控图像提供给外部主机64以判断是否启动安全警报。图像获取单元66所取得的监控图像可储存在存储器70,而且高质量的监控图像还会另行传送到外部主机64。
在此实施例中,监控系统首先利用被动式传感器62侦测是否有对象通过监控区,接着利用移动侦测装置60分析该通过对象是否符合默认条件(例如与标准相符的事件)。如被动式传感器62的视野范围内有通过物且辨认其符合特定情况,被动式传感器62将移动侦测装置60切换到唤醒模式、并且由移动侦测装置60判断该通过物是否为预期对象(例如行人);如判断通过物为行人,移动侦测装置60启动外部主机64,外部主机64开始辨识监控图像内的对象,并选择是否将移动侦测装置60切换为录像模式、或请求移动侦测装置60将监控录像向外传送、或指示移动侦测装置60发出警报、或关闭移动侦测装置60、或唤醒电连接于外部主机64的另一个移动侦测装置60’。
请参阅图7,图7为本发明实施例的可应用于移动侦测装置60的移动侦测方法的流程图。首先,执行步骤S200与S202以启动监控系统,此时被动式传感器62用来侦测视野范围内的物件。如果被动式传感器62没有侦测到温度变化,执行步骤S204以将图像获取单元66维持在省电模式;如果被动式传感器62侦测到温度变化,执行步骤S206使被动式传感器62传送触发讯号,以将图像获取单元66从省电模式切换为唤醒模式。接下来,执行步骤S208与S210,可根据周围环境亮度启动发光单元72,图像获取单元66取得(低质量)第一监控图像,并由运算处理器68简单分析第一监控图像以判断是否启动外部主机64。
在其中一个实施例中,图像获取单元66使用部份像素获取低质量监控图像,例如将像素数组分成多个2x2的像素区块、并使用各像素区块中的一个像素获取图像。在其它可能实施例中,图像获取单元66使用所有像素取得图像,并将所有像素分成多个像素区块(例如2x2的像素区块),接着结合各像素区块中所有像素的数值为块值,以根据多个块值产生低质量的监控图像。
在步骤S210中,运算处理器68优选地分析第一监控图像里的特定感兴趣区域,以判断是否启动外部主机64,其中特定感兴趣区域的尺寸小于第一监控图像的尺寸,因此运算处理器68会因为感兴趣区域的较少数据处理量,而能快速取得图像分析结果。第一监控图像设定为低质量监控图像有助于加快特定感兴趣区域的图像分析速度。感兴趣区域的位置与尺寸优选地由使用者预先设定;例如,第一监控图像里具有大门和窗户,感兴趣区域只涵盖大门的图案时,可避免图像分析结果受到窗户外叶影摆动的影响,或是感兴趣区域可涵盖窗户的边缘,以侦测是否有小偷爬窗、并能同时预防图像分析结果受到出门人影的影响。感兴趣区域的位置与尺寸可能进一步受到图像分析结果的影响而变化。然而,运算处理器68也可能分析第一监控图像内的全区域以执行步骤S210,其变化端视设计需求而定。前述的图像分析技术可通过辨识监控图像内的图案轮廓、比较监控图像的特征点,并且选择性分析监控图像的强度变化等步骤来完成。
当对象不符合默认条件,例如监控图像里的通过物是动物而非人类,步骤S212执行如不启动外部主机64,此时图像获取单元66可以主动(时间到自动进行)或被动(根据监控图像分析结果产生的外部指令)地关闭而回复到省电模式。如对象符合默认条件,意即监控图像里的通过物是未经授权的人类,执行步骤S214以启动外部主机64、并且图像获取单元66开始取得高质量的第二监控图像;此时的第二监控图像可能为静态图像格式或连续录像格式,并会存放在存储器70里。接着,执行步骤S216使外部主机64接收第二监控图像,并由外部主机64利用图像辨识算法去精准辨认第二监控图像内的物件。
第二监控图像不符合预定门坎值时,意即对象不是未经授权的人类,故执行步骤S218,主动或被动地关闭移动侦测装置60以节约能源。如第二监控图像符合预定门坎值,对象被定义为未经授权的人类,执行步骤S220使外部主机64将移动侦测装置60切换到录像模式,移动侦测装置60可将监控录像外传进行备份,并且其它移动侦测装置60’也会同时被唤醒以提供全面性监控。因此,被动式传感器62不会在侦测到对象时直接启动外部主机64,移动侦测装置60先通过被动式传感器62的触发而唤醒以取得第一监控图像,然后外部主机64依照移动侦测装置60所得第一监控图像的低质量图像分析结果来决定是否启动。
移动侦测装置60在外部主机64启动后开始取得第二监控图像。外部主机64必须等待一段时间才能唤醒其它移动侦测装置,此时第二监控图像可在其它移动侦测装置被唤醒前记录监控区内发生的任何可疑事物,意即监控系统在被动式传感器62侦测到异常后、其它移动侦测装置被唤醒前的这段时间里不会漏失可疑事物。移动侦测装置60利用低质量第一监控图像判断对象的存在,该存在的相关分析判断仅为简易运算、可能受到噪声干扰影响;故外部主机64进一步利用高质量第二监控图像分析对象的精确移动侦测,例如以面部辨识技术进行对象移动侦测。
本发明进一步提供实时的曝光调整功能,以使移动侦测装置60能具有优选的操作效能。请参阅图8与图9。图8为本发明其它实施例的应用在移动侦测装置60的移动侦测方法的流程图,图9为本发明前述实施例中图像获取单元66所展示影格率变化的示意图。此实施例中,与前述实施例具有相同编号的步骤具有相同内容,故此不再分别详述。如被动式传感器62没有唤醒移动侦测装置60,可在步骤S202之后执行步骤S205,周期性地将图像获取单元66切换到唤醒模式以操作在低影格率,使处于唤醒模式的图像获取单元66可执行曝光调整、并同时取得低质量的背景图像。如移动侦测装置60被唤醒,可在步骤S206之后执行步骤S207,将图像获取单元66切换到唤醒模式以操作在高影格率;此时,图像获取单元66仍可取得低质量的监控图像,低质量监控图像用来相比于背景图像以判断是否启动外部主机64。
举例来说,如图9所示,图像获取单元66可在被动式传感器62尚未触发移动侦测装置60时,每隔一秒取得一张背景图像并且执行曝光调整功能,意即在时间点T1、T2、T3与T4分别取得背景图像、且图像获取单元66的曝光参数能实时相应调整。当被动式传感器62在时间点T5触发移动侦测装置60并进入唤醒模式,移动侦测装置60可以每秒30张的影格率取得第一监控图像,由于最新一张背景图像(在时间点T4取得)的曝光参数相当类同于时间点T5取得的第一监控图像的曝光参数,处于唤醒模式的图像获取单元66不需再进行曝光调整,仍可实时取得具备合适曝光参数的优选监控图像。
综上所述,本发明的移动侦测装置电连接在被动式传感器与外部主机之间,移动侦测装置可在被动式传感器将移动侦测装置从省电模式切换为唤醒模式之后启动外部主机。移动侦测装置处于省电模式时,移动侦测装置操作在低影格率的模式下可不时被唤醒、或是在省电模式中进行曝光参数的调整以取得背景图像;移动侦测装置处于唤醒模式时,移动侦测装置则是操作在高影格率以取得低质量监控图像。移动侦测装置首先利用低质量监控图像的感兴趣区域执行简易图像分析,判断是否启动外部主机;外部主机启动后,移动侦测装置取得并储存高质量监控图像,让外部主机可根据高质量监控图像进行精确的图像分析,以便启动相关应用程序。本发明的移动侦测装置可有效缩短监控系统的开机时间,不需耗时等待外部主机的唤醒时间以及移动侦测装置的曝光调整时间。
请参阅图10与图11,图10为本发明第一实施例的智能型运动侦测装置80的功能方块图,图11为本发明第一实施例的智能型运动侦测装置80的程序示意图。智能型运动侦测装置80可包括记忆模块82、处理器84以及传感模块86。记忆模块82、处理器84与传感模块86可以是三个相互独立的组件,或是一个或两个集成组件。传感模块86可直接耦接于记忆模块82,并且进一步电连接处理器84。传感模块86可包括以二维方式排列的多个光侦测像素点,用来取得图像。处理器84可在休眠模式与唤醒模式之间切换,用来对传感模块86取得的图像进行图像处理,以辨识出取得图像内的特定事件,例如出现在取得图像中的非预期物体。
传感模块86能够根据处理器84所在的操作模式或是运动侦测结果生成的警告信号,将其取得的图像预先储存(意即读写于)记忆模块82、或是直接传送到处理器84。记忆模块82的图像容量具有默认值,若记忆模块82已装满、但仍有新图像仍待预先储存,全部或部分的先前图像会被移除以挪出空间供储存新图像。此外,由处理器84进行图像处理的图像和存在记忆模块82内的预先储存图像可被传送到外部储存模块88,并且外部储存模块88电连接于智能型运动侦测装置80。
如图11的第一实施例所示,智能型运动侦测装置80还没被致发时,处理器84操作于休眠模式。传感模块86可包括比较器90,用来在监控到物件的移动时产生警告信号。当处理器84操作于休眠模式,传感模块86可持续性或间歇性地取得多张图像,例如每一秒取得五张图像,这些多张图像都会被预先储存到记忆模块82。于此同时,比较器90从多张预先储存图像I1读取一张或数张预先储存图像I1并相比于参考图像。如预先储存图像I1与参考图像之间的强度变化低于默认值,处理器84维持在休眠模式,比较器90读取下一张预先储存图像I1并且将其与参考图像进行比较。如如预先储存图像I1与参考图像之间的强度变化超出默认值,比较器90可产生警告信号,用来唤醒处理器84、并且将传感模块86取得的图像预先储存到记忆模块82。因此,警告信号用来将处理器84从休眠模式切换到唤醒模式。
本发明的比较器90可通过多种方式将预先储存图像I1相比于参考图像,举例来说,比较器90可以比较预先储存图像I1和参考图像的整张图像范围、或是仅比较部分图像范围。比较器90可以比较所有像素点的强度总和、或是部分像素点的强度总和;又或者,比较器90可用整张图像范围内的每一个像素点进行比较、或是只用图像内部分范围的像素点强度进行比较。
当处理器84操作于唤醒模式时,传感模块86取得的实时图像I2可直接传送到处理器84进行数字图像处理,而不会储存至记忆模块82。操作于唤醒模式的处理器84可轮流对实时图像I2进行图像处理及接收来自记忆模块82的预先储存图像I1,或是可在实时图像I2的图像处理完成之后才接收预先储存图像I1。实时图像I2的图像处理可优先于预先储存图像I1的图像处理,因此智能型运动侦测装置80能够专注于处理监控范围内的实时情况。预先储存图像I1的图像处理可在实时图像I2的图像处理完成或是暂停之时才开始执行。如果处理器84的操作效能足以应付庞大数据量,实时图像I2与预先储存图像I1也可以轮流进行图像处理,意即智能型运动侦测装置80可同时提供当下时段与先前时间的侦测结果。
在某些可能实施例中,传感模块86在处理器84操作于休眠模式时取得的预先储存图像会被预先储存到记忆模块82,传感模块86在处理器84操作于唤醒模式时取得的图像可以被传送到处理器84。在其它可能实施例中,处理器84与传感模块86于非工作模式情境下可被关闭;当智能型运动侦测装置80接收到触发信号,传感模块86可取得图像并且直接传送图像给记忆模块82,然后处理器84可送出请求给传感模块86以接收取得图像。触发信号可能是外部单元生成的警示通知、也可以是智能型运动侦测装置80的内建单元生成的警示通知。
此外,传感模块86的图像质量与画面更新率的任一个或两者特点,可随着处理器84操作于休眠模式或唤醒模式而变化。举例来说,处理器84操作于休眠模式时,传感模块86可取得低质量或是低画面更新率的图像,用来和参考图像进行比较,故可有助于节约传输带宽与储存容量。如低质量或是低画面更新率图像与参考图像之间的强度变化超出默认值,会生成警告信号,使得传感模块86可以开始取得高质量或高画面更新率的图像以供预先储存至记忆模块82,并且还能在同时间将处理器84切换到唤醒模式。接着,记忆模块82里预先储存的高质量图像或预先储存的高画面更新率图像可在处理器84操作于唤醒模式被传送到处理器84,故智能型运动侦测装置80在处理器84切换到唤醒模式前不会丢失重要的图像信息。
请参阅图12至图15,图12为本发明第二实施例的智能型运动侦测装置80’的功能方块图,图13为本发明第二实施例的智能型运动侦测装置80’的程序示意图,图14为本发明第三实施例的智能型运动侦测装置80”的功能方块图,图15为本发明第三实施例的智能型运动侦测装置80”的程序示意图。在第二实施例与第三实施例中,与第一实施例具有相同编号的组件具有相同的结构及功能,于此不再重复说明。
在可能的实施例中,智能型运动侦测装置80’可包括记忆模块82、处理器84、传感模块86’以及被动传感器92。被动传感器92可电连接处理器84与传感模块86’。当被动传感器92没有侦测到任何异常现象时,传感模块86’被关闭,且处理器84维持在休眠模式。当被动传感器92侦测到物件的移动时,被动传感器92会产生警告信号,而警告信号能够用来启动传感模块86’、并将处理器84从休眠模式切换到唤醒模式。处理器84仍然操作于休眠模式时,传感模块86’可取得预先储存图像I1,并将预先储存图像I1传送到记忆模块82。如处理器84操作于唤醒模式,传感模块86’可取得实时图像I2并传送到处理器84,此时记忆模块82里的预先储存图像I1也可相应传送到处理器84。
智能型运动侦测装置80’可具有非工作模式,处理器84与传感模块86’在非工作模式情境可被关闭。当被动传感器92侦测到物件的移动并产生警告信号时,警告信号会触发传感模块86’,使传感模块86’开始取得预先储存图像并传送给记忆模块82。接着,处理器84可被切换至唤醒模式,并且传送请求给传感模块86’,以进行后续接收预先储存图像的操作。
在其它可能实施例中,智能型运动侦测装置80”可包括记忆模块82、处理器84、具有比较器90的传感模块86”、以及被动传感器92。被动传感器92可在侦测到异常现象时致发传感模块86”。致发的传感模块86”可取得预先储存图像I1并将其传送给记忆模块82,比较器90可比较预先储存图像I1与参考图像以判断是否切换处理器84的模式。比较器90用来辨识异常现象。如预先储存图像I1和参考图像之间的强度变化低于默认值,异常现象可能因噪声引起,故处理器84不会被唤醒;如预先储存图像I1和参考图像之间的强度变化超出默认值,异常现象可能代表某些人或物侵入智能型运动侦测装置的监控范围,因此处理器84可被切换到唤醒模式进行记录。当处理器84操作于唤醒模式,传感模块86”取得的实时图像I2和记忆模块82里的预先储存图像I1可被传送到处理器84,然后再进一步传送到外部储存模块88以执行数字图像处理。
请参阅图16,图16为本发明实施例的判断方法的流程图。图16所述的判断方法可适用在图10至图15所示的智能型运动侦测装置。首先,执行步骤S800与步骤S802,启动判断方法以监控物体的移动,前述的监控功能可由传感模块86、86’与86”、或是被动传感器92来执行。如果没有侦测到异常现象,执行步骤S804以将处理器84维持在休眠模式。若是侦测到物件的移动,执行步骤S806与步骤S808,生成警告信号以致能处理器84,并且通过传感模块86、86’及86”取得图像。当处理器84没有操作于唤醒模式,执行步骤S810以使传感模块86、86’及86”可在记忆模块82生成预先储存图像I1。当处理器84操作于唤醒模式,执行步骤S812与步骤S814,由传感模块86、86’和86”生成实时图像I2,并且预先储存图像I1与实时图像I2都可传送到处理器84。
接下来,执行步骤S816,传感模块86、86’与86”的拍摄功能致发后,处理器84可分析传感模块86、86’与86”取得的实时图像I2。或许因为物体突然消失或其它特殊情况,传感模块86、86’与86”没有受到致发,此时可执行步骤S818以通过处理器84分析记忆模块82里的预先储存图像I1。值得一提的是,处理器84不仅可在预先储存图像I1之前先进行实时图像I2的图像处理,还能选择在依照使用者实际需求及具备有效操作效能的前提下轮流对预先储存图像I1和实时图像I2进行图像处理。
综上所述,警告信号可由传感模块或是被动传感器(例如热传感器、加速度计或陀螺仪)产生。警告信号用来致发传感模块的预先储存功能以及处理器的模式切换功能。接收到警告信号的时候,传感模块可因此致发并在第一时间取得预先储存图像,且预先储存图像会传送到记忆模块。待过去一段时间,处理器已从休眠模式切换为唤醒模式之后,接收到警告信号的处理器可在第二时间送出关联于实时图像及预先储存图像的请求给传感模块。第二时间晚于第一时间,记忆模块里的预先储存图像在第一时间之后进行图像处理,实时图像则是直接传送到处理器进行图像处理、而不会储存到记忆模块。相比于现有技术,本发明的智能型运动侦测装置及其相关判断方法不需等待唤醒处理器即可取得侦测图像,可有效缩短智能型运动侦测装置的启动时间。
图17是本发明一实施例图像传感器装置1700应用于一安防监控系统的方块示意图。该图像传感器装置1700能够产生一或多个监控图像、提供一或多个监控图像上的一或多个感兴趣区域(regions of interest)以及能够基于一或多个感兴趣区域的优先级别来决定多个感兴趣区域的一警报排程以及自动产生多个感兴趣区域的一排名列表(rankinglist)及多个警报视频给一用户。该些优先级别可以是在该图像传感器装置1700的一段使用时间之后由该图像传感器装置1700所自动决定。一感兴趣区域也可以被称为是感兴趣窗口(window of interest);这并非是本案的限制。该图像传感器装置1700能够通过有线或无线通信来耦接至一后端系统1701(例如是计算机装置),而该后端系统1701能够用来自动显示播放相关的监控图像给该用户或是能够被该用户所操控来显示播放相关的监控图像。该图像传感器装置1700用来传送该些感兴趣区域的排名列表以及多个相应的监控图像至该后端系统1701,而该后端系统1701能够显示播放所些感兴趣区域的所建议的排名列表,使得该用户能够较早地看到一或多个特定的感兴趣区域的监控图像。
应注意的是,决定该些感兴趣区域的警报排程给该用户的操作可包含有实时或稍后输出唯一一个感兴趣区域的一或多个警报视频/图像、实时或稍后输出多个感兴趣区域的多个警报视频/图像以及/或是安排多个感兴趣区域的多个警报视频/图像的一输出排程。上述操作是基于多个感兴趣区域的多个优先级别来进行的。举例来说,多个感兴趣区域的多个警报视频/图像可基于该些感兴趣区域的优先级别而被排程为周期地输出给该用户,例如是每晚时或每周末时(但不限定)被输出给该用户。应注意的是,单一个感兴趣区域的一或多个警报视频/图像也可以基于该感兴趣区域的优先级别而被排程为周期地输出给该用户,例如是每晚时或每周末时(但不限定)才被输出给该用户,例如(但不限定),如果该感兴趣区域的优先级别是紧急的或是重要的,则该感兴趣区域的该一或多个警报视频/图像(s)可以被排程为每一天晚上时被输出给该用户,反之,如果该感兴趣区域的优先级别是不紧急或是不重要的,则该感兴趣区域的一或多个警报视频/图像可被排程为于每一个周未时才被输出给该用户。
该图像传感器装置1700能够被设置或安装于一监控摄像头装置内或安防监控系统的一安防摄像头装置内,而包含有具备自动产生多个感兴趣区域的排名列表给用户的图像传感器装置1700的该监控摄像头装置就可以被该用户随意地设置于任何地点、任何位置或是随意用任何角度进行设置。
该图像传感器装置1700自动地产生多个感兴趣区域的排名列表给该用户,于其中具有较高优先级别的一感兴趣区域会被排名于具有较低优先级别的另一感兴趣区域的前面,因此使得该用户能够在第一时间时或是较快地看到具有较高优先级别的感兴趣区域的多个图像/视频,并且接着如果有需要的话再看到具有较低优先级别的感兴趣区域的多个图像/视频。通过这样做,对于该用户来说,可以更有效率地判断一个特定或真实的是否有运动事件实际发生,对于该用户来说,也不需要人工手动调整监控摄像头装置的地点或位置,就能够避免不想要或不必要的图像干扰。在其他实施例中,具有更低优先级别的一感兴趣区域所对应的多个图像/视频就可以不显示播放给该用户,以避免对该用户造成无意义的中断或警报。
参照图18,图18为本发明一实施例一监控图像上的多个感兴趣区域的示意图。如图18所示,该监控图像至少包括有一户外图像部分(例如该感兴趣区域R1内的摇晃的树叶的图像)以及一户内图像部分(例如该感兴趣区域R2内的人形图像)。在这个例子中,摇晃的树叶的运动是一种不想要的图像扰动,而该处理电路1710例如会基于摇晃的树叶的图像的特征以及该人形图像的特征,将该感兴趣区域R2的优先级别安排在感兴趣区域R1的优先级别之前,以令该用户能够尽早看到该人形图像。应注意的是,多个不同的感兴趣区域的形状及大小可以是相同或者也可以是不相同的。
请再参照图17。实作上,该图像传感器装置1700包含有一感测电路1705及一处理电路1710。该感测电路1705用来产生一或多个监控图像以及用来提供该一或多个监控图像上的多个感兴趣区域,举例来说(但不限定),该感测电路1705当被致能时可用来持续地捕捉多个图像以产生多个监控图像,而该多个感兴趣区域是每一个监控图像上分别定位的空间区域。该处理电路1710耦接于该感测电路1705,对于一个或每一个感兴趣区域,该处理电路1710用来侦测是否有至少一运动事件发生于该一个或每一个感兴趣区域内,以及用来根据该至少一运动事件的至少一特征信息来决定该一个或每一个感兴趣区域的一优先级别。在产生多个感兴趣区域的多个优先级别之后,该处理电路1710用来根据该些感兴趣区域的该些优先级别以自动地产生并输出该些感兴趣区域的一排名列表给一用户。
图19是本发明一实施例图17中的该图像传感器装置1700的方法的流程示意图,其步骤说明简述于下:
步骤S1900:开始;
步骤S1905:感测电路1705产生多个监控图像以及提供多个感兴趣区域;
步骤S1910:处理电路1710侦测每一个感兴趣区域内的一或多个运动事件;
步骤S1915:处理电路1710侦测每一个感兴趣区域内的一或多个运动事件的一或多个特征;
步骤S1920:对于每一个感兴趣区域,处理电路1710根据每一个运动事件的一或多个特征将每一个运动事件归类为一或多个类别或类型;
步骤S1925:处理电路1710根据每一个感兴趣区域的一或多个被归类的类别的一或多个个数,决定每一个感兴趣区域的优先级别;
步骤S1930:处理电路1710根据多个感兴趣区域的多个优先级别,产生多个感兴趣区域的排名列表;以及
步骤S1935:结束。
实际上,一个物体或运动对象可能会发生或出现于一监控图像的一空间位置上、保持静止或者缓慢或快速地移动以及最后可能在另一监控图像中的相同或不同空间位置上消失。根据从该感测电路1705所产生的多个监控图像,图17的该处理电路1710能够侦测并判断出运动对象于一监控图像中发生或出现以及于另一监控图像中消失。相同地,基于该些监控图像,对于一特定感兴趣区域或每一个感兴趣区域,该处理电路1710也能够侦测及判断出一运动对象出现于该感兴趣区域的时间点是在与一监控图像有关的一时间戳以及该运动对象消失于该感兴趣区域的时间点是在与另一监控图像有关的另一时间戳,以对于该感兴趣区域来产生一运动事件。相似地,对于该感兴趣区域,该处理电路1710也能够侦测并判断出多个不同运动对象出现于该感兴趣区域的时间点是在相同的或不同的时间戳以及该些运动对象消失于该感兴趣区域的时间点是在相同的或不同的时间戳,以对于该感兴趣区域来产生多个不同的运动事件。多个不同的感兴趣区域可以是和具有相同的特征、部分相同的特征或不同的特征的该些运动事件有关。
举例来说,如果一个运动对象在该些监控图像上从一感兴趣区域移动至另一感兴趣区域,则该处理电路1710会分别对于该两个感兴趣区域产生与相同的运动对象有关的两个运动事件,在这个情况中,该两个感兴趣区域的两个运动事件的特征可以是相同的,或是该些特征也可以因为其时间戳信息的不同而变成是部分相同的。反之,如果两个不同的运动对象分别出现并消失于不同的感兴趣区域,则该处理电路1710会分别对于该两个感兴趣区域产生与不同的运动对象有关的两个运动事件,在这个情况中,该两个感兴趣区域的两个运动事件的特征是不同的,或者在某些情况中该些特征也可以因为其某些信息例如颜色、形状或时间戳信息的相同而变成是仅有部分不同。
实作上,对于一个或每一个感兴趣区域,该处理电路1710会将所侦测到的一或多个运动对象(或事件)的一或多个特征信息与候选的特征信息(可被预先记录于处理电路1710的内存电路中)进行比较,以产生该些运动事件发生于一或每一个感兴趣区域内的特征信息,举例来说,至少一运动事件的至少一特征信息可以包含有下述至少其中一个特征:出现/发生时的时间、该至少一运动事件消失时的时间、该至少一运动事件的发生及消失之间的时间长度、该至少一运动事件发生的频率、该至少一运动事件发生的规律性水平、该至少一运动事件的至少一时间戳、在该至少一运动事件中的至少一运动对象的形状/颜色/大小以及该至少一运动对象的运动方向/速度等等。应注意的是,运动对象的其他特征信息也可以被包含于上述特征中作为该特征信息,也就是说,上述所举例的特征信息并非是本发明的限制。相似地,上述的候选的特征信息也包含有至少一个上述的特征信息的类型。
在经过一段使用时间之后,该处理电路1710能够产生并将该些兴趣区域的运动事件的所有特征信息记录于该处理电路1710的一内存电路(并未显示于图17)中。接着,该处理电路1710能够根据该用户的喜好设定或默认的设定,自动地产生并输出该些感兴趣区域的排名列表给该用户,使得该用户可以轻易地看到在一感兴趣区域内的重要的监控图像并忽略掉另一感兴趣区域内的不重要的监控图像,而其中具有最重要监控图像的一感兴趣区域会被排列为列表中的第一名/第一个,令该用户可以轻易看到该感兴趣区域的图像,重要性的判断可由该处理电路1710基于该用户的喜好设定或默认设定来决定。
在一实施例,例如,对于一特定或每一个感兴趣区域,该处理电路1710能够用来将具有相同或相似特征的多个运动事件归类为同一个类别,将具有不同特征的多个运动事件归类为不同的类别,一个运动事件可以被归类为与一或多个类别有关。
举例来说,在一实施例,具有与相同或相似形状/大小的多个运动对象的多个运动事件可以被归类为同一个形状/大小类别,而具有与不同或不相似的形状/大小的多个运动对象的多个运动事件可以被分别归类为不同的形状/大小类别。此外,举例来说(但不限定),摇晃树叶(或摇晃草地)的多个运动事件也可以被归类为同一个树叶/草地类别,而与人形运动对象有关的多个运动事件可以被归类为另一个不同的人形类别,此外,与车辆形状的运动对象有关的多个运动事件可以被归类为另一个不同的车辆形状类别。上述例子均并非本发明的限制。
再者,在另一实施例,具有与相同/相似的颜色有关的多个运动对象的多个运动事件也可以被归类为同一个类别,而具有与不同/不相似的颜色有关的多个运动对象的多个运动事件可以被归类为多个不同的类别,举例来说(但不限定),相应于摇晃树叶的多个运动事件以及相应于摇晃草地的多个运动事件可以被归类为同一个绿色类别,而与人形的运动对象有关的多个运动事件可以被归类为不同的颜色类别。
再者,在另一实施例,相应于较高频率的运动的多个运动事件以及相应于较低的频率的多个运动事件可以分别被归类为多个不同的类别,举例来说(但不限定),相应于摇晃树叶的多个运动事件(高频率的运动)可以被归类为同一个高频率类别,而相应于人形运动对象的多个运动事件(低频率的运动)可以被归类为另一个不同的低频率类别。
再者,在另一实施例,相应于较高规律性的运动的多个运动事件以及相应于较低规律性的运动的多个运动事件可以分别被归类为不同的类别,举例来说(但不限定),摇晃树叶、摇晃草地或人们经常来去走动的地点或时间所相应的多个运动事件可以由于该些运动事件是有关于较高的规律性水平而可以被归类为同一个高规律性类别,以及出现在人们很少走动来去的地点或时间的多个运动对象所相应的多个运动事件可以由于该些运动事件是有关于较低的规律性水平而可以被归类为不同的低规律性类别。
再者,在另一实施例,相应于不同时间区段(例如早晨/上午时段、中午时段、下午时段、夜晚时段、上班工作时间、下班时间等等)的多个运动事件可以分别被归类到多个不同的类别,举例来说(但不限定),相应于上班工作时间的多个运动事件可以被归类为同一个上班时间类别,而相应于下班时间的多个运动事件可以被归类为另一个不同的下班时间类别。
相似地,对象的出现/发生/消失的不同时间点、出现及消失之间的不同时间长度、不同的时间戳及/或不同的运动方向/速度所相应的多个运动事件可以分别被归类为多个不同的类别,而相同/相似特征所相应的多个运动事件会被归类为同一个类别。
应注意的是,该处理电路1710能够根据上述特征信息的至少其中一个来将一个运动事件归类为多个类别,举例来说,出现于人们很少走动来去的地点并且于下班时间持续出现一特定时间长度的一个运动对象所相应的一运动事件可以被分类并具有三个不同的类别,以分别指示出该运动对象出现于人们很少走动去来的地点、该运动对象出现于下班时间以及该运动对象持续出现了一特定的时间长度。上述实施例并非是本发明的限制。
基于该些不同的感兴趣区域的所被归类的类别,该处理电路1710接着用来通过给予不同的分数至该些不同的感兴趣区域以对该些不同的感兴趣区域进行评分,以便产生该些不同的感兴趣区域的优先级别,举例来说(但不限定),对于安防监控而言,一树叶形状(或草地形状)类别会对应于一较低的分数,而人形类别或车辆形状类别则对应于较高的分数;一绿色类别对应于一较低的分数,而一不同颜色的类别会对应于一较高的分数;一高频率类别对应于一较低的分数,而一低频率类别会对应于一较高的分数;一高规律性类别会对应于一较低的分数,而一低规律性类别会对应于一较高的分数;一上班工作时间类别会对应于一较低的分数,而一下班时间类别会对应于一较高的分数。上述的实施例均并非是本发明的限制,其他实施例变型也适用于本发明。
在给予分数至该些不同的感兴趣区域的类别之后,该处理电路1710用来计算每一个感兴趣区域的所有分数的一总合或平均(或加权平均),接着基于该每一个感兴趣区域的分数的总合或平均来决定该些不同的感兴趣区域的优先级别,其中一个较高的分数总和或平均会对应于一较高的优先级别,举例来说,一第一感兴趣区域是有关于一运动对象在下班时间时发生于人们很少走动来去的地点并具有较低的规律性水平,该第一感兴趣区域的优先级别可以被排名为靠近于该排名清单的第一名(或是被排名为第一名),而一第二感兴趣区域是有关于另一运动对象例如摇晃树叶且具有较高的规律性水平,该第二感兴趣区域的优先级别可以被排名为靠近于该排名清单的最后一名(或被排为最后一名)。通过这样做,一旦一用户接收到该排名列表,该用户就可以用人眼较快速地察看该第一感兴趣区域内的监控图像以观看到重要运动事件的图像以及忽略例如该第二感兴趣区域的图像。
在另一实施例,该图像传感器装置1700能够提供一回授控制操作,该回授控制操作可以接收该用户的要求或回授控制以实时地或动态地调整一或多个感兴趣区域的一或多个优先级别。图20是本发明一实施例该图像传感器装置1700应用于安防监控系统中的方块示意图。在此实施例中,该处理电路1710用来将每一个感兴趣区域内的每一个运动事件标记上独特的识别(ID)信息,当一运动事件被该处理电路1710所侦测到,该处理电路1710会传送与该运动事件有关的图像流(image stream)以及相应所标记的ID信息至该后端系统1701,所标记的该ID信息可以用来作为该运动事件的一警报ID,该后端系统1701会产生包含有图像流及警报ID的警报视频给用户。
该用户可以通过操作该后端系统1701来产生一回授控制至该后端系统1701或是通过使用一行动装置来产生一回授控制信号至该后端系统1701,以调整相应于该运动事件的一感兴趣区域的优先级别(或该运动事件的优先级)。该后端系统1701会传送所调整的该优先级的信息及该警报ID至该图像传感器装置1700,而该处理电路1710能够调升或调降该运动事件所对应的该感兴趣区域的优先级别或者能够调整该运动事件的优先级。举例来说,在一实施例情境中,如果该运动事件及警报视频是与摇晃树叶有关(但不限定),亦即该运动事件与警报视频是该用户想要忽视的,则该用户可以对于该警报视频按压、点击或触控一不喜欢图标(dislike icon),该处理电路1710就能够基于有关于该警报视频所相应的警报ID信息的该运动事件的识别信息,调降该警报视频所相应的一特定感兴趣区域的优先级别。另外,在另一实施例情境中,一运动事件及警报视频是有关于一人形运动对象(但不限定),亦即该运动事件及警报视频是该用户可以对于该警报视频按压/点击/触控一喜欢图标(like icon),该处理电路1710能够基于与该警报视频所相应的被接收的警报ID信息有关的该运动事件的识别信息,调升或保持该警报视频所相应的一特定感兴趣区域的优先级别。如此,通过这样做,可以基于该用户的回授控制或行为来动态地或实时地更新该些感兴趣区域的排名列表给该用户。
另外,该处理电路1710用来分派不同的ID信息给具有一或多个相同特征的多个运动事件,举例来说,摇晃树叶的运动事件与摇晃草地的运动事件会被分别指派两个不同的独特的ID,其中该摇晃树叶与摇晃草地至少包括有绿色的相同特征。接着,该处理电路1710将相有一或多个相同特征的该些运动事件归类为同一个事件群组(亦即同一个类别/类型)。接着,因应于该用户对于该些运动事件中的一特定运动事件的调整设定,该处理电路1710能够基于该些不同的ID来判断出或识别出与属于同一个事件群组(或同一个类别)的该些运动事件有关的一或多个感兴趣区域。接着,该处理电路1710能够根据该用户对于一特定感兴趣区域中的特定运动事件所作的同一个或相同的调整,一起调整该一或多个感兴趣区域的一或多个优先级别。也就是说,如果该用户想要调整一特定运动事件的优先级,该处理电路1710可以基于该些不同的ID来判断出哪些运动事件及哪些感兴趣区域是与该特定运动事件的类别有关,以及接着可以基于对于该特定运动事件所的相同调整方式来调整所判定的一或多个感兴趣区域的一或多个优先级别。
再者,在其他实施例,该图像传感器装置1700或该安防监控系统可以包含有不同的通知模式。该处理电路1710能够基于该些感兴趣区域的不同的优先级别,采用不同的通知模式,并根据该些不同的通知模式来传送与多个不同的感兴趣区域有关的不同的警报视频通知给该用户。该处理电路1710会根据第一通知模式来传送一第一通知至该用户以通知该用户关于一第一运动事件发生于一第一感兴趣区域内的信息,并且也会根据第二通知模式来传送一第二通知至该用户以通知该用户关于一第二运动事件发生于一第二感兴趣区域内的信息,其中当该第一感兴趣区域的优先级别较高于该第二感兴趣区域的优先级别时,该第一通知模式较紧急于该第二通知模式。再者,该些优先级别可以基于该用户的调整或要求而被动态地或实时地调整,举例来说,如果该处理电路1710侦测到一运动事件出现于一特定感兴趣区域内,该处理电路1710根据一立即通知模式会立刻传送一通知给该用户,而一用户可以对于该运动事件的警报视频按压/点击/触控一不喜欢图标以送出一回授控制信号至该后端系统1701,而该处理电路1710能够根据从该后端系统1701所传送来的该回授控制讯号来降低该特定感兴趣区域的优先级别,以及如果一个相同或相似运动事件再度发生于该特定感兴趣区域中时使用一稍后通知模式来通知该用户,其中该稍后通知模式指的是在等候一段时间之后才会产生该通知至该用户,该段时间例如是几分钟、几小时或几天等等。另外,该稍后通知模式也可以指的是该处理电路1710能够在等待该段时间之后产生该特定感兴趣区域内所有运动事件的相同/相似/不同的特征有关的一汇总回报(summary report)给该用户。另外,如果该用户对于一个相同或相似的运动事件的一警报视频持续地按压/点击/触控不喜欢的图标,则当该相同或相似的运动事件再度发生于该特定感兴趣区域中时,该处理电路1710可以判断不要通知该用户。
另外,在其他实施例,不同图像传感器装置所侦测到的多个运动事件的多个不同图像流可以被合并或结合来产生并提供一合并后的图像流给该用户。请参照图21,图21是本发明一实施例分别被包含或安装于在一安防监控系统中的不同位置上所设置的多个不同摄像头装置内的多个图像传感器装置1700A、1700B与1700C的范例示意图。应注意的是,图21显示了三个图像传感器装置,然而这并非是本案的限制,图像传感器装置的个数也可以等于或大于2。此外,该些图像传感器装置所设置的地点位置也并不限定。如图21中所示,该些图像传感器装置1700A、1700B与1700C被用来在不同地点位置上基于不同的视角A1、A2与A3来捕捉监控图像,以产生多个图像流。在本实施例中,该些图像传感器装置1700A、1700B与1700C分别包含有相应的感测电路1705A、1705B与1705C以及相应的处理电路1710A、1710B与1710C,电路1705A、1705B与1705C以及1710A、1710B与1710C的基本的功能与操作均分别相似于上述电路1705及1710的功能及操作,此外,该后端系统1701另包含有一系统储存区1702,该系统储存区1702可被一内存电路所实现并用来储存多个图像流、多个运动事件、多个相应的时间戳以及多个相应的ID。
举例来说,在一实施例,一运动对象例如人形对象(但不限定)依序地出现于该些图像传感器装置1700A、1700B与1700C的相应的视角中,也就是说说,该些图像传感器装置1700A、1700B与1700C可依序使用多个不同或相同的感兴趣区域来捕捉相应于该运动对象的多个图像流。
举例来说,该处理电路1710A可以从该感测电路1705A所产生的多个监控图像上的一感兴趣区域RA内侦测到与该人形运动对象有关的一运动事件EA,该处理电路1710A可用来识别并产生该运动事件EA的特征信息以及也将时间戳tA与独特的识别信息ID_A标记于该运动事件EA。接着,该处理电路1710A会传送并输出该运动事件EA、运动事件EA的多个图像流、时间戳tA以及该识别信息ID_A至该后端系统1701,而该后端系统1701会将该些信息储存至该系统储存区1702。
稍后,该处理电路1710B也可以从该感测电路1705B所产生的多个监控图像上的一感兴趣区域RB内侦测到也与同一个人形运动对象有关的一运动事件EB,该处理电路1710B会用来识别并产生该运动事件EB的特征信息以及将一时间戳tB标记于该运动事件EA。在这个情况中,该处理电路1710B会被安排来传送一要求信号至该后端系统1701,以令该后端系统1701根据运动事件EB的所产生的特征信息以及该时间戳tB来搜寻该系统储存区1702的空间。该后端系统1701能够比较运动事件EB的该特征信息(及/或时间戳tB)与所储存的特征信息例如运动事件EA的特征信息(及/或所储存的时间戳例如时间戳tA),以检查该些特征是否相同或相似及/或检查该些时间戳是否是邻近的或靠近的。
在这个例子中,运动事件EA与EB的特征是相同/相似的以及该相应的两时间戳也是邻近的,该后端系统1701会被安排用来传送前一个运动事件EA的ID至该处理电路1710B。如果该些特征是不同的或是不相似的并且该些相应的时间戳也是不邻近的或不靠近的,则该后端系统1701不会传送前一个运动事件EA的识别信息ID_A,而会通知该处理电路1710B需使用一个新的独特识别信息。在接收到运动事件EA的识别信息ID_A之后,该处理电路1710B会使用识别信息ID_A作为该运动事件EB的识别信息,将识别信息ID_A标记至该运动事件EB的多个图像流,以及输出该运动事件EB的多个图像流至该后端系统1710。
相似地,对于该图像传感器装置1700C,如果运动事件EC的特征是相同于或相似于运动事件EA或EB的特征及/或时间戳tC是邻近于时间戳EA或EB,则该处理电路1710C可以将该识别信息ID_A标记至一被侦测到的运动事件EC的多个图像流,并接着传送该些图像流与该识别信息ID_A至该后端系统1701。最后,该后端系统1701可以根据该些时间戳的顺序或序列来合并或组合/结合具有相同或相似特征的该些运动事件的图像流,以产生一合并后的图像流作为输出至该用户的一警报视频。举例来说,如果该时间戳tC较晚于该时间戳tB并且该时间戳tB较晚于该时间戳tA,则该合并后的图像流会包含有运动事件EA的图像流、跟随于运动事件EA之后的运动事件EB的图像流以及跟随于运动事件EB之后的运动事件EC的图像流。
通过如此作法,该用户可以直接察看包含有该人形运动对象通过该些图像传感器装置1700A、1700B与1700C所设置的地点的全部或完整的移动历程的一警报视频,对于该用户来说,由于该用户不需要手动检查不同的摄像头装置,上述作法显然更加方法。
此外,在另一实施例,如果有需要的话,则每一个处理电路1710A、1710B与1710C均能够合并该些图像流。举例来说,该系统储存区1702能够被设置于该后端系统内部或是外部,并通过有线或无线通信耦接于该些图像传感器装置1700A、1700B与1700C。在上述人形运动对象的例子中,该处理电路例如1710B能够根据所产生的运动事件EB的特征信息及该时间戳tB搜寻该系统储存区1702的空间,以比对运动事件EB的该特征信息(及/或该时间戳tB)与所储存的特征信息例如运动事件EA的特征信息(及/或所储存的时间戳例如时间戳tA)来检查该些特征是否相同或相似及/或检查该些时间戳是否是相邻的或靠近的。在这个情况中,该些运动事件EA与EB的特征是相同/相似的以及该些相应的时间戳也是邻近的,该处理电路1710B会使用运动事件EA的识别信息ID_A作为运动事件EB的一识别信息,亦即将识别信息ID_A标记至运动事件EB,使得由于同一个识别信息ID_A关系在等效上该些运动事件EA与EB的多个图像流可以被合并为一个图像流以及该些相应的时间戳tA与tB也可以被合并。
反之,如果该些特征是不同的或不相似的以及该些相应的时间戳是不邻近的或不靠近的,则该处理电路1710B会使用不同于识别信息ID_A的一个独特且新的识别信息作为运动事件EB的一识别信息,而由于是不同的识别信息,所以该些图像流在这个情况下并没有被合并。
相似地,在该例子中,该处理电路1710C稍后也可以使用运动事件EA的识别信息ID_A作为运动事件EC的一识别信息,亦即将识别信息ID_A标记至运动事件EC,使得由于同一个识别信息ID_A关系在等效上该些运动事件EA、EB与EC的多个图像流可以被合并为一个图像流以及该些相应的时间戳tA、tB与tC也可以被合并。接着,该后端系统1701可以根据时间戳tA、tB与tC的顺序或序列以及运动事件EA、EB与EC的同一个识别信息ID_A,直接输出包含有该些运动事件EA、EB与EC的多个图像流所形成的一警报视频给该用户。
通过这样的做法,一旦该用户发送一用户要求至该后端系统1701以要求设置于一特定地点的一特定摄像头装置的监控图像时,该后端系统1701除了能够输出该特定摄像头装置的图像流之外,还能够自动地输出与相同/相似特征及/或邻近的时间戳有关的其他摄像头装置的其他图像流给该用户,该些其他摄像头装置可以被设置于空间上邻近的地点或是也可以被设置于其他不同的地点或不同的建筑物中。也就是说,如果一第一运动事件的识别信息相同于一第二运动事件的识别信息,因应于该用户要求是要求该第二运动事件的情况下,该些图像传感器装置1700A、1700B与1700C能够产生并输出该第一运动事件的至少一图像及该第二运动事件的至少一图像给该用户。
应注意的是,每一个处理电路均能够被安排用来比对该些时间戳以判断该些时间戳是否是邻近的或靠近的,举例来说,如果一第二时间戳后面跟随了N个时间戳并且该N个时间戳后面跟随了一第一时间戳(其中N的值可以是从零至一阀值的范围),则该处理电路可以判定该第二时间戳是邻近于或靠近于该第一时间戳。也就是说,如果两时间戳是被超过N个以上的连续时间戳所隔开,则该两个时间戳会被判定为是不邻近的,反之,就会被判定为是邻近的。然而,这个例子的定义只是用来说明之用,并非是本发明的限制。
此外,如果一第二运动事件的一时间戳是在一第一运动事件的时间戳前面并且该两个运动事件是有关于相同/相似的特征,则该些处理电路1710A、1710B或1710C可以判定该第一运动事件为从该系统储存区1702所获得到的该第二运动事件的下一个运动事件。
再者在一实施例,如果该些图像传感器装置所产生出的该些运动事件是有关于相同/相似的特征及/或邻近的多个时间戳,则该后端系统1701或每一个图像传感器装置1700A、1700B与1700C均能够储存多个图像传感器装置之间的关系数据。举例来说,在上述例子中,该些图像传感器装置1700A、1700B与1700C可以分别并依序地侦测出该些运动事件EA、EB与EC,且该些运动事件EA、EB与EC均全部有关于同一个运动对象,例如一人形运动对象通过该些图像传感器装置1700A、1700B与1700C所设置的地点。该些运动事件EA、EB与EC是有关于相同/相似的特征以及邻近的多个时间戳,其中该时间戳tC较晚于该时间戳tB,该时间戳tB较晚于该时间戳tA。
对于该图像传感器装置1700B,当侦测到该运动事件EB时,该处理电路1710B可以比对运动事件EB与EA的特征及时间戳,接着判断出该些特征是相同/相似的以及该些时间戳是邻近的,在这个情况下,除了使用运动事件EA的识别信息作为运动事件EB的识别信息之外,该处理电路1710B还另外产生装置1700A与1700B的一关系数据RD1,以指出该些装置具有某一关系,而其中该关系数据RD1相应于该些运动事件EA与EB的同一个识别信息。该关系数据RD1会被传送至该图像传感器装置1700A,使得每一个该图像传感器装置1700A与1700B均储存有相应于同一个识别信息的关系数据RD1。
接着,对于该图像传感器装置1700C,当侦测到该运动事件EC时,该处理电路1710C能够比对该些运动事件EC与EB(或EA)的该些特征及该些时间戳,接着判断出该些特征是相同/相似的以及该些时间戳是邻近的,在这个情况下,除了使用运动事件EA的识别信息(亦即由于该识别信息是相同的所以也等于是运动事件EB的识别信息)作为运动事件EC的识别信息之外,该处理电路1710C还另外产生该些装置1700A、1700B与1700C的另一关系数据RD2,以指出该三个装置具有某一关系,而其中该另一个关系数据RD2相应于该些运动事件EA、EB与EC的同一个识别信息。该关系数据RD2会被传送至该图像传感器装置1700A与1700B,使的每一个图像传感器装置1700A、1700B与1700C均能够储存有相应于同一个识别信息的该关系数据RD2。应注意的是,由于数据RD1与RD2均是有关于同一个识别信息并且数据RD2的产生版本较新,因此在图像传感器装置1700A与1700B中该关系数据RD2将会取代该关系数据RD1。
稍后,当任一图像传感器装置被致能并侦测到一特定或任何运动对象有关的一运动事件时,一图像传感器装置就能够产生一触发信号至由所储存的关系数据所指出的其他邻近的一或多个图像传感器装置。举例来说,如图21中所示,该图像传感器装置1700A(但不限定)可以基于上述的关系数据RD2通过有线/无线通信发送一触发信号至其他的图像传感器装置1700B与1700C。一旦接收到该触发信号,该些其他的图像传感器装置1700B与1700C就能够分别立刻退出一省电模式并进入一监控模式,使得该些图像传感器装置1700B与1700C能够准备好以侦测并监控该特定或任一运动对象的运动或移动,以便预录一或多个监控图像。
再者,在另一实施例,该些其他的图像传感器装置1700B与1700C也可以依序地进入至该监控模式,举例来说,该关系数据RD2也可以记载该些时间戳tA、tB与tC的信息,该图像传感器装置1700A可以基于该关系数据RD2来识别出哪一个图像传感器装置是下一个准好要侦测该特定或任一运动对象的移动的一图像传感器装置(此例子中亦即是图像传感器装置1700B),并接着只发送一触发信号给该图像传感器装置1700B。一旦接收到该触发信号,该图像传感器装置1700B就会进入到该监控模式,而由于此时还没有传送该触发信号给该图像传感器装置1700C,所以该图像传感器装置1700C仍然被保持于该省电模式中。接着,当该图像传感器装置1700B也侦测到该特定或任一运动对象的移动时,其会基于该关系数据RD2(其指出了时间戳tC较晚于时间戳tB),发送一触发信号至该图像传感器装置1700C。一旦接收到该触发信号,该图像传感器装置1700C就会进入到该监控模式。也就是说,多个邻近的图像传感器装置可以被安排同时地进入到该监控模式,或者也可以被安排为基于该关系数据一个一个依序地进入到该监控模式,此操作可由该用户的喜好设定来进行设置或调整。
再者,在其他实施例,发送该触发信号至其他一或多个邻近的图像传感器装置的操作也可以是由该后端系统1701所控制及执行,也就是说,该关系数据例如RD2也可以是储存于该后端系统1701中。当该图像传感器装置1700A侦测到一运动对象时,该后端系统1701可以基于该关系数据RD2,发送该触发信号给该图像传感器装置1700B及/或该图像传感器装置1700C。
再者,在一实施例,该后端系统1701能够根据该关系数据RD2自动地产生并输出该些邻近的图像传感器装置1700A、1700B与1700C的一排名列表给该用户,该排名列表并没有包括与该群图像传感器装置1700A、1700B与1700C的其中任一个装置不邻近的一或多个图像传感器装置。亦即,该后端系统1701能够根据多个不同组的关系数据,产生不同群的图像传感器装置的多个不同的排名列表给该用户,而该不同群的图像传感器装置的多个不同的排名清单也可以与每一个图像传感器装置的多个感兴趣区域的该排名列表进行合并与结合。如此一来,举例来说,当该用户对于一特定图像传感器装置(或特定图像传感器装置的特定感兴趣区域)的一通知/警报视频按压/点击/触控一喜好图标时,邻近于该特定图像传感器的一或多个图像传感器装置就可以排列于一个排名清单的顶端,并且同时在该排口清单中与该特定感兴趣区域的相同/相似特征有关的一或多个感兴趣区域也可以被排名于与该相同/相似特征无关的一或多个感兴趣区域的前面。以上的所有操作均可以由该后端系统1701或每一图像传感器装置所控制,不再另外详述以简化说明书的篇幅。
另外,在一实施例,包含有一图像传感器装置的一摄像头装置的设置地点也可以远离其他的装置的地点。图22及图23是根据本发明的不同实施例该些图像传感器装置的不同范例的示意图。如图22中所示,该图像传感器装置1700C远离了其他的图像传感器装置1700A与1700B,而如果该图像传感器装置1700C并没有侦测到具有与其他图像传感器装置1700A、1700B所侦测到的运动事件的特征相同/相似的特征的一或多个运动事件的话,则该处理电路1710C会判断出该装置1700与其他装置1700A、1700B之间并没有具有一特定关系。在这个情况中,该处理电路1710A及处理电路1710B两者均不会发送触发信号至该图像传感器装置1700C。反之,如图23的范例所示,该图像传感器装置1700C虽然也是远离了其他的图像传感器装置1700A、1700B,然而由于该图像传感器装置1700C侦测到了具有与其他图像传感器装置1700A、1700B所侦测到的运动事件的特征相同/相似的特征的一或多个运动事件,所以该处理电路1710C会判定装置1700C确实与其他装置1700A、1700B具有一特定的关系。举例来说,该图像传感器装置1700C也可以在不邻近的时间戳时侦测到同一个人形运动对象的多个运动事件,在这样的情况下,该处理电路1710A或处理电路1710B会被安排为需要发送该触发信号至该图像传感器装置1700C。
再者,应注意的是,上述的操作均能够被应用于侦测及监控一或多个车辆,其中一车辆的特征可以另包含有该车辆的车牌、车身的颜色、车的大小、车的形状、车的高度等等的其中至少一个。
为了令读者更易于明白本发明的合并多个不同图像传感器装置的多个图像流的操作以及控制一图像传感器装置来预录图像流的操作,图24揭示了本发明的实施例合并多个不同图像传感器装置的多个图像流的方法以及预录图像流的方法的流程示意图。步骤说明描述于下:
步骤S2400:开始;
步骤S2405:第一图像传感器装置捕捉多个图像流、侦测与第一运动对象有关的第一运动事件以及产生第一运动事件的特征信息;
步骤S2410:第一图像传感器装置判断第一运动事件的特征信息是否相同或相似于第二图像传感器装置所产生的第二运动事件的特征信息,如果特征信息是相同或相似的,则流程进行步骤S2415,反之,流程进行步骤S2420;
步骤S2415:第一图像传感器装置使用第二运动事件的识别信息作为第一运动事件的识别信息;
步骤S2420:第一图像传感器装置使用不同的识别信息作为第一运动事件的识别信息;
步骤S2425:如果特征信息是相同或相似的,合并第一运动事件及第二运动事件的多个图像流;
步骤S2430:基于同一个识别数据,产生并储存第一与第二图像传感器装置的关系数据;
步骤S2435:当一个图像传感器装置被致能并侦测到一运动对象时,发送触发信号至第一与第二图像传感器装置的另一个授置,以令该另一个装置进入监控模式来预录监控图像;以及
步骤S2440:结束。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (27)

1.一种应用于图像传感器装置的运动侦测方法,其特征在于,包含:
提供在监控图像上的多个感兴趣区域;
对于每一个感兴趣区域:
侦测是否有运动事件发生于该每一个感兴趣区域;以及
根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及
根据该多个感兴趣区域的多个优先级别,决定用户的该多个感兴趣区域的警报排程。
2.如权利要求1所述的运动侦测方法,其特征在于,该运动事件的该特征信息包含有下列中的至少其中一个:发生的时间、该运动事件消失的时间、该运动事件发生与消失之间的时间长度、该运动事件发生的频率、该运动事件发生的规律性水平、该运动事件的时间戳、在该运动事件中的运动对象的形状、颜色或大小以及该运动对象的运动方向或运动速度。
3.如权利要求1所述的运动侦测方法,其特征在于,另包含有:
通过侦测一或多个运动对象是否发生于该每一个感兴趣区域内来侦测是否有该运动事件于该每一个感兴趣区域内发生;以及
比较该一或多个运动对象的一或多个特征信息及候选的特征信息来判断该运动事件的该特征信息。
4.如权利要求3所述的运动侦测方法,其特征在于,另包含有:
将独特识别信息标记于该运动事件。
5.如权利要求1所述的运动侦测方法,其特征在于,另包含有:
指派不同的识别信息给具有相同的特征信息的多个运动事件;
将具有该相同的特征信息的该多个运动事件分类至同一个事件群组;以及
因应于用户对于该多个运动事件中的一特别运动事件的调整设定,根据该不同的识别信息来决定该多个运动事件所发生的一或多个感兴趣区域,以及接着根据该用户的调整设定中的相同调整来调整该一或多个感兴趣区域的一或多个优先级别。
6.如权利要求1所述的运动侦测方法,其特征在于,另包含有:
根据第一通知模式传送第一通知给该用户以通知该用户第一运动事件发生于第一感兴趣区域内的信息;以及
根据第二通知模式传送第二通知给该用户以通知该用户第二运动事件发生于第二感兴趣区域内的信息;
其中当该第一感兴趣区域的优先级别较高于该第二感兴趣区域的优先级别时,该第一通知模式较紧急于该第二通知模式。
7.如权利要求1所述的运动侦测方法,其特征在于,该第一通知模式为立即通知模式,而该第二通知模式为稍后通知模式。
8.如权利要求1所述的运动侦测方法,其特征在于,另包含有:
当侦测到从该图像传感器装置所产生的第一监控图像上的第一感兴趣区域内的第一运动事件时,产生该第一运动事件的第一特征信息以及第一时间戳;
根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及
使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
9.一种应用于图像传感器装置的运动侦测方法,包括:
当侦测到从该图像传感器装置所产生的第一监控图像上的第一感兴趣区域内的第一运动事件时,产生该第一运动事件的第一特征信息以及第一时间戳;
根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及
使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
10.如权利要求9所述的运动侦测方法,其特征在于,另包含有:
因应于对应到该第二运动事件的用户的要求,根据相同于该第二运动事件的该识别信息的该第一运动事件的该识别信息,产生并输出该第一运动事件的图像以及该第二运动事件的图像给该用户。
11.如权利要求9所述的运动侦测方法,其特征在于,对应到该第二运动事件的第二时间戳之后跟随了N个时间戳,该N个时间戳之后跟随了该第一时间戳,其中N的数值为从零至某一阀值的数值。
12.如权利要求9所述的运动侦测方法,其特征在于,该第一运动事件为该第二运动事件的下一个运动事件,该第二运动事件是基于较早于该第一时间戳的第二时间戳从该系统储存区所获得。
13.如权利要求9所述的运动侦测方法,其特征在于,另包含有:
当该第二运动事件的该识别信息等于该第一运动事件的该识别信息时,储存该图像传感器装置与该另一个不同图像传感器装置的关系数据;
从该另一个不同图像传感器装置接收触发信号,该触发信号是当该另一个不同图像传感器装置侦测到该第二运动事件时所被产生的;以及
根据该触发信号及该关系数据,将该图像传感器装置开机来感测一或多个监控图像,以预录该一或多个监控图像。
14.如权利要求13所述的运动侦测方法,其特征在于,另包含有:
根据多个图像传感器装置之间的一或多个关系数据,自动产生并输出该多个图像传感器装置的排名列表给该用户。
15.一种图像传感器装置,其特征在于,包括:
一感测电路,用来产生监控图像以及提供该监控图像上的多个感兴趣区域;
一处理电路,耦接于该感测电路,用来:
对于每一个感兴趣区域:
侦测是否有运动事件发生于该每一个感兴趣区域;以及
根据该运动事件的特征信息,决定该每一个感兴趣区域的优先级别;以及
根据该多个感兴趣区域的多个优先级别,决定该多个感兴趣区域的警报排程给用户。
16.如权利要求15所述的图像传感器装置,其特征在于,该运动事件的该特征信息包含有下列中的至少其中一个:出现或发生的时间、该运动事件消失的时间、该运动事件发生与消失之间的时间长度、该运动事件发生的频率、该运动事件发生的规律性水平、该运动事件的时间戳、在该运动事件中的运动对象的形状、颜色或大小以及该运动对象的运动方向或运动速度。
17.如权利要求15所述的图像传感器装置,其特征在于,该处理电路用来:
通过侦测一或多个运动对象是否发生于该每一个感兴趣区域内来侦测是否有该运动事件发生于该每一个感兴趣区域内;以及
比较该一或多个运动对象的一或多个特征信息与候选的特征信息来决定该运动事件的该特征信息。
18.如权利要求17所述的图像传感器装置,其特征在于,该处理电路另用来:将独特识别信息标记于该运动事件。
19.如权利要求15所述的图像传感器装置,其特征在于,该处理电路另用来:指派不同的识别信息给具有相同的特征信息的多个运动事件;
将具有该相同的特征信息的该多个运动事件分类至同一个事件群组;以及
因应于用户对于该多个运动事件中的一特别运动事件的调整设定,根据该不同的识别信息来决定该多个运动事件所发生的一或多个感兴趣区域,以及接着根据该用户的调整设定中的相同调整来调整该一或多个感兴趣区域的一或多个优先级别。
20.如权利要求15所述的图像传感器装置,其特征在于,该处理电路另用来:
根据第一通知模式传送第一通知给该用户以通知该用户第一运动事件发生于第一感兴趣区域内的信息;以及
根据第二通知模式传送第二通知给该用户以通知该用户第二运动事件发生于第二感兴趣区域内的信息;
其中当该第一感兴趣区域的优先级别较高于该第二感兴趣区域的优先级别时,该第一通知模式较紧急于该第二通知模式。
21.如权利要求15所述的图像传感器装置,其特征在于,该处理电路另用来:
当侦测到从该图像传感器装置所产生的第一监控图像上的第一感兴趣区域内的第一运动事件时,产生该第一运动事件的第一特征信息以及第一时间戳;
根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及
使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
22.一种图像传感器装置,其特征在于,包含有:
一感测电路,用来感测第一监控图像;以及
一处理电路,耦接于该感测电路,用来:
侦测从该感测电所产生的该第一监控图像上的第一感兴趣区域内的第一运动事件;
产生该第一运动事件的第一特征信息及第一时间戳;
根据该第一特征信息及该第一时间戳,搜寻电性耦接至另一个不同图像传感器装置的系统储存区,以得到从该另一个不同图像传感器装置所产生的第二监控图像上的第二感兴趣区域内的第二运动事件;以及
使用该第二运动事件的识别信息作为该第一运动事件的识别信息,以结合该第二运动事件与该第一运动事件。
23.如权利要求22所述的图像传感器装置,其特征在于,该处理电路另用来:
因应于对应到该第二运动事件的用户的要求,根据相同于该第二运动事件的该识别信息的该第一运动事件的该识别信息,产生并输出该第一运动事件的图像以及该第二运动事件的图像给该用户。
24.如权利要求22所述的图像传感器装置,其特征在于,对应到该第二运动事件的第二时间戳之后跟随了N个时间戳,该N个时间戳之后跟随了该第一时间戳,其中N的数值为从零至某一阀值的数值。
25.如权利要求22所述的图像传感器装置,其特征在于,该第一运动事件为该第二运动事件的下一个运动事件,该第二运动事件是基于较早于该第一时间戳的第二时间戳从该系统储存区所获得。
26.如权利要求22所述的图像传感器装置,其特征在于,该处理电路另用来:
当该第二运动事件的该识别信息等于该第一运动事件的该识别信息时,储存该图像传感器装置与该另一个不同图像传感器装置的关系数据;
从该另一个不同图像传感器装置接收触发信号,该触发信号是当该另一个不同图像传感器装置侦测到该第二运动事件时所被产生的;以及
根据该触发信号及该关系数据,将该图像传感器装置开机来感测一或多个监控图像,以预录该一或多个监控图像。
27.如权利要求26所述的图像传感器装置,其特征在于,该处理电路另用来:
根据该多个图像传感器装置之间的一或多个关系数据,自动产生并输出该多个图像传感器装置的排名列表给该用户。
CN202110753158.6A 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置 Active CN113923344B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311854488.XA CN117729438A (zh) 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US16/924,285 2020-07-09
US16/924,285 US11212484B2 (en) 2019-06-05 2020-07-09 Photographing device outputting tagged image frames
US17/151,625 US11336870B2 (en) 2017-12-26 2021-01-18 Smart motion detection device and related determining method
US17/151,625 2021-01-18
US17/326,298 2021-05-20
US17/326,298 US11405581B2 (en) 2017-12-26 2021-05-20 Motion detection methods and image sensor devices capable of generating ranking list of regions of interest and pre-recording monitoring images

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202311854488.XA Division CN117729438A (zh) 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置

Publications (2)

Publication Number Publication Date
CN113923344A true CN113923344A (zh) 2022-01-11
CN113923344B CN113923344B (zh) 2024-02-06

Family

ID=79232801

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202311854488.XA Pending CN117729438A (zh) 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置
CN202110753158.6A Active CN113923344B (zh) 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202311854488.XA Pending CN117729438A (zh) 2020-07-09 2021-07-02 运动侦测方法及图像传感器装置

Country Status (1)

Country Link
CN (2) CN117729438A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012590A (ja) * 2003-06-20 2005-01-13 Sanyo Electric Co Ltd 監視カメラシステム
JP2012164327A (ja) * 2012-03-28 2012-08-30 Hitachi Kokusai Electric Inc ナビゲーション装置、受信装置、及び移動体情報提供装置
CN104766295A (zh) * 2014-01-02 2015-07-08 三星泰科威株式会社 热图提供设备和方法
TW201530495A (zh) * 2014-01-22 2015-08-01 Univ Nat Taiwan Science Tech 移動物體追蹤方法及電子裝置
US9549125B1 (en) * 2015-09-01 2017-01-17 Amazon Technologies, Inc. Focus specification and focus stabilization
US20170111595A1 (en) * 2015-10-15 2017-04-20 Microsoft Technology Licensing, Llc Methods and apparatuses for controlling video content displayed to a viewer
CN108021619A (zh) * 2017-11-13 2018-05-11 星潮闪耀移动网络科技(中国)有限公司 一种事件描述对象推荐方法及装置
JP2018151689A (ja) * 2017-03-09 2018-09-27 キヤノン株式会社 画像処理装置及びその制御方法、プログラム、記憶媒体
WO2018208365A1 (en) * 2017-05-12 2018-11-15 Google Llc Methods and systems for presenting image data for detected regions of interest

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012590A (ja) * 2003-06-20 2005-01-13 Sanyo Electric Co Ltd 監視カメラシステム
JP2012164327A (ja) * 2012-03-28 2012-08-30 Hitachi Kokusai Electric Inc ナビゲーション装置、受信装置、及び移動体情報提供装置
CN104766295A (zh) * 2014-01-02 2015-07-08 三星泰科威株式会社 热图提供设备和方法
TW201530495A (zh) * 2014-01-22 2015-08-01 Univ Nat Taiwan Science Tech 移動物體追蹤方法及電子裝置
US9549125B1 (en) * 2015-09-01 2017-01-17 Amazon Technologies, Inc. Focus specification and focus stabilization
US20170111595A1 (en) * 2015-10-15 2017-04-20 Microsoft Technology Licensing, Llc Methods and apparatuses for controlling video content displayed to a viewer
JP2018151689A (ja) * 2017-03-09 2018-09-27 キヤノン株式会社 画像処理装置及びその制御方法、プログラム、記憶媒体
WO2018208365A1 (en) * 2017-05-12 2018-11-15 Google Llc Methods and systems for presenting image data for detected regions of interest
CN108021619A (zh) * 2017-11-13 2018-05-11 星潮闪耀移动网络科技(中国)有限公司 一种事件描述对象推荐方法及装置

Also Published As

Publication number Publication date
CN117729438A (zh) 2024-03-19
CN113923344B (zh) 2024-02-06

Similar Documents

Publication Publication Date Title
US11405581B2 (en) Motion detection methods and image sensor devices capable of generating ranking list of regions of interest and pre-recording monitoring images
US10127452B2 (en) Relevant image detection in a camera, recorder, or video streaming device
US11308777B2 (en) Image capturing apparatus with variable event detecting condition
US11416063B2 (en) Scene-based sensor networks
JP6422955B2 (ja) コンピュータビジョンアプリケーション処理
US8184154B2 (en) Video surveillance correlating detected moving objects and RF signals
KR101001060B1 (ko) 트래킹 장치, 트래킹 방법, 트래킹 장치의 제어 프로그램, 및 컴퓨터 판독 가능한 기록 매체
US10769913B2 (en) Cloud-based video surveillance management system
US10708496B2 (en) Analytics based power management for cameras
Civelek et al. Automated moving object classification in wireless multimedia sensor networks
CN109963046B (zh) 移动侦测装置以及相关移动侦测方法
US11412714B2 (en) Pet monitoring method and pet monitoring system
US20220004748A1 (en) Video display method, device and system, and video camera
JP3942606B2 (ja) 変化検出装置
JP2007180829A (ja) 監視システム、監視方法、及び該方法を実行させるためのプログラム
US20210144343A1 (en) Smart motion detection device and related determining method
KR100653825B1 (ko) 변화검출방법 및 장치
CN113923344B (zh) 运动侦测方法及图像传感器装置
US20220237918A1 (en) Monitoring camera and learning model setting support system
CN114374797A (zh) 具有两个输出接口的摄像装置
KR20120082201A (ko) 영상 감시 시스템 및 방법
KR100486952B1 (ko) 인체감지센서와 ccd 카메라를 사용한 침입자 감시 시스템
KR20110096342A (ko) 지역방범시스템 및 이의 운영방법
CN114827450A (zh) 模拟图像传感器电路、图像传感器装置及方法
KR102479405B1 (ko) 공간 네트워크 기반 지능형 cctv 관리 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant