CN114265626A - 控制方法及控制系统 - Google Patents
控制方法及控制系统 Download PDFInfo
- Publication number
- CN114265626A CN114265626A CN202111410361.XA CN202111410361A CN114265626A CN 114265626 A CN114265626 A CN 114265626A CN 202111410361 A CN202111410361 A CN 202111410361A CN 114265626 A CN114265626 A CN 114265626A
- Authority
- CN
- China
- Prior art keywords
- frame
- target object
- value
- human
- trend
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000001514 detection method Methods 0.000 claims abstract description 95
- 230000007958 sleep Effects 0.000 claims abstract description 20
- 238000004364 calculation method Methods 0.000 claims description 205
- 230000003321 amplification Effects 0.000 claims description 34
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 34
- 230000005059 dormancy Effects 0.000 abstract description 6
- 238000013459 approach Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 16
- 238000012549 training Methods 0.000 description 13
- 230000009286 beneficial effect Effects 0.000 description 12
- 238000003062 neural network model Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000013138 pruning Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Abstract
本发明提供了一种控制方法,应用于电子设备,控制电子设备的唤醒和休眠,所述控制方法包括获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像,对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠,能够通过视频流数据中目标对象的运动变化以及目标对象的运动变化趋势,在人物接近电子设备或远离电子设备时,及时控制电子设备唤醒或休眠,提高了电子设备的气动速度,并且及时控制电子设备休眠,降低了电子设备的功耗。本发明还提供了一种实现控制方法的控制系统。
Description
技术领域
本发明涉及控制系统技术领域,尤其涉及一种控制方法及控制系统。
背景技术
目前的电子设备都需要操作人员到达面前后手动唤醒,这样导致操作人员无法在到达电子设备面前时立刻使用,不便于操作人员使用,并且在操作人员离开时,也需要手动控制或很长时间之后,电子设备才会进入休眠状态,增加了电子设备的功耗。
因此,有必要提供一种新型的控制方法及控制系统以解决现有技术中存在的上述问题。
发明内容
本发明的目的在于提供一种控制方法及控制系统,便于自动控制电子设备的唤醒或休眠,提高电子设备的启动速度以及降低电子设备的功耗。
为实现上述目的,本发明的所述控制方法,应用于电子设备,控制电子设备的唤醒和休眠,所述控制方法包括:
获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;
对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;
根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。
所述控制方法的有益效果在于:获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像,对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠,能够通过视频流数据中目标对象的运动变化以及目标对象的运动变化趋势,在人物接近电子设备或远离电子设备时,及时控制电子设备唤醒或休眠,提高了电子设备的气动速度,并且及时控制电子设备休眠,降低了电子设备的功耗。
可选地,所述获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像,包括:
提取所述视频流数据中的多帧图像,检测所述图像中是否存在目标对象;
将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化;
若判断所述目标对象存在运动变化,则获取所述目标对象存在运动变化的图像。其有益效果在于:便于准确的获取目标对象存在运动变化的图像。
可选地,所述将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化,包括:
将存在所述目标对象且相邻的两帧图像进行对比,以确定所述存在所述目标对象且相邻的两帧图像的差异度;
将所述差异度与差异度阈值进行对比,以判断所述差异度是否小于或等于所述差异度阈值;
若判断所述差异度小于或等于所述差异度阈值,则判断所述目标对象不存在运动变化;
若所述差异度大于所述差异度阈值,则判断所述目标对象存在运动变化。其有益效果在于:避免因视频流数据获取时的不准确行以环境的微小改变导致运动变化检测的不准确性。
可选地,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框;
根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势。
可选地,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人脸检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人脸,当所述图像中存在人脸时,从所述图像中获取到人脸框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框。其有益效果在于:便于通过对帧计数的计算提高对目标对象的运动滨化趋势检测的准确性。
可选地,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。其有益效果在于:避免个别人脸框的误检对目标对象的运动变化趋势检测的影响,提高了检测的准确性。
可选地,所述将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势;
若所述新第一计算值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述新第一计算值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
可选地,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
可选地,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框;
比较所述平均值框与最新得到的所述人脸框的大小,根据所述平均值框与最新得到的所述人脸框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;
将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。其有益效果在于:避免个别人脸框的误检对目标对象的运动变化趋势检测的影响,并且结合了帧计数,进一步提高了检测的准确性。
可选地,所述将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势;
若所述比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
可选地,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框;
根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势。
可选地,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人形,当所述图像中存在人形时,从所述图像中获取到人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人形框。其有益效果在于:便于通过对帧计数的计算提高对目标对象的运动滨化趋势检测的准确性。
可选地,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势。其有益效果在于:避免个别人形框的误检对目标对象的运动变化趋势检测的影响,提高了检测的准确性。
可选地,所述将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势;
若所述新第一计算值大于所述第一判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述新第一计算值小于所述第一判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
可选地,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按所述图像在所述视频流数据中的排序顺序,依次比较相邻所述图像中人形框的大小;
根据相邻所述图像中人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
可选地,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人形框的平均值框;
比较所述平均值框与最新得到的所述人形框的大小,根据所述平均值框与最新得到的所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;
将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势。其有益效果在于:避免个别人形框的误检对目标对象的运动变化趋势检测的影响,结合帧计数,进一步提高了检测的准确性。
可选地,所述将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述新比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势;
若所述比较结果值大于所述第二判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述比较结果值小于所述第二判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
可选地,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框;
根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势。其有益效果在于:结合人脸框和人形框,提高了目标对象的运动变化趋势检测的准确性。
可选地,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人脸检测和人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否同时存在人脸和人形,当所述图像中同时存在人脸和人形时,从所述图像中获取到人脸框和人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框和至少一个人形框。其有益效果在于:便于通过对帧计数的计算提高对目标对象的运动滨化趋势检测的准确性。
可选地,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值;
将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。其有益效果在于:避免因个别人脸框和人形框的误检对目标对象的运动变化趋势的影响,提高了检测的准确性。
可选地,所述将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述第一比较结果值与第一判断阈值进行比较,以得到人脸框的变化趋势;
若所述第一比较结果值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述第一比较结果值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
可选地,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值。
可选地,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框和所有所述人形框的平均值框;
比较所有所述人脸框的平均值框的与最新得到的所述人脸框的大小,根据所有所述人脸框的平均值框与最新得到的所述人脸框的大小的比较结果,将第三计算值乘第三放大阈值或第三缩小阈值,以得到新第三计算值,然后将所述第三计算值替换为所述新第三计算值;
比较所有所述人形框的平均值框的与最新得到的所述人形框的大小,根据所有所述人形框的平均值框与最新得到的所述人形框的大小的比较结果,将第四计算值乘第四放大阈值或第四缩小阈值,以得到新第四计算值,然后将所述第四计算值替换为所述新第四计算值;
对所述新第三计算值和所述新第四计算值进行加权平均计算,以得到第二比较结果值;
对所述第一比较结果和所述第二比较结果值进行加权平均,以得到第三比较结果值;
将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。
可选地,所述将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述第三比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势和所述人形框的变化趋势;
若所述第三比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述第三比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
本发明还提供了一种控制系统,所述控制系统包括视频流数据获取单元、运动检测单元、运动趋势计算单元、唤醒与休眠控制单元,其中,所述视频流数据获取单元用于获取视频流数据;所述运动检测单元用于检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;所述运动趋势计算单元用于对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;所述唤醒与休眠控制单元用于根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。
所述控制系统的有益效果在于:所述视频流数据获取单元用于获取视频流数据;所述运动检测单元用于检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;所述运动趋势计算单元用于对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;所述唤醒与休眠控制单元用于根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠,能够通过视频流数据中目标对象的运动变化以及目标对象的运动变化趋势,在人物接近电子设备或远离电子设备时,及时控制电子设备唤醒或休眠,提高了电子设备的气动速度,并且及时控制电子设备休眠,降低了电子设备的功耗。
附图说明
图1为本发明控制系统的结构框图;
图2为本发明控制方法的流程图;
图3为本发明一些实施例中第一帧图像的示意图;
图4为本发明一些实施例中第二帧图像的示意图;
图5为本发明一些实施例中第三帧图像的示意图;
图6为本发明一些实施例中第四帧图像的示意图;
图7为本发明一些实施例中第五帧图像的示意图;
图8为本发明一些实施例中第六帧图像的示意图;
图9为本发明一些实施例中第七帧图像的示意图;
图10为本发明一帧图像中出现两个人脸框的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。除非另外定义,此处使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本文中使用的“包括”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。
针对现有技术存在的问题,本发明的实施例提供了一种控制系统。参照图1,所述控制系统100包括视频流数据获取单元101、运动检测单元102、运动趋势计算单元103、唤醒与休眠控制单元104,其中,所述视频流数据获取单元101用于获取视频流数据;所述运动检测单元102用于检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;所述运动趋势计算单元103用于对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;所述唤醒与休眠控制单元104用于根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。其中,所述电子设备包括笔记本电脑、手机等。
图2为本发明控制方法的流程图。参照图2,控制方法应用于电子设备,控制电子设备的唤醒和休眠,并通过所述控制系统实现所述控制方法,所述控制方法包括以下步骤:
S1:获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;
S2:对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;
S3:根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。
一些实施例中,所述人物检测包括人脸框检测、人形框检测中的至少一种。
一些实施例中,过训练好的神经网络模型进行人脸检测,所述神经网络模型的训练方法包括:采集自定义数据集,所述自定义数据集包括人脸图片;对RGB格式下的人脸图片进行归一化预处理;获取自定义训练网络模型,所述自定义训练网络模型基于YOLOV4进行了模型压缩;将进行了归一化预处理的人脸图片输入到所述自定义训练网络模型中进行训练;通过损失函数计算得到人脸图片的训练损失,将该训练损失进行反向传播更新训练网络模型,当该训练网络模型在验证集上的性能符合预设阈值时,训练结束;对训练结束的网络模型进行网络剪枝,并对剪枝后的网络模型中的所有数据训练至少十遍,得到训练好的用于人脸检测的神经网络模型。所述人形检测的神经网络模型的训练方法与所述人脸检测的神经网络模型的训练方法相同,也可以通过其他方式进行人脸检测和人形检测,在此并不对人脸检测和人形检测的方式做具体限定。
一些实施例中,所述获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像,包括:提取所述视频流数据中的多帧图像,检测所述图像中是否存在目标对象;将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化;若判断所述目标对象存在运动变化,则获取所述目标对象存在运动变化的图像。
一些实施例中,所述将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化,包括:将存在所述目标对象且相邻的两帧图像进行对比,以确定所述存在所述目标对象且相邻的两帧图像的差异度;将所述差异度与差异度阈值进行对比,以判断所述差异度是否小于或等于所述差异度阈值;若判断所述差异度小于或等于所述差异度阈值,则判断所述目标对象不存在运动变化;若所述差异度大于所述差异度阈值,则判断所述目标对象存在运动变化。
图3为本发明一些实施例中第一帧图像的示意图,图4为本发明一些实施例中的第二帧图像。参照图3和图4,第一帧图像300和第二帧图像400为相邻两帧图像,对所述第一帧图像300和所述第二帧图像400进行检测,判断所述第一帧图像300和所述第二帧图像400中均不存在目标对象。
图5为本发明一些实施例中第三帧图像的示意图。参照图4和图5,第三帧图像500为当前帧图像,所述第二帧图像400为所述第三帧图像500的前一帧图像,即所述第二帧图像400和所述第三帧图像500为相邻两帧图像,对所述第三帧图像500进行检测,检测到所述第三帧图像500中存在脚501的20%的图像,即所述第三帧图像500中存在目标对象,将所述第二帧图像400和所述第三帧图像500进行对比,判断所述第二帧图像400和所述第三帧图像500的差异度为52,而所述差异度阈值为50,所述第二帧图像400和所述第三帧图像500的差异度大于所述差异度阈值,判断所述第三帧图像500为目标对象存在运动变化的图像。
图6为本发明一些实施例中第四帧图像的示意图。参照图5和图6,第四帧图像600为当前帧图像,所述第三帧图像500为所述第四帧图像600的前一帧图像,即所述第三帧图像500和所述第四针图像600为相邻两帧图像,对所述第四帧图像600进行检测,检测到所述第四帧图像600中存在脚501的80%的图像,即所述第四帧图像600中存在目标对象,将所述第三帧图像500和所述第四帧图像600进行对比,判断所述第三帧图像500和所述第四帧图像600的差异度为55,而所述差异度阈值为50,所述第三帧图像500和所述第四帧图像600的差异度大于所述差异度阈值,判断所述第四帧图像600为目标对象存在运动变化的图像。
图7为本发明一些实施例中第五帧图像的示意图。参照图6和图7,第五帧图像700为当前帧图像,所述第四帧图像600为所述第五帧图像700的前一帧图像,即所述第四帧图像600和所述第五帧图像700为相邻两帧图像,对所述第五帧图像700进行检测,检测到所述第五帧图像700中存在人体701的80%的图像,即所述第五帧图像700中存在目标对象,将所述第四帧图像600和所述第五帧图像700进行对比,判断所述第四帧图像600和所述第五帧图像700的差异度为300,而所述差异度阈值为50,所述第四帧图像600和所述第五帧图像700的差异度大于所述差异度阈值,判断所述第五帧图像700为目标对象存在运动变化的图像。
图8为本发明一些实施例中第六帧图像的示意图。参照图7和图8,第六帧图像800为当前帧图像,所述第五帧图像700为所述第六帧图像800的前一帧图像,即所述第五帧图像700和所述第六帧图像800为相邻两帧图像,对所述第六帧图像800进行检测,检测到所述第六帧图像800中存在人体701的100%的图像,即所述第六帧图像800中存在目标对象,将所述第五帧图像700和所述第六帧图像800进行对比,判断所述第五帧图像700和所述第六帧图像800的差异度为400,而所述差异度阈值为50,所述第五帧图像700和所述第六帧图像800的差异度大于所述差异度阈值,判断所述第六帧图像800为目标对象存在运动变化的图像。
图9为本发明一些实施例中第七帧图像的示意图。参照图8和图9,第七帧图像900为当前帧图像,所述第六帧图像800为所述第七帧图像900的前一帧图像,即所述第六帧图像800和所述第七帧图像900为相邻两帧图像,对所述第七帧图像900进行检测,检测到所述第七帧图像900中存在人体701的100%的图像,即所述第七帧图像900中存在目标对象,将所述第六帧图像800和所述第七帧图像900进行对比,所述第七帧图像900相对于所述第六帧图像800人体701的图像向前移动,判断所述第六帧图像800和所述第七帧图像900的差异度为600,而所述差异度阈值为50,所述第六帧图像800和所述第七帧图像900的差异度大于所述差异度阈值,判断所述第七帧图像900为目标对象存在运动变化的图像。
一些实施例中,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框;根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势。
一些实施例中,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框,包括:依次对所述目标对象存在运动变化的每一帧图像进行人脸检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人脸,当所述图像中存在人脸时,从所述图像中获取到人脸框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框。
参照图5,所述帧计数为0,对第三帧图像500进行人脸检测,判断所述第三帧图像500中不存在人脸,无法从所述第三帧图像500中获取人脸框,帧计数不变,维持为0。
参照图6,所述帧计数为0,对第四帧图像600进行人脸检测,判断所述第四帧图像600中不存在人脸,无法从所述第四帧图像600中获取人脸框,帧计数不变,维持为0。
参照图7,所述帧计数为0,对第五帧图像700进行人脸检测,判断所述第五帧图像700中存在人脸,获取所述第五帧图像700中的第一人脸框701,则所述帧计数加1,即0加1等于1,所述新帧计数为1,将所述帧计数替换为所述新帧计数,则所述帧计数为1。
参照图8,所述帧计数为1,对第六帧图像800进行人脸检测,判断所述第六帧图像800中存在人脸,获取所述第六帧图像800中的第二人脸框801,则所述帧计数加1,即1加1等于2,所述新帧计数为2,将所述帧计数替换为所述新帧计数,则所述帧计数为2。
参照图9,所述帧计数为2,对第七帧图像902进行人脸检测,判断所述第七帧图像900中存在人脸,获取所述第七帧图像900中的第三人脸框901,则所述帧计数加1,即2加1等于3,所述新帧计数为3,将所述帧计数替换为所述新帧计数,则所述帧计数为3。
一些实施例中,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。
一些实施例中,所述第一放大阈值大于1且小于2,所述第一缩小阈值小于1且大于0,所述第一放大阈值和所述第一缩小阈值的和为2。例如,所述第一放大阈值为1.2,所述第一缩小阈值为0.8。具体地,相邻所述人脸框中,当排序在后的所述人脸框的大小大于排序在前的所述人脸框的大小,则将所述第一计算值与所述第一放大阈值相乘;当排序在后的所述图像中的人脸框的大小小于排序在前的的所述图像的人脸框的大小,则将所述第一计算值与所述第一缩小阈值相乘。
一些实施例中,所述将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势;若所述新第一计算值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述新第一计算值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
一些实施例中,所述第一判断阈值等于所述第一计算值。
参照图7~图9,预设第一计算值为20,所述第一判断阈值为20,所述第一放大阈值为1.1,所述第一缩小阈值为0.9,所述第一人脸框702的四个顶点坐标分别为(10,11)、(15,11)、(10,6)和(15,6),所述第二人脸框801四个顶点坐标分别为(9.75,11.25)、(15.25,11.25)、(9.75,5.75)和(15.25,5.75),所述第三人脸框901的四个顶点坐标分别为(9.5,11.5)、(15.5,11.5)、(9.5,5.5)和(15.5,5.5),即所述第一人脸框702的长为5,所述第一人脸框702的高为5,所述第二人脸框801的长为5.5,所述第二人脸框801的高为5.5,所述第三人脸框901的长为6,所述第三人脸框901的高为6。判断所述第二人脸框801的大小大于所述第一人脸框702的大小,则将所述第一计算值和所述第一放大阈值相乘,即20×1.1=22,所述新第一计算值为22,所述第一计算值变为22;判断所述第三人脸框901的大小大于所述第二人脸框801的大小,则将所述第一计算值和所述第一放大阈值相乘,即22×1.1=24.2,所述新第一计算值为24.2,所述第一计算值变为24.2,判断所述第一计算值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,进而可以得到所述目标运动趋势为靠近所述电子设备,然后控制所述电子设备唤醒。
一些实施例中,所述控制方法还包括:当判断所述人脸框的变化趋势为越来越大,则将所述新第一计算值与唤醒阈值进行比较,若所述新第一计算值大于所述唤醒阈值,则控制所述电子设备唤醒;当判断所述人脸框的变化趋势为越来越小,则将所述新第一计算值与休眠阈值进行比较,若所述新第一计算值小于所述唤醒阈值,则控制所述电子设备休眠。
一些实施例中,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:判断所述新帧计数是否小于帧计数阈值;若判断所述新帧计数小于帧计数阈值,则按所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
一些实施例中,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,还包括:若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框;比较所述平均值框与最新得到的所述人脸框的大小,根据所述平均值框与最新得到的所述人脸框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。
一些实施例中,所述将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势;若所述比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
一些实施例中,所述第一放大阈值和所述第二放大阈值均大于1且小于2,所述第一缩小阈值和所述第二缩小阈值均小于1且大于0,且所述第一放大阈值和所述第一缩小阈值的和为2,所述第二放大阈值和所述第二缩小阈值的和为2。例如,所述第一放大阈值为1.1,所述第一缩小阈值为0.9;例如,所述第二放大阈值为1.3,所述第二缩小阈值为0.7。所述控制方法还包括:当判断所述人脸框的变化趋势为越来越大,则将所述比较结果值与唤醒阈值进行比较,若所述比较结果值大于所述唤醒阈值,则控制所述电子设备唤醒;当判断所述人脸框的变化趋势为越来越小,则将所述比较结果值与休眠阈值进行比较,若所述比较结果值小于所述唤醒阈值,则控制所述电子设备休眠。
一些实施例中,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框;根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势。
一些实施例中,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框,包括:依次对所述目标对象存在运动变化的每一帧图像进行人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人形,当所述图像中存在人形时,从所述图像中获取到人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人形框。
一些实施例中,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;根据相邻所述人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势。
一些实施例中,所述将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势;若所述新第一计算值大于所述第一判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述新第一计算值小于所述第一判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
所述控制方法还包括:当判断所述人形框的变化趋势为越来越大,则将所述新第一计算值与唤醒阈值进行比较,若所述新第一计算值大于所述唤醒阈值,则控制所述电子设备唤醒;当判断所述人形框的变化趋势为越来越小,则将所述新第一计算值与休眠阈值进行比较,若所述新第一计算值小于所述唤醒阈值,则控制所述电子设备休眠。
一些实施例中,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:判断所述新帧计数是否小于帧计数阈值;若判断所述新帧计数小于帧计数阈值,则按所述图像在所述视频流数据中的排序顺序,依次比较相邻所述图像中人形框的大小;根据相邻所述图像中人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
一些实施例中,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人形框的平均值框;比较所述平均值框与最新得到的所述人形框的大小,根据所述平均值框与最新得到的所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势。
一些实施例中,所述将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:将所述新比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势;若所述比较结果值大于所述第二判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述比较结果值小于所述第二判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
一些实施例中,所述第一放大阈值和所述第二放大阈值均大于1且小于2,所述第一缩小阈值和所述第二缩小阈值均小于1且大于0,且所述第一放大阈值和所述第一缩小阈值的和为2,所述第二放大阈值和所述第二缩小阈值的和为2。例如,所述第一放大阈值为1.1,所述第一缩小阈值为0.9;例如,所述第二放大阈值为1.3,所述第二缩小阈值为0.7。所述控制方法还包括:当判断所述人形框的变化趋势为越来越大,则将所述比较结果值与唤醒阈值进行比较,若所述比较结果值大于所述唤醒阈值,则控制所述电子设备唤醒;当判断所述人形框的变化趋势为越来越小,则将所述比较结果值与休眠阈值进行比较,若所述比较结果值小于所述唤醒阈值,则控制所述电子设备休眠。
一些实施例中,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框;根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势。
一些实施例中,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框,包括:依次对所述目标对象存在运动变化的每一帧图像进行人脸检测和人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否同时存在人脸和人形,当所述图像中同时存在人脸和人形时,从所述图像中获取到人脸框和人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框和至少一个人形框。
一些实施例中,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值;将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。
一些实施例中,所述将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:将所述第一比较结果值与第一判断阈值进行比较,以得到人脸框的变化趋势;若所述第一比较结果值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述第一比较结果值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
一些实施例中,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:判断所述新帧计数是否小于帧计数阈值;若判断所述新帧计数小于帧计数阈值,则按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值。
一些实施例中,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:若判断所述新帧计数大于或等于帧计数阈值,则求取所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框和所有所述人形框的平均值框;比较所有所述人脸框的平均值框的与最新得到的所述人脸框的大小,根据所有所述人脸框的平均值框与最新得到的所述人脸框的大小的比较结果,将第三计算值乘第三放大阈值或第三缩小阈值,以得到新第三计算值,然后将所述第三计算值替换为所述新第三计算值;比较所有所述人形框的平均值框的与最新得到的所述人形框的大小,根据所有所述人形框的平均值框与最新得到的所述人形框的大小的比较结果,将第四计算值乘第四放大阈值或第四缩小阈值,以得到新第四计算值,然后将所述第四计算值替换为所述新第四计算值;对所述新第三计算值和所述新第四计算值进行加权平均计算,以得到第二比较结果值;对所述第一比较结果和所述第二比较结果值进行加权平均,以得到第三比较结果值;将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。
一些实施例中,所述将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:将所述第三比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势和所述人形框的变化趋势;若所述第三比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;若所述第三比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
一些实施例中,所述第一放大阈值、所述第二放大阈值、所述第三放大阈值和所述第四放大阈值均大于1且小于2,所述第一缩小阈值、所述第二缩小阈值、所述第三缩小阈值和所述第四缩小阈值均小于1且大于0,且所述第一放大阈值和所述第一缩小阈值的和为2,所述第二放大阈值和所述第二缩小阈值的和为2,所述第三放大阈值和所述第三缩小阈值的和为2,所述第四放大阈值和所述第四缩小阈值的和为2。例如,所述第一放大阈值为1.1,所述第一缩小阈值为0.9;例如,所述第二放大阈值为1.3,所述第二缩小阈值为0.7;例如,所述第三放大阈值为1.1,所述第三缩小阈值为0.9;例如,所述第四放大阈值为1.2,所述第四缩小阈值为0.8。
一些实施例中,所述控制方法还包括:当判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,则将所述第三比较结果值与唤醒阈值进行比较,若所述第三比较结果值大于所述唤醒阈值,则控制所述电子设备唤醒;当判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,则将所述第三比较结果值与休眠阈值进行比较,若所述第三比较结果值小于所述唤醒阈值,则控制所述电子设备休眠。
一些实施例中,所述控制方法中,若同一所述图像中人脸框的数量大于1,则仅获取距离所在图像中心点最近的人脸框。选取合适的人脸框,避免多个人脸框之间的相互干扰,也能降低控制的复杂度;若同一所述图像中人形框的数量大于1,则仅获取距离所在图像中心点最近的人形框。选取合适的人形框,避免多个人形框之间的相互干扰,也能降低控制的复杂度。
图10为本发明一帧图像中出现两个人脸框的示意图。参照图10,图中包括图像的中心点201、左人脸框202和右人脸框203,所述中心点201为所述图像对角线的交点,所述左人脸框202距离所述中心点201的距离小于所述右人脸框203距离所述中心点201的距离,在获取所述图像中的人脸框时,仅获取所述左人脸框202。
虽然在上文中详细说明了本发明的实施方式,但是对于本领域的技术人员来说显而易见的是,能够对这些实施方式进行各种修改和变化。但是,应理解,这种修改和变化都属于权利要求书中所述的本发明的范围和精神之内。而且,在此说明的本发明可有其它的实施方式,并且可通过多种方式实施或实现。
Claims (25)
1.一种控制方法,其特征在于,应用于电子设备,控制电子设备的唤醒和休眠,包括:
获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;
对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;
根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。
2.根据权利要求1所述的控制方法,其特征在于,所述获取视频流数据,检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像,包括:
提取所述视频流数据中的多帧图像,检测所述图像中是否存在目标对象;
将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化;
若判断所述目标对象存在运动变化,则获取所述目标对象存在运动变化的图像。
3.根据权利要求2所述的控制方法,其特征在于,所述将存在所述目标对象且相邻的两帧图像进行对比,以判断所述目标对象是否存在运动变化,包括:
将存在所述目标对象且相邻的两帧图像进行对比,以确定所述存在所述目标对象且相邻的两帧图像的差异度;
将所述差异度与差异度阈值进行对比,以判断所述差异度是否小于或等于所述差异度阈值;
若判断所述差异度小于或等于所述差异度阈值,则判断所述目标对象不存在运动变化;
若所述差异度大于所述差异度阈值,则判断所述目标对象存在运动变化。
4.根据权利要求1所述的控制方法,其特征在于,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框;
根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势。
5.根据权利要求2所述的控制方法,其特征在于,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测,以获取人脸框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人脸检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人脸,当所述图像中存在人脸时,从所述图像中获取到人脸框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框。
6.根据权利要求4或5所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。
7.根据权利要求6所述的控制方法,其特征在于,所述将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述新第一计算值与第一判断阈值进行比较,以得到人脸框的变化趋势;
若所述新第一计算值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述新第一计算值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
8.根据权利要求5所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按所述人脸框的获取顺序,依次比较相邻所述人脸框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
9.根据权利要求8所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框;
比较所述平均值框与最新得到的所述人脸框的大小,根据所述平均值框与最新得到的所述人脸框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;
将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势。
10.根据权利要求9所述的控制方法,其特征在于,所述将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势;
若所述比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
11.根据权利要求1所述的控制方法,其特征在于,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框;
根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势。
12.根据权利要求11所述的控制方法,其特征在于,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人形检测,以获取人形框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否存在人形,当所述图像中存在人形时,从所述图像中获取到人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人形框。
13.根据权利要求11或12所述的控制方法,其特征在于,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势。
14.根据权利要求13所述的控制方法,其特征在于,所述将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势,进而得到所述目标对象的运动变化趋势,包括:
将所述新第一计算值与第一判断阈值进行比较,以得到人形框的变化趋势;
若所述新第一计算值大于所述第一判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述新第一计算值小于所述第一判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
15.根据权利要求14所述的控制方法,其特征在于,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按所述图像在所述视频流数据中的排序顺序,依次比较相邻所述图像中人形框的大小;
根据相邻所述图像中人形框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值。
16.根据权利要求15所述的控制方法,其特征在于,所述根据所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取在所述新帧计数等于所述帧计数阈值之前获取的所有所述人形框的平均值框;
比较所述平均值框与最新得到的所述人形框的大小,根据所述平均值框与最新得到的所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到比较结果值;
将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势。
17.根据权利要求14所述的控制方法,其特征在于,所述将所述比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述新比较结果值与第二判断阈值进行比较,以得到人形框的变化趋势;
若所述比较结果值大于所述第二判断阈值,则判断所述人形框的变化趋势为越来越大,进而得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述比较结果值小于所述第二判断阈值,则判断所述人形框的变化趋势为越来越小,进而得到所述目标对象的运动变化趋势为远离所述电子设备。
18.根据权利要求1所述的控制方法,其特征在于,所述对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势,包括:
按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框;
根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势。
19.根据权利要求16所述的控制方法,其特征在于,所述按所述目标对象存在运动变化的图像在所述视频流数据中的排序顺序,依次对所述目标对象存在运动变化的图像进行人脸检测和人形检测,以获取人脸框和人形框,包括:
依次对所述目标对象存在运动变化的每一帧图像进行人脸检测和人形检测,以确定所述目标对象存在运动变化的每一帧图像中是否同时存在人脸和人形,当所述图像中同时存在人脸和人形时,从所述图像中获取到人脸框和人形框,则将帧计数加1,以得到新帧计数,并将所述帧计数替换为所述新帧计数,以获得至少一个人脸框和至少一个人形框。
20.根据权利要求18或19所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值;
将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。
21.根据权利要求20所述的控制方法,其特征在于,所述将所述第一比较结果值与第一判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述第一比较结果值与第一判断阈值进行比较,以得到人脸框的变化趋势;
若所述第一比较结果值大于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述第一比较结果值小于所述第一判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
22.根据权利要求19所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,包括:
判断所述新帧计数是否小于帧计数阈值;
若判断所述新帧计数小于帧计数阈值,则按照所述人脸框的获取顺序,依次比较相邻所述人脸框的大小,按照所述人形框的获取顺序,依次比较相邻所述人形框的大小;
根据相邻所述人脸框的大小的比较结果,将第一计算值乘第一放大阈值或第一缩小阈值,以得到新第一计算值,然后将所述第一计算值替换为所述新第一计算值;
根据相邻所述人形框的大小的比较结果,将第二计算值乘第二放大阈值或第二缩小阈值,以得到新第二计算值,然后将所述第二计算值替换为所述新第二计算值;
对所述新第一计算值和所述新第二计算值进行加权平均计算,以得到第一比较结果值。
23.根据权利要求22所述的控制方法,其特征在于,所述根据所述人脸框的变化趋势和所述人形框的变化趋势,得到所述目标对象的运动变化趋势,还包括:
若判断所述新帧计数大于或等于帧计数阈值,则求取所述新帧计数等于所述帧计数阈值之前获取的所有所述人脸框的平均值框和所有所述人形框的平均值框;
比较所有所述人脸框的平均值框的与最新得到的所述人脸框的大小,根据所有所述人脸框的平均值框与最新得到的所述人脸框的大小的比较结果,将第三计算值乘第三放大阈值或第三缩小阈值,以得到新第三计算值,然后将所述第三计算值替换为所述新第三计算值;
比较所有所述人形框的平均值框的与最新得到的所述人形框的大小,根据所有所述人形框的平均值框与最新得到的所述人形框的大小的比较结果,将第四计算值乘第四放大阈值或第四缩小阈值,以得到新第四计算值,然后将所述第四计算值替换为所述新第四计算值;
对所述新第三计算值和所述新第四计算值进行加权平均计算,以得到第二比较结果值;
对所述第一比较结果和所述第二比较结果值进行加权平均,以得到第三比较结果值;
将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势。
24.根据权利要求23所述的控制方法,其特征在于,所述将所述第三比较结果值与第二判断阈值进行比较,以得到所述人脸框的变化趋势和所述人形框的变化趋势,进而得到目标对象的运动变化趋势,包括:
将所述第三比较结果值与第二判断阈值进行比较,以得到人脸框的变化趋势和所述人形框的变化趋势;
若所述第三比较结果值大于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越大,所述人形框的变化趋势为越来越大,进而可以得到所述目标对象的运动变化趋势为靠近所述电子设备;
若所述第三比较结果值小于所述第二判断阈值,则判断所述人脸框的变化趋势为越来越小,所述人形框的变化趋势为越来越小,进而可以得到所述目标对象的运动变化趋势为远离所述电子设备。
25.一种控制系统,用于实现如权利要求1~24任一项所述的控制方法,其特征在于,所述控制系统包括视频流数据获取单元、运动检测单元、运动趋势计算单元、唤醒与休眠控制单元,其中,所述视频流数据获取单元用于获取视频流数据;所述运动检测单元用于检测所述视频流数据每一帧图像中的目标对象,获取所述目标对象存在运动变化的图像;所述运动趋势计算单元用于对所述目标对象存在运动变化的图像进行目标检测,以得到所述目标对象的运动变化趋势;所述唤醒与休眠控制单元用于根据所述目标对象的运动变化趋势,控制所述电子设备唤醒或休眠。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111410361.XA CN114265626A (zh) | 2021-11-25 | 2021-11-25 | 控制方法及控制系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111410361.XA CN114265626A (zh) | 2021-11-25 | 2021-11-25 | 控制方法及控制系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114265626A true CN114265626A (zh) | 2022-04-01 |
Family
ID=80825444
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111410361.XA Pending CN114265626A (zh) | 2021-11-25 | 2021-11-25 | 控制方法及控制系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114265626A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003219422A (ja) * | 2002-01-24 | 2003-07-31 | Victor Co Of Japan Ltd | 動き検出方法 |
JP2006115312A (ja) * | 2004-10-15 | 2006-04-27 | Mie Tlo Co Ltd | 動き検出装置及び動き検出方法 |
CN105117191A (zh) * | 2015-09-08 | 2015-12-02 | 广东欧珀移动通信有限公司 | 一种移动终端的显示控制方法及装置 |
US20160343389A1 (en) * | 2015-05-19 | 2016-11-24 | Bxb Electronics Co., Ltd. | Voice Control System, Voice Control Method, Computer Program Product, and Computer Readable Medium |
CN106915295A (zh) * | 2017-03-21 | 2017-07-04 | 青岛海信移动通信技术股份有限公司 | 车辆大灯状态的控制方法及装置 |
CN107809675A (zh) * | 2017-10-26 | 2018-03-16 | 深圳佳力拓科技有限公司 | 一种通过识别人形动作智能关闭机顶盒的方法及系统 |
CN109976506A (zh) * | 2017-12-28 | 2019-07-05 | 深圳市优必选科技有限公司 | 一种电子设备的唤醒方法、存储介质及机器人 |
CN112562159A (zh) * | 2020-11-24 | 2021-03-26 | 恒安嘉新(北京)科技股份公司 | 一种门禁控制方法、装置、计算机设备和存储介质 |
-
2021
- 2021-11-25 CN CN202111410361.XA patent/CN114265626A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003219422A (ja) * | 2002-01-24 | 2003-07-31 | Victor Co Of Japan Ltd | 動き検出方法 |
JP2006115312A (ja) * | 2004-10-15 | 2006-04-27 | Mie Tlo Co Ltd | 動き検出装置及び動き検出方法 |
US20160343389A1 (en) * | 2015-05-19 | 2016-11-24 | Bxb Electronics Co., Ltd. | Voice Control System, Voice Control Method, Computer Program Product, and Computer Readable Medium |
CN105117191A (zh) * | 2015-09-08 | 2015-12-02 | 广东欧珀移动通信有限公司 | 一种移动终端的显示控制方法及装置 |
CN106915295A (zh) * | 2017-03-21 | 2017-07-04 | 青岛海信移动通信技术股份有限公司 | 车辆大灯状态的控制方法及装置 |
CN107809675A (zh) * | 2017-10-26 | 2018-03-16 | 深圳佳力拓科技有限公司 | 一种通过识别人形动作智能关闭机顶盒的方法及系统 |
CN109976506A (zh) * | 2017-12-28 | 2019-07-05 | 深圳市优必选科技有限公司 | 一种电子设备的唤醒方法、存储介质及机器人 |
CN112562159A (zh) * | 2020-11-24 | 2021-03-26 | 恒安嘉新(北京)科技股份公司 | 一种门禁控制方法、装置、计算机设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108898118B (zh) | 一种视频数据处理方法、装置和存储介质 | |
CN108830145B (zh) | 一种基于深度神经网络的人数统计方法及存储介质 | |
CN110113116B (zh) | 基于wifi信道信息的人体行为识别方法 | |
CN101022505A (zh) | 复杂背景下运动目标自动检测方法和装置 | |
CN107567083A (zh) | 进行省电优化处理的方法和装置 | |
CN101923637B (zh) | 一种移动终端及其人脸检测方法和装置 | |
CN104700405B (zh) | 一种前景检测方法和系统 | |
CN110971763B (zh) | 到站提醒方法、装置、存储介质及电子设备 | |
CN112926541A (zh) | 一种睡岗检测方法、装置及相关设备 | |
CN110765924A (zh) | 一种活体检测方法、装置以及计算机可读存储介质 | |
WO2023006009A1 (zh) | 拍摄参数的确定方法、装置及电子设备 | |
CN113052127A (zh) | 一种行为检测方法、系统、计算机设备及机器可读介质 | |
CN114253611A (zh) | 控制方法及控制系统 | |
CN102799855B (zh) | 基于视频流的人手定位方法 | |
CN108399009A (zh) | 利用人机交互手势唤醒智能设备的方法及装置 | |
CN108629327A (zh) | 一种基于图像处理的人数统计方法及装置 | |
CN113821109B (zh) | 控制方法及控制系统 | |
CN114265626A (zh) | 控制方法及控制系统 | |
CN105118073A (zh) | 基于Xtion摄像机的人体头部目标识别方法 | |
CN112700568A (zh) | 一种身份认证的方法、设备及计算机可读存储介质 | |
CN209013299U (zh) | 具手势控制视觉检测功能的油烟机 | |
Chen et al. | Moving objects detection based on background subtraction combined with consecutive frames subtraction | |
CN114253613A (zh) | 控制方法及控制系统 | |
CN110288621A (zh) | 基于b样条的唇线补全方法、装置、电子设备及存储介质 | |
CN114140828B (zh) | 一种实时轻量级2d人体姿态估计方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |