CN117555611A - 智能家居设备及其启动方法 - Google Patents
智能家居设备及其启动方法 Download PDFInfo
- Publication number
- CN117555611A CN117555611A CN202311501531.4A CN202311501531A CN117555611A CN 117555611 A CN117555611 A CN 117555611A CN 202311501531 A CN202311501531 A CN 202311501531A CN 117555611 A CN117555611 A CN 117555611A
- Authority
- CN
- China
- Prior art keywords
- image
- motion
- module
- acquisition module
- data processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000033001 locomotion Effects 0.000 claims abstract description 278
- 238000012545 processing Methods 0.000 claims abstract description 178
- 238000001514 detection method Methods 0.000 claims abstract description 153
- 238000006243 chemical reaction Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 16
- 238000004590 computer program Methods 0.000 description 13
- 230000004044 response Effects 0.000 description 9
- 239000002699 waste material Substances 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 238000010835 comparative analysis Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例公开一种智能家居设备及其启动方法,该智能家居设备包括运动探测器,运动检测模块,数据处理芯片及包括图像采集模块和快速启动模块的图像获取模块。若运动探测器检测到运动源,通过快速启动模块对图像采集模块采集的第一图像帧进行收敛处理,在收敛后获得收敛参数;运动检测模块对第二图像帧进行运动检测,若运动检测结果表征图像存在运动,数据处理芯片获取收敛参数,基于收敛参数转换得到目标参数,根据目标参数和图像获取模块采集原始图像帧,以获得第三图像帧。这样,相较于将快速启动模块设置在数据处理芯片内,通过将快速启动模块设置在图像获取模块内,缩短了从检测到触发信号到接通或录制视频之间的耗时,实现了快速启动。
Description
技术领域
本申请属于智能家居技术领域,尤其涉及一种智能家居设备和智能家居设备的启动方法。
背景技术
随着智能家居技术的不断发展,智能门铃和智能门锁等智能家居设备的应用也越来越广泛。
智能门铃和智能门锁等智能家居设备通常是依赖电池供电,因此,为了节省智能家居设备的功耗,以尽可能地延长智能家居设备的使用时长,智能门铃和智能门锁等智能家居设备通常处于待机或休眠状态,在需要使用的时候才会启动。目前,智能门铃和智能门锁等智能家居设备在待机或休眠状态下,通常是通过传感器检测触发信号的,例如通过无源红外传感器(Passive Infrared Sensor,PIR)进行热源运动检测;若检测到触发信号(例如PIR信号)时,则响应触发信号并启动整个系统接通或者录制视频。
但是,目前的智能门铃和智能门锁等智能家居设备,从检测到触发(例如PIR)信号到接通或录制视频之间耗时较长,无法快速启动。
发明内容
本申请实施例提供了一种智能家居设备和智能家居设备的启动方法,可以解决现有智能门铃和智能门锁等智能家居设备,从检测到触发信号到接通或录制视频之间耗时较长,无法快速启动的问题。
第一方面,本申请实施例提供了一种智能家居设备,包括运动探测器、运动检测模块、数据处理芯片和图像获取模块;图像获取模块包括图像采集模块和快速启动模块;
运动探测器用于检测运动源;
图像获取模块用于在运动探测器检测到运动源时上电启动图像采集模块和快速启动模块;通过图像采集模块持续采集第一图像帧;通过快速启动模块对各个第一图像帧进行收敛处理,得到收敛参数;
运动检测模块用于获取图像采集模块持续采集的第二图像帧,第二图像帧是得到收敛参数之后采集的图像帧;根据第二图像帧进行运动检测以获得运动检测结果;
数据处理芯片用于在运动检测结果表征图像中存在运动时获取收敛参数,并基于收敛参数转换得到目标参数;根据目标参数并基于图像获取模块采集原始图像帧以获得第三图像帧。
由上可见,本申请实施例将快速启动模块设置在图像获取模块中,在图像获取模块内即可进行收敛算法处理,不用将采集的图像数据传输至数据处理芯片处理,节省了数据传输时间;此外,图像获取模块中的快速启动模块可以和数据处理芯片的系统并行启动;相较于设置在数据处理芯片内的快速启动模块,图像获取模块内的快速启动模块的收敛速度更快。这样,相较于将快速启动模块设置在数据处理芯片内,本申请实施例将快速启动模块设置在图像获取模块内,节省了传输时间,快速启动模块可以与数据处理芯片的系统并行启动,并且图像获取模块内的算法收敛速度更快,从而缩短了智能家居设备从检测到触发信号到接通或录制视频之间的耗时,实现了智能家居设备的快速启动。
在第一方面的一些可能的实现方式中,运动检测模块设置于图像获取模块内或数据处理芯片的微处理器内;
所述运动检测模块对应的模块用于在所述运动检测结果表征图像中存在运动时向数据处理芯片发送上电启动信号,或者,在运动检测结果表征图像中不存在运动时向数据处理芯片发送下电关闭信号;
数据处理芯片具体用于响应于上电启动信号,上电启动数据处理芯片的系统。
在该实现方式中,将运动检测模块设置在图像获取模块或者数据处理芯片内的微处理器内,在运动检测模块确认运动后再启动数据处理芯片的整个系统,可以避免触发信号误触导致数据处理芯片的整个系统误启动导致的功耗浪费,从而降低了智能家居设备的整体功耗。
在第一方面的一些可能的实现方式中,微处理器还用于:若运动探测器检测到热源运动则上电启动;获取第一图像帧,并保存第一图像帧。
在第一方面的一些可能的实现方式中,微处理器还用于:所述微处理器还用于在所述运动检测模块获取运动检测结果时,获取并保存所述第二图像帧。
在该实现方式中,通过数据处理芯片的微处理器保存运动检测前的画面,以尽可能地提前进行画面录制,这样可以在一些突发事件时第一时刻保留现场画面。
在第一方面的一些可能的实现方式中,图像获取模块还用于:在算法收敛后下电关闭快速启动模块。这样,在算法收敛后及时关闭快速启动模块,可以避免功耗浪费,进一步地降低智能家居设备的功耗。
在第一方面的一些可能的实现方式中,第一图像帧和第二图像帧是图像获取模块在第一模式下输出的图像帧;
原始图像帧是图像获取模块在第二模式下输出的图像帧;
图像获取模块在第一模式下以第一帧率和/或第一分辨率输出图像帧,图像获取模块在第二模式下以第二帧率和/或第二分辨率输出图像帧;其中,第一帧率高于第二帧率,和/或,第一分辨率低于第二分辨率。
在该实现方式中,图像获取模块在第一模式下输出帧率高和/或分辨率低的图像,使得快速启动模块处理的图像数据的数据更小,进一步加快了算法收敛速度,进而加快了智能家居设备的启动速度。
在第一方面的一些可能的实现方式中,运动检测模块设置在图像获取模块内;收敛参数包括第一模式下的第一曝光参数、第一增益参数以及自动白平衡参数中的至少一者;
数据处理芯片具体用于:将第一曝光参数转换成第二模式下的第二曝光参数;将第一增益参数转换成第二模式下的第二增益参数;根据第二曝光参数、第二增益参数和自动白平衡参数中的至少一者,通过图像获取模块输出的原始图像帧,获得第三图像帧。
在第一方面的一些可能的实现方式中,运动检测模块还用于:若运动检测结果表征图像中不存在运动,或者,图像中不存在运动且图像中无运动持续时间大于或等于预设时间阈值,则进入待机状态。
在第一方面的一些可能的实现方式中,所数据处理芯片还用于:每隔预设时间段根据图像获取模块采集的图像数据进行运动检测和/或人体检测;若检测到图像中不存在运动和/或人体,则下电关闭数据处理芯片的系统,进入待机状态。
第二方面,本申请实施例提供了一种智能家居设备的启动方法,智能家居设备包括运动探测器、运动检测模块、数据处理芯片和图像获取模块;图像获取模块包括图像采集模块和快速启动模块;
该方法包括:
通过运动探测器检测运动源;
若检测到运动源,则上电启动图像采集模块和快速启动模块;通过图像采集模块持续采集第一图像帧;
通过快速启动模块对各个第一图像帧进行收敛处理,并在收敛处理算法收敛后获得收敛参数;
通过运动检测模块对第二图像帧进行运动检测,获得运动检测结果,第二图像帧是收敛处理算法收敛后图像采集模块采集的图像帧;
若运动检测结果表征图像中存在运动,通过数据处理芯片获取收敛参数,并基于收敛参数转换得到目标参数,根据目标参数并基于图像获取模块采集原始图像帧,以获得第三图像帧。
在第二方面的一些可能的实现方式中,运动检测模块设置于图像获取模块内或数据处理芯片内的微处理器;
若运动检测结果表征图像中存在运动,通过数据处理芯片获取收敛参数,包括:
若运动检测结果表征图像中存在运动,所述运动检测模块对应的模块向数据处理芯片发送上电启动信号,或者,若所述运动检测结果表征图像中不存在运动,所述运动检测模块对应的模块向数据处理芯片发送下电关闭信号;
数据处理芯片响应于上电启动信号,上电启动数据处理芯片的系统,并获取收敛参数。
在第二方面的一些可能的实现方式中,运动检测模块设置在微处理器内;方法还包括:
若运动探测器检测到运动源,微处理器则上电启动,获取第一图像帧,并保存第一图像帧;和/或,微处理器在所述运动检测模块获取运动检测结果时,获取并保存第二图像帧。
第三方面,本申请实施例提供一种电子设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如上述第一方面任一项的方法。
第四方面,本申请实施例一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现如上述第一方面任一项的方法。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述第一方面中任一项所述的方法。
可以理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的相关技术中智能家居设备100的结构示意框图;
图2为本申请实施例提供的智能家居设备200的结构示意框图;
图3为本申请实施例提供的智能家居设备200的另一种结构示意框图;
图4为本申请实施例提供的智能家居设备200的又一种结构示意框图;
图5为本申请实施例提供的智能家居设备200的又一种结构示意框图;
图6A为本申请实施例提供的智能家居设备200的工作过程示意图;
图6B为本申请实施例提供的3A算法过程示意图;
图6C为本申请实施例提供的MD模式示意图;
图7为本申请实施例提供一种智能家居设备的启动方法的一种流程示意框图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
请参见图1,为本申请实施例提供的相关技术中智能家居设备100的结构示意框图,智能家居设备100可以示例性为智能门锁或智能门铃等设备。当然,智能家居设备100也可以是其他所有需要交互的智能家居设备。
如图1所示,智能家居设备100可以包括运动探测器110、数据处理芯片120和图像获取模块130;在本实施方式中,运动探测器110可以例如为PIR模块、数据处理芯片120可以例如为SOC芯片,图像获取模块130可以例如为图像传感器(Sensor)。
数据处理芯片120内设置有快速启动模块121和运动检测模块(Motiondetection,MD)122,在本实施方式中,快速启动模块121可以为算法收敛模块。其中,算法收敛模块可以是3A算法模块,3A算法模块是指包括自动曝光控制算法(Automatic ExposureControl,AEC)、自动增益控制算法(Automatic Gain Control)以及自动白平衡算法(Automatic White Balance,AWB)的算法模块。需要说明的是,下面具体实施例的描述中以运动探测器110为PIR模块、数据处理芯片120为SOC芯片、快速启动模块121为3A算法模块为例进行说明,但实际并不局限于此。
智能家居设备100的启动过程如下:
在智能家居设备100处于休眠或待机状态时,数据处理芯片120和图像获取模块130处于下电关闭状态;运动探测器110持续检测外部环境的运动源,若检测到热源运动,则向数据处理芯片发送运动识别信号,以唤醒整个SOC系统,运动源可以是基于PIR模块检测的热源运动,运动识别信号可以是PIR信号。运动探测器110检测到运动源,则向数据处理芯片发送触发信号。
数据处理芯片120响应于触发信号(例如PIR信号)上电启动,启动整个SOC系统,并启动图像获取模块130,配置图像获取模块130的相关参数;图像获取模块130持续采集外部环境的图像,将采集的图像传输至数据处理芯片120。
数据处理芯片120通过快速启动模块121对图像进行3A算法处理,并获得3A算法收敛后的3A算法参数;在3A算法参数收敛后,获取图像获取模块130采集的图像,并通过运动检测模块122进行运动检测,若确定图像中存在运动时,则根据3A算法参数获取图像获取模块130输出的图像,实现接通或视频录制。
在上述智能家居设备100的启动过程中,触发信号唤醒SOC系统时,SOC系统启动速度较慢;由于快速启动模块121设置在数据处理芯片120内,故图像获取模块130采集的图像需要传输至数据处理芯片120进行处理;此外,数据处理芯片120内配置快速启动模块121,电路复杂,算法收敛速度较慢。这样,会导致智能家居设备100从检测到触发信号到接通或录制视频之间的耗时较长(例如1~2秒),整体启动过程的耗时较长,启动速度较慢。
针对上文提及的相关问题,本申请实施例提供了一种智能家居设备200。智能家居设备200将快速启动模块设置在图像获取模块内,以缩短从检测到触发信号到接通或录制视频之间的耗时,实现智能家居设备的快速启动。
本申请实施例中,智能家居设备200的“启动”是指:从检测到触发信号(例如PIR信号)到数据处理芯片(例如SOC芯片)上电并完成首帧图像获取的过程。该过程的耗时越短,智能家居设备200的启动速度越快。
请参见图2,为本申请实施例提供的智能家居设备200的结构示意框图,智能家居设备200可以包括运动探测器210、运动检测模块220、数据处理芯片230和图像获取模块240;图像获取模块240可以包括图像采集模块241和快速启动模块242。在本实施方式中,运动探测器110例如为PIR热源运动探测器、数据处理芯片230例如为SOC芯片,图像获取模块240例如为图像传感器,下述以此进行说明。
需要说明的是,图2中的运动检测模块220可以设置在图像获取模块240内;也可以设置在数据处理芯片230的微处理器MCU内,此时,数据处理芯片230可以是包括微处理器MCU和另一个处理器的双核系统;还可以设置在数据处理芯片230内,此时数据处理芯片不包括微处理器MCU,不是双核系统,或者数据处理芯片230是包括微处理器MCU的双核系统,但不将运动检测模块220设置在微处理器MCU内。图2中未示出的运动检测模块220和其它模块之间的关系,下文再对此进行详细介绍。
图像获取模块240用于:在待机状态下若运动探测器210检测到运动源,则上电启动图像采集模块241和快速启动模块242;通过图像采集模块241持续采集第一图像帧;通过快速启动模块242对各个第一图像帧进行收敛算法处理,以基于处理结构实现快速启动,以实现场景图像获取。
运动探测器210可以为热源运动探测器,用于检测热源运动。例如,热源运动探测器可以为PIR(Passive Infrared Sensor)模块。
图像获取模块240可以是CMOS图像传感器(CMOS Image Sensor,CIS),也可以是其它类型的图像获取模块,在此不作限定。
在本实施例中,快速启动模块242为收敛模块,通过收敛模块对各个第一图像帧进行收敛算法处理,并在收敛算法收敛后获得收敛参数。
通常情况下,智能家居设备200处于待机或休眠状态,运动探测器210会对外部环境持续进行热源运动检测;当检测到热源运动时,再上电启动图像采集模块241和快速启动模块242。
在一些实施例中,图像采集模块241以高帧率和/或低分辨率输出第一图像帧。本实施例中,图像采集模块241以高帧率和低分辨率输出第一图像帧。其中,可以通过像素合并(binning)的方式实现低分辨率及高帧率的输出。在其他实施例中,第一图像帧是也可以是包括部分像素点的图像,即第一图像帧不是包括像素阵列全部像素点的图像。图像获取模块240具有像素阵列,在输出图像时,通过选取像素阵列中的部分像素点进行读出,以输出第一图像帧。
相较而言,以低分辨率输出图像,数据量更小,可以使得在对第一图像帧进行收敛算法处理时,算法收敛速度更快;此外,帧率高也会使得整体算法收敛速度更快。进一步有利于基于该设计实现快速启动。
快速启动模块242获取到图像采集模块241输出的第一图像帧后,针对每一帧第一图像帧,可以均根据当前第一图像帧的画面亮度值,调整曝光时间和增益中的至少一者,并可计算白平衡参数B/R和R/G。当图像画面处于合适亮度后,则可以认为稳定,算法收敛,获得收敛参数。其中,合适亮度可以依据需求设定。例如,收敛参数可以是3A算法参数,3A算法参数可以示例性包括曝光参数、增益参数和自动白平衡参数等中的至少一项。
运动检测模块220用于获取图像采集模块241持续采集的第二图像帧,第二图像帧是算法收敛之后采集的图像帧,或者说是得到收敛参数之后采集的图像帧;根据第二图像帧进行运动检测,以获得运动检测结果。
可以理解的是,算法收敛后,图像采集模块241可以基于收敛参数(例如3A算法参数)输出亮度合适的第二图像帧。与第一图像帧类似,第二图像帧也可以是高帧率和/或低分辨率的图像,数据量小,有利于运动检测及快速启动。
运动检测模块220可以将当前的第二图像帧与基准图像帧进行对比分析,以确定图像中是否存在运动,获得运动检测结果。基准图像帧可以是指算法收敛(例如3A算法收敛)后输出的第一张亮度合适的第二图像帧。当然,基准图像帧也可以不是第一张亮度合适的第二图像帧,而是比当前帧更早的任意第二图像帧,或者,将当前帧的前n帧的均值作为基准图像帧,n是大于或等于1的正整数。另外,需要说明的是,可以采用现有的运动检测方式进行上述对比分析以得到结果。
运动检测结果可以包括图像中存在运动和图像中不存在运动两种情况。
数据处理芯片230用于在运动检测结果表征图像中存在运动时,获取收敛参数;基于收敛参数转换得到目标参数,并根据目标参数并基于图像获取模块240采集原始图像帧,以获得第三图像帧。例如,收敛参数是3A算法参数,将3A算法参数转换成需要的配置,基于转换后的配置,获取图像获取模块240进行原始图像帧的输出,进而获得第三图像帧。
原始图像帧可以是图像获取模块240输出的RAW图,是包括像素阵列中所有像素点的图像。在一些实施例中,原始图像帧的分辨率可以高于第一图像帧和第二图像帧的分辨率。
数据处理芯片230可以使用曝光参数、增益参数和自动白平衡参数等转换以获得第三图像帧,第三图像帧可以是亮度合适的彩色图像(例如RGB图像)。
值得指出的是,数据处理芯片230可以持续获取到多个第三图像帧,并且各个第三图像帧均是亮度合适的彩色图像。因此,数据处理芯片230获取到的首帧图像(即第一张第三图像帧)则是亮度合适的彩色图像,并且画面间存在运动,存在有效信息。
相较而言,图1所示的智能家居设备100中,数据处理芯片120获取的首帧图像是3A算法未收敛的图像,且画面间不一定存在运动,不一定存在有效信息。
需要说明的是,图像获取模块或者数据处理芯片在得到收敛参数后启动运动检测模块;运动检测模块对应的图像获取模块或者数据处理芯片的微处理器在运动检测结果表征图像中存在运动时向数据处理芯片发送上电启动信号,另外,也可以是,在运动检测结果表征图像中不存在运动时向数据处理芯片发送下电关闭信号,也就是说,数据处理芯片已经处于启动状态,例如,开启图像获取模块时一并将数据处理芯片开启,在检测不到运动时将数据处理芯片关闭,既可以并行启动节约时间又可以防止在无运动时将数据处理芯片完全启动。
由上可见,本申请实施例将快速启动模块设置在图像获取模块中,在图像获取模块内即可进行收敛算法处理,不用将采集的图像数据传输至数据处理芯片进行收敛算法处理,节省了数据传输时间;此外,图像获取模块中的快速启动模块可以和数据处理芯片的系统并行启动;相较于数据处理芯片内的快速启动模块,图像获取模块内的快速启动模块的收敛速度更快。
相较于将快速启动模块设置在数据处理芯片内,本申请实施例将快速启动模块设置在图像获取模块内,节省了传输时间,快速启动模块可以与数据处理芯片的系统并行启动,并且图像获取模块内的算法收敛速度更快,算法收敛耗时更短,从而缩短了智能家居设备从检测到触发信号到接通或录制视频之间的耗时,实现了智能家居设备的快速启动。
此外,图像获取模块240中的快速启动模块242的电路实现,比数据处理芯片中的快速启动模块的电路实现简单,并且功耗更低。
综上,相较于将快速启动模块设置在数据处理芯片内,本实施例将快速启动模块设置在图像获取模块内,可以实现低功耗的智能家居设备的快速启动,并且通过该快速启动方案还可以使得数据处理芯片获取到首帧画面亮度合理。
基于上文所示的任意实施例,在一些实施例中,运动检测模块220可以设置在图像获取模块240内。此时,不仅将快速启动模块设置在图像获取模块内,还将运动检测模块设置在图像获取模块内,进而在实现智能家居设备的快速启动的同时,降低智能家居设备的功耗。
示例性地,参见图3示出的本申请实施例提供的智能家居设备200的另一种结构示意框图,图像获取模块240包括图像采集模块241、快速启动模块242和运动检测模块220。其余类似结构参见上述示例描述,在此不再赘述。
此时,智能家居设备200的工作过程可以如下:
智能家居设备200处于待机或休眠状态,并通过运动探测器210对外部环境持续进行运动源检测;若检测不到运动源,继续处于待机状态;若检测到运动源,则上电启动图像获取模块240。
值得指出的是,在上电启动图像获取模块240时,如可以采用现有的图像传感器的启动方式,可以先启动图像采集模块241和快速启动模块242,不启动运动检测模块220;等到快速启动模块242处理完毕,如3A算法收敛后,再启动运动检测模块220,并下电关闭快速启动模块242。这样,在需要运动检测模块220时再启动,在不需要快速启动模块242时则处于关闭状态,可以有效地避免功耗浪费,进一步降低智能家居设备200的功耗。
当然,在上电启动图像获取模块240时,也可以直接启动图像采集模块241、快速启动模块242以及运动检测模块220。另外,在快速启动模块242处理完成后(例如3A算法收敛),也可以不下电关闭快速启动模块242。
图像采集模块241和快速启动模块242启动后,图像采集模块241则持续采集外部环境的第一图像帧。在一种可能的实现方式中,图像采集模块241工作在第一模式,并持续地输出第一图像帧。
图像采集模块241在第一模式下,以第一帧率和/或第一分辨率输出图像帧。通常情况下,第一帧率高于预设帧率阈值(即高帧率),第一分辨率低于预设分辨率阈值(即低分辨率),即图像采集模块241的第一模式具有高帧率、低分辨率和低功耗等特点。例如,第一模式可以是指小图模式,即可以binning模式或者是选取像素阵列中的部分像素点进行读出的模式。
值得指出的是,图像获取模块240以第一模式输出低分辨率的图像,可以减少快速启动模块242的算法处理中的图像数据量,进而可以进一步加快快速启动模块242的算法收敛速度;此外,以高帧率输出第一图像帧,也可以使得快速启动模块242可以及时获取到第一图像帧,也可以加快快速启动模块242的算法收敛速度。这样,进一步加快了智能家居设备200的启动速度。另外,上述预设帧率阈值、预设分辨率阈值可以实际需求设定。
快速启动模块242获取图像采集模块241持续输出的第一图像帧,并对每帧第一图像帧均进行算法处理,并在图像画面亮度处于合适亮度后,认为图像稳定,认为算法收敛,获得收敛参数。
可选地,在算法收敛后,智能家居设备200可以关闭快速启动模块242,并启动运动检测模块220,以进一步降低智能家居设备的功耗。
算法收敛后,图像采集模块241可以持续输出画面亮度合适的第二图像帧。此时,图像采集模块241可以仍然处于第一模式下,输出高帧率和/或低分辨率的第二图像帧。需要说明的,此处定义算法收敛后获取的收敛参数对应的第一张图像为首帧第二图像帧,为处于第一模式下的第二图像帧。
运动检测模块220在启动后,获取图像采集模块241输出的第二图像帧,将当前的第二图像帧和基准图像帧进行对比,以确定图像中是否存在运动,获得运动检测结果。
如果运动检测结果表征图像中不存在运动,或者,进一步,图像中无运动持续时间大于或等于预设时间阈值,智能家居设备200则可以重新进入待机状态;如果运动检测结果表征图像中存在运动,图像获取模块240则可以向数据处理芯片230发送上电启动信号。该上电启动信号可以通过GPIO引脚,传输至数据处理芯片,即图像获取模块240与数据处理芯片230通过GPIO接口连接,当图像获取模块240获取到图像中存在运动时,则通过GPIO引脚向数据处理芯片230传输开机信号(即上电启动信号)。
数据处理芯片230接收到上电启动信号后,则可以响应于该上电启动信号,上电启动整个SOC系统,在其他实施方式中,对于数据处理芯片230的启动方式,即,对于整个SOC系统的启动方式,还可以是其分两步启动,即,当运动探测器210检测到有热源时进行一部分启动,当运动检测模块220的运动检测结果显示为真的有运动时再进行一部分启动,具体启动分配可以实际器件设置。
数据处理芯片230启动后,从图像获取模块240的寄存器中读取收敛参数(例如3A算法参数),该3A算法参数可以包括第一模式下的第一曝光参数、第一增益参数和自动白平衡参数(AWB参数)。可以理解的是,图像获取模块240在算法收敛后,可以将获得的收敛参数(例如3A算法参数)写入自身的寄存器中。
数据处理芯片230读取到第一曝光参数、第一增益参数和自动白平衡参数之后,可以将第一曝光参数转换成第二模式下的第二曝光参数,将第一增益参数转换成第二模式下的第二增益参数,进而完成第二模式的相关配置。当然,在进行第二模式的相关配置时,还可以包括其他常用参数,例如行长或图像传感器的其他配置参数。上述转换过程可以基于数据处理芯片的微处理器完成。
另外,数据处理芯片230还可以将AWB参数写入至数据处理芯片230的图像信号处理(Image Signal Processing,ISP)模块中。这样,数据处理芯片230可以在出图时,使用ISP模块中的参数将图像获取模块240输出的RAW数据转换成彩色图像(例如RGB图像)。可以基于数据处理芯片的微处理器完成。
其中,第二模式是指图像获取模块240的工作模式,图像获取模块240在第二模式下工作时,以第二帧率和第二分辨率输出图像帧。通常情况下,第二帧率低于第一帧率,第二分辨率高于第一分辨率。第二模式下相对于第一模式下的像素合并模式和部分像素输出模式选择为像素阵列像素全部输出模式。
也就是说,图像获取模块240在快速启动模块的算法处理和运动检测阶段,工作在第一模式;在数据处理芯片230启动之后,工作在第二模式。上述的第一模式可以是小图模式,第二模式可以是大图模式,小图模式下图像获取模块240输出的是小图,数据量小,大图模式下图像获取模块240输出的是大图,数据量大。
数据处理芯片230根据第一模式下的收敛参数,完成第二模式的相关配置之后,获取图像获取模块240输出的原始图像帧(即RAW图),其中,基于第二曝光参数、第二增益参数,图像获取模块240持续输出大图,即,获得第三图像帧,该第三图像帧是画面亮度合适的第二模式大图,基于此,数据处理芯片230持续获取第三图像帧,以实现接通或视频录制。
由上可见,本实施例除了可以实现智能家居设备200的相对低功耗的快速启动之外,还可以通过将运动检测模块设置在图像获取模块内,在运动检测模块确认运动后再启动数据处理芯片的整个系统,可以避免触发信号误触导致数据处理芯片的系统误启动导致的功耗浪费,从而降低了智能家居设备的整体功耗。
具体来说,在图1所示的智能家居设备100中,将MD模块设置在数据处理芯片(SOC芯片)内。每当识别到触发信号后,则上电启动数据处理芯片,启动整个SOC系统,对采集的图像进行运动检测,以确定是否存在运动、事件或行人。但是,PIR模块等存在较多的误触信号,会导致整个SOC系统反复启动以进行运动检测,造成了系统功耗浪费。
而本申请实施例中,通过将MD模块(运动检测模块220)内置在图像获取模块中,在检测源运动热时,不需要启动整个数据处理芯片的系统以确定是否存在运动,只需要启动图像获取模块内的MD模块即可确定是否存在运动,在确认存在运动后再启动整个数据处理芯片的系统,避免了由于误触信号导致数据处理芯片的系统反复启动造成的系统功耗浪费,从而降低了智能家居设备200的整体功耗。此外,设置启动图像传感器中的运动检测模块和快速启动模块的功耗,比设置启动整个数据处理芯片的系统的相应模块简单及功耗低,这样也可以降低智能家居设备200的整体功耗。
除了可以将MD模块(运动检测模块220)内置在图像获取模块内,在数据处理芯片包括微处理(Microcontroller Unit,MCU)的情况下,还可以将MD模式设置在数据处理芯片内的MCU内。这样,也可以避免误触信号导致数据处理芯片的系统反复启动造成的功耗浪费,进而在实现智能家居设备的快速启动的同时,降低智能家居设备的功耗。
此时,数据处理芯片是一个双核心系统,即包括一个处理器和一个MCU系统。MCU系统是一个独立的系统,通过MCU与图像获取模块进行交互。
示例性地,参见图4示出的本申请实施例提供的智能家居设备200的又一种结构示意框图,图像获取模块240包括图像采集模块241和快速启动模块242。数据处理芯片230包括MCU231,运动检测模块220设置在MCU231内。
此时,智能家居设备200的工作过程可以如下:
智能家居设备200处于待机或休眠状态,并通过运动探测器210对外部环境持续进行运动源检测;若检测不到运动源,继续处于待机状态;若检测到运动源,则上电启动图像获取模块240。
图像采集模块241和快速启动模块242同时上电启动后,图像采集模块241则持续采集外部环境的第一图像帧。快速启动模块242获取图像采集模块241持续输出的第一图像帧,并对每帧第一图像帧均进行算法处理,并在图像画面亮度处于合适亮度后,认为图像稳定,算法收敛,获得收敛参数。
此时,在算法收敛后,快速启动模块242可以向MCU231发送上电启动信号;MCU231响应于该上电启动信号进行上电启动,并上电启动运动检测模块220。值得指出的是,MCU231除了可以在算法收敛后上电启动,也可以在图像获取模块240上电启动时,一并上电启动。即上电启动图像获取模块240时,MCU231也上电启动。
算法收敛后,图像采集模块241可以持续输出画面亮度合适的第二图像帧。MCU231内的运动检测模块220获取第二图像帧后,将当前的第二图像帧和基准图像帧进行对比,以确定图像中是否存在运动,获得运动检测结果。
如果运动检测结果表征图像中存在运动,MCU231则可以向数据处理芯片230发送上电启动信号。数据处理芯片230接收到上电启动信号后,则可以响应于该上电启动信号,上电启动整个数据处理芯片的系统,根据收敛参数转换的第二模式下的参数,基于图像获取模块240持续输出大图,以获得第三图像帧。
由上可见,本实施例除了可以实现智能家居设备200的相对低功耗的快速启动之外,还通过将运动检测模块内在MCU231内,在运动检测模块确认运动后再启动数据处理芯片的整个系统,可以避免触发信号误触导致数据处理芯片的整个系统误启动导致的功耗浪费,从而降低了智能家居设备的整体功耗。
与将运动检测模块内置在图像获取模块的方案类似,将运动检测模块设置在数据处理芯片内的单独的MCU中,在检测到热源运动时,不需要启动整个数据处理芯片的整个系统确认是否存在运动,只需要启动图像获取模块和MCU,即可确认是否存在运动,进而避免了由于误触信号导致数据处理芯片的整个系统反复启动造成的系统功耗浪费,降低了系统整体功耗。
当然,在另一些实施例中,当数据处理芯片不包括独立的MCU系统时,也可以将运动检测模块220设置在数据处理芯片内。但是此时在检测到热源运动时,需要启动数据处理芯片的整个系统进行运动检测,以确认是否存在运动。
在图1所示的智能家居设备100中,由于在运动检测模块确定存在运动后,才会接通或录制视频,故在一些突发事件时无法保存第一时刻的现场画面,例如,在出现报警事件是无法保留报警事件发生前100ms的视频画面。
为了在第一时刻保留现场画面,便于后续的追溯,本申请实施例可以通过数据处理芯片内的额外MCU提前进行视频画面录制并保存。
此时,数据处理芯片是带有额外MCU的双核心系统。可以在上电启动图像获取模块时,也一并上电启动MCU,并使用MCU保存图像获取模块采集的图像(如小图),以尽可能地提前进行画面录制,达到还原第一现场的效果。
在这种情况下,快速启动模块可以设置在图像获取模块内,也可以不设置在图像获取模块内;同理,MD模块可以设置在图像获取模块内,也可以设置在数据处理芯片内的MCU内,还可以设置在数据处理芯片内(不是MCU内)。
以快速启动模块和MD模块内置在图像获取模块内为例,参见图5示出的智能家居设备200的结构示意框图,图像获取模块240包括图像采集模块241、快速启动模块242和运动检测模块220,数据处理芯片230包括MCU231。
此时,参见图6A示出的本申请实施例提供的智能家居设备200的工作过程示意图,以运动探测器210检测热源运动,快速启动模块242是3A算法模块为例,智能家居设备200的工作过程可以如下所示:
智能家居设备200处于待机状态,并通过运动探测器210对外部环境持续进行热源运动检测;若检测不到热源运动,继续处于待机状态;若检测到热源运动,则上电启动图像获取模块240和上电启动MCU231。
图像获取模块240上电启动后,图像采集模块241持续输出第一图像帧,快速启动模块242对第一图像帧进行3A算法处理,获得3A算法参数。此外,MCU231在启动之后,可以从图像获取模块240持续获取第一图像帧,并保存第一图像帧。
示例性地,参见图6B示出的本申请实施例提供的3A算法过程示意图,图像获取模块在启动抓图模式并持续输出小图,对抓取的小图执行3A算法,以调节画面亮度,并统计AWB信息,此外,还将抓取的小图输出至MCU231,使得MCU231可以保存小图。
3A算法收敛后,则保存稳定画面并进入MD模式;3A算法未收敛时,继续抓取小图进行3A算法处理,直到3A算法收敛。
如图6A所示,3A算法收敛后,则通过上电启动MD模块,下电关闭快速启动模块,并通过MD模块进行运动检测,判断画面或图像中是否存在运动。
示例性地,参见图6C示出的本申请实施例提供的MD模式示意图,在3A算法收敛后,图像获取模块仍然处于抓图模式,并持续抓取小图,将抓取的小图输出至MCU231,使得MCU23可以保存小图,微处理器MCU231在运动检测模块获取检测结果时,获取并保存第二图像帧,其中,上述MD模块执行中,对抓取的小图与保存的稳定帧进行对比,以判断是否存在运动。
保存的稳定帧可以是3A算法收敛后输出的第一张图像帧。如果图像无画面运动,则图像获取模块继续进行抓取小图。当无画面运动,或者,进一步,无画面运动持续时间大于预设时间阈值,则退回待机状态。
可以理解的是,此时由于3A算法收敛了,故图像获取模块输出的小图是画面亮度合适的图像帧,认为是稳定的小图。
如图6A所示,在确定出存在画面运动即图像中存在运动时,启动数据处理芯片(例如SOC芯片),并启动整个SOC系统,以进行大图获取、输出和录制。即,根据3A算法参数基于图像获取模块输出的原始图像帧进行大图获取,获得第三图像帧。
在MD检测和3A算法收敛过程中,MCU231持续保存图像获取模块采集的小图。这样,MD模块检测出图像中存在运动时,仍然可以获取到发生运动之前的视频画面。
此外,如图6A所示,数据处理芯片还可以每隔预设时间段则根据图像获取模块采集的图像数据进行运动检测和/或人体检测,也即在大图的输出过程中进行检测。若检测到图像中不存在运动和/或人体,则下电关闭数据处理芯片的系统,进入待机状态;若检测到图像中存在运动或人体时,则继续进行大图获取和录制。数据处理芯片的运动检测和/或人体检测可以基于数据处理芯片自身设置的检测模块进行检测,可以采用现有对应的检测模块电路实现。
对应于上文实施例示出的智能家居设备200,图7示出了本申请实施例提供一种智能家居设备的启动方法的一种流程示意框图,应用于智能家居设备200,该智能家居设备200包括运动探测器、运动检测模块、数据处理芯片和图像获取模块等;图像获取模块包括图像采集模块和快速启动模块。关于智能家居设备200的相关介绍可以参见上文,在此不再赘述。为了便于说明,仅示出了与本申请实施例相关的部分。
如图7所示,该启动方法可以包括以下步骤:
步骤S701、智能家居设备200通过运动探测器检测运动源;
步骤S702、智能家居设备200若检测到运动源,则上电启动图像采集模块和快速启动模块;通过图像采集模块持续采集第一图像帧;
步骤S703、智能家居设备200通过快速启动模块对各个第一图像帧进行收敛处理,并在收敛处理算法收敛后获得收敛参数。
例如,通过快速启动模块对各个第一图像帧进行3A算法处理,并在3A算法收敛后获得3A算法参数;
步骤S704、智能家居设备200通过运动检测模块对第二图像帧进行运动检测,获得运动检测结果,第二图像帧是收敛算法收敛之后图像采集模块采集的图像帧;
步骤S705、智能家居设备200若运动检测结果表征图像中存在运动,通过数据处理芯片获取收敛参数,并基于收敛参数转换得到目标参数,根据目标参数并基于图像获取模块采集原始图像帧,以获得第三图像帧。即基于收敛参数转换成目标配置,以基于转换的目标配置通过图像获取模块输出图像,获得第三图像帧。
在一些可能的实现方式中,运动检测模块设置于图像获取模块内或数据处理芯片内的微处理器;若运动检测结果表征图像中存在运动,通过数据处理芯片获取收敛参数,包括:
若运动检测结果表征图像中存在运动,运动检测模块则向数据处理芯片发送上电启动信号;数据处理芯片响应于上电启动信号,上电启动数据处理芯片的系统,并获取收敛参数。
在一些可能的实现方式中,数据处理芯片包括微处理器,运动检测模块设置在微处理器内;该方法还包括:若运动探测器检测到运动源,微处理器则上电启动,并获取第一图像帧,并保存第一图像帧;和/或,微处理器在运动检测模块获取运动检测结果时,获取并保存第二图像帧。
应当理解的是,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。需要说明的是,上述智能家居设备200的启动方法的相关细节和介绍,由于与本申请实施例产品实施例基于同一构思,其具体功能及带来的技术效果,具体可参见产品实施例部分,此处不再赘述。也即,相关介绍可以参见上文智能家居设备200的相关介绍。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请实施例还提供了一种电子设备,该电子设备包括:至少一个处理器、存储器以及存储在所述存储器中并可在所述至少一个处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任意各个方法实施例中的步骤。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现可实现上述各个方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行时实现可实现上述各个方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括:能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区,根据立法和专利实践,计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置、电子设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/电子设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种智能家居设备,其特征在于,包括运动探测器、运动检测模块、数据处理芯片和图像获取模块;图像获取模块包括图像采集模块和快速启动模块;
所述运动探测器用于检测运动源;
所述图像获取模块用于在所述运动探测器检测到运动源时上电启动所述图像采集模块和所述快速启动模块;通过所述图像采集模块持续采集第一图像帧;通过所述快速启动模块对各个所述第一图像帧进行收敛处理得到收敛参数;
所述运动检测模块用于获取所述图像采集模块持续采集的第二图像帧,所述第二图像帧是得到所述收敛参数之后采集的图像帧;根据所述第二图像帧进行运动检测以获得运动检测结果;
所述数据处理芯片用于在所述运动检测结果表征图像中存在运动时获取所述收敛参数,并基于所述收敛参数转换得到目标参数;根据所述目标参数并基于所述图像获取模块采集原始图像帧,以获得第三图像帧。
2.如权利要求1所述的设备,其特征在于,所述运动检测模块设置于所述图像获取模块内或所述数据处理芯片的微处理器内;
所述运动检测模块对应的模块用于在所述运动检测结果表征图像中存在运动时向数据处理芯片发送上电启动信号,或者,在所述运动检测结果表征图像中不存在运动时向数据处理芯片发送下电关闭信号;
所述数据处理芯片具体用于响应于所述上电启动信号,上电启动所述数据处理芯片的系统。
3.如权利要求2所述的设备,其特征在于,所述微处理器还用于在所述运动探测器检测到热源运动时,获取并保存所述第一图像帧;和/或,所述微处理器还用于在所述运动检测模块获取运动检测结果时,获取并保存所述第二图像帧。
4.如权利要求1所述的设备,其特征在于,所述第一图像帧和所述第二图像帧是所述图像获取模块在第一模式下输出的图像帧;
原始图像帧是所述图像获取模块在第二模式下输出的图像帧;
所述图像获取模块在所述第一模式下以第一帧率和/或第一分辨率输出图像帧,在所述第二模式下以第二帧率和/或第二分辨率输出图像帧;其中,所述第一帧率高于所述第二帧率,和/或,所述第一分辨率低于所述第二分辨率。
5.如权利要求4所述的设备,其特征在于,所述运动检测模块设置在所述图像获取模块内;所述收敛参数包括所述第一模式下的第一曝光参数、第一增益参数以及自动白平衡参数中的至少一者;
所述数据处理芯片用于将所述第一曝光参数转换成所述第二模式下的第二曝光参数;将所述第一增益参数转换成所述第二模式下的第二增益参数;根据所述第二曝光参数、所述第二增益参数和所述自动白平衡参数中的至少一者,通过所述图像获取模块输出的所述原始图像帧,获得所述第三图像帧。
6.如权利要求1所述的设备,其特征在于,所述运动检测模块还用于在所述运动检测结果表征图像中不存在运动或者图像中不存在运动且图像中无运动持续时间大于或等于预设时间阈值控制系统进入待机状态。
7.如权利要求2至6任一项所述的设备,其特征在于,所述数据处理芯片还用于每隔预设时间段根据所述图像获取模块采集的图像数据进行运动检测和/或人体检测;若检测到图像中不存在运动和/或人体,则下电关闭所述数据处理芯片的系统,进入待机状态。
8.一种智能家居设备的启动方法,其特征在于,所述智能家居设备包括运动探测器、运动检测模块、数据处理芯片和图像获取模块;所述图像获取模块包括图像采集模块和快速启动模块;
所述方法包括:
通过所述运动探测器检测运动源;
若检测到运动源,则上电启动所述图像采集模块和所述快速启动模块;通过所述图像采集模块持续采集第一图像帧;
通过所述快速启动模块对各个所述第一图像帧进行收敛处理,并在所述收敛处理算法收敛后获得收敛参数;
通过所述运动检测模块对第二图像帧进行运动检测,获得运动检测结果,所述第二图像帧是所述收敛处理算法收敛后所述图像采集模块采集的图像帧;
若运动检测结果表征图像中存在运动,通过所述数据处理芯片获取所述收敛参数,并基于所述收敛参数转换得到目标参数,根据所述目标参数并基于所述图像获取模块采集原始图像帧,以获得第三图像帧。
9.如权利要求8所述的方法,其特征在于,所述运动检测模块设置于所述图像获取模块内或所述数据处理芯片内的微处理器;
若运动检测结果表征图像中存在运动,通过数据处理芯片获取所述收敛参数,包括:
若所述运动检测结果表征图像中存在运动,所述运动检测模块对应的模块向数据处理芯片发送上电启动信号,或者,若所述运动检测结果表征图像中不存在运动,所述运动检测模块对应的模块向数据处理芯片发送下电关闭信号;
所述数据处理芯片响应于所述上电启动信号,上电启动所述数据处理芯片的系统,并获取所述收敛参数。
10.如权利要求9所述的方法,其特征在于,所述运动检测模块设置在所述微处理器内;所述方法还包括:
若所述运动探测器检测到运动源,所述微处理器则上电启动,获取所述第一图像帧,并保存所述第一图像帧;和/或,所述微处理器在所述运动检测模块获取运动检测结果时,获取并保存所述第二图像帧。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311501531.4A CN117555611A (zh) | 2023-11-10 | 2023-11-10 | 智能家居设备及其启动方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311501531.4A CN117555611A (zh) | 2023-11-10 | 2023-11-10 | 智能家居设备及其启动方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117555611A true CN117555611A (zh) | 2024-02-13 |
Family
ID=89810295
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311501531.4A Pending CN117555611A (zh) | 2023-11-10 | 2023-11-10 | 智能家居设备及其启动方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117555611A (zh) |
-
2023
- 2023-11-10 CN CN202311501531.4A patent/CN117555611A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4849717B2 (ja) | ビデオカメラによる動きの検出に応答して電子機器の電源をオンにするための方法及び装置 | |
EP3570138A1 (en) | Power efficient image sensing apparatus, method of operating the same and eye/gaze tracking system | |
CN103905706A (zh) | 一种网络摄像机及其控制方法 | |
CN113411504A (zh) | 一种野外红外相机的智能拍摄方法及系统 | |
WO2022042671A1 (zh) | 可穿戴设备及其图像信号处理装置 | |
US20220301278A1 (en) | Image processing method and apparatus, storage medium, and electronic device | |
CN103795923A (zh) | 一种摄像设备的拍摄控制方法和摄像设备 | |
US20230209021A1 (en) | Image sensing scheme capable of saving more power as well as avoiding image lost and also simplifying complex image recursive calculation | |
US11336870B2 (en) | Smart motion detection device and related determining method | |
CN115862081A (zh) | 图像采集方法、装置、设备和计算机可读存储介质 | |
CN117555611A (zh) | 智能家居设备及其启动方法 | |
KR101418892B1 (ko) | 전단 이벤트 감지장치 및 이를 이용한 저전력 카메라 시스템 | |
JP2001238189A (ja) | 画像処理装置及び該装置における動作制御方法 | |
CN112153245A (zh) | 控制方法及摄像机 | |
CN114785919A (zh) | 一种图像处理芯片及方法 | |
CN115129138A (zh) | 功耗控制方法、功耗控制系统、存储介质和电子设备 | |
US20210152740A1 (en) | Imaging apparatus | |
CN112218008B (zh) | 设备控制方法、装置、存储介质和电子设备 | |
CN111523350A (zh) | 图像识别方法及装置、存储介质、终端、图像识别系统 | |
CN214707842U (zh) | 监控设备与电子装置 | |
CN118158523A (zh) | 一种基于aov的双目黑光安防低功耗摄像的方法及装置 | |
CN111316631A (zh) | 拍摄装置的控制方法和拍摄装置 | |
TWI848829B (zh) | 具有動作感測機制的圖像處理裝置與方法 | |
CN116405749B (zh) | 低功耗持续录像的门锁监控装置、门锁系统及实现方法 | |
KR101992307B1 (ko) | 얼굴 검출기가 집적된 cmos 이미지 센서를 이용한 저 전력 얼굴 인식 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |