CN114576804A - 智能送风方法、设备和系统 - Google Patents
智能送风方法、设备和系统 Download PDFInfo
- Publication number
- CN114576804A CN114576804A CN202011372359.3A CN202011372359A CN114576804A CN 114576804 A CN114576804 A CN 114576804A CN 202011372359 A CN202011372359 A CN 202011372359A CN 114576804 A CN114576804 A CN 114576804A
- Authority
- CN
- China
- Prior art keywords
- air supply
- human body
- air
- module
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/54—Control or safety arrangements characterised by user interfaces or communication using one central controller connected to several sub-controllers
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/56—Remote control
- F24F11/58—Remote control using Internet communication
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
- F24F11/63—Electronic processing
- F24F11/64—Electronic processing using pre-stored data
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
- F24F11/63—Electronic processing
- F24F11/65—Electronic processing for selecting an operating mode
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/70—Control systems characterised by their outputs; Constructional details thereof
- F24F11/72—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure
- F24F11/74—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling air flow rate or air velocity
- F24F11/77—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling air flow rate or air velocity by controlling the speed of ventilators
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/70—Control systems characterised by their outputs; Constructional details thereof
- F24F11/72—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure
- F24F11/79—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling the direction of the supplied air
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2120/00—Control inputs relating to users or occupants
- F24F2120/10—Occupancy
- F24F2120/12—Position of occupants
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2120/00—Control inputs relating to users or occupants
- F24F2120/20—Feedback from users
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B30/00—Energy efficient heating, ventilation or air conditioning [HVAC]
- Y02B30/70—Efficient control or regulation technologies, e.g. for control of refrigerant flow, motor or heating
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Fluid Mechanics (AREA)
- Air Conditioning Control Device (AREA)
Abstract
公开了一种智能送风方法、设备和系统。所述方法,包括:拍摄模块拍摄目标空间的图像;识别所述图像中的人体;计算人体所在位置;以及根据计算出的人体位置,调整送风方向。本发明通过人体识别模型实时感知人的数量和位置,并进行相应的送风调节。上述感知可以通过识别拍摄图像中的人像轮廓实现,以极小的计算代价实现相对准确的智能送风。
Description
技术领域
本公开涉及智能电器领域,尤其涉及一种智能送风方法、设备和系统。
背景技术
风扇是一种通过驱动扇叶旋转,来达到使空气加速流通的机械,主要用于清凉解暑和空气流通。电风扇则是电力来驱动扇叶旋转来达到使空气加速流通的家用电器。在传统家电领域,大多通过按钮或遥控器等方式来实现对电器的简单控制。例如,可以通过风扇底座上的按钮进行开关和吹风档位调节,可以通过按下摇头杆使得风扇进行左右摆动。但上述针对风扇的简单操作已经无法满足智能家居中对自动精确送风的需要。
为此,需要一种智能送风方案。
发明内容
本公开要解决的一个技术问题是提供一种智能送风方案,该方案通过人体识别模型实时感知人的数量和位置,并进行相应的送风调节。具体地,上述感知可以通过识别拍摄图像中的人像轮廓实现,从而以极小的计算代价实现相对准确的智能送风。
根据本公开的第一个方面,提供了一种智能送风方法,包括:拍摄模块拍摄目标空间的图像;识别所述图像中的人体;计算人体所在位置;以及根据计算出的人体位置,调整送风方向。
根据本公开的第二个方面,提供了一种智能送风设备,包括:拍摄模块,用于拍摄目标空间的图像;计算模块,用于识别所述图像中的人体,计算人体所在位置,并根据计算出的人体位置,生成送风方向调整信号;以及送风模块,用于根据所述送风方向调整信号,进行送风。
根据本公开的第三个方面,提供了一种智能送风系统,包括:根据本发明第二方面所述的智能送风设备;以及智能控制设备,用于基于用户指令和/或预先设置,控制所述智能送风设备的送风。
由此,本发明通过在送风设备上配备人体识别模块,能够实现例如三至五米内的近距离人体识别,并且能够根据人的数量,定义不同模式的吹风模式。可以通过人体识别,实现单人跟随,多人小范围轮扫,还可以根据距离实现自动风量调节。上述人体识别模块可以通过低像素摄像头和处理能力有限的计算单元实现,通过识别图像中的人像轮廓,并根据识别出的人像轮廓的方位和大小大致推定人物的方位,从而给出相应的送风参数。换句话说,本发明可以通过低成本的配置和相对简单的运算实现基于人体识别的智能送风。
附图说明
通过结合附图对本公开示例性实施方式进行更详细的描述,本公开的上述以及其它目的、特征和优势将变得更加明显,其中,在本公开示例性实施方式中,相同的参考标号通常代表相同部件。
图1A和1B示出了现有技术中利用电风扇进行送风的例子。
图2示出了根据本发明一个实施例的智能送风方法的示意性流程图。
图3示出了在单人模式下在预定角度内送风的一个例子。
图4A和4B示出了在本发明单人和多人模型下进行送风的例子。
图5示出了根据本发明一个实施例的智能送风设备的组成示意图。
图6示出了可以利用本发明的送风设备的例子。
图7示出了能够实现本发明智能送风方案的物联网系统的一个例子。
具体实施方式
下面将参照附图更详细地描述本公开的优选实施方式。虽然附图中显示了本公开的优选实施方式,然而应该理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
风扇是一种通过驱动扇叶旋转,来达到使空气加速流通的机械,主要用于清凉解暑和空气流通。电风扇则是电力来驱动扇叶旋转来达到使空气加速流通的家用电器。在传统家电领域,大多通过按钮或遥控器等方式来实现对电器的简单控制。
图1A和1B示出了现有技术中利用电风扇进行送风的例子。如图1A所示,可以根据风扇底座上的按钮进行风扇的档位调节,并且在只有一个人的情况下,直接进行单人定向吹风。而在如图1B所示有多个人需要吹风的情况下,可以通过按下摇头杆使得风扇在固定的范围内进行左右摆动。
上述针对风扇的简单操作及其应对已经无法满足智能家居中对自动精确送风的需要。为此,本发明提出了一种新的智能送风方案,该方案通过人体识别模型实时感知人的数量和位置,并进行相应的送风调节。具体地,上述感知可以通过识别拍摄图像中的人像轮廓实现,从而以极小的计算代价实现相对准确的智能送风。进一步地,该方案还可以与智能家居系统结合,以使得语音控制送风和自动调整送风的有机结合,更符合用户的各类利用场景。
图2示出了根据本发明一个实施例的智能送风方法的示意性流程图。该方法可由各类送风设备,尤其是通过电机驱动叶片进行送风并且能够变换送风方向的送风设备(例如,各类电风扇)实施。在其他实施例中,该方法可以至少部分借助于与送风设备通信的控制设备(例如,用作智能家居控制中心的智能音箱)实现。
在步骤S210,拍摄模块拍摄目标空间的图像。在此,拍摄模块可以是位于送风设备上的拍摄模块,例如拍摄可见光图像的普通摄像头。由于拍摄模块安装在送风设备上,换句话说,送风设备的送风位置和拍摄模块的拍摄位置存在一定的一致性,因此在随后操作中能够更为直接地利用拍摄图像中的信息进行人体位置定位。
在步骤S220,识别所述图像中的人体。在此,由于拍摄模块优选拍摄可见光图像,为此通过对拍摄的二维可见光图像进行分析来进行人体识别。可以通过识别图像中人体所具有的特征来进行人体识别。在一个实施例中,基于所述图像中的人像轮廓,判断所述图像中存在人体。具体地,可以通过人体的头部和肩膀的轮廓识别,来确定人体的存在。进一步地,上述头部和肩膀的轮廓还有助于如下确定需要进行送风的范围。
在步骤S230,计算人体所在位置。步骤S220和S230所包括的识别和计算操作可由送风设备上所包括的计算模块实现。例如,根据本发明的的智能风扇上可以包括微型处理单元(MCU)用于风扇的送风控制(包括送风的方向和风量)。上述处理单元也可以用作基于拍摄图像识别人体并计算人体所在位置的计算模块。在基于人像轮廓判断人体存在时,可以根据该人像轮廓在图像中的位置来计算人体相对于送风设备的所在方位。进一步地,还可以根据人像轮廓在图像中的呈现的大小,来计算人像相对于送风设备的距离。
随后,在步骤S240,可以根据计算出的人体位置,调整送风方向。具体地,可以将送风方向设为人体所在方位的预定范围内。图3示出了在单人模式下在预定角度内送风的一个例子。如图所示,假设智能风扇的摇头范围在正前方向的正负60°之间(即,具有120°的最大摇头范围),而根据拍摄图像识别出在人体所在方位,来确定摇头扫风的范围。具体地,可以将送风方向设为人体所在坐标的预定正负角度内摆动;和/或根据人像轮廓在所述图像中的大小,确定送风方向的预定范围。
如图3所示,可以确定人体坐标点(例如,中心坐标点),并且根据人体坐标所处方向角,确定例如预定正负5°或10°的扫风范围。作为补充或是替换,也可以根据人像轮廓在所述图像中的大小,确定人体轮廓涵盖的坐标范围,并在上述坐标范围内(或是坐标范围内再左右多扫预定角度)进行扫风。
在某些实现中,智能送风方法还可以包括个性化设置功能,用于对送风进行设置。为此,调整送风方向例如可以包括:将送风方向设为人体所在坐标的用户设定正负角度内摆动,例如,默认是正负5°的扫风范围,用户可以在例如相应的操作APP中(例如,个性化设置页面中)或是利用遥控将扫风范围调整为正负10°。进一步地,还可以进行了全面覆盖(例如,大角度摆动)、中心覆盖(小角度摆动)等的送风方向个性化设置,还可以对如下所述的个人模式和多人模式进行个性化设置。
进一步地,智能送风方法还可以包括自学习功能。利用该功能,可以基于人像轮廓学习人体身形,并基于习得的人体身形确定送风方向。例如,以利用自学习功能分辨人体的高矮胖瘦,并由此调整送风方向,确保能够针对不同身形的个体进行全面送风。
如前所述,拍摄模块可以布置在送风设备上。在不同的实施例中,拍摄模块可以布置在送风设备的不同位置处。例如,拍摄模块可以不随送风方向的调整而变化,并且在整个送风过程中保持固定不动。在送风设备的电风扇的情况下,送风设备可以布置在底座或是连接杆上。此时,拍摄模块以同一朝向(通常是正对正前方)拍摄其视角范围内的图像,计算模块可以根据由此拍摄的图像进行人体识别和定位。此时,由于拍摄视角不变,因此计算模块所需的计算相对简单。但此时需要拍摄模块的摄像头具有相对较大的拍摄视角,并且在电风扇场景中位于下部的安装容易导致视线被遮挡。
作为替换,拍摄模块可以随送风方向的调整而变化,例如,安装在风扇顶部,风扇中间转轴的电机中空位置处等。这样,拍摄模块的拍摄方向始终与设备的当前送风方向一致,因此能够更为准确的捕捉到周围环境的图像,并对人体位置进行更为准确的识别。虽然上述相对运动会导致计算模块对人体位置的计算需要考虑送风设备的当前送风位置。
在拍摄模块可以随送风方向的调整而变化时,可以更方便准确地确定人体方位。例如,可以基于人像轮廓位于图像中间的图像(即,吹风方向正对人体时的图像)来计算人体坐标点(例如,轮廓中间)或坐标范围(例如,轮廓涵盖范围),也可以基于人像轮廓与拍摄方向垂直的图像(即,吹风方向垂直于人体时的图像)来计算人体坐标点(例如,轮廓中间)或坐标范围(例如,轮廓涵盖范围)。
在其他实施例中,拍摄模块还可以独立于送风方向自行调整拍摄方向,例如,可以将拍摄模块安装在电风扇底座的可转动装置上。此种实现虽然可以增加拍摄的灵活度,但增加了额外的计算量。
进一步地,在步骤S230中,计算人体所在位置还可以包括:根据所述人像轮廓在所述图像中的大小,计算人体的相距距离,并且所述智能送风方法还可以包括:根据所述相距距离,调整送风的风速。例如,在人像轮廓较小时,判断人体离风扇较远,并由此自动调大风量,而在人像轮廓较大时,判断人体离风扇较近,并由此自动调小风量。
进一步地,在某些实施例中,本发明的智能送风方法还可以根据需要吹风人数的不同,选择不同的模式进行送风。为此,步骤S220中识别所述图像中的人体包括:判断图像中包含的人体个数,以确定进行单人模式还是多人模式。例如,可以通过判断同一幅图像中包含的人像轮廓个数,来判断送风范围内包括多少个人,并由此确认送风模式。而在拍摄模块可以随送风方向的调整而变化的实现中,可以通过拍摄模块在完整轮扫范围(例如,120°)中拍摄的全部图像,或者至少是角度相聚较远的两个或多个方向上拍摄的图像,来确定送风最大范围内所包括的人数。
如果判断多人,则可进入多人模式。在多人模式中,可以将送风方向设为所述多人所在方位的预定范围内。如果判断单人,则可进入单人模式。在单人模式中,可以根据人体的实时方位进行跟随送风。
图4A和4B示出了在本发明单人和多人模型下进行送风的例子。当判定送风范围内存在多个人时,例如图4A所示的两人,可以将送风范围限定在给这两个人送风的范围,由此进行多人小范围轮扫。多人模式中轮扫的范围如图4B所示,通常要小于常规电风扇默认摇头的范围(如图1B)所示,当然也不排除识别出有人分别分布在送风设备默认最大送风范围的两端而使得多人轮扫需要涵盖整个可用的轮扫范围。具体地,同样可以根据识别出的多个人的人像轮廓在图像中的方位和大小来确定送风的角度和大小。多人的人像轮廓可以如图4A所示存在部分重叠,此时送风角度要大于单人的预定角度,却小于单人预定角度的人数倍数。多人的人像轮廓也可以彼此分离,此时送风角度可能会大于单人预定角度的人数倍数,这是因为在相邻两人之间的无人区域通常也需要送风。
当判定送风范围内只有一个人时,则可以在单人模式中实现走动跟随。如图4B所示,用户首先位于送风设备出的右侧(以出风方向为正向,对应于图示上部的人像)。此时,送风设备可以识别用户位于右侧,并进行针对用户当前位置的小范围轮扫。随后,用户沿着图中灰色虚线进行移动,拍摄设备可以对目标空间进行实时拍摄,可以跟随着用户移动进行送风。随后,用户在位于送风设备出的左侧的位置停下。此时,送风设备可以识别用户位于左侧(对应于图示下部的人像),并进行针对用户当前位置的小范围轮扫。进一步地,由于下部人像比上部人像要大,由此指示用户离送风设备的距离变近了,此时送风设备可以自动调小送风的风量。
在其他实施例中,作为人像轮廓识别人体的补充,还可以基于图像中的对象运动,判断所述图像中存在人体。
在根据本发明进行送风的一个例子中,首先,风扇启动。上述启动可以基于用户对风扇上的按钮进行操作而启动,或是通过遥控或是语音操作启动。风扇启动后,可以按照默认档位或是用户选择的档位(即,风速)送风,并且通过轮扫一周(例如,风扇在其最大摇头范围内进行120°轮扫),进行人物模式判断。可以基于拍摄图像的识别结果,判断目标空间中是否有人。若无人,则可以继续进行轮扫。否则,则进行模式判断。如果识别为图像中只有一人,则启动单人模式,进行基于人物坐标的预定角度扫风(例如,正负5°扫风、涵盖人物坐标范围的扫风等)。如果识别为同时存在多人,则启动多人模式,在人物所在范围内扫风。
当人物坐标变化时,如果单人模式下变动后仍为单人,则可以实现单人模式下的单人走动跟随送风。如果多人模式下变动后仍为多人,则可以根据新的坐标进行人物所在范围内扫风。如果存在多人到单人,单人到多人,以及到无人状态的转变,则可以重新进行模式判断,并进行相应模式下的送风。
在调整送风方向时,除了可以根据计算出的人体位置,调整左右送风的方向之外,在某些实施例中,还可以相应地调整上下送风方向,例如针对能够在更大范围内改变方向的空气循环扇。
进一步地,送风方向和/或大小还可以结合历史信息和/或环境信息进行调整。具体地,历史信息可以包括用户自行设置的偏好信息,或是根据用户在前操作生成的历史操作信息。例如,如果用户在前一次的送风中将风速设为较小,则可以在本次启动后自动选择较小的风量。如果用户的用户偏好为较大风量,则可以在常规风量的基础上进行风量上调。而如果用户不喜欢被对着吹,则可以增大人物所在范围内扫风的扫风角度等。
环境信息则可以包括更大范围的环境信息,例如天气信息,和更小范围的环境信息,例如送风设备所在家庭环境内的信息。例如,当天气显示为高温时,可以默认增大送风风量,以帮助用户降温。进一步地,还可以根据例如智能家庭内其他传感器或设备所采集的信号来进行风量或风向的调整。例如,可以读取室内温度计的度数以根据室温来确定起始送风量的大小,甚至可以结合家用摄像头来进行更精确的人数和方位的确定。
上述根据历史信息和/或环境信息来调整送风的大小和/或方向的操作可以是送风设备本身实现的。例如,送风设备可以包括简单的用户偏好记忆功能,或是包括温度计等环境传感器。在其他实施例中,上述操作可以借助其他设备,例如作为家庭物联网控制设备的智能音箱来实现。为此,根据历史信息和/或环境信息,调整送风的大小和/或方向可以包括:根据计算出的人体位置,生成送风大小和方向数据并上传;获取下方的送风指令数据,所述送风指令数据由智能终端(例如,智能音箱)根据所述送风大小和方向数据以及历史信息和/或环境信息生成。
如上已经结合附图2-4B描述了根据本发明的智能送风方法。上述送风方法可由根据本发明的智能送风设备实现,或由其实现至少一部分。
图5示出了根据本发明一个实施例的智能送风设备的组成示意图。本发明中的智能送风设备尤其可以是基于电机驱动叶片进行送风并且能够变换送风方向的送风设备(例如,各类电风扇)的设备。
如图5所示,设备500包括拍摄模块510、计算模块520和送风模块530。拍摄模块510用于拍摄目标空间的图像。计算模块520用于识别所述图像中的人体,计算人体所在位置,并根据计算出的人体位置,生成送风方向调整信号。送风模块530则可以根据所述送风方向调整信号,进行送风。
在某些实施例中,拍摄模块510和计算模块520可以实现为人体识别模块,专门用于进行人体识别和定位。在此,由于仅需要识别人像轮廓(例如,头部和肩部的轮廓),因此拍摄模块510可以实现为低像素摄像头(光学镜头),由此在满足识别需求的情况下降低成本。计算模块520则可以是满足人体识别和计算所需的模块,例如可以实现为智能送分设备的微控制单元。由此,该识别模块通过配合光学镜头,实现识别角度范围内的人像轮廓识别。同时根据轮廓大小,粗略判断人像距离。识别模块在送分设备上,跟随转动部件,实时定位人的数量和位置,调试吹风模式。
在此,送风模块指代能够根据接收到的调整指令,进行送风(包括风量调整)和调整风向的装置。为此,送风模块530可以包括:电机模块,用于基于送风风速调整信号,生成相应大小的风;以及调向模块,用于基于送风方向调整信号,调整送方的方向。在常规带有叶片的电风扇作为智能送风设备的场景中,电机工作带动叶片旋转,以进行送风。调节电机的转速,可以相应变换叶片转速,从而控制风量。风向调节的动力同样可以来自电机。由于风扇电机转速较高,而摇头不需要那么高的频率,所以先要进行减速。例如,可以通过蜗轮蜗杆和齿轮变速进行减速,在借助曲柄摇杆机构,达到往复运动。可以进一步使用各种可行的机械结构来实现轮扫范围内的小范围送风,本发明对此不作限制。
具体地,拍摄模块510可以用于:实时拍摄所述目标空间的图像。为此,计算模块520可以用于:在从所述图像中识别出的人物坐标发生变动时,生成新的送风方向/风速调整信号。相应地,送风单元530可以用于:基于所述新的送风方向/风速调整信号,进行送风。
在一个实施例中,计算模块520可以用于:基于所述图像中的人像轮廓,判断所述图像中存在人体;以及将送风方向设为人体所在方位的预定范围内。
进一步地,计算模块520可以用于:根据所述人像轮廓在所述图像中的大小,计算人体的相距距离;以及根据所述相距距离,生成送风风速调整信号。所述送风模块530用于根据所述送风风速调整信号,进行送风。
换句话说,可以根据人物坐标和人物距离这两个维度(都基于从拍摄图像中识别出的人像轮廓),来同时实现跟随送风和风量调节这两个维度上的调整。
进一步地,计算模块520可以用于:判断图像中包含的人体个数,以确定进行单人模式还是多人模式。在多人模式中,可以将送风方向设为所述多人所在方位的预定范围内。而在单人模式中,根据人体的实时方位进行跟随送风。
类似地,送风设备还可以包括:个性化设置模块,用于将送风方向设为人体所在坐标的用户设定正负角度内摆动;和/或自学习模块,用于基于人像轮廓学习人体身形,并基于习得的人体身形确定送风方向。
为了满足智能家居的需求,本发明的智能送风设备500除了用于自身识别人体并进行相应送风调整的能力之外,还可以包括通信模块。通信模块可以包括例如红外模块,用于接收来自常规遥控器的控制指令。通信模块还可以包括例如蓝牙或是WiFi模块的短距离无线通信协议模块,用于接收智能控制设备的控制指令。送风模块530可以基于所述控制指令,进行送风。例如,红外模块可以根据接收到的来自遥控器的开机指令,以前次关机时的档位风速或默认档位风速启动运转,并且可以接收来自遥控器的换档或是摇头指令。进一步地,当智能送风设备500经由鉴权流程接入家庭物联网之后,可以作为智能家庭物联网的一部分,由物联网控制设备(例如,智能音箱进行控制)。智能音箱在被唤醒之后(例如,通过说出唤醒词),可以接收用户的语音指令,例如“打开电扇”,智能音箱随后可以利用本地或是云端的语音处理能力,理解用户想要打开电扇的意图,并生成相应的开机指令。上述开机指令例如可以经由智能音箱的蓝牙模块发送给智能送风设备500。送风设备500随后可以基于上述指令,启动运转。
进一步地,除了基于用户的明确指令(例如,基于语音或是遥控)进行响应送风调整,以及识别人体状态进行自动送风调整之后,送风设备500还可以结合更多的维度来实现更为贴合用户需求的自动送风调整。
此时,通信模块可以用于:上传计算模块520生成的送风方向/风速调整信号,例如,上传给诸如智能印象的智能控制设备。随后,智能控制设备基于所述送风方向/风速调整信号,并结合历史信息和/或环境信息,最终生成综合考虑了用户当前状态(即,识别出的人体位置和大小)、用户偏好(例如,历史信息)和环境信息的控制指令。由此,能够给出有更大概率贴近用户实际需求的送风参数。
如前所述,拍摄模块510可以固定不动,也可以优选地安装在所述智能送风设备的转动部件上。并且同样如前所述,本发明中的智能送风设备尤其可以是基于电机驱动叶片进行送风并且能够变换送风方向的送风设备的设备。图6示出了可以利用本发明的送风设备的例子。如图所示(从左至右),本发明的智能送风设备可以包括:普通电扇、空气循环扇、无叶风扇、和/或塔扇。空气循环扇、无叶风扇和塔扇都可以看作是特种电扇。
空气循环扇能让室内空气形成束,从而在密闭空间内形成一个空气循环,加速室内的空气流动速度。为了实现上述功能,相比于普通风扇,空气循环扇具有封闭式的聚风筒和加长的风道,以方便气流的聚集。另外,虽然图中未示出,但空气循环扇的扇叶通常较小且倾斜角大,以通过切风塑向,使风力也更加集中。前网罩是通过特定曲率栅格设计的带螺旋角度的定向塑风导流罩,从而进一步聚拢送风。空气循环扇能够通过控制电机转速来控制风量,并且能够在更大的角度和维度上进行送风方向调整。
无叶风扇同样也是电风扇的一种,但并非真正无扇叶,实际上只是扇叶隐藏在底座里面。无叶风扇的底座设有一离心式压缩机,以叶片旋转在底座四周吸入空气、增压,推送至风扇顶部的中空的管状环,管状环上一端有幼窄的缝,空气自此窄缝喷出,喷出的方向使被喷出的空气沿管状环的内壁前进,由于内壁的横切面成翼型,基于白努利定律使得在空气喷出环的一边的内壁表面成形成低压,如此,形成环中心前方较后方低压,后方的空气因而被拉进往前,环内的大量空气因此被牵引喷出。无叶风扇能够通过控制底座中叶片转速来控制风量,并且能够在水平维度上旋转以调整送风方向。
塔扇以塔状外形得名。塔扇的风通过贯流风机“甩”出,形成气流,通过风轮转动后造成风压产生离心式风力,最后经过内部导风壁将风力传送出去。由于贯流风轮一般为圆筒状,因此,可以使用塔扇获得立体状的气流墙,或称之为“风幕”,该风幕垂直于地面,同样可以左右摇摆吹送。另外,贯流风轮具有很多的风叶,因此,送风均匀柔和。
除了图6所示的例子之外,本发明还适用于其他能够调整风速和风向的送风设备,例如还可以包括送出经加热或是冷却的空气的送风设备,例如暖风机、冷风机或是空调等。
无论是针对普通电扇,还是如上描述的特型电扇,或是诸如暖风机之类的其他冷暖设备,这类送风设备都可以通过配备包括拍摄模块和计算模块的人体识别模块,根据图像中的人像轮廓来识别人的方向与距离,并且进行相应的送风。
在某些实施例中,智能送风模块还可以包括更多种形式的控制功能。例如,智能送风模块可以具有手势识别能力。为此,拍摄模块510可以用于:拍摄用户手势。相应地,计算模块可以用于:识别所述用户手势,并基于所述手势生成相应的送风调整信号。换句话说,拍摄模块510可以保持持续拍摄目标空间,计算模块可以通过拍摄的图像进行人像轮廓识别,也可以利用相同的图像进行手势识别,并且根据识别出的手势进行例如开关机、风速调整和风向调整等的操作。
进一步地,送风设备本身也可以包括一定的语音识别能力。为此,该设备可以包括:语音识别模块,用于采集用户语音并进行识别。相应地,计算模块可以用于:基于识别的语义,生成相应的送风调整信号。通常,出于成本的考虑,送风设备上所配备的语音识别模块仅仅用于识别有限的语音指令,例如,“打开风扇”、“调低风扇”等。
进一步地,本发明还可以实现为一种智能送风系统,包括:如上所述的能够实现本发明的智能送风方法的智能送风设备;以及智能控制设备,用于基于用户指令和/或预先设置,控制所述智能送风设备的送风。
该智能送风系统可以实现为物联网系统,例如以智能音箱作为智能控制设备的家庭物联网系统,或是并入作为家庭物联网系统所具备的一种功能。图7示出了能够实现本发明智能送风方案的物联网系统的一个例子。
如图所示,家庭物联网(IoT)包括作为控制中心的智能音箱200。其他的IoT设备,例如图右侧所示的智能电视、智能电饭煲、智能门铃等可以通过鉴权认证接入物联网,并且能够通过短距离无线传输接收来自智能音箱200的指令,并进行相应的操作。相应地,基于本发明的智能电风扇100同样可以通过鉴权认证接入家庭物联网,并受到智能音箱200的控制。
具体地,智能音箱可以采集用户语音并进行识别;以及根据识别的语义,生成相应的送风调整指令并下发至所述智能送风设备。例如,用户可以对智能音箱下发语音指令“打开风扇”,此时,智能音箱200可以利用通过语义识别和意图确认来判定用户打开风扇的意图,并向送风设备100发出启动指令。
在接收到诸如“打开风扇”之类常见且简单的语音输入时,智能音箱200本地所具备的处理能力就能够准确进行语义识别和意图判定。而在接收到更为复杂的语音输入或是涉及云端信息查找时,智能音箱200就需要与远程服务器300相连接,以借助服务器300更为强大的语音处理能力或是信息查询能力来生成用户满意的反馈。
进一步地,除了接收用户的语音输入并据此控制送风设备的操作之外,该系统种的智能控制设备还可以用于风速和风量的自动调整。具体地,智能控制设备(例如,智能音箱200)可以用于:获取智能送风设备100根据人体位置生成的送风调整信号,以及基于所述送风调整信号,连同本机或服务器300上存储的历史信息和/或环境信息生成所述送风调整指令。
可以在服务器上存储每一位注册用户的历史偏好,其中可以包括送风偏好。例如,某些用户怕热,喜欢更大的风量,某些用户怕冷,只能接收微风吹拂。这些偏好可以是用户设置的,也可以是根据用户在前操作推断出的。为此,可以在人体识别模块的识别结果的基础上,结合用户偏好,来确定最终的送风范围和风量大小。
进一步地,还可以利用物联网内的其他设备来进行送风的自动调节。为此,该系统内的物联网设备可以用于执行对应的功能并采集用户或环境信息。智能控制设备200则可根据物联网设备采集的用户或环境信息,生成或更新所述送风调整指令。例如,家用摄像头可以通过拍摄的相对高清的画面中的人物识别,智能语音设备可以通过对接收语音的声纹识别,来判定目标空间中的人物身份,并由此根据与该人物身份相应的偏好来进行送风调整。例如,通过声纹识别出是怕热的爸爸,则送风设备可以相应调大风速;而如果通过摄像头的图像识别出是怕冷的奶奶,则送风设备可以调小风速,并适当增大轮扫范围。
上文中已经参考附图详细描述了根据本发明的智能送风方案。本发明通过在送风设备上配备人体识别模块,能够实现例如三至五米内的近距离人体识别,并且能够根据人的数量,定义不同模式的吹风模式。可以通过人体识别,实现单人跟随,多人小范围轮扫,还可以根据距离实现自动风量调节。上述人体识别模块可以通过低像素摄像头和处理能力有限的计算单元实现,通过识别图像中的人像轮廓,并根据识别出的人像轮廓的方位和大小大致推定人物的方位,从而给出相应的送风参数。换句话说,本发明可以通过低成本的配置和相对简单的运算实现基于人体识别的智能送风。
此外,根据本发明的方法还可以实现为一种计算机程序或计算机程序产品,该计算机程序或计算机程序产品包括用于执行本发明的上述方法中限定的上述各步骤的计算机程序代码指令。
或者,本发明还可以实施为一种非暂时性机器可读存储介质(或计算机可读存储介质、或机器可读存储介质),其上存储有可执行代码(或计算机程序、或计算机指令代码),当所述可执行代码(或计算机程序、或计算机指令代码)被电子设备(或计算设备、服务器等)的处理器执行时,使所述处理器执行根据本发明的上述方法的各个步骤。
本领域技术人员还将明白的是,结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。
附图中的流程图和框图显示了根据本发明的多个实施例的系统和方法的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标记的功能也可以以不同于附图中所标记的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。
Claims (31)
1.一种智能送风方法,包括:
拍摄模块拍摄目标空间的图像;
识别所述图像中的人体;
计算人体所在位置;以及
根据计算出的人体位置,调整送风方向。
2.如权利要求1所述的方法,其中,识别所述图像中的人体包括:
基于所述图像中的人像轮廓,判断所述图像中存在人体。
3.如权利要求2所述的方法,其中,计算人体所在位置包括:
根据所述人像轮廓在所述图像中的位置,计算人体所在方位,并且根据计算出的人体位置,调整送风方向包括:
将送风方向设为人体所在方位的预定范围内。
4.如权利要求2所述的方法,其中,计算人体所在位置包括:
根据所述人像轮廓在所述图像中的大小,计算人体的相距距离,并且所述方法还包括:
根据所述相距距离,调整送风的风速。
5.如权利要求4所述的方法,调整送风方向包括:
将送风方向设为人体所在坐标的预定正负角度内摆动;和/或
根据人像轮廓在所述图像中的大小,确定送风方向的预定范围。
6.如权利要求5所述的方法,调整送风方向包括:
将送风方向设为人体所在坐标的用户设定正负角度内摆动;和/或
基于人像轮廓学习人体身形,并基于习得的人体身形确定送风方向。
7.如权利要求1所述的方法,其中,识别所述图像中的人体包括:
判断图像中包含的人体个数,以确定进行单人模式还是多人模式,根据计算出的人体位置,调整送风方向包括:
在多人模式中,将送风方向设为所述多人所在方位的预定范围内。
8.如权利要求1所述的方法,其中,根据计算出的人体位置,调整送风方向包括:
在单人模式中,根据人体的实时方位进行跟随送风。
9.如权利要求1所述的方法,其中,识别所述图像中的人体包括:
基于所述图像中的对象运动,判断所述图像中存在人体。
10.如权利要求1所述的方法,还包括:
在初始启动或目标丢失时,进行轮扫拍摄,以确定人体的位置。
11.如权利要求10所述的方法,其中,所述拍摄模块布置在送风设备上,并随着送风方向的调整而变化。
12.如权利要求1所述的方法,其中,根据计算出的人体位置,调整送风方向包括:
根据计算出的人体位置,调整左右和/或上下送风的方向。
13.如权利要求1所述的方法,还包括:
根据历史信息和/或环境信息,调整送风的大小和/或方向。
14.如权利要求13所述的方法,其中,根据历史信息和/或环境信息,调整送风的大小和/或方向包括:
根据计算出的人体位置,生成送风大小和方向数据并上传;
获取下方的送风指令数据,所述送风指令数据由智能终端根据所述送风大小和方向数据以及历史信息和/或环境信息生成。
15.一种智能送风设备,包括:
拍摄模块,用于拍摄目标空间的图像;
计算模块,用于识别所述图像中的人体,计算人体所在位置,并根据计算出的人体位置,生成送风方向调整信号;以及
送风模块,用于根据所述送风方向调整信号,进行送风。
16.如权利要求15所述的设备,其中,所述计算模块用于:
基于所述图像中的人像轮廓,判断所述图像中存在人体;以及
将送风方向设为人体所在方位的预定范围内。
17.如权利要求15所述的设备,其中,所述计算模块用于:
根据所述人像轮廓在所述图像中的大小,计算人体的相距距离;以及
根据所述相距距离,生成送风风速调整信号,
所述送风模块用于根据所述送风风速调整信号,进行送风。
18.如权利要求15所述的设备,其中,所述计算模块用于:
判断图像中包含的人体个数,以确定进行单人模式还是多人模式;
在多人模式中,将送风方向设为所述多人所在方位的预定范围内;以及
在单人模式中,根据人体的实时方位进行跟随送风。
19.如权利要求15所述的设备,还包括:
个性化设置模块,用于将送风方向设为人体所在坐标的用户设定正负角度内摆动;和/或
自学习模块,用于基于人像轮廓学习人体身形,并基于习得的人体身形确定送风方向。
20.如权利要求15所述的设备,其中,所述拍摄模块用于:
实时拍摄所述目标空间的图像,
所述计算模块用于:
在从所述图像中识别出的人物坐标发生变动时,生成新的送风方向/风速调整信号,并且
所述送风单元用于:
基于所述新的送风方向/风速调整信号,进行送风。
21.如权利要求20所述的设备,其中,所述送风模块包括:
电机模块,用于基于送风风速调整信号,生成相应大小的风;以及
调向模块,用于基于送风方向调整信号,调整送方的方向。
22.如权利要求15所述的设备,还包括:
通信模块,用于接收来自遥控器或智能控制设备的控制指令,
并且所述送风模块基于所述控制指令,进行送风。
23.如权利要求22所述的设备,其中,所述通信模块用于:
上传所述计算模块生成的送风方向/风速调整信号,
其中,所述控制指令智能控制设备基于所述送风方向/风速调整信号以及历史信息和/或环境信息生成。
24.如权利要求15所述的设备,其中,所述拍摄模块安装在所述智能送风设备的转动部件上。
25.如权利要求15所述的设备,其中,所述智能送风设备包括:
普通电扇;
空气循环扇;
无叶风扇;
塔扇;和/或
送出经加热或冷却空气的送风设备。
26.如权利要求15所述的设备,其中,所述拍摄模块用于:
拍摄用户手势,
所述计算模块用于:
识别所述用户手势,并基于所述手势生成相应的送风调整信号。
27.如权利要求15所述的设备,还包括:
语音识别模块,用于采集用户语音并进行识别;
所述计算模块用于:基于识别的语义,生成相应的送风调整信号。
28.一种智能送风系统,包括:
如权利要求15-27中任一项所述的智能送风设备;以及
智能控制设备,用于基于用户指令和/或预先设置,控制所述智能送风设备的送风。
29.如权利要求28所述的系统,其中,所述智能控制设备用于:
采集用户语音并进行识别;以及
根据识别的语义,生成相应的送风调整指令并下发至所述智能送风设备。
30.如权利要求28所述的系统,其中,所述智能控制设备用于:
获取所述智能送风设备根据人体位置生成的送风调整信号;以及
基于所述送风调整信号,连同本机或服务器上存储的历史信息和/或环境信息生成所述送风调整指令。
31.如权利要求28所述的系统,还包括:
物联网设备,用于执行对应的功能并采集用户或环境信息,并且
所述智能控制设备根据所述物联网设备采集的用户或环境信息,生成或更新所述送风调整指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011372359.3A CN114576804A (zh) | 2020-11-30 | 2020-11-30 | 智能送风方法、设备和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011372359.3A CN114576804A (zh) | 2020-11-30 | 2020-11-30 | 智能送风方法、设备和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114576804A true CN114576804A (zh) | 2022-06-03 |
Family
ID=81766989
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011372359.3A Pending CN114576804A (zh) | 2020-11-30 | 2020-11-30 | 智能送风方法、设备和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114576804A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117072474A (zh) * | 2023-10-10 | 2023-11-17 | 广东顺德中午电器制造有限公司 | 电风扇的控制方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105258291A (zh) * | 2015-10-21 | 2016-01-20 | 广东美的制冷设备有限公司 | 空调送风控制方法及装置 |
WO2019160253A1 (ko) * | 2018-02-13 | 2019-08-22 | 엘지전자 주식회사 | 인공지능을 이용하여 지시된 위치로 풍향을 제어하는 에어컨 및 이를 제어하는 방법 |
CN110529989A (zh) * | 2019-09-17 | 2019-12-03 | 山东浪潮人工智能研究院有限公司 | 基于人体动态图像追踪技术的空调调节风向的送风方法及装置 |
CN111486571A (zh) * | 2020-04-22 | 2020-08-04 | 珠海格力电器股份有限公司 | 一种风向调整方法、装置、存储介质及出风设备 |
CN111706542A (zh) * | 2020-07-29 | 2020-09-25 | 珠海格力电器股份有限公司 | 风扇控制方法、存储介质以及风扇 |
-
2020
- 2020-11-30 CN CN202011372359.3A patent/CN114576804A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105258291A (zh) * | 2015-10-21 | 2016-01-20 | 广东美的制冷设备有限公司 | 空调送风控制方法及装置 |
WO2019160253A1 (ko) * | 2018-02-13 | 2019-08-22 | 엘지전자 주식회사 | 인공지능을 이용하여 지시된 위치로 풍향을 제어하는 에어컨 및 이를 제어하는 방법 |
CN110529989A (zh) * | 2019-09-17 | 2019-12-03 | 山东浪潮人工智能研究院有限公司 | 基于人体动态图像追踪技术的空调调节风向的送风方法及装置 |
CN111486571A (zh) * | 2020-04-22 | 2020-08-04 | 珠海格力电器股份有限公司 | 一种风向调整方法、装置、存储介质及出风设备 |
CN111706542A (zh) * | 2020-07-29 | 2020-09-25 | 珠海格力电器股份有限公司 | 风扇控制方法、存储介质以及风扇 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117072474A (zh) * | 2023-10-10 | 2023-11-17 | 广东顺德中午电器制造有限公司 | 电风扇的控制方法 |
CN117072474B (zh) * | 2023-10-10 | 2023-12-19 | 广东顺德中午电器制造有限公司 | 电风扇的控制方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107013978B (zh) | 空调室内机及其送风方法 | |
CN101571302B (zh) | 空调机及其动作方法 | |
KR102121785B1 (ko) | 인공지능을 이용하여 지시된 위치로 풍향을 제어하는 에어컨 및 이를 제어하는 방법 | |
JP5819271B2 (ja) | 空気調和機 | |
WO2019047859A1 (zh) | 壁挂式空调室内机及其控制方法 | |
US20170177085A1 (en) | System and Method for Processing an Audio and Video Input in a Point of View Program for Haptic Delivery | |
JP6576568B2 (ja) | 空気調和システム | |
CN109945438B (zh) | 空调器的控制方法、装置和空调器 | |
CN109945429A (zh) | 运行控制方法、装置、空调器和计算机可读存储介质 | |
CN112665135B (zh) | 用于空调的控制方法、装置及空调 | |
CN111288008A (zh) | 风扇的控制方法、装置和风扇 | |
CN107449113A (zh) | 空调器的控制方法、控制系统和空调器 | |
CN102734193A (zh) | 风扇控制系统、方法及具有该系统的风扇 | |
CN106837843A (zh) | 一种风扇 | |
JP2016048128A (ja) | 空気調和機 | |
TWI428508B (zh) | 風扇控制系統、方法及具有該系統的風扇 | |
CN114576804A (zh) | 智能送风方法、设备和系统 | |
CN113565781A (zh) | 一种风扇及其控制方法、装置、存储介质 | |
JPWO2018211619A1 (ja) | 空調制御装置、空調システム、空調制御方法及びプログラム | |
CN112696785B (zh) | 空调器控制方法、控制系统和空调器 | |
KR20120079539A (ko) | 공기 조화기의 제어 방법 | |
KR20180011694A (ko) | 공기조화기 및 그 제어 방법 | |
CN114791704A (zh) | 设备控制方法、设备控制装置、电子设备、程序及介质 | |
WO2020201686A1 (en) | Control of a steerable fan using image recognition | |
CN114153240B (zh) | 设备控制方法及家用智能温控系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |