CN113365382B - 灯光控制方法、装置、电子设备和存储介质 - Google Patents
灯光控制方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN113365382B CN113365382B CN202110914818.4A CN202110914818A CN113365382B CN 113365382 B CN113365382 B CN 113365382B CN 202110914818 A CN202110914818 A CN 202110914818A CN 113365382 B CN113365382 B CN 113365382B
- Authority
- CN
- China
- Prior art keywords
- data
- optical characteristic
- determining
- user
- thermodynamic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000003860 storage Methods 0.000 title claims abstract description 25
- 238000010586 diagram Methods 0.000 claims abstract description 108
- 230000003287 optical effect Effects 0.000 claims abstract description 101
- 230000009471 action Effects 0.000 claims abstract description 39
- 238000012545 processing Methods 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 20
- 238000004519 manufacturing process Methods 0.000 claims description 9
- 238000002372 labelling Methods 0.000 claims description 6
- 238000005286 illumination Methods 0.000 claims description 3
- 238000012549 training Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 6
- 238000003062 neural network model Methods 0.000 description 5
- 230000003068 static effect Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001795 light effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B39/00—Circuit arrangements or apparatus for operating incandescent light sources
- H05B39/04—Controlling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种灯光控制方法、装置、电子设备和存储介质。其中，方法包括分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；根据所述动作姿态确定所述用户的控制指令；根据所述控制指令对灯光进行控制。采用本发明提供的方案能实现基于光学摄像头和红外阵列传感器来识别用户的动作姿态，并根据用户的动作姿态进行灯光的控制，无需用户手动接触控制，识别精度高。
Description
技术领域
本发明涉及智能控制技术领域，尤其涉及一种灯光控制方法、装置、电子设备和存储介质。
背景技术
随着社会发展，产品生产方式越来越智能化。其中，在轮毂生产车间，车间中不同位置有着不同的灯光位置服务需求。特别是在某些特定的场景下，员工无法通过手动接触来控制灯光效果。因此，现代轮毂生产车间急需一种智能控制灯光的方式。
发明内容
为解决轮毂生产车间无法智能对灯光进行控制的技术问题，本发明实施例提供一种灯光控制方法、装置、电子设备和存储介质。
本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种灯光控制方法，方法包括：
分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；
对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
根据所述动作姿态确定所述用户的控制指令；
根据所述控制指令对灯光进行控制。
上述方案中，所述光学摄像头和所述红外阵列传感器设置于同一位置区域，所述位置区域以相同的角度相同的距离进行拍摄或扫描。
上述方案中，所述对所述光学特征图和所述热力图进行识别，确定用户的动作姿态包括：
获取所述光学特征图的拍摄时间和所述热力图的扫描时间；
根据所述光学特征图的拍摄时间和所述热力图的扫描时间的时间戳，将所述光学特征图和所述热力图对齐；
对对齐后的所述光学特征图和所述热力图进行识别，确定用户的动作姿态。
上述方案中，所述将所述光学特征图和所述热力图对齐包括：
对所述光学特征图进行关键点标注；
将标注后的所述光学特征图与所述热力图基于时间戳进行对齐。
上述方案中，所述对对齐后的所述光学特征图和所述热力图进行识别，确定用户的动作姿态包括：
对对齐后的所述光学特征图和所述热力图进行融合，获得融合后的图像数据；
对所述融合后的图像数据利用神经网络模型进行识别，确定用户的动作姿态。
上述方案中，所述对所述融合后的图像数据利用神经网络模型进行识别，确定用户的动作姿态包括：
对所述融合后的图像数据进行卷积处理，获得第一数据；
对所述第一数据进行反卷积处理，获得第二数据；
对所述第二数据进行识别处理，获得线性向量；
根据所述线性向量确定用户的动作姿态。
上述方案中，所述根据所述控制指令对灯光进行控制包括：
根据所述控制指令确定控制信息，所述控制信息包括以下至少之一：灯光强度、开关状态和照射位置；
根据所述控制信息对灯光进行控制。
本发明实施例还提供了一种灯光控制装置，灯光控制装置包括：
获取模块，用于分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；
识别模块，用于对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
确定模块，用于根据所述动作姿态确定所述用户的控制指令；
控制模块，用于根据所述控制指令对灯光进行控制。
本发明实施例还提供了一种电子设备，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，
处理器用于运行计算机程序时，执行上述任一方法的步骤。
本发明实施例还提供了一种存储介质，存储介质中存储有计算机程序，计算机程序被处理器执行时，实现上述任一方法的步骤。
本发明实施例提供的灯光控制方法、装置、电子设备和存储介质，分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；根据所述动作姿态确定所述用户的控制指令；根据所述控制指令对灯光进行控制。采用本发明提供的方案能实现基于光学摄像头和红外阵列传感器来识别用户的动作姿态，并根据用户的动作姿态进行灯光的控制，无需用户手动接触控制，识别精度高。
附图说明
图1为本发明实施例灯光控制方法的流程示意图；
图2为本发明应用实施例系统工作流程示意图；
图3为本发明应用实施例标注位置示意图；
图4为本发明应用实施例神经网络模型处理过程示意图；
图5为本发明应用实施例统计结果示意图；
图6为本发明实施例灯光控制装置的结构示意图；
图7为本发明实施例计算机设备的内部结构图。
具体实施方式
下面将结合附图及实施例对本发明作进一步详细的描述。
本发明实施例提供了一种灯光控制方法，如图1所示，该方法包括：
步骤101：分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；
步骤102：对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
步骤103：根据所述动作姿态确定所述用户的控制指令；
步骤104：根据所述控制指令对灯光进行控制。
具体地，本实施例可适用于轮毂生产车间的灯光控制。
这里，光学摄像头可为高清光学摄像头或超清光学摄像头。
实际应用时，通过该光学摄像头对用户进行拍摄，获取能显示用户人体姿态的光学特征图。通过该红外阵列传感器对用户进行远程扫描，获得能显示用户人体姿态的热力图。基于上述的光学特征图和热力图来进行用户控制指令的识别。
这里，用户的不同的人体姿态表征用户的不同控制指令。人体姿态与控制指令的对应关系可以预先进行设定，具体人体姿态与控制指令的对应关系可以根据情况进行设定。例如，可以设定用户上下抬起手臂表示开灯；用户踢腿表示关灯等。
进一步地，为准备地识别用户的动作以对灯光进行控制，这里，可将所述光学摄像头和所述红外阵列传感器设置于同一位置区域，所述位置区域以相同的角度相同的距离进行拍摄或扫描。
实际应用时，由于光学摄像头识别，存在障碍物遮挡而无法识别的情况，而红外阵列传感器识别存在热力图识别不准确的问题，因此，本申请采用光学摄像头和红外阵列传感器联合进行识别，能避免光学摄像头由于障碍物遮挡而引起的无法识别的情况，也能避免红外阵列传感器识别识别精度低的问题。将光学摄像头和红外阵列传感器联合进行识别，即能保证识别精度，同时也能避免障碍物遮挡无法识别。
由于本申请采用光学摄像头和红外阵列传感器联合进行识别，因此，为保证识别效果，需保证光学摄像头和红外阵列传感器位于同一位置区域。即保证光学摄像头和红外阵列传感器对用户的人体姿态进行采集时，是以相同的角度相同的距离进行采集，避免识别误差，提高识别精度。
进一步地，在一实施例中，所述对所述光学特征图和所述热力图进行识别，确定用户的动作姿态包括：
获取所述光学特征图的拍摄时间和所述热力图的扫描时间；
根据所述光学特征图的拍摄时间和所述热力图的扫描时间的时间戳，将所述光学特征图和所述热力图对齐；
对对齐后的所述光学特征图和所述热力图进行识别，确定用户的动作姿态。
这里，由于摄像头采集和红外阵列传感器采集的时间频率可以不同，因此，为降低误差，可根据光学特征图的拍摄时间和所述热力图的扫描时间，利用时间戳，对光学特征图和所述热力图进行对齐，对对齐后的光学特征图和热力图进行识别，确定用户的动作姿态。
进一步地，在一实施例中，所述将所述光学特征图和所述热力图对齐包括：
对所述光学特征图进行关键点标注；
将标注后的所述光学特征图与所述热力图基于时间戳进行对齐。
实际应用时，可对光学特征图中的用户的18个特征点进行标注。具体18个特征点为右目、左目、右耳、左耳、鼻、首、右肩、左肩、右手首、右肘、左肘、左手首、右腰、左腰、右膝、左膝、右足首、左足首。
对光学特征图进行标注，可进一步提高对人体姿态的识别精度。这里，可采用标注软件进行标注。
进一步地，在一实施例中，所述对对齐后的所述光学特征图和所述热力图进行识别，确定用户的动作姿态包括：
对对齐后的所述光学特征图和所述热力图进行融合，获得融合后的图像数据；
对所述融合后的图像数据利用神经网络模型进行识别，确定用户的动作姿态。
这里，将光学特征图和热力图对齐后，可将光学特征图和热力图进行融合，将融合后的图像数据进行识别，识别用户的动作姿态。
具体地，在一实施例中，所述对所述融合后的图像数据利用神经网络模型进行识别，确定用户的动作姿态包括：
对所述融合后的图像数据进行卷积处理，获得第一数据；
对所述第一数据进行反卷积处理，获得第二数据；
对所述第二数据进行识别处理，获得线性向量；
根据所述线性向量确定用户的动作姿态。
这里，采用卷积处理和反卷积处理，可有助于特征的提取，避免提取特征不足、提取特征过小而导致无法识别或识别错误的技术问题。
进一步地，在一实施例中，所述根据所述控制指令对灯光进行控制包括：
根据所述控制指令确定控制信息，所述控制信息包括以下至少之一：灯光强度、开关状态和照射位置；
根据所述控制信息对灯光进行控制。
这里，可将控制指令分为强度控制姿态指令、开关控制姿态指令、位置控制姿态指令。
当所述控制指令为强度控制姿态指令时，根据该强度控制姿态指令控制灯光强度；
当所述控制指令为开关控制姿态指令时，根据该开关控制姿态指令控制灯光的开启或关闭；
当所述控制指令为位置控制姿态指令时，根据该位置控制姿态指令控制灯光的照射位置。
本发明实施例提供的灯光控制方法，分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；根据所述动作姿态确定所述用户的控制指令；根据所述控制指令对灯光进行控制。采用本发明提供的方案能实现基于光学摄像头和红外阵列传感器来识别用户的动作姿态，并根据用户的动作姿态进行灯光的控制，无需用户手动接触控制，识别精度高。
下面结合应用实施例对本发明再作进一步详细的描述。
为了解决轮毂生产车间中灯光定位与灯光开关、强度的控制，本应用实施例利用人体姿态识别算法来控制灯光的定位、开关、强度。具体地，本应用实施例通过识别系统识别光学摄像头和红外阵列传感器同时采集到的（人体灯光强度控制姿态指令、开关控制姿态指令、位置控制姿态指令）数据，获取指令数据，并将指令数据传输给灯光控制系统，灯光控制系统相对应的做出灯光控制与定位工作。
具体地，本实施例的系统总体架构如下：通过普通光学摄像头拍摄获取光学特征图，在光学特征图上标注18个关键点；通过红外陈列传感器获取热力图；将标注了18个关键点的光学特征图和热力图融合成NPZ文件数据；利用姿态指令识别模型识别该NPZ文件数据，获得控制指令；基于该控制指令在灯光控制系统进行灯光控制。
从上可知，本实施例主要包括两部分：数据采集与处理部分、姿态指令识别部分。
这里，数据采集与处理部分包括：
（1）普通光学摄像头采集光学特征图；
（2）在光学特征图上进行人体的18个关键点标注；
（3）红外阵列传感器采集热力图；
（4）数据对齐处理，生成NPZ文件数据；
同时，姿态指令识别部分包括：
（1）基于NPZ文件数据训练HSLAN模型（可理解为一种识别模型）；
（2）将采集到的姿态数据，输入到HSLAN,进行人体姿态识别；
（3）将HSLAN识别到的人体姿态数据指令传输给灯光控制系统，灯光控制系统相应做出指令响应。
这里，需要说明的是，HSLAN模型的搭建可基于局部极小值局限性，学习过程收敛速度，精度综合考虑网络结构的隐层、隐层节点数、以及相关的函数。
具体地，参见图2，HSLAN模型的工作流程如下：
步骤1：创建HSLAN；
步骤2：创建HSLAN数据集---NPZ数据集，将该数据将其作为HSLAN训练数据输入，训练HSLAN模型；
步骤3：普通摄像头和红外阵列传感器采集人体姿态数据指令；
步骤4：将采集的人体姿态数据指令输入到HSLAN训练好的模型中，HSLAN识别人体姿态数据指令；
步骤5：灯光控制系统接收到人体姿态数据指令，并做出相应的指令。
这里，系统开发环境可按下表1配置：
另外，这里的红外阵列传感器可采用MXL90640型号。该型号的红外阵列传感器具体工作时，具体如下特征：
（1）工作温度范围为 -40°C 至 85°C，可测量的物体温度范围为 -40°C 至 300°C以上；
（2）在整个测量范围内保持高精度水平，可提供±1°C 的典型目标物体温度精度；
（3）Melexis MLX90640 是一款完全校准的 32 像素 x 24 像素红外阵列；
（4）采用行业标准 4 引脚 TO39 封装，带数字接口。MLX90640 包含 768 FIR 像素。
另外，参见图3，在使用该红外阵列传感器在数据处理时，为准确进行特征提取，可进行数据融合。即通过普通光学摄像头采集光学特征图；然后在该光学特征图上标注人体的18个特征点；最后通过基于时间戳的数据对齐的方法，将热力图和光学特征图进行数据对齐融合生成NPZ数据组。这里，通过红外阵列传感器(MXL90640）采集热力图，并经过转化后，可得到一组热力数数据组。
进一步地，本实施例中的HSLAN模型可由人体姿态识别网络（又称为alphapose网络）、四层3D卷积、最大值池化（又称为maxpooling）、四层3D反卷积、全连接层等构成，具体网络结构与过程可如图4所示：
在HSLAN模型中，先通过alphapose网络生成人体姿态关键点的置信图，再经过四层3D卷积、maxpooling、四层3D反卷积提取图像特征后，通过全连接层（又称为Fullconnection层），生成线性向量，从而向灯光控制系统输入姿态指令（如“0”表示关、“1”表示开、“2”表示强度增加、“3”表示强度递减）。
这里，该HSLAN模型中的损失函数，可采用如下公式：
其中：M表示类别数量；yic表示符号函数（0或1），若样本i的真实类别等于c取1，否则为0；Pic表示观测样本i的类被数据与c的损失函数值。
另外，HSLAN系统的训练参数可按下表2设置：
具体地，HSLAN算法搭建训练步骤可包括如下过程：
输入：训练数据集
输出：HSLAN模型
步骤1：预处理图像；
步骤2：普通光学特征图、热力图数据处理；
步骤3：将处理后的数据写入 npz 文件；
步骤4：定义HSLAN网络模型；
这里，可设置初始学习率为0.05；
步骤5：选择训练策略---随机梯度下降；
这里，可设置每100步下降一次，下降率为0.96；
步骤6：设定合适的批次数量（又称为batch-size）、学习率、优化器等参数；
步骤7：HSLAN训练，打印训练过程中的损失值，保存 epoch 模型，使用验证数据集进行验证，打印验证结果，并存入训练日志；
步骤8：导入测试数据，进行测试；
步骤9：测试数据集上进行模型评估。
综上，本实施例基于红外阵列传感器的采集的热力图、普通光学图像采集的特征图进行了时间戳对齐处理，形成了新的数据集。并且搭建了HSLAN网络，提出了基于时间维度的3D卷积和3D反卷积的多层网络结构，解决了特征信息不足、准确率低和特征面被卷积后特征面变小的问题。另外，参见图5，图5为不同步数下的直方图和基于热力图的姿态效果，基于HSLAN系统，对轮形数据集进行分析，构建知识图谱、训练集，搭建神经网络结构，具有较高的网络准确率。
为了实现本发明实施例的方法，本发明实施例还提供了一种灯光控制装置，如图6所示，灯光控制装置600包括：获取模块601、识别模块602、确定模块603和控制模块604；其中，
获取模块601，用于分别获取通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；
识别模块602，用于对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
确定模块603，用于根据所述动作姿态确定所述用户的控制指令；
控制模块604，用于根据所述控制指令对灯光进行控制。
实际应用时，获取模块601、识别模块602、确定模块603和控制模块604可由灯光控制装置中的处理器实现。
需要说明的是：上述实施例提供的上述装置在执行时，仅以上述各程序模块的划分进行举例说明，实际应用时，可以根据需要而将上述处理分配由不同的程序模块完成，即将终端的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的上述装置与上述方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
为了实现本发明实施例的方法，本发明实施例还提供了一种计算机程序产品，计算机程序产品包括计算机指令，计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取计算机指令，处理器执行计算机指令，使得计算机设备执行上述方法的步骤。
基于上述程序模块的硬件实现，且为了实现本发明实施例的方法，本发明实施例还提供了一种电子设备（计算机设备）。具体地，在一个实施例中，该计算机设备可以是终端，其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器A01、网络接口A02、显示屏A04、输入装置A05和存储器（图中未示出）。其中，该计算机设备的处理器A01用于提供计算和控制能力。该计算机设备的存储器包括内存储器A03和非易失性存储介质A06。该非易失性存储介质A06存储有操作系统B01和计算机程序B02。该内存储器A03为非易失性存储介质A06中的操作系统B01和计算机程序B02的运行提供环境。该计算机设备的网络接口A02用于与外部的终端通过网络连接通信。该计算机程序被处理器A01执行时以实现上述任意一项实施例的方法。该计算机设备的显示屏A04可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置A05可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本发明实施例提供的设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现上述任意一项实施例的方法。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备（系统）、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flashRAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。
可以理解，本发明实施例的存储器可以是易失性存储器或者非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器（ROM，ReadOnly Memory）、可编程只读存储器（PROM，Programmable Read-Only Memory）、可擦除可编程只读存储器（EPROM，Erasable Programmable Read-Only Memory）、电可擦除可编程只读存储器（EEPROM，Electrically Erasable Programmable Read-Only Memory）、磁性随机存取存储器（FRAM，ferromagnetic random access memory）、快闪存储器（Flash Memory）、磁表面存储器、光盘、或只读光盘（CD-ROM，Compact Disc Read-Only Memory）；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器（RAM，RandomAccess Memory），其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器（SRAM，Static Random Access Memory）、同步静态随机存取存储器（SSRAM，Synchronous Static Random Access Memory）、动态随机存取存储器（DRAM，Dynamic Random Access Memory）、同步动态随机存取存储器（SDRAM，SynchronousDynamic Random Access Memory）、双倍数据速率同步动态随机存取存储器（DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory）、增强型同步动态随机存取存储器（ESDRAM，Enhanced Synchronous Dynamic Random Access Memory）、同步连接动态随机存取存储器（SLDRAM，SyncLink Dynamic Random Access Memory）、直接内存总线随机存取存储器（DRRAM，Direct Rambus Random Access Memory）。本发明实施例描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。
Claims (6)
1.一种灯光控制方法，其特征在于，所述方法包括：
分别在生产车间不同位置处获取每处通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；其中，所述光学摄像头的采集频率和所述红外阵列传感器的采集频率不同；
对所述光学特征图进行关键点标注；
获取所述光学特征图的拍摄时间和所述热力图的扫描时间；
将标注后的所述光学特征图与所述热力图基于时间戳进行对齐；
对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
根据所述动作姿态确定所述用户的控制指令；
根据所述控制指令对生产车间的灯光进行控制；其中，
所述对所述光学特征图和所述热力图进行识别，确定用户的动作姿态包括：
对所述光学特征图和所述热力图进行融合，获得融合后的图像数据；
对所述融合后的图像数据进行卷积处理，获得第一数据；
对所述第一数据进行反卷积处理，获得第二数据；
对所述第二数据进行识别处理，获得线性向量；
根据所述线性向量确定用户的动作姿态；其中，所述动作姿态包括抬手臂、踢腿。
2.根据权利要求1所述的方法，其特征在于，所述光学摄像头和所述红外阵列传感器设置于同一位置区域，所述位置区域以相同的角度相同的距离进行拍摄或扫描。
3.根据权利要求1所述的方法，其特征在于，所述根据所述控制指令对灯光进行控制包括：
根据所述控制指令确定控制信息，所述控制信息包括以下至少之一：灯光强度、开关状态和照射位置；
根据所述控制信息对灯光进行控制。
4.一种灯光控制装置，其特征在于，所述灯光控制装置包括：
获取模块，用于分别在生产车间不同位置处获取每处通过光学摄像头进行拍摄采集的光学特征图和通过红外阵列传感器进行扫描采集的热力图；其中，所述光学摄像头的采集频率和所述红外阵列传感器的采集频率不同；对所述光学特征图进行关键点标注；获取所述光学特征图的拍摄时间和所述热力图的扫描时间；将标注后的所述光学特征图与所述热力图基于时间戳进行对齐；
识别模块，用于对所述光学特征图和所述热力图进行识别，确定用户的动作姿态；
确定模块，用于根据所述动作姿态确定所述用户的控制指令；
控制模块，用于根据所述控制指令对生产车间的灯光进行控制；
其中，所述识别模块还用于：
对所述光学特征图和所述热力图进行融合，获得融合后的图像数据；
对所述融合后的图像数据进行卷积处理，获得第一数据；
对所述第一数据进行反卷积处理，获得第二数据；
对所述第二数据进行识别处理，获得线性向量；
根据所述线性向量确定用户的动作姿态；其中，所述动作姿态包括抬手臂、踢腿。
5.一种电子设备，其特征在于，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，
所述处理器用于运行所述计算机程序时，执行权利要求1至3任一项所述方法的步骤。
6.一种存储介质，所述存储介质中存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1至3任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110914818.4A CN113365382B (zh) | 2021-08-10 | 2021-08-10 | 灯光控制方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110914818.4A CN113365382B (zh) | 2021-08-10 | 2021-08-10 | 灯光控制方法、装置、电子设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113365382A CN113365382A (zh) | 2021-09-07 |
| CN113365382B true CN113365382B (zh) | 2021-11-09 |
Family
ID=77540876
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110914818.4A Active CN113365382B (zh) | 2021-08-10 | 2021-08-10 | 灯光控制方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113365382B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114882596B (zh) * | 2022-07-08 | 2022-11-15 | 深圳市信润富联数字科技有限公司 | 行为预警方法、装置、电子设备及存储介质 |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104540290A (zh) * | 2014-12-30 | 2015-04-22 | 广州视声电子科技有限公司 | 一种智能台灯的控制方法及智能台灯 |
| CN107229904A (zh) * | 2017-04-24 | 2017-10-03 | 东北大学 | 一种基于深度学习的目标检测与识别方法 |
| CN108229440A (zh) * | 2018-02-06 | 2018-06-29 | 北京奥开信息科技有限公司 | 一种基于多传感器融合室内人体姿态识别方法 |
| CN109034034A (zh) * | 2018-07-12 | 2018-12-18 | 广州麦仑信息科技有限公司 | 一种基于强化学习算法优化卷积神经网络的静脉识别方法 |
| CN109815967A (zh) * | 2019-02-28 | 2019-05-28 | 北京环境特性研究所 | 基于特征融合的cnn舰船目标识别系统及方法 |
| CN110705365A (zh) * | 2019-09-06 | 2020-01-17 | 北京达佳互联信息技术有限公司 | 一种人体关键点检测方法、装置、电子设备及存储介质 |
| CN111160143A (zh) * | 2019-12-14 | 2020-05-15 | 安琦道尔(上海)环境规划建筑设计咨询有限公司 | 一种景观灯光控制系统 |
| CN111310770A (zh) * | 2020-02-21 | 2020-06-19 | 集美大学 | 目标检测方法和装置 |
| CN111726921A (zh) * | 2020-05-25 | 2020-09-29 | 磁场科技(北京)有限公司 | 一种体感交互灯光控制系统 |
| CN111753643A (zh) * | 2020-05-09 | 2020-10-09 | 北京迈格威科技有限公司 | 人物姿态识别方法、装置、计算机设备和存储介质 |
| CN111918453A (zh) * | 2020-08-18 | 2020-11-10 | 深圳市秀骑士科技有限公司 | Led灯光场景控制系统及其控制方法 |
| CN112102946A (zh) * | 2019-11-21 | 2020-12-18 | 北京健康有益科技有限公司 | 一种基于深度学习的睡眠质量检测方法和装置 |
| CN112270211A (zh) * | 2020-10-09 | 2021-01-26 | 南京飞赫电器有限公司 | 一种基于体感交互的舞台灯光调控方法及系统 |
| CN112732077A (zh) * | 2020-12-30 | 2021-04-30 | 广州市德晟光电科技股份有限公司 | 一种基于体感交互的投影控制方法、设备、存储介质 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109121267A (zh) * | 2018-08-20 | 2019-01-01 | 百度在线网络技术（北京）有限公司 | 灯光控制方法、设备以及存储介质 |
| CN112954848A (zh) * | 2021-03-10 | 2021-06-11 | 深圳市大鑫浪电子科技有限公司 | 一种智能灯光控制方法、装置、计算机设备及存储介质 |
-
2021
- 2021-08-10 CN CN202110914818.4A patent/CN113365382B/zh active Active
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104540290A (zh) * | 2014-12-30 | 2015-04-22 | 广州视声电子科技有限公司 | 一种智能台灯的控制方法及智能台灯 |
| CN107229904A (zh) * | 2017-04-24 | 2017-10-03 | 东北大学 | 一种基于深度学习的目标检测与识别方法 |
| CN108229440A (zh) * | 2018-02-06 | 2018-06-29 | 北京奥开信息科技有限公司 | 一种基于多传感器融合室内人体姿态识别方法 |
| CN109034034A (zh) * | 2018-07-12 | 2018-12-18 | 广州麦仑信息科技有限公司 | 一种基于强化学习算法优化卷积神经网络的静脉识别方法 |
| CN109815967A (zh) * | 2019-02-28 | 2019-05-28 | 北京环境特性研究所 | 基于特征融合的cnn舰船目标识别系统及方法 |
| CN110705365A (zh) * | 2019-09-06 | 2020-01-17 | 北京达佳互联信息技术有限公司 | 一种人体关键点检测方法、装置、电子设备及存储介质 |
| CN112102946A (zh) * | 2019-11-21 | 2020-12-18 | 北京健康有益科技有限公司 | 一种基于深度学习的睡眠质量检测方法和装置 |
| CN111160143A (zh) * | 2019-12-14 | 2020-05-15 | 安琦道尔(上海)环境规划建筑设计咨询有限公司 | 一种景观灯光控制系统 |
| CN111310770A (zh) * | 2020-02-21 | 2020-06-19 | 集美大学 | 目标检测方法和装置 |
| CN111753643A (zh) * | 2020-05-09 | 2020-10-09 | 北京迈格威科技有限公司 | 人物姿态识别方法、装置、计算机设备和存储介质 |
| CN111726921A (zh) * | 2020-05-25 | 2020-09-29 | 磁场科技(北京)有限公司 | 一种体感交互灯光控制系统 |
| CN111918453A (zh) * | 2020-08-18 | 2020-11-10 | 深圳市秀骑士科技有限公司 | Led灯光场景控制系统及其控制方法 |
| CN112270211A (zh) * | 2020-10-09 | 2021-01-26 | 南京飞赫电器有限公司 | 一种基于体感交互的舞台灯光调控方法及系统 |
| CN112732077A (zh) * | 2020-12-30 | 2021-04-30 | 广州市德晟光电科技股份有限公司 | 一种基于体感交互的投影控制方法、设备、存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113365382A (zh) | 2021-09-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107784282B (zh) | 对象属性的识别方法、装置及系统 | |
| CN111626125B (zh) | 人脸温度检测的方法、系统、装置和计算机设备 | |
| CN111612834B (zh) | 生成目标图像的方法、装置及设备 | |
| CN112336342B (zh) | 手部关键点检测方法、装置及终端设备 | |
| CN110443154A (zh) | 关键点的三维坐标定位方法、装置、电子设备和存储介质 | |
| CN111462381A (zh) | 基于人脸温度识别的门禁控制方法、电子装置及存储介质 | |
| EP4095744A1 (en) | Automatic iris capturing method and apparatus, computer-readable storage medium, and computer device | |
| US11710253B2 (en) | Position and attitude estimation device, position and attitude estimation method, and storage medium | |
| CN106326853A (zh) | 一种人脸跟踪方法及装置 | |
| CN108694400A (zh) | 信息处理装置、其控制方法及存储介质 | |
| CN113365382B (zh) | 灯光控制方法、装置、电子设备和存储介质 | |
| CN115600157B (zh) | 一种数据处理的方法、装置、存储介质及电子设备 | |
| CN111724336A (zh) | 图像处理装置、图像处理方法及图像处理系统 | |
| CN105205482A (zh) | 快速人脸特征识别及姿态估算方法 | |
| CN112861831A (zh) | 一种目标物的识别方法、装置、存储介质及电子设备 | |
| CN115496976A (zh) | 多源异构数据融合的视觉处理方法、装置、设备及介质 | |
| US11436338B2 (en) | Biometric recognition attack test methods, apparatuses, and devices | |
| US11222125B1 (en) | Biometric recognition attack test methods, apparatuses, and devices | |
| KR20210032374A (ko) | 비전 시스템을 이용하여 이미지에서 라인들을 찾고 분류하기 위한 시스템 및 방법 | |
| CN116728436A (zh) | 一种弹琴机器人的控制方法及控制装置 | |
| Nagarajan et al. | Automated analogue dial reading in cockpits | |
| JP2015184743A (ja) | 画像処理装置および物体認識方法 | |
| KR20210030136A (ko) | 차량 데이터 생성 장치 및 방법, 그리고 시스템 | |
| JP2014232373A (ja) | 照合対象抽出システム、照合対象抽出方法、照合対象抽出プログラム | |
| CN115830196B (zh) | 虚拟形象处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |