CN213423969U - 基于姿态识别的智能座椅控制装置 - Google Patents

Abstract

本实用新型涉及基于姿态识别的智能座椅控制装置。该装置包括：图像采集模块，被配置为通过图像数据采集装置获取目标用户的图像数据；姿态识别模块，被配置为通过姿态识别算法从所述图像数据中识别出所述目标用户，并输出所述智能座椅所需要的人体体态图；三维重建模块，被配置为基于所述人体体态图通过三维重建算法重建所述目标用户的人体三维姿态信息；骨骼配准模块，被配置为利用三维空间中的体态关键节点将所述目标用户与参考者进行骨骼配准；姿态比较模块，被配置为将经骨骼配准的所述目标用户与所述参考者的所述人体三维姿态信息进行比较；以及自适应调整模块，被配置为基于所述比较结果，对所述智能座椅适应性调整。

Description

基于姿态识别的智能座椅控制装置

技术领域

本实用新型涉及人工智能领域，具体地涉及基于姿态识别的智能座椅控制装置。

背景技术

随着社会的发展，汽车逐渐普及成为人们日常的代步工具。其中，汽车座椅作为汽车的基本装置是汽车的重要安全部件，直接关系到乘员的驾乘舒适性和安全性。为此，在开始驾驶汽车之前，需要对汽车座椅进行调整以适应乘员。如果汽车座椅无法适应乘员，则乘员在驾驶过程中可能需要保持很蜷缩的姿势，这样就必然会使得乘员的全身的骨骼、肌肉处于紧张状态，增加驾驶疲劳感，甚至会影响行车安全。然而，从目前的汽车驾驶情况来看，很多新人都面临这个问题，甚至对于老司机而言，将汽车座椅调整到既舒适又安全的位置也是非常不容易的。

然而，在现有技术中，通常只是在人体感知的情况下对汽车座椅的座垫、靠背、头枕、腰垫等进行手动调节，但是调节效率比较低，即，舒适度及安全性需要不断重复调整获得。因此，需要设计一种新的智能汽车座椅控制装置，能够依照用户个性化调整汽车座椅的坐垫高度、前后距离、靠背角度以及头枕位置，以满足舒适性及安全性的需求。

实用新型内容

鉴于上述技术问题，本实用新型内容提出了一种基于姿态识别的智能座椅控制装置。该装置通过多视角获取目标用户的视频和图像，重建三维姿态信息，从而全方位获取目标用户的姿态。此外，该智能座椅控制装置还利用深度学习神经网络结合传统机器学习技术进行姿态分析，继而通过与参考者进行比较对所述智能座椅适应性调整，并将优化建议反馈给目标用户。

本实用新型提供了一种基于姿态识别的智能座椅控制装置，可以包括如下模块：图像采集模块，所述图像采集模块被配置为通过图像数据采集装置获取目标用户的图像数据；姿态识别模块，所述姿态识别模块与所述图像采集模块耦合并且被配置为通过姿态识别算法从所述图像数据中识别出所述目标用户，并输出所述智能座椅所需要的人体体态图；三维重建模块，所述三维重建模块与所述姿态识别模块耦合并且被配置为基于所述人体体态图通过三维重建算法重建所述目标用户的人体三维姿态信息；骨骼配准模块，所述骨骼配准模块与所述三维重建模块耦合并且被配置为利用三维空间中的体态关键节点将所述目标用户与参考者进行骨骼配准；姿态比较模块，所述姿态比较模块与所述骨骼配准模块耦合并且被配置为将经骨骼配准的所述目标用户与所述参考者的所述人体三维姿态信息进行比较；以及自适应调整模块，所述自适应调整模块与所述姿态比较模块耦合并且被配置为基于所述比较结果，对所述智能座椅适应性调整；其中所述耦合的方式是有线耦合或者无线耦合。

在一个优选实施方式中，所述图像数据采集装置可以包括以下至少一种：平面摄像头、深度摄像头、红外摄像头或热成像仪，其中所述深度摄像头包括以下至少一种：时间飞行摄像头、结构光摄像头或双目摄像头。

在另一优选实施方式中，所述姿态识别模块进一步被配置为：通过人体的关键节点，确定人体的姿态，其中所述关键节点包括以下至少一种：肢体关节点、面部关键点，并且所述关键节点的位置信息用坐标表示；确定至少一个所述关键节点在所述图像数据中的位置坐标；确定至少一个所述关键节点的类别信息，其中所述类别信息包括：感兴趣的身体特征信息，所述感兴趣的身体特征信息包括：针对不同应用的人体监测任务和人体生物力学模型分析所需要的人体部位关键特征点；确定至少一个所述关键节点的状态信息，其中所述状态信息包括：可见、不可见、以及可推测或不可推测；以及通过所述关键节点之间的位置关系和可信度，将所述关键节点链接成所述人体体态图。

在又一优选实施方式中，所述姿态识别算法包括深度学习神经网络预测算法，其中深度学习神经网络需要进行训练，所述训练包括：准备人体姿态图像集，其中所述人体姿态图像集中的人体姿态图像数据根据所述关键节点被标记；以及利用所述人体姿态图像集对深度学习模型进行训练，通过误差反向传播更新所述深度学习神经网络的参数直至收敛，得到训练完备的所述深度学习神经网络。

在又一优选实施方式中，所述三维重建模块进一步被配置为：获取所述图像数据采集装置的拍摄参数，根据所述拍摄参数建立三维空间坐标系，其中所述拍摄参数包括以下至少一种：摄像头的方位，角度和视角，焦距。

在又一优选实施方式中，所述三维重建模块进一步被配置为：在单深度相机的情况下，通过将由所述深度相机获取的深度图像生成的所述人体体态图转换为三维点云图像，以重建所述目标用户的所述人体三维姿态信息；在平面相机和深度相机组合的情况下，通过将由所述平面相机获取的平面图像生成的所述人体体态图与由所述深度相机获取的深度图像转换的三维点云图像进行处理，以重建所述目标用户的所述人体三维姿态信息；或者在多视角图像数据采集装置组合的情况下，通过将图像数据采集装置在每个视角生成的所述人体体态图投射到所述三维空间坐标系中，以重建所述目标用户的所述人体三维姿态信息。

在又一优选实施方式中，所述骨骼配准模块进一步被配置为进行全局骨骼缩放和局部骨骼缩放，其中所述全局骨骼缩放是指针对整个人体的关键节点的坐标集进行配准，所述局部骨骼缩放是指针对人体的关键节点中的局部关键节点的坐标进行配准，包括：计算所述目标用户与所述参考者的骨骼长度，其中所述骨骼长度为链接在一起的所述关键节点的所述位置坐标之间的距离，其中所述距离包括以下至少一种：欧式距离、标准化欧式距离、马氏距离、余弦距离；将所述目标用户的所述骨骼长度按照所述参考者的对应骨骼长度进行骨骼配准；或者将所述参考者的所述骨骼长度按照所述目标用户的对应骨骼长度进行骨骼配准。

在又一优选实施方式中，所述姿态比较模块进一步被配置为进行以下至少一种：通过计算所述目标用户的关键节点与所述参考者的对应关键节点在所述三维空间上的距离进行逐一比较，其中所述距离越大表示姿态差距越大；通过计算所述目标用户的多个关键节点与所述参考者的多个对应关键节点在所述三维空间上的距离并将所得距离求平均值进行比较，其中所述平均值越大表示姿态差距越大；以及通过计算所述目标用户的相链接关键节点组成的线段与所述参考者的对应相链接关键节点组成的线段之间的夹角进行比较，其中所述夹角越大表示姿态差距越大。

在又一优选实施方式中，所述自适应调整模块进一步被配置为：基于对前述的一个或多个比较方式得到的比较结果加权所得的评分，适应性调整所述智能座椅的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度；形成所述智能座椅的所述坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度针对所述目标用户的记忆，以便响应于识别出所述目标用户，直接将所述智能座椅调整至针对所述目标用户记忆的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度；以及向所述目标用户反馈姿态优化建议。

在又一优选实施方式中，该基于姿态识别的智能座椅控制装置还包括电源装置，所述电源装置用于为所述图像采集模块、所述姿态识别模块、所述三维重建模块、所述骨骼配准模块、所述姿态比较模块和所述自适应调整模块供电。

与现有技术相比，该基于姿态识别的智能座椅控制装置通过重建三维姿态信息并利用深度学习神经网络结合传统机器学习技术进行姿态分析，对所述智能座椅适应性调整，并将优化建议反馈给目标用户，从而可以有效提高目标用户的舒适性，减少行车过程中的盲区，继而避免交通事故的发生。

附图说明

在所附权利要求书中具体阐述了本实用新型的新颖性特征。通过参考以下附图和对附图中利用到本实用新型原理的说明性实施方式的详细阐述，将会对本实用新型的特征和优点取得更好的理解。附图仅用于示出实施方式，而并不应当被认为是对本实用新型的限制。而且在整个附图中，用相同的附图标记表示相同的元素，在附图中：

图1示出了依据本实用新型示例性实施方式的基于姿态识别的智能座椅控制装置的示意图；

图2示出了依据本实用新型示例性实施方式的摄像头的一种布置方式；

图3示出了依据本实用新型示例性实施方式的模型应用流程图；

图4示出了依据本实用新型示例性实施方式的深度学习网络模型的训练流程图；

图5示出了依据本实用新型示例性实施方式的身体关键特征点标记模板的示例；

图6示出了依据本实用新型示例性实施方式的坐姿分析所用的身体关键特征点示意图；

图7示出了依据本实用新型示例性实施方式的人体姿态三维重建流程的示例；以及

图8示出了依据本实用新型示例性实施方式的基于姿态识别的智能汽车座椅的示意图。

具体实施方式

下面将参照附图更详细地描述本公开内容的示例性实施方式。虽然附图中显示了本公开内容的示例性实施方式，然而应当理解，可以以各种形式实现本公开内容，而不应被本文阐述的实施方式所限制。相反，提供这些实施方式是为了使本领域技术人员能够更透彻地理解本公开内容，以及将本公开内容的范围完整地传达给本领域技术人员。在以下详细描述中没有任何内容旨在表明任何特定组件、特征或步骤对于本实用新型是必不可少的。本领域技术人员将会理解，在不脱离本公开内容的范围内各种特征或步骤可以彼此替代或结合。

图1示出了依据本实用新型示例性实施方式的基于姿态识别的智能座椅控制装置的示意图。参见图1，该基于姿态识别的智能座椅控制装置，包括：图像采集模块101，所述图像采集模块被配置为通过图像数据采集装置获取目标用户的图像数据；姿态识别模块102，所述姿态识别模块与所述图像采集模块耦合并且被配置为通过姿态识别算法从所述图像数据中识别出所述目标用户，并输出所述智能座椅所需要的人体体态图；三维重建模块103，所述三维重建模块与所述姿态识别模块耦合并且被配置为基于所述人体体态图通过三维重建算法重建所述目标用户的人体三维姿态信息；骨骼配准模块104，所述骨骼配准模块与所述三维重建模块耦合并且被配置为利用三维空间中的体态关键节点将所述目标用户与参考者进行骨骼配准；姿态比较模块105，所述姿态比较模块与所述骨骼配准模块耦合并且被配置为将经骨骼配准的所述目标用户与所述参考者的所述人体三维姿态信息进行比较；以及自适应调整模块106，所述自适应调整模块与所述姿态比较模块耦合并且被配置为基于所述比较结果，对所述智能座椅适应性调整；其中所述耦合的方式是有线耦合或者无线耦合。

在一些实施方式中，摄像头可以包括以下至少一种：平面摄像头、深度摄像头、红外摄像头或热成像仪，其中所述深度摄像头可以包括以下至少一种：时间飞行摄像头、结构光摄像头或双目摄像头。其中，时间飞行摄像头(Time of flight，简称为TOF)是通过给目标连续发送光脉冲，然后用传感器接收从物体返回的光，继而通过探测光脉冲的飞行时间来得到目标物到摄像头的距离信息。结构光摄像头是通过发射激光来扫描被测物，以得出被测物体表面到摄像头的距离信息。双目摄像头通过两个摄像头采集的图像的视差计算来确定拍摄目标到摄像头的距离信息。

对于采用平面摄像头与深度摄像头组合的方式，平面摄像头提供用户外观信息，深度摄像头提供用户距离摄像头拍摄方向的距离信息，以此可以解析出拍摄者的身体关节位置。采用平面摄像头与深度摄像头组合的配置方式允许当仅有单个视角时观测用户。该配置方式的核心是把平面色彩图像和深度点云进行在像素上进行叠加融合，这种像素级别的融合方法使得本实用新型的模型能够明确地推理局部外观和几何信息。此外，还可以采用双目摄像头作为优选方案，这是由于双目摄像头价格相对合理，既能输出平面色彩图像又能输出深度图像。

图2是本实用新型实施方式的摄像头的一种布置方式。如图2所示，摄像头202和摄像头203可以从多角度获取至少一个目标用户201的运动图像和/或视频数据。根据摄像机内参数与拍摄视图之间的相对姿态，基于图像特征信息(边缘、线、轮廓、兴趣点、角点和几何基元等)提取图像的特征点。针对提取的特征点进行视差估计，利用得到的视差信息重建三维空间场景，来求取目标用户身体骨骼关节在三维空间的位置。

在本实施方式中，所述姿态识别模块102进一步被配置为：通过人体的关键节点，确定人体的姿态，其中所述关键节点包括以下至少一种：肢体关节点、面部关键点，并且所述关键节点的位置信息用坐标表示；确定至少一个所述关键节点在所述图像数据中的位置坐标；确定至少一个所述关键节点的类别信息，其中所述类别信息包括：感兴趣的身体特征信息，所述感兴趣的身体特征信息包括：针对不同应用的人体监测任务和人体生物力学模型分析所需要的人体部位关键特征点；确定至少一个所述关键节点的状态信息，其中所述状态信息包括：可见、不可见、以及可推测或不可推测；以及通过所述关键节点之间的位置关系和可信度，将所述关键节点链接成所述人体体态图。

图3示出了本实用新型实施方式的模型应用流程图。如图3所示，该流程可以包括如下步骤：S301，对姿态识别深度学习网络模型进行训练；S302，利用训练完备的姿态识别深度学习神经网络进行推理。

在本实施方式中，所述姿态识别算法包括深度学习神经网络预测算法，其中深度学习神经网络需要进行训练。如图3所示，在S301，所述训练可以包括：准备人体姿态图像集，其中所述人体姿态图像集中的人体姿态图像数据根据所述关键节点被标记；以及利用所述人体姿态图像集对深度学习模型进行训练，通过误差反向传播更新所述深度学习神经网络的参数直至收敛，得到训练完备的所述深度学习神经网络。

图4是根据本实用新型实施方式的深度学习网络模型的训练流程图，如图4所示，该流程图可以包括：S401准备包含人体的图像集，并基于受力分析所需求的身体关键特征点，来标记人体图像中的人体，标记的特征点用于分辨不同的人体部位；S402构建神经网络模型；S403定义损失函数；S404模型训练：通过搭建的神经网络模型，以图像数据作为输入，输出预测的人体姿态特征点，计算预测特征点和标记的特征点之间的误差，通过误差的反向传播，来更新所述神经网络的参数直至收敛，得到训练完备的神经网络；优选采用交叉验证的方式来验证深度学习模型的训练程度，以增强其泛化能力和避免模型的过拟合。

在S401中，人体姿态图像集中的姿态图像是通过人工标注特征点标签的方式获取的。为了能够得到更多的训练用的人体姿态图像，可对图像进行预处理，预处理方式包括但不限于以下至少之一：旋转处理，裁剪处理，亮度调整，降采样处理。优选的，准备姿态图像数据库时，可根据现有的大量的经过标记的人体数据库进行修改，并根据对感兴趣部位进行生物力学分析所需要的特征点，来标注图像中的人体姿态。

图5示出了依据本实用新型示例性实施方式的身体关键特征点标记模板的示例。在一些实施方式中，可使用流行的公开数据集包括但不限于：Human 3.6M三维人体体态数据集、COCO人体体态数据集、MPII人体体态数据库等。在MPII数据集中，每个人物的均带有不同编号的14个身体关键特征点标记，例如右肩、右肘、右腕、左肩、左肘、左腕、右髋、右膝、右踝、左髋、左膝、左踝、头顶、脖子；每个标记记录了对应的身体关键特征点的坐标信息，其中身体关键特征点标记模板如图5所示。

图6示出了依据本实用新型示例性实施方式的坐姿分析所用的身体关键特征点示意图。在一些实施方式中，为了进行生物力学分析，以获知动作对肌肉、关节、骨骼的影响，提出了基于人体工学的更适应需求的人体体态特征标记方法，即针对不同的人体力学分析需求，额外标记图像中人体的重要特征点。如图6所示，对于目标用户的坐姿分析，所用的特征点包括但不限于如下身体特征：头部、颈部中心、肩部中心、背部中心、腰部、骶骨、髋关节、大腿骨、膝关节、坐骨接触点等。采取这种方式，对人体生物力学分析需要的关键点进行预测，不仅能够提高针对姿态识别任务的准确率，还能够进一步减少姿态识别模型的计算量以及预测时间。

在一些实施方式中，为了进一步提升身体关键特征点位置估计的准确度和稳定性，根据所述图像上标记的身体关键特征点在图像上的像素点位置为基准，生成置信区域。在这个区域，估计的身体关键特征点会有比较高的概率包含真实值。本领域技术人员应当理解，还可以采用其他置信区域生成方法生成置信区域。

在一些实施方式中，身体关键特征点监测深度学习神经网络结构包括自上而下的深度学习神经网络或者自下而上的深度学习神经网络，其中自下而上的方法是指先监测图像中所有的身体关键特征点，然后将所有的身体关键特征点分别分配到不同的人体实例上；以及自上而下的方法是指在图像上首先运行人体监测器，找到所有的人体实例，然后将所有的人体实例分隔为多个人体实例子图，对每个人体实例子图分别进行身体关键特征点的监测。这种方法识别单人的身体关键特征点的速度和准确程度较高，体现出很高的性能，对整张图像姿势识别的时间随人数增加而增加。但因为没能更细致地对人体关键点建模，所以识别复杂的人体姿态的准确度往往稍低。而自下而上的方法，在图像上首先监测图像中人体部位关键点，然后将图像中多人人体的部位关键点分别分配到不同的人体实例上。这种方法虽然不能得益于整体人体结构信息，但在图像中包含多个人体实例的情况下，对每个人身体关键特征点探测分类的准确度较高，且识别时间不会随探测人数增加而显著递增。

换言之，在多人姿态提取情况下，优选使用一种自下而上深度学习身体关键特征点监测神经网络架构模型。然而，在单人姿态提取情况下，为了提高对单人姿态探测的准确度，优选地采用自上而下的深度学习身体关键特征点监测神经网络架构模型。

在S302，利用训练完备的姿态识别深度学习神经网络进行推理可以包括：将上述图像或视频数据作为输入，通过训练完备的神经网络，输出估计的每个人体体态关键特征点，其中特征点信息包括：在图上的坐标、状态和置信度等。

图7示出了依据本实用新型示例性实施方式的人体姿态三维重建流程的示例。如图7所示，所述三维重建模块103进一步被配置为：获取所述图像数据采集装置的拍摄参数，根据所述拍摄参数建立三维空间坐标系，其中所述拍摄参数包括以下至少一种：摄像头的方位，角度和视角，焦距。

在S701，获取图像数据采集装置参数、拍摄的图像和通过步骤S302获取的预测的人体姿态特征点。在上述步骤中，获取的图像数据采集装置的参数包括：图像数据采集装置的位置信息和拍摄方向。在扫描前先获取各个摄像机的拍摄参数，并对相机的空间坐标系进行标定和调整。将摄像头放置在运动空间的某个或某些方位，从可选的多个视角采集用户动作信息，继而进行三维重建。然后对相机的位置进行标定。每个摄像头都可依据其所在位置的原点建立一个空间三维直角坐标系。在本实例中优选的定义方式为：坐标原点定于相机的镜头处，x、y轴与相机成像的面的两边平行，z轴定位于镜头拍摄光轴方向并垂直于相面。

在S702，匹配各视图中同一个人。在上述步骤中，通过算法匹配各视图中同一个人的方法包括但不限于：通过穿戴设备中的位置追踪确定目标用户的位置；在获取深度图像信息情况下，根据深度视图中定位的人体在三维空间的位置确定人体；以及在获取平面图像信息情况下，根据人体外观相似性和几何兼容性来计算跨多个视图的人体特征相似度。优选的是基于平面图像信息用上述姿态识别深度学习算法，计算特定卷积层输出特征结果，对特征结果进行匹配；可选的方法包括机器学习或光流法等。

在S703，根据匹配的图像数据和身体关键特征点信息重建目标的三维姿态信息。

在一些实施方式中，所述三维重建模块103进一步被配置为：在单深度相机的情况下，通过将由所述深度相机获取的深度图像生成的所述人体体态图转换为三维点云图像，以重建所述目标用户的所述人体三维姿态信息；在平面相机和深度相机组合的情况下，通过将由所述平面相机获取的平面图像生成的所述人体体态图与由所述深度相机获取的深度图像转换的三维点云图像进行处理，以重建所述目标运动者的所述人体三维姿态信息；或者在多平面相机或多深度相机组合的情况下，通过三角测量方法根据多角度放置的相机的位置和相对姿态，以及基于S302输出的标记的人体姿态数据，将所述人体体态图投射到所述三维空间坐标系中，从而计算特征点三维空间坐标，来求取目标运动者身体骨骼关节在三维空间的位置。附加地或备选地，可以依据视频间的时间上下文的一致性，对匹配结果进行约束，提高三维空间身体姿态预测准确率。在本实施方式中，所述骨骼配准模块104进一步被配置为进行全局骨骼缩放和局部骨骼缩放。其中，所述全局骨骼缩放是指针对整个人体的关键节点的坐标集进行配准，所述局部骨骼缩放是指针对人体的关键节点中的局部关键节点的坐标进行配准，包括：计算所述目标用户与所述参考者的骨骼长度，其中所述骨骼长度为链接在一起的所述关键节点的所述位置坐标之间的距离，其中所述距离可以包括以下至少一种：欧式距离、标准化欧式距离、马氏距离、余弦距离；将所述目标用户的所述骨骼长度按照所述参考者的对应骨骼长度进行骨骼配准；或者将所述参考者的所述骨骼长度按照所述目标用户的对应骨骼长度进行骨骼配准。

在一些实施方式中，利用三维空间中的体态关键节点将所述目标运动者与参考者进行骨骼配准，包括将S703获取的目标运动者的三维姿态数据点坐标集转换到参考者的基准三维空间体态特征坐标集所在坐标系中的数学计算过程。例如，将目标运动者和参考者两个体态特征坐标考虑成两个点集，体态特征坐标集由至少一个特征关节坐标组成。配准目标对象可以分为基于全局骨骼配准和局部骨骼配准。全局骨骼配准是指针对整个人体姿态特征坐标集进行配准。局部骨骼配准是指针对人体姿态特征坐标集中局部关键特征坐标进行配准。

在一个优选实施方式中，配准方法是查找将两个姿态点集对齐的空间变换过程，从而判断当前目标姿态信息。其中，变换的过程包括：将多个姿态特征节点集合并为一个全局统一的模型；以及将当前的姿态特征节点集映射到参考节点集上以识别其特征或估计其姿态。

在一些实施方式中，所述姿态比较模块105进一步被配置为进行以下至少一种：通过计算所述目标用户的关键节点与所述参考者的对应关键节点在所述三维空间上的距离进行逐一比较，其中所述距离越大表示姿态差距越大；通过计算所述目标用户的多个关键节点与所述参考者的多个对应关键节点在所述三维空间上的距离并将所得距离求平均值进行比较，其中所述平均值越大表示姿态差距越大；以及通过计算所述目标用户的相链接关键节点组成的线段与所述参考者的对应相链接关键节点组成的线段之间的夹角进行比较，其中所述夹角越大表示姿态差距越大。

在本实施方式中，所述自适应调整模块106进一步被配置为：基于对上述的一个或多个比较方式得到的比较结果加权，得到距离评分，距离评分用于表示当前智能桌是否满足当前用户工作姿态人体工学的合理性，例如在被分为两类时，则可以在分类结果中包含“合理”和“不合理”两种质量因子；其中，质量因子“合理”表示无需调整，质量因子“不合理”表示需要适应性调整所述智能座椅的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度以满足用户工作需求；形成所述智能座椅的所述坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度针对所述目标用户的记忆，以便响应于识别出所述目标用户，直接将所述智能座椅调整至针对所述目标用户记忆的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度。

在一些实施方式中，可根据从上述图像预测的用户姿态，向所述目标用户反馈姿态优化建议。其中优化建议，包括但不限于：背部挺直，腰部前倾，头挺直等。

图8示出了依据本实用新型示例性实施方式的基于姿态识别的智能座椅的示意图。通过图8所示的示意图，本领域技术人员可以更直观地理解本公开的各实施方式。如图8所示，汽车座椅按照部位划分，大致可以分为前排座椅和后排座椅，其中前排座椅通常包括：头枕、靠背、坐垫、(扶手)；后排座椅通常包括：(头枕)、靠背、坐垫、侧翼、(扶手)。对智能座椅适应性调整例如可以包括坐垫高度调节。在“标准的驾驶坐姿”下，当驾驶员的目光平视时，1)视线能够落在前挡风玻璃的中线上；2)视线向下能够看到仪表上的数据；3)视线不会被方向盘遮挡；4)能够透过挡风玻璃清楚地看到交通标志；5)头顶距离车顶的距离801至少保留10cm；6)手握方向盘的高度大约低于肩部10cm；以及7)方向盘下沿距大腿部有至少10-12cm左右的距离。对智能座椅适应性调整例如还可以包括座位前后调节。在“标准的驾驶坐姿”下，1)将手臂伸直搭在方向盘顶端802，手腕部位刚好能落在方向盘边缘上为宜；以及2)要保证右脚在踩下刹车时805，膝关节还处于弯曲状态，一般膝部803弯曲110-130度。对智能座椅适应性调整例如还可以包括座椅靠背调节。在“标准的驾驶坐姿”下，汽车座椅靠背与座椅的角度804一般大于90度并且小于120度，例如以100度为宜。对智能座椅适应性调整例如还可以包括头枕调节。在“标准的驾驶坐姿”下，1)使得头枕中间柔软部位与耳朵上沿/眼线平行；以及2)头枕距离头部约3cm的距离。此外，本领域技术人员还应当理解，虽然本文是以智能汽车座椅为例来说明本公开所涉及的智能座椅，但是本公开所涉及的智能座椅包括但不限于：汽车座椅、办公座椅、影院座椅、家居沙发、餐椅。

附加地或备选地，所述基于姿态识别的智能座椅控制装置还可以包括电源装置，所述电源装置用于为所述图像采集模块101、所述姿态识别模块102、所述三维重建模块103、所述骨骼配准模块104、所述姿态比较模块105和所述自适应调整模块106供电。

在本文所提供的说明书中，说明了大量具体细节。然而，应当理解，本公开内容的实施方式可以在没有这些具体细节的情况下实践。在一些实施方式中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

虽然本文已经示出和描述了本实用新型的示例性实施方式，但对于本领域技术人员容易理解的是，这样的实施方式只是以示例的方式提供的。本领域技术人员现将会在不偏离本实用新型的情况下想到许多更改、改变和替代。应当理解，在实践本实用新型的过程中可以采用对本文所描述的本实用新型实施方式的各种替代方案。以下权利要求旨在限定本实用新型的范围，并因此覆盖这些权利要求范围内的方法和结构及其等同项。

Claims (10)

1.一种基于姿态识别的智能座椅控制装置，其特征在于包括如下模块：

图像采集模块，所述图像采集模块被配置为通过图像数据采集装置获取目标用户的图像数据；

姿态识别模块，所述姿态识别模块与所述图像采集模块耦合并且被配置为通过姿态识别算法从所述图像数据中识别出所述目标用户，并输出所述智能座椅所需要的人体体态图；

三维重建模块，所述三维重建模块与所述姿态识别模块耦合并且被配置为基于所述人体体态图通过三维重建算法重建所述目标用户的人体三维姿态信息；

骨骼配准模块，所述骨骼配准模块与所述三维重建模块耦合并且被配置为利用三维空间中的体态关键节点将所述目标用户与参考者进行骨骼配准；

姿态比较模块，所述姿态比较模块与所述骨骼配准模块耦合并且被配置为将经骨骼配准的所述目标用户与所述参考者的所述人体三维姿态信息进行比较；以及

自适应调整模块，所述自适应调整模块与所述姿态比较模块耦合并且被配置为基于所述比较的结果，对所述智能座椅适应性调整；

其中所述耦合的方式是有线耦合或者无线耦合。

2.根据权利要求1所述的智能座椅控制装置，其特征在于所述图像数据采集装置包括以下至少一种：平面摄像头、深度摄像头、红外摄像头或热成像仪，其中所述深度摄像头包括以下至少一种：时间飞行摄像头、结构光摄像头或双目摄像头。

3.根据权利要求1所述的智能座椅控制装置，其特征在于所述姿态识别模块进一步被配置为：

通过人体的关键节点，确定人体的姿态，其中所述关键节点包括以下至少一种：肢体关节点、面部关键点，并且所述关键节点的位置信息用坐标表示；

确定至少一个所述关键节点在所述图像数据中的位置坐标；

确定至少一个所述关键节点的类别信息，其中所述类别信息包括：感兴趣的身体特征信息，所述感兴趣的身体特征信息包括：针对不同应用的人体监测任务和人体生物力学模型分析所需要的人体部位关键特征点；

确定至少一个所述关键节点的状态信息，其中所述状态信息包括：可见、不可见、以及可推测或不可推测；以及

通过所述关键节点之间的位置关系和可信度，将所述关键节点链接成所述人体体态图。

4.根据权利要求3所述的智能座椅控制装置，其特征在于所述姿态识别算法包括深度学习神经网络预测算法，其中深度学习神经网络需要进行训练，所述训练包括：

准备人体姿态图像集，其中所述人体姿态图像集中的人体姿态图像数据根据所述关键节点被标记；以及

利用所述人体姿态图像集对深度学习模型进行训练，通过误差反向传播更新所述深度学习神经网络的参数直至收敛，得到训练完备的所述深度学习神经网络。

5.根据权利要求1所述的智能座椅控制装置，其特征在于所述三维重建模块进一步被配置为：

获取所述图像数据采集装置的拍摄参数，根据所述拍摄参数建立三维空间坐标系，其中所述拍摄参数包括以下至少一种：摄像头的方位，角度和视角，焦距。

6.根据权利要求5所述的智能座椅控制装置，其特征在于所述三维重建模块进一步被配置为：

在单深度相机的情况下，通过将由所述深度相机获取的深度图像生成的所述人体体态图转换为三维点云图像，以重建所述目标用户的所述人体三维姿态信息；

在平面相机和深度相机组合的情况下，通过将由所述平面相机获取的平面图像生成的所述人体体态图与由所述深度相机获取的深度图像转换的三维点云图像进行处理，以重建所述目标用户的所述人体三维姿态信息；或者

在多视角图像数据采集装置组合的情况下，通过将图像数据采集装置在每个视角生成的所述人体体态图投射到所述三维空间坐标系中，以重建所述目标用户的所述人体三维姿态信息。

7.根据权利要求3所述的智能座椅控制装置，其特征在于所述骨骼配准模块进一步被配置为进行全局骨骼缩放和局部骨骼缩放，其中所述全局骨骼缩放是指针对整个人体的关键节点的坐标集进行配准，所述局部骨骼缩放是指针对人体的关键节点中的局部关键节点的坐标进行配准，包括：

计算所述目标用户与所述参考者的骨骼长度，其中所述骨骼长度为链接在一起的所述关键节点的所述位置坐标之间的距离，其中所述距离包括以下至少一种：欧式距离、标准化欧式距离、马氏距离、余弦距离；

将所述目标用户的所述骨骼长度按照所述参考者的对应骨骼长度进行骨骼配准；或者

将所述参考者的所述骨骼长度按照所述目标用户的对应骨骼长度进行骨骼配准。

8.根据权利要求7所述的智能座椅控制装置，其特征在于所述姿态比较模块进一步被配置为进行以下至少一种：

通过计算所述目标用户的关键节点与所述参考者的对应关键节点在所述三维空间上的距离进行逐一比较，其中所述距离越大表示姿态差距越大；

通过计算所述目标用户的多个关键节点与所述参考者的多个对应关键节点在所述三维空间上的距离并将所得距离求平均值进行比较，其中所述平均值越大表示姿态差距越大；以及

通过计算所述目标用户的相链接关键节点组成的线段与所述参考者的对应相链接关键节点组成的线段之间的夹角进行比较，其中所述夹角越大表示姿态差距越大。

9.根据权利要求8所述的智能座椅控制装置，其特征在于所述自适应调整模块进一步被配置为：

基于对权利要求8所述的一个或多个比较得到的比较结果加权所得的评分，适应性调整所述智能座椅的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度；

形成所述智能座椅的所述坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度针对所述目标用户的记忆，以便响应于识别出所述目标用户，直接将所述智能座椅调整至针对所述目标用户记忆的坐垫高度、前后距离、腰部支撑幅度、靠背倾斜角度或者头枕弯曲度；以及

向所述目标用户反馈姿态优化建议。

10.根据权利要求1所述的智能座椅控制装置，其特征在于，还包括：

电源装置，所述电源装置用于为所述图像采集模块、所述姿态识别模块、所述三维重建模块、所述骨骼配准模块、所述姿态比较模块和所述自适应调整模块供电。

Images