CN111104905A - 坐姿调整方法、装置、电子设备及存储介质 - Google Patents
坐姿调整方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111104905A CN111104905A CN201911319958.6A CN201911319958A CN111104905A CN 111104905 A CN111104905 A CN 111104905A CN 201911319958 A CN201911319958 A CN 201911319958A CN 111104905 A CN111104905 A CN 111104905A
- Authority
- CN
- China
- Prior art keywords
- sitting posture
- user
- information
- video
- sitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 238000012544 monitoring process Methods 0.000 claims abstract description 99
- 230000008569 process Effects 0.000 claims abstract description 47
- 238000004891 communication Methods 0.000 claims description 14
- 230000008859 change Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 7
- 230000036544 posture Effects 0.000 abstract description 626
- 230000000694 effects Effects 0.000 abstract description 12
- 238000012937 correction Methods 0.000 abstract description 7
- 238000001514 detection method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000000605 extraction Methods 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 239000002699 waste material Substances 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000007423 decrease Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000002372 labelling Methods 0.000 description 2
- 238000011176 pooling Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 208000009144 Pure autonomic failure Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013136 deep learning model Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000013312 porous aromatic framework Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明实施例提供了一种坐姿调整方法、装置、电子设备和存储介质。其中,所述方法,包括:在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;基于所述监测图片得到用户的关节定位信息;根据所述关节定位信息得到所述用户的坐姿信息;如果坐姿信息与用户的标准坐姿信息之间的相似度低于预设阈值,根据坐姿信息以及标准坐姿信息,控制与客户端关联的坐姿调整装置的着力强度,以调整用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。解决了现有的坐姿调整方式对不同坐姿的矫正效果欠佳的技术问题。取得了通过针对不同的坐姿情况适当地进行适应性调整,提高不同坐姿的矫正效果的技术效果。
Description
技术领域
本发明涉及计算机技术领域,特别是涉及一种坐姿调整方法、装置、电子设备及存储介质。
背景技术
目前电脑使用已成常态,不标准的坐姿会影响身体,长时间会造成身体处于亚健康状态。目前的身姿调整产品一般是通过固定的穿戴设备强制改变背部情况。但是,没有一款产品能够针对不同的坐姿情况适当地进行适应性调整,无法根据用户的错误坐姿给予相应的调整,对不同坐姿的矫正效果欠佳。
发明内容
本发明实施例的目的在于提供一种坐姿调整方法、装置、电子设备及可读存储介质,以实现针对不同的坐姿情况适当地进行适应性调整,提高不同坐姿的矫正效果。具体技术方案如下:
在本发明实施的第一方面,首先提供了一种坐姿调整方法,包括:
在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
基于所述监测图片得到用户的关节定位信息;
根据所述关节定位信息得到所述用户的坐姿信息;
如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
可选地,所述在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片的步骤,包括:
在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
可选地,所述在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片的步骤,包括:
在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
可选地,所述如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿的步骤,包括:
如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
可选地,所述根据所述坐姿信息以及所述标准坐姿信息,控制与所述用户关联的坐姿调整装置调整与所述用户的接触点的着力强度,以调整所述用户的坐姿的步骤,包括:
根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
可选地,在所述如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备的步骤之后,还包括:
根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
在本发明实施的第二方面,还提供了一种坐姿调整装置,包括:
监测图片获取模块,用于在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
关节定位模块,用于基于所述监测图片得到用户的关节定位信息;
坐姿信息获取模块,用于根据所述关节定位信息得到所述用户的坐姿信息;
坐姿调整模块,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
可选地,所述监测图片获取模块,包括:
视频时长获取子模块,用于在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
监测图片获取子模块,用于在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
可选地,所述监测图片获取子模块,包括:
播放进度获取单元,用于在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
监测图片获取单元,用于如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
可选地,所述坐姿调整模块,包括:
坐姿错误时间获取子模块,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
坐姿调整子模块,用于在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
可选地,所述坐姿调整模块,包括:
坐姿调整方式生成子模块,用于根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
接触点获取子模块,用于发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
坐姿调整策略获取子模块,用于根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
坐姿调整子模块,用于控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
可选地,所述装置还包括:
坐姿调整提醒模块,用于根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的坐姿调整方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的坐姿调整方法。
本发明实施例提供的坐姿调整方法、装置、电子设备和存储介质,通过在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;基于所述监测图片得到用户的关节定位信息;根据所述关节定位信息得到所述用户的坐姿信息;如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。解决了现有的坐姿调整方式一般不会针对不同的坐姿情况适当地进行适应性调整,无法根据用户的错误坐姿给予相应的调整,对不同坐姿的矫正效果欠佳的技术问题。取得了通过针对不同的坐姿情况适当地进行适应性调整,提高不同坐姿的矫正效果的技术效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例中的一种坐姿调整方法的流程示意图。
图2为本发明实施例中的另一种坐姿调整方法的流程示意图。
图3为本发明实施例中一种OpenPose模型的结构示意图。
图4为本发明实施例中的另一种坐姿调整方法的流程示意图。
图5为本发明实施例中一种坐姿调整系统的示意图。
图6为本发明实施例中的一种坐姿调整装置的结构示意图。
图7为本发明实施例中的另一种坐姿调整装置的结构示意图。
图8为本发明实施例中的另一种坐姿调整装置的结构示意图。
图9为本发明实施例中的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
本公开实施例的坐姿调整方法可以用于座椅,座椅上设置有包括一个或多个坐姿调整部件的坐姿调整装置,且各个坐姿调整部件可以单独控制启动,坐姿调整部件例如可以是气囊等结构。
在办公室等场景下,很多人在使用电脑时会不自觉地驼背、坐姿倾斜、半躺等,久而久之这些错误坐姿会导致肩颈、腰脊柱病痛问题。现有技术中,人们会使用坐垫靠垫、绑带等产品来帮助改善坐姿,但是现有的坐姿改善技术均无法根据用户的错误坐姿给予恰当的调整,对坐姿的矫正效果欠佳。
本发明实施例的坐姿调整方法可以实时监测用户的坐姿,在用户坐姿错误的情况下,给予恰当的调整,可以有针对性地对错误坐姿进行改善,使用户调整到正确坐姿。
可以理解,上述的应用场景仅是一种示例,该坐姿调整方法除了可以应用于座椅外,还可以应用于其他可以调整坐姿的装置上,例如坐垫、靠背等。
参照图1,为本发明实施例中一种坐姿调整方法的流程示意图。具体可以包括:
步骤110,在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片。
在实际应用中,用户在使用电脑、平板电脑、笔记本等客户端播放视频的过程中,由于投入观看视频而放松身体坐姿等原因,容易导致驼背、倾斜等错误坐姿,而且不能及时主动意识到自身的坐姿问题,从而使得错误坐姿影响身体健康。
因此,在本发明实施例中,为了检测用户的坐姿是否标准,是否需要进行调整,则需要获取与用户坐姿相关的检测图片。具体地,可以在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片。在本发明实施例中,可以检测客户端是否在播放视频,如果客户端在播放视频则可以获取与相应的用户坐姿相关的监测图片。其中,可以通过任何可用方式获取与用户坐姿相关的监测图片,对此本发明实施例不加以限定。
例如,可以通过用户当前使用的客户端的前置摄像头,周期性地采集用户的实时图片,如果在实时图片中包含至少一个人像图案,且人像图案中包括了与用户坐姿相关的上半身区域的图案,则可以将其作为与用户坐姿相关的监测图片。
当然,在本发明实施例中,可以根据需求自定义与用户坐姿相关的监测图片中需要满足的条件,例如需要包含上半身在内的人像图案,或者包含肩颈及以上部位的人像图案,等等。
另外,在本发明实施例中,根据需求也可以调整进行坐姿监控及调整的应用场景。例如,可以在用户使用客户端浏览网页过程中,获取与用户坐姿相关的监测图片;或者,可以在客户端处于亮屏且非锁屏的状态下,获取与用户坐姿相关的监测图片等等,进而则可以根据获取得到的检测图片进行后续的操作,对此本发明实施例不加以限定。
步骤120,基于所述监测图片得到用户的关节定位信息。
在获取得到检测图片之后,为了获取用户当前的坐姿情况,则可以进一步基于当前获取的监测图片得到用户当前的关节定位信息。在本发明实施例中,可以通过任何可用方式基于检测图片得到用户的关节定位信息,对此本发明实施例不加以限定。
例如,可以预先采集多个与坐姿相关的样本图片,通过人工标注的方式标出样本图片中的关节定位情况,然后训练如P-CNN(PCNN-Pulse Coupled Neural Network,脉冲耦合神经网络)、LTC-CNN(动作识别的长期时序卷积神经网络)、OpenPose等深度学习模型,进而得到用于进行关节点定位的关节点定位模型,进而以监测图片作为该模型的输入,通过该模型输出得到用户当前的关节定位信息。
步骤130,根据所述关节定位信息得到所述用户的坐姿信息。
在获取得到当前的关节定位信息之后,则可以进一步根据关节定位信息得到所述用户当前的坐姿信息。在本发明实施例中,可以通过任何可用方式基于关节定位信息得到坐姿信息,对此本发明实施例不加以限定。
例如,对于上述的样本图片,也可以预先通过人工标注的方式标出样本图片中的坐姿情况,进而根据每个样本图片的关节定位情况和坐姿情况,训练得到一个用于根据关节定位信息预测坐姿信息的坐姿信息预测模型。进而则可以通过该坐姿信息预测模型当前的关节定位信息对应的坐姿信息。
其中,坐姿信息预测模型可以为任意一种可用的机器学习模型,对此本发明实施例不加以限定。
步骤140,如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
在获取得到用户当前的坐姿信息之后,则可以进一步比较当前的坐姿信息与相应用户的标准坐姿信息之间的相似度,如果当前的坐姿信息与相应用户的标准坐姿信息之间的相似度低于预设阈值,则可以根据当前的坐姿信息以及标准坐姿信息,控制与相应用户关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
其中,预设阈值可以根据需求进行预先设置,对此本发明实施例不加以限定。例如,可以设置预设阈值为90%,等等。而且,坐姿调整装置为应用在座椅上的第三方智能设备,具体地坐姿调整装置可以为设置于座椅中的部件,也可以单独作为坐垫、靠背等在座椅上使用,具体的也可以根据需求进行自定义设置,对此本发明实施例不加以限定。而且,在本发明实施例中,可以通过任何可用方式获取当前的坐姿信息与相应用户的标准坐姿信息之间的相似度,对此本发明实施例也不加以限定。
例如,假设用户的标准坐姿信息包括坐姿类型为端坐,且双肩保持水平,颈部与双肩连线垂直,双肩距离与颈部宽度之间的比例范围为[n1,n2],颈部长度与颈部宽度之间的比例范围为[n3,n4],等等。
假设当前获取得到的坐姿信息为侧坐,且与用户的标准坐姿信息之间的相似度低于预设阈值,则可以根据当前的坐姿信息以及标准坐姿信息之间的差距,进而确定当前的坐姿调整策略,进而根据当前的坐姿调整策略,控制与所述客户端关联的坐姿调整装置调整与所述用户的接触点的着力强度,以调整所述用户的坐姿。
例如,假设获取得到的坐姿信息中的坐姿类型为向右侧坐,而标准坐姿类型为水平端坐,那么此时则需要将用户当前的右肩向前移动,以调整坐姿至水平端坐。那么此时则可以控制与相应用户关联的坐姿调整装置中与右肩的接触区域增加着力强度,以提示用户调整右肩位置,从而完成坐姿调整。
其中,在坐姿调整装置调整与所述用户的接触点的着力强度的过程中,坐姿调整装置本身的外观可以不发生变化,只是向外施加着力强度;当然,坐姿调整装置本身的外观也可以发送变化,例如,如果某一接触点的着力强度增大,那么该接触点也会相应向外移动,且移动距离可以为着力强度成正比,具体的移动距离与着力强度之间的对应关系可以根据需求或者经验等进行预先设置,对此本发明实施例不加以限定。
在本发明实施例中,通过在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;基于所述监测图片得到用户的关节定位信息;根据所述关节定位信息得到所述用户的坐姿信息;如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。从而通过针对不同的坐姿情况适当地进行适应性调整,提高不同坐姿的矫正效果。
参照图2,在本发明实施例中,所述步骤110进一步可以包括:
步骤111,在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
步骤112,在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
在实际应用中,用户在使用客户端播放视频的过程中,一般而言用户在起始一段时间内,和/或在切换视频的过程中可以意识到主动维持正确坐姿,也即此时出现错误坐姿的可能性相对较小,相应地如果当前播放的视频的视频时长较小,那么用户的坐姿出现问题的可能性也会较小,如果此时也进行坐姿监控,容易导致资源浪费。而如果当前播放视频的视频时长较长,用户在观看视频的过程中很难长时间保持正确坐姿,从而容易出现错误坐姿。
因此,在本发明实施例中,可以根据当前播放的视频的视频时长控制坐姿监控时机。具体的,可以在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长,进而在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
其中,可以通过任何可用方式获取客户端当前播放的视频的视频时长,而且预设时长也可以根据需求进行自定义设置,对此本发明实施例不加以限定。
可选地,在本发明实施例中,所述步骤112进一步可以包括:
步骤1121,在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
步骤1122,如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
另外,在实际应用中,不管当前播放视频的视频时长如何,用户在观看视频的初期一般都可以保持坐姿,但是随着播放进度的增加,用户保持坐姿的可能性就会逐渐下降。因此,在本发明实施例中,为了进一步提高坐姿调整时机的合理性,避免监控资源的浪费,还可以根据当前播放视频的播放进度,控制坐姿监控时机。
具体的,在当前播放的视频的视频时长大于预设时间长度的情况下,则可以进一步获取当前播放的视频的播放进度,如果视频的播放进度大于预设进度,则可以获取与用户坐姿相关的监测图片。
其中,可以通过任何可用方式获取视频的播放进度,而且预设进度的具体取值也可以根据需求进行自定义设置,对此本发明实施例不加以限定。而且,在本发明实施例中,播放进度可以为播放时长、播放时长占视频时长的百分比等等可以表征播放进度的参数。
而且,在本发明实施例中,也可以直接根据视频的播放进度控制监控时机,而不考虑当前播放视频的视频时长是,那么此时则可以在用户使用客户端播放视频过程中,获取当前播放的视频的播放进度,如果所述视频的播放进度大于预设进度,则可以获取与用户坐姿相关的监测图片。
另外,在本发明实施例中,在获取与用户坐姿相关的监测图片时,只要客户端当前播放视频满足可以获取监测图片的状态,例如上述的视频时长大于预设时长、视频时长大于预设时长且视频的播放进度大于预设进度等等,则可以获取与用户坐姿相关的监测图片,具体的获取监控图片的方式、策略等则可以根据需求进行自定义设置。例如,可以周期性地,或者间歇性地获取监控图片。
参照图2,在本发明实施例中,所述步骤140进一步可以包括:
步骤A141,如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
步骤A142,在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
在实际应用中,用户在使用客户端过程中,可能会主动调整自身坐姿,而且在一次主动调整坐姿的过程中,可以会同时通过坐姿监控获取得到与用户坐姿相关的监测图片,此时如果根据监测图片得到了用户在主动调整坐姿过程中的某个移动瞬间的坐姿信息,且该坐姿信息为错误坐姿,但是在用户主动调整自身坐姿的过程中,此时的坐姿信息可能只是某个移动瞬间的坐姿信息,并不会持续太长时间,而且用户可能还在主动调整自身坐姿,如果此时通过坐姿调整装置辅助用户进行坐姿调整,并不能准确地控制坐姿调整装置的着力强度,容易出现错误调整等负面影响,而且还会造成坐姿调整装置的资源浪费。
因此,在本发明实施例中,还可以根据错误坐姿的持续时间,确定坐姿调整的时机,以提高每次坐姿调整的准确性。具体的,如果获取的坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,则可以确认所述坐姿信息属于错误坐姿,并获取坐姿信息属于错误坐姿的持续时间,在持续时间大于预设持续时间的情况下,则可以根据坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。而如果持续时间不大于预设持续时间,则可以不进行坐姿调整。其中的预设持续时间可以根据需求进行自定义设置,对此本发明实施例不加以限定。
而且,在获取坐姿信息属于错误坐姿的持续时间时,其中的坐姿信息为当前获取得到的最新的坐姿信息,而且在持续时间大于预设持续时间的情况下,根据坐姿信息以及所述标准坐姿信息,通过控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿时,所参照的坐姿信息也可以为当前获取得到的最新的坐姿信息,也可以包括在本次的持续时间内的获取得到的全部的坐姿信息,具体的可以根据需求进行预先设置,对此本发明实施例不加以限定。
例如,假设用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片包括:检测图片1、检测图片2、检测图片3、检测图片4,且在获取检测图片时,每5分钟获取一张检测图片。如果基于检测图片1获取的坐姿信息1与当前用户的标准坐姿信息之间的相似度不低于预设阈值,也即坐姿信息1不属于错误坐姿,而基于检测图片2、检测图片3、检测图片4获取的坐姿信息2、坐姿信息3和坐姿信息4均确定为错误坐姿,那么在获取得到坐姿信息4时,可以得到坐姿信息属于错误坐姿的持续时间为10分钟,假设预设持续时间为8分钟,那么坐姿信息属于错误坐姿的持续时间坐姿信息属于错误坐姿的持续时间,此时则可以根据坐姿信息以及标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。而且,在控制与所述客户端关联的坐姿调整装置的着力强度时,所参考的坐姿信息可以为上述的坐姿信息4,也可以包括在持续时间内的上述的坐姿信息2、坐姿信息3和坐姿信息4;等等。
可选地,在本发明实施例中,所述步骤120进一步可以包括:
步骤121,对所述监测图片进行特征提取,得到所述监测图片的特征图片。
在本发明实施例中,为了准确获取监测图片中的关节定位信息,则可以先对所述监测图片进行特征提取,得到所述监测图片的特征图片。
而且,在本发明实施例中,可以通过任何可用方式对监测图片进行特征提取,得到监测图片的特征图片,对此本发明实施例不加以限定。
例如,在OpenPose模型中可以通过VGG(Visual Geometry Group Network)模型对监测图片进行特征提取。
步骤122,根据所述特征图片,通过预设的OpenPose模型中的第一分支得到包含关节定位点的二维置信图。
步骤123,根据所述特征图片,通过所述OpenPose模型中的第二分支得到表征各个所述关节定位点之间亲和度的一组二维向量空间。
步骤124,根据所述二维置信图、所述二维向量空间和所述特征图片,得到所述用户的关节定位信息。
在获取得到预测图片的特征图片之后,则可以根据所述特征图片,通过预设的OpenPose模型中的第一分支(Branch 1)得到包含关节定位点的二维置信图,通过所述OpenPose模型中的第二分支(Branch 2)得到表征各个所述关节定位点之间亲和度的一组二维向量空间(PAFs,Part Affinity Fields)。
如图3所示的OpenPose模型,其中P表示池化(Pooling),C表示卷积(Convolution),模型的输入内容为RGB三通道的尺寸为h*w的预测图片,预测图片经过VGG-19进行特征提取,得到特征图片,记为F,经过如图3所示的网络,该网络分上下两个分支,每个分支都有t个阶段(Stage),t越大表示越精细,每个阶段都会将特征图片进行融合。其中ρ、φ表示相应网络,f表示损失函数。其中,St=ρt(F,St-1,Lt-1),Lt=φt(F,St-1,Lt-1),
在得到关节定位点的二维置信图、表征各个所述关节定位点之间亲和度的一组二维向量空间之后,则可以进一步根据所述二维置信图、所述二维向量空间和所述特征图片,得到所述用户的关节定位信息。
其中,关节定位信息与上述的二维置信图、二维向量空间和特征图片之间的对应关系可以根据需求进行预先设置,对此本发明实施例不加以限定。
另外,在本发明实施例中,关节定位信息中包含的需要定位的关节点可以根据需求进行自定义设置,对此本发明实施例也不加以限定。例如,可以设置关节定位信息中包含的需要定位的关节点包括左肩、右肩、头部、颈部、手臂、左手、右手,等等。那么在获取得到关节定位点的二维置信图,以及表征各个所述关节定位点之间亲和度的一组二维向量空间之后,则可以从中分别筛选出当前所需的关节点的相关信息,从而得到相应用户当前的关节定位信息。
可选地,在本发明实施例中,所述步骤114,进一步可以包括:获取所述二维置信图、所述二维向量空间和所述特征图片的逻辑与运算结果,并以所述运算结果作为所述用户的关节定位信息。
可选地,在本发明实施例中,为了快速准确得到用户的关节定位信息,可以直接获取所述二维置信图、所述二维向量空间和所述特征图片的逻辑与运算结果,并以所述运算结果作为所述用户的关节定位信息。
参照图4,在本发明实施例中,所述步骤140进一步可以包括:
步骤B141,根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
步骤B142,发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
步骤B143,根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
步骤B144,控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
在实际应用中,用户处于坐着的姿态时,不同坐姿状态与坐姿调整装置的接触情况也可能会相应有所不同。例如在侧坐时可能只有身体一侧可以接触到坐姿调整装置,那么此时如果控制坐姿调整装置中与用户不接触的其他部位进行着力调整,用户并不能感受到,也无法引导用户进行坐姿调整,因此需要对坐姿调整装置中与用户存在接触的部分进行着力,从而可以使得用户可以感受到坐姿调整装置发出的信号,进而调整坐姿调整。而且,根据用户当前的坐姿信息与其标准坐姿信息之间的差距,则可以得到为了尽可能地靠近标准坐姿信息,当前的坐姿信息需要的调整策略,因此可以根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式。
例如,如前述的标准坐姿信息中的坐姿类型为水平端坐,假设当前的坐姿信息中的坐姿类型为向右侧坐,那么此时的坐姿调整方式可以为向左侧调整。
但是,根据坐姿信息以及标准坐姿信息生成的坐姿调整方式,并未考虑坐姿调整装置与用户的接触点,因此无法准确确定坐姿调整装置中每个部分的着力情况,不便于控制坐姿调整装置。因此,在本发明实施例中,可以发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到。
在实际应用中,如果用户与坐姿调整装置进行接触,那么一般会对接触点产生压力作用,因此在本发明实施例中,为了提高位姿调整的准确性,避免对坐姿调整装置中无效部位进行着力,可以发送接触点申请请求至所述坐姿调整装置,以从坐姿调整装置中获取当前的接触点信息。而且,在本发明实施例中,坐姿调整装置可以根据自身当前的受力情况,获取其与用户存在接触的接触点的接触点信息。其中的接触点也可以为接触区域,而且如果坐姿调整装置中包括多个坐姿调整部件,那么此时也可以根据坐姿调整装置中每个坐姿调整部件当前的受力情况,获取所述坐姿调整装置中与所述用户存在接触的坐姿调整部件,作为接触点;等等。其中的接触点信息可以为每个接触点在坐姿调整装置中的位置信息,控制路径,等等。而且,坐姿调整装置在接收到与其关联的客户端、服务器等用以控制进行坐姿调整的装置发送的接触点申请请求之后,则可以获取当前的接触点信息并将其返回给接触点申请请求的发送方。
其中,坐姿调整装置可以向与其关联的客户端、服务器等用以控制进行坐姿调整的装置开放获取接触点信息的权限,例如可以在与客户端、服务器等用以控制进行坐姿调整的装置建立关联关系的同时开放获取接触点信息的权限,或者也可以预先根据客户端、服务器等用以控制进行坐姿调整的装置的权限申请,开放获取接触点信息的权限;等等。
另外,为了保证在位姿调整过程中用户的舒适性,可以以一定趋势缓慢调整接触点的着力强度,以缓慢改变用户坐姿。那么此时可以根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略,进而控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
其中,每个所述接触点的着力变化趋势与坐姿调整方式之间的对应关系可以根据需求进行自定义设置,对此本发明实施例不加以限定。
例如,如果坐姿调整方式为向左侧调整,那么则可以控制坐姿调整装置中各个接触点的着力变化趋势为,从预设力度开始逐渐降低,且各个接触点的降低幅度按照从右向左的顺序逐渐降低。从而推动用户右侧肩部向左侧移动;相反,如果坐姿调整方式为向右侧调整,那么则可以控制坐姿调整装置中各个接触点的着力变化趋势从右向左逐渐升高,从而推动用户左侧肩部向右侧移动;等等。
而且,在坐姿调整过程中,也可以周期性地检测坐姿的调整状况,也即执行上述的步骤110-130,获取在坐姿调整过程中,用户的实时调整后的坐姿信息,而如果当前获取得到的调整后的坐姿信息与当前场景下的标准坐姿信息之间的相似度大于或等于预设阈值,则无需进行坐姿调整,那么此时则可以将所述坐姿调整装置中的着力强度重置为零。
另外,在本发明实施例中,如果在坐姿调整过程中,可以周期性地执行上述的步骤,那么此时也可以每次根据最新获取得到的坐姿信息执行上述的步骤B141-B144,重新确定坐姿调整方式、接触点,以及每个接触点的着力变化趋势,那么此时在每次重新确定接触点以及每个接触点的着力变化趋势之后,如果上一次确定的某一接触点不在本次确定的接触点范围内,那么则可以将坐姿调整装置中不在本次确定的接触点范围内的其他区域的着力强度重置为零,而同时根据当前重新确定的各个接触点的着力变化趋势,相应地控制所述坐姿调整装置根据所述坐姿调整策略运行。
需要说明的是,在本发明实施例中,上述的步骤A142,也可以包括步骤B141-B144,也即在在所述持续时间大于预设持续时间的情况下,进行坐姿调整时,可以按照上述的步骤B141-B144的方式进行坐姿调整。
参照图2和图4,在本发明实施例中,在所述步骤140之后,进一步可以包括:
步骤150,根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
另外,在本发明实施例中,为了提醒用户主动进行姿势调整,还可以根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。具体的,客户端的坐姿调整提示方式可以根据需求进行自定义设置,对此本发明实施例不加以限定。例如,可以控制客户端进行语音或者是弹幕等方式进行坐姿调整提醒,等等。
有上述内容可知,在本发明实施例中,整个坐姿矫正过程可以包括训练阶段和实施阶段两个阶段。其中,在训练阶段可以采集众多的用户在使用电子设备过程中,包含用户的坐姿情况的图片,通过人工标注的方式标出各个图片中的关节定位情况以及坐姿状况,然后可以通过深度模型OpenPose等训练在不同使用环境下的姿势模型,通过对模型的不断优化,可以获取电子设备在使用不同状况下的用户姿势情况。
如图5所示,在实施阶段的参与者主要可以包括客户端、服务器、第三方智能设备(例如,坐姿调整装置)等。训练得到的关节定位模型和坐姿模型等可以位于客户端或者服务器端,当客户端采集与用户当前的坐姿相关的监测图片后,输入到训练得到的关节定位模型中,可以得到当前的关节定位信息,然后可以根据关节定位信息获取得到用户当前的坐姿信息,也即获取到当前姿势骨架,根据姿势骨架信息判断坐姿情况的标准与否,在坐姿不标准的情况下可以控制客户端通过语音等方式进行提醒。第三方智能设备是可以应用在座椅上的设备,根据人体背部情况可以进行改变受力,当获取到当前姿势骨架信息后,根据姿势状态,调节与人体接触点的着力状况,来缓慢改变坐姿,通过电脑端提醒与智能设备的方式来改善坐姿。
而且,如果上述步骤的执行主体是服务器,那么此时响应于所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,服务器则可以根据所述坐姿信息以及所述标准坐姿信息,直接发送用以控制调整坐姿的控制信息至第三方智能设备,并且可以与第三方智能设备进行交互,以完成用户坐姿调整,而且还可以发送当前场景下的标准坐姿信息至服务器,并且可以从客户端获取实时的监测图片,以获取用户实时的坐姿信息,从而通过和客户端进行交互,以通过客户端提示用户进行坐姿调整。另外,客户端在接收到坐姿信息之后,也可以通过客户端与第三方智能设备进行交互,发送控制信息至第三方智能设备,从而通过客户端控制第三方智能设备辅助用户进行坐姿调整。其中的控制信息可以包括根据所述坐姿信息以及所述标准坐姿信息确定的控制信息,也可以包括根据坐姿调整策略确定的控制信息,等等。
另外,在本发明实施例中,如果上述步骤的执行主体是客户端,也即上述坐姿信息和控制信息等内容都可以在客户端生成,那么此时可以直接在客户端侧控制自身进行坐姿调整提醒,也可以通过客户端控制第三方智能设备辅助用户进行坐姿调整,那么此时则可以无需图4中所示的服务器。
进一步地,在本发明实施例中,如果第三方智能设备也可以通过语音等方式进行坐姿调整提醒,那么此时也可以通过服务器直接控制第三方智能设备辅助用户进行坐姿调整的同时进行坐姿调整提醒,对此本发明实施例不加以限定。
而且,在本发明实施例中,在办公环境和电子设备使用状况下可以包含上述的姿势检测以及坐姿调整过程,同时还可以设定在某些时间段才开启上述坐姿调整策略,具体的可以根据需求进行自定义设置,对此本发明实施例不加以限定。
在本发明实施例中,通过在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。以及,在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。从而实现根据当前播放视频的视频时长、播放进度等控制监控时机,避免检测资源的浪费的同时提高坐姿调整时机的准确性,进而提高用户的坐姿调整体验。
而且,在本发明实施例中,还可以如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。从而可以根据坐姿信息属于错误坐姿的持续时间控制坐姿调整时机,避免误调整以提高坐姿调整的准确性以及坐姿调整过程中用户的舒适度。
而且,在本发明实施例中,还可以根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。从而可以提高坐姿调整过程中的用户的舒适性以及坐姿调整的准确性。
另外,在本发明实施例中,还可以根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。从而可以提醒用户主动调整自身坐姿。
参照图6,为本发明实施例中一种坐姿调整装置的结构示意图。具体可以包括:
监测图片获取模块210,用于在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
关节定位模块220,用于基于所述监测图片得到用户的关节定位信息;
坐姿信息获取模块230,用于根据所述关节定位信息得到所述用户的坐姿信息;
坐姿调整模块240,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
在本发明实施例中,通过在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;基于所述监测图片得到用户的关节定位信息;根据所述关节定位信息得到所述用户的坐姿信息;如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。从而通过针对不同的坐姿情况适当地进行适应性调整,提高不同坐姿的矫正效果。
参照图7,在本发明实施例中,所述监测图片获取模块210,进一步可以包括:
视频时长获取子模块211,用于在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
监测图片获取子模块212,用于在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
可选地,在本发明实施例中,所述监测图片获取子模块222,进一步可以包括:
播放进度获取单元,用于在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
监测图片获取单元,用于如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
参照图7,在本发明实施例中,所述坐姿调整模块240,进一步可以包括:
坐姿错误时间获取子模块241,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
坐姿调整子模块242,用于在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
参照图8,在本发明实施例中,所述坐姿调整模块240,进一步可以包括:
坐姿调整方式生成子模块243,用于根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
接触点获取子模块244,用于发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
坐姿调整策略获取子模块245,用于根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
坐姿调整子模块246,用于控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
可选地,在本发明实施例中,所述关节定位模块220,进一步可以包括:
特征提取子模块221,用于对所述监测图片进行特征提取,得到所述监测图片的特征图片;
关节定位点获取子模块222,用于根据所述特征图片,通过预设的OpenPose模型中的第一分支得到包含关节定位点的二维置信图;
关节亲和度获取子模块223,用于根据所述特征图片,通过所述OpenPose模型中的第二分支得到表征各个所述关节定位点之间亲和度的一组二维向量空间;
关节定位信息获取子模块224,用于根据所述二维置信图、所述二维向量空间和所述特征图片,得到所述用户的关节定位信息。
可选地,在本发明实施例中,所述关节定位信息获取子模块224,还用于获取所述二维置信图、所述二维向量空间和所述特征图片的逻辑与运算结果,并以所述运算结果作为所述用户的关节定位信息。
参照图7和图8,在本发明实施例中,所述坐姿调整装置,还可以包括:
坐姿调整提醒模块250,用于根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
在本发明实施例中,通过在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。以及,在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。从而实现根据当前播放视频的视频时长、播放进度等控制监控时机,避免检测资源的浪费的同时提高坐姿调整时机的准确性,进而提高用户的坐姿调整体验。
而且,在本发明实施例中,还可以如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。从而可以根据坐姿信息属于错误坐姿的持续时间控制坐姿调整时机,避免误调整以提高坐姿调整的准确性以及坐姿调整过程中用户的舒适度。
另外,在本发明实施例中,还可以根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿;响应于调整后的坐姿信息与所述标准坐姿信息之间的相似度大于或等于所述预设阈值,将所述坐姿调整装置中的着力强度重置为零。从而可以提高坐姿调整过程中的用户的舒适性以及坐姿调整准确性。
另外,在本发明实施例中,还可以根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。从而可以提醒用户主动调整自身坐姿。
需要说明的是,在本发明实施例中,图6-8所示的坐姿调整装置可以执行图1、图2和图4的方法实施例中的各个步骤,且不同于方法实施例中各个步骤中的坐姿调整装置,方法实施例中各个步骤中的坐姿调整装置是为应用在座椅上的第三方智能设备,而图6-8所示的坐姿调整装置可以通过控制座椅上的第三方智能设备进行坐姿调整。而图6-8所示的坐姿调整装置可以为与座椅上的第三方智能设备关联的客户端、服务器等设备,例如图5所示的客户端、服务器。
本发明实施例还提供了一种电子设备,如图9所示,包括处理器301、通信接口302、存储器303和通信总线304,其中,处理器301,通信接口302,存储器303通过通信总线304完成相互间的通信,
存储器303,用于存放计算机程序;
处理器301,用于执行存储器303上所存放的程序时,实现如下步骤:
在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
基于所述监测图片得到用户的关节定位信息;
根据所述关节定位信息得到所述用户的坐姿信息;
如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的坐姿调整方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的坐姿调整方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (14)
1.一种坐姿调整方法,其特征在于,包括:
在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
基于所述监测图片得到所述用户的关节定位信息;
根据所述关节定位信息得到所述用户的坐姿信息;
如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
2.根据权利要求1所述的方法,其特征在于,所述在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片的步骤,包括:
在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
3.根据权利要求2所述的方法,其特征在于,所述在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片的步骤,包括:
在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
4.根据权利要求1所述的方法,其特征在于,所述如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿的步骤,包括:
如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿的步骤,包括:
根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
6.根据权利要求5所述的方法,其特征在于,在所述如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿的步骤之后,还包括:
根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
7.一种坐姿调整装置,其特征在于,包括:
监测图片获取模块,用于在用户使用客户端播放视频过程中,获取与用户坐姿相关的监测图片;
关节定位模块,用于基于所述监测图片得到用户的关节定位信息;
坐姿信息获取模块,用于根据所述关节定位信息得到所述用户的坐姿信息;
坐姿调整模块,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿;其中,所述坐姿调整装置为应用在座椅上的第三方智能设备。
8.根据权利要求7所述的装置,其特征在于,所述监测图片获取模块,包括:
视频时长获取子模块,用于在用户使用客户端播放视频过程中,获取当前播放的视频的视频时长;
监测图片获取子模块,用于在所述视频时长大于预设时长的情况下,获取与用户坐姿相关的监测图片。
9.根据权利要求8所述的装置,其特征在于,所述监测图片获取子模块,包括:
播放进度获取单元,用于在所述视频时长大于预设时间长度的情况下,获取所述视频的播放进度;
监测图片获取单元,用于如果所述视频的播放进度大于预设进度,获取与用户坐姿相关的监测图片。
10.根据权利要求7所述的装置,其特征在于,所述坐姿调整模块,包括:
坐姿错误时间获取子模块,用于如果所述坐姿信息与所述用户的标准坐姿信息之间的相似度低于预设阈值,确认所述坐姿信息属于错误坐姿,并获取所述坐姿信息属于错误坐姿的持续时间;
坐姿调整子模块,用于在所述持续时间大于预设持续时间的情况下,根据所述坐姿信息以及所述标准坐姿信息,控制与所述客户端关联的坐姿调整装置的着力强度,以调整所述用户的坐姿。
11.根据权利要求7-10中任一项所述的装置,其特征在于,所述坐姿调整模块,包括:
坐姿调整方式生成子模块,用于根据所述坐姿信息以及所述标准坐姿信息,生成所述用户当前的坐姿调整方式;
接触点获取子模块,用于发送接触点申请请求至所述坐姿调整装置,并获取所述坐姿调整装置返回的接触点信息,所述接触点信息为所述坐姿调整装置根据自身的受力情况获取得到;
坐姿调整策略获取子模块,用于根据所述坐姿调整方式,确定所述接触点信息中每个接触点的着力变化趋势,得到所述用户当前的坐姿调整策略;
坐姿调整子模块,用于控制所述坐姿调整装置根据所述坐姿调整策略运行,以调整所述用户的坐姿。
12.根据权利要求11所述的装置,其特征在于,所述装置还包括:
坐姿调整提醒模块,用于根据所述坐姿调整方式,控制所述客户端进行坐姿调整提醒。
13.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-6中任一项所述的坐姿调整方法步骤。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6中任一项所述的坐姿调整方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911319958.6A CN111104905B (zh) | 2019-12-19 | 2019-12-19 | 坐姿调整方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911319958.6A CN111104905B (zh) | 2019-12-19 | 2019-12-19 | 坐姿调整方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111104905A true CN111104905A (zh) | 2020-05-05 |
CN111104905B CN111104905B (zh) | 2024-02-02 |
Family
ID=70422752
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911319958.6A Active CN111104905B (zh) | 2019-12-19 | 2019-12-19 | 坐姿调整方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111104905B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021047315A3 (zh) * | 2020-07-20 | 2021-06-17 | 南京智金科技创新服务中心 | 一种人体异常姿态的提示方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106510194A (zh) * | 2016-11-30 | 2017-03-22 | 宇龙计算机通信科技(深圳)有限公司 | 一种矫正不良坐姿的方法、终端、智能座椅及系统 |
CN106643708A (zh) * | 2016-09-21 | 2017-05-10 | 苏州坦特拉自动化科技有限公司 | 一种基于imu的交互式坐姿矫正装置、坐姿矫正器及监测软件 |
CN106774831A (zh) * | 2016-11-14 | 2017-05-31 | 广东小天才科技有限公司 | 一种坐姿提醒方法、装置及系统 |
WO2017166235A1 (zh) * | 2016-03-31 | 2017-10-05 | 深圳市柔宇科技有限公司 | 一种坐姿矫正座椅、系统及方法 |
CN108741862A (zh) * | 2018-05-22 | 2018-11-06 | 四川斐讯信息技术有限公司 | 一种坐姿调整方法及坐姿调整座椅 |
CN109793384A (zh) * | 2019-03-25 | 2019-05-24 | 联想(北京)有限公司 | 坐姿调整装置和坐姿调整方法 |
CN109820373A (zh) * | 2019-03-28 | 2019-05-31 | 重庆邮电大学 | 基于智能座椅的坐姿自适应调整方法 |
-
2019
- 2019-12-19 CN CN201911319958.6A patent/CN111104905B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017166235A1 (zh) * | 2016-03-31 | 2017-10-05 | 深圳市柔宇科技有限公司 | 一种坐姿矫正座椅、系统及方法 |
CN106643708A (zh) * | 2016-09-21 | 2017-05-10 | 苏州坦特拉自动化科技有限公司 | 一种基于imu的交互式坐姿矫正装置、坐姿矫正器及监测软件 |
CN106774831A (zh) * | 2016-11-14 | 2017-05-31 | 广东小天才科技有限公司 | 一种坐姿提醒方法、装置及系统 |
CN106510194A (zh) * | 2016-11-30 | 2017-03-22 | 宇龙计算机通信科技(深圳)有限公司 | 一种矫正不良坐姿的方法、终端、智能座椅及系统 |
CN108741862A (zh) * | 2018-05-22 | 2018-11-06 | 四川斐讯信息技术有限公司 | 一种坐姿调整方法及坐姿调整座椅 |
CN109793384A (zh) * | 2019-03-25 | 2019-05-24 | 联想(北京)有限公司 | 坐姿调整装置和坐姿调整方法 |
CN109820373A (zh) * | 2019-03-28 | 2019-05-31 | 重庆邮电大学 | 基于智能座椅的坐姿自适应调整方法 |
Non-Patent Citations (1)
Title |
---|
刘少华等: "基于柔性力敏传感器的便携式坐姿监测与提醒系统", 计算机系统应用, no. 07 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021047315A3 (zh) * | 2020-07-20 | 2021-06-17 | 南京智金科技创新服务中心 | 一种人体异常姿态的提示方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111104905B (zh) | 2024-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110139115B (zh) | 基于关键点的虚拟形象姿态控制方法、装置及电子设备 | |
CN108898118B (zh) | 一种视频数据处理方法、装置和存储介质 | |
CN101751209B (zh) | 一种调整屏幕呈现元素的方法及计算机 | |
CN105468278B (zh) | 虚拟按键的触屏操作识别、响应、游戏操控方法及装置 | |
WO2009156714A1 (en) | System and method for improving posture | |
CN105468279B (zh) | 触屏操作识别和响应方法、装置及游戏操控方法、装置 | |
KR101718837B1 (ko) | 응용프로그램의 제어방법, 장치 및 전자장비 | |
CN102542247A (zh) | 信息处理设备、信息处理方法以及程序 | |
CN110390705A (zh) | 一种生成虚拟形象的方法及装置 | |
WO2021098147A1 (zh) | Vr体感数据检测方法、装置、计算机设备及存储介质 | |
CN113705520A (zh) | 动作捕捉方法、装置及服务器 | |
CN111626105A (zh) | 姿态估计方法、装置及电子设备 | |
JP6276456B1 (ja) | ユーザの姿勢を評価するための方法およびシステム | |
CN111104905A (zh) | 坐姿调整方法、装置、电子设备及存储介质 | |
JP7201946B2 (ja) | 骨格情報判定装置、骨格情報判定方法及びコンピュータプログラム | |
JP2020098409A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP6868673B1 (ja) | 情報処理装置、情報処理方法、および情報処理プログラム | |
WO2017113674A1 (zh) | 基于智能设备实现体感控制的方法、系统以及智能设备 | |
CN111610886A (zh) | 触控屏幕亮度的调整方法、设备及计算机可读存储介质 | |
CN111010526A (zh) | 一种视频通讯中的互动方法及装置 | |
CN111461971B (zh) | 图像处理方法、装置、设备及计算机可读存储介质 | |
CN116469156A (zh) | 体态识别方法、装置、计算机设备及计算机可读存储介质 | |
CN113887319A (zh) | 三维姿态的确定方法、装置、电子设备及存储介质 | |
JP6927540B1 (ja) | 情報処理装置、情報処理システム、情報処理方法及びプログラム | |
KR102591325B1 (ko) | 휴먼 자세 추정 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |