CN115061977A - 档案管理方法、装置、设备、存储介质及程序产品 - Google Patents

档案管理方法、装置、设备、存储介质及程序产品 Download PDF

Info

Publication number
CN115061977A
CN115061977A CN202210615018.7A CN202210615018A CN115061977A CN 115061977 A CN115061977 A CN 115061977A CN 202210615018 A CN202210615018 A CN 202210615018A CN 115061977 A CN115061977 A CN 115061977A
Authority
CN
China
Prior art keywords
interface
real
detection
time
occupant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210615018.7A
Other languages
English (en)
Inventor
孙康
许亮
李轲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Original Assignee
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Lingang Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority to CN202210615018.7A priority Critical patent/CN115061977A/zh
Publication of CN115061977A publication Critical patent/CN115061977A/zh
Priority to PCT/CN2023/090830 priority patent/WO2023231654A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/122File system administration, e.g. details of archiving or snapshots using management policies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment

Abstract

本申请实施例公开了一种档案管理方法、装置、设备及存储介质,其中,所述方法包括:基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。

Description

档案管理方法、装置、设备、存储介质及程序产品
技术领域
本申请涉及但不限于检测技术领域,尤其涉及一种档案管理方法、装置、设备及存储介质。
背景技术
车辆安全中,乘员的身体健康是重要的考量因素。在乘员身体不适或突发危险时,需要及时进行车辆的安全控制。目前,车舱内的驾驶员或者乘客如果想了解实时的健康状态,需要额外借助可穿戴设备进行检测,如果驾驶员或者乘客未购买和佩戴类似设备,则难以了解实时健康状态。驾驶员或乘客的生理状态的检测数据的缺失不利于对车辆乘员全面、有效的安全防护。
发明内容
有鉴于此,本申请实施例至少提供一种档案管理方法、装置、设备及存储介质。
本申请实施例的技术方案是这样实现的:
一方面,本申请实施例提供一种档案管理方法,所述方法包括:
基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
上述实施例中,基于乘员对应的多帧实时图像进行生理状态检测并通过显示设备的第一界面展示实时检测数据,从而无需借助可穿戴设备即可快速对车载设备中乘员进行检测并实时显示,扩展了车载设备中的健康检测功能;同时基于实时检测数据确定检测结果并展示在显示设备的第二界面,从而便于用户及时了解自身健康状况,增加了实用性;还可以基于检测结果形成档案数据,并通过显示设备的第三界面实现对档案数据的管理,进而能够记录用户每一次检测的检测结果,方便用户随时查看检测结果。
在一些实施例中,所述方法还包括:在接收到由用户通过车载中控屏或移动设备上触发的在所述车辆内进行生理状态检测的请求的情况下,获取所述车辆内的乘员对应的多帧实时图像。
上述实施例中,在用户触发对车辆内的乘员进行生理状态检测的请求的情况下,获取相应乘员的多帧实时图像,以响应于用户的实际需求,通过视觉检测方式获得乘员的实时检测数据,无需额外借助可穿戴设备进行检测。
在一些实施例中,在所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测之前,所述方法还包括:基于至少一帧所述实时图像进行人脸识别,以获取所述乘员的身份信息;所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测,包括:在根据所述乘员的身份信息判定所述乘员为已建档用户的情况下,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
上述实施例中,通过对至少一帧实时图像进行人脸识别以获取乘员的身份信息,并基于身份信息判定为已建档用户的情况下对乘员进行生理状态检测,从而确保乘员存在个人档案的情况下再进行生理状态检测,以保存检测得到的检测结果;同时结合用户身份信息形成个人档案,便于后续管理档案。
在一些实施例中,所述方法还包括:在根据所述乘员的身份信息判定所述乘员为未建档用户的情况下,提示所述乘员创建档案并通过所述显示设备展示档案创建界面;所述新建档案界面至少包括用户个人信息录入项和人脸图像录入项;在所述乘员的档案创建完成之后,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
上述实施例中,在基于乘员的身份信息判定乘员为未建档用户的情况下,展示新建档案界面以获取用户的个人信息和人脸图像等完成建档。从而,确保乘员存在个人档案的情况下再进行生理状态检测,以保存检测得到的检测结果;同时结合身份信息形成个人档案,便于后续管理档案。
在一些实施例中,所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测,包括:在对所述乘员的生理状态检测的持续时长未达到第一预设时长、且采集的所述实时图像的帧数达到第一帧数或者所述实时图像的采集时长达到第二预设时长的情况下,根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到所述实时检测数据。
上述实施例中,在生理状态的检测持续时长、实时图像的采集帧数以及采集时长等满足相应条件的情况下,持续对乘员进行生理状态检测,从而实现在检测过程中获得多次检测的实时检测数据,便于后续确定出更准确的检测结果。
在一些实施例中,所述根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到所述实时检测数据,包括:在所述第一预设时长内,采用滑窗方式,依次确定多个滑动窗口对应的所述乘员的多组所述实时检测数据;其中,每个所述滑动窗口内包括多帧所述实时图像,所述滑动窗口的移动步长不大于所述滑动窗口内的图像帧数;所述通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据,包括:按照所述各所述滑动窗口内的多帧图像的采集时序,通过连接的显示设备的第一界面依次展示所述各组所述实时检测数据。
上述实施例中,通过滑窗的方式更新显示设备的第一界面上展示的实时检测数据,实现在检测过程中动态展示多次检测的测量数据,便于用户了解检测过程数据并及时发现异常。
在一些实施例中,所述方法还包括:基于多组所述实时检测数据绘制所述检测数据的动态变化图形,并通过所述第一界面同步展示所述动态变化图形与所述实时检测数据。
上述实施例中,通过多组实时检测数据实时模拟多帧实时图像得到的检测数据的动态变化图形,并同步展示在显示设备的第一界面,便于用户了解相应生理指标的实时变化,增加实用性。
在一些实施例中,所述方法还包括:在通过对所述乘员的实时图像进行人脸识别读取到所述乘员的头像信息或身份标识的情况下,通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据。
上述实施例中,在通过人脸识别获取到乘员的头像或身份标识信息的情况下,在第一界面展示实时检测数据的过程中同步显示该乘员的头像或身份标识信息,以告知用户当前检测的对象是谁,从而减少由于实时图像中存在多个对象而导致误检。
在一些实施例中,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,包括:通过所述第一界面中绘制的第一窗口展示所述乘员的头像的图标或所述乘员的身份标识信息的图标;以及通过所述第一界面中绘制的第二窗口展示所述实时检测数据;响应于所述第一窗口中展示的所述乘员的头像的图标或所述乘员的身份标识信息的图标被点击的情况下,确定接收到针对所述第一界面中的档案管理控件的触发操作。
上述实施例中,通过第一界面中的第一窗口展示乘员的头像的图标或乘员的身份标识信息的图标,通过第一界面中的第二窗口展示实时检测数据,实现同步展示,同时通过点击头像图标或身份标识信息的图标可以触发档案管理控件,提供第一界面到第三界面的跳转链接,增加便利性。
在一些实施例中,在基于多组所述实时检测数据绘制所述检测数据的动态变化图形的情况下,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,还包括:通过所述第一界面中绘制的第三窗口展示所述实时动态变化图形。
上述实施例中,通过第三界面中的第三窗口展示实时动态变化图形,便于用户实时了解检测数据的动态变化,从而增加第一界面的可视效果。
在一些实施例中,所述乘员的检测结果包括至少一个指标项的检测子结果,所在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果,包括:在所述生理状态检测满足检测停止条件的情况下,按照预设的控件排布方式,通过所述第二界面展示每一所述指标项的检测子结果和详情查看控件;所述详情查看控件被触发时按照预设时间单位展示相应所述指标项的历史检测数据;所述预设时间单位包括以下之一:年、月、周、日。
上述实施例中,在生理状态检测满足检测停止条件即检测结束后,按照预设的控件排布方式同时展示多个指标项的检测子结果以及详情查看控件。从而实现在检测结束后展示乘员在本次检测中的整体检测报告,便于后续存档和查看,同时可以按照年、月、周、日等周期查看每一指标项的历史检测数据。
在一些实施例中,所述第二界面还包括重新测量控件,所述方法还包括:响应于接收到针对所述重新测量控件的触发操作,执行所述对乘员对应的多帧实时图像进行生理状态检测,并通过第一界面展示得到的至少一组检测数据的步骤。
上述实施例中,通过第二界面的重新测量控件,可以重新开始检测过程,这样可以提高生理指标的检测准确率,同时为用户提供便利。
在一些实施例中,所述档案数据至少包括用户头像图标、个人信息和历史生理状态检测结果,所述第三界面包括新建控件、用户头像图标和编辑控件中至少一个,所述通过第三界面管理所述检测结果对应的档案数据,包括:响应于所述第三界面中的编辑控件且被触发,控制所述显示设备展示编辑界面;所述编辑界面包括用户的个人信息项、头像、以及用于删除所述档案数据的删除控件;响应于所述第三界面中的用户头像图标被触发,控制所述显示设备跳转至所述第二界面,以展示所述最近一次的历史生理状态检测结果;响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面。
上述实施例中,通过触发第三界面设置的新建控件来控制显示设备展示档案创建界面,实现通过档案创建界面获取信息以建立档案的功能;通过触发第三界面设置的用户头像图标,控制显示设备跳转至第二界面以展示相应用户的检测结果,实现查看检测结果的功能;通过触发第三界面设置的编辑控件,实现用户自主编辑个人信息或删除档案数据的功能。从而丰富了第三界面的管理功能,能够有效覆盖车载设备中健康检测及档案管理场景。
在一些实施例中,所述响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面,包括:响应于所述新建控件被触发,判定存储的档案总数是否超过存储阈值;响应于所述新建控件被触发,判定存储的档案总数是否超过存储阈值;在所述档案总数未超过所述存储阈值的情况下,控制所述显示设备展示所述档案创建界面;在所述档案总数超过所述存储阈值的情况下,弹窗提示第一信息;所述第一信息用于指示所述乘员删除以存储的历史档案后创建新的档案。
上述实施例中,在新建控件被触发后,针对存储的档案总数超过存储阈值的情况,弹窗提醒用户删除历史档案后展示档案创建界面。从而通过展示新建页面之前预先判断是否满足新建条件,减少由于系统存储容量不足导致档案建立失败或数据丢失的问题。
在一些实施例中,在所述编辑控件被触发的情况下,所述方法还包括:响应于所述删除控件被触发,弹窗提示第二信息;所述第二信息用于所述乘员确认是否删除所述档案数据;响应于接收到针对所述档案数据的删除操作,删除所述档案数据并返回所述编辑界面;响应于接收到针对所述档案数据的取消删除操作,返回所述第三界面。
上述实施例中,针对编辑页面中删除控件被触发的情况,弹窗提示用户是否确认删除,并基于用户的删除操作或取消删除操作返回相应的界面。从而通过弹窗再次确认的方式减少误删的情况,同时返回上一步骤的界面,为用户提供便利的同时确保程序正常运行。
另一方面,本申请实施例提供一种档案管理装置,所述装置包括:
状态检测模块,用于基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
数据展示模块,用于通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
结果展示模块,用于在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;
档案管理模块,用于响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
再一方面,本申请实施例提供一种车载设备,包括显示设备、存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述程序时结合显示设备实现上述方法中的部分或全部步骤。
又一方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述方法中的部分或全部步骤。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开的技术方案。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本申请的实施例,并与说明书一起用于说明本申请的技术方案。
图1为本申请实施例提供的档案管理方法的可选的流程示意图;
图2为本申请实施例提供的档案管理方法的可选的流程示意图;
图3为本申请实施例提供的档案管理方法的可选的流程示意图;
图4为本申请实施例提供的档案管理方法的可选的流程示意图;
图5为本申请实施例提供的一种档案管理方法的实现流程示意图;
图6为本申请实施例提供的一种档案管理装置的组成结构示意图;
图7为本申请实施例提供的一种车载设备的硬件实体示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面结合附图和实施例对本申请的技术方案进一步详细阐述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
所涉及的术语“第一/第二/第三”仅仅是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一/第二/第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请的目的,不是旨在限制本申请。
在对本申请实施例进行进一步详细说明之前,先对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
本申请实施例提供一种档案管理方法,该方法可以由车载设备或移动终端设备的处理器执行。其中,车载设备可以是车舱内的车机、域控制器或者处理器,还可以是驾驶员监控系统或者乘员监控系统中用于执行图像等数据处理操作的设备主机等,本申请实施例对此不作限定。
图1为本申请实施例提供的一种档案管理方法的实现流程示意图,如图1所示,该方法包括如下步骤S101至步骤S104:
步骤S101,基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
这里,所述乘员对应的多帧实时图像可以为车载摄像头对乘员实时采集的多帧实时图像,还可以为其他设备或服务器实时采集并通过即时通讯的方式向车载设备传输的多帧实时图像,本申请实施例对此不作限定。
对乘员进行生理状态检测,旨在对所述乘员的心率、呼吸状态、血氧饱和度、血压、心率变异性等生理指标项中的一项或多项进行检测,每一指标项对应一个检测数据,从而针对乘员的每一实时图像进行生理状态检测,可以得到各个指标项的一组检测数据。
以检测心率为例,基于乘员的实时图像进行生理状态检测的具体实现方式可以为:通过图像提取人脸平滑区域,根据多帧实时图像中提取出的人脸平滑区域的像素亮度均值构建原始序列信号;使用CHROM等算法对原始序列信号进行处理,获取rPPG(RemotePhotoplethysmograph,远程光电容积脉搏波)信号,之后进行傅里叶变换,提取频域的功率谱来得出心率信号。之后结合乘员的身高、体重、年龄、性别等信息可以得出血压、血氧饱和度等生理状态指标。
相比于相关技术中通过用户佩戴可穿戴设备以对人体生理指标进行检测的方式,本申请实施例将视觉生理状态检测技术应用于车载设备中,基于多帧实时图像对乘员进行生理状态检测,在实施中通过图像处理算法与信号分析算法从多帧实时图像中提取出体温、实时心率等指标项,达到对车舱内的驾驶员或乘员进行生理指标测量的目的。
步骤S102,通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
这里,与显示设备连接的车载控制器,或者远端控制器在执行所述步骤S102时,控制显示设备展示第一界面。其中,显示设备可以为车载设备的中控屏,本申请实施例对此不作限定。
所述第一界面为生理状态检测过程中通过连接的显示设备展示的界面。该显示设备可以例如为车载中控显示屏,或者可以是通过网络连接的移动智能终端。整个检测过程会持续一段时间例如数十秒,针对多帧实时图像中每一实时图像都会检测得到对应的一组实时检测数据,并将各实时图像对应的一组实时检测数据依次展示在第一界面上。这样便于用户及时了解自身健康状况,扩展了车载设备的健康检测功能及实用性。
步骤S103,在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;
这里,所述检测停止条件可以为检测持续的时间达到预设检测时长、实时图像中人物姿态发生变化或人物消失等、以及接收到检测停止请求等任一条件。可以基于实际场景确定检测停止条件,本申请实施例对此不作限定。
所述第二界面可以理解为检测结束后显示的检测报告界面。在第二界面中,可以显示出本次检测得到的各项生理指标的检测结果,所述检测结果为基于所述至少一组实时检测数据确定的,例如根据每一实时图像检测出的实时检测数据如血压测量值,确定最终的检测结果如血压指标是否正常。从而便于用户及时了解自身健康状况,增加了实用性。
步骤S104,响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
这里,通过在第一界面和第二界面中设置档案管理控件,可以基于用户需求在检测过程中或检测结束后,跳转至第三界面对检测结果对应的档案数据进行管理。
所述档案数据为至少基于所述乘员的检测结果生成的。在一些实施方式中,所述档案数据还可以包括所述乘员的人脸头像、用户标识等其他身份信息。从而通过档案数据能够记录用户每一次检测的检测结果,并提供用于管理档案数据的第三界面,方便用户随时查看。
本申请实施例中,基于乘员对应的多帧实时图像进行生理状态检测并通过显示设备的第一界面展示实时检测数据,从而无需借助可穿戴设备即可快速对车载设备中乘员进行检测并实时显示,扩展了车载设备中的健康检测功能;同时基于至少一组检测数据确定检测结果并展示在显示设备的第二界面,从而便于用户及时了解自身健康状况,增加了实用性;还可以基于检测结果形成档案数据,并通过显示设备的第三界面实现对档案数据的管理,进而能够记录用户每一次检测的检测结果,方便用户随时查看检测结果。
在一些实施例中,所述方法还包括:在接收到由用户通过车载中控屏或移动设备上触发的在所述车辆内进行生理状态检测的请求的情况下,获取所述车辆内的乘员对应的多帧实时图像。
这里,用户可以通过语音指令或触发中控屏上的生理状态检测程序的图标以触发生理状态检测的请求。
在实施中,响应于用户的生理状态检测的请求,可以通过车载设备中的摄像头例如车载摄像头实时采集乘员的多帧实时图像,或者可以通过即时通讯的方式载入移动设备实时采集并传输的多帧实时图像,本申请实施例对获取多帧实时图像的方式不作限定。
其中,车载摄像头为智能汽车车舱内的摄像头。所述车载摄像头可以为驾驶员监测系统(Driver Monitor System,DMS)摄像头,或者乘员监控系统(Occupant MonitoringSystem,OMS)摄像头,能够实时对汽车座舱内的驾驶员或乘客进行图像采集以供后续检测分析,保障乘员安全。
上述实施例中,在用户触发对车辆内的乘员进行生理状态检测的请求的情况下,获取相应乘员的多帧实时图像,以响应于用户的实际需求,通过视觉检测方式获得乘员的实时检测数据,无需额外借助可穿戴设备进行检测。
在一些实施例中,在所述步骤S101之前,所述方法还包括:基于至少一帧所述实时图像进行人脸识别,以获取所述乘员的身份信息;从而上述步骤S101“基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测”可以进一步实施为以下步骤111至步骤113:
步骤111,在根据所述乘员的身份信息判定所述乘员为已建档用户的情况下,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
这里,所述身份信息可以为所述乘员的用户标识、人脸特征向量、人脸关键点等信息,从而可以通过身份信息进一步确定乘员身份是否为已建档用户。其中,已建档用户为已经建立过个人档案的用户,理解为老用户。
在所述身份信息为人脸特征向量的情况下,可以通过以下过程确定乘员是否为已建档用户:对所述乘员对应的实时图像进行人脸识别,得到所述乘员的人脸特征向量;基于所述乘员的人脸特征向量与存储的预设人脸特征向量,确定所述乘员是否为所述已建档用户。
这样,基于身份信息判定为已建档用户的情况下对乘员进行生理状态检测,从而确保乘员存在个人档案的情况下再进行生理状态检测,以保存检测得到的检测结果。
步骤112,在根据所述乘员的身份信息判定所述乘员为未建档用户的情况下,提示所述乘员创建档案并通过所述显示设备展示档案创建界面;
这里,基于身份信息判定为未建档用户的情况下,通过显示设备展示的档案创建界面获取乘员的个人信息、人脸图像等以完成对乘员的建档。其中,未建档用户理解为新用户。
所述新建档案界面至少包括用户个人信息录入项和人脸图像录入项。其中用户个人信息录入项可以包括姓名、性别、年龄、身高、体重等个人信息输入栏,以供用户填写,其中人脸图像录入项可以为头像录入控件,以指引用户录入自己的人脸头像。本申请实施例对新建档案界面的布局设置不作限定。
在其他一些实施方式中,在乘员为未建档用户的情况下,还可以预先弹窗提示用户当下是否进行档案的建立,在乘员点击确认建档的情况下展示档案创建界面,否则指引乘员重新进行扫描抓拍以再次验证身份。
步骤113,在所述乘员的档案创建完成之后,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
这里,乘员在档案创建界面将个人信息以及人脸图像输入完成后可以点击档案保存控件,以完成建档过程,从而可以开始对乘员进行生理状态检测。
在上述实施例中,在对车辆内的乘员进行生理状态检测之前,首先基于身份信息判定乘员是否为已建档用户。在判定结果为已建档用户的情况下直接对乘员进行生理状态检测;在判定结果为未建档用户的情况下,展示档案创建界面以获取用户的个人信息等完成建档,再基于乘员对应的多帧实时图像进行生理状态检测。从而,确保乘员存在个人档案的情况下再进行生理状态检测,以保存检测得到的检测结果;同时结合身份信息形成个人档案,便于后续管理档案。
在一些实施例中,上述步骤S01可以进一步实施为:在对所述乘员的生理状态检测的持续时长未达到第一预设时长、且采集的所述实时图像的帧数达到第一帧数或者所述实时图像的采集时长达到第二预设时长的情况下,根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到实时检测数据。
这里,所述第一预设时长为整个生理状态检测过程的持续时长上限,一般为20秒至30秒;所述第一帧数和第二预设时长为经验值,针对某一生理指标项例如心率值,需要采集的图像达到一定帧数例如100帧,或者实时图像的采集时长达到一定时长例如3秒才能输出该指标项的首个检测数据。
在生理状态的检测持续时长、实时图像的采集帧数以及采集时长等满足相应条件的情况下,持续对乘员进行生理状态检测,从而实现在检测过程中获得多次检测的实时检测数据,便于后续确定出更准确的检测结果。
本申请实施例提供一种档案管理方法,该方法可以由车载设备的处理器执行。如图2所示,该方法包括如下步骤S201至步骤S204:
步骤S201,在第一预设时长内,采用滑窗方式,依次确定多个滑动窗口对应的所述乘员的多组所述实时检测数据;
这里,每个所述滑动窗口内包括多帧所述实时图像,所述滑动窗口的移动步长不大于所述滑动窗口内的图像帧数。例如滑动窗口内包括8帧实时图像,则滑动窗口的移动步长不能超过8。
步骤S202,按照各所述滑动窗口内的多帧图像的采集时序,通过连接的显示设备的第一界面依次展示所述各组所述实时检测数据;
这里,采集时序理解为采集每一帧图像的时间戳顺序,即按照多帧实时图像的时间戳顺序逐帧将检测得到的一组检测数据通过第一界面展示出来。
其中,依次展示各组实时检测数据的方式可以示例性地理解为在第一时刻显示第一帧图像的一组检测数据D1={d11,d12,d13},在下一时刻显示第二帧图像的一组检测数据D2={d21,d22,d23}。
这样,通过滑窗的方式更新显示设备的第一界面上展示的实时检测数据,实现在检测过程中动态展示多次检测的测量数据,便于用户了解检测过程数据并及时发现异常。
步骤S203,基于多组所述实时检测数据绘制所述检测数据的动态变化图形,并通过所述第一界面同步展示所述动态变化图形与所述实时检测数据;
这里,动态变化图形为同一指标项在多帧实时图像中的检测数据随时间的变化曲线。
这样,通过多组实时检测数据实时模拟多帧实时图像得到的检测数据的动态变化图形,并同步展示在显示设备的第一界面,便于用户了解相应生理指标的实时变化,增加实用性。
步骤S204,在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;
这里,所述检测结果为基于所述实时检测数据确定的。
步骤S205,响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
这里,上述步骤S204至步骤S205分别对应于前述步骤S103至步骤S104,在实施时可以参照前述步骤S103至步骤S104的具体实施方式。
本申请实施例中,通过滑窗的方式更新显示设备的第一界面上展示的实时检测数据,实现在检测过程中动态展示多次检测的测量数据,便于用户了解检测过程数据并及时发现异常。同时通过多组实时检测数据实时模拟多帧实时图像得到的检测数据的动态变化图形,并同步展示在显示设备的第一界面,便于用户了解相应生理指标的实时变化,增加实用性。
在一些实施例中,在通过对所述乘员的实时图像进行人脸识别读取到所述乘员的头像信息或身份标识的情况下,通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据。
这里,所述乘员的身份标识信息可以通过对乘员的实时图像进行人脸识别得到,也可以通过新建档案页面中乘员输入的信息得到。
这样,在通过人脸识别获取到乘员的头像或身份标识信息的情况下,在第一界面展示实时检测数据的过程中同步显示该乘员的头像或身份标识信息,以告知用户当前检测的对象是谁,从而减少由于实时图像中存在多个对象而导致误检。
在一些实施例中,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,包括:通过所述第一界面中绘制的第一窗口展示所述乘员的头像的图标或所述乘员的身份标识信息的图标;以及通过所述第一界面中绘制的第二窗口展示所述实时检测数据;响应于所述第一窗口中展示的所述乘员的头像的图标或所述乘员的身份标识信息的图标被点击的情况下,确定接收到针对所述第一界面中的档案管理控件的触发操作。
这样,通过第一界面中的第一窗口展示乘员的头像的图标或乘员的身份标识信息的图标,通过第一界面中的第二窗口展示实时检测数据,实现同步展示,同时通过点击头像图标或身份标识信息的图标可以触发档案管理控件,提供第一界面到第三界面的跳转链接,增加便利性。
在一些实施例中,在基于多组所述实时检测数据绘制所述检测数据的动态变化图形的情况下,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,还包括:通过所述第一界面中绘制的第三窗口展示所述实时动态变化图形。
这样,通过第三界面中的第三窗口展示实时动态变化图形,便于用户实时了解检测数据的动态变化,从而增加第一界面的可视效果。
在一些实施例中,所述乘员的检测结果包括至少一个指标项的检测子结果。本申请实施例提供一种档案管理方法,该方法可以由车载设备的处理器执行。如图3所示,该方法包括如下步骤S301至步骤S304:
步骤S301,基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
步骤S302,通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
这里,上述步骤S301至步骤S302分别对应于前述步骤S101至S102,在实施时可以参照前述步骤S101至步骤S302的具体实施方式。
步骤S303,在所述生理状态检测满足检测停止条件的情况下,按照预设的控件排布方式,通过所述第二界面展示每一所述指标项的检测子结果和详情查看控件;
在实施中,可以通过对同一指标项的至少一组检测数据进行分析处理,得到该指标项的检测子结果。示例性地,根据每一实时图像检测出的检测数据如血压测量值确定最终的检测子结果即血压指标是否正常。
这里,所述预设的控件排布方式可以为按照指标项的类别分布各个指标项的控件位置,其中所述至少一个指标项的类别可以为各个指标项所属的科室类别,例如呼吸状态、呼吸频率等属于呼吸内科的指标项,心率、心率变异性等属于神经内科的指标项,从而按照科室类别分布,在第二界面上展示各个指标项的检测子结果。
所述第二界面用于展示检测结束之后得到的指标检测报告,在第二界面中可以显示本次检测得到的每一生理指标项的检测子结果、检测时间以及乘员的身份标识等信息。
在所述第二界面,用户可以进一步点击针对每一指标项的详情查看控件,各所述详情查看控件用于按照预设时间单位展示相应所述指标项的历史检测数据;所述预设时间单位包括以下之一:年、月、周、日。从而方便用户根据需要选择查看特定时间段内某一指标项的历史检测数据。
在一些实施方式中,所述第二界面还包括重新测量控件,所述方法还包括:响应于接收到针对所述重新测量控件的触发操作,执行所述对乘员对应的多帧实时图像进行生理状态检测,并通过第一界面展示得到的至少一组检测数据的步骤。从而通过第二界面的重新测量控件,可以重新开始检测过程,这样可以提高生理指标的检测准确率,同时为用户提供便利。
步骤S304,响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过第三界面管理所述检测结果对应的档案数据。
这里,上述步骤S304分别对应于前述步骤S104,在实施时可以参照前述步骤S104的具体实施方式。
本申请实施例中,在生理状态检测满足检测停止条件即检测结束后,按照预设的控件排布方式同时展示多个指标项的检测子结果以及详情查看控件。从而实现在检测结束后展示乘员在本次检测中的整体检测报告,便于后续存档和查看,同时可以按照年、月、周、日等周期查看每一指标项的历史检测数据。
在一些实施例中,所述档案数据至少包括用户头像图标、个人信息和历史生理状态检测结果,所述第三界面包括新建控件、用户头像图标和编辑控件中至少一个。本申请实施例提供一种档案管理方法,该方法可以由车载设备的处理器执行。如图4所示,该方法包括如下步骤S401至步骤S404:
步骤S401,基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
步骤S402,通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
步骤S403,在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;
这里,所述检测结果为基于所述实时检测数据确定的。
上述步骤S401至步骤S403分别对应于前述步骤S101至步骤S103,在实施时可以参照前述步骤S101至步骤S103的具体实施方式。
步骤S404,响应于所述第三界面中的编辑控件被触发,控制所述显示设备展示编辑界面;
这里,所述编辑界面包括用户的个人信息项、头像、以及用于删除所述档案数据的删除控件。在一些实施方式中,可以在编辑界面重新录入乘员的人脸头像或者更改身高、体重等个人信息;在另一些实施方式中,还可以点击编辑界面的删除控件直接删除整个档案数据,整个档案数据包括用户头像图标、个人信息和历次检测的检测数据及检测结果等。
步骤S405,响应于所述第三界面中的用户头像图标被触发,控制所述显示设备跳转至所述第二界面,以展示所述乘员的最近一次的历史生理状态检测结果;
这里,在程序中将用户头像图标与乘员对应的历史生理状态检测结果关联,从而用户在点击用户头像图标的情况下可以直接链接到乘员对应的历史生理状态检测结果并展示在第二界面。
在第二界面可以直观看到最近一次的检测结果,并通过详情查看控件进一步查看相应指标项的历史检测数据。
步骤S406,响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面。
这里,所述档案创建界面用于提示用户填写个人信息和录入人脸图像。
本申请实施例中,通过触发第三界面设置的新建控件来展示档案创建界面,实现通过档案创建界面上获取信息以建立档案的功能;通过触发第三界面设置的用户头像图标跳转至第二界面以展示相应用户的检测结果,实现查看检测结果的功能;通过触发第三界面设置的编辑控件,实现用户自主编辑个人信息或删除档案数据的功能。从而丰富了第三界面的管理功能,能够有效覆盖车载设备中健康检测及档案管理场景。
在一些实施例中,上述步骤S406,包括以下步骤461至463:
步骤461,响应于所述新建控件被触发,判定存储的档案总数是否超过存储阈值;
这里,所述存储的档案总数为系统中存储的累积档案数量,存储阈值为预先根据系统存储容量或算力设定的最多档案件数。
步骤462,在所述档案总数未超过所述存储阈值的情况下,控制所述显示设备展示所述档案创建界面;
这里,在判定有足够存储空间建立的档案的情况下控制所述显示设备展示档案创建界面,以完成新建一个档案的任务。
步骤463,在所述档案总数超过所述存储阈值的情况下,弹窗提示第一信息;所述第一信息用于指示所述乘员删除已存储的历史档案后创建新的档案。
这里,假定存储阈值即存储的最多档案件数为10,且当前待建立的档案为第11件的情况下,需要删除已存储的历史档案后再展示档案创建界面,以创建新的档案。
这样,在新建控件被触发后,针对存储的档案总数超过存储阈值的情况,弹窗提醒用户删除历史档案后展示档案创建界面。从而通过展示新建页面之前预先判断是否满足新建条件,减少由于系统存储容量不足导致档案建立失败或数据丢失的问题。
在一些实施例中,在所述编辑控件被触发的情况下,在所述步骤S404之后,所述方法还包括以下步骤:
步骤441,响应于所述删除控件被触发,弹窗提示第二信息;
这里,所述第二信息用于所述乘员确认是否删除所述档案数据。例如在弹窗上显示“是否确认删除档案数据”的第二信息,并提供“是”和“否”控件供用户选择。
步骤442,响应于接收到针对所述档案数据的删除操作,删除所述档案数据并返回所述编辑界面;
这里,乘员确认删除的情况下,删除乘员对应的档案数据,返回到上一级的编辑界面,可以继续接收其他编辑操作。
步骤443,响应于接收到针对所述档案数据的取消删除操作,返回所述第三界面。
这里,乘员取消删除的情况下,退出当前的编辑界面并返回到第三界面,以通过第三界面对档案数据进行其他管理操作。
这样,针对编辑页面中删除控件被触发的情况,弹窗确认用户是否删除,并基于用户的删除操作或取消删除操作返回相应的界面。从而通过弹窗再次确认的方式减少误删的情况,同时返回上一步骤的界面,为用户提供便利的同时确保程序正常运行。
下面说明本申请实施例提供的档案管理方法在实际场景中的应用。
相关技术中驾驶员或者乘员如果想了解实时的健康状态,需要额外借助可穿戴设备进行检测,如果驾驶员或者乘员未购买和佩戴类似设备,则无法了解实时健康状态。目前的智能车舱是不包含生理状态检测的功能的,确实这一项功能对于车辆而言,很难对驾驶员或者乘员的生理状况做出准确的判断。如果驾驶员或者乘员突然出现健康问题,车辆无法感知到,用户也无法自测,则容易出现事故。
本申请实施例依靠车舱内摄像头,使用视觉健康检测技术实现对车内的驾驶员或乘员的生理状态检测,并结合人脸识别结果形成个人档案,便于记录下历次检测记录。
本申请实施例提供一种档案管理方法,如图5所示,该方法包括如下步骤S501至步骤S505:
步骤S501,启动检测应用程序;
这里,用户点击中控屏上检测应用程序的图标或通过语音指令唤醒,启动检测应用程序。
步骤S502,对乘员进行人脸识别;
这里,在识别结果表明乘员为新用户的情况下,执行步骤S503;在识别结果表明乘员为老用户的情况下,直接执行步骤S505。
步骤S503,进入新建档案界面;
这里,如果识别到乘员为新用户即还未建立过健康档案,则进入新建档案界面(相当于档案创建界面)。
在新建档案界面提供“用户标识”、“年龄”、“身高”“性别”“体重”等填写栏,供用户输入自己的个人基础信息;同时,还可以录入用户的人脸图像,完善用户信息。最后,响应于用户点击“确认”控件即可完成该乘员的健康档案的建立过程,跳转到健康检测界面,开始对乘员的健康检测。
步骤S505,进入健康检测界面;
这里,通过车舱摄像头获取的画面对乘员进行生理状态检测,整个过程持续20至30秒。在检测期间,中控屏上进入健康检测界面(相当于第一界面),可以根据某指标项的检测数据如心率值,实时模拟心率曲线并显示,健康检测界面中同时显示用户的身份信息(如用户头像图标、用户账号等)。
本申请实施例在检测过程中,根据得到的检测数据同时显示心率曲线和心率值,以及用户头像图标和身份标识等信息,提高了检测应用程序的实用性。
步骤S506,检测结束后进入检测报告界面;
这里,在健康检测结束后进入检测报告界面(相当于第二界面),在该界面内显示指标检测报告,包括本次健康检测出的乘员的心率、呼吸状态、呼吸频率、血氧饱和度、血压、心率变异性等指标项的检测结果。
需要说明的是,在检测报告界面还可以点击“重新测量”按钮,跳转至步骤S502,重新识别。
步骤S507,响应于检测报告界面的详情查看控件被触发,弹出历史记录界面;
这里,在检测报告界面,乘员还可以进一步点击各指标项对应的“详情查看”控件,弹出历史记录界面。在历史记录界面可以查看相应指标项的历史检测数据,同时可选择以年、月、周或日为单位对历史检测数据进行查看。
步骤S508,响应于健康检测界面或检测报告界面的档案管理控件被触发,展示档案管理界面。
这里,在上述步骤S505和S506的过程中,用户可以直接点击健康检测界面或检测报告界面的“档案管理”按钮,进入档案管理界面(相当于第三界面)。在档案管理界面可以对用户的健康档案进行查看、编辑或删除,还可以查看各指标项的历史检测数据。
步骤S509,响应于档案管理界面的新建档案控件被触发,判断档案总数是是否大于10;
在档案管理界面,用户点击“新建档案”控件,先判断档案总数是否超过10件(相当于存储阈值),超过10件的情况下,执行步骤S510;不超过10件的情况下进入新建档案界面,执行步骤S503。
步骤S510,弹窗提醒“先删除不需要的档案”;
这里,通过弹窗提醒用户删除不需要的档案即历史档案。
步骤S511,响应于档案管理界面的编辑控件被触发,跳转至编辑界面;
在档案管理界面,用户点击针对当前个人档案的“编辑”控件,进入编辑档案界面,对个人档案进行编辑。
步骤S512,响应于编辑界面的删除控件被触发,弹窗提醒“是否删除”;
这里,在编辑界面,进一步点击“删除”控件,弹窗提醒用户是否删除,在用户确认删除的情况下,删除当前健康档案,并返回到档案管理界面;在用户否认删除的情况下,返回至编辑界面。
步骤S513,响应于档案管理界面的头像被点击,跳转至检测报告界面;
这里,在档案管理界面,用户点击头像,通过检测报告界面展示最近一次的指标检测报告。
步骤S514,响应于检测报告界面的详情查看控件被触发,弹出历史记录界面。
这里,在检测报告界面继续点击详情查看控件,弹出历史记录界面;在历史记录界面,点击空白位置,返回最近一次的指标检测报告。
本申请实施例结合用户的指标检测结果和人脸识别结果生成个人档案,并将每次检测的结果记录在用户自己的个人档案内,并可选择时间段查看历史检测数据。
本申请实施例以应用程序的形式把视觉健康检测方案应用在车载设备上,可有效覆盖车舱内的健康检测场景,让用户在车内就可以查看各项生理指标,了解实时的健康状态,无须购买和佩戴额外的设备。在检测过程中可以看到实时的心率曲线和心率值,增加实用性。
由于用户是结合人脸识别建立的健康档案,同时记录了每次指标检测的检测结果,在用户想查看自身各项指标的长期变化时,可以自主启动检测应用程序,进入档案管理界面点击头像查看历史检测数据,了解各指标长期变化。
在其他实施例中,用户驾驶车辆在道路上,可以语音控制,打开检测应用程序开始一次生理状态检测;或者用户在等待红绿灯、停车和驻车等静止的场景下时可以手动启动检测应用程序开始一次生理状态检测,在20至30秒后就可以查看到各项指标的检测结果,如果哪项指标有问题,检测应用程序也会给予相应的健康建议和提醒。
基于前述的实施例,本申请实施例提供一种档案管理装置,该装置包括所包括的各单元、以及各单元所包括的各模块,可以通过车载设备中的处理器来实现;当然也可通过具体的逻辑电路实现;在实施的过程中,处理器可以为中央处理器(Central ProcessingUnit,CPU)、微处理器(Microprocessor Unit,MPU)、数字信号处理器(Digital SignalProcessor,DSP)或现场可编程门阵列(Field Programmable Gate Array,FPGA)等。
图6为本申请实施例提供的一种档案管理装置的组成结构示意图,如图6所示,装置600包括:状态检测模块610、数据展示模块620、结果展示模块630和档案管理模块640,其中:
状态检测模块610,用于基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
数据展示模块620,通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
结果展示模块630,用于在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;
档案管理模块640,用于响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
在一些可能的实施例中,所述装置600还包括获取模块,用于在接收到由用户通过车载中控屏或移动设备上触发的在所述车辆内进行生理状态检测的请求的情况下,获取所述车辆内的乘员对应的多帧实时图像。
在一些可能的实施例中,在所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测之前,所述装置还包括人脸识别模块,用于基于至少一帧所述实时图像进行人脸识别,以获取所述乘员的身份信息;所述状态检测模块610还用于在根据所述乘员的身份信息判定所述乘员为已建档用户的情况下,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
在一些可能的实施例中,所述状态检测模块610还用于在根据所述乘员的身份信息判定所述乘员为未建档用户的情况下,提示所述乘员创建档案并通过所述显示设备展示档案创建界面;所述新建档案界面至少包括用户个人信息录入项和人脸图像录入项;在所述乘员的档案创建完成之后,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
在一些可能的实施例中,所述状态检测模块610还用于在对所述乘员的生理状态检测的持续时长未达到第一预设时长、且采集的所述实时图像的帧数达到第一帧数或者所述实时图像的采集时长达到第二预设时长的情况下,根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到所述实时检测数据。
在一些可能的实施例中,所述状态检测模块610还用于在所述第一预设时长内,采用滑窗方式,依次确定多个滑动窗口对应的所述乘员的多组所述实时检测数据,其中,每个滑动窗口内包括多帧所述实时图像,所述滑动窗口的移动步长不大于所述滑动窗口内的图像帧数;所述数据展示模块620还用于按照所述各所述滑动窗口内的多帧图像的采集时序,通过连接的显示设备的第一界面依次展示所述各组所述实时检测数据。
在一些可能的实施例中,所述装置还包括图像绘制模块,用于基于多组所述实时检测数据绘制所述检测数据的动态变化图形,并通过所述第一界面同步展示所述动态变化图形与所述实时检测数据。
在一些可能的实施例中,所述装置还包括信息展示模块,用于在通过对所述乘员的实时图像进行人脸识别读取到所述乘员的头像信息或身份标识的情况下,通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据。
在一些可能的实施例中,所述信息展示模块包括第一展示子模块、第二展示子模块和确定子模块,其中:所述第一展示子模块,用于通过所述第一界面中绘制的第一窗口展示所述乘员的头像的图标或所述乘员的身份标识信息的图标;所述第二展示子模块,用于通过所述第一界面中绘制的第二窗口展示所述实时检测数据;所述确定子模块,用于响应于所述第一窗口中展示的所述乘员的头像的图标或所述乘员的身份标识信息的图标被点击的情况下,确定接收到针对所述第一界面中的档案管理控件的触发操作。
在一些可能的实施例中,所述信息展示模块还包括第三展示子模块,用于在基于多组所述实时检测数据绘制所述检测数据的动态变化图形的情况下,通过所述第一界面中绘制的第三窗口展示所述实时动态变化图形。
在一些可能的实施例中,所述乘员的检测结果包括至少一个指标项的检测子结果,所述结果展示模块630还用于在所述生理状态检测满足检测停止条件的情况下,按照预设的控件排布方式,通过所述第二界面展示每一所述指标项的检测子结果和详情查看控件;所述详情查看控件被触发按照预设时间单位展示相应所述指标项的历史检测数据;所述预设时间单位包括以下之一:年、月、周、日。
在一些可能的实施例中,所述档案数据至少包括用户头像图标、个人信息和历史生理状态检测结果,所述第三界面包括新建控件、用户头像图标和编辑控件中至少一个,所述档案管理模块640包括第三展示子模块、跳转模块或第四展示子模块,其中:所述第三展示子模块,用于响应于所述第三界面中的编辑控件被触发,控制所述显示设备展示编辑界面;所述编辑界面包括用户的个人信息项、头像、以及用于删除所述档案数据的删除控件;所述跳转模块,用于响应于所述第三界面中的用户头像图标被触发,控制所述显示设备跳转至所述第二界面,以展示所述乘员的最近一次的历史生理状态检测结果;所述第四展示子模块,用于响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面。
在一些可能的实施例中,所述第四展示子模块包括判定单元、第一展示单元和第一弹窗单元,其中:所述判定单元,用于响应于所述新建控件被触发,判定存储的档案总数是否超过存储阈值;所述第一展示单元,用于在所述档案总数未超过所述存储阈值的情况下,控制所述显示设备展示所述档案创建界面;所述第一弹窗单元,用于在所述档案总数超过所述存储阈值的情况下,弹窗提示第一信息;所述第一信息用于指示所述乘员删除已存储的历史档案后创建新的档案。
在一些可能的实施例中,在所述编辑控件被触发的情况下,所述第三展示子模块还包括第二弹窗单元、第一返回单元和第二返回单元,其中:所述第二弹窗单元,用于响应于所述删除控件被触发,弹窗提示第二信息;所述第二信息用于所述乘员确认是否删除所述档案数据;所述第一返回单元,用于响应于接收到针对所述档案数据的删除操作,删除所述档案数据并返回所述编辑界面;所述第二返回单元,用于响应于接收到针对所述档案数据的取消删除操作,返回所述第三界面。
以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。在一些实施例中,本公开实施例提供的装置具有的功能或包含的模块可以用于执行上述方法实施例描述的方法,对于本申请装置实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
若本申请技术方案涉及个人信息,应用本申请技术方案的产品在处理个人信息前,已明确告知个人信息处理规则,并取得个人自主同意。若本申请技术方案涉及敏感个人信息,应用本申请技术方案的产品在处理敏感个人信息前,已取得个人单独同意,并且同时满足“明示同意”的要求。例如,在摄像头等个人信息采集装置处,设置明确显著的标识告知已进入个人信息采集范围,将会对个人信息进行采集,若个人自愿进入采集范围即视为同意对其个人信息进行采集;或者在个人信息处理的装置上,利用明显的标识/信息告知个人信息处理规则的情况下,通过弹窗信息或请个人自行上传其个人信息等方式获得个人授权;其中,个人信息处理规则可包括个人信息处理者、个人信息处理目的、处理方式、处理的个人信息种类等信息。
需要说明的是,本申请实施例中,如果以软件功能模块的形式实现上述的档案管理方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一台车载设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本申请实施例不限制于任何特定的硬件、软件或固件,或者硬件、软件、固件三者之间的任意结合。
本申请实施例提供一种车载设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方法中的部分或全部步骤。
本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述方法中的部分或全部步骤。所述计算机可读存储介质可以是瞬时性的,也可以是非瞬时性的。
本申请实施例提供一种计算机程序,包括计算机可读代码,在所述计算机可读代码在车载设备中运行的情况下,所述车载设备中的处理器执行用于实现上述方法中的部分或全部步骤。
本申请实施例提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序被计算机读取并执行时,实现上述方法中的部分或全部步骤。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一些实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一些实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
这里需要指出的是:上文对各个实施例的描述倾向于强调各个实施例之间的不同之处,其相同或相似之处可以互相参考。以上设备、存储介质、计算机程序及计算机程序产品实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请设备、存储介质、计算机程序及计算机程序产品实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
需要说明的是,图7为本申请实施例中车载设备的一种硬件实体示意图,如图7所示,该车载设备700的硬件实体包括:处理器701、显示设备702和存储器703,其中:
显示设备702、存储器703和处理器701通过总线704连接;存储器703,用于存储可执行计算机程序;处理器701,用于执行存储器703中存储的可执行计算机程序时,结合显示设备702,实现本申请任一上述实施例提供的档案管理方法。其中,显示设备可以为车载中控屏。
存储器703配置为存储由处理器701可执行的指令和应用,还可以缓存待处理器701以及车载设备700中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random AccessMemory,RAM)实现。处理器701、显示设备702和存储器703之间可以通过总线704进行数据传输。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本申请的各种实施例中,上述各步骤/过程的序号的大小并不意味着执行顺序的先后,各步骤/过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本申请各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台车载设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。

Claims (17)

1.一种档案管理方法,其特征在于,所述方法包括:
基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;
响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:在接收到由用户通过车载中控屏或移动设备上触发的在所述车辆内进行生理状态检测的请求的情况下,获取所述车辆内的乘员对应的多帧实时图像。
3.根据权利要求1或2所述的方法,其特征在于,在所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测之前,所述方法还包括:
基于至少一帧所述实时图像进行人脸识别,以获取所述乘员的身份信息;
所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测,包括:
在根据所述乘员的身份信息判定所述乘员为已建档用户的情况下,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
4.根据权利要求3所述的方法,其特征在于,所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测,还包括:
在根据所述乘员的身份信息判定所述乘员为未建档用户的情况下,提示所述乘员创建档案并通过所述显示设备展示档案创建界面;所述新建档案界面至少包括用户个人信息录入项和人脸图像录入项;
在所述乘员的档案创建完成之后,基于所述乘员对应的多帧实时图像对所述乘员进行生理状态检测。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测,包括:
在对所述乘员的生理状态检测的持续时长未达到第一预设时长、且采集的所述实时图像的帧数达到第一帧数或者所述实时图像的采集时长达到第二预设时长的情况下,根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到所述实时检测数据。
6.根据权利要求5所述的方法,其特征在于,所述根据所采集的多帧实时图像对所述乘员进行生理状态检测,得到所述实时检测数据,包括:
在所述第一预设时长内,采用滑窗方式,依次确定多个滑动窗口对应的所述乘员的多组所述实时检测数据;其中,每个所述滑动窗口内包括多帧所述实时图像,所述滑动窗口的移动步长不大于所述滑动窗口内的图像帧数;
所述通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据,包括:
按照各所述滑动窗口内的多帧图像的采集时序,通过连接的显示设备的第一界面依次展示所述各组所述实时检测数据。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
基于多组所述实时检测数据绘制所述检测数据的动态变化图形,并通过所述第一界面同步展示所述动态变化图形与所述实时检测数据。
8.根据权利要求6或7所述的方法,其特征在于,所述方法还包括:
在通过对所述乘员的实时图像进行人脸识别读取到所述乘员的头像信息或身份标识的情况下,通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据。
9.根据权利要求8所述的方法,其特征在于,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,包括:
通过所述第一界面中绘制的第一窗口展示所述乘员的头像的图标或所述乘员的身份标识信息的图标;以及
通过所述第一界面中绘制的第二窗口展示所述实时检测数据;
响应于所述第一窗口中展示的所述乘员的头像的图标或所述乘员的身份标识信息的图标被点击的情况下,确定接收到针对所述第一界面中的档案管理控件的触发操作。
10.根据权利要求9所述的方法,其特征在于,在基于多组所述实时检测数据绘制所述检测数据的动态变化图形的情况下,所述通过所述第一界面同步展示所述乘员的头像或身份标识信息与所述实时检测数据,还包括:
通过所述第一界面中绘制的第三窗口展示所述实时动态变化图形。
11.根据权利要求1至10任一项所述的方法,其特征在于,所述乘员的检测结果包括至少一个指标项的检测子结果,所述在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果,包括:
在所述生理状态检测满足检测停止条件的情况下,按照预设的控件排布方式,通过所述第二界面展示每一所述指标项的检测子结果和详情查看控件;所述详情查看控件被触发时按照预设时间单位展示相应所述指标项的历史检测数据;所述预设时间单位包括以下之一:年、月、周、日。
12.根据权利要求1至9任一项所述的方法,其特征在于,所述档案数据至少包括用户头像图标、个人信息和历史生理状态检测结果,所述第三界面包括新建控件、用户头像图标和编辑控件中至少一个,所述通过第三界面管理所述检测结果对应的档案数据,包括:
响应于所述第三界面中的编辑控件被触发,控制所述显示设备展示编辑界面;所述编辑界面包括用户的个人信息项、头像、以及用于删除所述档案数据的删除控件;
响应于所述第三界面中的用户头像图标被触发,控制所述显示设备跳转至所述第二界面,以展示所述乘员的最近一次的历史生理状态检测结果;
响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面。
13.根据权利要求12所述的方法,其特征在于,所述响应于所述第三界面中的新建控件被触发,控制所述显示设备展示档案创建界面,包括:
响应于所述新建控件被触发,判定存储的档案总数是否超过存储阈值;
在所述档案总数未超过所述存储阈值的情况下,控制所述显示设备展示所述档案创建界面;
在所述档案总数超过所述存储阈值的情况下,弹窗提示第一信息;所述第一信息用于指示所述乘员删除已存储的历史档案后创建新的档案。
14.根据权利要求12或13所述的方法,其特征在于,在所述编辑控件被触发的情况下,所述方法还包括:
响应于所述删除控件被触发,弹窗提示第二信息;所述第二信息用于所述乘员确认是否删除所述档案数据;
响应于接收到针对所述档案数据的删除操作,删除所述档案数据并返回所述编辑界面;
响应于接收到针对所述档案数据的取消删除操作,返回所述第三界面。
15.一种档案管理装置,其特征在于,所述装置包括:
状态检测模块,用于基于车辆内的乘员对应的多帧实时图像对所述乘员进行生理状态检测;
数据展示模块,用于通过连接的显示设备的第一界面展示所述生理状态检测得到的实时检测数据;
结果展示模块,用于在所述生理状态检测满足检测停止条件的情况下,通过所述显示设备的第二界面展示所述乘员的检测结果;所述检测结果为基于所述实时检测数据确定的;
档案管理模块,用于响应于接收到针对所述第一界面或所述第二界面中的档案管理控件的触发操作,通过所述显示设备的第三界面管理所述检测结果对应的档案数据。
16.一种车载设备,包括:
显示设备;存储器,用于存储可执行计算机程序;
处理器,用于执行所述存储器中存储的可执行计算机程序时,结合所述显示设备实现权利要求1至14任一项所述的方法。
17.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至14任一项所述方法中的步骤。
CN202210615018.7A 2022-05-31 2022-05-31 档案管理方法、装置、设备、存储介质及程序产品 Pending CN115061977A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210615018.7A CN115061977A (zh) 2022-05-31 2022-05-31 档案管理方法、装置、设备、存储介质及程序产品
PCT/CN2023/090830 WO2023231654A1 (zh) 2022-05-31 2023-04-26 档案管理方法、装置、设备、存储介质及程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210615018.7A CN115061977A (zh) 2022-05-31 2022-05-31 档案管理方法、装置、设备、存储介质及程序产品

Publications (1)

Publication Number Publication Date
CN115061977A true CN115061977A (zh) 2022-09-16

Family

ID=83197982

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210615018.7A Pending CN115061977A (zh) 2022-05-31 2022-05-31 档案管理方法、装置、设备、存储介质及程序产品

Country Status (2)

Country Link
CN (1) CN115061977A (zh)
WO (1) WO2023231654A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023231654A1 (zh) * 2022-05-31 2023-12-07 上海商汤智能科技有限公司 档案管理方法、装置、设备、存储介质及程序产品

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100268051A1 (en) * 2009-04-16 2010-10-21 Ford Global Technologies, Llc System and method for wellness monitoring in a vehicle
US10173687B2 (en) * 2015-03-16 2019-01-08 Wellen Sham Method for recognizing vehicle driver and determining whether driver can start vehicle
CN108304830B (zh) * 2018-03-09 2020-10-23 西安艾润物联网技术服务有限责任公司 车辆内人员身份在线监测方法、装置和存储介质
CN108236471A (zh) * 2018-04-16 2018-07-03 长春工业大学 一种基于图像信息处理的驾驶员疲劳状态在线检测装置
CN114903431A (zh) * 2021-02-10 2022-08-16 海信视像科技股份有限公司 电子设备以及健康检测方法
CN114140775A (zh) * 2021-11-30 2022-03-04 上海商汤临港智能科技有限公司 数据记录及生理状态检测方法、装置、设备及存储介质
CN115061977A (zh) * 2022-05-31 2022-09-16 上海商汤临港智能科技有限公司 档案管理方法、装置、设备、存储介质及程序产品

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023231654A1 (zh) * 2022-05-31 2023-12-07 上海商汤智能科技有限公司 档案管理方法、装置、设备、存储介质及程序产品

Also Published As

Publication number Publication date
WO2023231654A1 (zh) 2023-12-07

Similar Documents

Publication Publication Date Title
US10380603B2 (en) Assessing personality and mood characteristics of a customer to enhance customer satisfaction and improve chances of a sale
JP5500303B1 (ja) 監視システム、監視方法、監視プログラム、ならびに該プログラムを記録した記録媒体
WO2018168095A1 (ja) 人物動向記録装置、人物動向記録方法、及びプログラム
US11615476B2 (en) Information processing device and method
CN111563396A (zh) 在线识别异常行为的方法、装置、电子设备及可读存储介质
CN110942055A (zh) 展示区域的状态识别方法、装置、设备及存储介质
CN108431876A (zh) 入侵检测设备、设置辅助设备、入侵检测方法、设置辅助方法和程序记录介质
US20190230292A1 (en) Photographing control apparatus and photographing control method
CN104423574B (zh) 用于增强系统可用性的设备和方法
JP6946551B2 (ja) 映像アライメント方法及びその装置
CN115061977A (zh) 档案管理方法、装置、设备、存储介质及程序产品
CN110709857B (zh) 人物计数设备、人物计数方法以及存储介质
US10891003B2 (en) System, method, and apparatus for an interactive container
CN113591663A (zh) 一种展会数据可视化的信息分析系统及分析方法
JP2022042304A (ja) ストレス推定装置、方法およびプログラム
JP6597838B1 (ja) 動線分析装置、動線分析方法、および動線分析システム
US9538146B2 (en) Apparatus and method for automatically detecting an event in sensor data
CN114882999A (zh) 生理状态检测方法、装置、设备及存储介质
CN114519900A (zh) 乘车方法、装置、电子设备及存储介质
CN108234629A (zh) 一种处理用户请求的方法及装置
CN110942591B (zh) 驾驶安全提醒系统以及方法
US20230410506A1 (en) Analysis apparatus, system, method, and non-transitory computer readable medium storing program
CN110084995A (zh) 辐射提示方法、装置、电子设备和存储介质
JP6090653B2 (ja) 疲労判定装置、疲労判定方法、及びそのプログラム
WO2023188264A1 (ja) 情報処理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination