CN108304830A - 车辆内人员身份在线监测方法、装置和存储介质 - Google Patents
车辆内人员身份在线监测方法、装置和存储介质 Download PDFInfo
- Publication number
- CN108304830A CN108304830A CN201810198021.7A CN201810198021A CN108304830A CN 108304830 A CN108304830 A CN 108304830A CN 201810198021 A CN201810198021 A CN 201810198021A CN 108304830 A CN108304830 A CN 108304830A
- Authority
- CN
- China
- Prior art keywords
- face
- driver
- vehicle
- personnel
- identity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
Abstract
本发明公开了一种车辆内人员身份在线监测方法、装置和存储介质，其方法包括：通过人脸采集装置实时采集车辆内人员的人脸图像信息，车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸信息对驾驶员进行人脸识别，识别结果和采集的人脸图片实时以无线通讯方式发送至管理云平台，由管理云平台在数据库查询并验进行人员身份在线监控，监控结果实时发送至管理云平台预设的管理终端。本发明实现了灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
Description
技术领域
本发明涉及车辆人员技术领域，尤其涉及一种车辆内人员身份在线监测方法、装置和存储介质。
背景技术
目前，在各种交通工具中，尤其是公共交通工具，驾驶人员身份的验证往往是在一个停下来的状态下进行交接班的时候，作为下一班的身份验证，无法实现实时在线监测。此外，在一些特定场所，通常会涉及到对车辆内乘车人员进行身份验证。目前采用的方式大多是通过人工检查核对，其效率较低，无法满足需求。
发明内容
本发明提供一种车辆内人员身份在线监测方法、装置和存储介质，旨在实现车辆内人员身份的实时在线监测，提高检测智能化和效率。
为实现上述目的，本发明提供一种车辆内人员身份在线监测方法，所述车辆内设置有人脸采集装置，所述方法包括：
通过所述人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；
根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；
将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
可选地，所述通过所述人脸采集装置实时采集车辆内人员的人脸图像信息的步骤之前还包括：
在管理云平台数据库中预存具有驾驶资格的人员人脸识别信息和对应的身份证信息。
可选地，所述根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别的步骤包括：
将所述人脸采集装置采集的车辆内人员的人脸图像信息发送至管理云平台，由所述管理云平台对所述驾驶员进行人脸识别，得到人脸识别结果；
所述将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端的步骤包括：
由所述管理云平台查找管理云平台数据库，将人脸识别结果与预存的驾驶员身份证信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
可选地，驾驶员身份信息和人脸识别程序预存在所述人脸采集装置内或车载人脸识别服务器内；所述根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别的步骤包括：
由所述人脸采集装置或车载人脸识别服务器根据采集到的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果；
所述将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端的步骤包括：
由所述人脸采集装置或车载人脸识别服务器将人脸识别结果同所述预存的驾驶员身份信息进行比对验证，确定当前驾驶人员身份，并将确定的驾驶员身份信息以无线通讯方式发送至管理云平台，由所述管理云平台对驾驶员身份进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
可选地，所述通过所述人脸采集装置实时采集车辆内人员的人脸信息的步骤包括：
在驾驶员换班的过程中或者驾驶的过程中，通过所述人脸采集装置实时采集所述驾驶员的人脸信息。
可选地，所述方法还包括：
根据在线监测的数据分析当前驾驶员的驾驶时间，以根据所述当前驾驶员的驾驶时间进行疲劳驾驶预警。
可选地，所述方法还包括：
将实时在线监测数据和/或身份验证的数据保存到管理云平台，同管理云平台预存的驾驶员身份证信息对应保存，以供查询驾驶员身份证信息对应的历史数据；和/或
将管理云平台和管理终端以及交通执法系统关联，根据在线监控数据和/或身份验证的数据判断驾驶员身份是否合法；和/或
在人脸采集装置断线或者识别到非法驾驶员时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门。
可选地，所述人脸采集装置在车辆上多角度设置，所述车辆内人员还包括：车辆内乘客人员；
所述通过所述人脸采集装置实时采集车辆内人员的人脸信息的步骤还包括：
通过所述人脸采集装置实时采集车辆内乘客人员的人脸信息；
所述方法还包括：
根据采集到的所述车辆内乘客人员的人脸信息，对车辆内乘客人员进行人脸识别，根据人脸识别结果与预先获取的违法人员身份信息进行比对预警。
本发明实施例还提出一种车辆内人员身份在线监测装置，包括存储器、处理器以及存储在所述存储器上的计算机程序，所述计算机程序被所述处理器运行时实现如上所述的方法的步骤。
本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时实现如上所述的方法的步骤。
相比现有技术，本发明提出的车辆内人员身份在线监测方法、装置和存储介质，通过人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
附图说明
图1是本发明提出的车辆内人员身份在线监测方法第一实施例的流程示意图；
图2是本发明提出的车辆内人员身份在线监测方法第二实施例的流程示意图；
图3是本发明提出的车辆内人员身份在线监测方法第三实施例的流程示意图；
图4是本发明实施例涉及的装置结构示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明实施例的主要解决方案是：通过人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
由于现有技术中，驾驶人员身份的验证无法实现实时在线监测。此外，在一些特定场所，对车辆内乘车人员进行身份验证，采用的方式大多是通过人工检查核对，其效率较低，无法满足需求。
本发明实施例提出一种解决方案，可以实现车辆内驾驶员及乘车人员身份的实时在线监测，提高检测智能化及效率，并可满足特殊场合安全性需求。
具体地，请参照图1，图1是本发明提出的车辆内人员身份在线监测方法第一实施例的流程示意图。
如图1所示，本发明第一实施例提出一种车辆内人员身份在线监测方法，所述车辆内设置有人脸采集装置，即车载人脸采集装置，所述方法包括：
步骤S101，通过所述人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；
本实施例方案可以应用于车载系统，也可以应用于车辆管理系统。在车辆内或车辆外设置有人脸采集装置，用于对车辆内的人员进行人脸图像采集，以便对车辆内人员身份进行验证或在线监测。该人脸采集装置可以是摄像头或者其他图像采集装置。
其中，车辆内人员可以是驾驶员，也可以是车辆内乘车人员。
所述人脸采集装置可以在车辆上多角度设置。
以监测驾驶员为例，可以将人脸采集装置安装在驾驶员的前方，保证不遮挡驾驶员视线且拍摄的角度合适，当驾驶员坐在驾驶座的时候，人脸采集装置即可采集驾驶员的人脸信息，包括交接班的过程中、驾驶的过程中，均可以对驾驶员进行主动的身份验证以及实时的监测，从而实现灵活、方便的驾驶员身份在线监测。
其中，在本实施例中，可以在驾驶员交接班后，新上班的驾驶员将可验证自己身份的身份证号、驾照号、特种车辆的操作上岗证等具有唯一身份信息的证件号通过车载设备录入系统。这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
步骤S102，根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果。
步骤S103，将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
具体地，以车辆内人员为驾驶员进行举例：
可以在驾驶员换班的过程中或者驾驶的过程中，通过人脸采集装置实时采集驾驶员的人脸信息；
之后，对采集到的所述驾驶员的人脸信息进行人脸识别，获得人脸识别结果。
其中，作为一种实施方式，人脸识别可以通过人脸采集装置进行识别，得到人脸识别结果；
作为另一种实施方式，也可以由人脸采集装置将采集的人脸图像发送至车载系统或车载装置或者车载人脸识别服务器，由车载系统或车载装置或者车载人脸识别服务器对人脸图像数据进行识别，得到人脸识别结果；
此外，还可以通过智能车载系统或装置或者车载人脸识别服务器将人脸采集装置采集到的视频数据发送至管理云平台，由管理云平台对视频数据中的人脸信息进行识别，得到识别结果。
上述人脸采集装置，或者车载系统或装置得到的人脸识别结果也可以上传至管理云平台。
在得到人脸识别结果后，将所述人脸识别结果与预先录入的所述驾驶员的身份证件信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
其中，若比对成功，则身份验证通过或者判定身份在线监测结果正常；否则，身份验证不通过或者判定身份在线监测结果异常。
需要说明的是，上述比对操作可以由车载系统完成，也可以由车辆管理系统完成，还可以由管理云平台完成。
以下详细阐述对车辆人员身份进行在线监测的几种实现方式：
作为一种实现方式，由管理云平台根据人脸图像信息进行人脸识别，并进行身份比对验证。
具体地，在管理云平台数据库中预存具有驾驶资格的人员人脸识别信息和对应的身份证信息。
在通过所述人脸采集装置实时采集到驾驶员的人脸图像信息后，将所述人脸采集装置采集的车辆内人员的人脸图像信息发送至管理云平台，由所述管理云平台对所述驾驶员进行人脸识别，得到人脸识别结果；
然后，由所述管理云平台查找管理云平台数据库，将人脸识别结果与预存的驾驶员身份证信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
作为另一种实现方式，由人脸采集装置内或车载人脸识别服务器，根据人脸图像信息进行人脸识别，并进行身份比对验证，将验证结果发送至管理云平台。
具体地，驾驶员身份信息和人脸识别程序预存在所述人脸采集装置内或车载人脸识别服务器内。
由所述人脸采集装置或车载人脸识别服务器根据采集到的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果；
由所述人脸采集装置或车载人脸识别服务器将人脸识别结果同所述预存的驾驶员身份信息进行比对验证，确定当前驾驶人员身份，并将确定的驾驶员身份信息以无线通讯方式发送至管理云平台，由所述管理云平台对驾驶员身份进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
其中，在得到驾驶员的身份在线监测数据后，还可以根据身份在线监测数据分析当前驾驶员的驾驶时间，以根据所述当前驾驶员的驾驶时间进行疲劳驾驶预警。
本实施例通过上述方案，通过人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
需要说明的是，对于车辆内其他乘车人员的身份验证及在线监测，其原理同上，在此不再赘述。
如图2所示，本发明第二实施例提出一种车辆内人员身份在线监测方法，基于上述图1所示的实施例，在上述步骤S101：通过所述人脸采集装置实时采集车辆内人员的人脸信息之前还包括：
步骤S100，当驾驶员换班后，接收新上班的驾驶员录入的身份证件信息并保存，所述身份证件信息包括：身份证号、驾照号后和特种车辆的操作上岗证。
其中，所述证件信息通过车载设备录入车辆管理系统。
相比上述图1所示的实施例，本实施例还包括预存驾驶员身份信息的方案。
具体地，可以在驾驶员交接班后，新上班的驾驶员将可验证自己身份的身份证号、驾照号、特种车辆的操作上岗证等具有唯一身份信息的证件号通过车载设备录入系统，作为后续对驾驶员身份验证和在线监测的比对依据。这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
其中，驾驶员录入的身份证件信息还可以上传至管理云平台，由管理云平台对驾驶员进行人脸识别，并通过人脸识别结果及预先保存的驾驶员录入的身份证件信息，对驾驶员进行身份验证比对，以保障驾驶者是合法合理的身份。
本实施例通过上述方案，在驾驶员交接班后，新上班的驾驶员将可验证自己身份的身份证号、驾照号、特种车辆的操作上岗证等具有唯一身份信息的证件号通过车载设备录入系统，在驾驶员交接班过程中，或者驾驶过程中，通过人脸采集装置实时采集车辆内人员的人脸信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸信息对所述车辆内人员进行身份验证或身份在线监测，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。
进一步地，所述方法还可以包括以下方案：
将实时在线监测数据和/或身份验证的数据保存至管理云平台，同管理云平台预存的驾驶员身份证信息对应保存，以供查询驾驶员身份证信息对应的历史数据。
具体地，可以将实时在线身份监测和身份验证的数据保存至管理云平台，同驾驶员身份信息对应保存，便于以驾驶员身份信息查询历史数据，提高管理效率。其中，所有数据均可以通过无线通讯方式传至管理云平台。
比如，在管理人员需要查询一段时间内某一车辆的驾驶员信息时(尤其是在车辆发生意外或事故需要核对驾驶员身份时)，则可以在管理云平台数据库中查询该段时间内的实时在线监测数据或身份验证数据，从而满足用户查询历史数据的需求。
如图3所示，本发明第三实施例提出一种车辆内人员身份在线监测方法，基于上述图1所示的实施例，所述方法还包括：
步骤S104，将管理云平台和管理终端以及交通执法系统关联，根据在线监控数据和/或身份验证的数据判断驾驶员身份是否合法；和/或在人脸采集装置断线或者识别到非法驾驶员时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门。
相比上述图2所示的实施例，本实施例还包括对驾驶员身份是否合法、乘车人员身份是否合法的判断处理。
具体地，可以将管理云平台和管理终端以及交通执法系统关联，根据在线监控数据和/或身份验证的数据判断驾驶员身份是否合法。
在识别到非法驾驶员时，可以启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门进行相应处理，从而保障驾驶者是合法合理的身份。
此外，还可以在人脸采集装置断线时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门进行相应处理，以保证系统正常运行，防止恶意事件的发生，保障驾驶者是合法合理的身份，提高车辆及相关事务的安全性。
另外，还可扩展到，通过一个广角或者大范围的人脸采集装置或者多个角度的人脸采集装置，对交通工具内乘客人员进行人脸识别，在特殊时期或者对可能严重危害公共安全的违法人员的信息进行比对预警，保障公共交通的出行安全。
如前所述，人脸采集装置可以在车辆上多角度设置。
对于车辆内的乘车人员，可以通过所述人脸采集装置实时采集车辆内乘客人员的人脸信息。
然后，根据采集到的所述车辆内乘客人员的人脸信息，对车辆内乘客人员进行人脸识别，根据人脸识别结果与预先获取的违法人员身份信息进行比对预警，在车辆内乘客人员身份异常时，可以启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门进行相应处理，从而保障乘车人员是合法合理的身份，尤其是在特殊时期或者对可能严重危害公共安全的违法人员的信息进行比对预警，保障公共交通的出行安全。
本实施例通过上述方案，在驾驶员换班后，新上班的驾驶员将可验证自己身份的身份证号、驾照号、特种车辆的操作上岗证等具有唯一身份信息的证件号通过车载设备录入系统，在驾驶员换班过程中，或者驾驶过程中，通过人脸采集装置实时采集车辆内人员的人脸信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。此外，还可以在特殊时期或者对可能严重危害公共安全的违法人员的信息进行比对预警，保障公共交通的出行安全。
此外，本发明还提出一种车辆内人员身份在线监测装置，包括存储器、处理器以及存储在所述存储器上的计算机程序，所述计算机程序被所述处理器运行时实现如上所述的方法的步骤。
具体地，如图4所示，本实施例车辆内人员身份在线监测装置可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图4中示出的装置结构并不构成对装置的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图4所示，作为一种计算机存储介质的存储器1005中可以包括操作装置、网络通信模块、用户接口模块以及车辆内人员身份在线监测程序。
在图4所示的装置中，网络接口1004主要用于连接网络服务器，与网络服务器进行数据通信；用户接口1003主要用于与用户终端交互，接收用户输入的指令；而处理器1001可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
通过所述人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；
根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；
将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
在管理云平台数据库中预存具有驾驶资格的人员人脸识别信息和对应的身份证信息。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
将所述人脸采集装置采集的车辆内人员的人脸图像信息发送至管理云平台，由所述管理云平台对所述驾驶员进行人脸识别，得到人脸识别结果；
由所述管理云平台查找管理云平台数据库，将人脸识别结果与预存的驾驶员身份证信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
由所述人脸采集装置或车载人脸识别服务器根据采集到的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果；
由所述人脸采集装置或车载人脸识别服务器将人脸识别结果同所述预存的驾驶员身份信息进行比对验证，确定当前驾驶人员身份，并将确定的驾驶员身份信息以无线通讯方式发送至管理云平台，由所述管理云平台对驾驶员身份进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
在驾驶员换班的过程中或者驾驶的过程中，通过所述人脸采集装置实时采集所述驾驶员的人脸信息。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
根据身份在线监测数据分析当前驾驶员的驾驶时间，以根据所述当前驾驶员的驾驶时间进行疲劳驾驶预警。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
将实时在线监测数据和/或身份验证的数据保存到管理云平台，同管理云平台预存的驾驶员身份证信息对应保存，以供查询驾驶员身份证信息对应的历史数据。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
将管理云平台和管理终端以及交通执法系统关联，根据在线监控数据和/或身份验证的数据判断驾驶员身份是否合法；和/或
在人脸采集装置断线或者识别到非法驾驶员时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门。
进一步地，处理器1001还可以用于调用存储器1005中存储的车辆内人员身份在线监测程序，并执行以下操作：
通过所述人脸采集装置实时采集车辆内乘客人员的人脸信息；
根据采集到的所述车辆内乘客人员的人脸信息，对车辆内乘客人员进行人脸识别，根据人脸识别结果与预先获取的违法人员身份信息进行比对预警。
此外，本发明还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时实现如下操作：
通过所述人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；
根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；
将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
在管理云平台数据库中预存具有驾驶资格的人员人脸识别信息和对应的身份证信息。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
将所述人脸采集装置采集的车辆内人员的人脸图像信息发送至管理云平台，由所述管理云平台对所述驾驶员进行人脸识别，得到人脸识别结果；
由所述管理云平台查找管理云平台数据库，将人脸识别结果与预存的驾驶员身份证信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
由所述人脸采集装置或车载人脸识别服务器根据采集到的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果；
由所述人脸采集装置或车载人脸识别服务器将人脸识别结果同所述预存的驾驶员身份信息进行比对验证，确定当前驾驶人员身份，并将确定的驾驶员身份信息以无线通讯方式发送至管理云平台，由所述管理云平台对驾驶员身份进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
在驾驶员换班的过程中或者驾驶的过程中，通过所述人脸采集装置实时采集所述驾驶员的人脸信息。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
根据身份在线监测数据分析当前驾驶员的驾驶时间，以根据所述当前驾驶员的驾驶时间进行疲劳驾驶预警。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
将实时在线监测数据和/或身份验证的数据保存到管理云平台，同管理云平台预存的驾驶员身份证信息对应保存，以供查询驾驶员身份证信息对应的历史数据。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
将管理云平台和管理终端以及交通执法系统关联，根据在线监测数据和/或身份验证的数据判断驾驶员身份是否合法；和/或
在人脸采集装置断线或者识别到非法驾驶员时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门。
进一步地，所述计算机程序被处理器运行时还实现如下操作：
通过所述人脸采集装置实时采集车辆内乘客人员的人脸信息；
根据采集到的所述车辆内乘客人员的人脸信息，对车辆内乘客人员进行人脸识别，根据人脸识别结果与预先获取的违法人员身份信息进行比对预警。
本实施例通过上述方案，通过人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端，由此实现灵活、方便的车辆内驾驶员及乘车人员身份的实时在线监测，不仅提高人员检测智能化和效率，满足了特殊场合安全性需求，而且这种方式可以杜绝中途换人的事情发生，也可以通过在线数据分析某个驾驶员的驾驶时间，进行疲劳驾驶预警。此外，还可以在特殊时期或者对可能严重危害公共安全的违法人员的信息进行比对预警，保障公共交通的出行安全。
以上所述仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或流程变换，或直接或间接运用在其它相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种车辆内人员身份在线监测方法，其特征在于，所述车辆内设置有人脸采集装置，所述方法包括：
通过所述人脸采集装置实时采集车辆内人员的人脸图像信息，所述车辆内人员至少包括驾驶员；
根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别；
将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
2.根据权利要求1所述的方法，其特征在于，所述通过所述人脸采集装置实时采集车辆内人员的人脸图像信息的步骤之前还包括：
在管理云平台数据库中预存具有驾驶资格的人员人脸识别信息和对应的身份证信息。
3.根据权利要求2所述的方法，其特征在于，所述根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别的步骤包括：
将所述人脸采集装置采集的车辆内人员的人脸图像信息发送至管理云平台，由所述管理云平台对所述驾驶员进行人脸识别，得到人脸识别结果；
所述将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端的步骤包括：
由所述管理云平台查找管理云平台数据库，将人脸识别结果与预存的驾驶员身份证信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
4.根据权利要求1所述的方法，其特征在于，驾驶员身份信息和人脸识别程序预存在所述人脸采集装置内或车载人脸识别服务器内；所述根据采集到的所述车辆内人员的人脸图像信息对所述驾驶员进行人脸识别的步骤包括：
由所述人脸采集装置或车载人脸识别服务器根据采集到的人脸图像信息对所述驾驶员进行人脸识别，得到人脸识别结果；
所述将人脸识别结果与预存的驾驶员身份信息进行比对验证，确定驾驶人员身份，进行在线监控，将监控结果实时发送至管理云平台预设的管理终端的步骤包括：
由所述人脸采集装置或车载人脸识别服务器将人脸识别结果同所述预存的驾驶员身份信息进行比对验证，确定当前驾驶人员身份，并将确定的驾驶员身份信息以无线通讯方式发送至管理云平台，由所述管理云平台对驾驶员身份进行在线监控，将监控结果实时发送至管理云平台预设的管理终端。
5.根据权利要求1所述的方法，其特征在于，所述通过所述人脸采集装置实时采集车辆内人员的人脸信息的步骤包括：
在驾驶员换班的过程中或者驾驶的过程中，通过所述人脸采集装置实时采集所述驾驶员的人脸信息。
6.根据权利要求1-5中任一项所述的方法，其特征在于，所述方法还包括：
根据在线监测的数据分析当前驾驶员的驾驶时间，以根据所述当前驾驶员的驾驶时间进行疲劳驾驶预警。
7.根据权利要求3所述的方法，其特征在于，所述方法还包括：
将实时在线监测数据和/或身份验证的数据保存到管理云平台，同管理云平台预存的驾驶员身份证信息对应保存，以供查询驾驶员身份证信息对应的历史数据；和/或
将管理云平台和管理终端以及交通执法系统关联，根据在线监控数据和/或身份验证的数据判断驾驶员身份是否合法；和/或
在人脸采集装置断线或者识别到非法驾驶员时，启动预警或报警的功能，告知相应的现场人员或者管理人员或者部门。
8.根据权利要求1-5中任一项所述的方法，其特征在于，所述人脸采集装置在车辆上多角度设置，所述车辆内人员还包括：车辆内乘客人员；
所述通过所述人脸采集装置实时采集车辆内人员的人脸信息的步骤还包括：
通过所述人脸采集装置实时采集车辆内乘客人员的人脸信息；
所述方法还包括：
根据采集到的所述车辆内乘客人员的人脸信息，对车辆内乘客人员进行人脸识别，根据人脸识别结果与预先获取的违法人员身份信息进行比对预警。
9.一种车辆内人员身份在线监测装置，其特征在于，包括存储器、处理器以及存储在所述存储器上的计算机程序，所述计算机程序被所述处理器运行时实现如权利要求1-8中任一项所述的方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时实现如权利要求1-8中任一项所述的方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810198021.7A CN108304830B (zh) | 2018-03-09 | 2018-03-09 | 车辆内人员身份在线监测方法、装置和存储介质 |
| CN202010939118.6A CN112084942A (zh) | 2018-03-09 | 2018-03-09 | 车辆内驾驶员身份在线监测方法、装置和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810198021.7A CN108304830B (zh) | 2018-03-09 | 2018-03-09 | 车辆内人员身份在线监测方法、装置和存储介质 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010939118.6A Division CN112084942A (zh) | 2018-03-09 | 2018-03-09 | 车辆内驾驶员身份在线监测方法、装置和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108304830A true CN108304830A (zh) | 2018-07-20 |
| CN108304830B CN108304830B (zh) | 2020-10-23 |
Family
ID=62849681
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010939118.6A Pending CN112084942A (zh) | 2018-03-09 | 2018-03-09 | 车辆内驾驶员身份在线监测方法、装置和存储介质 |
| CN201810198021.7A Active CN108304830B (zh) | 2018-03-09 | 2018-03-09 | 车辆内人员身份在线监测方法、装置和存储介质 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010939118.6A Pending CN112084942A (zh) | 2018-03-09 | 2018-03-09 | 车辆内驾驶员身份在线监测方法、装置和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (2) | CN112084942A (zh) |
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109190596A (zh) * | 2018-09-28 | 2019-01-11 | 西安艾润物联网技术服务有限责任公司 | 一种身份验证方法及装置 |
| CN109344735A (zh) * | 2018-09-11 | 2019-02-15 | 河南森源鸿马电动汽车有限公司 | 一种便携式人脸识别方法及系统 |
| CN109360278A (zh) * | 2018-10-31 | 2019-02-19 | 石家庄铁道大学 | 出租车计价方法、系统及服务器 |
| CN109389107A (zh) * | 2019-01-15 | 2019-02-26 | 深兰人工智能芯片研究院（江苏）有限公司 | 车辆安全处理方法、装置及计算机可读存储介质 |
| CN109583174A (zh) * | 2019-01-26 | 2019-04-05 | 南京云计趟信息技术有限公司 | 一种驾驶员人脸识别离线身份验证系统及方法 |
| CN109726840A (zh) * | 2019-01-15 | 2019-05-07 | 安徽云联城市交通信息有限公司 | 一种基于人脸识别的网约车系统及其使用方法 |
| CN110087026A (zh) * | 2019-03-26 | 2019-08-02 | 上海物为信息科技有限公司 | 一种车辆双屏多摄像头监控系统 |
| CN110163089A (zh) * | 2019-04-11 | 2019-08-23 | 西安艾润物联网技术服务有限责任公司 | 身份验证方法及装置 |
| CN110228366A (zh) * | 2019-06-24 | 2019-09-13 | 上海擎感智能科技有限公司 | 一种用于车辆安全的控制方法、装置及计算机可读介质 |
| CN110379176A (zh) * | 2019-08-30 | 2019-10-25 | 公安部交通管理科学研究所 | 基于图像识别的无证驾驶违法行为预警拦截方法 |
| CN110400483A (zh) * | 2019-08-07 | 2019-11-01 | 合肥智圣新创信息技术有限公司 | 一种基于人脸识别和gis平台的高校校车管理方法及装置 |
| CN110481557A (zh) * | 2019-08-26 | 2019-11-22 | 杨建宏 | 一种机动车驾驶员识别方法、系统、存储介质 |
| CN110509891A (zh) * | 2019-09-24 | 2019-11-29 | 宝能汽车有限公司 | 一种汽车租赁监管系统及其方法 |
| CN111368640A (zh) * | 2020-02-10 | 2020-07-03 | 上海应用技术大学 | 基于身份认证的违规驾驶辅助识别方法 |
| CN111404874A (zh) * | 2019-12-31 | 2020-07-10 | 广州市交通运输局 | 出租车嫌疑车辆甄别分析体系架构 |
| CN111402578A (zh) * | 2020-02-28 | 2020-07-10 | 平安国际智慧城市科技股份有限公司 | 基于轨迹监测的共享车辆监控方法、装置和计算机设备 |
| CN111553997A (zh) * | 2020-04-22 | 2020-08-18 | 深圳市欣横纵技术股份有限公司 | 一种换岗系统及其方法 |
| CN112208475A (zh) * | 2019-07-09 | 2021-01-12 | 奥迪股份公司 | 用于车辆乘员的安全保护系统、车辆及相应的方法和介质 |
| CN112242061A (zh) * | 2019-07-17 | 2021-01-19 | 杭州海康威视数字技术股份有限公司 | 一种基于人脸分析的车辆管理系统 |
| CN112277954A (zh) * | 2020-11-02 | 2021-01-29 | 麻涛涛 | 综合监控车辆安全及人员安全驾驶的方法及其装置 |
| CN112530063A (zh) * | 2020-12-16 | 2021-03-19 | 建信金融科技有限责任公司 | 通行控制装置及方法 |
| CN112565352A (zh) * | 2020-11-19 | 2021-03-26 | 中国人民解放军海军航空大学 | 一种军用车辆驾驶远程授权及监控系统 |
| CN112651004A (zh) * | 2020-11-07 | 2021-04-13 | 深圳市思拓通信系统有限公司 | 基于车内人员的车辆管控方法、系统、存储介质及设备 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112660204A (zh) * | 2020-12-31 | 2021-04-16 | 上海商汤临港智能科技有限公司 | 驾驶员检测方法、装置、设备、车辆、介质及产品 |
| CN112802236A (zh) * | 2020-12-31 | 2021-05-14 | 南京市芯佳元科技有限公司 | 基于人脸识别的车辆集中管理方法及其实现系统 |
| CN114998979B (zh) * | 2022-08-01 | 2022-11-18 | 中国通信建设第三工程局有限公司 | 一种智能车联网系统 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107220681A (zh) * | 2017-04-13 | 2017-09-29 | 百年金海科技有限公司 | 一种基于电子标签的驾驶员身份识别系统和识别方法 |
| CN107517197A (zh) * | 2016-06-17 | 2017-12-26 | 南昌工程学院 | 一种基于人脸认证技术的汽车云管理的方法和系统 |
-
2018
- 2018-03-09 CN CN202010939118.6A patent/CN112084942A/zh active Pending
- 2018-03-09 CN CN201810198021.7A patent/CN108304830B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107517197A (zh) * | 2016-06-17 | 2017-12-26 | 南昌工程学院 | 一种基于人脸认证技术的汽车云管理的方法和系统 |
| CN107220681A (zh) * | 2017-04-13 | 2017-09-29 | 百年金海科技有限公司 | 一种基于电子标签的驾驶员身份识别系统和识别方法 |
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109344735A (zh) * | 2018-09-11 | 2019-02-15 | 河南森源鸿马电动汽车有限公司 | 一种便携式人脸识别方法及系统 |
| CN109190596A (zh) * | 2018-09-28 | 2019-01-11 | 西安艾润物联网技术服务有限责任公司 | 一种身份验证方法及装置 |
| CN109360278A (zh) * | 2018-10-31 | 2019-02-19 | 石家庄铁道大学 | 出租车计价方法、系统及服务器 |
| CN109389107A (zh) * | 2019-01-15 | 2019-02-26 | 深兰人工智能芯片研究院（江苏）有限公司 | 车辆安全处理方法、装置及计算机可读存储介质 |
| CN109726840A (zh) * | 2019-01-15 | 2019-05-07 | 安徽云联城市交通信息有限公司 | 一种基于人脸识别的网约车系统及其使用方法 |
| CN109583174A (zh) * | 2019-01-26 | 2019-04-05 | 南京云计趟信息技术有限公司 | 一种驾驶员人脸识别离线身份验证系统及方法 |
| CN110087026A (zh) * | 2019-03-26 | 2019-08-02 | 上海物为信息科技有限公司 | 一种车辆双屏多摄像头监控系统 |
| CN110163089A (zh) * | 2019-04-11 | 2019-08-23 | 西安艾润物联网技术服务有限责任公司 | 身份验证方法及装置 |
| CN110228366A (zh) * | 2019-06-24 | 2019-09-13 | 上海擎感智能科技有限公司 | 一种用于车辆安全的控制方法、装置及计算机可读介质 |
| CN112208475A (zh) * | 2019-07-09 | 2021-01-12 | 奥迪股份公司 | 用于车辆乘员的安全保护系统、车辆及相应的方法和介质 |
| CN112208475B (zh) * | 2019-07-09 | 2023-02-03 | 奥迪股份公司 | 用于车辆乘员的安全保护系统、车辆及相应的方法和介质 |
| CN112242061A (zh) * | 2019-07-17 | 2021-01-19 | 杭州海康威视数字技术股份有限公司 | 一种基于人脸分析的车辆管理系统 |
| CN110400483A (zh) * | 2019-08-07 | 2019-11-01 | 合肥智圣新创信息技术有限公司 | 一种基于人脸识别和gis平台的高校校车管理方法及装置 |
| CN110481557A (zh) * | 2019-08-26 | 2019-11-22 | 杨建宏 | 一种机动车驾驶员识别方法、系统、存储介质 |
| CN110379176A (zh) * | 2019-08-30 | 2019-10-25 | 公安部交通管理科学研究所 | 基于图像识别的无证驾驶违法行为预警拦截方法 |
| CN110379176B (zh) * | 2019-08-30 | 2021-09-07 | 公安部交通管理科学研究所 | 基于图像识别的无证驾驶违法行为预警拦截方法 |
| CN110509891B (zh) * | 2019-09-24 | 2021-03-23 | 宝能汽车集团有限公司 | 一种汽车租赁监管系统及其方法 |
| CN110509891A (zh) * | 2019-09-24 | 2019-11-29 | 宝能汽车有限公司 | 一种汽车租赁监管系统及其方法 |
| CN111404874A (zh) * | 2019-12-31 | 2020-07-10 | 广州市交通运输局 | 出租车嫌疑车辆甄别分析体系架构 |
| CN111368640A (zh) * | 2020-02-10 | 2020-07-03 | 上海应用技术大学 | 基于身份认证的违规驾驶辅助识别方法 |
| CN111402578A (zh) * | 2020-02-28 | 2020-07-10 | 平安国际智慧城市科技股份有限公司 | 基于轨迹监测的共享车辆监控方法、装置和计算机设备 |
| CN111553997A (zh) * | 2020-04-22 | 2020-08-18 | 深圳市欣横纵技术股份有限公司 | 一种换岗系统及其方法 |
| CN112277954A (zh) * | 2020-11-02 | 2021-01-29 | 麻涛涛 | 综合监控车辆安全及人员安全驾驶的方法及其装置 |
| CN112651004A (zh) * | 2020-11-07 | 2021-04-13 | 深圳市思拓通信系统有限公司 | 基于车内人员的车辆管控方法、系统、存储介质及设备 |
| CN112565352A (zh) * | 2020-11-19 | 2021-03-26 | 中国人民解放军海军航空大学 | 一种军用车辆驾驶远程授权及监控系统 |
| CN112530063A (zh) * | 2020-12-16 | 2021-03-19 | 建信金融科技有限责任公司 | 通行控制装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108304830B (zh) | 2020-10-23 |
| CN112084942A (zh) | 2020-12-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108304830A (zh) | 车辆内人员身份在线监测方法、装置和存储介质 | |
| CN108540579B (zh) | 驾驶员身份在线监测方法、装置和存储介质 | |
| CN108454567B (zh) | 用于车辆的物体检测 | |
| CN104794901B (zh) | 停车场车辆防盗系统及停车场车辆管理方法 | |
| CN108492551A (zh) | 出租车排队管理方法、系统及计算机可读存储介质 | |
| CN106056839A (zh) | 网约车安全监测系统及方法 | |
| CN103434484A (zh) | 车载识别认证装置、移动终端、智能车钥控制系统及方法 | |
| CN106845368A (zh) | 基于人脸识别的机场登机安检再确认系统和方法 | |
| CN103440485A (zh) | 一种车辆出入控制系统及控制方法 | |
| CN108010153A (zh) | 公交车司机身份识别系统和方法 | |
| CN106372949A (zh) | 车辆维修管理方法 | |
| CN106600083B (zh) | 一种司机接单的管理方法和设备 | |
| CN103971511B (zh) | 出租车调度系统、车载终端及调度服务器 | |
| CN111918039A (zh) | 基于5g网络的人工智能高风险作业管控系统 | |
| CN110808053B (zh) | 一种驾驶员身份验证方法、装置及电子设备 | |
| CN110213516A (zh) | 车载视频录制处理方法、装置、存储介质及电子装置 | |
| CN108449571A (zh) | 一种车内监控方法及设备 | |
| CN109726840A (zh) | 一种基于人脸识别的网约车系统及其使用方法 | |
| CN108062805B (zh) | 一种车载数据处理方法和服务器 | |
| CN108674367A (zh) | 一种汽车驾驶人员用车控制方法及实现该方法的系统 | |
| CN109484181A (zh) | 车辆智能上电方法和系统、车辆 | |
| CN108182419A (zh) | 车载人脸识别终端、系统、方法、装置和存储介质 | |
| CN110210935A (zh) | 安全认证方法及装置、存储介质、电子装置 | |
| CN205545704U (zh) | 3g公安车车载监控系统 | |
| CN209248532U (zh) | 一种基于车辆碰撞的监控管理系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |