CN116915786B - 一种多服务器协同的车牌识别及车辆管理系统 - Google Patents
一种多服务器协同的车牌识别及车辆管理系统 Download PDFInfo
- Publication number
- CN116915786B CN116915786B CN202311176501.0A CN202311176501A CN116915786B CN 116915786 B CN116915786 B CN 116915786B CN 202311176501 A CN202311176501 A CN 202311176501A CN 116915786 B CN116915786 B CN 116915786B
- Authority
- CN
- China
- Prior art keywords
- gateway router
- identification
- address
- identification task
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 claims abstract description 232
- 230000002159 abnormal effect Effects 0.000 claims description 44
- 238000012545 processing Methods 0.000 claims description 43
- 230000005540 biological transmission Effects 0.000 claims 1
- 230000005856 abnormality Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
- H04L67/1023—Server selection for load balancing based on a hash applied to IP addresses or costs
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
- G08G1/145—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
- G08G1/148—Management of a network of parking areas
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/12—Shortest path evaluation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/74—Address processing for routing
- H04L45/745—Address table lookup; Address filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种多服务器协同的车牌识别及车辆管理系统,通过网关路由器将分析服务器组接入网络,将各个分析服务器组中各分析服务器的IP地址设置为同一个网段,摄像机将抓拍的车辆图像作为识别任务,以分析服务器组网段地址为目的地址发送识别任务,中间路由器以最短路径路由表项转发识别任务,从而实现每个摄像机所发出的识别任务会自动转发到距离自己最近的分析服务器组。本发明避免了网络的复杂配置,实现分析任务在各个分析服务器组之间的均衡分配,增强了系统的鲁棒性。
Description
技术领域
本申请属于智能停车管理技术领域,尤其涉及一种多服务器协同的车牌识别及车辆管理系统。
背景技术
随着时代的发展和技术的进步,汽车作为交通工具已经普及。随之而来的是,停车管理问题逐渐受到重视。
采用摄像机抓拍车辆图像,识别车牌后进行相应的管理,是目前在停车管理中常用的技术手段。然而目前对于精准识别车牌的技术方案,大多集中在研究如何在一台服务器上通过技术手段提高识别的准确度,即在图像识别的具体技术上进行改进。
然而,摄像机抓拍环境复杂多变,对于车辆图像的智能识别无法保证识别结果的完全准确。
发明内容
本申请的目的是提供一种多服务器协同的车牌识别及车辆管理系统,通过多台服务器来分别进行识别,最终协同确定识别结果,以提高识别的准确性。
为了实现上述目的,本申请技术方案如下:
一种多服务器协同的车牌识别及车辆管理系统,包括分布在网络中的摄像机,所述网络包括中间路由器和网关路由器,所述多服务器协同的车牌识别及车辆管理系统,还包括接入到网络中的平台服务器、以及通过网关路由器接入到网络中的至少两个分析服务器组,每个分析服务器组包括至少三台分析服务器,同一个分析服务器组中各分析服务器的IP地址处于相同的网段且不同,不同分析服务器组中各分析服务器的IP地址相同设置,其中:
所述摄像机,将抓拍的车辆图像作为识别任务,以分析服务器组网段地址为目的地址发送识别任务;
所述中间路由器,以最短路径路由表项转发识别任务;
所述网关路由器,在接收到目的地址为自身接口所属网段的网段IP地址的识别任务后,将识别任务复制,将源IP地址修改为所述网关路由器的地址,分别发送至所接入的各个分析服务器;
所述分析服务器,对接收的识别任务进行识别,将自己的识别结果通过网关路由器发送至平台服务器,由平台服务器判定出最后的识别结果。
进一步的,所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
进一步的,所述多服务器协同的车牌识别及车辆管理系统,还包括:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,则抑制本地路由表中直连网段路由表项;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
进一步的,所述第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述第一识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在将自身所接入的各个分析服务器以及第二网关路由器下的分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
进一步的,所述第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
进一步的,所述多服务器协同的车牌识别及车辆管理系统,还包括:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,向第二网关路由器发送“主机路由请求消息”,携带所述异常服务器的IP地址,第二网关路由器在收到后,发布关于所述异常服务器的IP地址的主机路由;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
进一步的,所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述第一识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器以及第二网关路由器下的分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
进一步的,所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
本申请提出的一种多服务器协同的车牌识别及车辆管理系统,通过网关路由器将分析服务器组接入网络,将各个分析服务器组中各分析服务器的IP地址设置为同一个网段,摄像机,将抓拍的车辆图像作为识别任务,以分析服务器组网段地址为目的地址发送识别任务,中间路由器,以最短路径路由表项转发识别任务,从而实现每个摄像机所发出的识别任务会自动转发到距离自己最近的分析服务器组。本申请技术方案,避免了网络的复杂配置,实现分析任务在各个分析服务器组之间的均衡分配,增强了系统的鲁棒性。
附图说明
图1为本申请车牌识别系统结构组网示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅用以解释本申请,并不用于限定本申请。
本申请所提出的一种多服务器协同的车牌识别及车辆管理系统,如图1所示,包括部署的各个摄像机,以及用于图像识别的分析服务器,以及用于对分析服务器的识别结果进行最终判定的平台服务器。分析服务器三个一组,每组都通过网关路由器接入到网络中,摄像机和平台服务器也接入都网络中,各个设备之间通过网络交互,发送消息。
根据城市内摄像机数量的多少,本申请会在不同的地理区域设置分析服务器组,每个分析服务器组用于处理自己区域的图像识别。每个分析服务器组至少含有三台分析服务器。摄像机将抓拍的图像发送到分析服务器组,由组中各个分析服务器进行识别,识别结果发送给平台服务器,平台服务器遵从少数服从多数的原则确定最终的识别结果,这样可以提高识别的准确性。
实施例
本实施例提供了一种多服务器协同的车牌识别及车辆管理系统,包括分布在网络中的摄像机,所述网络包括中间路由器和网关路由器,所述多服务器协同的车牌识别及车辆管理系统,还包括接入到网络中的平台服务器,以及通过各自的网关路由器接入到网络中的至少两个分析服务器组,每个分析服务器组包括至少三台分析服务器,同一个分析服务器组中各分析服务器的IP地址处于相同的网段且不同,不同分析服务器组中各分析服务器的IP地址相同设置。
所述摄像机,将抓拍的车辆图像作为识别任务,以分析服务器组网段地址为目的地址发送识别任务;
所述中间路由器,以最短路径路由表项转发识别任务;
所述网关路由器,在接收到目的地址为自身接口所属网段的网段IP地址的识别任务后,将识别任务复制,将源IP地址修改为所述网关路由器的地址,分别发送至所接入的各个分析服务器;
所述分析服务器,对接收的识别任务进行识别,将自己的识别结果通过网关路由器发送至平台服务器,由平台服务器判定出最后的识别结果。
在本实施例中,如图1所示,每个分析服务器组包括至少三台分析服务器,以下以每个分析服务器包括三台分析服务器为例,设置三台分析服务器是为了最后确定识别结果时,可以根据少数服从多数的原则来确定,同样可以设置为五台。在实际的应用中,设置过多的分析服务器会造资源的浪费,以每个分析服务器设置三台分析服务器为优选。
在传统的技术方案中,摄像机为了将大量车辆图像均衡地发送给分析服务器组,一般来说会为每个分析服务器组配置不同的网段地址,这样摄像机可以直接配置所发送报文的目的IP地址为所指向的分析服务器组网段地址。然而这样的技术方案,需要依靠复杂的算法和均衡设备实现分析任务在各个分析服务器组之间的均衡分配。
本实施例针对目前技术方案所存在的问题,同一个分析服务器组中各分析服务器的IP地址处于相同的网段且不同,不同分析服务器组中各分析服务器的IP地址相同。例如,分析服务器组A中三个分析服务器分别为:分析服务器A1:10.10.10.3/24,分析服务器A2:10.10.10.4/24,分析服务器A3:10.10.10.5/24;同时分析服务器组B中三个分析服务器分别为:分析服务器B1:10.10.10.3/24,分析服务器B2:10.10.10.4/24,分析服务器B3:10.10.10.5/24。
通过这样的配置,每个分析服务器组对应的网关路由器会发布一个路由网段信息,例如分析服务器组A对应的网关路由器A发布的路由网段信息为10.10.10.0/24,同样网关路由器B也发布同样的路由网段信息10.10.10.0/24。而由于每个分析服务器组的IP网段相同,因此多个相同的10.10.10.0/24的路由网段信息会通过路由协议传播至全网,在各个中间路由器中根据路由协议生成对应的路由表项,关于路由表项的生成,是本领域比较成熟的技术,这里不再赘述。
对于中间路由器来说,按照路径花费越小越重要的原则,当从多个出接口收到关于10.10.10.0/24的路由网段信息,中间路由器会选择路径花费最小的出接口作为10.10.10.0/24路由表项的出接口。如此,每个摄像机所发出的识别任务会自动转发到距离自己最近的分析服务器组。
例如,两条10.10.10.0/24的路由网段信息,出接口分别为Vlanif100和Vlanif200,出接口为Vlanif100的路由表项路径花费最小,则最终生效的10.10.10.0/24的路由表项的出接口为Vlanfi100。
对于一个车辆图像,摄像机将该车辆图像作为一个识别任务发送给分析服务器去做识别,目的地址为分析服务器组的网段地址,例如:10.10.10.0/24,从而摄像机不必为一个识别任务发送三份消息分别给三个分析服务器,仅发送一份即可。由于多个分析服务器组所在的IP网段相同,中间路由器在转发时,会将其转发到路径最短的网关路由器上。网关路由器在接收到目的地址为自身接口所属网段的网段IP地址的识别任务时,需要进行处理,而不是转发,将识别任务复制成若干份分别发送给下面的各个分析服务器。
例如,摄像机1所发出的识别任务会发送到距离自己最近的网关路由器A,网关路由器A复制为三份,分别发送给三个分析服务器A1、A2和A3。复制后的三份的目的IP分别修改为10.10.10.3、10.10.10.4、10.10.10.5,源IP修改为网关路由器A的地址。
本实施例为了进一步增强系统的鲁棒性,为了避免识别失败的情况,还给出了以下技术方案:
每个摄像机对自己所发出的识别任务建立唯一的序列号,并将序列号附加在识别任务的报文中。
所述网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息。
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
本实施例摄像机将车辆图像作为一个识别任务发送给分析服务器识别,每张车辆图像(或识别任务)具有一个序列号,网关路由器在收到识别任务后,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,从而便于将回复消息发送给对应的摄像机。
每个网关路由器记录了自己名下的三个分析服务器,会负责将识别任务转发给自己管理的三个分析服务器,内含识别任务序列号,如此,将一个识别任务转换为三个识别任务,分别给三个分析服务器。网关路由器三个识别任务的目的IP分别修改为10.10.10.3、10.10.10.4、10.10.10.5,源IP修改为网关路由器的地址。
三个分析服务器分别进行识别,将各自的识别结果回复给网关路由器,内含识别任务序列号,网关路由器负责将三个识别结果反馈给平台服务器,每个识别结果均内含识别任务信息。
分析服务器在识别得到识别结果后,将识别结果发送给平台服务器,平台服务器根据三个分析服务器的识别结果进行判定,以少数服从多数的原则,确认最终采信哪一个识别结果。例如,分析服务器A1的识别结果为:浙A12345;分析服务器A2的识别结果为:浙A12345;分析服务器A3的识别结果为:浙A12315;则平台服务器最终判定识别结果为:浙A12345。
当三个结果全部反馈给平台服务器之后,网关路由器向摄像机回复“识别任务处理完成”的完整回复消息,内含识别任务序列号。平台服务器对每个识别任务采用少数服从多数的方式判定车牌信息。网关路由器仅向摄像机反馈识别任务处理完成的确认消息即可,减少了摄像机的工作量。
摄像机在收到完整的回复消息(即关于同一序列号识别任务的3个处理结果均已经发送给平台服务器的消息)之前,保存识别任务信息,如果在规定时间内未收到完整的回复消息,则重新发送识别任务,从而保证了可靠性;当收到了完整的回复消息,则删除识别任务,释放存储空间。
本实施例通过将不同分析服务器组中各分析服务器的IP地址设置为相同,摄像机发送车辆图像的目的IP均设置为10.10.10.0/24,即可实现将其发送给最近分析服务器组中的三个分析服务器,无须进行复杂的配置。本实施例每个分析服务器组采用相同网段配置,通过路由协议发布相同网段信息,从而实现分析服务器就近接收摄像机的车辆图像进行识别。
实施例
考虑到可能有分析服务器异常不能进行识别工作,本实施例提供了一种优选的技术方案,包括:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,则抑制本地路由表中直连网段路由表项;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
具体的,当某一个分析服务器组中有分析服务器发生异常无法进行处理时,通常的做法是将该分析服务器组屏蔽掉,或在分析服务器组中增加一个备份分析服务器,然而前者的措施将导致整个分析服务器组中其他正常的分析服务器也停止工作,浪费了本分析服务器组的资源,本应这个分析服务器组来处理的识别任务需要转发到其他分析服务器组,增加了其他分析服务器组的工作负担;后者的措施增加备份分析服务器,增加了成本。
为此,本实施例优选的方案是,每个分析服务器组属于不同的网关路由器,每个网关路由器需要维护自己的分析服务器的健康性。每个网关路由器周期性地与自己的分析服务器进行信令交互。网关路由器周期性地发送消息给分析服务器,分析服务器需要立刻给予回复,当网关路由器持续无法收到关于某个分析服务器达3个周期,例如网关路由器A持续无法收到关于分析服务器10.10.10.3的回复,就认为该分析服务器失去服务能力,为异常状态。
例如,发生异常后,当网关路由器A收到来自摄像机的识别任务,复制接收到的识别任务,复制后的三份的目的IP分别修改为10.10.10.3、10.10.10.4、10.10.10.5,除了向分析服务器10.10.10.4和10.10.10.5转发识别任务,还需要将本应发送给异常分析服务器10.10.10.3的识别任务(第一识别任务)发送给其他分析组的10.10.10.3进行处理。
由于本地直接网段对应的路由表项优先级最高,高于来自其他路由协议的相同网段的路由表项优先级,例如,直连网段10.10.10.0/24的路由表项优先级最高,必定高于来自路由协议的关于其他分析服务器组的10.10.10.0/24网段路由表项,从而导致网关路由器A无法知道去往其他分析服务器组的路由表项。因此,在发现自己所接入的一分析服务器异常时,网关路由器A需要先抑制本地路由表中的10.10.10.0/24直连路由网段表项,即将直连网段的10.10.10.0/24路由表项的优先级降低至路由协议之下。
在抑制本地路由表中的10.10.10.0/24直连路由网段表项之后,来自路由协议的关于其他网关路由器的网段10.10.10.0/24的路由表项会新生效。例如网关路由器A发现其分析服务器A1:10.10.10.3/24异常,则会抑制本地路由表中的10.10.10.0/24直连路由网段表项,此时关于网关路由器B的网段10.10.10.0/24的路由表项会新生效。
网关路由器A在接收到识别任务后,将识别任务复制为三份,分别对应10.10.10.3/24、10.10.10.4/24和10.10.10.5/24,对于正常的10.10.10.4/24和10.10.10.5/24两个分析服务器,直接转发过去,源IP地址修改网关路由器A的IP地址;而对于异常的10.10.10.3/24,网关路由器A根据新生效的10.10.10.0/24的路由表项Entry,可以获得该路由表项的下一跳路由器地址和出接口,并根据该下一跳地址从本地ARP表中获得对应的MAC地址。目的IP是10.10.10.3/24,目的MAC地址封装为该MAC地址,根据路由表项Entry的出接口发送出去。该识别任务报文由下一跳路由器接收后,会转发给其他某个分析服务器组的10.10.10.3的分析服务器,内含识别任务序列号。
本实施例第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,存在两种处理方式。
处理方式一:第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在将自身所接入的各个分析服务器以及第二网关路由器下的分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
具体的,网关路由器A在接收到识别任务后,将识别任务复制为三份,分别对应10.10.10.3/24、10.10.10.4/24和10.10.10.5/24。对于正常的分析服务器A2:10.10.10.4/24和分析服务器A3:10.10.10.5/24两个分析服务器,将源IP地址修改为网关路由器A的IP地址,直接转发过去;由于分析服务器A1:10.10.10.3/24异常,网关路由器A根据新生效的路由表项,将复制的识别任务发送至网关路由器B,该报文的源地址被修改为网关路由器A的地址,网关路由器B接收后,发送给分析服务器B1:10.10.10.3/24。
分析服务器B1在识别后,需要将识别结果反馈给平台服务器,根据识别任务的源IP地址,是发给网关路由器A。网关路由器A在接收后,发送给平台服务器。
因此对于同一个识别任务,网关路由器A均可以收到分析服务器的识别结果,并转发给平台服务器。进而网关路由器A可以向摄像机回复“识别任务处理完成”的完整回复消息,内含识别任务序列号。摄像机在收到完整的回复消息(即关于同一序列号识别任务的3个处理结果均已经发送给平台服务器的消息)之前,保存识别任务信息,如果在规定时间内未收到完整的回复消息,则重新发送识别任务;当收到了完整的回复消息,则删除识别任务,释放空间。
处理方式二:所述第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
具体的,与处理方式一不同的是,网关路由器A在将复制的识别任务发送至网关路由器B,该报文的源地址保持为原来摄像机1的IP的地址。网关路由器B接收后,发送给分析服务器B1:10.10.10.3/24,源IP地址修改为网关路由器B的IP地址。
分析服务器B1在识别后,将识别结果反馈给网关路由器B,网关路由器B将识别结果转发给平台服务器。同时网关路由器B建立了识别任务与摄像机的对应关系,可以根据识别任务的源IP地址,向摄像机1发送回复消息。
本实施例网关路由器B将识别结果发送给平台服务器,此时网关路由器B和网关路由器A需要分别向摄像机发送“识别任务处理完成消息”,该消息还含有参与识别的分析服务器的数量标识或IP地址,这样摄像机在收到后,就可以知道该分析任务是否已经识别完成。例如网关路由器A发送的是“识别任务处理完成+2”,网关路由器B发送的是“识别任务处理完成+1”,从而摄像机知道3个分析服务器完成了识别,则删除该识别任务。而如果未收到其中任何一个,则认为未收到完整的回复消息,重新发送识别任务。
本实施例中,每个网关路由器仅对目的IP地址为网段地址的识别任务进行1对3的复制。而对于目的IP地址为自己管理的分析服务器的识别任务,则不进行复制处理。
实施例
上述实施例2对于本地分析路由器异常的网关路由器,需要网关路由器先抑制本地10.10.10.0/24的网段路由表项,然后代理转发识别任务给其他分析服务器,比较消耗资源。本实施例提出了另外一种技术方案,如下:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,向第二网关路由器发送“主机路由请求消息”,携带所述异常服务器的IP地址,第二网关路由器在收到后,发布关于所述异常服务器的IP地址的主机路由;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
具体的,网关路由器A当本地的10.10.10.3分析服务器的服务异常,则网关路由器A向其他网关路由器B发送“主机路由请求消息”,内含地址“10.10.10.3”。所有收到“主机路由请求消息”的网关路由器向当前路由协议注入10.10.10.3/32的主机路由。该主机路由会向全网进行传播,网关路由器A也会收到该路由表项。
当网关路由器A收到来自摄像机的识别任务时,向本地的10.10.10.4和10.10.10.5两个正常分析服务器转发识别任务(即,目的IP分别修改为10.10.10.4、10.10.10.5,源IP修改为网关路由器A的地址)。而发送给异常分析服务器10.10.10.3/24的第一识别任务,则通过主机路由发送。网关路由器B在接收到第一识别任务后,发现目的地址为自身所接入的分析服务器,将其发送给分析服务器B1:10.10.10.3/24。
本实施例第一网关路由器通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,存在两种处理方式。
处理方式一:
所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述第一识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器以及第二网关路由器下的分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
处理方式二:
所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
关于上述两种处理方式,与实施例2中类似,这里不再赘述。
本实施例由于网关路由器A没有10.10.10.3/32的本地主机路由表项,因此不必进行本地路由表项抑制的操作。
需要说明的是,对于网关路由器A来说,当本地服务失效的10.10.10.3分析服务器重新生效,网关路由器A又可以与其进行交互。则网关路由器A恢复原来的工作方式,如实施例1所述,这里不再赘述。在实施例3中,网关路由器A向所有其他网关路由器发送“主机路由撤销请求”,内含10.10.10.3/32的主机路由表项。收到消息的其他网关路由器则撤销原先发布的含10.10.10.3/32的主机路由,从而节约全网路由器的路由表项。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (7)
1.一种多服务器协同的车牌识别及车辆管理系统,包括分布在网络中的摄像机,所述网络包括中间路由器和网关路由器,其特征在于,所述多服务器协同的车牌识别及车辆管理系统,还包括接入到网络中的平台服务器、以及通过网关路由器接入到网络中的至少两个分析服务器组,每个分析服务器组包括至少三台分析服务器,同一个分析服务器组中各分析服务器的IP地址处于相同的网段且不同,不同分析服务器组中各分析服务器的IP地址相同设置,其中:
所述摄像机,将抓拍的车辆图像作为识别任务,以分析服务器组网段地址为目的地址发送识别任务;
所述中间路由器,以最短路径路由表项转发识别任务;
所述网关路由器,在接收到目的地址为自身接口所属网段的网段IP地址的识别任务后,将识别任务复制,将源IP地址修改为所述网关路由器的地址,分别发送至所接入的各个分析服务器;
所述分析服务器,对接收的识别任务进行识别,将自己的识别结果通过网关路由器发送至平台服务器,由平台服务器判定出最后的识别结果;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,则抑制本地路由表中直连网段路由表项;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
2.根据权利要求1所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
3.根据权利要求1所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述第一识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在将自身所接入的各个分析服务器以及第二网关路由器下的分析服务器的识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机缓存已发送的识别任务,并在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
4.根据权利要求1所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述第一网关路由器将本应发往异常服务器的第一识别任务通过新生效的关于第二网关路由器的网段路由表项发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
5.根据权利要求1所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述多服务器协同的车牌识别及车辆管理系统,还包括:
每个网关路由器监听自己所接入的分析服务器的状态;
当第一网关路由器发现自己所接入的一分析服务器异常时,向第二网关路由器发送“主机路由请求消息”,携带异常服务器的IP地址,第二网关路由器在收到后,发布关于所述异常服务器的IP地址的主机路由;
第一网关路由器将识别任务复制后,向自己所接入的正常分析服务器转发识别任务,并通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送;
第二网关路由器在接收到所述第一识别任务后,向自身所接入的对应分析服务器转发。
6.根据权利要求5所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为第一网关路由器的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,直接进行转发;
所述第二网关路由器所接入的分析服务器对所述第一识别任务的识别结果通过第一网关路由器发送给平台服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的各个分析服务器以及第二网关路由器下的分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成”的回复消息;
所述摄像机在收到“识别任务处理完成”的回复消息后,删除本地对应的识别任务,如果在规定的时间内未收到回复消息,则重新发送识别任务。
7.根据权利要求5所述的多服务器协同的车牌识别及车辆管理系统,其特征在于,所述通过第二网关路由器发布的主机路由,将发往所述异常服务器的第一识别任务发送,发送时目的IP地址为所述异常服务器的IP地址,源地址为摄像机的IP地址;
所述第二网关路由器对于目的IP地址为自己管理的分析服务器的第一识别任务,记录识别任务对应的序列号,建立序列号与摄像机的对应关系,将源IP地址修改为自身的IP地址,转发给自己管理的分析服务器;
所述多服务器协同的车牌识别及车辆管理系统,还包括:
所述第一网关路由器记录识别任务对应的序列号,建立序列号与摄像机的对应关系,并在自身所接入的正常分析服务器均将识别结果发送给平台服务器后,向识别任务对应的摄像机发送“识别任务处理完成+第一标识”的回复消息;
所述第二网关路由器将自身分析服务器对所述第一识别任务的识别结果转发给平台服务器,并向摄像机发送“识别任务处理完成+第二标识”的回复消息;
所述摄像机在收到回复消息后,判断是否完整,如果完整则删除本地对应的识别任务,如果在规定的时间内未收到完整的回复消息,则重新发送识别任务。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311176501.0A CN116915786B (zh) | 2023-09-13 | 2023-09-13 | 一种多服务器协同的车牌识别及车辆管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311176501.0A CN116915786B (zh) | 2023-09-13 | 2023-09-13 | 一种多服务器协同的车牌识别及车辆管理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116915786A CN116915786A (zh) | 2023-10-20 |
CN116915786B true CN116915786B (zh) | 2023-12-01 |
Family
ID=88365337
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311176501.0A Active CN116915786B (zh) | 2023-09-13 | 2023-09-13 | 一种多服务器协同的车牌识别及车辆管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116915786B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012253681A (ja) * | 2011-06-06 | 2012-12-20 | Mitsubishi Electric Corp | 通信ネットワークシステム |
CN104601959A (zh) * | 2015-01-29 | 2015-05-06 | 浙江宇视科技有限公司 | 一种视频监控系统及其快速接入网络摄像机的方法 |
CN104618693A (zh) * | 2015-02-09 | 2015-05-13 | 北京邮电大学 | 一种基于云计算的监控视频在线处理任务管理方法及系统 |
CN105890609A (zh) * | 2016-06-02 | 2016-08-24 | 同济大学 | 一种基于分布式动态路网的路径规划方法及系统 |
CN107610431A (zh) * | 2017-08-04 | 2018-01-19 | 西安电子科技大学 | 一种异常分析与报警控制系统及方法 |
CN110288837A (zh) * | 2019-07-12 | 2019-09-27 | 云宝宝大数据产业发展有限责任公司 | 一种多摄像机协同的违停车牌识别方法及装置 |
CN111771364A (zh) * | 2018-01-10 | 2020-10-13 | 爱维士软件有限责任公司 | 经由dns属性在远程网络中进行基于云的异常流量检测和保护 |
WO2021159842A1 (zh) * | 2020-09-22 | 2021-08-19 | 平安科技(深圳)有限公司 | 人脸抓拍架构及其人脸抓拍方法、装置、设备及存储介质 |
-
2023
- 2023-09-13 CN CN202311176501.0A patent/CN116915786B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012253681A (ja) * | 2011-06-06 | 2012-12-20 | Mitsubishi Electric Corp | 通信ネットワークシステム |
CN104601959A (zh) * | 2015-01-29 | 2015-05-06 | 浙江宇视科技有限公司 | 一种视频监控系统及其快速接入网络摄像机的方法 |
CN104618693A (zh) * | 2015-02-09 | 2015-05-13 | 北京邮电大学 | 一种基于云计算的监控视频在线处理任务管理方法及系统 |
CN105890609A (zh) * | 2016-06-02 | 2016-08-24 | 同济大学 | 一种基于分布式动态路网的路径规划方法及系统 |
CN107610431A (zh) * | 2017-08-04 | 2018-01-19 | 西安电子科技大学 | 一种异常分析与报警控制系统及方法 |
CN111771364A (zh) * | 2018-01-10 | 2020-10-13 | 爱维士软件有限责任公司 | 经由dns属性在远程网络中进行基于云的异常流量检测和保护 |
CN110288837A (zh) * | 2019-07-12 | 2019-09-27 | 云宝宝大数据产业发展有限责任公司 | 一种多摄像机协同的违停车牌识别方法及装置 |
WO2021159842A1 (zh) * | 2020-09-22 | 2021-08-19 | 平安科技(深圳)有限公司 | 人脸抓拍架构及其人脸抓拍方法、装置、设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
基于IPv6选播路由协议的负载平衡研究;柳溶, 王建新, 杨路明;计算机工程与应用(第36期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116915786A (zh) | 2023-10-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4496217B2 (ja) | ネットワーク上の装備の間の通信制御方法及びそれに用いる通信制御装置 | |
US7518983B2 (en) | Proxy response apparatus | |
RU2574812C9 (ru) | Способ и узел детектирования маршрута в сети передачи данных | |
US20130033978A1 (en) | Source Alive Route Injection | |
US11044184B2 (en) | Data packet loss detection | |
WO2020057445A1 (zh) | 一种通信系统、方法及装置 | |
WO2015079284A1 (en) | Methods and systems for processing internet protocol packets | |
CN112039710A (zh) | 服务故障处理方法、终端设备及可读存储介质 | |
CN103516821A (zh) | 地址解析方法及相应的系统、交换机和服务器 | |
CN109743250B (zh) | 组播报文的传输方法、第一网络设备和第二网络设备 | |
CN111600929B (zh) | 传输线路探测方法、路由策略生成方法及代理服务器 | |
CN116915786B (zh) | 一种多服务器协同的车牌识别及车辆管理系统 | |
CN101345678B (zh) | 组播通信方法、系统及组播通信设备 | |
CN109412942B (zh) | 云网传输路由方法和系统 | |
CN110661836B (zh) | 消息路由方法、装置及系统、存储介质 | |
CN112583875A (zh) | 一种资产扫描方法及装置 | |
US10649870B1 (en) | Reliable map-reduce communications in a decentralized, self-organizing communication orbit of a distributed network | |
CN115174528A (zh) | 一种设备地址管控方法、装置及系统 | |
CN114090342A (zh) | 存储容灾的链路管理方法及消息执行节点、存储控制集群 | |
CN109361781B (zh) | 报文转发方法、装置、服务器、系统及存储介质 | |
EP3435615A1 (en) | Network service implementation method, service controller, and communication system | |
JP4413539B2 (ja) | 経路制御方法、そのデータ集約装置および経路制御システム | |
US10405180B2 (en) | Stub network establishing method, device and system, and storage medium | |
CN116915777B (zh) | 一种坐席人员协同的智能停车管理系统及方法 | |
CN104426699A (zh) | 通信方法、服务器及通信系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |