CN112030814A - 一种虚拟道闸系统和虚拟道闸的控制方法 - Google Patents

一种虚拟道闸系统和虚拟道闸的控制方法 Download PDF

Info

Publication number
CN112030814A
CN112030814A CN202011063302.5A CN202011063302A CN112030814A CN 112030814 A CN112030814 A CN 112030814A CN 202011063302 A CN202011063302 A CN 202011063302A CN 112030814 A CN112030814 A CN 112030814A
Authority
CN
China
Prior art keywords
vehicle
control signal
virtual barrier
barrier gate
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011063302.5A
Other languages
English (en)
Inventor
李书福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Geely Holding Group Co Ltd
Original Assignee
Zhejiang Geely Holding Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Geely Holding Group Co Ltd filed Critical Zhejiang Geely Holding Group Co Ltd
Priority to CN202011063302.5A priority Critical patent/CN112030814A/zh
Publication of CN112030814A publication Critical patent/CN112030814A/zh
Priority to EP20956114.1A priority patent/EP4206403A4/en
Priority to US18/029,168 priority patent/US20230274595A1/en
Priority to PCT/CN2020/139063 priority patent/WO2022068098A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01FADDITIONAL WORK, SUCH AS EQUIPPING ROADS OR THE CONSTRUCTION OF PLATFORMS, HELICOPTER LANDING STAGES, SIGNS, SNOW FENCES, OR THE LIKE
    • E01F13/00Arrangements for obstructing or restricting traffic, e.g. gates, barricades ; Preventing passage of vehicles of selected category or dimensions
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • G03H1/0011Adaptation of holography to specific applications for security or authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2227/00Mechanical components or mechanical aspects not otherwise provided for
    • G03H2227/03Means for moving one component
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2021Shape modification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/10Movable barriers with registering means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Architecture (AREA)
  • Structural Engineering (AREA)
  • Civil Engineering (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Holo Graphy (AREA)

Abstract

本发明提供了一种虚拟道闸系统和虚拟道闸的控制方法。该虚拟道闸系统包括控制装置和与控制装置连接的全息投影装置;其中,控制装置配置为基于启动信号生成第一控制信号并将第一控制信号发送至全息投影装置;全息投影装置配置为根据第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。通过利用空气全息投影技术将实体道闸虚拟化为空气全息投影影像而得到的虚拟道闸,科技含量高,不易发生机械故障,也不会发生道闸砸坏车辆或砸伤行人的事件,无需专人守护,从而提高道闸的安全性并减少人力成本。并且,虚拟道闸的三维全息图像的指定形状可以预先设定且形式多样,使虚拟道闸可用于不同的应用场所,增强虚拟道闸的适应性。

Description

一种虚拟道闸系统和虚拟道闸的控制方法
技术领域
本发明涉及通道设备技术领域,特别是一种虚拟道闸系统和虚拟道闸的控制方法。
背景技术
道闸是一种广泛应用于通道对车辆、行人等的出入进行管理的设备。现有技术中,道闸通常为机械机构,主要由转动杠杆和转动机构组成。这种机械结构的道闸易发生故障,且易发生砸坏车辆或砸伤行人的事件,往往需要现场专人看守维护。一旦道闸的部件发生故障或损坏,不易进行更换。另外,对于这种道闸,广告等宣传品通常都是通过粘贴方式设置在道闸表面,切换或更改宣传品比较困难。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的虚拟道闸系统和虚拟道闸的控制方法。
本发明的一个目的是提供一种虚拟道闸系统和虚拟道闸的控制方法,通过空气全息投影技术将实体道闸虚拟化,解决现有的道闸易发生机械故障、易砸坏车辆或砸伤行人、需专人守护的问题。
本发明一个进一步的目的是通过识别目标物体的属性,并根据目标物体的属性更改所投影的虚拟道闸的三维全息图像,实现目标针对性的道闸影像切换。
特别地,根据本发明实施例的一方面,提供了一种虚拟道闸系统,包括控制装置和与控制装置连接的全息投影装置;其中
控制装置配置为基于启动信号生成第一控制信号并将第一控制信号发送至全息投影装置;
全息投影装置配置为根据第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。
可选地,三维全息图像中包含特定文字或图案;
全息投影装置还配置为根据预设规则对特定文字或图案进行切换。
可选地,虚拟道闸系统还包括:
第一图像采集分析装置,与控制装置连接,配置为采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据,对图像数据进行识别得到第一指定区域内的目标物体的属性,并将目标物体的属性发送至控制装置;
控制装置还配置为根据目标物体的属性生成第二控制信号并将第二控制信号发送至全息投影装置;
全息投影装置还配置为根据第二控制信号更改向预设位置投影的三维全息图像。
可选地,目标物体为车辆;
属性包括下列至少之一:车牌号码、车型、颜色。
可选地,特定文字包含与车辆的属性匹配的欢迎语;
控制装置还配置为根据车辆的属性生成第三控制信号并将第三控制信号发送至全息投影装置;
全息投影装置还配置为根据第三控制信号在三维全息图像中显示与车辆的属性匹配的欢迎语。
可选地,虚拟道闸系统还包括分别与控制装置连接的第二图像采集分析装置和告警装置;
第二图像采集分析装置配置为采集在车辆朝向预设位置行驶的方向上预设位置之前的第二指定区域内的图像数据,对图像数据进行处理得到第二指定区域内的车辆的行驶数据,并将车辆的行驶数据发送至控制装置;
控制装置还配置为根据车辆的行驶数据生成告警信号并将告警信号发送至告警装置;
告警装置配置为根据告警信号进行告警。
可选地,预设位置为车库的入口或出口,全息投影装置设置于车库的入口或出口处的顶棚或侧壁上。
根据本发明实施例的另一方面,还提供了一种虚拟道闸的控制方法,包括:
基于启动信号生成第一控制信号;
根据第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。
可选地,三维全息图像中包含特定文字或图案;
该方法还包括:
根据预设规则对特定文字或图案进行切换。
可选地,该方法还包括:
采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据,对图像数据进行识别得到第一指定区域内的目标物体的属性;
根据目标物体的属性生成第二控制信号,并根据第二控制信号更改向预设位置投影的三维全息图像。
可选地,目标物体为车辆,特定文字包含与车辆的属性匹配的欢迎语;
该方法还包括:
根据车辆的属性生成第三控制信号,并根据第三控制信号在三维全息图像中显示与车辆的属性匹配的欢迎语。
可选地,目标物体为车辆;
在采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据之前,该方法还包括:
采集在车辆朝向预设位置行驶的方向上预设位置之前的第二指定区域内的图像数据,对图像数据进行处理得到第二指定区域内的车辆的行驶数据;
根据车辆的行驶数据生成告警信号,并根据告警信号进行告警。
本发明实施例提出的虚拟道闸系统和虚拟道闸的控制方法,根据基于启动信号生成的第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。通过利用空气全息投影技术将实体道闸虚拟化为空气全息投影影像而得到的虚拟道闸,科技含量高,不易发生机械故障,也不会发生道闸砸坏车辆或砸伤行人的事件,无需专人守护,从而提高道闸的安全性并减少人力成本。并且,虚拟道闸的三维全息图像的指定形状可以预先设定且形式多样,使虚拟道闸可用于不同的应用场所,增强虚拟道闸的适应性。
进一步地,本发明实施例的方案还可通过识别即将通过虚拟道闸的目标物体的属性,进而根据基于目标物体的属性生成的第二控制信号更改所投影的三维全息图像,实现目标针对性的道闸影像切换,从而提升通过道闸的目标人员的使用体验。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
根据下文结合附图对本发明具体实施例的详细描述,本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一实施例的虚拟道闸系统的结构示意图;
图2示出了根据本发明另一实施例的虚拟道闸系统的结构示意图;
图3示出了根据本发明一实施例的虚拟道闸系统的应用场景示意图;
图4示出了根据本发明一实施例的虚拟道闸的控制方法的流程示意图;
图5示出了根据本发明另一实施例的虚拟道闸的控制方法的流程示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
为解决或部分解决上述技术问题,本发明实施例提出一种虚拟道闸系统。
图1示出了根据本发明一实施例的虚拟道闸系统10的结构示意图。参见图1所示,虚拟道闸系统10至少可以包括控制装置100和与控制装置100连接的全息投影装置200。
控制装置100可基于启动信号生成第一控制信号,并将第一控制信号发送至全息投影装置200。启动信号可以是由用户输入的,例如通过控制装置100的用户交互界面输入,也可以是根据预设触发条件生成的,例如,当预设时间到达时由控制装置100自动生成启动信号。
全息投影装置200根据接收的第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。预设位置可以是需进行目标物体出入管理的任何位置,例如红绿灯路口、高速公路收费站、停车场出入口、小区出入口等。全息投影装置200利用空气全息投影技术进行三维全息图像投影。全息投影技术也称虚拟成像技术,指利用干涉和衍射原理记录并再现物体真实的三维图像的技术。空气全息投影技术为全息投影技术中的前沿技术,其可脱离介质的依赖,实现全息三维立体的空中成像,从而实现对任意物体的无介质的全方位立体影像化。
本发明实施例提出的虚拟道闸系统10中,全息投影装置200根据控制装置100的第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。通过利用空气全息投影技术将实体道闸虚拟化为空气全息投影影像而得到的虚拟道闸,科技含量高,不易发生机械故障,也不会发生道闸砸坏车辆或砸伤行人的事件,无需专人守护,从而提高道闸的安全性并减少人力成本。
另外,全息投影装置200所投影的三维全息图像的指定形状可以预先设定。例如,可以将投影的三维全息图像的形状设置成人物、特定吉祥物、大门等的形状,从而可以全息投影人物、特定吉祥物或大门等的影像作为虚拟道闸。或者,也可以将全息投影装置200所投影的三维全息图像的指定形状设置成类似于现有道闸的升降杆的水平转动杆的形状,从而使得虚拟道闸的视觉效果更接近于目前采用的实体道闸。由此,通过预先设定不同形式的虚拟道闸的三维全息图像的指定形状,可实现形式多样的虚拟道闸,使虚拟道闸可用于不同的应用场所,增强虚拟道闸的适应性。
在一个实施例中,全息投影装置200在进行三维全息图像的投影时,还可以在投影的三维全息图像中增加特定的文字或图案。文字例如可以是广告标语、宣传语、欢迎语等,图案例如可以是广告画面、品牌标识等。并且,全息投影装置200还可以根据预设规则对这些特定的文字或图案进行切换,例如,根据预设的顺序和周期顺序切换,或根据控制装置100的指示进行切换。由此,本发明实施例的虚拟道闸系统10能够实现广告等宣传品的快速切换,解决现有道闸更改广告困难的问题。
在一个实施例中,参见图2所示,虚拟道闸系统10还可以包括第一图像采集分析装置300。第一图像采集分析装置300与控制装置100连接。第一图像采集分析装置300采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据,对该图像数据进行识别得到第一指定区域内的目标物体的属性,并将目标物体的属性发送至控制装置100。第一指定区域为物体朝向该预设位置移动但尚未到达该预设位置时所处于的邻近该预设位置的一个区域。目标物体例如可以为车辆、行人等。目标物体的属性指可用于区分不同目标物体的物体特性。例如,当车辆为目标物体时,其属性可包括车牌号码、车型、颜色等。
在这种情况下,控制装置100还可以根据目标物体的属性生成第二控制信号并将第二控制信号发送至全息投影装置200。进而,全息投影装置200还可以根据第二控制信号更改向预设位置投影的三维全息图像。具体地,可以更改向预设位置投影的三维全息图像的形状。
例如,假设全息投影装置200根据第一控制信号向预设位置投影的三维全息图像为关闭的大门的影像,当第一图像采集分析装置300对采集的第一指定区域内的图像数据进行识别得到第一指定区域内的行人的属性(表明有行人即将通过预设位置)时,控制装置100根据识别得到的行人的属性生成第二控制信号,进而全息投影装置200根据第二控制信号将投影的三维全息图像更改为打开的大门的影像。在行人通过预设位置后,全息投影装置200可以将投影的三维全息图像恢复为关闭的大门影像。
又例如,假设全息投影装置200根据第一控制信号向预设位置投影的三维全息图像为水平转动杆的影像,当第一图像采集分析装置300对采集的第一指定区域内的图像数据进行识别得到第一指定区域内的车辆的属性时,控制装置100根据识别得到的车辆的属性判断该车辆可通过,则生成第二控制信号,进而全息投影装置200根据第二控制信号将投影的三维全息图像更改为水平转动杆上抬的影像。在车辆通过预设位置后,全息投影装置200可以将投影的三维全息图像恢复为水平转动杆影像。
本发明实施例中通过第一图像采集分析装置300识别即将通过虚拟道闸的目标物体的属性,进而全息投影装置200可根据控制装置100基于目标物体的属性生成的第二控制信号更改所投影的三维全息图像,实现目标针对性的道闸影像切换,从而提升通过道闸的目标人员的使用体验。
具体地,第一图像采集分析装置300可以是第一摄像头。第一摄像头可采用现有的识别方法对采集的图像数据进行识别得到目标物体的属性,本领域技术人员应可知晓,本文不另赘述。
在一个实施例中,在全息投影装置200所投影的三维全息图像中增加有特定的文字或图案的情况下,控制装置100还可以根据目标物体的属性生成第三控制信号并将第三控制信号发送至全息投影装置200。进而,全息投影装置200还可以根据第三控制信号切换三维全息图像中的特定文字或图案。特别地,在目标物体为车辆的情况下,目标物体的属性可以包括车牌号码、车型、颜色等。本领域技术人员可以理解,不同的车牌号码、车型、颜色等(特别是车牌号码)往往可以表征车辆的驾驶员或乘客的不同身份。因此,通过控制装置100根据车辆的属性生成第三控制信号,进而全息投影装置200根据第三控制信号切换三维全息图像中的特定文字或图案,可实现个性化的文字或图案的呈现。在一种具体的实施方案中,特定文字或图案例如可以为与车辆的属性匹配的欢迎语或欢迎图片等。相应地,全息投影装置200可根据第三控制信号在三维全息图像中显示与车辆的属性匹配的欢迎语或欢迎图片。例如,当识别出的车牌号码表征车辆的驾驶员或乘客为客人时,全息投影装置200可以将三维全息图像(即虚拟道闸)中的欢迎语切换为“欢迎光临”;当识别出的车牌号码表征车辆的驾驶员或乘客为高层领导时,全息投影装置200可以将三维全息图像中的欢迎语切换为“欢迎领导莅临指导”;当识别出的车牌号码表征车辆的驾驶员或乘客为员工时,全息投影装置200可以将三维全息图像中的欢迎语切换为“创新拼搏,精益求精”,等等。通过这种个性化的文字或图案的呈现,实现针对不同目标人物的场景化的操作,使用体验更佳。
另外,需要说明的是,在全息投影装置200已配置为根据预设规则对三维全息图像中的特定文字或图案进行切换的情况下,可设置全息投影装置200在接收到第三控制信号时优先根据第三控制信号切换三维全息图像中的特定文字或图案,以针对目标物体在虚拟道闸上个性化地呈现文字或图案。
在一个实施例中,继续参见图2所示,在目标物体为车辆的情况下,虚拟道闸系统10还可以包括第二图像采集分析装置400。第二图像采集分析装置400与控制装置100连接。第二图像采集分析装置400采集在车辆朝向预设位置行驶的方向上预设位置之前的第二指定区域内的图像数据,对采集的图像数据进行处理得到第二指定区域内的车辆的行驶数据,并将车辆的行驶数据发送至控制装置。此处的行驶数据可包括行驶速度、行驶车道、驾驶员状态(如驾驶员是否系好安全带)等。具体地,第二图像采集分析装置400可以是第二摄像头。第二摄像头可采用现有的处理方法对采集的图像数据进行处理得到车辆的行驶数据,本领域技术人员应可知晓,本文不另赘述。通过设置第二图像采集分析装置,可以监控即将通过预设位置处的虚拟道闸的车辆的行驶状态,从而及时发现车辆的违章行为。
在实际应用中,第一指定区域和第二指定区域可以是相同或不同的区域。当第一指定区域与第二指定区域为相同区域时,第一图像采集分析装置300和第二图像采集分析装置400可以采用同一个摄像头,从而减少系统的部件数量,降低成本。当第一指定区域与第二指定区域为不同区域时,第二指定区域在车辆朝向预设位置行驶的方向上可位于第一指定区域之前,第一图像采集分析装置300和第二图像采集分析装置400由独立的两个摄像头实现。由于车辆在到达邻近虚拟道闸所在位置的第一指定区域时通常速度已降至很低,此时得到的车辆的行驶数据无法反映车辆在行驶途中真正的行驶状态,因此,通过第二图像采集分析装置400采集分析得到在第一指定区域之前的第二指定区域内的车辆的行驶数据,能够更准确地反映车辆的行驶状态,从而更准确地发现车辆的违章行为。
进一步地,在一个实施例中,继续参见图2所示,虚拟道闸系统10还可以包括与控制装置100连接的告警装置500。在这种情况下,控制装置100在接收到第二图像采集分析装置400发送的车辆的行驶数据后,根据车辆的行驶数据生成告警信号并将告警信号发送至告警装置500。具体地,控制装置100可根据车辆的行驶数据判断车辆是否存在违章行为(例如,是否超速行驶、是否违规使用车道等),若存在违章行为,则生成告警信号并将告警信号发送至告警装置500。进而,告警装置500根据接收到的告警信号进行告警。告警装置500进行告警的方式可以包括语音告警、图像显示(如文字或画面)告警等。
在一些实施例中,告警装置500可以与全息投影装置200集成为一体(例如,可以在全息投影装置200集成告警功能来实现告警装置500)。在接收到来自控制装置100的告警信号时,全息投影装置200可以直接在投影的三维全息图像中增加告警信息(如文字或画面信息),以提示车辆驾驶员存在违章行为。
进一步地,在一个实施例中,第二图像采集分析装置400在处理得到车辆的行驶数据的同时,还可以对采集的图像数据进行识别得到第二指定区域内的车辆的属性,并将得到的车辆的属性与车辆的行驶数据一起发送至控制装置100。控制装置在接收到第一图像采集分析装置300当前发送的第一指定区域内的车辆的属性(不妨称为第一车辆的属性)和第二图像采集分析装置400发送的第二指定区域内的车辆的属性(不妨称为第二车辆的属性)后,判断第一车辆的属性与第二车辆的属性是否一致,若一致,则将根据第二指定区域内的车辆的行驶数据生成的告警信号发送至与全息投影装置200集成为一体的告警装置500,进而由全息投影装置200对虚拟道闸前的第一指定区域内的车辆进行告警。这种方式特别适用于车流量较大和/或第一指定区域与第二指定区域相距较远的情况,能够保证告警的针对性和准确性。
另外,在控制装置100判断出车辆存在违章行为后,控制装置100还可以通过网络连接部件将车辆的违章行为上传至车辆管理中心进行记录。
通过这种方式,可以实时监控车辆的违章行为并进行相应处理,从而更有效地约束车辆的行驶行为。本发明的虚拟道闸系统10特别适用于车库的通行管理。图3示出了根据本发明一实施例的虚拟道闸系统10的应用场景示意图。如图3所示,虚拟道闸系统10应用于车库(如地下车库)。在这种情况下,预设位置可以为车库的入口或出口(图3中具体为车库的入口)。全息投影装置200可设置于车库的入口或出口处的顶棚或侧壁上,向车库的入口或出口处投影三维全息图像以构成虚拟道闸。全息投影装置200的位置可正对车库的入口或出口或在车库的入口或出口的附近。第一摄像头300可设置在邻近全息投影装置200的位置,用于采集虚拟道闸前的车辆的图像数据,识别得到车辆的属性。第二摄像头400与第一摄像头300相比设置在相对远离车库的入口或出口的位置,用于采集向虚拟道闸行驶途中的车辆的图像数据,处理得到车辆的行驶数据。需要说明的是,图3中未示出控制装置100,在实际应用中,控制装置100可设置在车库的中控室或任何其他适当的位置,只要可保证与全息投影装置200、第一摄像头300和第二摄像头400的连接通信即可。本实施例不仅实现了实体道闸虚拟化,克服了现有的实体道闸易发生机械故障、易砸坏车辆或砸伤行人、需专人守护的问题,还实现了目标针对性的影像的灵活、快速切换,同时还可有效地监控车辆的行驶行为。
基于同一技术构思,本发明实施例还提供了一种虚拟道闸的控制方法。
图4示出了根据本发明一实施例的虚拟道闸的控制方法的流程示意图。参见图4所示,该方法至少可以包括以下步骤S402至步骤S404。
步骤S402,基于启动信号生成第一控制信号。
启动信号可以是由用户输入的,也可以是根据预设触发条件生成的,例如,当预设时间到达时自动生成启动信号。
步骤S404,根据第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。
本步骤中利用空气全息投影技术进行三维全息图像的投影。空气全息投影技术可脱离介质的依赖,实现全息三维立体的空中成像,从而实现对任意物体的无介质的全方位立体影像化。预设位置可以是需进行目标物体出入管理的任何位置,例如红绿灯路口、高速公路收费站、停车场出入口、小区出入口等。
本发明实施例提供的虚拟道闸的控制方法中,通过利用空气全息投影技术将实体道闸虚拟化为空气全息投影影像而得到的虚拟道闸,科技含量高,不易发生机械故障,也不会发生道闸砸坏车辆或砸伤行人的事件,无需专人守护,从而提高道闸的安全性并减少人力成本。
另外,所投影的三维全息图像的指定形状可以预先设定。例如,可以将投影的三维全息图像的形状设置成人物、特定吉祥物、大门、甚至类似于现有道闸的升降杆的水平转动杆等的形状。通过预先设定不同形式的虚拟道闸的三维全息图像的指定形状,可实现形式多样的虚拟道闸,使虚拟道闸可用于不同的应用场所,增强虚拟道闸的适应性。
在一个实施例中,所投影的三维全息图像中可包含特定文字或图案。文字例如可以是广告标语、宣传语、欢迎语等,图案例如可以是广告画面、品牌标识等。在这种情况下,本发明的虚拟道闸的控制方法在投影显示三维全息图像的过程中还可以执行以下步骤:根据预设规则对三维全息图像中的特定文字或图案进行切换。例如,根据预设的顺序和周期顺序切换,或根据相应的控制指令进行切换等。由此,本发明实施例能够实现广告等宣传品的快速切换,解决现有道闸更改广告困难的问题。
在一个实施例中,参见图5所示,本发明的虚拟道闸的控制方法还可以包括以下步骤:
步骤S406,采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据,对图像数据进行识别得到第一指定区域内的目标物体的属性。
第一指定区域为物体朝向该预设位置移动但尚未到达该预设位置时所处于的邻近该预设位置的一个区域。目标物体例如可以为车辆、行人等。目标物体的属性指可用于区分不同目标物体的物体特性。例如,当车辆为目标物体时,其属性可包括车牌号码、车型、颜色等。
步骤S408,根据目标物体的属性生成第二控制信号,并根据第二控制信号更改向预设位置投影的三维全息图像。
本步骤中,具体地可以根据第二控制信号更改向预设位置投影的三维全息图像的形状。
例如,假设步骤S404中根据第一控制信号向预设位置投影的三维全息图像为水平转动杆的影像,当对采集的第一指定区域内的图像数据进行识别得到第一指定区域内的车辆的属性时,则根据识别得到的车辆的属性生成第二控制信号,进而根据第二控制信号将投影的三维全息图像更改为水平转动杆上抬的影像。在车辆通过预设位置后,可以将投影的三维全息图像恢复为水平转动杆影像。
本发明实施例中通过识别即将通过虚拟道闸的目标物体的属性,进而可根据基于目标物体的属性生成的第二控制信号更改所投影的三维全息图像,实现目标针对性的道闸影像切换,从而提升通过道闸的目标人员的使用体验。
在一个实施例中,在所投影的三维全息图像中包含有特定文字或图案的情况下,还可以根据目标物体的属性生成第三控制信号并根据第三控制信号切换三维全息图像中的特定文字或图案。
特别地,在目标物体为车辆的情况下,目标物体的属性可以包括车牌号码、车型、颜色等。由于车辆的属性往往可以表征车辆的驾驶员或乘客的不同身份,因此,根据车辆的属性生成第三控制信号,进而根据第三控制信号切换三维全息图像中的特定文字或图案,可实现个性化的文字或图案的呈现。
进一步地,三维全息图像中的特定文字或图案可以是与车辆的属性匹配的欢迎语或欢迎图片等。相应地,可根据第三控制信号在三维全息图像中显示与车辆的属性匹配的欢迎语或欢迎图片。具体地,第三控制信号可携带车辆的属性,根据车辆的属性查找出与车辆的属性匹配的欢迎语或欢迎图片进行显示。例如,假设目标物体的属性为车辆的车牌号码,当识别出的车牌号码表征车辆的驾驶员或乘客为客人时,可以将三维全息图像(即虚拟道闸)中的欢迎语切换为“欢迎光临”;当识别出的车牌号码表征车辆的驾驶员或乘客为高层领导时,可以将三维全息图像中的欢迎语切换为“欢迎领导莅临指导”;当识别出的车牌号码表征车辆的驾驶员或乘客为员工时,可以将三维全息图像中的欢迎语切换为“创新拼搏,精益求精”,等等。通过这种个性化的文字或图案的呈现,实现针对不同目标人物的场景化的操作,使用体验更佳。
另外,需要说明的是,在投影显示三维全息图像的过程中已根据预设规则对三维全息图像中的特定文字或图案进行切换的情况下,优先根据第三控制信号切换三维全息图像中的特定文字或图案,以针对目标物体在虚拟道闸上个性化地呈现文字或图案。
在一个实施例中,在步骤S406采集在物体朝向预设位置移动的方向上预设位置之前的第一指定区域内的图像数据之前,还可以执行以下步骤:采集在车辆朝向预设位置行驶的方向上预设位置之前的第二指定区域内的图像数据,对图像数据进行处理得到第二指定区域内的车辆的行驶数据。行驶数据可包括行驶速度、行驶车道、驾驶员状态(如驾驶员是否系好安全带)等。
进一步地,可根据车辆的行驶数据生成告警信号,并根据告警信号进行告警。具体地,可根据车辆的行驶数据判断车辆是否存在违章行为(例如,是否超速行驶、是否违规使用车道等),若存在违章行为,则生成告警信号并根据告警信号进行告警。告警的方式可以包括语音告警、图像显示(如文字或画面)告警等。告警的时机可以在发现车辆存在违章行为时即进行告警,也可以在车辆进入虚拟道闸之前的第一指定区域时再进行告警。若车辆进入虚拟道闸之前的第一指定区域时再进行告警,可以通过直接在投影的三维全息图像中增加告警信息(如文字或画面信息),以提示车辆驾驶员存在违章行为。
在实际应用中,第一指定区域和第二指定区域可以是相同或不同的区域。当第一指定区域与第二指定区域为不同区域时,第二指定区域在车辆朝向预设位置行驶的方向上可位于第一指定区域之前。由于车辆在到达邻近虚拟道闸所在位置的第一指定区域时通常速度已降至很低,此时得到的车辆的行驶数据无法反映车辆在行驶途中真正的行驶状态,因此,通过采集分析得到在第一指定区域之前的第二指定区域内的车辆的行驶数据,能够更准确地反映车辆的行驶状态,从而更准确地发现车辆的违章行为。
进一步地,在一个实施例中,在对采集的第二指定区域内的图像数据进行处理得到车辆的行驶数据的同时,还可以对采集的图像数据进行识别得到第二指定区域内的车辆的属性(不妨称为第二车辆的属性)。如此,在对采集的第一指定区域内的图像数据进行识别得到车辆的属性(不妨称为第一车辆的属性)后,可判断第一车辆的属性与第二车辆的属性是否一致,若一致,则根据第二指定区域内的车辆的行驶数据生成告警信号,并对虚拟道闸前的第一指定区域内的车辆进行告警。这种方式特别适用于车流量较大和/或第一指定区域与第二指定区域相距较远的情况,能够保证告警的针对性和准确性。
另外,在判断出车辆存在违章行为后,还可以将车辆的违章行为上传至车辆管理中心进行记录。
通过这种方式,可以实时监控车辆的违章行为并进行相应处理,从而更有效地约束车辆的行驶行为。
根据上述任意一个可选实施例或多个可选实施例的组合,本发明实施例能够达到如下有益效果:
本发明实施例提出的虚拟道闸系统和虚拟道闸的控制方法,根据基于启动信号生成的第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。通过利用空气全息投影技术将实体道闸虚拟化为空气全息投影影像而得到的虚拟道闸,科技含量高,不易发生机械故障,也不会发生道闸砸坏车辆或砸伤行人的事件,无需专人守护,从而提高道闸的安全性并减少人力成本。并且,虚拟道闸的三维全息图像的指定形状可以预先设定且形式多样,使虚拟道闸可用于不同的应用场所,增强虚拟道闸的适应性。
进一步地,本发明实施例的方案还可通过识别即将通过虚拟道闸的目标物体的属性,进而根据基于目标物体的属性生成的第二控制信号更改所投影的三维全息图像,实现目标针对性的道闸影像切换,从而提升通过道闸的目标人员的使用体验。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:在本发明的精神和原则之内,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案脱离本发明的保护范围。

Claims (12)

1.一种虚拟道闸系统,其特征在于,包括控制装置和与所述控制装置连接的全息投影装置;其中
所述控制装置配置为基于启动信号生成第一控制信号并将所述第一控制信号发送至所述全息投影装置;
所述全息投影装置配置为根据所述第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。
2.根据权利要求1所述的虚拟道闸系统,其特征在于,所述三维全息图像中包含特定文字或图案;
所述全息投影装置还配置为根据预设规则对所述特定文字或图案进行切换。
3.根据权利要求2所述的虚拟道闸系统,其特征在于,还包括:
第一图像采集分析装置,与所述控制装置连接,配置为采集在物体朝向所述预设位置移动的方向上所述预设位置之前的第一指定区域内的图像数据,对所述图像数据进行识别得到所述第一指定区域内的目标物体的属性,并将所述目标物体的属性发送至所述控制装置;
所述控制装置还配置为根据所述目标物体的属性生成第二控制信号并将所述第二控制信号发送至所述全息投影装置;
所述全息投影装置还配置为根据所述第二控制信号更改向所述预设位置投影的三维全息图像。
4.根据权利要求3所述的虚拟道闸系统,其特征在于,所述目标物体为车辆;
所述属性包括下列至少之一:车牌号码、车型、颜色。
5.根据权利要求4所述的虚拟道闸系统,其特征在于,所述特定文字包含与车辆的属性匹配的欢迎语;
所述控制装置还配置为根据车辆的属性生成第三控制信号并将所述第三控制信号发送至所述全息投影装置;
所述全息投影装置还配置为根据所述第三控制信号在所述三维全息图像中显示与所述车辆的属性匹配的欢迎语。
6.根据权利要求4所述的虚拟道闸系统,其特征在于,还包括分别与所述控制装置连接的第二图像采集分析装置和告警装置;
所述第二图像采集分析装置配置为采集在车辆朝向所述预设位置行驶的方向上所述预设位置之前的第二指定区域内的图像数据,对所述图像数据进行处理得到所述第二指定区域内的车辆的行驶数据,并将所述车辆的行驶数据发送至所述控制装置;
所述控制装置还配置为根据所述车辆的行驶数据生成告警信号并将所述告警信号发送至所述告警装置;
所述告警装置配置为根据所述告警信号进行告警。
7.根据权利要求1所述的虚拟道闸系统,其特征在于,所述预设位置为车库的入口或出口,所述全息投影装置设置于所述车库的入口或出口处的顶棚或侧壁上。
8.一种虚拟道闸的控制方法,其特征在于,包括:
基于启动信号生成第一控制信号;
根据所述第一控制信号向预设位置投影具有指定形状的三维全息图像作为虚拟道闸。
9.根据权利要求8所述的控制方法,其特征在于,所述三维全息图像中包含特定文字或图案;
所述方法还包括:
根据预设规则对所述特定文字或图案进行切换。
10.根据权利要求9所述的控制方法,其特征在于,还包括:
采集在物体朝向所述预设位置移动的方向上所述预设位置之前的第一指定区域内的图像数据,对所述图像数据进行识别得到所述第一指定区域内的目标物体的属性;
根据所述目标物体的属性生成第二控制信号,并根据所述第二控制信号更改向所述预设位置投影的三维全息图像。
11.根据权利要求10所述的控制方法,其特征在于,所述目标物体为车辆,所述特定文字包含与车辆的属性匹配的欢迎语;
所述方法还包括:
根据车辆的属性生成第三控制信号,并根据所述第三控制信号在所述三维全息图像中显示与所述车辆的属性匹配的欢迎语。
12.根据权利要求10所述的控制方法,其特征在于,所述目标物体为车辆;
在采集在物体朝向所述预设位置移动的方向上所述预设位置之前的第一指定区域内的图像数据之前,还包括:
采集在车辆朝向所述预设位置行驶的方向上所述预设位置之前的第二指定区域内的图像数据,对所述图像数据进行处理得到所述第二指定区域内的车辆的行驶数据;
根据所述车辆的行驶数据生成告警信号,并根据所述告警信号进行告警。
CN202011063302.5A 2020-09-30 2020-09-30 一种虚拟道闸系统和虚拟道闸的控制方法 Pending CN112030814A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202011063302.5A CN112030814A (zh) 2020-09-30 2020-09-30 一种虚拟道闸系统和虚拟道闸的控制方法
EP20956114.1A EP4206403A4 (en) 2020-09-30 2020-12-24 VIRTUAL BARRIER GATE SYSTEM AND VIRTUAL BARRIER GATE CONTROL METHOD
US18/029,168 US20230274595A1 (en) 2020-09-30 2020-12-24 Virtual barrier gate system and virtual barrier gate control method
PCT/CN2020/139063 WO2022068098A1 (zh) 2020-09-30 2020-12-24 一种虚拟道闸系统和虚拟道闸的控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011063302.5A CN112030814A (zh) 2020-09-30 2020-09-30 一种虚拟道闸系统和虚拟道闸的控制方法

Publications (1)

Publication Number Publication Date
CN112030814A true CN112030814A (zh) 2020-12-04

Family

ID=73572494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011063302.5A Pending CN112030814A (zh) 2020-09-30 2020-09-30 一种虚拟道闸系统和虚拟道闸的控制方法

Country Status (4)

Country Link
US (1) US20230274595A1 (zh)
EP (1) EP4206403A4 (zh)
CN (1) CN112030814A (zh)
WO (1) WO2022068098A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112835799A (zh) * 2021-02-04 2021-05-25 上海憧明智能科技有限公司 一种用于登机的真实模拟自助闸机系统及使用方法
WO2022068098A1 (zh) * 2020-09-30 2022-04-07 浙江吉利控股集团有限公司 一种虚拟道闸系统和虚拟道闸的控制方法
CN114387690A (zh) * 2022-01-05 2022-04-22 好停车(北京)信息技术有限公司 智能停车管理系统和方法、装置以及电子设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2800105A1 (fr) * 1999-10-22 2001-04-27 Jacky Norbert Marechal Dispositif de signalisation autonome et telecommandable
KR101485457B1 (ko) * 2014-06-26 2015-01-23 (주)파이브텍 Led와 카메라를 통한 차량출입구 무인형가상게이트장치
KR102129105B1 (ko) * 2017-04-26 2020-07-01 한국자동차연구원 교차로 차선 가이드라인 장치 및 그 방법
CN109403232A (zh) * 2018-10-04 2019-03-01 佛山市集知汇科技有限公司 一种汽车过闸系统以及过闸检测方法
CN109727484A (zh) * 2019-02-27 2019-05-07 北京猎户智芯科技有限公司 一种用于停车场出入管理的虚拟道闸系统
CN109727451A (zh) * 2019-02-28 2019-05-07 安徽理工大学 一种人行道虚拟栏杆及其实现方法
CN211256765U (zh) * 2019-09-23 2020-08-14 深圳市双盈电子科技有限公司 一种学校路段交通路口人行道安全道闸
CN111127918B (zh) * 2019-12-09 2021-08-06 东南大学 一种预防交叉口附近闯红灯行为的信号灯控制装置
KR102147872B1 (ko) * 2020-02-10 2020-08-25 김정우 횡단보도용 차량 진입방지 스크린 장치
CN111508121A (zh) * 2020-03-30 2020-08-07 北京龙德时代技术服务有限公司 可视化多色激光智能虚拟闸机控制系统
CN111364388A (zh) * 2020-04-13 2020-07-03 广州市果豆科技有限责任公司 一种结合全息投影装置的水平道闸
CN212801306U (zh) * 2020-09-30 2021-03-26 浙江吉利控股集团有限公司 一种虚拟道闸系统
CN112030814A (zh) * 2020-09-30 2020-12-04 浙江吉利控股集团有限公司 一种虚拟道闸系统和虚拟道闸的控制方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022068098A1 (zh) * 2020-09-30 2022-04-07 浙江吉利控股集团有限公司 一种虚拟道闸系统和虚拟道闸的控制方法
CN112835799A (zh) * 2021-02-04 2021-05-25 上海憧明智能科技有限公司 一种用于登机的真实模拟自助闸机系统及使用方法
CN114387690A (zh) * 2022-01-05 2022-04-22 好停车(北京)信息技术有限公司 智能停车管理系统和方法、装置以及电子设备

Also Published As

Publication number Publication date
EP4206403A4 (en) 2024-02-21
US20230274595A1 (en) 2023-08-31
EP4206403A1 (en) 2023-07-05
WO2022068098A1 (zh) 2022-04-07

Similar Documents

Publication Publication Date Title
CN109334566B (zh) 用于提供车外反馈的方法、装置、设备和存储介质
KR102189569B1 (ko) 다기능 스마트 객체인식 사고방지 표지 안내판 및 그것을 이용한 사고방지방법
CN108883725B (zh) 一种行驶车辆警报系统和方法
CN112030814A (zh) 一种虚拟道闸系统和虚拟道闸的控制方法
KR102280338B1 (ko) 상황 예측 기반 교차로 위험 경보 시스템
CN102521983B (zh) 一种基于高清视频技术的车辆违章检测系统及方法
JP4221158B2 (ja) 交通標識識別装置および識別方法
US20060055525A1 (en) Driving support system and driving support module
US20050116838A1 (en) Detection and enforcement of failure-to-yield in an emergency vehicle preemption system
CN108932849B (zh) 一种记录多台机动车低速行驶违法行为的方法及装置
CN202472943U (zh) 一种基于高清视频技术的车辆违章检测系统
CN113012436B (zh) 道路监控方法、装置及电子设备
CN105303823A (zh) 车辆违规监控方法和系统
CN110782677A (zh) 一种违规车辆抓拍警示方法及装置
CN113676702A (zh) 基于视频流的目标追踪监测方法、系统、装置及存储介质
CN112606831A (zh) 一种用于客车的防碰撞警示信息对外交互方法及系统
KR101525151B1 (ko) 차량 번호판 인식 시스템 및 방법
KR20200058613A (ko) 관제시스템을 이용한 자율주행차량의 교차로 통과지원장치 및 방법
CN112581748A (zh) 基于卷积神经网络的车库出车行人安全提示系统
CN112185170B (zh) 交通安全提示方法及道路监控设备
CN212801306U (zh) 一种虚拟道闸系统
CN112907979A (zh) 一种基于多摄像头的机动车违法行驶轨迹跟踪系统及方法
KR102055693B1 (ko) 긴급 차량 진행 알림 시스템 및 그 방법
KR101593676B1 (ko) 주행상황 인지 방법 및 장치
JP6997471B2 (ja) 情報処理システム、情報処理装置、端末装置、サーバ装置、プログラム、又は方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination