CN106993219A - 视频信号的比对方法及装置 - Google Patents

视频信号的比对方法及装置 Download PDF

Info

Publication number
CN106993219A
CN106993219A CN201710138932.6A CN201710138932A CN106993219A CN 106993219 A CN106993219 A CN 106993219A CN 201710138932 A CN201710138932 A CN 201710138932A CN 106993219 A CN106993219 A CN 106993219A
Authority
CN
China
Prior art keywords
input signals
sdi input
sdi
frame
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710138932.6A
Other languages
English (en)
Other versions
CN106993219B (zh
Inventor
许钢鸣
祥祖军
段莉华
黄振川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING JETSEN TECHNOLOGY Co Ltd
China Central TV Station
Original Assignee
BEIJING JETSEN TECHNOLOGY Co Ltd
China Central TV Station
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING JETSEN TECHNOLOGY Co Ltd, China Central TV Station filed Critical BEIJING JETSEN TECHNOLOGY Co Ltd
Priority to CN201710138932.6A priority Critical patent/CN106993219B/zh
Publication of CN106993219A publication Critical patent/CN106993219A/zh
Application granted granted Critical
Publication of CN106993219B publication Critical patent/CN106993219B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例提供一种视频信号的比对方法及装置,其中,该方法包括:获取多个SDI输入信号,并生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。本发明实施例提供的视频信号的比对方法及装置,具有较高的实时性和准确性。

Description

视频信号的比对方法及装置
技术领域
本发明实施例涉及广播电视技术领域,尤其涉及一种视频信号的比对方法及装置。
背景技术
近年来,随着电视及视频媒体的飞速发展,广播电视领域对于安全播出更加重视,对安全播出的等级要求更加严格。
实际中出于对安全播出的考虑,需要能够在较短的时间内准确的发现信号异常并进行及时处理,针对这一需求视频监测技术应运而生。现有的视频监测技术主要包括视频异态报警技术,其主要是通过对视频的静帧、黑场、彩条、彩场等视频播出状态进行判断来实现对视频信号的监测及异常报警的,其报警的实时性较差,难以满足日益增长的需求。
发明内容
本发明实施例提供一种视频信号的比对方法及装置,用以提高视频信号比对的实时性和准确性,确保视频信号的安全播出。
本发明实施例第一方面提供一种视频信号的比对方法,该方法包括:
获取多个SDI输入信号,并生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;
根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;
根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
本发明实施例第二方面提供一种视频信号的比对装置,该装置包括:
获取模块,获取多个SDI输入信号;
第一处理模块,生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;
提取模块,根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;
比对模块,根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
本发明实施例,通过将获取到的多个SDI输入信号进行解嵌后,对每个SDI输入信号的视频帧分图元进行矢量化特征值提取,再根据每个SDI输入信号的矢量化特征值,对获取到的多个SDI输入信号进行同步,并在完成同步后,对所述多个SDI输入信号进行逐帧比对。由于本发明实施例中每个SDI输入信号的矢量化特征值是逐帧提取的,且多个SDI输入信号之间是逐帧进行比对的,因此,能够快速定位出异常的视频帧,并及时的发出报警。有效的提高了视频信号比对的实时性和准确性。为视频信号的安全播出提供了可靠的保障。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的视频信号的比对方法的流程图;
图2为本发明又一实施例提供的视频信号的比对方法的流程图;
图3为本发明一实施例提供的视频信号的比对装置的结构示意图;
图4为本发明又一实施例提供的视频信号的比对装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤的过程或结构的装置不必限于清楚地列出的那些结构或步骤而是可包括没有清楚地列出的或对于这些过程或装置固有的其它步骤或结构。
图1为本发明一实施例提供的视频信号的比对方法的流程图,该方法可以由一视频信号比对装置来执行,该装置可以是独立的实体设备,也可以是集成在实体设备实体中的可执行程序。如图1所示,该方法包括如下步骤:
步骤101、获取多个SDI输入信号,并生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据。
本实施例中获取数字串行接口(SDI)输入信号的方法与现有技术相同,在这里不再赘述。
以两个SDI输入信号为例,在获取到两个SDI输入信号后,视频信号比对装置首先分别对该两个SDI输入信号进行解嵌处理生成每个SDI输入信号对应的视频数据。进一步的,对解嵌后的视频数据进行信号处理生成对应的视频帧数据。其中根据视频数据生成视频帧数据的信号处理方法与现有技术相同,在这里不再赘述。
可选的,本实施例中,在对多个SDI输入信号进行解嵌处理时,还可以对多个SDI输入信号中的每个SDI输入信号进行视频帧计数,并生成所述每个SDI输入信号对应的音频数据。并将得到的视频帧计数嵌入相应的视频数据中,用于辅助后续的视频同步。同时也将视频帧计数嵌入相应的音频数据中,用于辅助后续的音频同步。
步骤102、根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值。
可选的,本实施例中按照最小图元,从每个SDI输入信号对应的视频帧数据中逐帧提取每个SDI输入信号对应的矢量特征值,并将其根据活动图像格式(Active FormatDescription,简称AFD)变换方式组成不同模板。其中,模板的组成方式与现有技术相同在这里不再赘述。另外,本实施例中,矢量特征值的提取可以从亮度、色彩、饱和度等三个维度进行提取。特别的,当获取到的多个SDI输入信号中包括标清视频信号时还需对该标清视频信号的视频帧进行色度空间转换,以适应高清信号和标清信号间的视频比对,其中,视频帧的色度空间转换方法与现有技术类似,在这里不再赘述。
步骤103、根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
可选的,本实施例中根据多个SDI输入信号中每个SDI输入信号对应的矢量特征值对所述多个SDI输入信号通过滑动窗口的方式进行快速软同步。这里通过滑动窗口及西宁快速软同步的方法与现有技术类似,在这里不再赘述。
进一步的,在进行多个SDI输入信号之间时,根据多个SDI输入信号之间的矢量特征值的权重配比,进行加权比对。而在多个SDI输入信号之间的视频帧差出现异常时,发出报警信息,以确保视频的安全播放。
本实施例,通过将获取到的多个SDI输入信号进行解嵌后,对每个SDI输入信号的视频帧分图元进行矢量化特征值提取,再根据每个SDI输入信号的矢量化特征值,对获取到的多个SDI输入信号进行同步,并在完成同步后,对所述多个SDI输入信号进行逐帧比对。由于本实施例中每个SDI输入信号的矢量化特征值是逐帧提取的,且多个SDI输入信号之间是逐帧进行比对的,因此,能够快速定位出异常的视频帧,并及时的发出报警。有效的提高了视频信号比对的实时性和准确性。为视频信号的安全播出提供了可靠的保障。
图2为本发明又一实施例提供的视频信号的比对方法的流程图,如图2所示,在图1的基础上,本实施例提供的方法包括:
步骤201、获取多个SDI输入信号。
步骤202、分别对所述多个SDI输入信号中的每个SDI输入信号进行解嵌处理,生成每个SDI输入信号对应的视频数据和音频数据,并对每个SDI输入信号进行视频帧计数。
步骤203、将每个SDI输入信号的视频帧计数嵌入各自对应的音频数据和视频数据中。
步骤204、根据每个SDI输入信号对应的视频数据,生成每个SDI输入信号对应的视频帧数据。
步骤205、根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值。
步骤206、根据所述每个SDI输入信号对应的矢量特征值,通过滑动窗口的方式对所述多个SDI输入信号进行软同步。
步骤207、确定在预设时间范围内是否完成所述软同步,若否,则执行步骤208-步骤209,若是,则执行步骤209。
步骤208、根据所述多个SDI输入信号之间的音频数据的同步状态,完成所述多个SDI输入信号之间的同步。
步骤209、根据所述多个SDI输入信号中每个SDI输入信号的视频帧计数,在所述多个SDI输入信号之间进行逐帧比对。
本实施例中,未在预设时间范围内完成各SDI输入信号之间的软同步时,通过将各SDI输入信号之间的音频数据的同步作为视频同步的辅助信息,能够加速视频的同步,提高视频对比的实时性。
图3为本发明一实施例提供的视频信号的比对装置的结构示意图,如图3所示,该装置包括:
获取模块11,获取多个SDI输入信号;
第一处理模块12,生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;
提取模块13,根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;
比对模块14,根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
可选的,所述第一处理模块12,包括:
第一处理子模块121,分别对所述多个SDI输入信号中的每个SDI输入信号进行解嵌处理,生成每个SDI输入信号对应的视频数据;
第二处理子模块122,根据每个SDI输入信号对应的视频数据,生成每个SDI输入信号对应的视频帧数据。
可选的,所述提取模块13,按照最小图元,从每个SDI输入信号对应的视频帧数据中逐帧提取每个SDI输入信号对应的矢量特征值。
可选的,所述比对模块14,包括:
第一同步子模块141,根据所述每个SDI输入信号对应的矢量特征值,通过滑动窗口的方式对所述多个SDI输入信号进行软同步。
本实施例提供的装置能够用于执行图1所示的方法,其执行方式和有益效果类似在这里不再赘述。
图4为本发明又一实施例提供的视频信号的比对装置的结构示意图,如图4所示,在图3的基础上,所述装置还包括:
第二处理模块15,生成所述多个SDI输入信号中每个SDI输入信号对应的音频数据,并对每个SDI输入信号进行视频帧计数,并将每个SDI输入信号的视频帧计数嵌入各自对应的音频数据和视频数据中。
所述比对模块14,还包括:
第二同步子模块142,用于在预设时间范围内,未完成所述多个SDI输入信号的软同步时,根据所述多个SDI输入信号之间的音频数据的同步状态,完成所述多个SDI输入信号之间的同步。
所述比对模块14,还包括:
比对子模块143,根据所述多个SDI输入信号中每个SDI输入信号的视频帧计数,在所述多个SDI输入信号之间进行逐帧比对。
本实施例提供的装置能够用于执行图2所示的方法,其执行方式和有益效果类似在这里不再赘述。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (14)

1.一种视频信号的比对方法,其特征在于,包括:
获取多个SDI输入信号,并生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;
根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;
根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
2.根据权利要求1所述的方法,其特征在于,所述生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,包括:
分别对所述多个SDI输入信号中的每个SDI输入信号进行解嵌处理,生成每个SDI输入信号对应的视频数据;
根据每个SDI输入信号对应的视频数据,生成每个SDI输入信号对应的视频帧数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值,包括:
按照最小图元,从每个SDI输入信号对应的视频帧数据中逐帧提取每个SDI输入信号对应的矢量特征值。
4.根据权利要求3所述的方法,其特征在于,所述根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,包括:
根据所述每个SDI输入信号对应的矢量特征值,通过滑动窗口的方式对所述多个SDI输入信号进行软同步。
5.根据权利要求4所述的方法,其特征在于,所述根据每个SDI输入信号对应的视频数据,生成每个SDI输入信号对应的视频帧数据之前,所述方法还包括:
生成所述多个SDI输入信号中每个SDI输入信号对应的音频数据,并对每个SDI输入信号进行视频帧计数;
将每个SDI输入信号的视频帧计数嵌入各自对应的音频数据和视频数据中。
6.根据权利要求5所述的方法,其特征在于,所述根据所述每个SDI输入信号对应的矢量特征值,通过滑动窗口的方式对所述多个SDI输入信号进行软同步之后,所述方法还包括:
若在预设时间范围内,未完成所述多个SDI输入信号的软同步,则根据所述多个SDI输入信号之间的音频数据的同步状态,完成所述多个SDI输入信号之间的同步。
7.根据权利要求6所述的方法,其特征在于,所述在所述多个SDI输入信号之间进行逐帧比对,包括:
根据所述多个SDI输入信号中每个SDI输入信号的视频帧计数,在所述多个SDI输入信号之间进行逐帧比对。
8.一种视频信号的比对装置,其特征在于,包括:
获取模块,获取多个SDI输入信号;
第一处理模块,生成所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据;
提取模块,根据所述多个SDI输入信号中每个SDI输入信号对应的视频帧数据,提取每个SDI输入信号对应的矢量特征值;
比对模块,根据所述每个SDI输入信号对应的矢量特征值,对所述多个SDI输入信号进行同步,并在完成所述同步后,在所述多个SDI输入信号之间进行逐帧比对。
9.根据权利要求8所述的装置,其特征在于,所述第一处理模块,包括:
第一处理子模块,分别对所述多个SDI输入信号中的每个SDI输入信号进行解嵌处理,生成每个SDI输入信号对应的视频数据;
第二处理子模块,根据每个SDI输入信号对应的视频数据,生成每个SDI输入信号对应的视频帧数据。
10.根据权利要求9所述的装置,其特征在于,所述提取模块,按照最小图元,从每个SDI输入信号对应的视频帧数据中逐帧提取每个SDI输入信号对应的矢量特征值。
11.根据权利要求10所述的装置,其特征在于,所述比对模块,包括:
第一同步子模块,根据所述每个SDI输入信号对应的矢量特征值,通过滑动窗口的方式对所述多个SDI输入信号进行软同步。
12.根据权利要求11所述的装置,其特征在于,所述装置还包括:
第二处理模块,生成所述多个SDI输入信号中每个SDI输入信号对应的音频数据,并对每个SDI输入信号进行视频帧计数,并将每个SDI输入信号的视频帧计数嵌入各自对应的音频数据和视频数据中。
13.根据权利要求12所述的装置,其特征在于,所述比对模块,还包括:
第二同步子模块,用于在预设时间范围内,未完成所述多个SDI输入信号的软同步时,根据所述多个SDI输入信号之间的音频数据的同步状态,完成所述多个SDI输入信号之间的同步。
14.根据权利要求13所述的装置,其特征在于,所述比对模块,还包括:
比对子模块,根据所述多个SDI输入信号中每个SDI输入信号的视频帧计数,在所述多个SDI输入信号之间进行逐帧比对。
CN201710138932.6A 2017-03-09 2017-03-09 视频信号的比对方法及装置 Active CN106993219B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710138932.6A CN106993219B (zh) 2017-03-09 2017-03-09 视频信号的比对方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710138932.6A CN106993219B (zh) 2017-03-09 2017-03-09 视频信号的比对方法及装置

Publications (2)

Publication Number Publication Date
CN106993219A true CN106993219A (zh) 2017-07-28
CN106993219B CN106993219B (zh) 2020-03-17

Family

ID=59413055

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710138932.6A Active CN106993219B (zh) 2017-03-09 2017-03-09 视频信号的比对方法及装置

Country Status (1)

Country Link
CN (1) CN106993219B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102006498A (zh) * 2010-12-10 2011-04-06 北京中科大洋科技发展股份有限公司 基于视音频比对的安全播出监测方法
CN102905054A (zh) * 2012-10-23 2013-01-30 无锡风格软件有限公司 一种基于图像多维特征值比对的视频同步方法
CN203057369U (zh) * 2012-12-07 2013-07-10 浙江传媒学院 一种基于音频的广播电视信号同步监测系统
CN104079924A (zh) * 2014-03-05 2014-10-01 北京捷成世纪科技股份有限公司 一种视频错播的检测方法和装置
CN106028147A (zh) * 2016-06-23 2016-10-12 北京华兴宏视技术发展有限公司 视频信号监测方法及视频信号监测系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102006498A (zh) * 2010-12-10 2011-04-06 北京中科大洋科技发展股份有限公司 基于视音频比对的安全播出监测方法
CN102905054A (zh) * 2012-10-23 2013-01-30 无锡风格软件有限公司 一种基于图像多维特征值比对的视频同步方法
CN203057369U (zh) * 2012-12-07 2013-07-10 浙江传媒学院 一种基于音频的广播电视信号同步监测系统
CN104079924A (zh) * 2014-03-05 2014-10-01 北京捷成世纪科技股份有限公司 一种视频错播的检测方法和装置
CN106028147A (zh) * 2016-06-23 2016-10-12 北京华兴宏视技术发展有限公司 视频信号监测方法及视频信号监测系统

Also Published As

Publication number Publication date
CN106993219B (zh) 2020-03-17

Similar Documents

Publication Publication Date Title
CN109472260B (zh) 一种基于深度神经网络的移除图像内台标和字幕的方法
US20110018966A1 (en) Receiving Device, Communication System, Method of Combining Caption With Stereoscopic Image, Program, and Data Structure
CN106464959B (zh) 半导体集成电路和具备该半导体集成电路的显示装置及控制方法
JP2004274125A (ja) 画像処理装置および方法
CN101783969A (zh) 一种数字电视信号质量综合监测装置
CN104391960B (zh) 一种视频标注方法及系统
CN111147768A (zh) 一种提高回看效率的智能监控视频回看方法
CN104506853B (zh) 一种音视频技审系统及方法
US9084028B2 (en) System and method for detecting and classifying direct response advertisements
CN107147824A (zh) 多视角视频的输出方法和装置
CN105025335A (zh) 一种云桌面环境下的视频同步渲染的方法
CN113141512B (zh) 视频主播画面检测系统
CN103607543B (zh) 视频浓缩方法、系统以及视频监控方法和系统
CN104994370A (zh) 一种3d视频图像采集系统
US9100638B2 (en) Signal identification for downstream processing
CN113014953A (zh) 视频防篡改检测方法及视频防篡改检测系统
CN102186035A (zh) 屏幕显示信息的显示方法
CN106993219A (zh) 视频信号的比对方法及装置
CN105025361A (zh) 一种实时台标消除方法
US11044399B2 (en) Video surveillance system
CN103067654B (zh) 一种具有无线电侦测及频谱显示功能的摄像机
WO2016192300A1 (zh) 显示装置及其显示信号输入系统、显示信号输入方法
CN103763498B (zh) Hdmi信号处理系统及处理方法
CN104506887B (zh) 一种音视频技审方法
CN101499170B (zh) 一种视频颜色异常分析方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant