CN103634562B - 用于视频会议的数据传送方法和系统 - Google Patents

用于视频会议的数据传送方法和系统 Download PDF

Info

Publication number
CN103634562B
CN103634562B CN201210304259.6A CN201210304259A CN103634562B CN 103634562 B CN103634562 B CN 103634562B CN 201210304259 A CN201210304259 A CN 201210304259A CN 103634562 B CN103634562 B CN 103634562B
Authority
CN
China
Prior art keywords
control unit
label
data
information
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210304259.6A
Other languages
English (en)
Other versions
CN103634562A (zh
Inventor
邱芸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN201210304259.6A priority Critical patent/CN103634562B/zh
Publication of CN103634562A publication Critical patent/CN103634562A/zh
Application granted granted Critical
Publication of CN103634562B publication Critical patent/CN103634562B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种用于视频会议的数据传送方法和系统,属于视频会议领域。该方法的技术方案包括在多点控制单元MCU向媒体控制单元发送的邀请消息中包含标签信息。该标签信息用于标识需要传输的对象种类。根据该标签,在传输通道上传输标签所对应的传输对象。由于所采用的传输通道可为单流通道。一般情况下,在该单流通道中传输视频信息。当需要传送文件、图表等数据信息时,通过调整标签,控制传输通道进行数据语音信息的传输。因此,采用本发明的方法和系统,无须采用双流传输即可实现基于视频流的数据传输,能够方便地在各种终端之间开展视频会议。

Description

用于视频会议的数据传送方法和系统
技术领域
本发明涉及视频会议领域,特别涉及用于视频会议的数据传送方法和系统。
背景技术
视频会议主要是以语音和影像的方式实现远程的面对面交流。随着视频系统应用的日益广泛,人们已经不满足于仅仅看到视频图像,而希望通过视频会议传递更多的信息。例如,希望通过视频会议获得开会时所用到的图表、数据或者文档等信息。这些信息一般以数据文件的形式存储在电脑中。
因此,在很多场合下,视频会议需要建立起与数据的协同工作。例如,远程会商、远程教育、远程办公等,从而增强会议的临场感,提高视频会议的效率。
为了能够实现视频和数据的同时建立,目前主要采用双流传输技术。具体来说,在一次呼叫建立媒体连接后,在两个终端之间传送两路媒体流。这两条媒体流共享呼叫宽带,视频用户可以得到双流视频服务。在会议系统中,可同时传送和显示上述两路信息。
申请人对现有的双流传输技术进行了深入研究发现,由于手机、PAD、电视等终端的厂商采用私有协议、硬件处理能力或构架设计受到限制等因素,导致在上述终端之间无法实现双流互通,从而不能在上述终端之间实现视频和数据共享,限制了在上述种类的终端之间开展视频会议。
发明内容
本发明针对现有部分终端之间无法实现视频和数据共享的问题,提出了一种新的技术方案,能够实现基于视频流的数据单流显示和传输,在多种终端之间实现数据共享。
根据本发明的一个方面,公开了一种用于视频会议的数据传送方法。在该方法的技术方案中,在多点控制单元MCU向媒体控制单元发送的邀请消息中包括标签信息,该标签信息用于标识需要传输的对象种类;根据上述标签,在传输通道上传输该标签所对应的传输对象。
进一步地,需要传输的对象种类包括视频信息和数据信息;当需要传送视频信息时,多点控制单元向媒体控制单元发送第一标签;媒体控制单元根据该第一标签,控制传输通道进行视频信息的传输。
进一步地,对于传送视频信息的过程中需要传输数据信息的情况,多点控制单元向媒体控制单元发送第二标签;媒体控制单元根据第二标签,控制传输通道进行数据信息的传输。
进一步地,根据第二标签进行数据信息的传输的步骤包括:根据会话描述协议消息中的音频地址,将音频数据从正在传送的视频信息中剥离;将所剥离的音频数据与需要传输的数据信息合并成为数据语音信息;传输通道上屏蔽该视频信息,并传输该数据语音信息。
进一步地,当数据信息传输完毕时,多点控制单元向媒体控制单元发送第一标签;媒体控制单元根据第一标签,继续进行所述视频信息的传输。
根据本发明的第二方面,公开了一种用于视频会议的数据传送系统。该系统包括多点控制单元和媒体控制单元。在多点控制单元向媒体控制单元发送的邀请消息中包括标签信息。该标签信息用于标识需要传输的对象种类。根据上述标签,在传输通道上传输该标签所对应的传输对象。
进一步地,需要传输的对象种类包括视频信息和数据信息;当需要传送视频信息时,多点控制单元向媒体控制单元发送第一标签;媒体控制单元根据第一标签,控制传输通道进行视频信息的传输。
进一步地,对于传送所述视频信息的过程中需要传输数据信息的情况,多点控制单元向媒体控制单元发送第二标签;媒体控制单元根据第二标签,控制传输通道进行数据信息的传输。
进一步地,媒体控制单元包括音频数据剥离模块和合并模块。音频数据剥离模块用于根据会话描述协议消息中的音频地址,将音频数据从所述正在传送的视频信息中剥离。合并模块用于将所剥离的音频数据与需要传输的数据信息合并成为数据语音信息。所合并的数据语音信息在传输通道上传输,同时屏蔽视频信息。
进一步地,当数据信息传输完毕时,多点控制单元向媒体控制单元发送第一标签。媒体控制单元根据该第一标签,继续进行视频信息的传输。
在本发明的技术方案中,由于所采用的传输通道可为单流通道。一般情况下,可传输视频信息。当需要传送文件、图表等数据信息时,可以调整标签,从而控制传输通道进行数据信息的传输。换句话说,本发明的技术方案无须采用双流传输即可实现基于视频流的数据传输。因此,不必对现有终端的私有协议、硬件处理能力或者架构设计等进行改进,就能实现终端之间的视频和数据共享,能够方便地在各种终端之间开展视频会议。
附图说明
构成说明书的一部分的附图描述了本发明的实施例,并且连同说明书一起用于解释本发明的原理。
参照附图,根据下面的详细描述,可以更加清楚地理解本发明,其中:
图1示出了根据本发明的用于视频会议的数据传送方法的一个实施例的流程图。
图2示出了根据本发明的用于视频会议的数据传送方法中的传输视频信息的流程示意图。
图3示出了根据本发明的用于视频会议的数据传送方法中的传输数据信息的流程示意图。
图4是根据本发明的一种用于视频会议的数据传输系统的一个实施例的结构示意图。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
图1示出了根据本发明的用于视频会议的数据传送方法的流程图。
在步骤S11中,多点控制单元(Multi Control Unit,MCU)向媒体控制单元发送标签信息。
具体地,该标签信息可包含在MCU向媒体控制单元所发送的邀请消息中。该标签信息可用于标识传输通道的用途以及该传输通道如何呈现给用户。
在步骤S12中,根据标签信息,在传输通道上传输标签所对应的传输对象。
该传输通道可为单流通道。一般情况下,可传输视频信息。当需要传送文件、图表等数据信息时,可以调整标签,将视频流中的音频数据分离出来,并将音频数据与图文数据合成后在带内传到对端,从而完成数据信息的传输。
本发明的技术方案无须采用双流传输即可实现基于视频流的数据传输。因此,不必对现有终端的私有协议、硬件处理能力或者架构设计等进行改进,就能实现终端之间的视频和数据共享,能够方便地在各种终端之间开展视频会议。
下面结合图2和图3对本发明的用于视频会议的数据传送方法的一个实施例进行描述。其中,图2示出了传输视频信息的流程图;图3示出了传输数据信息的流程图。
如图2所示,在步骤S21中,用户代理(User Agent,UA,也即用户终端)向多点控制单元发送视频信息。
在会话初始协议(SIP)中,将终端用户称为用户代理,可包括用户代理客户机(UserAgentClient,UAC)和用户代理服务器(UserAgentserver,UAS)两部分。
在步骤S22中,多点控制单元向媒体控制单元发送邀请(INVI TE)消息。
该邀请消息中包括第一标签LABEL:1。
该邀请消息采用会话描述协议(Session Description Protocol,SDP)。会话描述协议完全是一种会话描述格式。它使用不同的适当的传输协议,包括会话通知协议(SAP)、会话初始协议(SIP)、实时流协议(RTSP)以及超文本传输协议(HTTP)。
相应的媒体参数的描述格式如下:
m=video 3400 RTP/AVP 98 99;
a=label:1;
a=rtpmap:98 H263。
上述消息描述了视频流,采用RTP/AVP协议传输,传输端口为UDP3400,标签为第一标签,视频格式为H263。其中,UDP是指用户数据报协议(User Datagram Protocol);RTP是指实时传输协议(Real-time Transport Protocol);AVP为音频-视频协议(Audi o-VideoProtocol)。
在步骤S23中,媒体控制单元向多点控制单元返回确认消息。
该确认消息具体可以为200OK确认消息。
在步骤S24中,多点控制单元向媒体控制单元发送视频信息。
在步骤S25中,媒体控制单元通过单流传输通道将视频信息发送至其他接收终端。
在传输视频信息的过程中,如又需要传输数据信息时,可采用图3所示的流程。
如图3所示,在步骤S31中,用户代理向多点控制单元发送数据信息。可以根据传输控制协议(Transmission Control Protocol,TCP)进行传输。
在步骤S32中,多点控制单元向媒体控制单元发送SDP消息,具体可以为邀请消息。
该消息中包括第二标签。该第二标签用于标识传输通道中存放了数据信息。
相应的媒体参数的描述格式可如下:
m=video 3600 RTP/AVP 98 99;
m=audio 3000 RTP/AVP 20 21;
a=label:2;
a=rtpmap:98 H263。
上述消息描述了视频信息和音频信息,采用RTP/AVP协议传输,视频信息的传输端口为UDP3600,音频信息的传输端口为UDP3600,标签为第二标签,视频格式为H263。
在步骤S33中,媒体控制单元向多点控制单元返回确认消息。具体地,该确认消息可以为200OK确认消息。
在步骤S34中,多点控制单元向媒体控制单元发送数据消息。
在步骤S35中,媒体控制单元合并生成数据语音信息。
具体地,可根据会话描述协议消息中的音频地址,将音频数据从正在传送的视频信息中剥离。然后,将所剥离的音频数据与需要传输的数据信息合并成为数据语音信息。
在步骤S36中,在传输通道上屏蔽该视频信息,并进行数据语音信息的传输。
本领域的技术人员应当理解,也可根据实际需要,不将音频信息与数据信息进行组装,直接将数据文件进行传输。
当上述数据语音信息传输完毕时,多点控制单元MCU向所述媒体控制单元发送第一标签。媒体控制单元根据第一标签,继续进行所述视频信息的传输。
在本发明的技术方案中,由于所采用的传输通道可为单流通道。一般情况下,可传输视频信息。当需要传送文件、图表等数据信息时,可以调整标签,从而控制传输通道进行数据信息的传输。换句话说,本发明的技术方案无须采用双流传输即可实现基于视频流的数据传输。因此,不必对现有终端的私有协议、硬件处理能力或者架构设计等进行改进,就能实现终端之间的视频和数据共享,能够方便地在各种终端之间开展视频会议。
图4是根据本发明的一种用于视频会议的数据传输系统的一个实施例的结构示意图。
该系统可以实现在终端11和终端14之间进行双向数据传输。为了表述方便,假定终端11为发送终端,终端14为接收终端。终端14包括但不限于电脑、手机、平板电脑(PAD)和电视。
该系统包括多点控制单元12和媒体控制单元13。多点控制单元12向媒体控制单元13发送的邀请消息中可包括标签信息。该标签用于标识需要传输的对象种类。该对象种类可包括视频信息和数据信息。媒体控制单元13可用于实现媒体流的转换控制。媒体控制单元13可在视频会议平台和IP多媒体系统(IPMultimedia Subsystem,IMS)网络之间设置。
媒体控制单元13收到标签后,可控制单流传输通道进行视频信息或者数据信息的传输。
当需要传送视频信息时,多点控制单元12向媒体控制单元13发送第一标签。媒体控制单元13根据第一标签,控制传输通道进行视频信息的传输。
在上述视频信息的传输过程中,又需要传输数据信息时,多点控制单元12向媒体控制单元13发送第二标签。媒体控制单元13可根据该第二标签,控制传输通道进行数据信息的传输。
具体地,媒体控制单元13包括音频数据剥离模块131和合并模块132。音频数据剥离模块131可以根据会话描述协议消息中的音频地址,将音频数据从正在传送的视频信息中剥离。合并模块132可以将所剥离的音频数据与需要传输的数据信息合并成为数据信息。这样,所合并的数据语音信息可以在单流传输通道上进行传输,同时屏蔽该视频信息。
当数据语音信息传输完毕时,多点控制单元12向媒体控制单元13发送第一标签。媒体控制单元13根据第一标签,继续进行视频信息的传输。
在本发明的技术方案中,增设了媒体控制单元。利用该单元能够根据不同的标签信息,控制单流传输通道进行相应的信息传输。本发明的技术方案无须采用双流传输即可实现基于视频流的数据传输。因此,不必对现有终端的私有协议、硬件处理能力或者架构设计等进行改进,就能实现终端之间的视频和数据共享,能够方便地在各种终端之间开展视频会议。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为授权说明书的一部分。
在这里示出和讨论的所有示例中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它示例可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
至此,已经详细描述了根据本发明的用于视频会议的数据传输方法和系统。为了避免遮蔽本发明的构思,没有描述本领域所公知的一些细节。本领域技术人员根据上面的描述,完全可以明白如何实施这里公开的技术方案。
虽然已经通过示例对本发明的一些特定实施例进行了详细说明,但是本领域的技术人员应该理解,以上示例仅是为了进行说明,而不是为了限制本发明的范围。本领域的技术人员应该理解,可在不脱离本发明的范围和精神的情况下,对以上实施例进行修改。本发明的范围由所附权利要求来限定。

Claims (10)

1.一种用于视频会议的数据传送方法,其特征在于,包括:
在多点控制单元MCU向媒体控制单元发送的邀请消息中包括标签信息,所述标签信息用于标识需要传输的对象种类,其中,所述需要传输的对象种类包括视频信息和数据信息;
根据所述标签信息,在同一个传输通道上传输所述标签所对应的传输对象,以便所述传输通道能够根据所述标签信息传输不同种类的传输对象,
其中,对于传送所述视频信息的过程中需要传输数据信息的情况:
将音频数据从所述正在传送的视频信息中剥离,
将所剥离的音频数据与所述需要传输的数据信息合并成为数据语音信息,
在所述传输通道上屏蔽所述视频信息,并传输所述数据语音信息。
2.如权利要求1所述的方法,其特征在于,
当需要传送视频信息时,所述多点控制单元向所述媒体控制单元发送第一标签;
所述媒体控制单元根据所述第一标签,控制所述传输通道进行所述视频信息的传输。
3.如权利要求1所述的方法,其特征在于,
对于传送所述视频信息的过程中需要传输数据信息的情况,所述多点控制单元向所述媒体控制单元发送第二标签;
所述媒体控制单元根据所述第二标签,控制所述传输通道进行所述数据信息的传输。
4.如权利要求1所述的方法,其特征在于,根据会话描述协议消息中的音频地址,将音频数据从所述正在传送的视频信息中剥离。
5.如权利要求3所述的方法,其特征在于,当所述数据信息传输完毕时,所述多点控制单元向所述媒体控制单元发送第一标签;
所述媒体控制单元根据所述第一标签,继续进行所述视频信息的传输。
6.一种用于视频会议的数据传送系统,其特征在于,该系统包括多点控制单元和媒体控制单元,
在所述多点控制单元向所述媒体控制单元发送的邀请消息中包括标签信息,所述标签信息用于标识需要传输的对象种类,其中,所述需要传输的对象种类包括视频信息和数据信息;
媒体控制单元根据所述标签信息在同一个传输通道上传输所述标签所对应的传输对象,以便所述传输通道能够根据所述标签信息传输不同种类的传输对象,
其中,所述媒体控制单元包括音频数据剥离模块和合并模块,
对于传送所述视频信息的过程中需要传输数据信息的情况,
所述音频数据剥离模块用于根据会话描述协议消息中的音频地址,将音频数据从所述正在传送的视频信息中剥离;
所述合并模块用于将所剥离的音频数据与所述需要传输的数据信息合并成为数据语音信息;
所合并的数据语音信息在所述传输通道上传输,同时屏蔽所述视频信息。
7.如权利要求6所述的系统,其特征在于,
当需要传送视频信息时,所述多点控制单元向所述媒体控制单元发送第一标签;
所述媒体控制单元根据所述第一标签,控制所述传输通道进行所述视频信息的传输。
8.如权利要求6所述的系统,其特征在于,
对于传送所述视频信息的过程中需要传输数据信息的情况,所述多点控制单元向所述媒体控制单元发送第二标签;
所述媒体控制单元根据所述第二标签,控制所述传输通道进行所述数据信息的传输。
9.如权利要求6所述的系统,其特征在于,所述音频数据剥离模块用于根据会话描述协议消息中的音频地址,将音频数据从所述正在传送的视频信息中剥离。
10.如权利要求8所述的系统,其特征在于,
当所述数据信息传输完毕时,所述多点控制单元向所述媒体控制单元发送第一标签;
所述媒体控制单元根据所述第一标签,继续进行所述视频信息的传输。
CN201210304259.6A 2012-08-24 2012-08-24 用于视频会议的数据传送方法和系统 Active CN103634562B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210304259.6A CN103634562B (zh) 2012-08-24 2012-08-24 用于视频会议的数据传送方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210304259.6A CN103634562B (zh) 2012-08-24 2012-08-24 用于视频会议的数据传送方法和系统

Publications (2)

Publication Number Publication Date
CN103634562A CN103634562A (zh) 2014-03-12
CN103634562B true CN103634562B (zh) 2017-08-29

Family

ID=50215143

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210304259.6A Active CN103634562B (zh) 2012-08-24 2012-08-24 用于视频会议的数据传送方法和系统

Country Status (1)

Country Link
CN (1) CN103634562B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170055253A1 (en) * 2015-08-17 2017-02-23 Harman International Industries, Incorporated Metadata distribution in a network

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006066454A1 (fr) * 2004-12-22 2006-06-29 Zte Corporation Procede de transmission des sources video multicanaux sur un systeme de visioconference
CN101163022A (zh) * 2006-10-13 2008-04-16 华为技术有限公司 一种点对点通信计费方法及通讯系统以及计费装置
CN101370114A (zh) * 2008-09-28 2009-02-18 深圳华为通信技术有限公司 视频及音频处理方法、多点控制单元和视频会议系统
CN101517963A (zh) * 2006-09-15 2009-08-26 微软公司 分布式、可缩放、可插入的会议体系结构
CN101692693A (zh) * 2009-09-29 2010-04-07 北京中科大洋科技发展股份有限公司 一种多功能一体化演播室系统和演播方法
CN102111606A (zh) * 2009-12-25 2011-06-29 杭州华三通信技术有限公司 视频会议系统中访问视频图像的方法和设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101232465B (zh) * 2007-01-24 2012-08-08 华为技术有限公司 会议系统中传送文件的方法、文件传送系统及会议服务器
US9582238B2 (en) * 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
CN102137256B (zh) * 2010-01-26 2013-11-06 中国移动通信集团公司 一种文件传输方法、装置和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006066454A1 (fr) * 2004-12-22 2006-06-29 Zte Corporation Procede de transmission des sources video multicanaux sur un systeme de visioconference
CN101517963A (zh) * 2006-09-15 2009-08-26 微软公司 分布式、可缩放、可插入的会议体系结构
CN101163022A (zh) * 2006-10-13 2008-04-16 华为技术有限公司 一种点对点通信计费方法及通讯系统以及计费装置
CN101370114A (zh) * 2008-09-28 2009-02-18 深圳华为通信技术有限公司 视频及音频处理方法、多点控制单元和视频会议系统
CN101692693A (zh) * 2009-09-29 2010-04-07 北京中科大洋科技发展股份有限公司 一种多功能一体化演播室系统和演播方法
CN102111606A (zh) * 2009-12-25 2011-06-29 杭州华三通信技术有限公司 视频会议系统中访问视频图像的方法和设备

Also Published As

Publication number Publication date
CN103634562A (zh) 2014-03-12

Similar Documents

Publication Publication Date Title
CN108055496B (zh) 一种视频会议的直播方法和系统
US8767591B2 (en) Multi-point video conference system and media processing method thereof
CN110062191B (zh) 一种基于视联网的多方组会方法和服务器
EP2130346B1 (en) Media stream setup in a group communication system
TW200951835A (en) Techniques to manage a whiteboard for multimedia conference events
CN108881792A (zh) 一种双流通信的方法和装置
CN102892032B (zh) 实时互动高清网络视频通讯系统
CN109640028A (zh) 一种将多个视联网终端和多个互联网终端进行组会的方法和装置
CN110191304B (zh) 数据处理方法、装置及存储介质
WO2015127799A1 (zh) 协商媒体能力的方法和设备
CN110475094A (zh) 视频会议处理方法、装置及可读存储介质
CN105556980B (zh) 用于在沉浸式社交中心会话中集成内容观看和通信的方法和系统
CN106612445A (zh) 一种无线同屏音频通道的控制方法、发送设备及接受设备
CN103595948B (zh) 分辨率自适应的视频通话系统和方法
CN103391418A (zh) 基于网络视频会议系统和广电系统的融合方法
CN103634562B (zh) 用于视频会议的数据传送方法和系统
CN102438119A (zh) 一种数字电视的音视频通讯系统
CN103248862A (zh) 长距离管道输煤视频会议系统及系统设备的配制方法
CN102291366A (zh) 一种实现多媒体会议即时聊天的方法和用户设备
CN101753571A (zh) 实现双视频流传送的方法、装置和系统
WO2015086193A1 (en) Process for managing the exchanges of video streams between users of a video conference service
KR20150014785A (ko) 다자간 통신 방송 시스템 및 그 서비스 제공 방법
CN108667849B (zh) 一种基于单连接多路流媒体传输与控制方法
Ongtang et al. Client-based Multipoint Media Mixer to Support People with Hearing Impairment in Communication
JP5239756B2 (ja) 映像共有時のメディア同期方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant