CN102123267A - 一种交互式修改视频会议辅流的方法、装置和系统 - Google Patents
一种交互式修改视频会议辅流的方法、装置和系统 Download PDFInfo
- Publication number
- CN102123267A CN102123267A CN 201110061846 CN201110061846A CN102123267A CN 102123267 A CN102123267 A CN 102123267A CN 201110061846 CN201110061846 CN 201110061846 CN 201110061846 A CN201110061846 A CN 201110061846A CN 102123267 A CN102123267 A CN 102123267A
- Authority
- CN
- China
- Prior art keywords
- secondary flow
- terminal
- video conference
- mcu
- revised
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明适用于视频会议领域,提供了一种交互式修改视频会议辅流的方法、装置和系统,所述方法包括以下步骤:建立参加视频会议的终端之间的信息传输通道,所述信息传输通道包括辅流控制通道;所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息,并依据所述修改信息修改辅流在本发明实施例中,辅流修改终端通过辅流控制通道将辅流修改信息发送到辅流控制终端,辅流控制终端将接收的辅流修改信息加载到辅流,并将修改后的辅流通过MCU发送到其他参与视频会议的终端,使得所有参与视频会议的终端都可以对接收的辅流进行修改,加强了视频会议的互动性。
Description
技术领域
本发明属于视频会议领域,尤其涉及一种交互式修改视频会议辅流的方法、装置和系统。
背景技术
辅流:视频会议中用于演示的视频、音频或文件。
辅流控制通道:用于发送对辅流修改信息的通道。
修改辅流:对辅流进行修改,所述修改包括:添加标注,改变附图等。
MCU(multipoint control untis):多点处理单元,视频会议的核心部分,为用户提供群组会议、多组会议的连接服务。
视频会议作为一种新的会议模式,为相隔遥远距离的人们提供了进行会议的可能。
现有技术中通过H.323视频会议系统进行会议,标准的H.323会议系统为视频会议提供一条视频通道,一条音频通道。视频通道用于传输主会场的现场图像,音频通道用于传输主会场的现场声音。通过支持H.239协议还可提供一条通道用于传输用于会议演示的辅流,但是现有视频会议中的H.239协议仅用于发送辅流,其他参与会议的终端如果要提出对辅流的修改意见只能通过语音告诉辅流控制终端,让辅流控制终端操作人员对辅流进行修改。这种方式其他参与辅流的终端不能对辅流进行直接的修改,让辅流控制终端修改也可能不会清楚的表达修改的意思。
发明内容
本发明实施例的目的在于提供一种交互式修改视频会议辅流的方法,旨在解决现有视频会议中其他参与视频会议的终端无法对辅流进行书面修改的问题。
本发明实施例是这样实现的,一种交互式修改视频会议辅流的方法,所述方法包括以下步骤:
建立参加视频会议的终端之间的信息传输通道,所述信息传输通道包括辅流控制通道;
所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息,并依据所述修改信息修改辅流。
本发明实施例的另一目的在于提供一种交互式修改视频会议辅流的终端装置,所述装置包括:
建立参加视频会议的终端之间的信息传输通道,所述信息传输通道包括辅流控制通道;
所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息,并依据所述修改信息修改辅流。
本发明实施例的另一目的在于提供一种交互式修改视频会议辅流的MCU装置,所述MCU包括:
辅流控制通道建立单元,用于建立与视频会议终端之间的辅流控制通道;
终端辅流接收单元,用于接收辅流控制终端发送的初始辅流或经过辅流修改终端修改的辅流;
终端辅流广播单元,用于向参与视频会议的终端广播所述终端辅流接收单元接收的辅流;
终端辅流修改请求接收单元,用于接收辅流修改终端发送的辅流修改请求;
终端辅流修改请求发送单元,用于向辅流控制终端发送所述终端辅流修改请求接收单元接收的辅流修改请求;
终端辅流修改信息接收单元,用于接收辅流修改终端发送的对辅流的修改信息;
终端辅流修改信息发送单元,用于向辅流控制终端发送所述终端辅流修改信息接收单元接收的辅流修改信息。
本发明实施例的另一目的在于提供一种交互式修改视频会议辅流的系统,所述系统包括至少两个如上所述的终端装置和一个如上所述的MCU装置。
在本发明实施例中,辅流修改终端通过辅流控制通道将辅流修改信息发送到辅流控制终端,辅流控制终端将接收的辅流修改信息加载到辅流,并将修改后的辅流通过MCU发送到其他参与视频会议的终端,使得所有参与视频会议的终端都可以对接收的辅流进行修改,加强了视频会议的互动性。
附图说明
图1是本发明实施例提供的交互式修改视频会议辅流方法的流程图;
图2是本发明实施例提供的交互式修改视频会议辅流系统的架构图;
图3是本发明实施例提供的图1所示的步骤S102的具体实现流程图;
图4是本发明实施例提供的交互式修改视频会议辅流终端装置的结构图;
图5是本发明实施例提供的交互式修改视频会议辅流MCU装置的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在本发明实施例中,辅流修改终端通过辅流控制通道将辅流修改信息发送到辅流控制终端,辅流控制终端将接收的辅流修改信息加载到辅流,并将修改后的辅流通过MCU发送到其他参与视频会议的终端,使得所有参与视频会议的终端都可以对接收的辅流进行修改,加强了视频会议的互动性。
如图1所示为本发明实施例交互式修改视频会议辅流方法的流程图,详述如下:
步骤S101,建立参加视频会议的终端之间的信息传输通道,所述信息传输通道包括辅流控制通道。
如图2所示,该步骤中辅流控制通道是传输对辅流修改信息的通道,如果参加视频会议的任意两个终端都支持交互式辅流,则在任意两个终端或者终端与MCU之间会建立一个辅流控制通道。
步骤S102,所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息,并依据所述修改信息修改辅流。
关于终端之间通过辅流控制通道传输对辅流的修改信息的具体实现方法详见图3以及后续对图3的描述。
如图3所示为本发明实施例提供的图1所示的步骤S102的具体实现流程,详述如下:
步骤S301,辅流控制终端向MCU发送用于视频会议的初始辅流。
该步骤中,参与视频会议的可以包括多个终端,任何终端都可以向MCU发送用于视频会议的初始辅流,系统默认向MCU发送初始辅流的终端为辅流控制终端,暂时拥有对所述初始辅流的控制权。
步骤S302,MCU以广播的形式将所述初始辅流发送到其他参与视频会议的终端。
步骤S303,辅流修改终端向辅流控制终端发送修改辅流的请求。
该步骤中,其他参与视频会议的终端都可以向MCU发送修改辅流的请求,系统默认向MCU发送修改请求的终端为辅流修改终端。辅流修改终端将修改辅流的请求发送到MCU,MCU将所述请求转发到辅流控制终端。
步骤S304,辅流控制终端响应所述辅流修改终端的请求。
该步骤中,辅流控制终端通过MCU响应辅流修改终端的请求。
步骤S305,辅流修改终端对所述辅流进行修改。
该步骤中,对辅流的修改可以通过终端安装的修改装置进行,所述修改装置包括:触摸屏、手写板、电脑和鼠标。
步骤S306,辅流修改终端将辅流修改信息发送给辅流控制终端。
该步骤中,辅流修改终端通过辅流控制通道将辅流修改信息发送到MCU,MCU将所述修改信息转发给辅流控制终端,所述辅流修改信息都是通过辅流控制通道传输的。
步骤S307,辅流控制终端将接收的辅流修改信息加载到辅流上,获得修改后的辅流。
步骤S308,辅流控制终端将修改后的辅流发送到MCU。
步骤S309,MCU以广播的形式将所述修改后的辅流发送到其他参与视频会议的终端。
需要指出的是如果只有两个终端进行视频会议,即进行点对点的视频会议,则所有信息的传递都不需要MCU中转,两个终端之间直接发送即可。
在本发明实施例中,辅流修改终端通过辅流控制通道将辅流修改信息发送到辅流控制终端,辅流控制终端将接收的辅流修改信息加载到辅流,并将修改后的辅流通过MCU发送到其他参与视频会议的终端,使得所有参与视频会议的终端都可以对接收的辅流进行修改,加强了视频会议的互动性。
需要指出的是如果只有两个终端参与视频会议,则无需MCU对视频会议用到的信息进行中转,终端之间直接通过建立的信息传输通道发送信息即可。
如图4所示为本发明实施例提供的交互式修改视频会议辅流终端装置的结构图,为了便于说明仅示出与本发明实施例相关的部分,其中:
辅流控制通道建立单元41,用于建立视频会议终端与MCU之间的辅流控制通道。
辅流修改单元42,用于在接收到参加视频会议的终端之间通过辅流传输通道传输的对辅流的修改信息时,依据修改信息对辅流进行修改。
其中辅流修改单元42还包括:
辅流发送单元421,用于向MCU发送初始辅流或经过辅流修改终端修改的辅流。
辅流接收单元422,用于接收MCU发送的初始辅流或经过辅流修改终端修改的辅流。
辅流修改请求发送单元423,用于向MCU发送辅流修改请求。
辅流修改请求接收单元424,用于接收MCU转发的辅流修改终端对初始辅流的修改请求。
辅流修改请求响应单元425,用于响应所述辅流修改请求接收单元424接收的辅流修改请求。
辅流修改信息生成单元426,用于生成对所述辅流接收单元422接收的初始辅流的修改信息。
辅流修改信息发送单元427,用于向MCU发送所述辅流修改信息生成单元426生成的辅流修改信息。
如图5所示为本发明实施例提供的交互式修改视频会议辅流MCU装置的结构图,为了便于说明仅示出于本发明实施例相关的部分,其中:
辅流控制通道建立单元51,用于建立与视频会议终端之间的辅流控制通道。
终端辅流接收单元52,用于接收辅流控制终端发送的初始辅流或经过辅流修改终端修改的辅流。
终端辅流广播单元53,用于向参与视频会议的终端广播所述终端辅流接收单元52接收的辅流。
终端辅流修改请求接收单元54,用于接收辅流修改终端发送的辅流修改请求。
终端辅流修改请求发送单元55,用于向辅流控制终端发送所述终端辅流修改请求接收单元54接收的辅流修改请求。
终端辅流修改信息接收单元56,用于接收辅流修改终端发送的对辅流的修改信息。
终端辅流修改信息发送单元57,用于向辅流控制终端发送所述终端辅流修改信息接收单元56接收的辅流修改信息。
在本发明实施例中,辅流修改终端通过辅流控制通道将辅流修改信息发送到辅流控制终端,辅流控制终端将接收的辅流修改信息加载到辅流,并将修改后的辅流通过MCU发送到其他参与视频会议的终端,使得所有参与视频会议的终端都可以对接收的辅流进行修改,加强了视频会议的互动性。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种交互式修改视频会议辅流的方法,其特征在于,所述方法包括以下步骤:
建立参加视频会议的终端之间的信息传输通道,所述信息传输通道包括辅流控制通道;
所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息,并依据所述修改信息修改辅流。
2.如权利要求1所述的方法,其特征在于,所述参加视频会议的终端之间通过辅流控制通道传输对辅流的修改信息的步骤具体为:
辅流控制终端将初始辅流通过MCU广播给其他参与视频会议的终端;
辅流修改终端通过MCU向辅流控制终端发送修改所述初始辅流的请求;
辅流控制终端通过MCU响应所述辅流修改终端对初始辅流的修改请求;
辅流修改终端对初始辅流进行修改,并将对初始辅流的修改信息通过MCU发送给辅流控制终端,所述对初始辅流的修改信息通过辅流控制通道传输。
3.如权利要求2所述的方法,其特征在于,所述将对初始辅流的修改信息通过MCU发送给辅流控制终端之后还包括:
辅流控制终端将接收的对初始辅流的修改信息加载到初始辅流上,得到修改后的辅流,并将所述修改后的辅流通过MCU广播给其他参与视频会议的终端。
4.如权利要求2所述的方法,其特征在于,所述辅流修改终端通过终端安装的修改装置对初始辅流进行修改,所述修改装置包括:触摸屏、手写板、电脑和鼠标。
5.如权利要求2所述的方法,其特征在于,任何参与视频会议的终端都可以通过MCU向其他参与视频会议的终端广播初始辅流,任何参与视频会议的终端也可以通过MCU向辅流控制终端发送修改辅流的请求。
6.如权利要求2或3所述的方法,其特征在于,只有两个终端进行的视频会议,参与会议的终端之间直接进行信息的传输,所述信息包括:初始辅流,修改辅流的请求,对初始辅流的修改信息,修改后的辅流。
7.一种交互式修改视频会议辅流的终端装置,其特征在于,所述装置包括:
辅流控制通道建立单元,用于建立视频会议终端与MCU之间的辅流控制通道;
辅流修改单元,用于在接收到参加视频会议的终端之间通过辅流传输通道传输的对辅流的修改信息时,依据修改信息对辅流进行修改。
8.如权利要求7所述的终端装置,其特征在于,所述辅流修改单元还包括:
辅流发送单元,用于向MCU发送初始辅流或经过辅流修改终端修改的辅流;
辅流接收单元,用于接收MCU发送的初始辅流或经过辅流修改终端修改的辅流;
辅流修改请求发送单元,用于向MCU发送辅流修改请求;
辅流修改请求接收单元,用于接收MCU转发的辅流修改终端对初始辅流的修改请求;
辅流修改请求响应单元,用于响应所述辅流修改请求接收单元接收的辅流修改请求;
辅流修改信息生成单元,用于生成对所述辅流接收单元接收的初始辅流的修改信息;
辅流修改信息发送单元,用于向MCU发送所述辅流修改信息生成单元生成的辅流修改信息。
9.一种交互式修改视频会议辅流的MCU装置,其特征在于,所述MCU包括:
辅流控制通道建立单元,用于建立与视频会议终端之间的辅流控制通道;
终端辅流接收单元,用于接收辅流控制终端发送的初始辅流或经过辅流修改终端修改的辅流;
终端辅流广播单元,用于向参与视频会议的终端广播所述终端辅流接收单元接收的辅流;
终端辅流修改请求接收单元,用于接收辅流修改终端发送的辅流修改请求;
终端辅流修改请求发送单元,用于向辅流控制终端发送所述终端辅流修改请求接收单元接收的辅流修改请求;
终端辅流修改信息接收单元,用于接收辅流修改终端发送的对辅流的修改信息;
终端辅流修改信息发送单元,用于向辅流控制终端发送所述终端辅流修改信息接收单元接收的辅流修改信息。
10.一种交互式修改视频会议辅流的系统,包括至少两个如权利要求7所述的装置和一个如权利要求9所述的MCU。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110061846 CN102123267A (zh) | 2011-03-15 | 2011-03-15 | 一种交互式修改视频会议辅流的方法、装置和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110061846 CN102123267A (zh) | 2011-03-15 | 2011-03-15 | 一种交互式修改视频会议辅流的方法、装置和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102123267A true CN102123267A (zh) | 2011-07-13 |
Family
ID=44251693
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201110061846 Pending CN102123267A (zh) | 2011-03-15 | 2011-03-15 | 一种交互式修改视频会议辅流的方法、装置和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102123267A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014177082A1 (zh) * | 2013-08-29 | 2014-11-06 | 中兴通讯股份有限公司 | 一种视频会议中处理视频的方法及终端 |
CN104363407A (zh) * | 2014-10-31 | 2015-02-18 | 华为技术有限公司 | 一种视频会议系统通讯方法及相应装置 |
CN105338286A (zh) * | 2015-10-30 | 2016-02-17 | 杭州华为企业通信技术有限公司 | 一种辅流传输方法及装置 |
WO2018010504A1 (zh) * | 2016-07-13 | 2018-01-18 | 中兴通讯股份有限公司 | 视频会议的控制方法、装置及系统 |
CN109076251A (zh) * | 2016-07-26 | 2018-12-21 | 惠普发展公司,有限责任合伙企业 | 远程会议传输 |
CN110798457A (zh) * | 2019-10-22 | 2020-02-14 | 厦门亿联网络技术股份有限公司 | 一种基于sip的辅流控制方法和会议系统 |
CN111752449A (zh) * | 2020-05-28 | 2020-10-09 | 维沃移动通信有限公司 | 屏幕控制方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004536529A (ja) * | 2001-07-16 | 2004-12-02 | チー−ルン ヤン | 複数のビデオチャネルから連続的にフレームを受信し、交互に連続的に、各々の該ビデオチャネルに関する情報を含む個々のフレームをテレビ会議における複数の参加者の各々に送信するための方法及び装置 |
CN101115183A (zh) * | 2007-09-06 | 2008-01-30 | 杭州华三通信技术有限公司 | 辅流发送的控制方法、mcu、主席终端及视频终端 |
CN101159843A (zh) * | 2007-10-29 | 2008-04-09 | 中兴通讯股份有限公司 | 在视频会议中改进视频切换效果的图像切换方法及系统 |
CN101242513A (zh) * | 2008-03-10 | 2008-08-13 | 杭州华三通信技术有限公司 | 一种视频会议中的双流传送方法和一种视频会议系统 |
CN101867766A (zh) * | 2010-05-05 | 2010-10-20 | 中兴通讯股份有限公司 | 一种会议电视终端辅视频源切换的方法及装置 |
-
2011
- 2011-03-15 CN CN 201110061846 patent/CN102123267A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004536529A (ja) * | 2001-07-16 | 2004-12-02 | チー−ルン ヤン | 複数のビデオチャネルから連続的にフレームを受信し、交互に連続的に、各々の該ビデオチャネルに関する情報を含む個々のフレームをテレビ会議における複数の参加者の各々に送信するための方法及び装置 |
CN101115183A (zh) * | 2007-09-06 | 2008-01-30 | 杭州华三通信技术有限公司 | 辅流发送的控制方法、mcu、主席终端及视频终端 |
CN101159843A (zh) * | 2007-10-29 | 2008-04-09 | 中兴通讯股份有限公司 | 在视频会议中改进视频切换效果的图像切换方法及系统 |
CN101242513A (zh) * | 2008-03-10 | 2008-08-13 | 杭州华三通信技术有限公司 | 一种视频会议中的双流传送方法和一种视频会议系统 |
CN101867766A (zh) * | 2010-05-05 | 2010-10-20 | 中兴通讯股份有限公司 | 一种会议电视终端辅视频源切换的方法及装置 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014177082A1 (zh) * | 2013-08-29 | 2014-11-06 | 中兴通讯股份有限公司 | 一种视频会议中处理视频的方法及终端 |
CN104427295A (zh) * | 2013-08-29 | 2015-03-18 | 中兴通讯股份有限公司 | 一种视频会议中处理视频的方法及终端 |
CN104363407A (zh) * | 2014-10-31 | 2015-02-18 | 华为技术有限公司 | 一种视频会议系统通讯方法及相应装置 |
WO2016065917A1 (zh) * | 2014-10-31 | 2016-05-06 | 华为技术有限公司 | 一种视频会议系统通讯方法及相应装置 |
CN105338286A (zh) * | 2015-10-30 | 2016-02-17 | 杭州华为企业通信技术有限公司 | 一种辅流传输方法及装置 |
CN107623833A (zh) * | 2016-07-13 | 2018-01-23 | 中兴通讯股份有限公司 | 视频会议的控制方法、装置及系统 |
WO2018010504A1 (zh) * | 2016-07-13 | 2018-01-18 | 中兴通讯股份有限公司 | 视频会议的控制方法、装置及系统 |
CN107623833B (zh) * | 2016-07-13 | 2021-04-20 | 中兴通讯股份有限公司 | 视频会议的控制方法、装置及系统 |
CN109076251A (zh) * | 2016-07-26 | 2018-12-21 | 惠普发展公司,有限责任合伙企业 | 远程会议传输 |
CN110798457A (zh) * | 2019-10-22 | 2020-02-14 | 厦门亿联网络技术股份有限公司 | 一种基于sip的辅流控制方法和会议系统 |
CN111752449A (zh) * | 2020-05-28 | 2020-10-09 | 维沃移动通信有限公司 | 屏幕控制方法及装置 |
CN111752449B (zh) * | 2020-05-28 | 2022-04-01 | 维沃移动通信有限公司 | 屏幕控制方法及装置 |
US12058184B2 (en) | 2020-05-28 | 2024-08-06 | Vivo Mobile Communication Co., Ltd. | Screen control method and apparatus |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102123267A (zh) | 一种交互式修改视频会议辅流的方法、装置和系统 | |
CN104038722B (zh) | 一种视频会议的内容交互方法及系统 | |
CN103413471B (zh) | 一种网络同步课堂控制方法及系统 | |
CN101477754A (zh) | 一种无线课堂系统 | |
CN105812951A (zh) | 流媒体数据交互方法、终端、服务器及系统 | |
JP2008236773A (ja) | 遠隔学習システム | |
CN112995575B (zh) | 一种无线投屏中转装置、中转控制方法和无线投屏系统 | |
CN102422639A (zh) | 用于在会议环境中翻译参与者之间的通信的系统和方法 | |
CN112616066B (zh) | 一种基于直播的小组讨论系统及方法 | |
CN103051864A (zh) | 移动视频会议方法及其系统 | |
CN100579199C (zh) | 视频会议系统的多屏受控显示方法 | |
CN105472306A (zh) | 一种视频会议资料共享方法及相关设备 | |
CN103384319B (zh) | 双流视频会议终端的图像缩放方法和系统 | |
CN112019792A (zh) | 会议控制方法、装置、终端设备和存储介质 | |
WO2016026336A1 (zh) | 音频视频会议中的远程互动方法、系统及mcu | |
CN105553978A (zh) | 带式输送机可视化辅助维修系统及流媒体的交互过程 | |
CN103843323A (zh) | 一种多媒体会议实现方法、相关设备及系统 | |
WO2014177082A1 (zh) | 一种视频会议中处理视频的方法及终端 | |
CN201063761Y (zh) | 多功能视频会议系统 | |
CN203136049U (zh) | 一种用于远程视频系统的交互式数据共享及展示系统 | |
CN103248862A (zh) | 长距离管道输煤视频会议系统及系统设备的配制方法 | |
CN109672944A (zh) | 监狱的电化教育管理系统及管理方法 | |
CN102172018A (zh) | 用于连接至少一个人机接口以操作在视频会议范围内与视频会议系统连接的至少一个数据源的方法和装置 | |
CN210804824U (zh) | 一种具有同步板书和直播功能的远程互动教学系统 | |
CN105871489B (zh) | 校园广播系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20110713 |
|
RJ01 | Rejection of invention patent application after publication |