CN110430436A - 一种云手机视频压缩方法、系统、装置及存储介质 - Google Patents

一种云手机视频压缩方法、系统、装置及存储介质 Download PDF

Info

Publication number
CN110430436A
CN110430436A CN201910702641.4A CN201910702641A CN110430436A CN 110430436 A CN110430436 A CN 110430436A CN 201910702641 A CN201910702641 A CN 201910702641A CN 110430436 A CN110430436 A CN 110430436A
Authority
CN
China
Prior art keywords
video stream
cloud mobile
video
stream data
compression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910702641.4A
Other languages
English (en)
Inventor
方煜逵
黄小勇
雷磊
黄坚
马日胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Micro Computing Internet Information Technology Co Ltd
Original Assignee
Hunan Micro Computing Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Micro Computing Internet Information Technology Co Ltd filed Critical Hunan Micro Computing Internet Information Technology Co Ltd
Priority to CN201910702641.4A priority Critical patent/CN110430436A/zh
Publication of CN110430436A publication Critical patent/CN110430436A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种云手机视频压缩方法、系统、装置及存储介质,方法包括:通过本地手机的摄像头进行视频采集,得到视频流数据;根据当前云手机的播放画质匹配对应的视频流压缩参数;根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;将压缩后的视频流数据传输至云手机中。本发明能通过云手机控制本地手机的摄像头进行视频采集,从而可以解决云手机人脸识别、二维码扫描支付、登陆、云手机视频监控,云图片存储等,不仅让云手机发挥其本身硬件下最大的功能,也能极大改善用户体验。本发明可广泛应用于云手机中。

Description

一种云手机视频压缩方法、系统、装置及存储介质
技术领域
本发明涉及视频采集技术领域,尤其涉及一种云手机视频压缩方法、系统、装置及存储介质。
背景技术
随着云服务、短视频、AR、VR技术广泛应用,用户使用云端云手机服务的时候,不免需要用户本地手机的摄像头实时视频流,云手机的扫描支付,人脸识别登陆,实时的视频监控,拍照等交互功能,而海外用户所处网络环境复杂,网络不稳定,延时高,网络带宽的占用比大,目前海外用户声音与视频的网络带宽占比在5%-60%之间,当传输视频流一定程度上导致网络波动时,用户控制云手机的网络延时飙升到999+,甚至出现声音和画面都卡死不动,控制操作无反应等假死情况,极大影响了用户使用云手机的体验。
发明内容
为了解决上述技术问题,本发明的目的是提供一种能提高用户体验的云手机视频压缩方法、系统、装置及存储介质。
本发明所采取的技术方案是:
一种云手机视频压缩方法,包括以下步骤:
通过本地手机的摄像头进行视频采集,得到视频流数据;
根据当前云手机的播放画质匹配对应的视频流压缩参数;
根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
将压缩后的视频流数据传输至云手机中。
作为所述的一种云手机视频压缩方法的进一步改进,所述视频流数据包括分辨率。
作为所述的一种云手机视频压缩方法的进一步改进,所述的根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据,这一步骤具体为:
根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
作为所述的一种云手机视频压缩方法的进一步改进,所述的播放画质包括240P画质、360P画质、480P画质和720P画质。
作为所述的一种云手机视频压缩方法的进一步改进,所述的分辨率包括224*128、568*320、640*480和1280*720。
本发明所采用的另一个技术方案是:
一种云手机视频压缩系统,包括:
采集单元,用于通过本地手机的摄像头进行视频采集,得到视频流数据;
匹配单元,用于根据当前云手机的播放画质匹配对应的视频流压缩参数;
压缩单元,用于根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
传输单元,用于将压缩后的视频流数据传输至云手机中。
作为所述的一种云手机视频压缩系统的进一步改进,所述的压缩单元具体用于根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
作为所述的一种云手机视频压缩系统的进一步改进,所述视频流数据包括分辨率。
本发明所采用的再一个技术方案是:
一种云手机视频压缩装置,包括:
至少一个处理器;
至少一个存储器,用于存储至少一个程序;
当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现所述的云手机视频压缩方法。
本发明所采用的再一个技术方案是:
一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述的云手机视频压缩方法被执行。
本发明的有益效果是:
本发明一种云手机视频压缩方法、系统、装置及存储介质能通过将视频流数据根据播放画质进行压缩,从而可以解决云手机视频传输时网络占用过高的情况,特别是在弱网环境,网络带宽本就不够用的情况下,节省出来的带宽可以提升画质,提升操控的流畅度,极大改善用户体验。
附图说明
图1是本发明一种云手机视频压缩方法的步骤流程图;
图2是本发明一种云手机视频压缩系统的模块方框图。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步说明:
参考图1,本发明实施例提供了一种云手机视频压缩方法,包括以下步骤:
S1、通过本地手机的摄像头进行视频采集,得到视频流数据;
S2、根据当前云手机的播放画质匹配对应的视频流压缩参数;
S3、根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
S4、将压缩后的视频流数据传输至云手机中。
本实施例中,所述视频流数据包括分辨率,所述的播放画质包括240P画质、360P画质、480P画质和720P画质。所述的分辨率包括224*128、568*320、640*480和1280*720。
本实施例中,当控制模式下选择720P画质时,本地摄像头视频按照1280x720分辨率进行压缩;当控制模式下选择480P画质时,本地摄像头视频按照640*480分辨率进行压缩;当控制模式下选择360P画质时,本地摄像头视频按照568x320分辨率进行压缩;当控制模式下选择240P画质时,本地摄像头视频按照224x128分辨率进行压缩。
用户在客户端操作界面根据当前网络状况手动切换视频码率档时(240P、360P、480P、720P),已经云手机自适系统的画质更改功能、程序调用so动态库服务api层GetPlayerService,驱动remote-play云端上的虚拟云手机设备,获取视频流帧进行传输,客户端在动态库EVENT_VIDEO_UPDATE_DATA更新图像的回调指令下在运行时机runloop下完成绘制光栅化渲染阶段。程序此时进入不同的画质匹配不同的摄像头采集压缩。至此根据不同的画质匹配不同的声音码率的整个流程完毕。
进一步作为优选的实施方式,所述的根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据,这一步骤具体为:
根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
本实施例中为了满足不同设备不同场景的需要(比如直播注重实时性,存储注重压缩比)定义了多种编码层次也就是Profile。Profiles可以细分为十几种,实际使用的主要有以下四种,BaslineProfile、Extended Profile、MainProfile、HighProfile。视频压缩很重要的一个就是帧间预测,也就是视频相邻的几帧有很大的相关性,变化不会太大,所以存在很多冗余信息,压缩要做的就是去除这些冗余信息,总结起来就是Profile越高,压缩比就越高,但是编码、解码时要求的设备性能也就越高,编码、解码的效率也就越低。
在录像时需要将拍摄的每一帧sampleBuffer(音频或者视频)传给assetWriter,并制定压缩参数;先通过assetReader取出每一帧sampleBuffer(音频或视频),然后指定压缩参数后将每一帧传给assetWriter最终实现自定义压缩的目的。
参考图2,本实施例提供了一种云手机视频压缩系统,包括:
采集单元,用于通过本地手机的摄像头进行视频采集,得到视频流数据;
匹配单元,用于根据当前云手机的播放画质匹配对应的视频流压缩参数;
压缩单元,用于根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
传输单元,用于将压缩后的视频流数据传输至云手机中。
上述方法实施例中的内容均适用于本系统实施例中,本系统实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
进一步作为优选的实施方式,所述的压缩单元具体用于根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
进一步作为优选的实施方式,所述视频流数据包括分辨率。
本实施例还提供了一种云手机视频压缩装置,包括:
至少一个处理器;
至少一个存储器,用于存储至少一个程序;
当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现所述的云手机视频压缩方法。
上述方法实施例中的内容均适用于本装置实施例中,本装置实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
本实施例还提供了一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述的云手机视频压缩方法被执行。
上述方法实施例中的内容均适用于本存储介质实施例中,本存储介质实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
综上所述,本发明一种云手机视频压缩方法、系统、装置及存储介质能通过云手机控制本地手机的摄像头进行视频采集,从而可以解决云手机人脸识别、二维码扫描支付、登陆、云手机视频监控,云图片存储等,不仅让云手机发挥其本身硬件下最大的功能,也能极大改善用户体验。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向对象的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本文描述的过程的操作,除非本文另外指示或以其他方式明显地与上下文矛盾。本文描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本文所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本文所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的对象,包括显示器上产生的物理和有形对象的特定视觉描绘。
以上是对本发明的较佳实施进行了具体说明,但本发明创造并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可做作出种种的等同变形或替换,这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (10)

1.一种云手机视频压缩方法,其特征在于,包括以下步骤:
通过本地手机的摄像头进行视频采集,得到视频流数据;
根据当前云手机的播放画质匹配对应的视频流压缩参数;
根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
将压缩后的视频流数据传输至云手机中。
2.根据权利要求1所述的一种云手机视频压缩方法,其特征在于:所述视频流数据包括分辨率。
3.根据权利要求1所述的一种云手机视频压缩方法,其特征在于:所述的根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据,这一步骤具体为:
根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
4.根据权利要求1所述的一种云手机视频压缩方法,其特征在于:所述的播放画质包括240P画质、360P画质、480P画质和720P画质。
5.根据权利要求2所述的一种云手机视频压缩方法,其特征在于:所述的分辨率包括224*128、568*320、640*480和1280*720。
6.一种云手机视频压缩系统,其特征在于,包括:
采集单元,用于通过本地手机的摄像头进行视频采集,得到视频流数据;
匹配单元,用于根据当前云手机的播放画质匹配对应的视频流压缩参数;
压缩单元,用于根据视频流压缩参数,对视频流数据进行编码压缩处理,得到压缩后的视频流数据;
传输单元,用于将压缩后的视频流数据传输至云手机中。
7.根据权利要求6所述的一种云手机视频压缩系统,其特征在于:所述的压缩单元具体用于根据视频流压缩参数,对视频流数据进行帧内预测、变换、量化、环路滤波和熵编码处理,得到压缩后的视频流数据。
8.根据权利要求6所述的一种云手机视频压缩系统,其特征在于:所述视频流数据包括分辨率。
9.一种云手机视频压缩装置,其特征在于:包括:
至少一个处理器;
至少一个存储器,用于存储至少一个程序;
当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现如权利要求1-5任一项所述的云手机视频压缩方法。
10.一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在计算机上运行时,使得如权利要求1~5任一项所述的云手机视频压缩方法被执行。
CN201910702641.4A 2019-07-31 2019-07-31 一种云手机视频压缩方法、系统、装置及存储介质 Pending CN110430436A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910702641.4A CN110430436A (zh) 2019-07-31 2019-07-31 一种云手机视频压缩方法、系统、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910702641.4A CN110430436A (zh) 2019-07-31 2019-07-31 一种云手机视频压缩方法、系统、装置及存储介质

Publications (1)

Publication Number Publication Date
CN110430436A true CN110430436A (zh) 2019-11-08

Family

ID=68413378

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910702641.4A Pending CN110430436A (zh) 2019-07-31 2019-07-31 一种云手机视频压缩方法、系统、装置及存储介质

Country Status (1)

Country Link
CN (1) CN110430436A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109495506A (zh) * 2018-12-24 2019-03-19 广州微算互联信息技术有限公司 云手机的传感器数据输入方法和服务器
CN111371954A (zh) * 2020-03-11 2020-07-03 广州微算互联信息技术有限公司 一种对云手机资源配置进行动态调整的方法及装置
CN111803921A (zh) * 2020-06-09 2020-10-23 广州速启科技有限责任公司 基于云手机系统的游戏互动方法、电子设备、存储介质
CN111885252A (zh) * 2020-06-09 2020-11-03 广州速启科技有限责任公司 一种手机扩展使用方法
WO2021148016A1 (zh) * 2020-01-22 2021-07-29 华为技术有限公司 一种基于云手机的直播方法及其装置
CN113766061A (zh) * 2021-08-31 2021-12-07 北京百度网讯科技有限公司 一种图像获取方法、装置、设备以及存储介质
CN113938457A (zh) * 2021-09-30 2022-01-14 北京润信恒达科技有限公司 一种云手机应用远程摄像头的方法、系统和设备
CN114025083A (zh) * 2021-10-28 2022-02-08 北京百度网讯科技有限公司 云设备的视频采集方法、装置、电子设备和介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060263758A1 (en) * 2005-05-06 2006-11-23 Crutchfield Corporation System and method of image display simulation
CN107147609A (zh) * 2016-03-01 2017-09-08 中兴通讯股份有限公司 一种提升云终端安全节能的方法及云终端、云服务器
CN108234659A (zh) * 2018-01-08 2018-06-29 西安万像电子科技有限公司 数据处理方法、装置及系统
US20190057070A1 (en) * 2013-03-14 2019-02-21 Pti Marketing Technologies Inc. System and method for printable document viewer optimization
CN109819272A (zh) * 2018-12-26 2019-05-28 平安科技(深圳)有限公司 视频发送方法、装置、计算机可读存储介质及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060263758A1 (en) * 2005-05-06 2006-11-23 Crutchfield Corporation System and method of image display simulation
US20190057070A1 (en) * 2013-03-14 2019-02-21 Pti Marketing Technologies Inc. System and method for printable document viewer optimization
CN107147609A (zh) * 2016-03-01 2017-09-08 中兴通讯股份有限公司 一种提升云终端安全节能的方法及云终端、云服务器
CN108234659A (zh) * 2018-01-08 2018-06-29 西安万像电子科技有限公司 数据处理方法、装置及系统
CN109819272A (zh) * 2018-12-26 2019-05-28 平安科技(深圳)有限公司 视频发送方法、装置、计算机可读存储介质及电子设备

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109495506A (zh) * 2018-12-24 2019-03-19 广州微算互联信息技术有限公司 云手机的传感器数据输入方法和服务器
CN109495506B (zh) * 2018-12-24 2020-05-22 广州微算互联信息技术有限公司 云手机的传感器数据输入方法和服务器
WO2021148016A1 (zh) * 2020-01-22 2021-07-29 华为技术有限公司 一种基于云手机的直播方法及其装置
CN111371954A (zh) * 2020-03-11 2020-07-03 广州微算互联信息技术有限公司 一种对云手机资源配置进行动态调整的方法及装置
CN111803921A (zh) * 2020-06-09 2020-10-23 广州速启科技有限责任公司 基于云手机系统的游戏互动方法、电子设备、存储介质
CN111885252A (zh) * 2020-06-09 2020-11-03 广州速启科技有限责任公司 一种手机扩展使用方法
CN111803921B (zh) * 2020-06-09 2024-02-02 广州速启科技有限责任公司 基于云手机系统的游戏互动方法、电子设备、存储介质
CN111885252B (zh) * 2020-06-09 2024-05-31 广州速启科技有限责任公司 一种手机扩展使用方法
CN113766061A (zh) * 2021-08-31 2021-12-07 北京百度网讯科技有限公司 一种图像获取方法、装置、设备以及存储介质
CN113938457A (zh) * 2021-09-30 2022-01-14 北京润信恒达科技有限公司 一种云手机应用远程摄像头的方法、系统和设备
CN113938457B (zh) * 2021-09-30 2023-11-10 北京润信恒达科技有限公司 一种云手机应用远程摄像头的方法、系统和设备
CN114025083A (zh) * 2021-10-28 2022-02-08 北京百度网讯科技有限公司 云设备的视频采集方法、装置、电子设备和介质

Similar Documents

Publication Publication Date Title
CN110430436A (zh) 一种云手机视频压缩方法、系统、装置及存储介质
CN110198492B (zh) 一种视频的水印添加方法、装置、设备及存储介质
US10499082B2 (en) Optimized coding method for omnidirectional video, computer readable storage medium and computer device
CN110430441B (zh) 一种云手机视频采集方法、系统、装置及存储介质
CN109792540A (zh) 利用每帧参数控制的硬件加速的视频编码方法和系统
CN106170979A (zh) 恒定质量视频编码
US20180184108A1 (en) Motion Vector Field Coding and Decoding Method, Coding Apparatus, and Decoding Apparatus
CN108574841B (zh) 一种基于自适应量化参数的编码方法及装置
JP2008504750A5 (zh)
CN110087081B (zh) 视频编码方法、装置、服务器及存储介质
CN107172376B (zh) 一种基于屏幕共享的视频编码方法和装置
US20230232001A1 (en) Adaptive coding of prediction modes using probability distributions
CN112437301B (zh) 一种面向视觉分析的码率控制方法、装置、存储介质及终端
CN108353175A (zh) 使用系数引起的预测处理视频信号的方法和装置
CN110891177A (zh) 视频降噪、视频转码中的降噪处理方法、装置和机器设备
US10021398B2 (en) Adaptive tile data size coding for video and image compression
CN115118964A (zh) 视频编码方法、装置、电子设备及计算机可读存储介质
KR102238091B1 (ko) 3d 모델 압축 및 압축해제 시스템 및 방법
CN115209147B (zh) 摄像头视频传输带宽优化方法、装置、设备及存储介质
WO2021007702A1 (en) Video encoding method, video decoding method, video encoding device, and video decoding device
WO2020053688A1 (en) Rate distortion optimization for adaptive subband coding of regional adaptive haar transform (raht)
CN111212288B (zh) 视频数据的编解码方法、装置、计算机设备和存储介质
AU2016201449B2 (en) Encoding and decoding using perceptual representations
CN110785994A (zh) 图像处理的方法、设备及存储介质
EP3989566A1 (en) Motion information list construction method in video encoding and decoding, device, and apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191108

RJ01 Rejection of invention patent application after publication