CN105812716A - 基于移动设备的多方视频会议系统和方法 - Google Patents

基于移动设备的多方视频会议系统和方法 Download PDF

Info

Publication number
CN105812716A
CN105812716A CN201610202963.9A CN201610202963A CN105812716A CN 105812716 A CN105812716 A CN 105812716A CN 201610202963 A CN201610202963 A CN 201610202963A CN 105812716 A CN105812716 A CN 105812716A
Authority
CN
China
Prior art keywords
module
participant
text
good friend
mobile equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610202963.9A
Other languages
English (en)
Inventor
谢叔阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SICHUAN ZHONGKE TENGXIN TECHNOLOGY Co Ltd
Original Assignee
SICHUAN ZHONGKE TENGXIN TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SICHUAN ZHONGKE TENGXIN TECHNOLOGY Co Ltd filed Critical SICHUAN ZHONGKE TENGXIN TECHNOLOGY Co Ltd
Priority to CN201610202963.9A priority Critical patent/CN105812716A/zh
Publication of CN105812716A publication Critical patent/CN105812716A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/155—Conference systems involving storage of or access to video conference sessions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提出了一种基于移动设备的多方视频会议系统和方法，在进行远程的多方视频会议时，通过指纹鉴定获得与会资格，并且在多方视频会议进行过程中，还可以进行好友或好友群组之间的文本聊天和语音聊天，在进行文本聊天或语音聊天时，移动设备不发送当前图像给其他未进行文本聊天或语音聊天的与会者，而是重复发送进行文本聊天或语音聊天之前一段时间内的图像。通过本发明，避免他人顶替或冒充实际与会者，并保证了作为好友的与会者会议时交流的私密性。

Description

基于移动设备的多方视频会议系统和方法
技术领域
本发明涉及通信技术领域，尤其涉及一种基于移动设备的多方视频会议系统和方法。
背景技术
随着网络技术的发展，基于网络技术举办的多方参加的远程视频会议愈发受到企业和个人用户的欢迎。相比传统会议，远程会议在实现与会者视音频交流的同时，还可以方便地共享文本信息和图片信息等其他形式的资讯。更重要的是，远程会议突破了距离的限制，甚至可以实现实时跨国无障碍会议，极大地方便了例如商务会谈、学术讨论、在线教学等业务的开展。
传统的远程会议是通过互联网为载体的电视或电话会议，这种以电视或电话方式召开的远程会议具有一定的局限性，要求与会者只能在固定的位置参会。在这样的情况下，随着通信技术的发展，基于移动设备多方视频会议技术应运而生，使与会者可以使用通信资源覆盖的移动终端随时随地召开并参与远程会议。
然而，现有技术中通过移动设备发起的远程会议，虽然提升了便利性，但仍然具有传统会议中存在的与会者无法进行私密交流的缺点，并没有完全发挥移动设备的优势。
发明内容
为了克服上述现有技术存在的缺陷，本发明提供了一种基于移动设备的多方视频会议系统，包括中央处理模块、摄像模块、发送模块、指纹录入模块、显示模块、好友模块以及文本和语音交流模块，其特征在于，所述摄像模块用于拍摄使用当前移动设备参会的与会者的视频图像，所述中央处理模块对所述摄像模块拍摄的视频图像进行处理，通过所述发送模块发送给其他与会者，所述指纹录入模块在移动设备中存储移动设备拥有者的指纹，并对指纹进行鉴定，所述显示模块用于显示会议画面，在进行多方视频会议中有人发言时，所述显示模块上对应的与会者小头像发出信号，使当前移动设备的与会者切换显示模块的显示画面，观察到发言的与会者的图像，所述好友模块用于使当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友，并通过所述文本和语音交流模块形成文本或语音，所述中央处理模块操控所述发送模块将形成的文本或语音发送给某个好友或好友群组，从而与其进行仅限于两人间或群组间的文本聊天或语音聊天，当启动所述文本和语音交流模块时，当前移动设备的与会者的语音被发送给其选择的单个好友或好友群组，而不是发送给所有与会者，并且，当启动所述文本和语音交流模块时，所述中央处理模块操控所述发送模块，使其不发送当前图像，而是重复发送所述启动文本和语音交流模块之前一段时间内的图像。
本发明同时提供了一种基于移动设备的多方视频会议方法，包括以下步骤：步骤S1，移动设备拥有者接收远程会议发起者发送的会议通知，根据远程会议发起者的会议要求，在移动设备上鉴定指纹参与会议，或直接参与会议；步骤S2，远程会议开始后，根据所有与会者的网络状况进行统计，获得网络状况最差的与会者所允许的最佳图像分辨率，将该图像分辨率定为将在所有与会者的移动设备上显示的显示画面的图像分辨率，并且，在会议进行中，随着网络状况的变化，实时修正该图像分辨率；步骤S3，有人发言时，画面中对应的与会者小头像发出信号，使当前移动设备的与会者通过对移动设备进行操作选择发言的与会者，切换显示画面，观察到发言的与会者的图像，并且，当前移动设备的与会者并非只能收听到显示画面对应的与会者的发言，而是能够实时收听到所有当前发言；步骤S4，当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友，两个好友之间或好友群组之间互相发送文本或语音，进行文本聊天或语音聊天，其中语音聊天仅限于好友或好友群组之间，当前移动设备的与会者与单个好友或好友群组进行文本聊天或语音聊天时，其移动设备不发送当前图像给其他未进行文本聊天或语音聊天的与会者，而是重复发送进行文本聊天或语音聊天之前一段时间内的图像。
附图说明
图1示例了本发明中基于移动设备的多方视频会议系统的结构简图。
图2示例了本发明中基于移动设备的多方视频会议方法的流程简图。
具体实施方式
下面通过实施例，并结合附图，对本发明的技术方案做进一步具体的说明。
本发明中，多方视频会议系统是基于移动设备以及移动设备相应的通信网络而搭建的，移动设备可以是具有摄像模块的手机、平板电脑、笔记本电脑等，其相应的通信网络可以是基于手机通信的2g、3g、4g等通信网络或基于WiFi连接的互联网络等。
如图1所示，基于移动设备的多方视频会议系统1具有中央处理模块2、摄像模块3、发送模块4、指纹录入模块5、显示模块6、好友模块7以及文本和语音交流模块8。
摄像模块3，用于拍摄使用当前移动设备参会的与会者的视频图像，并由中央处理模块2根据当前的网络状况决定图像的分辨率。上行速度快时，图像分辨率高，上行速度慢时，图像分辨率低，从而得到发送给其他与会者的视频图像。
中央处理模块2通过发送模块4将得到的发送给其他与会者的视频图像通过当前移动设备的通信网络发送给其他与会者。
指纹录入模块5在移动设备中存储与会者、也就是移动设备拥有者的指纹，并可对指纹进行鉴定。当远程会议的发起者发起私密的远程会议时，通过中央处理模块2选择是否需要其他与会者临时鉴定指纹才可参会，从而避免他人顶替或冒充实际与会者，提高了远程会议的私密性。
显示模块6用于显示会议画面。对于移动设备而言，显示模块6一般为手机、平板电脑、笔记本电脑的显示屏，显示的内容为发送模块4发送的与会者当前的视频图像。在进行多方视频会议中有人发言时，显示模块6上对应的与会者小头像会发出信号，使当前移动设备的与会者通过例如滑动、点击触屏或鼠标操作等方式选择发言的与会者，切换显示模块的显示画面，从而可以观察到所有与会者的图像。另外，当前移动设备的与会者并非只能收听到显示模块6对应的显示画面的发言，而是能够实时收听到所有当前发言。
好友模块7用于使当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友。通过文本和语音交流模块8形成文本或语音，中央处理模块2操控发送模块4将形成的文本或语音发送给某个好友或好友群组，从而与其进行仅限于两人间或群组间的文本聊天或语音聊天，提高了远程会议的私密性。其中，所发送的文本中可以包括移动设备中所存储的各种文件。单个好友或好友群组的名单可以在好友模块7的好友列表中保存，在下次会议时可以直接与其通过文本和语音交流模块8进行私密交流。另外，当启动文本和语音交流模块8时，当前移动设备的与会者的语音仅仅会被发送给其选择的单个好友或好友群组，而不是发送给所有与会者。
进一步地，当启动文本和语音交流模块8时，中央处理模块2操控发送模块4，使其不发送当前图像，而是重复发送启动文本和语音交流模块8之前一段时间内(例如，10秒内、20秒内等)的图像，从而避免正在通过文本和语音交流模块8进行交流的好友之外的与会者立刻发现当前移动设备的与会者正在进行私密交流，在一定程度上保证与单个好友或好友群组交流的私密性。
如图2所示，示例了一种与本发明基于移动设备的多方视频会议系统对应的基于移动设备的多方视频会议方法。
步骤S1，移动设备拥有者接收远程会议发起者发送的会议通知，根据远程会议发起者的会议要求，在移动设备上鉴定指纹参与会议，或直接参与会议。
步骤S2，远程会议开始后，根据所有与会者的网络状况进行统计，获得网络状况最差的与会者所允许的最佳图像分辨率，将该图像分辨率定为将在所有与会者的移动设备上显示的显示画面的图像分辨率，并且，在会议进行中，随着网络状况的变化，实时修正该图像分辨率。
步骤S3，有人发言时，画面中对应的与会者小头像发出信号，使当前移动设备的与会者通过对移动设备进行操作选择发言的与会者，切换显示画面，观察到发言的与会者的图像，并且，当前移动设备的与会者并非只能收听到显示画面对应的与会者的发言，而是能够实时收听到所有当前发言。
步骤S4，当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友，两个好友之间或好友群组之间互相发送文本或语音，进行文本聊天或语音聊天。其中语音聊天仅限于好友或好友群组之间。另外，单个好友或好友群组的名单可以在移动设备的好友列表中保存，文本聊天的内容可以包括移动设备中所存储的各种文件。进一步地，当前移动设备的与会者与单个好友或好友群组进行文本聊天或语音聊天时，其移动设备不发送当前图像给其他未进行文本聊天或语音聊天的与会者，而是重复发送进行文本聊天或语音聊天之前一段时间内(例如，10秒内、20秒内等)的图像，从而避免进行文本聊天或语音聊天的好友之外的与会者立刻发现当前移动设备的与会者正在进行私密交流，在一定程度上保证与单个好友或好友群组交流的私密性。
以上实施例仅用于说明本发明，而并非对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明的范畴，本发明的专利保护范围应由权利要求限定。

Claims (10)

1.一种基于移动设备的多方视频会议系统，包括中央处理模块、摄像模块、发送模块、指纹录入模块、显示模块、好友模块以及文本和语音交流模块，其特征在于，
所述摄像模块用于拍摄使用当前移动设备参会的与会者的视频图像，所述中央处理模块对所述摄像模块拍摄的视频图像进行处理，通过所述发送模块发送给其他与会者，
所述指纹录入模块在移动设备中存储移动设备拥有者的指纹，并对指纹进行鉴定，
所述显示模块用于显示会议画面，在进行多方视频会议中有人发言时，所述显示模块上对应的与会者小头像发出信号，使当前移动设备的与会者切换显示模块的显示画面，观察到发言的与会者的图像，
所述好友模块用于使当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友，并通过所述文本和语音交流模块形成文本或语音，所述中央处理模块操控所述发送模块将形成的文本或语音发送给某个好友或好友群组，从而与其进行仅限于两人间或群组间的文本聊天或语音聊天，当启动所述文本和语音交流模块时，当前移动设备的与会者的语音被发送给其选择的单个好友或好友群组，而不是发送给所有与会者，
并且，当启动所述文本和语音交流模块时，所述中央处理模块操控所述发送模块，使其不发送当前图像，而是重复发送启动所述文本和语音交流模块之前一段时间内的图像。
2.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
所述移动设备是具有摄像模块的手机、平板电脑或笔记本电脑。
3.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
所述移动设备相应的通信网络是基于手机通信的2g、3g、4g通信网络或基于WiFi连接的互联网络。
4.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
当远程会议的发起者发起私密的远程会议时，通过所述中央处理模块选择是否需要其他与会者临时鉴定指纹才可参会。
5.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
通过所述文本和语音交流模块形成文本或语音时，所述发送模块发送的文本中包括移动设备中所存储的各种文件。
6.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
所述好友模块中包括好友列表，保存单个好友或好友群组的名单。
7.如权利要求1所述的基于移动设备的多方视频会议系统，其特征在于，
所述发送模块重复发送所述启动文本和语音交流模块之前一段时间内的图像时，所述一段时间可以为10秒或20秒。
8.一种基于移动设备的多方视频会议方法，包括以下步骤：
步骤S1，移动设备拥有者接收远程会议发起者发送的会议通知，根据远程会议发起者的会议要求，在移动设备上鉴定指纹参与会议，或直接参与会议；
步骤S2，远程会议开始后，根据所有与会者的网络状况进行统计，获得网络状况最差的与会者所允许的最佳图像分辨率，将该图像分辨率定为将在所有与会者的移动设备上显示的显示画面的图像分辨率，并且，在会议进行中，随着网络状况的变化，实时修正该图像分辨率；
步骤S3，有人发言时，画面中对应的与会者小头像发出信号，使当前移动设备的与会者通过对移动设备进行操作选择发言的与会者，切换显示画面，观察到发言的与会者的图像，并且，当前移动设备的与会者并非只能收听到显示画面对应的与会者的发言，而是能够实时收听到所有当前发言；
步骤S4，当前移动设备的与会者在视频会议进行时选择性地将其他与会者加为好友，两个好友之间或好友群组之间互相发送文本或语音，进行文本聊天或语音聊天，其中语音聊天仅限于好友或好友群组之间，当前移动设备的与会者与单个好友或好友群组进行文本聊天或语音聊天时，其移动设备不发送当前图像给其他未进行文本聊天或语音聊天的与会者，而是重复发送进行文本聊天或语音聊天之前一段时间内的图像。
9.如权利要求8所述的基于移动设备的多方视频会议方法，其特征在于，
文本聊天的内容可以包括移动设备中所存储的各种文件。
10.如权利要求8所述的基于移动设备的多方视频会议系统，其特征在于，
单个好友或好友群组的名单可以在移动设备的好友列表中保存。
CN201610202963.9A 2016-04-01 2016-04-01 基于移动设备的多方视频会议系统和方法 Pending CN105812716A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610202963.9A CN105812716A (zh) 2016-04-01 2016-04-01 基于移动设备的多方视频会议系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610202963.9A CN105812716A (zh) 2016-04-01 2016-04-01 基于移动设备的多方视频会议系统和方法

Publications (1)

Publication Number Publication Date
CN105812716A true CN105812716A (zh) 2016-07-27

Family

ID=56459491

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610202963.9A Pending CN105812716A (zh) 2016-04-01 2016-04-01 基于移动设备的多方视频会议系统和方法

Country Status (1)

Country Link
CN (1) CN105812716A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107800861A (zh) * 2016-08-29 2018-03-13 金德奎 一种信息直接传送的社交设备、系统及方法
CN108073665A (zh) * 2016-11-11 2018-05-25 北京视联动力国际信息技术有限公司 一种视联网页面和html页面的切换方法和装置
CN108366223A (zh) * 2018-04-26 2018-08-03 天清（沧州）科技有限公司 基于移动设备的多方视频会议系统和方法
CN110290342A (zh) * 2018-03-19 2019-09-27 北京视联动力国际信息技术有限公司 一种视频会议的方法、装置和移动终端
CN110635921A (zh) * 2019-09-10 2019-12-31 惠州市脉链科技有限公司 基于群组的交互方法、装置、设备及可读介质
CN110830440A (zh) * 2019-09-26 2020-02-21 视联动力信息技术股份有限公司 一种基于视联网的入会方法及装置
WO2020042892A1 (zh) * 2018-08-28 2020-03-05 维沃移动通信有限公司 通话模式切换方法及终端设备
CN117221007A (zh) * 2023-11-03 2023-12-12 南通极粟设计服务有限公司 一种基于数字多媒体的远程工作群聊室通信方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090089683A1 (en) * 2007-09-30 2009-04-02 Optical Fusion Inc. Systems and methods for asynchronously joining and leaving video conferences and merging multiple video conferences
CN104573460A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 基于指纹识别的电话会议与会者身份识别系统及方法
CN104580765A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 电话会议系统与会者断线重连身份验证方法
CN105159578A (zh) * 2015-08-24 2015-12-16 小米科技有限责任公司 视频显示模式的切换方法和装置
CN105323536A (zh) * 2014-07-30 2016-02-10 三亚中兴软件有限责任公司 一种电视会议中与会者私聊的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090089683A1 (en) * 2007-09-30 2009-04-02 Optical Fusion Inc. Systems and methods for asynchronously joining and leaving video conferences and merging multiple video conferences
CN105323536A (zh) * 2014-07-30 2016-02-10 三亚中兴软件有限责任公司 一种电视会议中与会者私聊的方法及装置
CN104573460A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 基于指纹识别的电话会议与会者身份识别系统及方法
CN104580765A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 电话会议系统与会者断线重连身份验证方法
CN105159578A (zh) * 2015-08-24 2015-12-16 小米科技有限责任公司 视频显示模式的切换方法和装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107800861A (zh) * 2016-08-29 2018-03-13 金德奎 一种信息直接传送的社交设备、系统及方法
CN107800861B (zh) * 2016-08-29 2023-09-22 深圳脸网科技有限公司 一种信息直接传送的社交设备、系统及方法
CN108073665A (zh) * 2016-11-11 2018-05-25 北京视联动力国际信息技术有限公司 一种视联网页面和html页面的切换方法和装置
CN108073665B (zh) * 2016-11-11 2019-03-12 视联动力信息技术股份有限公司 一种视联网页面和html页面的切换方法和装置
CN110290342A (zh) * 2018-03-19 2019-09-27 北京视联动力国际信息技术有限公司 一种视频会议的方法、装置和移动终端
CN108366223A (zh) * 2018-04-26 2018-08-03 天清（沧州）科技有限公司 基于移动设备的多方视频会议系统和方法
WO2020042892A1 (zh) * 2018-08-28 2020-03-05 维沃移动通信有限公司 通话模式切换方法及终端设备
CN110635921A (zh) * 2019-09-10 2019-12-31 惠州市脉链科技有限公司 基于群组的交互方法、装置、设备及可读介质
CN110635921B (zh) * 2019-09-10 2022-05-03 惠州市脉链科技有限公司 基于群组的交互方法、装置、设备及可读介质
CN110830440A (zh) * 2019-09-26 2020-02-21 视联动力信息技术股份有限公司 一种基于视联网的入会方法及装置
CN117221007A (zh) * 2023-11-03 2023-12-12 南通极粟设计服务有限公司 一种基于数字多媒体的远程工作群聊室通信方法及系统
CN117221007B (zh) * 2023-11-03 2024-02-02 南通极粟设计服务有限公司 一种基于数字多媒体的远程工作群聊室通信方法及系统

Similar Documents

Publication Publication Date Title
CN105812716A (zh) 基于移动设备的多方视频会议系统和方法
US10069830B2 (en) Communication system, communication method, and computer-readable recording medium
CN103229495B (zh) 针对位于同一位置的参与者提高多点会议可扩展性
US9185344B2 (en) Transmission terminal, communication system, and computer-readable storage medium
US9807128B2 (en) Communication system and computer readable medium
US20170208291A1 (en) System and method for video communication on mobile devices
CN102291562B (zh) 会议终端、会议服务器、会议系统及数据处理方法
US11647157B2 (en) Multi-device teleconferences
CN105635625A (zh) 视频通话方法和装置
KR20120079454A (ko) 스크린 공유 장치 및 방법
US20160037129A1 (en) Method and Apparatus for Enhanced Caller ID
US10972701B1 (en) One-way video conferencing
US9888211B1 (en) Replacing live video of a meeting participant with recorded video of the meeting participant during an online meeting
CN113206976B (zh) 音视频会议实现方法、装置、计算机设备和存储介质
CN111654661A (zh) 一种视频会议批注方法、视频会议服务器及存储介质
JP2015041885A (ja) テレビ会議システム
CN108366223A (zh) 基于移动设备的多方视频会议系统和方法
WO2011010563A1 (ja) ビデオ通話システム、主側端末、従側端末、プログラム
CN112312062B (zh) 多人会议记录回放的3d展示方法、存储介质及终端设备
CN110996037A (zh) 一种多点视频会议画面显示系统及其控制方法
JP2008227693A (ja) 話者映像表示制御システム、話者映像表示制御方法、話者映像表示制御プログラム、通信端末及び多地点テレビ会議システム
Fukayama et al. Development of remote support service by augmented reality videophone
JP2006148760A (ja) Ｔｖ電話インタビューシステム
KR101458408B1 (ko) Ｓｉｐ 기반의 통화가 가능한 스마트 디바이스들을 이용하는 정보 공유 방법 및 시스템
JP2006135456A (ja) 任意参加中継装置、任意参加テレビ会議システム及び任意参加中継方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160727

RJ01 Rejection of invention patent application after publication