CN105472271A - 一种视频互动方法、装置和系统 - Google Patents

一种视频互动方法、装置和系统 Download PDF

Info

Publication number
CN105472271A
CN105472271A CN201410459199.4A CN201410459199A CN105472271A CN 105472271 A CN105472271 A CN 105472271A CN 201410459199 A CN201410459199 A CN 201410459199A CN 105472271 A CN105472271 A CN 105472271A
Authority
CN
China
Prior art keywords
video
server
background image
frame
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410459199.4A
Other languages
English (en)
Inventor
易珉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201410459199.4A priority Critical patent/CN105472271A/zh
Publication of CN105472271A publication Critical patent/CN105472271A/zh
Pending legal-status Critical Current

Links

Abstract

本发明实施例公开了一种视频互动方法、装置和系统,该方法可包括:云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧;所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。本发明实施例可以实现分隔两地的人们聚集在一起活动的模拟效果。

Description

一种视频互动方法、装置和系统
技术领域
本发明涉及视频通信领域,尤其涉及一种视频互动方法、装置和系统。
背景技术
当今社会,分隔两地的人们最常见的交流方式就是打电话和网络聊天。但这种交流方式却远远无法满足人们的需求,例如:每逢节假日分隔两地的人们总是想尽一切办法聚集在一起活动。当今社交分隔两地的人们需要聚集一起就只能通过交通工具聚集到同一个地方进行活动,然而往往在节假日时交通工具的交通费用很高,且坐交通工具的时间会比较长。
然而,在当今社会中,没有一种技术可以实现分隔两地的人们聚集在一起活动的模拟效果。
发明内容
本发明实施例提供了一种视频互动方法、装置和系统,可以实现分隔两地的人们聚集在一起活动的模拟效果。
第一方面,本发明实施例提供一种视频互动方法,包括:
云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;
所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
第二方面,本发明实施例提供一种视频互动方法,包括:
云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,以使所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,以及所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
第三方面,本发明实施例提供一种视频互动系统,包括:云服务器、第一服务器和第二服务器,其中:
所述云服务器,用于接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器还用于接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器还用于向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;
所述第一服务器,用于通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
所述第二服务器,用于通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
第四方面,本发明实施例提供一种视频互动装置,包括:第一生成单元、第二生成单元和发送单元,其中:
所述第一生成单元,用于接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述第二生成单元,用于接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述发送单元,用于向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,以使所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,以及所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
上述技术方案中,云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;云服务器还接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。这样可以实现分隔两地的人们聚集在一起活动的模拟效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种视频互动方法的示意图;
图2是本发明实施例提供的另一种视频互动方法的示意图;
图3是本发明实施例提供的一种视频互动系统的结构示意图;
图4是本发明实施例提供的另一种视频互动系统的结构示意图;
图5是本发明实施例提供的一种视频互动装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,图1是本发明实施例提供的一种视频互动方法的示意图,如图1所示,包括以下步骤:
101、云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息。
上述第一音视频信息的当前视频帧可以是在执行步骤101时云服务器接收到的第一音视频信息中的视频帧。另外,步骤101可以是一直执行的,那么可以将第一音视频信息中的所有视频帧的背景图像都替换成上述第一背景图像。另外,上述当前视频帧中的背景图像可以是该当前视频帧中作为背景的部分图像,例如:当前视频帧的背景图像可以是该当前视频帧中位于第一用户活动图像后面的图像,如上述当前视频帧为第一用户用餐的视频图像,那么,该当前视频帧的背景图像除第一用户的人物特征图像之外的图像;其中,人物特征图像可以:用户图像和用户使用的物具图像,而物具图像可以包括餐桌图像、餐具图像和食品图像等。
102、云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息。
同理,步骤102也可以一直执行,直到将第二音视频信息中的所有视频帧的背景图像都替换成上述第二背景图像。
作为另一种可选的实施方式,步骤101中的当前视频帧和步骤102中的当前视频帧可以是同时一时刻采集的视频帧,例如:101中的当前视频帧和步骤102中的当前视频帧中的时间戳相同,或者步骤101和步骤102执行的起始时间和执行速度相同。这样就可以保证在第一服务器和第二服务器播放的内容可以同步。
作为另一种可选的实施方式,上述第一用户和第二用户都可以是指一个或者多个用户,且第一用户活动和第二用户活动可以是第一用户和第二用户进行活动可以是相同的,例如:第一用户活动为第一用户就餐或者第一用户聚会等活动,那么,第二用户活动也为第二用户就餐或者第二用户聚会等活动。
103、云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧。
104第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。
105第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。
其中,所述第二服务器的数量为一个或者多个。
需要说明的是,第一服务器和第二服务器播放上述第一目标视频帧和第二目标视频帧时,同时还会播放第一音视频信息中与第一目标视频帧对应的音频信息,以及还会播放第二音视频信息中与第二目标视频帧对应的音频信息。
需要说明的是,步骤103、104和105都是每当步骤101和102替换完一个视频帧就执行一次,这样当上述多个步骤多次执行时,即连续播放多个第一目标视频帧和第二目标视频帧,从而实现播放第一音视频信息和第二音视频信息。即第一用户可以在第一服务器的播放装置上观看第一音视频信息和第二音视频信息,第二用户可以在第二服务器的播放装置上观看第一音视频信息和第二音视频信息。从而实现分隔两地的人们聚集在一起活动的模拟效果。例如:第一用户在聚餐,第二用户也在聚餐,这样第一服务器和第二服务器就可以分别通过摄像装置采集第一用户聚餐和第二用户聚餐的图像,并同步发送至云服务器,云服务器再对接收到的视频帧进行背景替换处理,例如:将第一用户聚餐图像的背景替换为海景图像,第二用户聚餐图像的背景替换为山景图像,这样第一服务器和第二服务器就可以播放第一用户在海边聚餐和第二用户在山里聚餐的视频。当然云服务器还可以将第一音视频信息和第二音视频信息的视频帧都替换为同一背景图像,这样就可以实现第一用户和第二用户在同一地点活动的效果。即所述第一背景图像和第二背景图像可以为相同的图像,或者所述第一背景图像和第二背景图像可以为不同的图像。
作为另一种可选的实施方式,云服务器可以是通过图像特征提取算法对上述第一音视频信息和第二音视频信息中的视频帧替换背景图像。其中,图像特征提取算法可以是通过如下至少一项特征进行提取的算法:
颜色特征、纹理特征、形状特征和空间关系特征。
例如:基于Beamlet变换的图像线特征的提取算法、Voronio棋盘格特征法、灰度共生矩阵的纹理特征分析方法、灰度共生矩阵特征分析方法、Tamura纹理特征分析方法、自回归纹理模型特征分析方法或者小波变换特征分析方法等。例如:上述云服务器将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,可以包括:
云服务器将目标背景图像中的一部分图像作为第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;
上述云服务器将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,可以包括:
所述云服务器将所述目标背景图像中的另一部分图像作为第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧。
这样通过上述图像特征提取算法就可以精确地提出中各视频帧的人物特征图像,再将提取的人物特征图像叠加至上述第一背景图像或者第二背景图像,从而实现各视频帧的背景图像的替换。
作为另一种可选的实施方式,上述云服务器将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,可以包括:
所述云服务器将目标背景图像中的一部分图像作为第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;
上述云服务器将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,可以包括:
所述云服务器将所述目标背景图像中的另一部分图像作为第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧。
这样就可以实现第一音视频信息中各视频帧的背景图像为目标背景图像的一部分,第二音视频信息中各视频帧的背景图像为目标背景图像的另一部分。例如:上述目标背景图像为海景图像,这样该实施方式可以实现将该海景图像的左边图像替换为第一音视频信息中各视频帧的背景图像,将该海景图像的右边图像替换为第二音视频信息中各视频帧的背景图像。从而实现当同时播放第一音视频信息和第二音视频信息时,就可以达到第一用户和第二用户一起在海边活动的效果。为了提供效果,本实施例中,云服务器还可以将第一音视频信息中的当前视频帧和第二音视频信息中对应的当前视频帧进行合成以生成活动目标视频帧,该活动目标视频帧就包含第一用户活动和第二用户活动的图像,当连续执行上述步骤时,就可以实现在一个视频内播放第一用户活动和第二用户活动,以达到更为逼真的效果。例如:
步骤103可以包括:
所述云服务器将所述第一目标视频帧与第二目标视频帧进行合成,以生成活动目标视频帧,并分别向所述第一服务器和第二服务器发送所述活动目标视频帧;
步骤104可以包括:
所述第一服务器通过视频播放装置播放所述活动目标视频帧;
步骤105可以包括:
所述第二服务器通过视频播放装置播放所述活动目标视频帧。
作为另一种可选的实施方式,所述方法还可以包括如下步骤:
云服务器接收所述第一服务器发送的所述第一背景图像和/第二背景图像;和/或者
云服务器接收所述第二服务器发送的所述第一背景图像和/第二背景图像。
这样可以实现第一背景图像和第二背景图像由第一服务器或者第二服务器提供。从而可以实现第一服务器和第二服务器播放任意背景图像的第一音视频信息和第二音视频信息。
作为另一种可选的实施方式,所述方法还可以包括如下步骤:
所述第一服务器展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像;和/或
所述第二服务器展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像。
这样可以实现第一音视频信息和第二音视频信息的背景图像由用户决定,例如:用户可以观看在海边聚餐的效果,就可以选择海景图像作为上述第一背景图像和第二背景图像。
作为另一种可选的实施方式,如图2所示,所述方法还可以包括如下步骤:
106、第一用户终端分别向第一服务器和第二服务器发送订单请求,所述订单请求包含活动订单和订单时间。
上述第一用户终端可以是手机、平板电脑、个人计算机等用户终端。另外,上述活动订单包括但不限于:聚餐订单、唱歌订单、喝茶订单、运动活动订单、教育订单等需要至少两个人参与的活动的订单。上述订单时间可以是指上述活动订单对应的活动的起始时间,或者上述活动订单对应的活动的起始时间和终止时间。另外,上述第一用户终端可以是上述第一用户中一个用户使用的用户终端。
107、第一用户终端向第二用户终端发送用于邀请参与活动的邀请消息,所述邀请消息包含所述订单时间和第二服务器的信息。
上述第二用户终端可以是一个或者多个用户终端。另外,上述邀请消息还可以包括上述活动订单对应的活动内容信息,甚至还可以包括上述活动订单。这样当第二用户终端对应的第二用户查看到该邀请消息时,就可以在上述订单时间到第二服务器所在的位置区域接收服务。上述第二用户终端包括但不限于:手机、平板电脑、个人计算机等等。
108、第一服务器输出所述活动订单,以使所述第一用户终端的第一用户在所述订单时间接收所述第一服务器输出的所述活动订单对应的服务;且所述第一服务器通过摄像装置采集所述第一用户的活动并生成第一音视频信息,并分别向云服务器发送所述第一音视频信息中各视频帧。
当第一服务器接收到上述订单请求后,就可以输出上述活动订单,以及还可以输出上述订单时间。且第一服务器可以是在上述订单时间之前输出上述活动订单。例如:上述第一服务器为某一商家服务器,这样当该第一服务器输出上述活动订单后,该商家就可以根据该活动订单在上述订单时间向第一用户提供该活动订单对应的服务器。如上述活动订单为聚餐的菜单,那么该商家就可以在上述订单时间提供相应的饭菜,以让第二用户使用。另外,所述第一服务器输出的所述活动订单对应的服务向第二用户携带的其他用户一起提供。如上述活动订单为唱歌订单,那么该商家就可以在上述订单时间提供为第一用户提供相应的唱歌服务。
另外,具体可以是第一用户位于第一服务器所在的位置区域(例如:第一服务器对应的某一聚合场所)时,第一用户就可以接收到上述服务,即第一用户开始进行活动,这样第一服务器就可以通过摄像装置采集第一用户的活动,以生成上述第一音视频信息。具体可以是通过至少一个摄像头采集第一用户的活动。
另外,上述第一服务器可以是采集到一视频帧就发送一视频帧。
109、第二服务器输出所述活动订单,以使所述第二用户终端的第二用户在所述订单时间接收所述第二服务器输出的所述活动订单对应的服务;且所述第二服务器通过摄像装置采集所述第二用户的活动并生成第二音视频信息,并分别向云服务器发送所述第二音视频信息中各视频帧。
同理,第二用户在上述订单时间也可以接收到上述第二服务器输出的所述活动订单对应的服务,以及第二服务器生成上述第二音视频信息。
作为另一种可选的实施方式,上述发送第一音视频信息和第二音视频信息都可以是进行加密发送,这样可以提高第一音视频信息和第二音视频信息的安全和隐私性。另外,第一服务器可以通过多个摄像装置采集第一用户的活动,这样可以实现从不同的角度采集第一用户的活动,从而使第一音视频信息可以更好地反映出第一用户的活动效果。同理,第二服务器也可以通过多个摄像装置采集第一用户的活动。
通过上述步骤就可以实现分隔两地的人们聚集在一起活动的模拟效果,这样分隔两地的人们直接可以通过上述方法进行聚在一起活动,从而不需要通过拥挤且高费用的交通工具聚在一起活动,还可以快速地聚集一起活动。例如:分隔两地的同学、朋友、家人或者生意伙伴通过上述方法可以实现在不同的地区一起进行活动,如聚餐、唱歌、喝茶等等。
另一种可选的实施方式,所述方法还可以包括以下步骤:
第一用户终端向所述第二服务器发送所述第二用户终端的验证信息,以及所述第一用户终端向所述第二用户终端发送用于通知所述验证信息的通知消息。
当所述第二用户终端位于所述第二服务器所处的位置区域时,由所述第二服务器输出所述验证信息,并由所述第二服务器对应的用户基于所述第二服务器输出的验证信息对所述第二用户提供的验证信息进行验证,当验证通过时,在所述订单时间向所述第二用户提供所述活动订单对应的服务。
上述第二用户提供的验证信息,可以是第二用户终端输出的验证信息。上述验证信息可以是第一用户终端与第二服务器预先协商好的用于验证第二用户终端的信息,即只有携带有该验证信息的用户终端对应的用户对可以接收到第二服务器输出的所述活动订单对应的服务。另外,该验证信息可以是第二用户终端的标识,或者是一段随机字符等。当第二用户终端对应的第二用户位于所述第二服务器所处的位置区域(例如:第二用户来到第二服务器对应的商家店面中)时,第二服务器就可以输出上述验证信息,这样第二服务器对应用户(例如:第二服务器的商家)就可以比较第二用户终端提供的验证信息和第二服务器输出的验证信息是否一致,若一致,则验证通过,从而向第二用户提供相应的服务。
该实施方式中,可以提高上述流程的安全级别。
作为另一种可选的实施方式,步骤106可以包括:
第一用户终端向云服务器发送所述订单请求以及所述第一服务器和第二服务器的标识信息;
向云服务器分别向所述第一服务器和第二服务器发送所述订单请求和第一用户终端的标识信息。
例如:第一用户终端可以在云服务器提供的网页上述发送上述订单请求以及所述第一服务器和第二服务器的标识信息;或者第一用户终端可以是预先安装好上述特定应用程序,这样第一用户就可以通过该特定应用程序向上述云服务器发送上述订单请求,以及第一服务器和第二服务器的标识信息。这样该云服务器就知道该订单请求是向第一服务器和第二服务器预订的,该云服务器再分别向所述第一服务器和第二服务器发送所述订单请求和第一用户终端的标识信息,从而实现第一服务器和第二服务器接收到上述订单请求。
该实施方式,由于通过云服务器可以完成向第一服务器和第二服务器发送订单请求,这样相比分别向第一服务器和第二服务器发送订单请求,该实施方式可以实现更加效率地完成订单预订
作为另一种可选的实施方式,所述方法还可以包括:
第一用户终端控制源账号向所述云服务器对应的云账号转移第一特定数值,该第一特定数值与所述活动订单对应;
所述云服务器控制所述云账号向所述第一服务器对应的第一账号转移第二特定数值,以及控制所述云账号向所述第二服务器对应的第二账号转移第三特定数值。
其中,上述源账号可以是银行账号或者支付账号或者通信账号等,且该源账号可以是预先与上述第一用户终端绑定的账号。另外,上述云账号、第一账号和第二账号也可以是银行账号或者支付账号或者通信账号等,且云账号与云服务器绑定,第一账号可以是预先与上述第一服务器绑定,而第二账号可以是预先与第二服务器绑定。另外,云账号向第一账号转移的第二特定数值,与云账号向第二账号转移的第三特定数值可以是相同的也可以是不同的,或者上述第一特定数值大于第二特定数值,以及大于第三特定数值。
例如:上述第一服务器为第一商家服务器,第二服务器为第二商家服务器,这样上述云账号向第一账号转移的第二特定数值可以是在第一商家服务器对应的第一商家消费上述活动订单所需要支付的金额,上述云账号向第二账号转移的第三特定数值可以是在第二商家服务器对应的第二商家消费上述活动订单所需要支付的金额。通过上述实施方式,就可以实现只需要第一用户终端向云账号进行数值转移,而第二用户终端是不需要进行数值转移的。
上述技术方案中,云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;云服务器还接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。这样可以实现分隔两地的人们聚集在一起活动的模拟效果。
下面为本发明装置实施例,本发明装置实施例用于执行本发明方法实施例一实现的方法,为了便于说明,仅示出了与本发明实施例相关的部分,具体技术细节未揭示的,请参照本发明实施例一。
请参阅图3,图3是本发明实施例提供的一种视频互动系统的结构示意图,如图3所示,包括,包括:云服务器31、第一服务器32和第二服务器33,其中:
云服务器31,用于接收第一服务器32发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器32通过摄像装置321采集第一用户活动的音视频信息。
云服务器31还用于接收第二服务器33发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器33通过摄像装置331采集第二用户活动的音视频信息。
云服务器31还用于向所述第一服务器32和第二服务器33发送所述第一目标视频帧和第二目标视频帧。
所述第一服务器32,用于通过视频播放装置322同时播放所述第一目标视频帧和第二目标视频帧。
所述第二服务器33,用于通过视频播放装置332同时播放所述第一目标视频帧和第二目标视频帧。
其中,上述第二服务器的数量为一个或者多个。
作为一种可选的实施方式,云服务器31可以用于通过图像特征提取算法从所述第一音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第一背景图像上,以生成第一目标视频帧;
所述云服务器31可以用于通过图像特征提取算法从所述第二音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第二背景图像上,以生成第二目标视频帧。
作为一种可选的实施方式,云服务器31可以用于将目标背景图像中的一部分图像作为第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;
云服务器31可以用于将所述目标背景图像中的另一部分图像作为第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧。
可选的,所述第一背景图像和第二背景图像可以为相同的图像,或者所述第一背景图像和第二背景图像可以为不同的图像。
作为一种可选的实施方式,所述云服务器31可以用于将所述第一目标视频帧与第二目标视频帧进行合成,以生成活动目标视频帧,并分别向所述第一服务器32和第二服务器33发送所述活动目标视频帧;
第一服务器32可以用于通过视频播放装置播放所述活动目标视频帧;
第二服务器33可以用于通过视频播放装置播放所述活动目标视频帧。
作为一种可选的实施方式,所述云服务器31还可以用于接收所述第一服务器32发送的所述第一背景图像和/第二背景图像;和/或者
所述云服务器31还可以用于接收所述第二服务器33发送的所述第一背景图像和/第二背景图像。
作为一种可选的实施方式,第一服务器32还可以用于展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像;和/或
第二服务器33还可以用于展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像。
如图5所示,所述系统还可以包括:第一用户终端34和第二用户终端35,其中:
第一用户终端34,用于分别向第一服务器32和第二服务器33发送订单请求,所述订单请求包含活动订单和订单时间。
第一用户终端34还用于向第二用户终端35发送用于邀请参与活动的邀请消息,所述邀请消息包含所述订单时间和第二服务器33的信息。
第一服务器32还用于输出所述活动订单,以使所述第一用户终端34的第一用户在所述订单时间接收所述第一服务器32输出的所述活动订单对应的服务;且所述第一服务器32通过摄像装置321采集所述第一用户的活动并生成第一音视频信息,并分别向云服务器31发送所述第一音视频信息中各视频帧。
第二服务器33还用于输出所述活动订单,以使所述第二用户终端35的第二用户在所述订单时间接收所述第二服务器33输出的所述活动订单对应的服务;且所述第二服务器33通过摄像装置331采集所述第二用户的活动并生成第二音视频信息,并分别向云服务器31发送所述第二音视频信息中各视频帧。
作为另一种可选的实施方式,上述发送第一音视频信息和第二音视频信息都可以是进行加密发送,这样可以提高第一音视频信息和第二音视频信息的安全和隐私性。另外,第一服务器32可以通过多个摄像装置采集第一用户的活动,这样可以实现从不同的角度采集第一用户的活动,从而使第一音视频信息可以更好地反映出第一用户的活动效果。同理,第二服务器33也可以通过多个摄像装置采集第一用户的活动。
通过上述步骤就可以实现分隔两地的人们聚集在一起活动的模拟效果,这样分隔两地的人们直接可以通过上述方法进行聚在一起活动,从而不需要通过拥挤且高费用的交通工具聚在一起活动,还可以快速地聚集一起活动。例如:分隔两地的同学、朋友、家人或者生意伙伴通过上述方法可以实现在不同的地区一起进行活动,如聚餐、唱歌、喝茶等等。
另一种可选的实施方式,第一用户终端34还可以用于向所述第二服务器33发送所述第二用户终端35的验证信息,以及所述第一用户终端34向所述第二用户终端35发送用于通知所述验证信息的通知消息。
当所述第二用户终端35位于所述第二服务器33所处的位置区域时,由所述第二服务器33还可以用于输出所述验证信息,并由所述第二服务器33对应的用户基于所述第二服务器33输出的验证信息对所述第二用户提供的验证信息进行验证,当验证通过时,在所述订单时间向所述第二用户提供所述活动订单对应的服务。
该实施方式中,可以提高上述流程的安全级别。
作为另一种可选的实施方式,第一用户终端34可以用于向云服务器31发送所述订单请求以及所述第一服务器32和第二服务器33的标识信息;
云服务器31还可以用于分别向所述第一服务器32和第二服务器33发送所述订单请求和第一用户终端34的标识信息。
该实施方式,由于云服务器31向第一服务器32和第二服务器33发送订单请求,这样相比分别向第一服务器32和第二服务器33发送订单请求,该实施方式可以实现更加效率地完成订单预订。
作为另一种可选的实施方式,第一用户终端34可以控制源账号向所述云服务器31对应的云账号转移第一特定数值,该第一特定数值与所述活动订单对应;
所述云服务器31控制所述云账号向所述第一服务器32对应的第一账号转移第二特定数值,以及控制所述云账号向所述第二服务器33对应的第二账号转移第三特定数值。
上述技术方案中,云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;云服务器还接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。这样可以实现分隔两地的人们聚集在一起活动的模拟效果。
请参阅图5,图5是本发明实施例提供的一种视频互动装置的结构示意图,如图5所示,包括:第一生成单元51、第二生成单元52和发送单元53,其中:
所述第一生成单元51,用于接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述第二生成单元52,用于接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述发送单元53,用于向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,以使所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,以及所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧。
其中,上述第二服务器的数量为一个或者多个。
需要说明的是,本实施例中的装置可以应用于上面实施例描述的云服务器,该装置的实施方式都可以参考如图1和图2所示的实施例中的实施方式,此处不作重复说明。
上述技术方案,可以实现分隔两地的人们聚集在一起活动的模拟效果。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存取存储器(RandomAccessMemory,简称RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (16)

1.一种视频互动方法,其特征在于,包括:
云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;
所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
2.如权利要求1所述的方法,其特征在于,所述云服务器将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,包括:
所述云服务器通过图像特征提取算法从所述第一音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第一背景图像上,以生成第一目标视频帧;
所述云服务器将所第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,包括:
所述云服务器通过图像特征提取算法从所述第二音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第二背景图像上,以生成第二目标视频帧。
3.如权利要求1所述的方法,其特征在于,所述云服务器将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,包括:
所述云服务器将目标背景图像中的一部分图像作为第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;
所述云服务器将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,包括:
所述云服务器将所述目标背景图像中的另一部分图像作为第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧。
4.如权利要求1所述的方法,其特征在于,所述第一背景图像和第二背景图像为相同的图像,或者所述第一背景图像和第二背景图像为不同的图像。
5.如权利要求1-4中任一项所述的方法,其特征在于,所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,包括:
所述云服务器将所述第一目标视频帧与第二目标视频帧进行合成,以生成活动目标视频帧,并分别向所述第一服务器和第二服务器发送所述活动目标视频帧;
所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,包括:
所述第一服务器通过视频播放装置播放所述活动目标视频帧;
所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,包括:
所述第二服务器通过视频播放装置播放所述活动目标视频帧。
6.如权利要求1-5中任一项所述的方法,其特征在于,所述方法还包括:
所述云服务器接收所述第一服务器发送的所述第一背景图像和/第二背景图像;和/或者
所述云服务器接收所述第二服务器发送的所述第一背景图像和/第二背景图像。
7.如权利要求6所述的方法,其特征在于,所述方法还包括:
所述第一服务器展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像;和/或
所述第二服务器展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像。
8.一种视频互动方法,其特征在于,包括:
云服务器接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,以使所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,以及所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
9.一种视频互动系统,其特征在于,包括:云服务器、第一服务器和第二服务器,其中:
所述云服务器,用于接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述云服务器还用于接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述云服务器还用于向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧;
所述第一服务器,用于通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
所述第二服务器,用于通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
10.如权利要求9所述的系统,其特征在于,所述云服务器用于通过图像特征提取算法从所述第一音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第一背景图像上,以生成第一目标视频帧;
所述云服务器用于通过图像特征提取算法从所述第二音视频信息的当前视频帧中提取人物特征图像,将该人物特征图像叠加至第二背景图像上,以生成第二目标视频帧。
11.如权利要求9所述的系统,其特征在于,所述云服务器用于将目标背景图像中的一部分图像作为第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧;
所述云服务器用于将所述目标背景图像中的另一部分图像作为第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧。
12.如权利要求9所述的系统,其特征在于,所述第一背景图像和第二背景图像为相同的图像,或者所述第一背景图像和第二背景图像为不同的图像。
13.如权利要求9-12中任一项所述的系统,其特征在于,所述云服务器用于将所述第一目标视频帧与第二目标视频帧进行合成,以生成活动目标视频帧,并分别向所述第一服务器和第二服务器发送所述活动目标视频帧;
所述第一服务器用于通过视频播放装置播放所述活动目标视频帧;
所述第二服务器用于通过视频播放装置播放所述活动目标视频帧。
14.如权利要求9-13中任一项所述的系统,其特征在于,所述云服务器还用于接收所述第一服务器发送的所述第一背景图像和/第二背景图像;和/或者
所述云服务器还用于接收所述第二服务器发送的所述第一背景图像和/第二背景图像。
15.如权利要求14所述的方法,其特征在于,所述第一服务器还用于展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像;和/或
所述第二服务器还用于展现多张背景图像,并接收用户输入的选择指令,响应所述选择指令从所述多张背景图像中选择所述第一背景图像和/或第二背景图像。
16.一种视频互动装置,其特征在于,包括:第一生成单元、第二生成单元和发送单元,其中:
所述第一生成单元,用于接收第一服务器发送的第一音视频信息的当前视频帧,并将第一背景图像替换掉该当前视频帧中的背景图像,以生成第一目标视频帧,所述第一音视频信息是所述第一服务器通过摄像装置采集第一用户活动的音视频信息;
所述第二生成单元,用于接收第二服务器发送的第二音视频信息的当前视频帧,并将第二背景图像替换掉该当前视频帧中的背景图像,以生成第二目标视频帧,所述第二音视频信息是所述第二服务器通过摄像装置采集第二用户活动的音视频信息;
所述发送单元,用于向所述第一服务器和第二服务器发送所述第一目标视频帧和第二目标视频帧,以使所述第一服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧,以及所述第二服务器通过视频播放装置同时播放所述第一目标视频帧和第二目标视频帧;
其中,所述第二服务器的数量为一个或者多个。
CN201410459199.4A 2014-09-10 2014-09-10 一种视频互动方法、装置和系统 Pending CN105472271A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410459199.4A CN105472271A (zh) 2014-09-10 2014-09-10 一种视频互动方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410459199.4A CN105472271A (zh) 2014-09-10 2014-09-10 一种视频互动方法、装置和系统

Publications (1)

Publication Number Publication Date
CN105472271A true CN105472271A (zh) 2016-04-06

Family

ID=55609500

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410459199.4A Pending CN105472271A (zh) 2014-09-10 2014-09-10 一种视频互动方法、装置和系统

Country Status (1)

Country Link
CN (1) CN105472271A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106101579A (zh) * 2016-07-29 2016-11-09 维沃移动通信有限公司 一种视频拼接的方法及移动终端
CN106713942A (zh) * 2016-12-27 2017-05-24 广州华多网络科技有限公司 视频处理方法和装置
CN108234825A (zh) * 2018-01-12 2018-06-29 广州市百果园信息技术有限公司 视频处理方法及计算机存储介质、终端
CN113596574A (zh) * 2021-07-30 2021-11-02 维沃移动通信有限公司 视频处理方法、视频处理装置、电子设备和可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040128350A1 (en) * 2002-03-25 2004-07-01 Lou Topfl Methods and systems for real-time virtual conferencing
CN101677386A (zh) * 2008-08-01 2010-03-24 中兴通讯股份有限公司 可选择实时虚拟通话背景的系统及视频通话方法
CN101930284A (zh) * 2009-06-23 2010-12-29 腾讯科技(深圳)有限公司 一种实现视频和虚拟网络场景交互的方法、装置和系统
CN102611873A (zh) * 2012-03-06 2012-07-25 宋健 一种可实现2d/3d视频通讯、传输优化的方法和系统
CN102625129A (zh) * 2012-03-31 2012-08-01 福州一点通广告装饰有限公司 远程真人三维虚拟仿场景互动的实现方法
CN103297544A (zh) * 2013-06-24 2013-09-11 杭州泰一指尚科技有限公司 一种基于增强现实的即时通讯应用方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040128350A1 (en) * 2002-03-25 2004-07-01 Lou Topfl Methods and systems for real-time virtual conferencing
CN101677386A (zh) * 2008-08-01 2010-03-24 中兴通讯股份有限公司 可选择实时虚拟通话背景的系统及视频通话方法
CN101930284A (zh) * 2009-06-23 2010-12-29 腾讯科技(深圳)有限公司 一种实现视频和虚拟网络场景交互的方法、装置和系统
CN102611873A (zh) * 2012-03-06 2012-07-25 宋健 一种可实现2d/3d视频通讯、传输优化的方法和系统
CN102625129A (zh) * 2012-03-31 2012-08-01 福州一点通广告装饰有限公司 远程真人三维虚拟仿场景互动的实现方法
CN103297544A (zh) * 2013-06-24 2013-09-11 杭州泰一指尚科技有限公司 一种基于增强现实的即时通讯应用方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106101579A (zh) * 2016-07-29 2016-11-09 维沃移动通信有限公司 一种视频拼接的方法及移动终端
CN106101579B (zh) * 2016-07-29 2019-04-12 维沃移动通信有限公司 一种视频拼接的方法及移动终端
CN106713942A (zh) * 2016-12-27 2017-05-24 广州华多网络科技有限公司 视频处理方法和装置
CN106713942B (zh) * 2016-12-27 2020-06-09 广州华多网络科技有限公司 视频处理方法和装置
CN108234825A (zh) * 2018-01-12 2018-06-29 广州市百果园信息技术有限公司 视频处理方法及计算机存储介质、终端
CN113596574A (zh) * 2021-07-30 2021-11-02 维沃移动通信有限公司 视频处理方法、视频处理装置、电子设备和可读存储介质

Similar Documents

Publication Publication Date Title
CN104363476B (zh) 一种基于在线直播的组队活动方法、相关装置及系统
CN105635716B (zh) 基于增强现实的聚合媒体方法
CN105871808A (zh) 直播视频的转码方法及装置
CN106303590A (zh) 邀请观看视频影片的实现方法和装置
CN104468845B (zh) 一种数据处理方法及系统
CN106101804A (zh) 弹幕设定方法及装置
CN105472271A (zh) 一种视频互动方法、装置和系统
CN108462883A (zh) 一种直播互动方法、装置、终端设备及存储介质
CN108429918A (zh) 视频直播的方法和装置
CN105681309A (zh) 一种信息处理方法、第一终端、第二终端及服务器
CN107690085A (zh) 数据分享方法及装置
CN104683781B (zh) 视频播放处理方法及装置
CN109361954B (zh) 视频资源的录制方法、装置、存储介质及电子装置
CN105847433A (zh) 基于虚拟影院的视频播放方法、装置及系统
CN106331891B (zh) 一种信息交互方法及电子设备
CN107623833A (zh) 视频会议的控制方法、装置及系统
CN106993215A (zh) 一种信息处理方法及处理程序装置
CN109298776B (zh) 增强现实互动系统、方法和装置
CN106878760B (zh) 绘制及解析礼物的方法及装置
CN106792237A (zh) 一种消息显示方法和系统
CN105472299B (zh) 视频互动方法、系统和装置
CN105472297B (zh) 视频互动方法、系统和装置
CN103294193A (zh) 多终端互动的方法、装置和系统
CN105872445A (zh) 视频通话方法、装置及系统
CN105719522A (zh) 一种双客户端语音通信方法、装置及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160406