CN107135369A - 视频传送及显示方法、系统和终端 - Google Patents

视频传送及显示方法、系统和终端 Download PDF

Info

Publication number
CN107135369A
CN107135369A CN201710440060.9A CN201710440060A CN107135369A CN 107135369 A CN107135369 A CN 107135369A CN 201710440060 A CN201710440060 A CN 201710440060A CN 107135369 A CN107135369 A CN 107135369A
Authority
CN
China
Prior art keywords
image
background image
terminal
foreground
background
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710440060.9A
Other languages
English (en)
Other versions
CN107135369B (zh
Inventor
邹宏伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Original Assignee
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yulong Computer Telecommunication Scientific Shenzhen Co Ltd filed Critical Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Priority to CN201710440060.9A priority Critical patent/CN107135369B/zh
Publication of CN107135369A publication Critical patent/CN107135369A/zh
Application granted granted Critical
Publication of CN107135369B publication Critical patent/CN107135369B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种视频传送及显示方法,包括:持续获取视频通讯的连续图像帧,并选取其中的第一帧图像;提取所述第一帧图像中的前景图像及背景图像,存储所述背景图像;将所述前景图像及背景图像传送给另一终端;选取所述连续图像帧的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;提取所述第N帧图像的前景图像及背景图像;得到所述第N帧图像的背景图像与存储的背景图像的信息匹配度;当信息匹配度大于或等于预设标准值时,将第N帧图像的前景图像传送给另一终端;当信息匹配度小于所述预设标准值时,将第N帧图像中的前景图像以及背景图像传送给另一终端。本发明还提供一种终端以及视频传送及显示系统。本发明能够在节省数据流量的同时有效避免破坏用户体验。

Description

视频传送及显示方法、系统和终端
技术领域
本发明涉及通讯技术领域,具体而言,涉及一种视频通讯中的视频传送及显示方法以及系统。
背景技术
视频通讯,又称视频电话,通常指基于互联网和移动互联网(3G、4G互联网)端,通过智能手机、平板电脑等终端之间实时传送人的语音和图像的一种通讯方式。
现有终端的视频通讯过程中,视频图像展示技术方案有如下三种:
1、视频通讯时,第一终端实时传输并在第二终端显示真实视频图像,包括背景图像及前景图像。
2、视频通讯时,第一终端提取视频图像中的人物面部表情信息,将面部表情信息发送给第二终端,第二终端根据发送的面部表情信息和预设人脸图像模块实现人脸图像的合成和还原。
3、视频通讯时,第一终端对视频图像进行分层处理,分成背景层和重点表现层;对于背景层,传输比较低分辨率的图像或只传输模板编号,对于重点表现层,先生成并传输较低分辨率的图像;第二终端将收到的低分辨率背景层图像和重点表现层图像合成显示;对于重点表现层进行逐渐清晰化处理,在第二终端生成并显示较高分辨率的重点表现层图像。
在上述三种技术方案中,对于技术方案1,由于真实视频图像实时全部传输,在使用移动互联网(3G、4G互联网)时,数据流量耗费大;技术方案2只传输了重点要表现的人物面部表情信息,未传输背景信息,无法满足用户的某些特定需求,会导致用户体验差;技术方案3弱化了背景层,一定程度上节省数据流量,但节省程度依然有限。
发明内容
鉴于以上内容,有必要提出一种视频传送及显示方法,其能够在节省数据流量的同时可以有效避免破坏用户体验。
一种视频传送及显示方法,应用于视频通讯的第一终端中,所述视频传送及显示方法包括:
持续获取所述第一终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述的背景图像;
将所述前景图像以及背景图像传送给所述视频通讯的第二终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述视频通讯的第二终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端。
本发明优选实施例中,所述预设标准值为90%。
一种视频传送及显示方法,应用于视频通讯的第二终端中,所述视频传送及显示方法包括:
接收所述视频通讯的第一终端传送过来的图像数据;
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出;
存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
本发明优选实施例中,所述第一终端传送过来的图像数据中包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
一种视频传送及显示方法,应用于终端中,所述视频传送及显示方法包括:
持续获取所述终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像;
将所述前景图像以及背景图像传送给另一终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述另一终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述另一终端;
接收所述另一终端传送过来的图像数据;
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
鉴于以上内容,还有必要提出一种终端,其能够在节省数据流量的同时可以有效避免破坏用户体验。
一种终端,包括存储器以及处理器,所述存储器中存储有计算机程序指令,所述处理器执行所述计算机程序时,实现下述方法:
在视频通讯开始时,持续获取所述第一终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像,提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像,将所述前景图像以及背景图像传送给所述视频通讯的第二终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++,提取出所述第N帧图像中的前景图像以及背景图像,将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度,当所述信息匹配度大于或等于预设标准值时,将所述第N帧图像的前景图像传送给所述视频通讯的第二终端,或者当所述信息匹配度小于所述预设标准值时,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端,并存储所述第N帧图像中的背景图像及取代上述已经存储的背景图像。
本发明优选实施例中,所述预设标准值为90%。
一种终端,包括存储器以及处理器,所述存储器中存储有计算机程序指令,所述处理器执行所述计算机程序时,实现下述方法:
接收所述视频通讯的第一终端传送过来的图像数据;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像,或者当所述图像数据中只包括前景图像时,获取存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
本发明优选实施例中,所述第一终端传送过来的图像数据中包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
鉴于以上内容,还有必要提出一种视频传送及显示系统,其能够在节省数据流量的同时可以有效避免破坏用户体验。
一种视频传送及显示系统,应用于终端中,所述视频传送及显示系统包括:
图像数据获取模块,用于在视频通讯开始时,持续获取所述终端的摄像装置拍摄得到的连续图像帧。
第一处理传送模块,用于选取所述连续图像帧中的第一帧图像,提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像,将所述前景图像以及背景图像传送给另一终端;
第二处理传送模块,用于选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++,提取出所述第N帧图像中的前景图像以及背景图像,将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度,当所述信息匹配度大于或等于预设标准值时,将所述第N帧图像的前景图像传送给所述另一终端,或者当所述信息匹配度小于所述预设标准值时,同时将所述第N帧图像中的前景图像以及背景图像传送给所述另一终端,并存储所述第N帧图像中的背景图像及取代上述已经存储的背景图像;
图像数据接收模块,用于接收所述另一终端传送过来的图像数据;及
图像帧显示模块,用于当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像,以及当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
鉴于现实生活中,很大部分视频通讯中的背景部分是静态不变的,因此,本发明所述视频传送及显示方法,在视频通讯中,第一终端对需要传送的视频图像中的前景图像和背景图像分别提取存储,在将初始的背景图像及前景图像帧传输给第二终端后,第二终端同时保存背景图像及前景图像。后续第一终端将当前提取的背景图像和本地保存的上一帧的背景图像对比,若信息匹配度高于预设标准值(如90%),则认为背景图像是静态未变动的,第一终端仅传输前景图像,而不传送背景图像,否则,同时传输背景图像及前景图像帧。第二终端将接收到的前景图像和本地保存的最新的背景图像融合后显示。因此,在使用移动互联网(3G、4G互联网)的情况下,本发明能够在节省数据流量的同时有效避免破坏用户体验。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例和现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是本发明视频传送及显示方法及系统较佳实施例的应用环境示意图。
图2是本发明视频传送及显示方法较佳实施例中对第一终端执行视频传送的方法流程图。
图3是本发明视频传送及显示方法较佳实施例中第二终端执行视频显示的方法流程图。
图4是本发明视频传送及显示系统较佳实施例的程序模块图。
图5是本发明终端较佳实施例的结构示意图。
主要元件符号说明
终端 1
视频传送及显示系统 10
视频传送单元 100
图像数据获取模块 101
第一处理传送模块 102
第二处理传送模块 103
视频显示单元 200
图像数据接收模块 201
图像帧显示模块 202
存储器 11
处理器 12
屏幕 13
摄像装置 14
麦克风 15
通讯总线 16
具体实施方式
本发明实施例提供一种视频传送及显示方法,可以在使用移动互联网(3G、4G互联网)的情况下进行视频通讯时,能够在有效的节省用户的数据流量的同时有效避免破坏用户体验。本发明实施例还提供相应的视频传送及显示系统、终端以及计算机可读存储介质。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
下面通过各个具体实施例,分别进行详细的说明。
实施例一、
参阅图1所示,是本发明视频传送及显示方法及系统较佳实施例的应用环境示意图。
本发明所述视频传送及显示方法及系统的应用环境包括:两台或多台可以通过网络2实现通讯连接的终端1,图中仅示出两台,包括第一终端1以及第二终端1。
所述网络2可以是互联网或者移动互联网(2G、3G、4G网等),其利用无线通讯技术实现第一终端1与第二终端1之间的数据交互。
示例性的无线通讯技术包括,但不限于,全球移动通讯系统(Global System forMobile Communication,GSM)、通用分组无线业务(General Packet Radio Service,GPRS)、码分多址(Code Division Multiple Access,CDMA)、宽带码分多址(Wideband CodeDivision Multiple Access,W-CDMA)、CDMA2000、IMT单载波、GSM演进增强数据率(Enhanced Data Rate for GSM Evolution,EDGE)、长期演进(Long Term Evolution,LTE)、增强LTE、时分LTE(TD-LTE)、高性能无线局域网(HiperLAN)、高性能无线广域网(HiperWAN)、高性能无线城域网(HiperMAN)、本地多点分配服务(Local MultipointDistribution Services,LMDS)、全球互通微波存取(Worldwide Interoperability forMicrowave Access,WiMAX)、ZigBee、蓝牙、闪光正交频分复用(Flash-OFDM)、大容量空分多址接入(High Capacity Spatial Division Multiple Access,HC-SDMA)、iBurst、通用移动通讯系统(Universal Mobile Telecommunications System,UMTS)、UMTS时分双工(UMTS-TDD)、演化高速分组接入(HSPA+)、时分同步码分多址接入(TD-SCDMA)、演进数据优化(EV-DO)、数字增强无线通讯(Digital Enhanced Cordless Telecommunications,DECT)以及其他。
所述终端1可以是,例如,智能手机,平板电脑,笔记本电脑以及桌上型电脑等用户设备。
本发明实施例中,所述终端1的正面和/或背面包括有摄像装置,用于在各终端1之间进行视频通讯时,获取终端1用户的视频图像。进一步地,所述终端1还可以包括有麦克风,用于在各终端1之间进行视频通讯时,获取终端1用户的音频信息。
参考图2所示,是本发明视频传送及显示方法较佳实施例中对第一终端执行视频传送的方法流程图。
根据不同的需求,该图所示流程图中的执行顺序可以改变,某些可以省略。
在本发明较佳实施例中,所述对第一终端执行视频传送的方法包括:
在视频通讯开始时,执行S01,所述第一终端1持续获取其摄像装置拍摄得到的连续图像帧。
S02,所述第一终端1选取所述连续图像帧中的第一帧图像。
S03,所述第一终端1提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像。
S04,所述第一终端1将所述前景图像以及背景图像传送给所述视频通讯的第二终端1。
S05,所述第一终端1选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++。
S06,所述第一终端1提取出所述第N帧图像中的前景图像以及背景图像。
S07,所述第一终端1将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度。
S08,所述第一终端1判断比较得到的信息匹配度是否大于或等于预设标准值。所述预设标准值可以是,例如90%。
若信息匹配度大于或等于所述预设标准值,则认为所述背景图像未发生变动,是静止的,执行S09,所述第一终端1仅将所述第N帧图像的前景图像传送给所述视频通讯的第二终端,并执行下述的S12。
若信息匹配度小于所述预设标准值,则认为所述背景图像发生了变动,则执行S10,所述第一终端1存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,以及S11,所述第一终端1同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端。
S12,所述第一终端1判断当次视频通讯是否结束?
若当次视频通讯没有结束,则返回执行上述的S05。
若当次视频通讯已经结束,则结束流程。
参考图3所示,是本发明视频传送及显示方法较佳实施例中对第二终端执行视频显示的方法流程图。
根据不同的需求,该图所示流程图中的执行顺序可以改变,某些可以省略。
在本发明较佳实施例中,所述对第二终端执行视频显示的方法包括:
S20,所述第二终端1接收视频通讯的第一终端1传送过来的图像数据。
S21,所述第二终端1判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像。
本发明较佳实施例中,所述第一终端1传送过来的图像数据中可以包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
若所述图像数据中包括前景图像和背景图像,则执行S22,所述第二终端1将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,并于S23,所述第二终端1存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像。
若所述图像数据中只包括前景图像,则执行S24,所述第二终端1获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
应该理解,在视频通讯中,上述第一终端执行的方法同时也会在所述第二终端中执行,同时,第二终端执行的方法同时也会在所述第一终端中执行。即在视频通讯中,所述第一终端会同时执行视频传送以及视频显示,同理,所述第二终端会同时执行视频传送以及视频显示。
利用上述视频传送及显示方法,在视频通讯中,第一终端对需要传送的视频图像中的前景图像和背景图像分别提取存储,在将初始的背景图像及前景图像帧传输给第二终端后,第二终端同时保存背景图像及前景图像。后续第一终端将当前提取的背景图像和本地保存的上一帧的背景图像对比,若信息匹配度高于预设标准值(如90%),则认为背景图像是静态未变动的,第一终端仅传输前景图像,而不传送背景图像,否则,同时传输背景图像及前景图像帧。第二终端将接收到的前景图像和本地保存的最新的背景图像融合后显示。因此,在使用移动互联网(3G、4G互联网)的情况下,本发明能够在节省数据流量的同时有效避免破坏用户体验。
上述图2及图3详细介绍了本发明的视频传送及显示方法,下面结合第4~5图,分别对实现上述视频传送及显示方法的视频传送及显示系统以及终端进行介绍。
应该了解,所述实施例仅为说明之用,在专利申请范围上并不受此结构的限制。
实施例二、
如图4所示,是本发明所述视频传送及显示系统较佳实施例的程序模块图。
本发明所述视频传送及显示系统10可以包括多个由计算机程序代码所组成的程序段,可以安装在一个终端中,并由所述终端1所执行,以实现使用移动互联网(3G、4G互联网)的情况下进行视频通讯时,能够在节省数据流量的同时有效避免破坏用户体验。
参阅图4所示,所述视频传送及显示系统10根据其所执行的功能,可以被划分为视频传送单元100以及视频显示单元200。其中,所述视频传送单元100用于执行视频传送操作,以及所述视频显示单元200用于执行视频显示操作。即,当所述终端1作为用于传送视频图像的第一终端1时,执行所述视频传送及显示系统10中的视频传送单元100,以及当所述终端1作为用于接收视频图像的第二终端1时,执行所述视频传送及显示系统10中的视频显示单元200。
根据其所执行的功能,所述视频传送单元100以及视频显示单元200又可以被划多个程序模块。具体地,本发明较佳实施例中,所述视频传送单元100中的程序模块至少可以包括:图像数据获取模块101、第一处理传送模块102以及第二处理传送模块103;以及所述视频显示单元200中的程序模块至少可以包括:图像数据接收模块201以及图像帧显示模块202。
所述图像数据获取模块101用于在视频通讯开始时,持续获取所述第一终端1的摄像装置拍摄得到的连续图像帧。
所述第一处理传送模块102用于选取所述连续图像帧中的第一帧图像,提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像,将所述前景图像以及背景图像传送给所述视频通讯的第二终端1。
所述第二处理传送模块103用于选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++,提取出所述第N帧图像中的前景图像以及背景图像,将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度,当所述信息匹配度大于或等于预设标准值时,仅将所述第N帧图像的前景图像传送给所述视频通讯的第二终端2,或者当所述信息匹配度小于所述预设标准值时,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端1,并存储所述第N帧图像中的背景图像及取代上述已经存储的背景图像。
本发明较佳实施例中,所述预设标准值可以是,例如90%。
所述图像数据接收模块201用于接收视频通讯的第一终端1传送过来的图像数据。
所述图像帧显示模块202用于当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像,或者当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
本发明较佳实施例中,所述第一终端1传送过来的图像数据中可以包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
利用上述视频传送及显示系统,在视频通讯中,第一终端对需要传送的视频图像中的前景图像和背景图像分别提取存储,在将初始的背景图像及前景图像帧传输给第二终端后,第二终端同时保存背景图像及前景图像。后续第一终端将当前提取的背景图像和本地保存的上一帧的背景图像对比,若信息匹配度高于预设标准值(如90%),则认为背景图像是静态未变动的,第一终端仅传输前景图像,而不传送背景图像,否则,同时传输背景图像及前景图像帧。第二终端将接收到的前景图像和本地保存的最新的背景图像融合后显示。因此,在使用移动互联网(3G、4G互联网)的情况下,本发明能够在节省数据流量的同时有效避免破坏用户体验。
实施例三、
如图5所示,是实现本发明所述视频传送及显示方法的终端较佳实施例的结构示意图。
本发明较佳实施例中,所述终端1可以包括,但不限于,例如,智能手机,平板电脑,笔记本电脑以及桌上型电脑等用户设备。
如图5所示,本发明实施例中的终端1包括至少一个存储器11、至少一个处理器12、屏幕13、摄像装置14、麦克风15以及通讯总线16。
所述通讯总线16可以实现所述存储器11、处理器12、屏幕13、摄像装置14以及麦克风15之间的通讯。
在本发明其他较佳实施例中,根据不同的需要,所述终端1也可以包括其他部件,而不仅限于上述揭露的部件。
本发明中所述屏幕13可以为触摸式显示屏,如电容式触摸屏或电阻式触摸屏,也可以是非触摸式显示屏,如阴极射线管显示器(Cathode Ray Tube,CRT),等离子显示器(Plasma Display Panel,PDP),液晶显示器(Liquid Crystal Display,LCD)等等。
所述摄像装置14可以安装于所述终端1的正面和/或背面,用于在各终端1之间进行视频通讯时,获取终端1用户的视频图像。
所述麦克风15用于在各终端1之间进行视频通讯时,获取终端1用户的音频信息。
所述存储器11存储有程序代码。所述存储器11可以为智能媒体卡(smart mediacard)、安全数字卡(secure digital card)、快闪存储器卡(flash card)等储存设备。
所述处理器12可执行所述终端1的操作系统以及安装的各类应用程序等。所述处理器12可以包括一个或者多个中央处理器、微处理器以及数字处理器等。
本发明较佳实施例中,所述处理器12可通过所述通讯总线16,调用所述存储器11中存储的程序代码以执行相关的功能。例如,图4中所述的各个模块(图像数据获取模块101、第一处理传送模块102、第二处理传送模块103、图像数据接收模块201以及图像帧显示模块202等)是存储在所述存储器11中的程序代码,并由所述处理器12所执行,以实现一种视频传送及显示方法。
具体而言,本发明其中一个实施例中,所述视频传送及显示方法包括:
一种视频传送及显示方法,应用于视频通讯的第一终端中,所述视频传送及显示方法包括:
持续获取所述第一终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述的背景图像;
将所述前景图像以及背景图像传送给所述视频通讯的第二终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述视频通讯的第二终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端。
本发明优选实施例中,所述预设标准值为90%。
本发明另一个实施例中,所述视频传送及显示方法包括:
接收所述视频通讯的第一终端传送过来的图像数据。
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出;
存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
本发明优选实施例中,所述第一终端传送过来的图像数据中包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
本发明另一个实施例中,所述视频传送及显示方法包括:
持续获取所述终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述的背景图像;
将所述前景图像以及背景图像传送给另一终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述另一终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述另一终端;
接收所述另一终端传送过来的图像数据;
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
利用上述提供的终端,在视频通讯中,第一终端对需要传送的视频图像中的前景图像和背景图像分别提取存储,在将初始的背景图像及前景图像帧传输给第二终端后,第二终端同时保存背景图像及前景图像。后续第一终端将当前提取的背景图像和本地保存的上一帧的背景图像对比,若信息匹配度高于预设标准值(如90%),则认为背景图像是静态未变动的,第一终端仅传输前景图像,而不传送背景图像,否则,同时传输背景图像及前景图像帧。第二终端将接收到的前景图像和本地保存的最新的背景图像融合后显示。因此,在使用移动互联网(3G、4G互联网)的情况下,本发明能够在节省数据流量的同时可以有效避免破坏用户体验。
实施例四、
本发明实施例还提供一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当被包括一个或多个处理器的终端1执行时,使所述终端1执行如上文方法实施例所述的视频传送及显示方法。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详细描述的部分,可以参见其它实施例的相关描述。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
对于本领域技术人员而言,虽然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。因此,无论从哪一点来看。均应将实施例看做是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵盖在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个模块或装置也可以由一个模块或装置通过软件或者硬件来实现。第一、第二等词语用来表示名称,而并不表示特定的顺序。
本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种视频传送及显示方法,应用于视频通讯的第一终端中,其特征在于,所述视频传送及显示方法包括:
持续获取所述第一终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述的背景图像;
将所述前景图像以及背景图像传送给所述视频通讯的第二终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述视频通讯的第二终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端。
2.如权利要求1所述的视频传送及显示方法,其特征在于,所述预设标准值为90%。
3.一种视频传送及显示方法,应用于视频通讯的第二终端中,其特征在于,所述视频传送及显示方法包括:
接收所述视频通讯的第一终端传送过来的图像数据;
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出;
存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
4.如权利要求3所述的视频传送及显示方法,其特征在于,所述第一终端传送过来的图像数据中包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
5.一种视频传送及显示方法,应用于终端中,其特征在于,所述视频传送及显示方法包括:
持续获取所述终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像;
提取出所述第一帧图像中的前景图像以及背景图像,并存储所述的背景图像;
将所述前景图像以及背景图像传送给另一终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++;
提取出所述第N帧图像中的前景图像以及背景图像;
将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度;
当信息匹配度大于或等于一个预设标准值时,将所述第N帧图像的前景图像传送给所述另一终端;或
当信息匹配度小于所述预设标准值时,存储所述第N帧图像中的背景图像,并取代上述已经存储的背景图像,同时将所述第N帧图像中的前景图像以及背景图像传送给所述另一终端;
接收所述另一终端传送过来的图像数据;
判断所述图像数据中是同时包括前景图像和背景图像,还是只包括前景图像;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像;或
当所述图像数据中只包括前景图像时获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
6.一种终端,其特征在于,所述终端包括存储器以及处理器,所述存储器中存储有计算机程序指令,所述处理器执行所述计算机程序时,实现下述方法:
在视频通讯开始时,持续获取所述第一终端的摄像装置拍摄得到的连续图像帧;
选取所述连续图像帧中的第一帧图像,提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像,将所述前景图像以及背景图像传送给所述视频通讯的第二终端;
选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++,提取出所述第N帧图像中的前景图像以及背景图像,将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度,当所述信息匹配度大于或等于预设标准值时,将所述第N帧图像的前景图像传送给所述视频通讯的第二终端,或当所述信息匹配度小于所述预设标准值时,同时将所述第N帧图像中的前景图像以及背景图像传送给所述视频通讯的第二终端,并存储所述第N帧图像中的背景图像及取代上述已经存储的背景图像。
7.如权利要求6所述的终端,其特征在于,所述预设标准值为90%。
8.一种终端,其特征在于,所述终端包括存储器以及处理器,所述存储器中存储有计算机程序指令,所述处理器执行所述计算机程序时,实现下述方法:
接收所述视频通讯的第一终端传送过来的图像数据;
当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像,或者当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
9.如权利要求8中所述的终端,其特征在于,所述第一终端传送过来的图像数据中包括数据标识,以指示所述图像数据为前景图像的数据或是背景图像的数据。
10.一种视频传送及显示系统,应用于终端中,其特征在于,所述视频传送及显示系统包括:
图像数据获取模块,用于在视频通讯开始时,持续获取所述终端的摄像装置拍摄得到的连续图像帧;
第一处理传送模块,用于选取所述连续图像帧中的第一帧图像,提取出所述第一帧图像中的前景图像以及背景图像,并存储所述背景图像,将所述前景图像以及背景图像传送给另一终端;
第二处理传送模块,用于选取所述连续图像帧中的第N帧图像,其中N=n+1,n的初始值为1,且n=n++,提取出所述第N帧图像中的前景图像以及背景图像,将所述第N帧图像中的背景图像与上述存储的背景图像进行比较,得到所述第N帧图像中的背景图像与上述存储的背景图像的信息匹配度,当所述信息匹配度大于或等于预设标准值时,将所述第N帧图像的前景图像传送给所述另一终端,或者当所述信息匹配度小于所述预设标准值时,同时将所述第N帧图像中的前景图像以及背景图像传送给所述另一终端,并存储所述第N帧图像中的背景图像及取代上述已经存储的背景图像;
图像数据接收模块,用于接收所述另一终端传送过来的图像数据;及
图像帧显示模块,用于当所述图像数据中包括前景图像和背景图像时,将所述前景图像以及背景图像进行融合,生成完整的图像帧进行输出,存储所述背景图像,并在存在已经存储的背景图像时,取代已经存储的背景图像,或者当所述图像数据中只包括前景图像时,获取已经存储的背景图像,并与所接收的前景图像进行融合,生成完整的图像帧进行输出。
CN201710440060.9A 2017-06-12 2017-06-12 视频传送及显示方法、系统和终端 Active CN107135369B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710440060.9A CN107135369B (zh) 2017-06-12 2017-06-12 视频传送及显示方法、系统和终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710440060.9A CN107135369B (zh) 2017-06-12 2017-06-12 视频传送及显示方法、系统和终端

Publications (2)

Publication Number Publication Date
CN107135369A true CN107135369A (zh) 2017-09-05
CN107135369B CN107135369B (zh) 2019-11-12

Family

ID=59734519

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710440060.9A Active CN107135369B (zh) 2017-06-12 2017-06-12 视频传送及显示方法、系统和终端

Country Status (1)

Country Link
CN (1) CN107135369B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109151489A (zh) * 2018-08-14 2019-01-04 广州虎牙信息科技有限公司 直播视频图像处理方法、装置、存储介质和计算机设备
CN111338593A (zh) * 2020-03-25 2020-06-26 掌阅科技股份有限公司 投屏展示信息的方法、阅读终端及存储介质
CN112235531A (zh) * 2020-10-15 2021-01-15 北京字节跳动网络技术有限公司 视频处理的方法、装置、终端及存储介质
CN112601099A (zh) * 2020-12-01 2021-04-02 Oppo广东移动通信有限公司 直播图像处理方法及装置、存储介质和电子设备
CN112653851A (zh) * 2020-12-22 2021-04-13 维沃移动通信有限公司 视频处理方法、装置和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101184235A (zh) * 2007-06-21 2008-05-21 腾讯科技(深圳)有限公司 一种从运动图像中提取背景图像的实现方法及装置
US20090315915A1 (en) * 2008-06-19 2009-12-24 Motorola, Inc. Modulation of background substitution based on camera attitude and motion
US8294823B2 (en) * 2006-08-04 2012-10-23 Apple Inc. Video communication systems and methods
CN103037205A (zh) * 2012-12-14 2013-04-10 广东威创视讯科技股份有限公司 视频传输方法和系统
CN103581603A (zh) * 2012-07-24 2014-02-12 联想(北京)有限公司 一种多媒体数据的传输方法及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8294823B2 (en) * 2006-08-04 2012-10-23 Apple Inc. Video communication systems and methods
CN101184235A (zh) * 2007-06-21 2008-05-21 腾讯科技(深圳)有限公司 一种从运动图像中提取背景图像的实现方法及装置
US20090315915A1 (en) * 2008-06-19 2009-12-24 Motorola, Inc. Modulation of background substitution based on camera attitude and motion
CN103581603A (zh) * 2012-07-24 2014-02-12 联想(北京)有限公司 一种多媒体数据的传输方法及电子设备
CN103037205A (zh) * 2012-12-14 2013-04-10 广东威创视讯科技股份有限公司 视频传输方法和系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109151489A (zh) * 2018-08-14 2019-01-04 广州虎牙信息科技有限公司 直播视频图像处理方法、装置、存储介质和计算机设备
CN111338593A (zh) * 2020-03-25 2020-06-26 掌阅科技股份有限公司 投屏展示信息的方法、阅读终端及存储介质
CN112235531A (zh) * 2020-10-15 2021-01-15 北京字节跳动网络技术有限公司 视频处理的方法、装置、终端及存储介质
CN112601099A (zh) * 2020-12-01 2021-04-02 Oppo广东移动通信有限公司 直播图像处理方法及装置、存储介质和电子设备
CN112653851A (zh) * 2020-12-22 2021-04-13 维沃移动通信有限公司 视频处理方法、装置和电子设备

Also Published As

Publication number Publication date
CN107135369B (zh) 2019-11-12

Similar Documents

Publication Publication Date Title
CN107135369A (zh) 视频传送及显示方法、系统和终端
CN101651738B (zh) 移动终端以及控制该移动终端操作的方法
CN107730303B (zh) 一种广告推送方法、设备及计算机可读存储介质
CN104915141A (zh) 对象信息的预览方法及装置
CN106844032A (zh) 一种终端应用的存储处理方法和装置
CN104808919A (zh) 界面显示控制方法和装置
CN104915227A (zh) 一种多源多线程的软件升级方法及系统
CN104850349A (zh) 页面显示方法及装置
CN107168626B (zh) 一种信息处理方法、设备及计算机可读存储介质
CN107634962A (zh) 网络带宽的管理方法及相关产品
CN107038076A (zh) 组件系统及组件交互方法
CN104898940A (zh) 图片处理方法及装置
CN109085982A (zh) 内容识别方法、装置及移动终端
CN104965665A (zh) 一种信息处理方法及装置、终端
CN108764051A (zh) 图像处理方法、装置及移动终端
CN105912572A (zh) 一种数据管理的方法及终端
CN106126109A (zh) 用于聊天应用的信息显示方法及终端
CN108200287B (zh) 一种信息处理方法、终端和计算机可读存储介质
CN105245938A (zh) 播放多媒体文件的装置和方法
CN105227829A (zh) 图片预览装置及其实现方法
CN105094543A (zh) 终端操作指令输入方法及装置
CN108170214A (zh) 电子装置、显示控制方法及相关产品
CN105183830A (zh) 图片浏览方法及装置
CN110166696A (zh) 拍摄方法、装置、终端设备以及计算机可读存储介质
CN106789555A (zh) 视频数据传输方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant