CN105812711B - 视频通话过程中优化图像质量的方法及系统 - Google Patents
视频通话过程中优化图像质量的方法及系统 Download PDFInfo
- Publication number
- CN105812711B CN105812711B CN201610298758.7A CN201610298758A CN105812711B CN 105812711 B CN105812711 B CN 105812711B CN 201610298758 A CN201610298758 A CN 201610298758A CN 105812711 B CN105812711 B CN 105812711B
- Authority
- CN
- China
- Prior art keywords
- clarity
- threshold value
- diversity factor
- equal
- video image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000008569 process Effects 0.000 title claims abstract description 21
- 238000012546 transfer Methods 0.000 claims abstract description 88
- 230000009467 reduction Effects 0.000 claims abstract description 70
- 230000005540 biological transmission Effects 0.000 claims description 24
- 230000008921 facial expression Effects 0.000 claims description 15
- 238000001514 detection method Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 8
- 238000005457 optimization Methods 0.000 description 5
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006854 communication Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了视频通话过程中优化图像质量的方法及系统。该方法通过接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。服务器在检测到发送端和接收端的网络状况不好的时候，对预备向接收端传输的视频图像进行筛选，筛选出清晰的图片构成关键视频传输给接收端；缓解了接收端的下载压力，保证了视频通话的清晰度，提高了视频通话的质量，让用户在网络信号较差时，也能够有较好的聊天体验。
Description
技术领域
本发明涉及视频通话技术领域，尤其涉及视频通话过程中优化图像质量的方法及系统。
背景技术
当前随着无线网络速度的提升，很多便携设备都具备了摄像头，可以进行视频通话。因为存在当前网速还存在较大差异，有的地方视频通话没问题，还有一些地方网速很难满足高清的视频通话需求。
在网速不好的情况下进行视频聊天往往会牺牲图片质量保证实时性，或者提升图片质量但又延时存在两种自适应模式，但都不符合用户需求，当网络较差时，图像不清晰和延时都不是最佳的选择，尤其是视频中图像变化较快时，基本看不清视频。
发明内容
本发明提供了视频通话过程中优化图像质量的方法，该方法及系统可以在网络信号较差时保证视频通话的清晰度，提高视频通话的质量。
为实现上述设计，本发明采用以下技术方案：
一方面，提供了视频通话过程中优化图像质量的方法，包括：
接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；
若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；
根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
其中，所述若所述网络传输速度小于等于预设网速阈值之后，所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频之前，还包括：
比较所述视频图像与预置时间内已上传视频图像之间的差异度；
所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频，具体为：
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频。
其中，所述根据网络传输速度降低所述视频图像的帧率，具体为：
根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；或
根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。
其中，所述若所述网络传输速度小于等于预设网速阈值之后，所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频之前，还包括：
根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值。
其中，所述差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频；或
所述差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频；或
所述差异度为背景差异度，所述差异度阈值为背景差异度阈值；
所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
另一方面，提供了视频通话过程中优化图像质量的系统，包括：
检测单元，接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；
降低单元，若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；
选取单元，根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
其中，还包括：
比较单元，比较所述视频图像与预置时间内已上传视频图像之间的差异度；
所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频，具体为：
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频。
其中，所述根据网络传输速度降低所述视频图像的帧率，具体为：
根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；或
根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。
其中，还包括：
调整单元，根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值。
其中，所述差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频；或
所述差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频；或
所述差异度为背景差异度，所述差异度阈值为背景差异度阈值；
所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
本发明的有益效果为：本发明通过接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。服务器在检测到发送端和接收端的网络状况不好的时候，对预备向接收端传输的视频图像进行筛选，筛选出清晰的图片构成关键视频传输给接收端；保证了视频通话的清晰度，提高了视频通话的质量，让用户在网络信号较差时，也能够有较好的聊天体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据本发明实施例的内容和这些附图获得其他的附图。
图1是本发明具体实施方式中提供的视频通话过程中优化图像质量的方法的第一实施例的方法流程图。
图2是本发明具体实施方式中提供的视频通话过程中优化图像质量的方法的第二实施例的方法流程图。
图3是本发明具体实施方式中提供的视频通话过程中优化图像质量的系统的第一实施例的结构方框图。
图4是本发明具体实施方式中提供的视频通话过程中优化图像质量的系统的第二实施例的结构方框图。
具体实施方式
为使本发明解决的技术问题、采用的技术方案和达到的技术效果更加清楚，下面将结合附图对本发明实施例的技术方案作进一步的详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参考图1，其是本发明具体实施方式中提供的视频通话过程中优化图像质量的方法的第一实施例的方法流程图。如图所示，该方法包括：
步骤S101：接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度。
服务器接收发送端上传的视频图像，检测发送端和接收端之间的网络传输速度。
步骤S102：若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度。
根据网络传输速度降低视频图像的帧率，具体为：服务器根据网络传输速度来降低预备向接收到传输的视频图像(预传的视频图像)的帧率。帧率是用于测量显示帧数的量度，测量单位为每秒显示帧数(Frames per Second，简称：FPS)，即用于描述视频每秒播放多少帧，每一帧为一张图片。降低所述视频图像的帧率表示降低预传的视频图像中图片的张数，增加每张图片传输的时间间隔；其中，在帧率确定的情况下，任意两张连续的图片之间的时间间隔是相同的。预设网速阈值可以由服务器进行设定，当网络传输速度达到预设网速阈值时，视频可以通畅的进行。网络传输速度低于预设网速阈值越多，即网络传输速度小于预设网速阈值且网速越慢时，预传的视频图像的帧率越小，即每秒传输的图片越少。服务器将预备传输给接收端的视频图像解压成一张张图片，检测每一张图片的清晰度。
步骤S103：根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
服务器根据降低后的帧率从预备传输给接收端的视频图像中选择清晰度大于等于清晰度阈值的图片，例如：当发送端上传了帧率为60PFS的视频图像时，根据网络传输速度将帧率调整为20PFS，则每一秒上传的视频图像中需要舍弃40张图片，选取20张清晰度大于等于清晰度阈值的图片打包构成关键视频，再将关键视频向接收端发送。服务器将发送端上传的视频图像解压成一张张的图片，根据降低后的帧率从这些图片中选择清晰度大于等于清晰度阈值的图片，将选择出来的图片进行打包压缩成关键视频后向接收端发送。
清晰度阈值由服务器进行设定，当满足清晰度阈值的图片数量低于帧率时，则需要降低清晰度阈值，在舍弃的图片里面选择清晰度最佳的加入到关键视频中。
综上所述，本发明实施例通过接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。服务器在检测到发送端和接收端的网络状况不好的时候，服务器对准备传输给接收端的视频图像进行筛选，筛选出清晰的图片构成关键视频传输给接收端，保证了视频通话的清晰度；根据网络状况舍弃一部分图片，减轻了接收端下载网速的压力，缓解了视频通话的延时，提高了视频通话的质量，让用户在网络信号较差时，也能够有较好的聊天体验。
请参考图2，其是本发明具体实施方式中提供的视频通话过程中优化图像质量的方法的第二实施例的方法流程图。如图所示，该方法包括：
步骤S201：接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度。
检测发送端和接收端之间的网络传输速度主要为：检测接收端的下载速度。
步骤S202：确定所述网络传输速度小于等于预设网速阈值。
判断接收端的下载速度是否小于等于预设网速阈值，当接收端的下载速度小于等于预设网速阈值时，继续执行步骤S203；否则，正常传输视频图像。
步骤S203：根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度。
根据网络传输速度降低所述视频图像的帧率，有以下两种实施方式：
实施方式一：服务器根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；差值越大，表明网络传输速度越慢，每秒钟能正常传输的图片的数量越少，帧率越小；差值越小，表明网络传输速度越快，每秒钟能正常传输的图片的数量越多，帧率越大。
实施方式二：服务器根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。比值越大，表明网络传输速度越快，每秒钟能正常传输的图片的数量越多，帧率越大；比值越小，表明网络传输速度越慢，每秒钟能正常传输的图片的数量越少，帧率越小。
视频图像中图片的清晰度主要包括人脸表情的清晰度、人动作的清晰度和背景的清晰度，当摄像头对着风景时，视频图像中图片的清晰度还包括风景的清晰度。
步骤S204：根据所述网络传输速度与所述预设网速阈值的关系调整所述差异度阈值。
差异度阈值包括：表情差异度阈值、动作差异度阈值、背景差异度阈值和风景差异度阈值。所述网络传输速度与所述预设网速阈值的关系主要包括差值关系和比值关系。
根据所述网络传输速度与所述预设网速阈值的关系调整所述差异度阈值有以下两种实施方式：
实施方式一：根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；当差值越大时，表明网络传输速度越小，在单位时间内可以传输的图片越少，视频传输不流畅，此时增大图片之间的差异度阈值；当比值越大时，表明网络传输速度越快，在单位时间内可以传输的图片越多，视频传输更加流畅，此时减小图片之间的差异度阈值。
实施方式二：根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值；当比值越大时，表明网络传输速度越大，视频传输更加流畅，在单位时间内可以传输更多的图片，此时减小图片之间的差异度阈值；当比值越小时，表明网络传输速度越慢，视频传输不流畅，在单位时间内可以传输的图片越少，此时增大图片之间的差异度阈值。
服务器周期性的检测网络传输速度，计算网络传输速度与预设网速阈值的关系，自适应的调整预传的视频图像中图片之间的差异度阈值，在保证关键图片信息的同时使得视频图像的传输与当时的网络传输速度相适应。
步骤S205：比较所述视频图像与预置时间内已传输视频图像之间的差异度。
比较服务器中预备传输到接收端的视频图像中的图片与预置时间内已传输到接收端的视频图像中的图片之间的差异度；预置时间可以由服务器根据网络传输速度进行设定；网络传输速度越大，可以选择较多的图片进行比较，此时预置时间可以设置得较长；网络传输速度越小，可以尽量选择较少的图片进行比较，此时预置时间可以设置得较短。差异度包括：人脸表情差异、动作差异度、背景差异度和风景差异度。当时间轴上图片之间的差异度较小时，对中间过渡视频进行舍弃，既保证用户看清视频聊天的图片，又没有丢失关键的表情图片数据。
需要注意的是，步骤S203、步骤S204和步骤S205之间没有绝对的先后关系，这三个步骤都只需要在步骤S202之后，步骤S206之前即可。
步骤S206：根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，主要有以下三种实施方式：
实施方式一：差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频。
实施方式二：差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频。
实施方式三：差异度为背景差异度，所述差异度阈值为背景差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
进一步地，还可以从表情差异度、动作差异度、背景差异度和风景差异度中任意选择两个以上的差异度进行综合比较，例如：差异度为人脸表情差异度和动作差异度，差异度阈值为表情差阈值和动作差异度阈值，则从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值、所述人脸表情差异度大于等于表情差异度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频。最终选择的图片的数量满足帧率的要求。
综上所述，本发明实施例中，服务器在对关键视频的图片的清晰度进行检测的同时，还检测了关键视频图片的差异度，并根据网络传输速度调整视频图像的差异度阈值，对时间轴上差异较小的图片进行舍弃；在保证视频聊天的清晰度、减轻接收端下载网速的压力的前提下，保留了关键图片的重要信息，进一步提高了视频聊天的质量，让用户在网络信号较差的情况下能够有较好的聊天体验。
以下为本方案视频通话过程中优化图像质量的系统的实施例，视频通话过程中优化图像质量的系统的实施例基于视频通话过程中优化图像质量的方法的实施例实现，在视频通话过程中优化图像质量的系统的实施例中未尽的描述，请参考视频通话过程中优化图像质量的方法的实施例。
请参考图3，其是本发明具体实施方式中提供的视频通话过程中优化图像质量的系统的第一实施例的结构方框图。如图所示，该系统包括：
检测单元310，接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度。
降低单元320，若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度。
选取单元330，根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
综上所述，各单元模块协同工作，检测单元310，接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；降低单元320，若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；选取单元330，根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。服务器在检测到发送端和接收端的网络状况不好的时候，对预备传输给接收端的视频图像中的图片进行筛选，筛选出清晰的图片构成关键视频传输给接收端，保证了视频通话的清晰度；根据网络状况舍弃一部分图片，减轻了接收端下载网速的压力，缓解了视频通话的延时，提高了视频通话的质量，让用户在网络信号较差时，也能够有较好的聊天体验。
请参考图4，其是本发明具体实施方式中提供的视频通话过程中优化图像质量的系统的第二实施例的结构方框图。如图所示，该系统包括：
检测单元310，接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度。
降低单元320，若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度。
所述根据网络传输速度降低所述视频图像的帧率，具体为：
根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；或根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。
调整单元340，根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值。
比较单元350，比较所述视频图像与预置时间内已上传视频图像之间的差异度。
选取单元330，根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频。
根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，具体为：根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频。
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，主要有以下三种实施方式：
实施方式一：所述差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频；或
实施方式二：所述差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频；或
实施方式三：所述差异度为背景差异度，所述差异度阈值为背景差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
综上所述，各单元模块协同工作，调整单元340，根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值；比较单元350，比较所述视频图像与预置时间内已上传视频图像之间的差异度。服务器在对关键视频的图片的清晰度进行检测的同时，还检测了关键视频图片的差异度，并根据网络传输速度调整视频图像的差异度阈值，在保证视频聊天的清晰度、减轻接收端下载网速的压力的前提下，保留了关键图片的重要信息，进一步提高了视频聊天的质量，让用户在网络信号较差的情况下能够有较好的聊天体验。
以上结合具体实施例描述了本发明的技术原理。这些描述只是为了解释本发明的原理，而不能以任何方式解释为对本发明保护范围的限制。基于此处的解释，本领域的技术人员不需要付出创造性的劳动即可联想到本发明的其它具体实施方式，这些方式都将落入本发明的保护范围之内。
Claims (10)
1.视频通话过程中优化图像质量的方法，其特征在于，包括：
接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；
若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；
根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频；
当满足清晰度阈值的图片数量低于所述降低后的帧率时，降低所述清晰度阈值。
2.根据权利要求1所述的方法，其特征在于，所述若所述网络传输速度小于等于预设网速阈值之后，所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频之前，还包括：
比较所述视频图像与预置时间内已上传视频图像之间的差异度；
所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频，具体为：
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频。
3.根据权利要求1所述的方法，其特征在于，所述根据网络传输速度降低所述视频图像的帧率，具体为：
根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；或
根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。
4.根据权利要求2所述的方法，其特征在于，所述若所述网络传输速度小于等于预设网速阈值之后，所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频之前，还包括：
根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值。
5.根据权利要求2所述的方法，其特征在于，所述差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频；或
所述差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频；或
所述差异度为背景差异度，所述差异度阈值为背景差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
6.视频通话过程中优化图像质量的系统，其特征在于，包括：
检测单元，接收发送端上传的视频图像，检测所述发送端和接收端之间的网络传输速度；
降低单元，若所述网络传输速度小于等于预设网速阈值，根据网络传输速度降低所述视频图像的帧率，检测所述视频图像中图片的清晰度；
选取单元，根据降低后的帧率从所述视频图像中选取所述清晰度大于等于清晰度阈值的图片构成关键视频，向所述接收端发送所述关键视频；
当满足清晰度阈值的图片数量低于所述降低后的帧率时，降低所述清晰度阈值。
7.根据权利要求6所述的系统，其特征在于，还包括：
比较单元，比较所述视频图像与预置时间内已上传视频图像之间的差异度；
所述根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值的图片构成关键视频，具体为：
根据降低后的帧率从所述视频图像中选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频。
8.根据权利要求6所述的系统，其特征在于，所述根据网络传输速度降低所述视频图像的帧率，具体为：
根据网络传输速度与所述预设网速阈值的差值降低所述视频图像的帧率；或
根据网络传输速度与所述预设网速阈值的比值降低所述视频图像的帧率。
9.根据权利要求7所述的系统，其特征在于，还包括：
调整单元，根据所述网络传输速度与所述预设网速阈值的差值调整所述差异度阈值；或根据网络传输速度与所述预设网速阈值的比值调整所述差异度阈值。
10.根据权利要求7所述的系统，其特征在于，所述差异度为人脸表情差异度，所述差异度阈值为表情差阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述人脸表情差异度大于等于表情差异度阈值的图片构成关键视频；或
所述差异度为动作差异度，所述差异度阈值为动作差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述动作差异度大于等于动作差异度阈值的图片构成关键视频；或
所述差异度为背景差异度，所述差异度阈值为背景差异度阈值；所述从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述差异度大于等于差异度阈值的图片构成关键视频，具体为：从所述视频图像中根据降低后的帧率选择所述清晰度大于等于清晰度阈值且所述背景差异度大于等于背景差异度阈值的图片构成关键视频。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610298758.7A CN105812711B (zh) | 2016-05-05 | 2016-05-05 | 视频通话过程中优化图像质量的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610298758.7A CN105812711B (zh) | 2016-05-05 | 2016-05-05 | 视频通话过程中优化图像质量的方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105812711A CN105812711A (zh) | 2016-07-27 |
| CN105812711B true CN105812711B (zh) | 2019-06-28 |
Family
ID=56455601
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610298758.7A Active CN105812711B (zh) | 2016-05-05 | 2016-05-05 | 视频通话过程中优化图像质量的方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105812711B (zh) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107968927A (zh) * | 2016-10-20 | 2018-04-27 | 中兴通讯股份有限公司 | 图像处理方法及装置 |
| CN107040747A (zh) * | 2017-04-27 | 2017-08-11 | 宇龙计算机通信科技(深圳)有限公司 | 视频通话调整方法及系统 |
| CN107396031A (zh) * | 2017-09-09 | 2017-11-24 | 安徽省未来博学信息技术有限公司 | 一种视频通话优化系统 |
| CN109688465B (zh) | 2018-11-27 | 2020-12-29 | Oppo广东移动通信有限公司 | 视频增强控制方法、装置以及电子设备 |
| CN109558839A (zh) * | 2018-11-29 | 2019-04-02 | 徐州立讯信息科技有限公司 | 自适应人脸识别方法和实现该方法的设备及系统 |
| CN109587259A (zh) * | 2018-12-14 | 2019-04-05 | 深圳壹账通智能科技有限公司 | 移动设备之远程管理方法与系统及使用所述方法的服务器 |
| CN109769143A (zh) * | 2019-02-03 | 2019-05-17 | 广州视源电子科技股份有限公司 | 视频图像处理方法、装置、视频系统、设备和存储介质 |
| CN111479172B (zh) * | 2020-04-30 | 2022-03-01 | 未来穿戴技术有限公司 | 一种信息传输方法、电子设备及可读存储介质 |
| CN113205661A (zh) * | 2021-04-30 | 2021-08-03 | 广东艾檬电子科技有限公司 | 一种反欺凌实现方法、系统、智能穿戴设备和存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102497445A (zh) * | 2011-12-23 | 2012-06-13 | 广东威创视讯科技股份有限公司 | 数据传输方法和装置 |
| CN103096084A (zh) * | 2013-01-29 | 2013-05-08 | 海能达通信股份有限公司 | 一种无线传输中码率自适应调节的方法、装置及系统 |
| CN103607559A (zh) * | 2013-11-07 | 2014-02-26 | 成都斯科瑞特科技有限公司 | 视频文件的通讯方法、监控终端、监控服务器以及视频监控系统 |
| CN105025294A (zh) * | 2015-08-03 | 2015-11-04 | 兴天通讯技术有限公司 | 一种视频传输控制装置及方法 |
-
2016
- 2016-05-05 CN CN201610298758.7A patent/CN105812711B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102497445A (zh) * | 2011-12-23 | 2012-06-13 | 广东威创视讯科技股份有限公司 | 数据传输方法和装置 |
| CN103096084A (zh) * | 2013-01-29 | 2013-05-08 | 海能达通信股份有限公司 | 一种无线传输中码率自适应调节的方法、装置及系统 |
| CN103607559A (zh) * | 2013-11-07 | 2014-02-26 | 成都斯科瑞特科技有限公司 | 视频文件的通讯方法、监控终端、监控服务器以及视频监控系统 |
| CN105025294A (zh) * | 2015-08-03 | 2015-11-04 | 兴天通讯技术有限公司 | 一种视频传输控制装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105812711A (zh) | 2016-07-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105812711B (zh) | 视频通话过程中优化图像质量的方法及系统 | |
| CN105812710B (zh) | 视频通话过程中优化图像质量的方法及系统 | |
| CN105025249B (zh) | 视频监控数据传输控制方法、装置及视频监控系统 | |
| US11606564B2 (en) | Video encoding code rate control method, apparatus, and device, and storage medium | |
| CN108881780B (zh) | 视频通话中动态调整清晰度模式的方法、服务器 | |
| JP5898235B2 (ja) | 通信方法及び通信装置 | |
| CA2430161C (en) | Data processor | |
| WO2022111672A1 (zh) | 数据处理方法、装置及电子设备 | |
| CN110769296B (zh) | 一种传输时基于本地缓存的视频码率自适应调节方式 | |
| CN110381316A (zh) | 一种视频传输控制方法、装置、设备及存储介质 | |
| CN202799004U (zh) | 一种视频播放终端及系统 | |
| CN103078831A (zh) | 一种流媒体支持tcp和udp传送的自适应的方法 | |
| CN101848382A (zh) | 一种视频流图像分辨率和码流的调整方法及系统 | |
| CN109729437B (zh) | 流媒体自适应传输方法、终端和系统 | |
| CN105376607A (zh) | 一种网络抖动环境下的视频直播方法及装置 | |
| KR20130143162A (ko) | 휴대단말기의 데이터 전송 장치 및 방법 | |
| CN102377730A (zh) | 音视频信号的处理方法及移动终端 | |
| CN105392023A (zh) | 一种网络抖动环境下的视频直播方法及装置 | |
| CN103002354A (zh) | 一种消除视频数据传输网络抖动的方法及系统 | |
| CN115883877A (zh) | 一种超高清视频流的传输方法及系统 | |
| Reznik | User-adaptive mobile video streaming using MPEG-DASH | |
| EP3175617A1 (en) | System and method for automatic encoder adjustment based on transport data | |
| CN109982080A (zh) | 一种视频传输的方法、存储介质、机器人及控制系统 | |
| CN106713842A (zh) | 影像处理方法及其摄影机 | |
| JP2011239232A (ja) | 送信装置、送信方法、並びにプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20210310 Address after: 528850 16th floor, 168 Dongmen Middle Road, Xiaobian community, Chang'an Town, Dongguan City, Guangdong Province Patentee after: Dongguan elf Education Software Co.,Ltd. Address before: 523860 Second Floor, 126 Wushabugao Avenue, Chang'an Town, Dongguan City, Guangdong Province Patentee before: Guangdong Xiaotiancai Technology Co.,Ltd. |
|
| TR01 | Transfer of patent right |