CN103581767A - 视频质量调节系统、终端及方法 - Google Patents
视频质量调节系统、终端及方法 Download PDFInfo
- Publication number
- CN103581767A CN103581767A CN201210257263.1A CN201210257263A CN103581767A CN 103581767 A CN103581767 A CN 103581767A CN 201210257263 A CN201210257263 A CN 201210257263A CN 103581767 A CN103581767 A CN 103581767A
- Authority
- CN
- China
- Prior art keywords
- video
- current
- terminal
- unit
- rtcp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
一种视频质量调节终端，包括网络通信单元、编码单元、RTCP包生成单元及视频分析单元，RTCP包生成单元根据视频码流的传输状况生成RTCP包，并由该网络通信单元发送至接收终端，视频分析单元根据接收终端对RTCP包的分析确定的当前网络的状况判断是否对当前的视频图像帧整体进行编码，并当确定当前网络状况不佳时，提取当前的视频图像的主要对象由该编码单元进行编码以获得视频码流。本发明还提供一种系统及方法，利用本发明，通过实时地对通信网络传输状况进行监测以相应地生成RTCP包，并根据对RTCP包的分析结果选择对实时视频图像进行主要对象的筛选与编码，从而节省带宽，改善接收端接收视频图像流畅度以及图像质量。
Description
技术领域
本发明涉及视频通信领域，尤其是涉及一种视频质量调节系统、终端及方法。
背景技术
现有的视频即时通信系统中，发送端通过视频输入设备接收视频序列，并采用一定的编码算法对图像帧进行编码，也就是说，发送端使用相同的编码算法将影像对象的各个部分进行编码/压缩，然而，编码后图像帧信息量较大，占用较大的带宽，很容因为网络带宽及传输质量的不稳定而造成实时影像的模糊或是声音的失真。
发明内容
有鉴于此，有必要提供一种视频质量调节系统、终端及方法，以解决现有技术中的即时视频通信系统对整个图像帧采用相同的编码算法而导致的占用带宽且由于网络带宽及传输质量的不稳定而造成实时影像的模糊或是声音的失真的缺陷。
本发明提供一种视频质量调节终端，与一接收终端通信连接，该视频质量调节终端包括网络通信单元以及编码单元，该网络通信单元用于接收视频信号，该编码单元用于对所接收到的视频信号进行编码以形成视频码流，该视频质量调节终端还包括：
RTCP包生成单元，用于根据该编码单元生成的视频码流在该视频质量调节终端与该接收终端之间的传输状况相应地生成RTCP包，并由该网络通信单元发送至该接收终端。以及
视频分析单元，根据该接收终端对该RTCP包的分析而确定的当前网络的状况判断是否对当前的视频图像帧整体进行编码，该视频分析单元还用于在确定当前网络状况不佳时，分析并筛选当前的视频图像以提取主要对象，并由该编码单元对该视频分析单元提取的主要对象进行编码以获得视频码流。
本发明还提供一种视频质量调节系统，包括发送终端与接收终端，该发送终端与该接收终端通信连接，该发送终端包括第一网络通信单元以及编码单元，该第一网络通信单元用于接收视频信号，该编码单元用于对所接收到的视频信号进行编码以形成视频码流，该接收终端包括第二网络通信单元、解码单元以及显示单元，该第二网络通信单元用于接收由该发送终端发送的经过编码的视频码流信号，该解码单元用于将接收到的视频码流解码，得到视频图像，该显示单元用于对解码得到的信息进行处理并显示，该发送终端还包括RTCP包生成单元及视频分析单元，该接收终端还包括RTCP包分析单元。该RTCP包生成单元，用于根据该编码单元生成的视频码流在该视频质量调节终端与该接收终端之间的传输状况相应地生成RTCP包，并由该网络通信单元发送至该接收终端。该RTCP包分析单元，用于接收由该发送终端发送的RTCP包，并根据RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给该发送终端。该视频分析单元，根据当前网络的状况判断是否对当前的视频图像帧整体进行编码，该视频分析单元还用于在当确定当前网络状况不佳时，分析并筛选当前的视频图像以提取主要对象，并由该编码单元对该视频分析单元提取的主要对象进行编码以获得视频码流。
本发明还提供一种视频质量调节方法，包括：
发送终端接收视频信号。
根据对发送终端传输视频码流信号至接收终端的过程进行监测相应地生成RTCP包。
发送终端将该RTCP包发送至该接收终端。
该接收终端根据该RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给该发送终端。
该发送终端根据该当前的网络状况信息确定是否对当前的图像帧整体进行编码。
当侦测到当前网络状况不佳时，该发送终端分析并筛选当前的视频图像，提取该视频图像中的主要对象，并对该主要对象进行编码以形成相应的视频码流，发送至该接收终端。及
该接收终端解码接收到的视频码流以得到视频图像并显示该视频图像。
相对于现有技术，本发明提供的视频质量调节系统、终端及方法，通过实时地对通信网络传输状况进行监测以相应地生成RTCP包，并根据对RTCP包的分析结果选择对实时视频图像进行主要对象的筛选与编码，从而节省带宽，改善接收端接收视频图像流畅度以及图像质量。
附图说明
图1为本发明实施方式中的视频质量调节系统的模块示意图。
图2为本发明实施方式中视频质量调节方法的流程图。
主要元件符号说明
| 视频质量调节系统 | 100 |
| 发送端 | 10 |
| 网络通信单元 | 11、21 |
| 编码单元 | 12 |
| 视频分析单元 | 13 |
| 视频接收单元 | 14 |
| RTCP包生成单元 | 15 |
| 接收端 | 20 |
| 解码单元 | 22 |
| 显示单元 | 23 |
| RTCP包分析单元 | 24 |
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
下面将结合附图，对本发明作进一步的详细说明。
请参阅图1，为本发明实施方式中的视频质量调节系统的模块示意图，该系统100包括发送端10和接收端20。其中，该发送端10用于发送编码后的视频码流及RTCP（Real-Time Streaming Protocol，实时流传输控制协议）包，以及根据接收端20反馈的网络状况判断结果，调整发送的视频码流中所需编码的部分。该接收端20用于对接收到的视频码流解码，以及根据接收到的RTCP包中的信息判断网络状况，并将判断结果反馈给发送端10。
该发送端10包括网络通信单元11、编码单元12、视频分析单元13以及视频接收单元14。该接收端20包括网络通信单元21、解码单元22及显示单元23。
具体地，该视频接收单元14接收所需发送的视频信号并生成视频序列，编码单元12对视频序列进行正常编码，并通过网络通信单元21将经过编码的视频序列发送至接收端20。其中，编码单元12进行的正常编码包括但不仅限于以预设编码算法对该图像帧整体进行编码。
该网络通信单元21用于接收由发送端10发送的经过编码的视频码流信号，解码单元22用于将接收到的视频码流解码，得到视频图像，显示单元23用于对解码得到的信息（视频图像）进行处理，最后将处理后的信息发送到显示设备（图未示）进行显示。
该发送端10还包括RTCP包生成单元15，当发送端10传输视频码流信号至接收端20的过程中，该RTCP包生成单元15根据视频码流的传输状况相应地生成RTCP包，并通过网络通信单元11发送至接收端20。在本实施方式中，该RTCP包包括信息发送数据包和信息接收数据包，其中，该信息发送数据包中包括实时传输协议的（Real Time Protocol，RTP）串流的支持采样频率转换信息（SSRC）、当前的时间、当前所传送的视频码流的封包数量以及当前所传送完成的字节数，该信息接收数据包中包括封包遗失片段、封包遗失的序列以及的抖动到达的间隔时间的平均值。
该接收端20还包括RTCP包分析单元24，用于接收由发送端10发送的RTCP包，并根据RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给发送端10。该发送端10的视频分析单元13根据接收端20发送的当前的网络状况信息确定是否对当前的图像帧整体进行编码，当侦测到当前网络状况不佳时，该视频分析单元13分析并筛选当前的视频图像，提取该视频图像中的主要对象（如提取人脸图像而舍弃背景图像），并将筛选提取的主要对象发送至编码单元12进行编码。当侦测到当前网络状况较佳时，该视频分析单元13对当前的视频图像不做筛选，将当前的视频图像整体发送至编码单元12进行编码。
在本实施方式中，该视频分析单元13利用MPEG4对象压缩方式对视频图像进行主要对象的筛选。
请参阅图2，为本发明的视频质量调节方法的流程图，该方法包括：
步骤S20，该视频接收单元14接收所需发送的视频信号并生成视频序列。
步骤S21，对发送端10传输视频码流信号至接收端20的过程进行监测，RTCP包生成单元15根据视频码流的传输状况相应地生成RTCP包。
在本实施方式中，该RTCP包包括信息发送数据包和信息接收数据包，其中，该信息发送数据包中包括实时传输协议的（Real Time Protocol， RTP）串流的支持采样频率转换信息（SSRC）、当前的时间、当前所传送的视频码流的封包数量以及当前所传送完成的字节数，该信息接收数据包中包括封包遗失片段、封包遗失的序列以及的抖动到达的间隔时间的平均值。
步骤S22，网络通信单元11将RTCP包生成单元15生成的RTCP包发送至接收端20。
步骤S23，RTCP包分析单元24接收由发送端10发送的RTCP包，并根据RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给发送端10。
步骤S24，视频分析单元13接收到由接收端20发送的当前的网络状况信息，并根据该当前的网络状况信息确定是否对当前的图像帧整体进行编码，当侦测到当前网络状况不佳时，则进入步骤S25，当侦测到当前网络状况较佳时，进入步骤S26。
步骤S25，该视频分析单元13分析并筛选当前的视频图像，提取该视频图像中的主要对象（如提取人脸图像而舍弃背景图像），编码单元12对视频图像中的主要对象进行编码，并由网络通信单元11将经过编码的视频码流发送至接收端20。
在本实施方式中，该视频分析单元13利用MPEG4对象压缩方式对视频图像进行主要对象的筛选。
步骤S26，编码单元12对整个视频图像进行编码，并由网络通信单元11将经过编码的视频码流发送至接收端20。
编码单元12进行的视频图像编码包括但不仅限于以预设编码算法对该图像帧整体进行编码。
步骤S27，该网络通信单元21接收由发送端10发送的经过编码的视频码流信号，解码单元22将接收到的视频码流解码，得到视频图像，显示单元23对解码得到的信息（视频图像）进行处理，最后将处理后的信息发送到显示设备（图未示）进行显示。
使用上述的视频质量调节系统、终端及方法，通过实时地对通信网络传输状况进行监测以相应地生成RTCP包，并根据对RTCP包的分析结果选择对实时视频图像进行主要对象的筛选与编码，从而节省带宽，改善接收端接收视频图像流畅度以及图像质量。
可以理解的是，对于本领域的普通技术人员来说，可以根据本发明的技术构思做出其它各种相应的改变与变形，而所有这些改变与变形都应属于本发明权利要求的保护范围。
Claims (12)
1.一种视频质量调节终端，与一接收终端通信连接，所述视频质量调节终端包括网络通信单元以及编码单元，所述网络通信单元用于接收视频信号，所述编码单元用于对所接收到的视频信号进行编码以形成视频码流，其特征在于，所述视频质量调节终端还包括：
RTCP包生成单元，用于根据所述编码单元生成的视频码流在所述视频质量调节终端与所述接收终端之间的传输状况相应地生成RTCP包，并由所述网络通信单元发送至所述接收终端；以及
视频分析单元，根据所述接收终端对所述RTCP包的分析而确定的当前网络的状况判断是否对当前的视频图像帧整体进行编码，所述视频分析单元还用于在确定当前网络状况不佳时，分析并筛选当前的视频图像以提取主要对象，并由所述编码单元对所述视频分析单元提取的主要对象进行编码以获得视频码流。
2.如权利要求1所述的视频质量调节终端，其特征在于，当确定当前网络状况较佳时，所述视频分析单元对当前的视频图像不做筛选，由所述编码单元对当前的视频图像进行整体编码以获得视频码流。
3.如权利要求1所述的视频质量调节终端，其特征在于，所述视频分析单元利用MPEG4对象压缩方式对视频图像进行主要对象的筛选。
4.如权利要求1所述的视频质量调节终端，其特征在于，所述RTCP包包括信息发送数据包和信息接收数据包，其中，所述信息发送数据包中包括实时传输协议的串流的支持采样频率转换信息、当前的时间、当前所传送的视频码流的封包数量以及当前所传送完成的字节数，所述信息接收数据包中包括封包遗失片段、封包遗失的序列以及的抖动到达的间隔时间的平均值。
5.一种视频质量调节系统，包括发送终端与接收终端，所述发送终端与所述接收终端通信连接，所述发送终端包括第一网络通信单元以及编码单元，所述第一网络通信单元用于接收视频信号，所述编码单元用于对所接收到的视频信号进行编码以形成视频码流，所述接收终端包括第二网络通信单元、解码单元以及显示单元，所述第二网络通信单元用于接收由所述发送终端发送的经过编码的视频码流信号，所述解码单元用于将接收到的视频码流解码，得到视频图像，所述显示单元用于对解码得到的信息进行处理并显示，其特征在于，所述发送终端还包括RTCP包生成单元及视频分析单元，所述接收终端还包括RTCP包分析单元；
所述RTCP包生成单元，用于根据所述编码单元生成的视频码流在所述视频质量调节终端与所述接收终端之间的传输状况相应地生成RTCP包，并由所述网络通信单元发送至所述接收终端；
所述RTCP包分析单元，用于接收由所述发送终端发送的RTCP包，并根据RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给所述发送终端；
所述视频分析单元，根据当前网络的状况判断是否对当前的视频图像帧整体进行编码，所述视频分析单元还用于在确定当前网络状况不佳时，分析并筛选当前的视频图像以提取主要对象，并由所述编码单元对所述视频分析单元提取的主要对象进行编码以获得视频码流。
6.如权利要求5所述的视频质量调节系统，其特征在于，当确定当前网络状况较佳时，所述视频分析单元对当前的视频图像不做筛选，由所述编码单元对当前的视频图像进行整体编码以获得视频码流。
7.如权利要求5所述的视频质量调节系统，其特征在于，所述视频分析单元利用MPEG4对象压缩方式对视频图像进行主要对象的筛选。
8.如权利要求5所述的视频质量调节系统，其特征在于，所述RTCP包包括信息发送数据包和信息接收数据包，其中，所述信息发送数据包中包括实时传输协议的串流的支持采样频率转换信息、当前的时间、当前所传送的视频码流的封包数量以及当前所传送完成的字节数，所述信息接收数据包中包括封包遗失片段、封包遗失的序列以及的抖动到达的间隔时间的平均值。
9.一种视频质量调节方法，包括：
发送终端接收视频信号；
根据对发送终端传输视频码流信号至接收终端的过程进行监测相应地生成RTCP包；
发送终端将所述RTCP包发送至所述接收终端；
所述接收终端根据所述RTCP包中的信息判断当前的网络状况，以及将判断结果反馈给所述发送终端；
当侦测到当前网络状况不佳时，所述发送终端分析并筛选当前的视频图像，提取所述视频图像中的主要对象，并对所述主要对象进行编码以形成相应的视频码流，发送至所述接收终端；及
所述接收终端解码接收到的视频码流以得到视频图像并显示所述视频图像。
10.如权利要求9所述的视频质量调节方法，其特征在于，还包括：
当侦测到当前网络状况较佳时，所述发送终端对当前的完整视频图像直接进行整体编码以获得视频码流。
11.如权利要求9所述的视频质量调节方法，其特征在于，所述视频分析单元利用MPEG4对象压缩方式对视频图像进行主要对象的筛选。
12.如权利要求9所述的视频质量调节方法，其特征在于，所述RTCP包包括信息发送数据包和信息接收数据包，其中，所述信息发送数据包中包括实时传输协议的串流的支持采样频率转换信息、当前的时间、当前所传送的视频码流的封包数量以及当前所传送完成的字节数，所述信息接收数据包中包括封包遗失片段、封包遗失的序列以及的抖动到达的间隔时间的平均值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210257263.1A CN103581767A (zh) | 2012-07-24 | 2012-07-24 | 视频质量调节系统、终端及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210257263.1A CN103581767A (zh) | 2012-07-24 | 2012-07-24 | 视频质量调节系统、终端及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN103581767A true CN103581767A (zh) | 2014-02-12 |
Family
ID=50052520
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210257263.1A Pending CN103581767A (zh) | 2012-07-24 | 2012-07-24 | 视频质量调节系统、终端及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103581767A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109495326A (zh) * | 2018-12-28 | 2019-03-19 | 北京东土科技股份有限公司 | 网络带宽分配方法和系统 |
| CN113573003A (zh) * | 2021-08-11 | 2021-10-29 | 睿云联(厦门)网络通讯技术有限公司 | 一种基于弱网的音视频实时通信方法、装置以及设备 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1420691A (zh) * | 2001-11-17 | 2003-05-28 | Lg电子株式会社 | 基于对象的比特率控制方法和系统 |
| CN1468001A (zh) * | 2002-06-27 | 2004-01-14 | 上海汉唐科技有限公司 | 基于因特网的媒体流自适应传输方法 |
| US20040261135A1 (en) * | 2002-12-09 | 2004-12-23 | Jens Cahnbley | System and method for modifying a video stream based on a client or network enviroment |
| CN101115196A (zh) * | 2006-07-27 | 2008-01-30 | 腾讯科技（深圳）有限公司 | 调节视频质量的方法、系统及终端 |
| WO2011022974A1 (zh) * | 2009-08-24 | 2011-03-03 | 中兴通讯股份有限公司 | 一种控制移动可视电话视频质量的方法和移动可视电话 |
-
2012
- 2012-07-24 CN CN201210257263.1A patent/CN103581767A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1420691A (zh) * | 2001-11-17 | 2003-05-28 | Lg电子株式会社 | 基于对象的比特率控制方法和系统 |
| CN1468001A (zh) * | 2002-06-27 | 2004-01-14 | 上海汉唐科技有限公司 | 基于因特网的媒体流自适应传输方法 |
| US20040261135A1 (en) * | 2002-12-09 | 2004-12-23 | Jens Cahnbley | System and method for modifying a video stream based on a client or network enviroment |
| CN101115196A (zh) * | 2006-07-27 | 2008-01-30 | 腾讯科技（深圳）有限公司 | 调节视频质量的方法、系统及终端 |
| WO2011022974A1 (zh) * | 2009-08-24 | 2011-03-03 | 中兴通讯股份有限公司 | 一种控制移动可视电话视频质量的方法和移动可视电话 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109495326A (zh) * | 2018-12-28 | 2019-03-19 | 北京东土科技股份有限公司 | 网络带宽分配方法和系统 |
| CN109495326B (zh) * | 2018-12-28 | 2021-12-14 | 北京东土科技股份有限公司 | 网络带宽分配方法和系统 |
| CN113573003A (zh) * | 2021-08-11 | 2021-10-29 | 睿云联(厦门)网络通讯技术有限公司 | 一种基于弱网的音视频实时通信方法、装置以及设备 |
| CN113573003B (zh) * | 2021-08-11 | 2023-08-01 | 睿云联(厦门)网络通讯技术有限公司 | 一种基于弱网的音视频实时通信方法、装置以及设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9231992B2 (en) | Informative data streaming server | |
| JP5970724B2 (ja) | ビデオ符号化圧縮品質を取得するための方法および装置 | |
| JP5277177B2 (ja) | ビデオテレフォニー品質評価方法及び装置 | |
| RU2009116472A (ru) | Динамическая модификация свойств видео | |
| Aloman et al. | Performance evaluation of video streaming using MPEG DASH, RTSP, and RTMP in mobile networks | |
| CN105989844B (zh) | 一种音频传输的自适应方法及装置 | |
| KR101122143B1 (ko) | 수신기 버퍼 아키텍처를 나타내는 버퍼 파라미터의 시그널링 | |
| CN107517410B (zh) | 视频业务质量评估的方法及装置 | |
| US8760490B2 (en) | Techniques for a rate-adaptive video conference bridge | |
| TW201021576A (en) | System and method for dynamic video encoding in multimedia streaming | |
| CN104980819A (zh) | 一种视频传输方法及装置 | |
| CN110996103A (zh) | 一种根据网络情况对视频编码码率进行调节的方法 | |
| CN101931799A (zh) | 一种视频码流的平滑方法及装置 | |
| CN106162257B (zh) | 一种实时视频的自适应网络传输优化方法 | |
| CN104754339B (zh) | I帧调整方法、装置及系统 | |
| CN102905128A (zh) | 编解码处理器在无线视频传输过程中码率控制的方法 | |
| US9674515B2 (en) | Endpoint information for network VQM | |
| US9313508B1 (en) | Feeding intra-coded video frame after port reconfiguration in video telephony | |
| CN103581767A (zh) | 视频质量调节系统、终端及方法 | |
| JPWO2008123125A1 (ja) | 画質評価システム、方法およびプログラム | |
| CN103269448A (zh) | 基于rtp/rtcp反馈预警算法实现音视频同步方法 | |
| JP2005244315A (ja) | 映像ストリーミング伝送のネットワーク品質安定化装置 | |
| CN109151611B (zh) | 基于rtp/rtcp的hevc实时视频传输控制方法 | |
| CN101990082B (zh) | 一种实现可视电话的方法及装置 | |
| CN105472304A (zh) | 电网应急通信视频编解码动态适配方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140212 |
|
| WD01 | Invention patent application deemed withdrawn after publication |