CN110855673B - 一种复杂多媒体数据传输及处理方法 - Google Patents
一种复杂多媒体数据传输及处理方法 Download PDFInfo
- Publication number
- CN110855673B CN110855673B CN201911120316.3A CN201911120316A CN110855673B CN 110855673 B CN110855673 B CN 110855673B CN 201911120316 A CN201911120316 A CN 201911120316A CN 110855673 B CN110855673 B CN 110855673B
- Authority
- CN
- China
- Prior art keywords
- signal
- band
- sub
- multimedia data
- complex multimedia
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明公开了一种复杂多媒体数据传输及处理方法,首先在数据发送端,通过改进子带编码算法将复杂多媒体数据处理成传输码流,并将其发送给数据接收端,然后在数据接收端,对接收到的传输码流进行解码还原,得到复杂多媒体数据。本发明通过在数据发送端和数据接收端分别对复杂多媒体数据进行子带编码和解码还原处理,能够使复杂多媒体数据的传输具有更快的传输速率、更高的传输效率和传输精度。
Description
技术领域
本发明属于多媒体数据处理技术领域,具体涉及一种复杂多媒体数据传输及处理方法的设计。
背景技术
在信息技术引领下,多媒体数据呈现爆炸式增长。多媒体(Multimedia)是多种媒体的综合,一般包括文本、声音和图像等多种媒体形式。多媒体技术就是通过计算机对语言文字、数据、音频、视频等各种信息进行存储和管理,使用户能够通过多种感官跟计算机进行实时信息交流的技术,多媒体技术所展示、承载的内容实际上都是计算机技术的产物。
多媒体技术具备集成性、控制性、交互性、非线性、实时性、互动性、信息使用的方便性和信息结构的动态性等特点,多媒体数据包括了文本、图像、音频、视频等多种数据类型,通常来说其数据类型多,数据量巨大,因此与之相对应的,目前从前端采集设备(发送端)将多媒体数据传输至后端处理设备(接收端)需要占用大量信道资源,并且现有的多媒体数据传输技术普遍存在传输速率慢、传输效率低的问题。
发明内容
本发明的目的是为了解决现有的多媒体数据传输技术普遍存在传输速率慢、传输效率低的问题,提出了一种复杂多媒体数据传输及处理方法,通过在数据发送端和数据接收端分别对复杂多媒体数据进行子带编码和解码还原处理,能够使复杂多媒体数据的传输具有更快的传输速率、更高的传输效率和传输精度。
本发明的技术方案为:一种复杂多媒体数据传输及处理方法,包括以下步骤:
S1、在数据发送端,通过改进子带编码算法将复杂多媒体数据处理成传输码流,并将其发送给数据接收端。
S2、在数据接收端,对接收到的传输码流进行解码还原,得到复杂多媒体数据。
进一步地,步骤S1包括以下分步骤:
S11、在数据发送端,通过一组带通滤波器将复杂多媒体数据信号分成若干个在不同频率段上的子带信号,并对每一个子带信号进行比特分配。
S12、对每一个子带信号进行频谱搬移,得到其对应的基带信号。
S13、对每一个基带信号在奈氏频率上进行取样,得到其对应的取样信号。
S14、对每一个取样信号进行量化编码,得到其对应的编码信号。
S15、通过合路器将所有编码信号合并为传输码流,并将其发送给数据接收端。
进一步地,步骤S11中每个子带信号的带宽满足以下约束条件:
ΔWi+1≥ΔWi
其中ΔWi和ΔWi+1分别表示第i个和第i+1个子带信号的带宽,i=1,2,...,N,N为子带信号数量。
进一步地,步骤S11中对每一个子带信号进行比特分配的公式为:
其中Ri表示第i个子带信号分配到的比特数,i=1,2,...,N,N为子带信号数量,R表示每个子带信号分配到的比特数的平均值,σi表示第i个子带信号所对应的带通滤波器的输入信号功率。
进一步地,步骤S12中对每一个子带信号进行频谱搬移的方法具体为:
A1、将子带信号mi(t)输入叠加器与直流信号A0相加,得到叠加信号A0+mi(t),i=1,2,...,N,N为子带信号数量。
A2、将叠加信号A0+mi(t)输入叠乘器与载波信号cosωc(t)相乘,得到其对应的基带信号si(t)=[A0+mi(t)]·cosωc(t),其中ωc表示载波角频率。
进一步地,步骤S13中每一个基带信号的奈氏频率表达式为:
Δfsi=2ΔWi
其中Δfsi表示第i个基带信号的奈氏频率,ΔWi表示第i个基带信号所对应子带信号的带宽。
进一步地,步骤S14中对每一个取样信号进行量化编码的方法具体为:
B1、将取样信号转化为二进制编码。
B2、通过Json.stringify()函数将二进制编码转化为json格式的字符串。
B3、通过replacer参数对json格式的字符串进行过滤处理。
B4、通过space参数对过滤后json格式的字符串进行格式化缩进处理,得到与取样信号对应的编码信号。
进一步地,步骤S2包括以下分步骤:
S21、在数据接收端,通过分路器将接收到的传输码流分为与数据发送端各子带信号对应的子带码流。
S22、对每一个子带码流进行解码,得到其对应的解码信号。
S23、对每一个解码信号进行频谱搬移,得到其对应的子带信号。
S24、通过一组带通滤波器对每个子带信号进行带通滤波,得到其对应的滤波信号。
S25、将所有滤波信号输入加法器进行叠加,还原得到原始的复杂多媒体数据信号。
进一步地,步骤S22中对每一个子带码流进行解码的方法具体为:
C1、采用JSON.parse()函数对json格式的字符串进行解析,并通过reviver参数对解析结果进行转化,得到与数据发送端的复杂多媒体数据对应的二进制编码。
C2、对二进制编码进行解码,得到其对应的解码信号。
进一步地,步骤S23中对每一个解码信号进行频谱搬移的方法具体为:
D1、将解码信号si(t)输入叠乘器与载波信号cos ωc(t)相乘,得到叠乘信号:
本发明的有益效果是:
(1)本发明采用改进子带编码算法对数据发送端的复杂多媒体数据进行编码,可以利用人耳(或人眼)对不同频率信号的感知灵敏度不同的特性,在人的听觉(或视觉)不敏感的频段采用较为粗糙的量化方式,从而达到数据压缩的目的,在基本不影响数据传输精度的前提下,有效提高了复杂多媒体数据的传输速率。
(2)本发明采用改进子带编码算法对数据发送端的复杂多媒体数据进行编码,各个子带信号的量化噪声都束缚在该子带内,可以有效避免能量较小的频带内的信号被其他频段中的量化噪声淹没,有效提高了复杂多媒体数据的传输精度。
(3)本发明在子带编码过程中通过对每一个子带信号进行合理的比特分配,可以获得更好的主观质量,提高复杂多媒体数据的传输精度。
(4)本发明采用双边带调幅(AM)的方式对子带内的信号进行频谱搬移,调制和解调过程都非常简单,且AM波占用的频带较窄,可以有效提高复杂多媒体数据的传输效率。
(5)本发明在量化编码的过程中采用了序列化处理方法,并在解码还原过程中采用了反序列化处理方法,有效提高了复杂多媒体数据的传输速率。
附图说明
图1所示为本发明实施例提供的一种复杂多媒体数据传输及处理方法流程图。
图2所示为本发明实施例提供的数据发送端数据处理示意图。
图3所示为本发明实施例提供的对子带信号进行频谱搬移示意图。
图4所示为本发明实施例提供的数据接收端数据处理示意图。
图5所示为本发明实施例提供的对解码信号进行频谱搬移示意图。
具体实施方式
现在将参考附图来详细描述本发明的示例性实施方式。应当理解,附图中示出和描述的实施方式仅仅是示例性的,意在阐释本发明的原理和精神,而并非限制本发明的范围。
本发明实施例公开了一种复杂多媒体数据传输及处理方法,如图1所示,包括以下步骤S1~S2:
S1、在数据发送端,通过改进子带编码算法将复杂多媒体数据处理成传输码流,并将其发送给数据接收端。
如图2所示,步骤S1包括以下分步骤S11~S15:
S11、在数据发送端,通过一组带通滤波器将复杂多媒体数据信号分成若干个在不同频率段上的子带信号,并对每一个子带信号进行比特分配。
本发明实施例中,数据发送端为多媒体数据采集设备。
本发明实施例采用变带宽子带编码方式,每个子带信号的带宽满足以下约束条件:
ΔWi+1≥ΔWi
其中ΔWi和ΔWi+1分别表示第i个和第i+1个子带信号的带宽,i=1,2,...,N,N为子带信号数量。
本发明实施例中,对每一个子带信号进行比特分配的公式为:
其中Ri表示第i个子带信号分配到的比特数,i=1,2,...,N,N为子带信号数量,R表示每个子带信号分配到的比特数的平均值,σi表示第i个子带信号所对应的带通滤波器的输入信号功率。
S12、对每一个子带信号进行频谱搬移,得到其对应的基带信号。
如图3所示,本发明实施例中,采用双边带调幅(AM)的方式对每一个子带信号进行频谱搬移,其方法具体为:
A1、将子带信号mi(t)输入叠加器与直流信号A0相加,得到叠加信号A0+mi(t),i=1,2,...,N,N为子带信号数量。
A2、将叠加信号A0+mi(t)输入叠乘器与载波信号cosωc(t)相乘,得到其对应的基带信号si(t)=[A0+mi(t)]·cosωc(t),其中ωc表示载波角频率。
S13、对每一个基带信号在奈氏频率上进行取样,得到其对应的取样信号。
本发明实施例中,每一个基带信号的奈氏频率表达式为:
Δfsi=2ΔWi
其中Δfsi表示第i个基带信号的奈氏频率,ΔWi表示第i个基带信号所对应子带信号的带宽。
S14、对每一个取样信号进行量化编码,得到其对应的编码信号。
本发明实施例中,采用序列化的方式对每一个取样信号进行量化编码,其方法具体为:
B1、将取样信号转化为二进制编码。
本发明实施例中,针对复杂多媒体数据信号中的声音信号,首先采用两个字节作为量化值量化振幅,两个字节的振幅高度划分为0~65535个级别,然后通过计算机对一个连续的模拟声波信号,每秒进行n次采样,每次采样点的数据用二进制数记录,得到其对应的二进制编码。
针对复杂多媒体数据信号中的图像信号,首先将其分解为若干个像素(pixels)点,再把每个像素点转化为二进制编码。
针对复杂多媒体数据信号中的视频信号,首先将其分解为若干帧的图像信号,再采用图像信号的二进制编码转化方法将每帧图像信号转化为二进制编码。
B2、通过Json.stringify()函数将二进制编码转化为json格式的字符串。
B3、通过replacer参数(一个数组或函数)对json格式的字符串进行过滤处理。
B4、通过space参数(一个数值或一个字符串)对过滤后json格式的字符串进行格式化缩进处理,得到与取样信号对应的编码信号。
S15、通过合路器将所有编码信号合并为传输码流,并将其发送给数据接收端。
S2、在数据接收端,对接收到的传输码流进行解码还原,得到复杂多媒体数据。
如图4所示,步骤S2包括以下分步骤S21~S25:
S21、在数据接收端,通过分路器将接收到的传输码流分为与数据发送端各子带信号对应的子带码流。
S22、对每一个子带码流进行解码,得到其对应的解码信号。
本发明实施例中,采用反序列化的方法对每一个子带码流进行解码,其方法具体为:
C1、采用JSON.parse()函数对json格式的字符串进行解析,并通过reviver参数对解析结果进行转化,得到与数据发送端的复杂多媒体数据对应的二进制编码。
C2、对二进制编码进行解码,得到其对应的解码信号,解码信号即为步骤S12得到的基带信号si(t)=[A0+mi(t)]·cos ωc(t)。
S23、对每一个解码信号进行频谱搬移,得到其对应的子带信号。
如图5所示,本发明实施例中,采用相干解调的方法对每一个解码信号进行频谱搬移,其方法具体为:
D1、将解码信号si(t)输入叠乘器与载波信号cos ωc(t)相乘,得到叠乘信号:
S24、通过一组带通滤波器对每个子带信号进行带通滤波,得到其对应的滤波信号。
S25、将所有滤波信号输入加法器进行叠加,还原得到原始的复杂多媒体数据信号。
本领域的普通技术人员将会意识到,这里所述的实施例是为了帮助读者理解本发明的原理,应被理解为本发明的保护范围并不局限于这样的特别陈述和实施例。本领域的普通技术人员可以根据本发明公开的这些技术启示做出各种不脱离本发明实质的其它各种具体变形和组合,这些变形和组合仍然在本发明的保护范围内。
Claims (8)
1.一种复杂多媒体数据传输及处理方法,其特征在于,包括以下步骤:
S1、在数据发送端,通过改进子带编码算法将复杂多媒体数据处理成传输码流,并将其发送给数据接收端;
S2、在数据接收端,对接收到的传输码流进行解码还原,得到复杂多媒体数据;
所述步骤S1包括以下分步骤:
S11、在数据发送端,通过一组带通滤波器将复杂多媒体数据信号分成若干个在不同频率段上的子带信号,并对每一个子带信号进行比特分配;
S12、对每一个子带信号进行频谱搬移,得到其对应的基带信号;
S13、对每一个基带信号在奈氏频率上进行取样,得到其对应的取样信号;
S14、对每一个取样信号进行量化编码,得到其对应的编码信号;
S15、通过合路器将所有编码信号合并为传输码流,并将其发送给数据接收端;
所述步骤S12中对每一个子带信号进行频谱搬移的方法具体为:
A1、将子带信号mi(t)输入叠加器与直流信号A0相加,得到叠加信号A0+mi(t),i=1,2,...,N,N为子带信号数量;
A2、将叠加信号A0+mi(t)输入叠乘器与载波信号cosωc(t)相乘,得到其对应的基带信号si(t)=[A0+mi(t)]·cosωc(t),其中ωc表示载波角频率。
2.根据权利要求1所述的复杂多媒体数据传输及处理方法,其特征在于,所述步骤S11中每个子带信号的带宽满足以下约束条件:
ΔWi+1≥ΔWi
其中ΔWi和ΔWi+1分别表示第i个和第i+1个子带信号的带宽,i=1,2,...,N,N为子带信号数量。
4.根据权利要求1所述的复杂多媒体数据传输及处理方法,其特征在于,所述步骤S13中每一个基带信号的奈氏频率表达式为:
Δfsi=2ΔWi
其中Δfsi表示第i个基带信号的奈氏频率,ΔWi表示第i个基带信号所对应子带信号的带宽。
5.根据权利要求1所述的复杂多媒体数据传输及处理方法,其特征在于,所述步骤S14中对每一个取样信号进行量化编码的方法具体为:
B1、将取样信号转化为二进制编码;
B2、通过Json.stringify()函数将二进制编码转化为json格式的字符串;
B3、通过replacer参数对json格式的字符串进行过滤处理;
B4、通过space参数对过滤后json格式的字符串进行格式化缩进处理,得到与取样信号对应的编码信号。
6.根据权利要求1所述的复杂多媒体数据传输及处理方法,其特征在于,所述步骤S2包括以下分步骤:
S21、在数据接收端,通过分路器将接收到的传输码流分为与数据发送端各子带信号对应的子带码流;
S22、对每一个子带码流进行解码,得到其对应的解码信号;
S23、对每一个解码信号进行频谱搬移,得到其对应的子带信号;
S24、通过一组带通滤波器对每个子带信号进行带通滤波,得到其对应的滤波信号;
S25、将所有滤波信号输入加法器进行叠加,还原得到原始的复杂多媒体数据信号。
7.根据权利要求6所述的复杂多媒体数据传输及处理方法,其特征在于,所述步骤S22中对每一个子带码流进行解码的方法具体为:
C1、采用JSON.parse()函数对json格式的字符串进行解析,并通过reviver参数对解析结果进行转化,得到与数据发送端的复杂多媒体数据对应的二进制编码;
C2、对二进制编码进行解码,得到其对应的解码信号。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911120316.3A CN110855673B (zh) | 2019-11-15 | 2019-11-15 | 一种复杂多媒体数据传输及处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911120316.3A CN110855673B (zh) | 2019-11-15 | 2019-11-15 | 一种复杂多媒体数据传输及处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110855673A CN110855673A (zh) | 2020-02-28 |
CN110855673B true CN110855673B (zh) | 2021-08-24 |
Family
ID=69601415
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911120316.3A Active CN110855673B (zh) | 2019-11-15 | 2019-11-15 | 一种复杂多媒体数据传输及处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110855673B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114898849A (zh) * | 2022-04-11 | 2022-08-12 | 江苏省人民医院(南京医科大学第一附属医院) | 一种ecpr患者目标温度管理的信息化管理系统及方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1326269A (zh) * | 1993-10-11 | 2001-12-12 | 皇家菲利浦电子有限公司 | 实施不同编码法则的发送系统 |
CN1795493A (zh) * | 2003-05-28 | 2006-06-28 | 皇家飞利浦电子股份有限公司 | 用于采用子带滤波来嵌入水印的装置和方法 |
CN102176779A (zh) * | 2010-12-17 | 2011-09-07 | 河海大学 | 无线多媒体传感网视频信号自适应采样与频谱分配方法 |
CN107077850A (zh) * | 2014-09-02 | 2017-08-18 | 杜比国际公司 | 用于对子带组的子带配置数据进行编码或解码的方法和装置 |
CN108701460A (zh) * | 2015-12-21 | 2018-10-23 | 彼得·格雷厄姆·克雷文 | 使用全通滤波器的无损带分离和带连结 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3067889A1 (en) * | 2015-03-09 | 2016-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Method and apparatus for signal-adaptive transform kernel switching in audio coding |
-
2019
- 2019-11-15 CN CN201911120316.3A patent/CN110855673B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1326269A (zh) * | 1993-10-11 | 2001-12-12 | 皇家菲利浦电子有限公司 | 实施不同编码法则的发送系统 |
CN1795493A (zh) * | 2003-05-28 | 2006-06-28 | 皇家飞利浦电子股份有限公司 | 用于采用子带滤波来嵌入水印的装置和方法 |
CN102176779A (zh) * | 2010-12-17 | 2011-09-07 | 河海大学 | 无线多媒体传感网视频信号自适应采样与频谱分配方法 |
CN107077850A (zh) * | 2014-09-02 | 2017-08-18 | 杜比国际公司 | 用于对子带组的子带配置数据进行编码或解码的方法和装置 |
CN108701460A (zh) * | 2015-12-21 | 2018-10-23 | 彼得·格雷厄姆·克雷文 | 使用全通滤波器的无损带分离和带连结 |
Non-Patent Citations (1)
Title |
---|
DRA多声道数字音频信号压缩编码算法;许憬等;《电声技术》;20130617(第06期);第1-4页 * |
Also Published As
Publication number | Publication date |
---|---|
CN110855673A (zh) | 2020-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2194361C2 (ru) | Способы кодирования/декодирования цифровых данных аудио/видео сигналов и устройства для их осуществления | |
CN101421780B (zh) | 用于编码和解码时变信号的方法和设备 | |
US20040264568A1 (en) | Hierarchical data compression system and method for coding video data | |
CN103873877A (zh) | 远程桌面的图像传输方法及装置 | |
JPS5936278B2 (ja) | 音声信号のコ−ド化装置 | |
CN104718572A (zh) | 音频编码方法和装置、音频解码方法和装置及采用该方法和装置的多媒体装置 | |
CN102098553A (zh) | 视频传输方法、系统及视频服务器 | |
CN110855673B (zh) | 一种复杂多媒体数据传输及处理方法 | |
CN102598668B (zh) | 编码装置、解码装置、编码装置的控制方法、解码装置的控制方法、传送系统 | |
JP3466080B2 (ja) | デジタルデータの符号化/復号化方法及び装置 | |
US5629737A (en) | Method and apparatus for subband coding video signals | |
CN101393743A (zh) | 一种可配置参数的立体声编码装置及其编码方法 | |
CN113129911A (zh) | 一种音频信号编码压缩和传输的方法及电子设备 | |
EP1724757A3 (en) | Method of and apparatus for encoding/decoding digital signal using linear quantization by sections | |
CN102572426A (zh) | 一种数据处理的方法和装置 | |
CN102055974B (zh) | 数据压缩、解压缩方法、装置及系统 | |
CN115361556A (zh) | 一种基于自适应的高效视频压缩算法及其系统 | |
US8311481B2 (en) | Data format conversion for electronic devices | |
CN115938373A (zh) | 载人飞行器与地面站音频传输编码解码处理方法和系统 | |
KR100338801B1 (ko) | 디지털데이터의부호화/복호화방법및장치 | |
CN104113394B (zh) | 通信调制信号的压缩及解压方法 | |
US6819800B2 (en) | Moving image compression/decompression apparatus and method which use a wavelet transform technique | |
CN111147865B (zh) | 一种视频编码前的预解码方法 | |
CN1202513C (zh) | 音频编码、译码方法和装置及其应用 | |
Ibrahimpatnam | A high performance novel image compression technique using hybrid transform for multimedia applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |