CN109729361A - 一种具有音视频压缩的终端硬件实现方法 - Google Patents

一种具有音视频压缩的终端硬件实现方法 Download PDF

Info

Publication number
CN109729361A
CN109729361A CN201910081602.7A CN201910081602A CN109729361A CN 109729361 A CN109729361 A CN 109729361A CN 201910081602 A CN201910081602 A CN 201910081602A CN 109729361 A CN109729361 A CN 109729361A
Authority
CN
China
Prior art keywords
data
video
audio
module
terminal hardware
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910081602.7A
Other languages
English (en)
Inventor
陈波
李宏义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING JINGPINTEZHUANG SCIENCE AND TECHNOLOGY Co Ltd
Original Assignee
BEIJING JINGPINTEZHUANG SCIENCE AND TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING JINGPINTEZHUANG SCIENCE AND TECHNOLOGY Co Ltd filed Critical BEIJING JINGPINTEZHUANG SCIENCE AND TECHNOLOGY Co Ltd
Priority to CN201910081602.7A priority Critical patent/CN109729361A/zh
Publication of CN109729361A publication Critical patent/CN109729361A/zh
Pending legal-status Critical Current

Links

Abstract

本发明公开了一种具有音视频压缩的终端硬件及其实现方法。所述终端硬件包括mcu模块,主要用于摇杆,按键和触摸屏数据的采集和处理;arm模块,负责音视频的采集压缩,存储和文件的管理,图像的在屏显示和音频的实时输出;终端,用于实现音视频的同步压缩成avi文件,avi的文件解析并同步输出音视频给耳机和显示屏幕,实现在线拍照,在线的音视频和图片的预览等功能。

Description

一种具有音视频压缩的终端硬件实现方法
技术领域
本发明公开了一种具有音视频压缩的终端硬件实现方法,适用于手持终端领域,具有低功耗,可以音视频存储的终端设备中。
背景技术
随着科学技术的发展,手持终端设备的音视频压缩存储发展迅速。从最初的jpeg压缩,经历了mpeg1、mpeg2、h.330、h.264等阶段。相对与mpeg1、mpeg2、h.330,h.264标准压缩在空间冗余、时间冗余、统计冗余和视觉冗余做了优化,实现了更高压缩率,更低视频损失。本方案基于arm里的硬件编解码协处理器实现h.264视频和g.711音频的压缩和解压,相较于纯软件的视频压缩解压终端有更快的压缩速率,更低功耗。
发明内容
本发明为解决上述的技术问题,本发明提供一种具有音视频压缩的终端硬件,所述终端硬件包括mcu模块和arm模块,所述arm模块和mcu模块交互连接;
mcu模块,所述mcu模块用于摇杆、按键和触摸屏的数据采集和数据处理;
arm模块,所述arm模块用于采集音视频并压缩成avi;
实时拍照;
存储文件管理;
和图像在屏显示和音频的实时输出:
进一步地,所述arm模块中音视频采集并压缩成avi具体为:
音频采集的数据压缩到g.711,然后运用基于容器模式把压缩后的图像和音频数据填写到文件里;
进一步地,所述arm模块中实时拍照具体为:
对视频采集的数据进行采集并按照bmp数据格式转换数据并填写到bmp文件的相应位置;
进一步地,所述arm模块中存储和文件的管理具体为:对avi文件,bmp文件的存储和管理;
进一步地,所述arm模块中图像在屏显示和音频的实时输出具体为:
视频的实时显示和音频的同步输出,其包括音视频解码和音视频的编码;
进一步地,所述mcu模块中摇杆、按键和触摸屏数据的采集和处理具体为:
对外设进行数据采集,并对采集的数据进行滤波处理;
进一步地,所述终端硬件的具体实现方法为:
所述arm模块,以arm主芯片为核心,ddr连接到arm的ddr 控制器上,nandflash连接到arm的emif总线上,lcd连接到rgb的总线输出上;
所述的mcu模块,以mcu为核心,摇杆连接到mcu的模数转换接口上,按键接到mcu的io引脚上,触摸屏以i2C模式和中断模式连接到mcu的i2c控制器和外部终端上;
进一步地,所述arm模块的采集线程具体为:
通过外部BT656和BT1120并传行的数据数据采集,通道IPIPEIF 对采集的数据进行格式变换,可选通道进行IPIPE的大小变换,H3A算法处理,最终进入ddr中进行数据缓存;
ddr缓存数据处理并同步到外部的输出设备上;
获取编码线程的缓存buf,然后填充编码线程在ddr申请的缓存buf;
进一步地,所述arm模块的编码线程具体为:
获得采集线程填充的ddr中的缓存buf,进行h.264的视频格式的压缩,填充到事先获得的写线程的在ddr上申请的buf;
进一步地,所述arm模块的写线程具体为:
获得编码线程填充的ddr中的中h.264格式的视频缓存buf,并根据视频格式的要求,封装容器,存入sd卡中;
所述mcu的模块对外部设备的数据采集后,进行处理和转换,并传输处理好的数据发送给arm模块;
本发明的有益效果如下:
1)、本发明所述方法适用于嵌入式手持音视频压缩的硬件,并且低功耗较低;
2)、本发明所述方法可以实现音视频的同步编码和音视频的同步解码;
3)、本发明所述方法可以实现音视频的压缩和音视频文件的在屏显示和播放。
附图说明
图1为本发明所述终端硬件的原理示意图;
图2为本发明所述终端硬件中芯片内部视频采集处理单元;
图3为本发明所述终端硬件的软件流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细描述。应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。相反,本发明涵盖任何由权利要求定义的在本发明的精髓和范围上做的替代、修改、等效方法以及方案。进一步,为了使公众对本发明有更好的了解,在下文对本发明的细节描述中,详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本发明。
下面结合附图和具体实施例对本发明作进一步说明,但不作为对本发明的限定。下面为本发明的举出最佳实施例:
如图1-图3所示,本发明提供了一种具有音视频压缩的终端硬件及其实现方法,所述终端硬件包括arm模块,mcu模块等。
如图1所示,本发明的具体的硬件结构:arm模块包括arm主芯片,ddr硬件,nandflash硬件,lcd硬件。mcu模块包括,mcu主芯片,摇杆硬件,按键硬件,触摸屏芯片。
所述的arm模块,以arm主芯片为核心,ddr连接到arm的ddr 控制器上,nandflash连接到arm的emif总线上,lcd连接到rgb的总线输出上。
所述的mcu模块,为mcu为核心,摇杆连接到mcu的模数转换接口上,按键接到mcu的io引脚上,触摸屏以i2C模式和中断模式连接到mcu的i2c控制器和外部终端上。
如图2所示,本发明中所述arm模块的采集线程,通过外部BT656,BT1120等并传行的数据数据采集,通道IPIPEIF 对采集的数据进行格式变换,可选通道进行IPIPE的大小变换,H3A算法等处理,最终进入ddr中进行数据缓存。ddr缓存数据处理并同步到外部的输出设备上。获取编码线程的缓存buf,然后填充编码线程在ddr申请的缓存buf。
如图3所示,本发明中所述arm模块的编码线程,获得采集线程填充的ddr中的缓存buf,进行h.264的视频格式的压缩,填充到事先获得的写线程的在ddr上申请的buf。
所述arm模块的写线程,获得编码线程填充的ddr中的中h.264格式的视频缓存buf,并根据视频格式的要求,封装容器,存入sd卡中。
所述mcu的模块,主要为外部设备的数据采集,处理和转换,并传输处理好的数据发送给arm模块。
arm模块由arm920t微控制器,lcd,ddr与nandflash存储电路组成。
mcu模块由摇杆,按键,触摸电路组成。其外部还提供包括维护芯片工作的复位电路,晶振启动电路,jtag调试电路,uart数据打印电路,网口下载电路,电压转换电路。其中包括12个io按键,每个io按键上拉+3.3v电源。2个摇杆,摇杆为模数转换接口,最大输出3.3v,由mcu内部的模数转换器采集。电压转换电路提供足够的5v,3.3v,1.8v,1.2v电压,满足系统的正常工作。网路下载电路,主要负责arm的文件的tftp传输和前期系统开发的nfs系统挂载。复位电路获得足够的复位时间,满足系统的正常启动。晶振启动电路提供稳固的频率,满足系统的同步稳定的运行。Jtag调试电路,负责对软件的下载和软件问题的查找。Uart打印电路,可以实时观察内部的数据变化。
arm的音视频采集压缩成avi,是指视频采集的图像数据压缩成h.264格式,音频采集的数据压缩到g.711,然后运用基于容器模式把压缩后的图像和音频数据填写到文件里,并存储到sd卡中。
所述mcu模块负责摇杆,按键和触摸屏数据的采集和处理,是指对外设进行数据采集,并对采集的数据进行进行数据提取,转化和滤波处理。
以上所述的实施例,只是本发明较优选的具体实施方式的一种,本领域的技术人员在本发明技术方案范围内进行的通常变化和替换都应包含在本发明的保护范围内。

Claims (10)

1.一种具有音视频压缩的终端硬件,其特征在于,所述终端硬件包括mcu模块和arm模块,所述arm模块和mcu模块交互连接;
mcu模块,所述mcu模块用于摇杆、按键和触摸屏的数据采集和数据处理;
arm模块,所述arm模块用于采集音视频并压缩成avi;
实时拍照;
存储文件管理;
和图像在屏显示和音频的实时输出。
2.根据权利要求1所述的终端硬件,其特征在于,所述arm模块中音视频采集并压缩成avi具体为:
将视频采集的图像数据压缩成h.264格式,音频采集的数据压缩到g.711,然后运用基于容器模式把压缩后的图像和音频数据填写到文件里。
3.根据权利要求1所述的终端硬件,其特征在于,所述arm模块中实时拍照具体为:
对视频采集的数据进行采集并按照bmp数据格式转换数据并填写到bmp文件的相应位置。
4.根据权利要求3所述的终端硬件,其特征在于,所述arm模块中存储和文件的管理具体为:对avi文件,bmp文件的存储和管理。
5.根据权利要求3所述的终端硬件,其特征在于,所述arm模块中图像在屏显示和音频的实时输出具体为:
视频的实时显示和音频的同步输出,其包括音视频解码和音视频的编码。
6.根据权利要求1所述的终端硬件,其特征在于,所述mcu模块中摇杆、按键和触摸屏数据的采集和处理具体为:
对外设进行数据采集,并对采集的数据进行滤波处理。
7.根据权利要求1所述的终端硬件,其特征在于,所述终端硬件的具体实现方法为:
所述arm模块,以arm主芯片为核心,ddr连接到arm的ddr控制器上,nandflash连接到arm的emif总线上,lcd连接到rgb的总线输出上;
所述的mcu模块,以mcu为核心,摇杆连接到mcu的模数转换接口上,按键接到mcu的io引脚上,触摸屏以i2C模式和中断模式连接到mcu的i2c控制器和外部终端上。
8.根据权利要求7所述的的终端硬件,其特征在于,所述arm模块的采集线程具体为:
通过外部BT656或BT1120并传行的数据数据采集,通道IPIPEIF对采集的数据进行格式变换,可选通道进行IPIPE的大小变换,H3A算法处理,最终进入ddr中进行数据缓存;
ddr缓存数据处理并同步到外部的输出设备上;
获取编码线程的缓存buf,然后填充编码线程在ddr申请的缓存buf。
9.根据权利要求8所述的的终端硬件,其特征在于,所述arm模块的编码线程具体为:
获得采集线程填充的ddr中的缓存buf,进行h.264的视频格式的压缩,填充到事先获得的写线程的在ddr上申请的buf。
10.根据权利要求9所述的的终端硬件,其特征在于,所述arm模块的写线程具体为:
获得编码线程填充的ddr中的中h.264格式的视频缓存buf,并根据视频格式的要求,封装容器,存入sd卡中;
所述mcu的模块对外部设备的数据采集后,进行处理和转换,并传输处理好的数据发送给arm模块。
CN201910081602.7A 2019-01-28 2019-01-28 一种具有音视频压缩的终端硬件实现方法 Pending CN109729361A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910081602.7A CN109729361A (zh) 2019-01-28 2019-01-28 一种具有音视频压缩的终端硬件实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910081602.7A CN109729361A (zh) 2019-01-28 2019-01-28 一种具有音视频压缩的终端硬件实现方法

Publications (1)

Publication Number Publication Date
CN109729361A true CN109729361A (zh) 2019-05-07

Family

ID=66301160

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910081602.7A Pending CN109729361A (zh) 2019-01-28 2019-01-28 一种具有音视频压缩的终端硬件实现方法

Country Status (1)

Country Link
CN (1) CN109729361A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020003578A1 (en) * 1999-12-20 2002-01-10 Osamu Koshiba Digital still camera system and method
CN1655616A (zh) * 2005-02-25 2005-08-17 吉林大学 音视频混合信号同步压缩中的音频嵌入视频及其提取方法
CN101500169A (zh) * 2009-03-10 2009-08-05 武汉大学 多路音视频压缩传输服务器
CN202210851U (zh) * 2011-02-12 2012-05-02 北京华夏电通科技股份有限公司 一种用于标清和高清音视频编解码的控制装置
CN104702953A (zh) * 2013-12-10 2015-06-10 西安广融电气有限公司 音视频采集压缩电路
CN204968007U (zh) * 2015-09-30 2016-01-13 深圳顺泰伟成科技有限公司 一种嵌入式与arm平台混合同步录音录像设备
CN205232365U (zh) * 2015-12-02 2016-05-11 安庆师范学院 一种嵌入式智能监控系统
CN107360380A (zh) * 2017-06-28 2017-11-17 中国科学院西安光学精密机械研究所 一种双码率压缩摄像装置及其上位机解码装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020003578A1 (en) * 1999-12-20 2002-01-10 Osamu Koshiba Digital still camera system and method
CN1655616A (zh) * 2005-02-25 2005-08-17 吉林大学 音视频混合信号同步压缩中的音频嵌入视频及其提取方法
CN101500169A (zh) * 2009-03-10 2009-08-05 武汉大学 多路音视频压缩传输服务器
CN202210851U (zh) * 2011-02-12 2012-05-02 北京华夏电通科技股份有限公司 一种用于标清和高清音视频编解码的控制装置
CN104702953A (zh) * 2013-12-10 2015-06-10 西安广融电气有限公司 音视频采集压缩电路
CN204968007U (zh) * 2015-09-30 2016-01-13 深圳顺泰伟成科技有限公司 一种嵌入式与arm平台混合同步录音录像设备
CN205232365U (zh) * 2015-12-02 2016-05-11 安庆师范学院 一种嵌入式智能监控系统
CN107360380A (zh) * 2017-06-28 2017-11-17 中国科学院西安光学精密机械研究所 一种双码率压缩摄像装置及其上位机解码装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孟海燕: "DM368 视频前端信号采集详解", 《TI 通用数字信号处理系统技术支持》 *

Similar Documents

Publication Publication Date Title
WO2021139114A1 (zh) 一种基于反馈优化的人机视觉编码方法和装置
CN105208342B (zh) 一种双路视频压缩存储及网络切换传输电路
CN103248797A (zh) 一种基于fpga的视频分辨率增强方法及模块
TW201034465A (en) Image compression method and related apparatus thereof
CN102075758A (zh) 基于soc的mjpeg视频编解码系统及其方法
CN103596010A (zh) 基于字典学习的压缩感知视频编解码系统
TWI590653B (zh) 影像訊框處理方法
CN106412588B (zh) 影像帧处理方法
CN109729361A (zh) 一种具有音视频压缩的终端硬件实现方法
CN101277436B (zh) 多串流式网络摄影机控制系统及其控制方法
CN104822048B (zh) 基于达芬奇技术的多格式码流显示和存储装置
CN202679478U (zh) 数字图像采集与处理平台
CN104063839A (zh) 一种加速图像合成的方法及系统
Okada et al. A single chip motion JPEG codec LSI
CN105306941B (zh) 一种视频编码方法
CN101064828A (zh) 基于人像识别技术的嵌入式网络监控系统
CN106454279A (zh) 一种嵌入式视频监控系统
CN202077148U (zh) 基于soc的mjpeg视频编解码系统
Min et al. A real-time JPEG encoder for 1.3 mega pixel CMOS image sensor SoC
Lu et al. Embedded video monitoring system on ARM and Linux
CN109982089A (zh) 一种编码系统
TW201007620A (en) Image data compressing system and method thereof
CN109982001A (zh) 一种合成系统
CN103414898A (zh) 一种高分辨率视频采集方法及系统
CN109981998A (zh) 一种控制系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 603, building 5, No.1, Chaoqian Road, science and Technology Park, Changping District, Beijing

Applicant after: Beijing Jingpin special decoration technology Co., Ltd

Address before: 6 / F, building 5, hongchuang science and Technology Park, No. a, Chaoqian Road, Changping District, Beijing

Applicant before: BEIJING JINGPINTEZHUANG SCIENCE AND TECHNOLOGY Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190507