CN104053014A - 一种基于移动终端的直播系统、方法和移动终端 - Google Patents

一种基于移动终端的直播系统、方法和移动终端 Download PDF

Info

Publication number
CN104053014A
CN104053014A CN201310080131.0A CN201310080131A CN104053014A CN 104053014 A CN104053014 A CN 104053014A CN 201310080131 A CN201310080131 A CN 201310080131A CN 104053014 A CN104053014 A CN 104053014A
Authority
CN
China
Prior art keywords
compression
signal
mobile terminal
data flow
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310080131.0A
Other languages
English (en)
Other versions
CN104053014B (zh
Inventor
赖晶
张志东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Beijing Co Ltd
Original Assignee
Tencent Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Beijing Co Ltd filed Critical Tencent Technology Beijing Co Ltd
Priority to CN201310080131.0A priority Critical patent/CN104053014B/zh
Priority to PCT/CN2014/073277 priority patent/WO2014139423A1/en
Publication of CN104053014A publication Critical patent/CN104053014A/zh
Priority to US14/851,635 priority patent/US9584845B2/en
Application granted granted Critical
Publication of CN104053014B publication Critical patent/CN104053014B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/90—Services for handling of emergency or hazardous situations, e.g. earthquake and tsunami warning systems [ETWS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Public Health (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephone Function (AREA)

Abstract

本申请公开了一种基于移动终端的直播系统、方法和移动终端。该系统包括：移动终端采集视频信号和音频信号，压缩音频信号和视频信号，其中，移动终端采用视频压缩芯片压缩视频信号；移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器；直播服务器将所述能够直播的数据流分发给直播终端。应用本发明能够降低信息直播的成本。

Description

一种基于移动终端的直播系统、方法和移动终端
技术领域
本申请涉及通信技术领域，尤其涉及一种基于移动终端的直播系统、方法和移动终端。
背景技术
目前的直播系统通常是基于电视或网络的直播系统。这种基于电视或网络的直播系统通常需要专业的摄像机和大型的演播车进行音视频信号采集，并采用专用的网络或者卫星传输线路，将采集的音视频信号发布到电视系统或网络系统上。
可见，目前这种基于电视或网络的直播系统，需要消耗大量的人力物力，成本较高；而且，由于需要在事件现场安排专业的摄像机和大型演播车，因此应对突发事件的实时性较差。
发明内容
有鉴于此，本申请提供了一种基于移动终端的直播系统、方法和移动终端，能够降低信息直播的成本。
一种基于移动终端的直播系统，该系统包括：
移动终端采集视频信号和音频信号，压缩音频信号和视频信号；
移动终端将压缩后的视频信号和视频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器；
直播服务器将所述能够直播的数据流分发给直播终端。
一种基于移动终端的直播方法，该方法包括：
移动终端采集视频信号和音频信号，压缩音频信号和视频信号；
移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器，以便直播服务器将所述能够直播的数据流发给终端用户。
一种移动终端，该移动终端包括第一采集模块、第二采集模块、第一压缩模块、第二压缩模块、打包模块和发送模块；
所述第一采集模块，用于采集视频信号；
所述第二采集模块，用于采集音频信号；
所述第一压缩模块，用于压缩所述视频信号；
所述第二压缩模块，用于压缩所述音频信号；
所述打包模块，用于将所述第一压缩模块压缩后的视频信号和所述第二压缩模块压缩后的音频信号打包成能够直播的数据流；
所述发送模块，用于将所述能够直播的数据流发给直播服务器。
可见，本发明的技术方案通过由移动终端采集视频信号和音频信号，压缩视频信号和音频信号，移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器，然后由直播服务器将所述能够直播的数据流分发给直播终端，使得基于移动终端就能够实现直播，而不需要专业的摄像机和大型演播车，因此成本较低，并且由于移动终端携带方便、分布广泛，因此应对突发事件的实时性也较强。
除了上述优点以外，本发明还具有下面的优点：
移动终端通过将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器，使得直播服务器不需要对移动终端发来的数据流进行处理即可将该数据流分发给直播终端，因此降低了直播服务器的负荷，并且也降低了直播的时延，提高了直播的实时性。
附图说明
图1是本发明提供的基于移动终端的直播系统的组成示意图。
图2是本发明提供的移动终端结构图。
具体实施方式
图1是本发明提供的基于移动终端的直播系统的组成示意图。
如图1所示，该系统包括移动终端101和直播服务器102。
移动终端101采集视频信号和音频信号，压缩视频信号和音频信号。
其中，移动终端101具体可以启动摄像头模块采集视频信号，启动麦克风模块采集音频信号。
移动终端101将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器102。
其中，移动终端101具体可以通过无线网络和因特网等通信网络将所述能够直播的数据流发给直播服务器102。
直播服务器102将所述能够直播的数据流分发给终端用户。
其中的终端用户包括智能手机等移动终端、以及电视机、个人电脑（PC）等。
本发明中，移动终端具体可以通过麦克风采集到未压缩的音频PCM数据。通过摄像头采集到未压缩的视频数据并经过移动终端视频压缩芯片的压缩，得到压缩后的视频帧（可以是h.264,h.263,mpeg4等格式）。未压缩的音频数据，经过压缩编码(mp3,aac等格式)，得到压缩后的音频帧。
移动终端将压缩后的音频帧，视频帧，并且可能包括字幕，地理位置等自定义的信息复用成FLV或者TS，RTP格式，甚至是某种自定义格式。复用完成后生成的媒体流将通过3G，WIFI，4G等网络传输到直播服务器。
其中，直播服务器在接收到移动终端发送的数据后，可以将数据直接通过内容分发（CDN）网络发送给终端用户。也可以将其存储，保存成特定格式的文件，例如FLV文件，MP4文件等等，在以后的点播或者其他场景中，将所述能够直播的数据流发给终端用户。
其中，移动终端101将压缩后的视频信号和音频信号打包成能够直播的数据流具体可以包括：移动终端101将压缩后的视频信号和音频信号打包成FLV格式的数据流。由于FLV格式的数据流的通用性较强，因此直播服务器102和CDN网络不需要对该FLV格式的数据流做任何处理即可分发给直播终端，能够减轻直播服务器102和CDN网络的负荷，增强直播实时性。并且，直播终端也不需要另外安装插件，即可播该FLV格式的数据流。
其中，移动终端101采用视频压缩芯片压缩视频信号时，具体可以将视频信号压缩为H.264格式的数据流或者动态图像专家组（MPEG4）格式的数据流，以保证压缩后的数据流的视频质量。
移动终端101在压缩音频信号时，可以采用音频压缩芯片压缩音频信号、即进行硬压缩，也可以采用CPU压缩音频信号、即进行软压缩。当采用软压缩时，移动终端101中包括软压缩模块，其中存储有执行软压缩的指令，移动终端101的CPU通过执行软压缩模块中的指令对音频信号进行压缩。移动终端101具体可以将音频信号压缩为ADPCM格式或MP3格式的数据流。
移动终端101在压缩视频信号时，可以采用视频压缩芯片压缩视频信号，也可以采用软压缩的方式压缩视频信号，优选地，移动终端101采用视频压缩芯片压缩视频信号，一方面可以节省移动终端的耗电量，另一方面也能够节省移动终端的中央处理器（CPU）资源、提高视频信号的压缩速度。
移动终端101将压缩后的视频信号和音频信号打包成能够直播的数据流包括：移动终端101采用CPU将压缩后的视频信号和音频信号打包成能够直播的数据流。具体地，移动终端101中包括打包模块，该打包模块中存储有执行打包操作的指令，移动终端101的CPU通过执行打包模块中的指令对压缩后的视频信号和音频信号打包成能够直播的数据流。其中所述能够直播的数据流实现了音频信号和视频信号的同步。
下面对移动终端101压缩音频信号和视频信号，进而将压缩后的音频信号和视频信号打包成能够直播的数据流进行进一步地详细说明：
其中，能够直播的数据流格式有很多种类，本发明中优选地采用FLV格式，但也可以采用其他格式，例如RTP，TS或者自定义的格式等等。本发明之所以采用FLV格式是因为FLV格式在PC端能够直接播放（通过flash播放器），不需要在传输或者接收端做额外的格式转换处理。
下面以打包成FLV格式的数据流为例，对移动终端将压缩后的音频信号和视频信号打包成能够直播的数据流的具体过程进行示例性说明，该过程具体可以包括：
将采集到的音频裸数据，即音频PCM数据，经过压缩生成音频帧。本发明的音频帧优选采用软件压缩方式得到，采集得到音频PCM数据后，通过音频压缩编码，得到压缩后的音频数据。采用软件压缩音频帧可以更灵活的控制压缩音频的格式，例如压缩成mp3、mp2、aac等格式，并且得到更高的音频压缩率。也可以采用硬件方式压缩音频信号，但由于音频编码芯片支持的压缩格式则较为有限，很多硬件都不支持MP3，aac压缩，因此，优选采用软件压缩方式压缩音频信号得到音频帧。
本发明中，优选地，通过移动终端的视频压缩芯片压缩得到视频帧。本发明中，优选地采用的h.264格式压缩得到视频帧，也可以采用h.264、mpeg4等压缩格式得到视频帧。采用移动终端压缩音频帧和视频帧以后，还要添加时间戳（Present time stamp，PTS），然后通过FLV复用器，生成FLV格式的音视频复合流。
如果不采用移动终端视频压缩芯片压缩视频帧，而是采用软件压缩的方式进行视频数据压缩，也是可以的。也包含在本申请保护的范围内。但是由于软件压缩比硬件压缩更耗电，性能更低，无法编码高分辨率的视频，因此，本发明中，优选地采用视频压缩芯片压缩得到视频帧。
在将音频帧和视频帧进行复用打包的时候，需要为音频帧和视频帧分别加上时间戳，用于音视频同步。其中，音频数据的PTS是根据音频数据采集的时间确定，视频数据PTS是根据视频数据采集的时间点确定。例如，如果10时11分05秒100毫秒，采集到一帧音频数据，那么这帧音频数据的PTS就是10时11分05秒100毫秒。如果10时11分05秒120毫秒采集到一帧视频数据，这帧视频数据的PTS就是10时11分05秒120毫秒。这样就能确保在播放的时候，音视频是同步的。
如果不是将音视频数据打包成能够FLV格式的数据流，而是将音频视频数据打包成诸如TS，RTP等其他流媒体格式的数据流，则也可以采用类似的打包流程，此处不赘述。
图2是本发明提供的移动终端结构图。
如图2所示，该移动终端包括第一采集模块201、第二采集模块202、第一压缩模块203、第二压缩模块204、打包模块205和发送模块206。
第一采集模块201，用于采集视频信号。
第二采集模块202，用于采集音频信号。
第一压缩模块203，用于压缩所述视频信号。
第二压缩模块204，用于压缩所述音频信号。
其中，第一压缩模块203，用于采用视频压缩芯片压缩所述视频信号；和/或，第二压缩模块204，用于采用移动终端的中央处理器CPU压缩音频信号。
第一采集模块201，还用于记录视频信号的采集时间。
第二采集模块202，还用于记录音频信号的采集时间。
第一压缩模块203，用于压缩视频信号得到视频帧，根据视频信号的采集时间为压缩得到的视频帧添加时间戳。
第二压缩模块204，用于压缩音频信号得到音频帧，根据音频信号的采集时间为压缩得到的音频帧添加时间戳。
打包模块205，用于根据音频帧的时间戳信息和视频帧的时间戳信息，将同步的音频帧和视频帧打包成能够直播的数据流，从而使得所述能够直播的数据流在播放时能够实现音频帧和视频帧的同步。
打包模块205，用于将第一压缩模块203压缩后的视频信号和第二压缩模块204压缩后的音频信号打包成能够直播的数据流。
发送模块206，用于将所述能够直播的数据流发给直播服务器。
其中，打包模块205，可以用于将第一压缩模块203压缩后的视频信号和第二压缩模块204压缩后的音频信号打包成FLV格式的数据流。
其中，第一压缩模块203，可以用于采用视频压缩芯片将视频信号压缩为H.264格式的数据流或者动态图像专家组MPEG4格式的数据流。
可见，本发明提供的技术方案中，使用智能手机等移动终端采集音频信号和视频信号并压缩，其中采用视频压缩芯片对视频信号进行压缩，将压缩后的视频信号和音频信号打包成能够直播的数据流，将能够直播的数据流通过3G、4G或者WIFI等无线网络上传到网络侧，进而通过因特网发给直播服务器，直播服务器将所述能够直播的数据流通过CDN网络分发给直播终端，使得直播终端侧的用户能够实时收看音视频节目。可见，通过本发明不需要专业的摄像机和大型演播车以及专门的传输线路，即可实现直播，能够降低直播的成本。
并且，由于目前智能手机等移动终端以及WIFI、3G等无线网络越来越普及，因此，采用本发明也能够增加信息来源，提高直播的实时性。
另外，由于本发明采用视频压缩芯片进行视频信号压缩，因此能够提高视频压缩信号的压缩速度，并节省移动终端的耗电量和CPU资源。
本发明不仅采集了视频信号，还采集了音频信号，并且将压缩后的视频信号和音频信号打包成能够直播的数据流时，还实现了视频信号和音频信号的同步，因此能够取得较好的直播效果。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (14)

1.一种基于移动终端的直播系统，其特征在于，该系统包括：
移动终端采集视频信号和音频信号，压缩音频信号和视频信号；
移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器；
直播服务器将所述能够直播的数据流发给终端用户。
2.根据权利要求1所述的直播系统，其特征在于，所述压缩音频信号和视频信号包括：
采用音频压缩芯片压缩音频信号，或者，采用移动终端的中央处理器CPU压缩音频信号；移动终端采用视频压缩芯片压缩视频信号，或者，移动终端采用软件压缩的方式压缩视频信号。
3.根据权利要求1所述的直播系统，其特征在于，所述移动终端采集视频信号和音频信号，压缩音频信号和视频信号，移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流包括：
移动终端采集视频信号和音频信号，并记录视频信号的采集时间和音频信号的采集时间，压缩音频信号得到音频帧，压缩视频信号得到视频帧，根据音频信号的采集时间为压缩得到的音频帧添加时间戳，根据视频信号的采集时间为压缩得到的视频帧添加时间戳，根据音频帧的时间戳信息和视频帧的时间戳信息，将同步的音频帧和视频帧打包成能够直播的数据流，从而使得所述能够直播的数据流在播放时能够实现音频帧和视频帧的同步。
4.根据权利要求1所述的直播系统，其特征在于，移动终端采集视频信号和音频信号包括：
移动终端启动摄像头模块采集视频信号，移动终端启动麦克风模块采集音频信号；
和/或，所述打包成能够直播的数据流包括：
移动终端采用中央处理器CPU将压缩后的视频信号和音频信号打包成能够直播的数据流。
5.根据权利要求1所述的直播系统，其特征在于，所述能够直播的数据流包括FLV格式的数据流；
和/或，所述压缩视频信号包括：
将视频信号压缩为H.264格式的数据流或者动态图像专家组MPEG4格式的数据流。
6.根据权利要求1所述的直播系统，其特征在于，将所述能够直播的数据流发给直播服务器包括：
移动终端通过无线网络和因特网将所述能够直播的数据流发给直播服务器。
7.一种基于移动终端的直播方法，其特征在于，该方法包括：
移动终端采集视频信号和音频信号，压缩音频信号和视频信号；
移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流，将所述能够直播的数据流发给直播服务器，以便直播服务器将所述能够直播的数据流发给终端用户。
8.根据权利要求7所述的直播方法，其特征在于，所述压缩音频信号和视频信号包括：
采用音频压缩芯片压缩音频信号，或者，采用移动终端的中央处理器CPU压缩音频信号；移动终端采用视频压缩芯片压缩视频信号，或者，移动终端采用软件压缩的方式压缩视频信号。
9.根据权利要求7所述的直播方法，其特征在于，所述移动终端采集视频信号和音频信号，压缩音频信号和视频信号，移动终端将压缩后的视频信号和音频信号打包成能够直播的数据流包括：
移动终端采集视频信号和音频信号，并记录视频信号的采集时间和音频信号的采集时间，压缩音频信号得到音频帧，压缩视频信号得到视频帧，根据音频信号的采集时间为压缩得到的音频帧添加时间戳，根据视频信号的采集时间为压缩得到的视频帧添加时间戳，根据音频帧的时间戳信息和视频帧的时间戳信息，将同步的音频帧和视频帧打包成能够直播的数据流，从而使得所述能够直播的数据流在播放时能够实现音频帧和视频帧的同步。
10.一种移动终端，其特征在于，该移动终端包括第一采集模块、第二采集模块、第一压缩模块、第二压缩模块、打包模块和发送模块；
所述第一采集模块，用于采集视频信号；
所述第二采集模块，用于采集音频信号；
所述第一压缩模块，用于压缩所述视频信号；
所述第二压缩模块，用于压缩所述音频信号；
所述打包模块，用于将所述第一压缩模块压缩后的视频信号和所述第二压缩模块压缩后的音频信号打包成能够直播的数据流；
所述发送模块，用于将所述能够直播的数据流发给直播服务器。
11.根据权利要求10所述的移动终端，其特征在于，
所述第一压缩模块，用于采用视频压缩芯片压缩所述视频信号；和/或，
所述第二压缩模块，用于采用移动终端的中央处理器CPU压缩音频信号。
12.根据权利要求10所述的移动终端，其特征在于，
所述第一采集模块，还用于记录视频信号的采集时间；
所述第二采集模块，还用于记录音频信号的采集时间；
所述第一压缩模块，用于压缩视频信号得到视频帧，根据视频信号的采集时间为压缩得到的视频帧添加时间戳；
所述第二压缩模块，用于压缩音频信号得到音频帧，根据音频信号的采集时间为压缩得到的音频帧添加时间戳；
所述打包模块，用于根据音频帧的时间戳信息和视频帧的时间戳信息，将同步的音频帧和视频帧打包成能够直播的数据流，从而使得所述能够直播的数据流在播放时能够实现音频帧和视频帧的同步。
13.根据权利要求10所述的移动终端，其特征在于，
所述打包模块，用于将所述第一压缩模块压缩后的视频信号和所述第二压缩模块压缩后的音频信号打包成FLV格式的数据流。
14.根据权利要求10所述的移动终端，其特征在于，
所述第一压缩模块，用于采用视频压缩芯片将视频信号压缩为H.264格式的数据流或者动态图像专家组MPEG4格式的数据流。
CN201310080131.0A 2013-03-13 2013-03-13 一种基于移动终端的直播系统、方法和移动终端 Active CN104053014B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201310080131.0A CN104053014B (zh) 2013-03-13 2013-03-13 一种基于移动终端的直播系统、方法和移动终端
PCT/CN2014/073277 WO2014139423A1 (en) 2013-03-13 2014-03-12 Live system, method based on mobile terminal and mobile terminal
US14/851,635 US9584845B2 (en) 2013-03-13 2015-09-11 Live system, method based on mobile terminal and mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310080131.0A CN104053014B (zh) 2013-03-13 2013-03-13 一种基于移动终端的直播系统、方法和移动终端

Publications (2)

Publication Number Publication Date
CN104053014A true CN104053014A (zh) 2014-09-17
CN104053014B CN104053014B (zh) 2020-05-29

Family

ID=51505323

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310080131.0A Active CN104053014B (zh) 2013-03-13 2013-03-13 一种基于移动终端的直播系统、方法和移动终端

Country Status (3)

Country Link
US (1) US9584845B2 (zh)
CN (1) CN104053014B (zh)
WO (1) WO2014139423A1 (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104270684A (zh) * 2014-09-24 2015-01-07 北京中科大洋科技发展股份有限公司 一种面向实时应用的视音频数据网络传输系统和方法
CN104394420A (zh) * 2014-11-28 2015-03-04 广州华多网络科技有限公司 一种视频处理装置、方法和终端设备
CN105743897A (zh) * 2016-02-01 2016-07-06 上海龙游网络科技有限公司 互联网音频实时同步传输系统及方法
CN105847957A (zh) * 2016-05-27 2016-08-10 天脉聚源(北京)传媒科技有限公司 一种基于移动终端的现场直播方法及装置
CN105959717A (zh) * 2016-05-27 2016-09-21 天脉聚源(北京)传媒科技有限公司 一种基于移动终端的现场直播方法及装置
CN106358050A (zh) * 2016-08-30 2017-01-25 华南理工大学广州学院 基于安卓的音频视频流推送方法及装置、播放方法及装置
WO2017020663A1 (zh) * 2015-07-31 2017-02-09 腾讯科技（深圳）有限公司 弹幕视频直播方法、装置、视频源设备及网络接入设备
CN106941613A (zh) * 2017-04-14 2017-07-11 武汉鲨鱼网络直播技术有限公司 一种音视频合流压制和推送系统及方法
CN107027046A (zh) * 2017-04-13 2017-08-08 广州华多网络科技有限公司 辅助直播的音视频处理方法及装置
CN107027050A (zh) * 2017-04-13 2017-08-08 广州华多网络科技有限公司 辅助直播的音视频处理方法及装置
CN107995498A (zh) * 2016-10-26 2018-05-04 北京视联动力国际信息技术有限公司 一种终端的直播视频流切换方法和装置
CN108322811A (zh) * 2018-02-26 2018-07-24 宝鸡文理学院 一种钢琴视频教学中的同步方法及系统
CN109348247A (zh) * 2018-11-23 2019-02-15 广州酷狗计算机科技有限公司 确定音视频播放时间戳的方法、装置及存储介质
CN109413371A (zh) * 2017-08-17 2019-03-01 成都鼎桥通信技术有限公司 视频帧率计算方法及装置
CN109600649A (zh) * 2018-08-01 2019-04-09 北京微播视界科技有限公司 用于处理数据的方法和装置
WO2019071678A1 (zh) * 2017-10-09 2019-04-18 武汉斗鱼网络科技有限公司 一种直播的方法和装置
WO2019071679A1 (zh) * 2017-10-09 2019-04-18 武汉斗鱼网络科技有限公司 一种直播的方法和装置
CN109660816A (zh) * 2018-11-16 2019-04-19 视联动力信息技术股份有限公司 信息处理方法和装置
CN112333466A (zh) * 2020-11-02 2021-02-05 创盛视联数码科技（北京）有限公司 视频处理方法、装置及系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3440839A4 (en) 2016-04-06 2019-08-28 Charles R. Tudor VIDEO BROADCAST VIA SELECTED VIDEO HOSTS
CN105959719A (zh) * 2016-06-27 2016-09-21 徐文波 一种视频直播方法、装置和系统
CN106254311B (zh) * 2016-07-15 2020-12-08 腾讯科技（深圳）有限公司 直播方法和装置、直播数据流展示方法和装置
CN106210757A (zh) * 2016-07-28 2016-12-07 北京小米移动软件有限公司 直播方法、直播装置及直播系统
CN106331748A (zh) * 2016-08-18 2017-01-11 北京小米移动软件有限公司 直播方法、装置及服务器
CN106303663B (zh) * 2016-09-27 2019-12-06 北京小米移动软件有限公司 直播处理方法和装置、直播服务器
CN113497792B (zh) * 2020-04-02 2022-12-23 京东方科技集团股份有限公司 音视频通信方法、终端、服务器、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101184195A (zh) * 2007-12-25 2008-05-21 腾讯科技（深圳）有限公司 音/视频直播系统和直播方法
CN101674476A (zh) * 2009-09-18 2010-03-17 北京协进科技发展有限公司 一种无线直播方法、装置和系统
CN101945096A (zh) * 2010-07-13 2011-01-12 上海未来宽带技术及应用工程研究中心有限公司 手机面向机顶盒和pc进行视频直播的系统及其工作方法
US20110306325A1 (en) * 2010-06-10 2011-12-15 Rajesh Gutta Streaming video/audio from mobile phone to any device
CN102447893A (zh) * 2010-09-30 2012-05-09 北京沃安科技有限公司 手机视频实时采集和发布的方法及系统
CN102811368A (zh) * 2012-07-16 2012-12-05 北京邮电大学 一种移动视频直播系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101340556B (zh) * 2007-07-05 2013-02-20 株式会社Ntt都科摩 现实世界直播系统及直播方法
US8483654B2 (en) * 2011-06-29 2013-07-09 Zap Group Llc System and method for reporting and tracking incidents with a mobile device
US9286937B2 (en) * 2012-08-22 2016-03-15 mitú Inc. Method and apparatus for dynamic media streaming

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101184195A (zh) * 2007-12-25 2008-05-21 腾讯科技（深圳）有限公司 音/视频直播系统和直播方法
CN101674476A (zh) * 2009-09-18 2010-03-17 北京协进科技发展有限公司 一种无线直播方法、装置和系统
US20110306325A1 (en) * 2010-06-10 2011-12-15 Rajesh Gutta Streaming video/audio from mobile phone to any device
CN101945096A (zh) * 2010-07-13 2011-01-12 上海未来宽带技术及应用工程研究中心有限公司 手机面向机顶盒和pc进行视频直播的系统及其工作方法
CN102447893A (zh) * 2010-09-30 2012-05-09 北京沃安科技有限公司 手机视频实时采集和发布的方法及系统
CN102811368A (zh) * 2012-07-16 2012-12-05 北京邮电大学 一种移动视频直播系统

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104270684A (zh) * 2014-09-24 2015-01-07 北京中科大洋科技发展股份有限公司 一种面向实时应用的视音频数据网络传输系统和方法
CN104270684B (zh) * 2014-09-24 2018-05-11 北京中科大洋科技发展股份有限公司 一种面向实时应用的视音频数据网络传输系统和方法
CN104394420A (zh) * 2014-11-28 2015-03-04 广州华多网络科技有限公司 一种视频处理装置、方法和终端设备
WO2016082285A1 (zh) * 2014-11-28 2016-06-02 广州华多网络科技有限公司 一种视频处理装置、方法和终端设备
CN104394420B (zh) * 2014-11-28 2017-09-12 广州华多网络科技有限公司 一种视频处理装置、方法和终端设备
WO2017020663A1 (zh) * 2015-07-31 2017-02-09 腾讯科技（深圳）有限公司 弹幕视频直播方法、装置、视频源设备及网络接入设备
CN106412681A (zh) * 2015-07-31 2017-02-15 腾讯科技（深圳）有限公司 弹幕视频直播方法及装置
CN106412681B (zh) * 2015-07-31 2019-12-24 腾讯科技（深圳）有限公司 弹幕视频直播方法及装置
US10645445B2 (en) 2015-07-31 2020-05-05 Tencent Technology (Shenzhen) Company Limited Barrage video live broadcast method and apparatus, video source device, and network access device
CN105743897A (zh) * 2016-02-01 2016-07-06 上海龙游网络科技有限公司 互联网音频实时同步传输系统及方法
CN105959717A (zh) * 2016-05-27 2016-09-21 天脉聚源(北京)传媒科技有限公司 一种基于移动终端的现场直播方法及装置
CN105847957A (zh) * 2016-05-27 2016-08-10 天脉聚源(北京)传媒科技有限公司 一种基于移动终端的现场直播方法及装置
CN106358050A (zh) * 2016-08-30 2017-01-25 华南理工大学广州学院 基于安卓的音频视频流推送方法及装置、播放方法及装置
CN107995498A (zh) * 2016-10-26 2018-05-04 北京视联动力国际信息技术有限公司 一种终端的直播视频流切换方法和装置
CN107027046A (zh) * 2017-04-13 2017-08-08 广州华多网络科技有限公司 辅助直播的音视频处理方法及装置
CN107027050A (zh) * 2017-04-13 2017-08-08 广州华多网络科技有限公司 辅助直播的音视频处理方法及装置
CN107027046B (zh) * 2017-04-13 2020-03-10 广州华多网络科技有限公司 辅助直播的音视频处理方法及装置
CN106941613A (zh) * 2017-04-14 2017-07-11 武汉鲨鱼网络直播技术有限公司 一种音视频合流压制和推送系统及方法
CN109413371B (zh) * 2017-08-17 2021-08-03 成都鼎桥通信技术有限公司 视频帧率计算方法及装置
CN109413371A (zh) * 2017-08-17 2019-03-01 成都鼎桥通信技术有限公司 视频帧率计算方法及装置
WO2019071678A1 (zh) * 2017-10-09 2019-04-18 武汉斗鱼网络科技有限公司 一种直播的方法和装置
WO2019071679A1 (zh) * 2017-10-09 2019-04-18 武汉斗鱼网络科技有限公司 一种直播的方法和装置
CN108322811A (zh) * 2018-02-26 2018-07-24 宝鸡文理学院 一种钢琴视频教学中的同步方法及系统
CN109600649A (zh) * 2018-08-01 2019-04-09 北京微播视界科技有限公司 用于处理数据的方法和装置
CN109660816A (zh) * 2018-11-16 2019-04-19 视联动力信息技术股份有限公司 信息处理方法和装置
CN109660816B (zh) * 2018-11-16 2021-09-28 视联动力信息技术股份有限公司 信息处理方法和装置
CN109348247A (zh) * 2018-11-23 2019-02-15 广州酷狗计算机科技有限公司 确定音视频播放时间戳的方法、装置及存储介质
CN112333466A (zh) * 2020-11-02 2021-02-05 创盛视联数码科技（北京）有限公司 视频处理方法、装置及系统
CN112333466B (zh) * 2020-11-02 2023-05-09 创盛视联数码科技（北京）有限公司 视频处理方法、装置及系统

Also Published As

Publication number Publication date
CN104053014B (zh) 2020-05-29
US20160007067A1 (en) 2016-01-07
WO2014139423A1 (en) 2014-09-18
US9584845B2 (en) 2017-02-28

Similar Documents

Publication Publication Date Title
CN104053014A (zh) 一种基于移动终端的直播系统、方法和移动终端
CN102111674B (zh) 一种移动终端播放在线视频的系统、方法及移动终端
CN103024601B (zh) 信息采集系统
CN101945096B (zh) 手机面向机顶盒和pc进行视频直播的系统及其工作方法
CN101184195B (zh) 音/视频直播系统和直播方法
CN107846633A (zh) 一种直播方法及系统
CN102263935B (zh) 一种基于td-scdma网络的视频监控传输装置
CN105025327A (zh) 一种移动终端现场直播的方法及系统
CN103442071A (zh) 一种手机屏幕内容的实时分享方法
WO2014117660A1 (zh) 视频短信的发送、接收方法及其装置和手持电子设备
CN101394585A (zh) 一种移动流媒体直播业务中的准实时流系统
CN102811373A (zh) 移动终端向互联网以及移动互联网进行视频直播的方法
CN101938606A (zh) 多媒体数据推送方法、系统和设备
CN102196319A (zh) 一种流媒体直播业务系统及实现方法
CN106375859B (zh) 一种媒体处理方法、装置及终端
CN109040818B (zh) 直播时的音视频同步方法、存储介质、电子设备及系统
CN105554162A (zh) 将移动端视频/数据远程同步到智能电视主场景的方法
CN103826084A (zh) 一种音频编码方法
CN203387627U (zh) 移动流媒体直播点播系统
CN104581085A (zh) 一种双向实时监控的方法
CN200990664Y (zh) 一种可实现远程视频对话功能的电视机
CN101389017B (zh) 一种移动流媒体直播业务中保存媒体文件的方法
JP3844485B2 (ja) 携帯電話向けインターネットライブ放送システム、携帯電話向けインターネットライブ放送方法、ストリーミングデータ作成配信プログラム及び記録媒体
CN201663666U (zh) 网络视频装置
CN102905174A (zh) 一种传输流的共享方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant