CN1256047A - Mpeg－4系统一致的体系结构 - Google Patents

Mpeg－4系统一致的体系结构 Download PDF

Info

Publication number
CN1256047A
CN1256047A CN99800066A CN99800066A CN1256047A CN 1256047 A CN1256047 A CN 1256047A CN 99800066 A CN99800066 A CN 99800066A CN 99800066 A CN99800066 A CN 99800066A CN 1256047 A CN1256047 A CN 1256047A
Authority
CN
China
Prior art keywords
mpeg
architecture
buffer
data
operating system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN99800066A
Other languages
English (en)
Other versions
CN1150768C (zh
Inventor
P·根特里克
L·赫尔曼恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pendragon wireless limited liability company
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1256047A publication Critical patent/CN1256047A/zh
Application granted granted Critical
Publication of CN1150768C publication Critical patent/CN1150768C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Communication Control (AREA)

Abstract

本发明涉及一种MPEG－4系统一致的体系结构,该体系结构被分成多个关键模块,所述关键模块具有的特定的任务由一个多线程操作系统管理。该MPEG－4多路分解器被分成三级进程。每一进程之间相互独立,但由操作系统以控制缓冲器的信号量的形式提供同步原语,以将缓冲器的规模保持得尽可能地小。该发明可应用于所有种类的工业MPEG－4设备(桌面设备,机顶盒)。

Description

MPEG-4系统一致的体系结构
发明领域
本发明涉及一种MPEG-4系统一致的体系结构。本发明具有涉及该MPEG-4标准的用于对MPEG-4多媒体数据进行流水化处理的应用。
发明背景
该MPEG-4标准的系统部分定义了访问MPEG多媒体数据(视频，音频，2D和3D图形)的体系结构。在文件“MPEG-4系统”(ISO/IECJTC1/SC29/WG11 N 1901，1997年11月21日)中对MPEG-4系统进行了更精确的描述。这一体系结构是复杂的，因为它提供了对来自大量数据源(网络，广播，存储器…)的任意数量的数据流(诸如音频和视频数据流)的访问。具体地，该标准对于音频和视频的同步规定了一种机制，允许通过时间标记将时序信息引入所述不同的数据流中。
大多数涉及的潜在的产品将使用在比特率方面具有任意类型的稳定性的网络技术(例如，移动网络，因特网)。在这些网络中，比特率是变化的(对于因特网，取决于一天中的时间；对于移动网络，取决于离最近的基站的距离)。由于一个MPEG-4一致的体系结构不得不应付大量的、分别不同具体组织的存储缓冲器，其拓扑结构不得不要处理所谓的结构(该结构可以是固定的，但在该期间通常是动态进化的)，一种优化的体系结构的实现必须保证一种适当的缓冲器管理。在这一上下文中要解决的问题涉及在所述体系结构的不同模块之间信息的交换，以避免以下缺点：
-“流水线”效果的中断，比如在数据流中可导致失去同步的丢失(对于视频流，音频流的中断或音频信号的失去同步终端用户是可察觉的，并且是因此不可接受的)；
-对于比如视频会议的交互式应用可能太长的处理时间；
-如果使用规模过大的缓冲器，造成的存储器资源的浪费。
很难在这些问题的解决方案之间实现折衷，因为减少网络的这种效果的唯一方式是增加缓冲器的大小，而这又增加了延迟和处理的时间，如此等等。还有，在该体系结构实现之前的一个较早阶段预测缓冲器的大小似乎是不现实的，在以前的应用中就是这种情况(比如在TV广播领域中具有MPEG-2标准的例子)。
发明概述
因此本发明的一个目的是避免上述这些缺点。
为此，本发明涉及的一种体系结构，其特征在于：其被进一步分成多个关键模块，由一个多线程操作系统管理的一个具体任务被分配给所述体系结构的每一部件，以及根据由该多线程操作系统提供的特殊的同步原语优化对缓冲器管理的策略。
MPEG-4系统的实现要能够动态例示一个配置的不同部分，不管这一配置是非常简单的(比如由音频流和视频流组成的电影)，或非常复杂的(例如对于具有电讯会议的交互式多用户虚拟现实的应用)。根据本发明的技术方案，其根据具有一个多线程的操作系统的一个或多个微处理器对于MPEG-4系统的每一实现定义了一个通用的体系结构，这也是对这一问题的回答。所建议的体系结构使用在所有多线程环境中提供的基本原语，该体系结构确确实实是标准设计的，灵活的，动态的，可扩展的，以及易于实现和管理。还有，可以针对目标处理器对多线程操作系统进行优化，并且可以被构造成能有效地管理多个任务的同步。
附图的简要描述
现在参照下面的描述以及结合附图对本发明的这些以及其他特征进行描述，其中：
图1显示了(在所谓的Win32操作系统上)一个MPEG-4系统的缓冲器划分模型的一个实现；
图2显示了利用用来保持不同的线程的效率的信号量的控制管理。
本发明的描述
所提出的解决方案针对以下问题。首先，定义用于一个优化缓冲器管理的关键模块，其隐含着对MPEG-4系统的具体的普通的划分。这些模块的每一个然后作为一个任务实现，由一个多线程操作系统管理(为了以一种优化的方式管理该缓冲器的填充，要使用由该所述多线程操作系统提供的特定的同步原语)。最后，定义用于该缓冲器管理的策略。
为了定义该MPEG-4系统的关键模块，建议将所述多路分解器分成三个不同的级，以将一个特定的任务分配给该MPEG-4多路分解器的每一部分，如图1所示：TransMux，FlexMux，Elementary Stream(基本流)。也定义一个(音频，视频，…)译码器缓冲器，并且在图1中示出，以读取访问单元(AU)和产生可被播放的帧(图象，声音)，但是这一任务不是由该多路分解器执行的任务的一部分。
图1的方案作为例子实现在Win32操作系统(＝Windows 95)上，该操作系统提供多线程功能。将每一个进程分配给一个线程：
-一个TransMux线程(TMX)，用于读取盘DK上的数据或者在网络NW上的数据，以及存储N个FlexMux分组数据单元(＝FM-PDU)；
-一个FlexMux线程(FMX)，用于读取在一个FM-PDU缓冲器中的这些FM-PDU，存储N个访问单元层分组数据单元(＝AL-PDU)以及重构N个访问单元，FlexMux FMX和基本流ELS在该实现中被组织在一个单一的线程中。
-一个译码器线程(DEC)，用于利用该译码器的访问单元(AU)建立N个帧。
这些线程中的每一个彼此相互独立。如图1所示，将该缓冲器实现为没有任何固定长度的队列，即作为FIFO(先进先出)存储器(因此推荐控制这些缓冲器的状态以避免使得缓冲器过大或使得任务没有缓冲器可用)。
然而，这些任务必须使用所谓的同步原语相互监视，这是通过信号量(或计数器)而进行的，使得不同的线程具有较高的效率。由操作系统提供的这些信号量的每一个控制该多路分解器中的每个相应的缓冲器(FM-PDU，AL-PDU，AU)。对于每个译码器，也有一个控制该译码器缓冲器的信号量，以及在该AU缓冲器变得太大时通知该TransMux必须停止下来的另外一个信号量。
这些动作描述在图2中，图2示出了利用信号量的控制管理。步骤(1)和(2)对应于下列测试：(1)“如果N大于0，则工作”，以及(2)“如果N大于Max，则停止”。
根据该操作系统的同步功能，根据下列的缓冲器管理策略执行这一控制功能：
(a)在运行时由TransMux TMX进行读取在本地磁盘DK中的数据或者在网络NW上的数据，这是第一操作；
(b)该FlexMux FMX监视TransMux TMX；
(c)该基本流ELS监视FlexMux FMX；
(d)在AU出现在AU缓冲器中时该实时译码进程启动；
(e)该TransMux TMX的调节由控制该AU缓冲器不在临界状态的AU反馈信号量进行。
该缓冲器管理策略的原则是使该缓冲器的规模尽可能地小。在AL-PDU的数量足以重构一个AU时，就要立即进行这种重构。从而总是有用于译码的数据。
另外，一个重要之处是考虑所使用的TransMux的类型。可以区别两类TransMux：一种是较慢的(网络访问)，一种是快速的(磁盘访问)。磁盘的访问快速，并且在延迟方面是稳定的，采用这种访问，就不需要在不同的缓冲器中存储许多数据，因为不会出现丢失，并且该最大临界值可以相当低。相反，网络访问引入许多延迟(例如因特网)，因此在缓冲器中存储较多的数据以便不使该译码器处于等待状态是重要的。
然而在有多于一个译码器的情况下，必须指出的是只有在所有AU缓冲器已到达该临界最大值时才停止该TransMux，以便不使译码线程处于等待状态(因此假定该多路复用策略已经为该目的在发送侧进行了改造)。

Claims (3)

1.一种MPEG-4系统一致的体系结构，其特征在于：
其被进一步分成多个关键模块，由一个多线程操作系统管理的一个具体任务被分配给所述体系结构的每一部件，以及根据由该多线程操作系统提供的特殊的同步原语优化对缓冲器管理的策略。
2.根据权利要求1的体系结构，其特征在于该MPEG-4多路分解器被分成三级不同的进程：第一级是TransMux，其用于读取在一个本地磁盘上的数据或者在一个网络上的数据，并且按照分组数据单元存储该数据；第二级是FlexMux，其用于读取所述分组数据单元，以及存储访问单元层分组数据单元；以及第三级，用于重构访问单元。
3.根据权利要求2的体系结构，其特征在于每个进程彼此相互独立，为了彼此相互监视，通过控制每个缓冲器的信号量由所述操作系统提供同步原语，以使得该缓冲器的大小被保持得尽可能地小的。
CNB998000663A 1998-01-27 1999-01-14 Mpeg-4系统一致的体系结构 Expired - Fee Related CN1150768C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP98400160 1998-01-27
EP98400160.2 1998-01-27

Publications (2)

Publication Number Publication Date
CN1256047A true CN1256047A (zh) 2000-06-07
CN1150768C CN1150768C (zh) 2004-05-19

Family

ID=8235248

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB998000663A Expired - Fee Related CN1150768C (zh) 1998-01-27 1999-01-14 Mpeg-4系统一致的体系结构

Country Status (5)

Country Link
EP (1) EP0978199A2 (zh)
JP (1) JP2001518272A (zh)
KR (1) KR100639894B1 (zh)
CN (1) CN1150768C (zh)
WO (1) WO1999038329A2 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1147079C (zh) 1998-07-17 2004-04-21 皇家菲利浦电子有限公司 用于将编码数据解复用的设备
EP4234596A3 (en) 2018-09-17 2023-09-27 Chevron Phillips Chemical Company LP Light treatment of chromium catalysts and related catalyst preparation systems and polymerization processes

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5668599A (en) * 1996-03-19 1997-09-16 International Business Machines Corporation Memory management for an MPEG2 compliant decoder
GB9704027D0 (en) * 1997-02-26 1997-04-16 Discovision Ass Memory manager for mpeg decoder
EP0909091A1 (en) * 1997-10-07 1999-04-14 CANAL+ Société Anonyme Memory manager

Also Published As

Publication number Publication date
KR20010005738A (ko) 2001-01-15
KR100639894B1 (ko) 2006-10-31
EP0978199A2 (en) 2000-02-09
CN1150768C (zh) 2004-05-19
WO1999038329A2 (en) 1999-07-29
JP2001518272A (ja) 2001-10-09
WO1999038329A3 (en) 1999-09-30

Similar Documents

Publication Publication Date Title
CN1139254C (zh) 用于合成和显示mpeg-4视频节目的终端
US6584125B1 (en) Coding/decoding apparatus, coding/decoding system and multiplexed bit stream
US7852854B2 (en) Method and apparatus for time-multiplexed processing of multiple digital video programs
US7899088B2 (en) Apparatus and method for receiving multiple streams in a mobile broadcast system
US6564382B2 (en) Method for playing multimedia applications
US7929463B2 (en) Layered codec data distribution apparatus and method
EP1775955A2 (en) Control of a scene structure of multiple channels to be displayed on a mobile terminal
CN101631082A (zh) 用于数据包的动态通道映射与最优化调度的设备与方法
JP2002033771A (ja) メディアデータプロセッサ
CN109218763A (zh) 一种流媒体视频切换的方法及智能电视
Kalva et al. Implementing multiplexing, streaming, and server interaction for MPEG-4
CN1150768C (zh) Mpeg-4系统一致的体系结构
JP4391231B2 (ja) 複数のターミナルへのマルチメディア信号のブロードキャスト方法
CN1155249C (zh) 用于多媒体文件分配的文件服务器
Krunz et al. Efficient support for interactive scanning operations in MPEG-based video-on-demand systems
Li et al. An MPEG-4 based interactive multimedia system
Chalil et al. MPEG-4 based framework for game engines to handle virtual advertisements in game
CN114567789A (zh) 一种基于双缓冲队列和视频帧拥塞控制的视频直播方法
Kalva Object-Based Audio-Visual Services
Cheok et al. SMIL vs MPEG-4 BIFS
El Zarki et al. An interactive object based multimedia system for IP networks
Kim et al. ZEUS: Network Aware QoS Management for Immersive Environment.
KR20030004061A (ko) 기본 ｍｐｅｇ2 및 ｍｐｅｇ4 스트림들로부터 ｍｐｅｇ2전송 스트림을 발생시키기 위한 다층 멀티플렉싱
Apostolopoulos et al. Supporting interactive scanning operations in VOD systems
Cheok et al. DEPARTMENT OF ELECTRICAL ENGINEERING TECHNICAL REPORT

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: IPG ELECTRONICS 503 CO., LTD.

Free format text: FORMER OWNER: ROYAL PHILIPS ELECTRONICS CO., LTD.

Effective date: 20090828

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20090828

Address after: British Channel Islands

Patentee after: Koninkl Philips Electronics NV

Address before: Holland Ian Deho Finn

Patentee before: Koninklike Philips Electronics N. V.

ASS Succession or assignment of patent right

Owner name: PENDRAGON WIRELESS CO., LTD.

Free format text: FORMER OWNER: IPG PHOTONICS 503 CORP.

Effective date: 20130104

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130104

Address after: Washington State

Patentee after: Pendragon wireless limited liability company

Address before: British Channel Islands

Patentee before: Koninkl Philips Electronics NV

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040519

Termination date: 20150114

EXPY Termination of patent right or utility model