KR20000069539A - 데이터를 일정한 사이즈의 트랜스포트 패킷으로 인캡슐레이션하는 방법 - Google Patents
데이터를 일정한 사이즈의 트랜스포트 패킷으로 인캡슐레이션하는 방법 Download PDFInfo
- Publication number
- KR20000069539A KR20000069539A KR1019997005472A KR19997005472A KR20000069539A KR 20000069539 A KR20000069539 A KR 20000069539A KR 1019997005472 A KR1019997005472 A KR 1019997005472A KR 19997005472 A KR19997005472 A KR 19997005472A KR 20000069539 A KR20000069539 A KR 20000069539A
- Authority
- KR
- South Korea
- Prior art keywords
- data
- size
- packet
- network
- mpeg
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000005538 encapsulation Methods 0.000 title claims abstract description 9
- 230000007246 mechanism Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000009432 framing Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/40—Network security protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23611—Insertion of stuffing data into a multiplex stream, e.g. to obtain a constant bitrate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q11/00—Selecting arrangements for multiplex systems
- H04Q11/04—Selecting arrangements for multiplex systems for time-division multiplexing
- H04Q11/0428—Integrated services digital network, i.e. systems for transmission of different types of digitised signals, e.g. speech, data, telecentral, television signals
- H04Q11/0478—Provisions for broadband connections
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/54—Store-and-forward switching systems
- H04L12/56—Packet switching systems
- H04L12/5601—Transfer mode dependent, e.g. ATM
- H04L2012/5638—Services, e.g. multimedia, GOS, QOS
- H04L2012/5646—Cell characteristics, e.g. loss, delay, jitter, sequence integrity
- H04L2012/5652—Cell construction, e.g. including header, packetisation, depacketisation, assembly, reassembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/54—Store-and-forward switching systems
- H04L12/56—Packet switching systems
- H04L12/5601—Transfer mode dependent, e.g. ATM
- H04L2012/5638—Services, e.g. multimedia, GOS, QOS
- H04L2012/5664—Support of Video, e.g. MPEG
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/54—Store-and-forward switching systems
- H04L12/56—Packet switching systems
- H04L12/5601—Transfer mode dependent, e.g. ATM
- H04L2012/5672—Multiplexing, e.g. coding, scrambling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1101—Session protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
- H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
- H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
- H04L69/326—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the transport layer [OSI layer 4]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
일정한 사이즈로 작업하는 트랜스포트 네트워크의 타입 전체와 상호 작용하기 위해서, 이들 네트워크에 연속적이며 개별적으로 액세스 가능한 부분으로 조직화된 다중화 데이터를 적합시키는 인캡슐레이션 방법이 제안되고 있다. 상기 데이터는 네트워크 패킷의 사이즈에 적합하게 세그먼트화되고, 상기 데이터의 최종 세그먼트를 상기 일정한 사이즈에 일치시키기 위하여, 각 최종 세그먼트에 패딩 패킷을 부가하기 위한 패딩 스텝이 제공되고 있다.
응용 분야:MPEG-4 데이터의 MPEG-2 또는 ATM 패킷으로의 인캡슐레이션.
Description
1999년 1월부터 시행될 예정인 MPEG-4 규격에서는, 정보원(natural origin 또는 synthetic origin)의 시청각 객체(AVO라 함)를 표현하고, 이들을 합성하여 시청각 장면을 형성하는 합성 AVO를 생성하며, 이들 AVO와 관련된 데이터를 다중화하고 동기화하여, 수상기 측에서 생성되는 시청각 장면과 상호 작용하기 위한 규격화된 방법을 제안하고 있다.
후에 상세하게 설명하겠지만, 도 1에 도시된 바와같이, 예컨대 R.Koenen 등에 의해 저술된 "MPEG-4: Context and objectives"와, "Image communication 9(1997)"(1997년 5월 n。4)의 페이지 295-304에 기재되어 있는 시스템에 의해 수신되는 MPEG-4 시청각 장면은, 계층 형태로 조직화된 몇 개의 AVO 로 구성되어 있는 것이 보통이다. 이 계층 구조의 잎(leave)은, 백그라운드, 토론자의 화상, 그 토론자와 연관된 음성 등 어떤 형태의 프리미티브 AVO(primitive AVO)-텍스트, 그래픽스,..-(2차원 또는 3차원(2D, 3D)일 수 있다)로 되어 있다.
이들 AVO와 관련된 데이터는, 1개 이상의 기본 스트림(Elementary Stream)(ES)으로 전달되고 있으며, 전송시 요구되는 서비스 품질(QoS)과 어떤 다른 파라미터에 의해 특징되고 있다. 전송 네트워크 또는 기억 매체로부터 TransMux 스트림의 형태로 전송되어 오는 데이터 스트림은, 기본 스트림을 복원하기 위해서, 적절하게 다중화 분리될 필요가 있다. 다음에, 이들 기본 스트림은, 압축의 신장을 위해서, 적절한 디코더로 전달되며, 이어서 오리지널 AVO(프리미티브 AVO)을 재구성하기 위해, 관련 장면의 합성에 관한 정보를 제공하는 장면 기술 지시 정보와 함께, 상기 부호화된 AVO가 작가에 의해 기술된 바와같은 장면을 (소정의 계층화 형태로) 합성하고 렌더링하기 위해 사용되고 있다. 또한, 작가가 인정하고 있는 부분까지는, 그 장면과 상호 작용하기 위해서 네트워크 층에 업스트림 데이터를 다시 전송하고 있다.
MPEG-4 규격에서의 시스템 부분은, 자연 객체 또는 합성 객체를 부호화한 표현의 형태로, 시청각 정보를 전달하기 위한 시스템을 기술하고 있다. 그러한 시스템에 있어서는, 전송 측에서, 이 시청각 정보를 실제로 압축 및 합성하고, 2진 스트림으로 다중화하며, 전송 후, 수신측에서, 이들 스트림을 다중화 분리한 후 신장과 합성을 행하여 해당 유저의 단말기(일반적으로 프리젠테이션으로 상호 작용이 능하다)에 표시하도록 되어 있다. AVO와 관련된 데이터를 전달하는 기본 스트림은 이들 데이터의 부호화 표시, 즉 장면 기술 정보, 시청각 정보, 콘텐트(content) 관련 정보, 및 다른 부가 데이터를 포함하고 있다. 전송 후, 상기 ES는 상기 장면 기술 정보에 따라 복호화 합성(여기서 합성은 사실상 미디어 객체의 공간과 시간 속성을 식별하기 위해서 장면 기술 정보를 부가하는 처리로서 정의되고 있다)된 후 단말기에 표시되며, 이들 처리 전체는 단말기의 복호화 모델(시스템 디코더 모델 또는 SDM) 및 동기 정보에 따라 동기화되고 있다.
상기 SDM의 용도는, MPEG-4 규격에 알맞게 단말기의 행동(behavior)을 관찰하기 위한 것이다. 즉, 버퍼의 관리, 및 세션(session)을 구성하는 시청각 정보를 재구성할 때의 동기성 측면에서 수상기가 어떻게 행동하는가를 예측하기 위해 제공자에 의해 사용되고 있다. 보다 구체적으로 설명하면, (도 1에 도시된 바와같이) MPEG-4 단말기는 TransMux 층, FlexMux 층, 및 액세스 유닛 층(이 층 모델은 MPEG-4 단말기의 전체 구현(implementation)이 기본으로 하는 공통 모델을 제공한다)으로 구성되는 멀티층 구조를 포함하고 있다. 트랜스포트 MPEG-4 데이터 스트림에 적합하게 되어 있는 현재의 또는 이어지는 하방(underlying)의 다중화 기능성을 나타내는 TransMux 층(이에 의해서 MPEG-4는 조작 환경의 폭 넓은 변화에도 사용할 수 있다)은, MPEG-4에 관해서는 정의되어 있지 않으며, 실제로 전송 네트워크(예컨대, MPEG-2 TS 또는 ATM) 또는 기억 매체에 대한 인터페이스로 기능하고 있어서 요구되는 서비스의 품질에 부합하는 트랜스포트 서비스를 제공할 수 있게 한다. MPEG-4에 의해 전적으로 특정화된 FlexMux 층은, 데이터를 인터리브하기 위한 (1개 이상의 기본 스트림을 1개의 FlexMux 스트림으로 하고 있다) 플렉시블 툴(tool)로 구성되어 있으며, 다중화되어 있는 데이터용의 개별 채널을 식별하는 것이 가능하다.
액세스 유닛 층은 기본 스트림의 시간 축 정보와 타임 스탬프(time stamped) 액세스 유닛을 전달하며, 이에 따라서 기본 스트림의 액세스 유닛(비디오 또는 오디오 프레임, 장면 기술 코맨드,...)의 식별 및 시간축의 복원을 도모한다(액세스 유닛-또는 AU-은 기본 스트림 내의 AVO 의 부호화 표현에서 개별 액세스 가능한 최소 부분이며, 시간 정보는 기본 스트림에 속한 것일 수 있다). 압축 층은, 관련 시청각 대화식 장면과 회답 채널에서 받아 들일 수 있는 대화식 액션(action)에 대응하는 데이터의 합성 및 렌더링 스텝의 실행을 가능케 하는 데이터(객체 기술어, 장면 기술 정보, 프리미티브 AV 객체)를 처리한다.
또한, 기본 스트림은 패킷화된 표현에 따라서 전달된다: 소위 SL 패킷 스트림으로 변환된 상기 ES 데이터는 상기 SDM 의 디멀티플렉서를 인캡슐레이트(encapsulate) 하고, 액세스를 스트림 데이터에 제공하고, 이들 데이터로 복호화용 버퍼를 채우도록 되어 있는 스트림 다중 인터페이스를 통해서 전달되거나 수신된다. SL 패킷 스트림은 (규격으로 정의되어 있는 신택스와 시멘틱(syntax, semantic)에 따라서) 패킷 시퀀스로 구성되며, 이들 패킷 시퀀스는 1개의 단일 ES를 한정한다. 이들 패킷은 상술한 액세스 유닛뿐만 아니라 타이밍 및 액세스 유닛 라벨링(labeling)을 위한 사이드 정보로 파티션되어 있는 기본 스트림 데이터를 포함하고 있다.
데이터의 전송, 특히 MPEG-4 타입의 멀티미디어 데이터를 각종 네트워크를 통해 전송하기 위하여, 이들 데이터의 포맷은 네트워크에서 사용될 수 있는 포맷으로 적합시킬 필요가 있다. 이들 네트워크와 상호 작용하기 위해서, 일정한 사이즈의 패킷(상술한 바와같은 MPEF-2 TS 또는 ATM)으로 작동하는 네트워크에 다중화 패킷을 적합시키는 경우, 상기 데이터가 이들 패킷의 사이즈에 맞게 분할되어 있어도, 이 사이즈에 적합시키기에는 너무 작은 세그먼트가 다소 생기는 경우가 발생하게 될 것이다.
본 발명은 데이터를 일정한 사이즈의 트랜스포트 패킷으로 인캡슐레이션(encapsulation)하는 방법에 관한 것으로, 상기 데이터는 시청각 객체를 부호화한 표현의 연속하는 부분이며 개별적으로 접근 가능한 부분으로서 조직화되어 있고, 상기 부분의 각각은 세그먼트로 세분화되어 있다. 본 발명은 MPEG-2 트랜스포트 스트림(MPEG-2 TS)과 비동기 전송 모드(ATM) 등의 네트워크에 있어서 MPEG-4 데이터를 이들 네트워크의 트랜스포트 패킷으로 인캡슐레이션 하는 것에 특히 유용하다.
도 1은 시청각 대화식 장면을 구성하는 것이 가능한 MPEG-4 단말기의 예를 도시하는 도면.
도 2는 장면의 계층적 표현의 일예를 도시하는 도면.
도 3과 도 4는 본 발명에 의한 MPEF-4 데이터의 인캡슐레이션의 기구를 MPEG-2와의 관계와 ATM과의 관계에서 각각 도시하는 도면.
도 5는 본 발명을 실행할 때 사용되는 산출 절차를 도시하는 도면.
따라서, 본 발명의 목적은, 다중화 데이터를 일정한 사이즈의 패킷으로 작업을 행하는 네트워크에 적합시키는 보편적인 방법을 제안하기 위한 것이다. 이 목적을 달성하기 위해, 본 발명은 서두에서 설명한 바와같은 방법에 있어서, 각 부분의 최종 세그먼트를 전송 네트워크의 일정한 사이즈에 일치시키기 위해서, 상기 최종 세그먼트의 각각에 특정한 패딩(padding) 패킷을 부가하기 위한 패딩 스텝을 포하하는 것을 특징으로 하고 있다. 이 기술적 해결 방안은, 상기 데이터가 MPEG-4 타입의 멀티미디어 데이터이고, 액세스 유닛 또는 AU 라 불리는 상기 부분들의 각각이 액세스 유닛 층-패킷 데이터 유닛, 또는 AL-PDU 라 불리는 세그먼트로 세분되어 있는 경우에 특히 유리하다. 보다 상세하게는, 본 발명에 의한 방법은 각 순차 부분의 패딩 패킷의 사이즈를 다음의 스텝에 따라서 산출하는 것을 특징으로 하고 있다.
- 각 부분의 세그먼트의 수를 검출하고 검사하는 스텝으로서;
- 상기 세그먼트의 수가 1보다 큰 경우, 일정한 사이즈로 되어 있는 각 순차 네크워크 패킷을, 관련된 트랜스포트 네트워크에 대응하는 최종의 1전용 헤더를 제외한 각 세그먼트에 추가함으로써, 작성하고, 다음에, 패딩 패킷의 사이즈를 최종 세그먼트의 사이즈와 네트워크 패킷의 사이즈간의 차와 상기 헤더의 값을 고려하여 산출하고,
-상기 세그먼트의 수가 1 보다 작은 경우, 패딩 패킷의 사이즈를, 상기 단일 세그먼트의 사이즈와 상기 네트워크 패킷의 사이즈 간의 차와 상기 헤더의 값을 고려하여 산출하며,
- 상기 패딩 패킷의 사이즈를 토대로, 상기 최종 또는 단일 세그먼트에 대응하는 최종 완료된 네트워크 패킷을 작성하는 단계.
이하에서는, 본 발명의 상세(詳細)와 이점에 대해, 아래의 설명과 첨부된 도면에 참조하여 보다 상세하게 설명하기로 한다.
MPEG-2 규격에서, 시청각 데이터는 암호화되어 전송된다. MPEG-4 규격에서는, 멀티미디어 장면을 단말기에 재구성하기 위해서, 비디오 채널과 동기화된 오디오 채널을 전달할 필요가 있다. 따라서, 객체 전체가 전체 단일 스트림으로 다중화되어 단말기에 전달되고, 여기서 이들은 다중화 분리 및 합성되어, 멀티미디어 장면(이미 언급한 바와같이, 그러한 장면의 일예가 도 1의 상측 부분에서 도시되어 있다)을 구성하고 단말기의 해당 유저에 제공한다. 이 완성된 장면의 기술(description)로서는 소정의 장면 객체 군과 그것들의 공간과 시간 관계와 함께 행동(behaviour)을 표현하는 콤팩트 바이너리 포맷(장면, 또는 BIFS 용 바이너리 포맷)이 소망된다. 이 BIFS 장면 기술은 예컨대 도 2에 도시된 바와같이 장면을 기술하는 노드와 그것의 레이아웃의 콜렉션(collection)으로 구성되어 있다. 도 2는 노드(계층적 접속을 정의하는 그룹 노드(GN), 또는 트리의 잎(leaves)이 되는 자식(children) 노드(CN))로 조직화된 계층으로 구성되는 트리 구조에 따라, 장면의 계층적 표현을 제공하는 장면 그래프의 일예를 도시하며, 필요하다면, 이들 노드 간의 횡 접속으로, 장면의 객체 전체 간의 어떤 종류의 데이터 전송을 유기적으로 하는 것이 가능하다. 상기 BIFS 장면 기술에 대응하는 데이터는 관련 장면에 연관되어 있는 어떤 미디어 스트림과 마찬가지로, 기본 스트림으로서 단말기에 전달되고 있다. 전달된 데이터와 타임 스탬프(타임 스탬프는 스트림에서 시간 정보에 관계되는 정보 유닛이다)를 적절하게 분리(framing)하기 위한 관점에서 볼 때, BIFS 기본 스트림 트랜스포트에 어떤 요구가 수반되는 것은 분명하다.
MPEG-4 규격의 시스템에 의하면, 액세스 유닛 층(또는 AL)은 기본 스트림 데이터를 시간 스탬핑 액세스 유닛과 시간 축 정보(단일 액세스 유닛으로부터 동일 디코딩 시간에 관계하는 전체 순차 데이터)를 전달하는 것으로 스트림 멀티플렉스 인터페이스를 통한 통신에 적합시키고 있음을 알 수 있다. 이에 의하면, AL 엔티티들 사이에서 치환되는 최소 사이즈의 프로토콜 유닛은, 액세스 유닛 층 프로토콜 데이터 유닛(AL-PDU)라 불리는 액세스 유닛의 세그먼트로 되며, 후속하는 AL-PDU 페이로드의 에러 검출과 프레이밍에 유효한 AL-PDU 헤더, 및 AL-PDU 페이로드 자체로 구성되어 있으며, 이 AL-PDU 페이로드는 기본 스트림 데이터를 포함하는 데이터 필드이다.
유사하게, FlexMux 엔티티들 사이에서 치환되는 FlexMux 스트림의 최소 사이즈의 포로토콜 유닛은 FlexMux 프로토콜 데이터 유닛(FM-PDU)라 불리고 있다. AL-PDU 에 관해서 살펴보면, AL-PDU 는 FM-PDU 헤더(FM-PDU 페이로드에 선행하는 정보이며 이 FM-PDU 의 페이로드가 속하는 FelxMux 채널을 나타낸다)와 FM-PDU 페이로드 자체로 구성되어 있다. 1개 이상의 AL-PDU 는 특정된 모드(심플 모드, MuxCode 모드)에 따라서 FM-PDU 에 삽입되어 있다.
이하의 설명에서는, 전송과, 일정한 길이의 패킷 사이즈로 정의되는 트랜스포트 네트워크의 2개 예, 즉 MPEG-2 트랜스포트 스트림(MPEG-2 TS)과 비동기 전송 모드(ATM)에 대해 살펴본다. MPEG-2 TS 패킷은 188 바이트 길이를 가지며, 4바이트의 헤더와 184 바이트의 페이로드를 포함하고 있으며, ATM 셀은 53 바이트 길이를 가지며, 5바이트의 헤더와 48 바이트의 페이로드를 포함하고 있다. 이들 네트워크에 있어서 패킷 사이즈는 일정하기 때문에, MPEF-4 데이터의 경우, 액세스 유닛의 최종 세그먼트를 일치시켜야 한다는 문제가 있다. 여기서는 네트워크를 통해 전송될 최종 세그먼트의 최종 부분을 작성하기 위해 패딩 기구를 사용하는 것에 대해 제한한다.
적응(adaptation) 기구는 MPEG-2 시스템에 의해 제공되어 있으며, 이에 의하면, 적응 필드는 상이한 사이즈의 데이터가 MPEG-2 TS 패킷으로 인캡슐레이션될 수 있게 한다. 이 기구는 시간의 소모가 매우 크며, 네트워크 프로세싱(보다 구체적으로는 상기 인캡슐레이션이 MPEG-4 레벨에서 행해지는 경우, 어떤 적응도 갖고 있지 않는 ATM 등의 네트워크가 다루어 질 수 있다)의 전에, MPEG-4 레벨에서 적응을 행하도록 선택되고 있다. MPEG-2 TS 패킷에 대한 스터핑의 예를 도시하는 도 3에 도시된 바와같이, 액세스 유닛은 AL-PDU를 생성하기 위해서 세그먼트화되어 있으며, 그 각각은 시간과 환경 파라미터를 지시하는 AL-PDU 헤더를 가지고 있다. 네트워크 패킷(1 MPEG-2 TS 패킷=188바이트)이 아닌, 패딩 바이트로만 구성되는 패딩 패킷을 피팅(fitting)하는 최종 패킷이 액세스 유닛의 최종 세그먼트에 부가된다(이 경우, 25 바이트의 패킷). 다음에, 패딩 패킷(25 바이트), 상기 패딩 패킷의 AL-PDU 헤더(1바이트), 관련 FM-PDU 헤더(2바이트: FlexMux 채널 번호 FMC에 대한 1바이트와 길이 필드LEN에 대한 1바이트) 부분들이 부가되며, 최종 패킷의 연속하는 유사 부분들(페이로드 2=150 바이트; AL-PDU 헤더=4바이트; FM-PDU 헤더 = 2바이트; TS 헤더 = 4바이트)이 MPEG-2 TS 패킷의 길이(=188바이트)로 주어지고 있음을 알 수 있다.
도 3은 MPEG-2 TS에 관하여 패딩 바이트의 인캡슐레이션 기구를 도시하고 있지만, 도 4는 AMT 에 관하여, (이 예에서는) 15 바이트의 패딩 패킷, 및 5바이트의 ATM 헤더를 갖는 유사한 기구를 도시하고 있다. 양자의 경우에 있어서, 패킷은 다음의 조건에 다라 작성되고 있다.
네트워크 패킷 = 네트워크 헤더(TS,ATM) + 네트워크 페이로드;
네트워크 페이로드 = FM-PDU;
(3) FM-PDU = FM-PDU 헤더 + FM-PDU 페이로드;
(4) FM-PDU 페이로드 = AL-PDU
(5) AL-PDU = AL-PDU 헤더 + AL-PDU 페이로드;
(6) AL-PDU 페이로드 = 액세스 유닛의 1 세그먼트
(7) 액세스 유닛=□(액세스 유닛의 세그먼트), 최종 세그먼트는 일반적으로 해당 네트워크와 관련되는 일정한 패킷 사이즈에 적합시키기에는 너무 작다.
MPEG-2 TS 또는 ATM에 대해서는, 패딩 패킷의 사이즈를 산출하지 않으면 안된다. 상기 사이즈의 산출 방법은 도 5에 예시되어 있으며, 다음과 같은 단계를 포함하고 있다.
- 산출 절차(INIT)의 초기화 후, 액세스 유닛에서의 세그먼트의 수(SEGNUM)를 검출한다;
- 제 1 세그먼트(FS)가 유효하게 되고, 세그먼트의 수가 검사된다(SEGNUM 〉 1 ?);
- 상기 수가 1보다 큰 경우(SEGNUM 〉 1 ? 에 대한 응답이 예(YES) 인 경우), 상기 제 1 세그먼트에 대응하는 네트워크 패킷이, 관련된 트랜스포트 스트림에 대응하는 전용 헤더를 추가하는 것에 의해 작성되고(NP BUILT), 다음 세그먼트(NS)가 유효하게 된다;
- 상기 다음 세그먼트가 최종의 세그먼트가 아닌 경우(LAST SEG? 에 대한 응답이 아니오(NO) 인 경우), 피드백 접속에 의해 상기 다음 세그먼트 등에 대응하는 네트워크 패킷을 유사하게 작성(NP BUIL)하기 위한 루프가 형성되게 된다.
- 대조적으로, 상기 세그먼트가 최종의 세그먼트인 경우(LAST SEG? 에 대한 응답이 예(YES) 인 경우), 패딩 사이즈(PS)가, 이 최종 세그먼트의 사이즈 및 네트워크 패킷의 사이즈의 차와, 상이한 헤더의 값을 고려하는 것에 의해 산출되게 된다;
- 상기 세그먼트 수(SEGNUM) 가 1보다 크지 않은 경우(SEGNUM 〉 1 ? 에 대한 응답이 아니오(NO) 인 경우), 단일 세그먼트에 대한 패딩 사이즈(PS)는 이전 단계에서 나타낸 바와같이 산출되게 된다;
- 패딩 사이즈가 산출된 직후, 패딩 바이트를 갖는 대응하는 완성된 네트워크 패킷이 작성되고(이 패킷은 NPWPB 로서 표시되어 있다), 관련 네트워크의 패킷의 사이즈가 적합하게 될 것이다.
Claims (3)
- 데이터를 일정한 사이즈의 네트워크 트랜스포트 패킷으로 인캡슐레이션(encapsulation)하기 위한 방법으로서, 상기 데이터는 시청각 객체의 부호화 표현의 연속적이며, 개별적으로 액세스 가능한 부분으로 조직화되어 있고, 상기 부분의 각각은 세그먼트로 세분되어 있는 인캡슐레이션 방법에 있어서, 각 부분의 최종 세그먼트를 트랜스포트 네트워크의 일정한 사이즈에 적합시키기 위해, 상기 최종 세그먼트의 각각에 특정 패딩 패킷을 부가하는 패딩(padding) 스텝을 포함하는 것을 특징으로 하는 인캡슐레이션 방법.
- 제 1 항에 있어서, 상기 데이터는, MPEG-4 타입의 멀티미디어 데이터이며, 액세스 유닛 또는 AU 라 불리는 상기 부분의 각각은, 액세스 유닛 층-패킷 데이터 유닛, 또는 AL-PDU 라 불리는 세그먼트로 세분되어 있는 인캡슐레이션 방법.
- 제 1 또는 2 항에 있어서, 각 연속하는 부분의 패딩 패킷의 사이즈는:- 각 부분의 세그먼트의 수를 검출하고 검사하는 단계로서,- 상기 세그먼트의 수가 1 보다 큰 경우, 관련된 트랜스포트 네트워크에 대응하여, 최종의 1개 전용 헤더를 제외한 각 세그먼트에 추가함으로써, 일정한 사이즈의 각 순차 네크워크 패킷을 작성하고, 다음에, 상기 패딩 패킷의 사이즈를, 최종 세그먼트의 사이즈와 네트워크 패킷의 사이즈 간의 차와, 상기 헤더의 값을 고려하여 산출하고,- 상기 세그먼트의 수가 1 보다 작은 경우, 상기 패딩 패킷의 사이즈를, 상기 단일 세그먼트의 사이즈와 상기 네트워크 패킷의 사이즈 간의 차와, 상기 헤더의 값을 고려하여 산출하며,- 상기 패딩 패킷의 사이즈를 기본으로 하여, 상기 최종 또는 단일 세그먼트에 대응하는 최종으로 완성된 네트워크 패킷을 작성하는 단계에 의해 산출되는 것을 특징으로 하는 인캡슐레이션 방법.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP97402460.6 | 1997-10-17 | ||
EP97402460 | 1997-10-17 | ||
PCT/IB1998/001576 WO1999021337A2 (en) | 1997-10-17 | 1998-10-08 | Method of encapsulation of data into transport packets of constant size |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20000069539A true KR20000069539A (ko) | 2000-11-25 |
KR100593581B1 KR100593581B1 (ko) | 2006-06-28 |
Family
ID=8229881
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019997005472A KR100593581B1 (ko) | 1997-10-17 | 1998-10-08 | 데이터를 일정한 사이즈의 전송 패킷으로 캡슐화하는 방법 |
Country Status (9)
Country | Link |
---|---|
US (1) | US6522651B2 (ko) |
EP (1) | EP0966823B1 (ko) |
JP (1) | JP2001506114A (ko) |
KR (1) | KR100593581B1 (ko) |
CN (1) | CN1146205C (ko) |
DE (1) | DE69834045T2 (ko) |
ES (1) | ES2259817T3 (ko) |
MY (1) | MY126739A (ko) |
WO (1) | WO1999021337A2 (ko) |
Families Citing this family (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4273535B2 (ja) * | 1998-05-12 | 2009-06-03 | ソニー株式会社 | データ伝送制御方法、データ伝送システム、データ受信装置及びデータ送信装置 |
WO2000004723A1 (en) * | 1998-07-17 | 2000-01-27 | Koninklijke Philips Electronics N.V. | Device for demultiplexing coded data |
US6438140B1 (en) * | 1998-11-19 | 2002-08-20 | Diva Systems Corporation | Data structure, method and apparatus providing efficient retrieval of data from a segmented information stream |
US6826197B1 (en) * | 1999-04-01 | 2004-11-30 | Sedna Patent Services, Llc | Data packet structure for digital information distribution |
US7050955B1 (en) * | 1999-10-01 | 2006-05-23 | Immersion Corporation | System, method and data structure for simulated interaction with graphical objects |
MXPA02004015A (es) * | 1999-10-22 | 2003-09-25 | Activesky Inc | Un sistema de video orientado a los objetos. |
KR100426665B1 (ko) * | 1999-12-16 | 2004-04-13 | 엘지전자 주식회사 | 피엔엔아이에서 패킷 크기 협상방법 |
EP1133190A1 (en) * | 2000-03-06 | 2001-09-12 | Canon Kabushiki Kaisha | Moving image generation apparatus, moving image playback apparatus, their control method, and storage medium |
JP2002077173A (ja) * | 2000-08-25 | 2002-03-15 | Sony Corp | 送信装置および方法、並びにプログラム格納媒体 |
AUPR063400A0 (en) | 2000-10-06 | 2000-11-02 | Canon Kabushiki Kaisha | Xml encoding scheme |
KR100739320B1 (ko) * | 2000-12-15 | 2007-07-12 | 주식회사 케이티 | 비디오 스트림을 알티피로 전송하기 위한 알티피 송신페이로드 핸들러 장치 및 그 방법 |
KR100392384B1 (ko) * | 2001-01-13 | 2003-07-22 | 한국전자통신연구원 | 엠펙-2 데이터에 엠펙-4 데이터를 동기화시켜 전송하는장치 및 그 방법 |
US20030012181A1 (en) * | 2001-03-30 | 2003-01-16 | Andre The | Simulating high-speed access on a low-bandwidth network connection |
US7062562B1 (en) * | 2001-04-11 | 2006-06-13 | Cisco Technology, Inc. | Methods and apparatus for content server selection |
EP1430706A4 (en) * | 2001-06-11 | 2011-05-18 | Broadcom Corp | SYSTEM AND METHOD FOR MULTI-CHANNEL VIDEO AND AUDIO CODING ON A SINGLE CHIP |
US7272663B2 (en) * | 2001-08-28 | 2007-09-18 | International Business Machines Corporation | Method and system for delineating data segments subjected to data compression |
EP1309196A3 (en) * | 2001-10-29 | 2005-07-20 | Matsushita Electric Industrial Co., Ltd. | File creating method and data reproduction method |
US7224703B2 (en) * | 2001-12-12 | 2007-05-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and apparatus for segmenting a data packet |
US7155532B2 (en) * | 2002-01-04 | 2006-12-26 | Scientific-Atlanta, Inc. | Transmitting streams over asynchronous networks |
US20030128754A1 (en) * | 2002-01-09 | 2003-07-10 | Hiroshi Akimoto | Motion estimation method for control on the basis of scene analysis in video compression systems |
US7844697B1 (en) * | 2002-01-25 | 2010-11-30 | Juniper Networks, Inc. | Measuring network traffic based on predicted amount of padding |
US20040190629A1 (en) * | 2002-07-19 | 2004-09-30 | Cooper Jeffrey Allen | System and method for broadcast of independently encoded signals on atsc channels |
WO2004077771A1 (de) * | 2003-02-27 | 2004-09-10 | Oasis Silicon Systems Ag | Synchrone multi-cluster netzwerkarchitektur |
US8032645B2 (en) * | 2003-11-13 | 2011-10-04 | Panasonic Corporation | Coding method and coding apparatus |
US7379608B2 (en) * | 2003-12-04 | 2008-05-27 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. | Arithmetic coding for transforming video and picture data units |
US7599435B2 (en) | 2004-01-30 | 2009-10-06 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Video frame encoding and decoding |
US20050193426A1 (en) * | 2004-02-27 | 2005-09-01 | Raja Neogi | System and method to control fingerprint processing in a media network |
US7586924B2 (en) | 2004-02-27 | 2009-09-08 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream |
US8180883B1 (en) | 2004-08-02 | 2012-05-15 | Cisco Technology, Inc. | Method and system for processing directives included in management events |
CN100438685C (zh) * | 2004-09-20 | 2008-11-26 | 上海贝尔阿尔卡特股份有限公司 | 处理多用户/多业务的方法及设备 |
US7773630B2 (en) * | 2005-11-12 | 2010-08-10 | Liquid Computing Corportation | High performance memory based communications interface |
KR101158435B1 (ko) * | 2006-03-03 | 2012-06-22 | 엘지전자 주식회사 | 이동통신 단말기와 우선순위 정보 데이터를 이용한 방송시스템 및 이를 이용한 방송 방법 |
TWI327429B (en) * | 2006-09-29 | 2010-07-11 | Hon Hai Prec Ind Co Ltd | Network apparatus and frame processing method thereof |
CN100466519C (zh) * | 2006-10-20 | 2009-03-04 | 中兴通讯股份有限公司 | 一种广播网络中实现同时下载多个文件的方法 |
JP5746811B2 (ja) * | 2006-12-21 | 2015-07-08 | 味の素株式会社 | 大腸癌の評価方法、ならびに大腸癌評価装置、大腸癌評価方法、大腸癌評価システム、大腸癌評価プログラムおよび記録媒体 |
KR101587038B1 (ko) * | 2009-01-15 | 2016-01-20 | 한국전자통신연구원 | 다중 채널을 이용하는 무선랜 시스템에서 매체 접근 제어 방법 |
KR101803970B1 (ko) * | 2011-03-16 | 2017-12-28 | 삼성전자주식회사 | 컨텐트를 구성하는 장치 및 방법 |
KR101885852B1 (ko) | 2011-09-29 | 2018-08-08 | 삼성전자주식회사 | 컨텐트 전송 및 수신 방법 및 장치 |
KR102404241B1 (ko) | 2018-04-13 | 2022-06-02 | 삼성전자주식회사 | 송신 장치 및 그 송신 방법 |
US11818207B1 (en) * | 2022-07-08 | 2023-11-14 | T-Mobile Innovations Llc | Methods and systems for ledger based content delivery using a mobile edge computing (MEC) server |
US11792259B1 (en) | 2022-09-28 | 2023-10-17 | T-Mobile Innovations Llc | Methods and systems for distributing rendering across devices in a customer premise |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5189411A (en) * | 1985-11-27 | 1993-02-23 | Seiko Corp. | Radio signal data transmission synchronization |
US5297279A (en) * | 1990-05-30 | 1994-03-22 | Texas Instruments Incorporated | System and method for database management supporting object-oriented programming |
US5874997A (en) * | 1994-08-29 | 1999-02-23 | Futuretel, Inc. | Measuring and regulating synchronization of merged video and audio data |
US5533021A (en) * | 1995-02-03 | 1996-07-02 | International Business Machines Corporation | Apparatus and method for segmentation and time synchronization of the transmission of multimedia data |
US5802068A (en) * | 1995-06-30 | 1998-09-01 | Nippon Steel Corporation | Multiplexing apparatus of a plurality of data having different bit rates |
AU701138B2 (en) * | 1995-07-13 | 1999-01-21 | General Instrument Corporation | Transmission of high rate isochronous data in MPEG-2 data streams |
US5659539A (en) * | 1995-07-14 | 1997-08-19 | Oracle Corporation | Method and apparatus for frame accurate access of digital audio-visual information |
US5751702A (en) * | 1995-12-05 | 1998-05-12 | Stanford Telecommunications, Inc. | Network protocol for wireless broadband ISDN using ATM |
US6172988B1 (en) * | 1996-01-31 | 2001-01-09 | Tiernan Communications, Inc. | Method for universal messaging and multiplexing of video, audio, and data streams |
US5742599A (en) * | 1996-02-26 | 1998-04-21 | Apple Computer, Inc. | Method and system for supporting constant bit rate encoded MPEG-2 transport over local ATM networks |
US6151319A (en) * | 1996-11-15 | 2000-11-21 | Lucent Technologies Inc. | Connectionless message service using ATM routers |
US6111858A (en) * | 1997-02-18 | 2000-08-29 | Virata Limited | Proxy-controlled ATM subnetwork |
US6079566A (en) * | 1997-04-07 | 2000-06-27 | At&T Corp | System and method for processing object-based audiovisual information |
US6044397A (en) * | 1997-04-07 | 2000-03-28 | At&T Corp | System and method for generation and interfacing of bitstreams representing MPEG-coded audiovisual objects |
US6111845A (en) * | 1998-06-05 | 2000-08-29 | Winbond Electronics Corp. | Record carrier, and recording method and apparatus for recording audio programs on a track of a record carrier |
-
1998
- 1998-10-08 DE DE69834045T patent/DE69834045T2/de not_active Expired - Lifetime
- 1998-10-08 JP JP52356399A patent/JP2001506114A/ja active Pending
- 1998-10-08 ES ES98945470T patent/ES2259817T3/es not_active Expired - Lifetime
- 1998-10-08 KR KR1019997005472A patent/KR100593581B1/ko not_active IP Right Cessation
- 1998-10-08 WO PCT/IB1998/001576 patent/WO1999021337A2/en active IP Right Grant
- 1998-10-08 CN CNB988024195A patent/CN1146205C/zh not_active Expired - Fee Related
- 1998-10-08 EP EP98945470A patent/EP0966823B1/en not_active Expired - Lifetime
- 1998-10-15 MY MYPI98004707A patent/MY126739A/en unknown
- 1998-10-19 US US09/174,787 patent/US6522651B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2001506114A (ja) | 2001-05-08 |
KR100593581B1 (ko) | 2006-06-28 |
WO1999021337A2 (en) | 1999-04-29 |
WO1999021337A3 (en) | 1999-07-08 |
CN1246997A (zh) | 2000-03-08 |
DE69834045T2 (de) | 2006-11-16 |
CN1146205C (zh) | 2004-04-14 |
US20020003811A1 (en) | 2002-01-10 |
MY126739A (en) | 2006-10-31 |
EP0966823A2 (en) | 1999-12-29 |
US6522651B2 (en) | 2003-02-18 |
EP0966823B1 (en) | 2006-03-29 |
ES2259817T3 (es) | 2006-10-16 |
DE69834045D1 (de) | 2006-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20000069539A (ko) | 데이터를 일정한 사이즈의 트랜스포트 패킷으로 인캡슐레이션하는 방법 | |
CN101188779B (zh) | 解码多路复用的视频分组流的方法 | |
CN101023637B (zh) | 简单聚合格式同步层分组结构及其服务器系统 | |
US20010000962A1 (en) | Terminal for composing and presenting MPEG-4 video programs | |
JP5253439B2 (ja) | 従属データストリームの送信方法 | |
Avaro et al. | MPEG-4 systems: overview | |
CN101300810A (zh) | 用于将svg内容嵌入进iso基本媒体文件格式以便渐进地下载或流式传输富媒体内容的方法 | |
US7149770B1 (en) | Method and system for client-server interaction in interactive communications using server routes | |
US20050105555A1 (en) | Data processing method and apparatus, and data distribution method and information processing apparatus | |
KR100705992B1 (ko) | 코드화된 데이터를 디멀티플렉싱하는 장치 | |
CN100383764C (zh) | 交互通信中客户机-服务器交互方法和系统 | |
JP4391231B2 (ja) | 複数のターミナルへのマルチメディア信号のブロードキャスト方法 | |
KR100991803B1 (ko) | Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말 | |
EP1435738A1 (en) | Method and system for generating input file using meta language regarding graphic data compression | |
Eleftheriadis | MPEG-4 systems: architecting object-based audio-visual content | |
KR20030056103A (ko) | 엠펙-4 장면 기술자를 이용한 엠펙-2 비디오의 특정 영역활성화 장치 및 그 방법 | |
Herpel et al. | MPEG-4 systems: elementary stream management and delivery | |
KR100940603B1 (ko) | Saf 동기화 계층 패킷 구조와 이를 제공하는 방법 | |
KR0181081B1 (ko) | 시스템 복호화기의 이에스씨알 재생장치 | |
EP1538841A2 (en) | Method and system for generating input file using meta representation of compression of graphics data, and animation framework extension (AFX) coding method and apparatus | |
Eleftheriadis | MPEG-4 systems systems | |
Atzori et al. | Private data broadcasting using digital TV and MPEG-2 transport stream | |
Guillemot et al. | Integrating MPEG-4 into the Internet |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20110617 Year of fee payment: 6 |
|
LAPS | Lapse due to unpaid annual fee |