KR100914318B1 - Method for forming IDR unit for trick play, and Trick play system and method using that - Google Patents

Method for forming IDR unit for trick play, and Trick play system and method using that Download PDF

Info

Publication number
KR100914318B1
KR100914318B1 KR1020070099982A KR20070099982A KR100914318B1 KR 100914318 B1 KR100914318 B1 KR 100914318B1 KR 1020070099982 A KR1020070099982 A KR 1020070099982A KR 20070099982 A KR20070099982 A KR 20070099982A KR 100914318 B1 KR100914318 B1 KR 100914318B1
Authority
KR
South Korea
Prior art keywords
idr
frame
trick play
unit
frames
Prior art date
Application number
KR1020070099982A
Other languages
Korean (ko)
Other versions
KR20080051025A (en
Inventor
정진환
김정근
이용주
박춘서
민옥기
김학영
김명준
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US11/949,746 priority Critical patent/US8483551B2/en
Publication of KR20080051025A publication Critical patent/KR20080051025A/en
Application granted granted Critical
Publication of KR100914318B1 publication Critical patent/KR100914318B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Abstract

본 발명은 트릭 플레이를 위한 IDR 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법에 관한 것으로, 트릭 플레이 시스템에서 비디오 프레임의 개수와 데이터량을 조절하여 트릭 플레이를 구현할 IDR 단위를 생성함으로써, 원본 컨텐츠의 전송률을 보존하고 서버의 부하를 최소화하여 배속을 조절하기 위한, 트릭 플레이를 위한 IDR 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법을 제공하고자 한다.The present invention relates to a method for generating an IDR unit for trick play, a trick play system using the same, and a method thereof, by generating an IDR unit for implementing trick play by adjusting the number and data amount of video frames in the trick play system. An IDR unit generation method for trick play, a trick play system using the same, and a method for preserving a content transmission rate and minimizing a load on a server to adjust a double speed are provided.

이를 위하여, 본 발명은 트릭 플레이 시스템에 있어서, 배속 정보를 입력받기 위한 배속 정보 입력 수단, 상기 배속 정보 입력 수단을 통하여 입력된 배속 정보를 기반으로 IDR(Instantaneous Decoding Refresh) 단위의 전송 조건을 결정하기 위한 전송 조건 결정 수단, 전송하고자 하는 비디오 프레임의 개수와 데이터량을 조절하여 IDR 단위를 생성하기 위한 IDR 단위 생성 수단, 및 상기 IDR 단위 생성 수단에 의해 생성된 IDR 단위를 상기 전송 조건 결정 수단에 의해 결정된 전송 조건에 따라 외부의 사용자 단말로 전송하기 위한 전송 수단을 포함한다.To this end, the present invention, in the trick play system, determining transmission conditions in IDR (Instantaneous Decoding Refresh) unit on the basis of the double speed information input means for receiving double speed information, the double speed information input through the double speed information input means; The transmission condition determining means for generating the IDR unit by adjusting the number and data amount of video frames to be transmitted, and the IDR unit generated by the IDR unit generating means by the transmission condition determining means. And transmitting means for transmitting to an external user terminal according to the determined transmission condition.

H.264, VoD, 트릭 플레이, 전송 조건 결정, 비디오 프레임 개수 조절, 데이터량 조절, IDR 단위 생성, 배속 조절  H.264, VoD, Trick Play, Transmission Condition Determination, Video Frame Count Control, Data Volume Control, IDR Unit Generation, Double Speed Control

Description

트릭 플레이를 위한 IDR 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법{Method for forming IDR unit for trick play, and Trick play system and method using that}Method for forming IDR unit for trick play, trick play system and method using same {Method for forming IDR unit for trick play, and Trick play system and method using that}

본 발명은 트릭 플레이(Trick Play)를 위한 IDR(Instantaneous Decoding Refresh) 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 트릭 플레이 시스템에서 비디오 프레임의 개수와 데이터량을 조절하여 트릭 플레이를 구현할 IDR 단위를 생성함으로써, 원본 컨텐츠의 전송률을 보존하고 서버의 부하를 최소화하여 배속을 조절하기 위한, 트릭 플레이를 위한 IDR 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법에 관한 것이다.The present invention relates to a method of generating an Instantaneous Decoding Refresh (IDR) unit for trick play, a trick play system using the same, and a method thereof. More specifically, the number and data amount of a video frame in a trick play system can be determined. By generating an IDR unit to adjust the trick play by creating an IDR unit, the method of generating an IDR unit for trick play, to control the speed of the transmission to preserve the transmission rate of the original content and minimize the load on the server, a trick play system using the same and the method It is about.

먼저, 본 발명에서 "IDR 단위"는 트릭 플레이를 하는 과정에서 한번에 '전송' 혹은 '건너뜀'을 수행하는 프레임의 한 단위를 말하고, IDR 프레임 및 그 종속 프레임들 등을 포함하여 이루어지며, 기본적으로 2배속을 기준으로 하여 생성된다.First, in the present invention, "IDR unit" refers to a unit of a frame that performs 'transmission' or 'skip' at a time during a trick play, and includes an IDR frame and its dependent frames. It is generated based on double speed.

본 발명은 정보통신부의 IT신성장동력핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2005-S-405-02, 과제명: 차세대 인터넷 서버 기술 개발].The present invention is derived from the research conducted as part of the IT new growth engine core technology development project of the Ministry of Information and Communication [Task management number: 2005-S-405-02, Title: Development of next-generation Internet server technology].

주문형 비디오(VoD : Video on Demand) 시스템에서 고속 감기(Fast Forward)와 같은 VCR(Video Cassette Recorder)의 기능에 해당되는 트릭 플레이(Trick Play)를 지원하는 것은 사용자 편의 측면에서 매우 중요하다.In the video on demand (VoD) system, it is very important for the user to support trick play, which corresponds to the function of the video cassette recorder (VCR) such as fast forward.

이러한 VoD 시스템에서의 트릭 플레이(Trick Play)를 구현하는 방법은 MPEG-4(Moving Picture Experts Group-4)나 H.263과 같은 컨텐츠를 대상으로 하여 프레임 주기적 선택 방법, 화상 집합(Group of Picture) 수준의 선택 방법, 및 트릭 플레이 전용 컨텐츠 생성 방법 등으로 많이 개발되어왔다.Such VoD How to implement trick play in the system is to target content such as Moving Picture Experts Group-4 (MPEG-4) or H.263. Many methods have been developed such as selection method and trick play-only content generation method.

종래의 트릭 플레이(Trick Play) 방법은 크게 2가지의 방향으로 설명할 수 있다.The conventional trick play method can be largely described in two directions.

첫 번째 방법은 원본 컨텐츠에서 프레임을 주기적으로 제거하여 배속을 구현하는 방법이다. 이 방법은 서버에 부하를 크게 주지 않으면서 효율적으로 배속을 조절할 수 있지만, 압축된 프레임의 크기를 고려하지 않고 규칙적으로 프레임을 선택하여 배속을 한다는 점 때문에 전송률을 유지하지 못한다.The first method is to implement a double speed by periodically removing frames from the original content. This method can efficiently adjust the speed without putting a heavy load on the server, but it does not maintain the data rate because it selects the frame regularly and does not consider the size of the compressed frame.

여기서, 전송률이 바뀌게 되면 스트리밍 시작 때 RTSP(Real-Time Streaming Protocol)와 같은 제어 규약을 통한 단말과의 초기 설정 단계에서 부정확한 전송률을 단말에게 알려주게 되어 하드웨어 단말이 버퍼에 이상을 일으킬 가능성이 있기 때문에 정확한 스트리밍을 하기 어렵다는 문제점이 있다.In this case, if the data rate is changed, an incorrect data rate may be notified to the UE at an initial setting stage with the UE through a control protocol such as RTSP (Real-Time Streaming Protocol) at the start of streaming, which may cause a hardware terminal to cause an abnormality in the buffer. Therefore, there is a problem that it is difficult to accurately stream.

상기의 문제점을 보완하기 위한 두 번째 방법은 원본 컨텐츠 자체를 트릭 플레이(Trick Play)용으로 다시 인코딩하여 전송하거나 서버가 실시간으로 컨텐츠의 전송률(Bit-Rates)을 조정하기 위한 단순한 인코딩 작업을 하는 방법이다. 이러한 방법은 첫 번째 방법의 문제점을 보완할 수는 있지만, 실시간성이 떨어지고 비록 단순하게라도 인코딩 작업이 들어가게 되면 다수의 단말이 접속되었을 때 서버에 많은 부하를 주게 되는 문제점이 있다. 또한, H. 264는 알고리즘 자체의 복잡도가 기존의 비디오 압축 표준보다 더욱 높기 때문에 서버의 부하가 더욱 가중되는 문제점이 있다.The second method to solve the above problem is to re-encode and transmit the original content itself for trick play or to perform a simple encoding operation for the server to adjust the bit rate of the content in real time. to be. Although this method can compensate for the problem of the first method, there is a problem that the real time is poor and even if a simple encoding operation is put, a large load is placed on the server when a plurality of terminals are connected. In addition, since H. 264 has a higher complexity of the algorithm itself than the existing video compression standard, there is a problem that the load on the server is further increased.

따라서 서버에 부하를 주지 않고, 원본 컨텐츠의 전송률을 유지하면서 정확한 컨텐츠를 전송을 하여 H.264 시스템에서 고배속 효과를 낼 수 있는 방안이 절실히 요구된다.Therefore, there is an urgent need for a method that can deliver high-speed effects in the H.264 system by transmitting accurate content while maintaining the transmission rate of the original content without putting a load on the server.

본 발명은 상기 문제점을 해결하고 상기 요구에 부응하기 위하여 제안된 것으로, 트릭 플레이 시스템에서 비디오 프레임의 개수와 데이터량을 조절하여 트릭 플레이를 구현할 IDR 단위를 생성함으로써, 원본 컨텐츠의 전송률을 보존하고 서버의 부하를 최소화하여 배속을 조절하기 위한, 트릭 플레이를 위한 IDR 단위 생성 방법과, 그를 이용한 트릭 플레이 시스템 및 그 방법을 제공하는데 그 목적이 있다.The present invention has been proposed to solve the above problems and to meet the needs, and by generating the IDR unit to implement the trick play by adjusting the number of video frames and the amount of data in the trick play system, to preserve the transmission rate of the original content and the server It is an object of the present invention to provide a method of generating an IDR unit for trick play, a trick play system using the same, and a method for controlling the speed by minimizing the load of the controller.

본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects and advantages of the present invention which are not mentioned above can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. Also, it will be readily appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.

상기 목적을 달성하기 위한 본 발명의 시스템은, 트릭 플레이 시스템에 있어서, 배속 정보를 입력받기 위한 배속 정보 입력 수단, 상기 배속 정보 입력 수단을 통하여 입력된 배속 정보를 기반으로 IDR(Instantaneous Decoding Refresh) 단위의 전송 조건을 결정하기 위한 전송 조건 결정 수단, 전송하고자 하는 비디오 프레임의 개수와 데이터량을 조절하여 IDR 단위를 생성하기 위한 IDR 단위 생성 수단, 및 상기 IDR 단위 생성 수단에 의해 생성된 IDR 단위를 상기 전송 조건 결정 수단에 의해 결정된 전송 조건에 따라 외부의 사용자 단말로 전송하기 위한 전송 수단을 포함한다.The system of the present invention for achieving the above object is, in a trick play system, an IDR (Instantaneous Decoding Refresh) unit based on double speed information input means for receiving double speed information and double speed information input through the double speed information input means. Transmission condition determining means for determining a transmission condition of an IDR, IDR unit generating means for generating an IDR unit by adjusting the number and data amount of video frames to be transmitted, and an IDR unit generated by the IDR unit generating means. And transmission means for transmitting to an external user terminal according to the transmission condition determined by the transmission condition determining means.

한편, 상기 목적을 달성하기 위한 본 발명의 방법은, 트릭 플레이 방법에 있어서, 배속 정보를 입력받는 배속 정보 입력 단계, 상기 입력받은 배속 정보를 기반으로 IDR(Instantaneous Decoding Refresh) 단위의 전송 조건을 결정하는 전송 조건 결정 단계, 전송하고자 하는 비디오 프레임의 개수와 데이터량을 조절하여 IDR 단위를 생성하는 IDR 단위 생성 단계, 및 상기 IDR 단위 생성 단계에서 생성된 IDR 단위를 상기 전송 조건 결정 단계에서 결정된 전송 조건에 따라 사용자 단말로 전송하는 단계를 포함한다.On the other hand, in the method of the present invention for achieving the above object, in the trick play method, the transmission speed information input step of receiving the double speed information, the transmission condition in IDR (Instantaneous Decoding Refresh) unit is determined based on the received double speed information A transmission condition determined in the transmission condition determining step, the IDR unit generating step of generating an IDR unit by adjusting the number of video frames to be transmitted and the amount of data to be transmitted, and the IDR unit generated in the IDR unit generating step And transmitting to the user terminal.

한편, 상기 목적을 달성하기 위한 본 발명의 다른 방법은, 트릭 플레이(Trick Play)를 위한 IDR(Instantaneous Decoding Refresh) 단위 생성 방법에 있어서, 제 1 IDR 프레임으로부터 다음의 제 2 IDR 프레임 전까지의 전체 프레임 중에서 절반의 후반 종속 프레임을 제거하는 제 1 프레임 제거 단계, 및 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 상기 전체 프레임의 데이터 크기의 절반 미만인지를 확인하여 해당 잔여 프레임을 IDR 단위로 생성하는 IDR 단위 생성 단계를 포함한다.Meanwhile, another method of the present invention for achieving the above object is a method of generating an Instantaneous Decoding Refresh (IDR) unit for trick play, wherein the entire frame from the first IDR frame to the next second IDR frame A first frame removing step of removing half of the second dependent frame among the first frames; and checking whether the data size of the remaining remaining frames removed from the entire frames is less than half the data size of the entire frames to generate the corresponding frames in IDR units. And generating an IDR unit.

또한, 상기 본 발명의 다른 방법은, 상기 제 1 프레임 제거 단계에서 제거되고 남은 잔여 프레임 중에 상기 제거된 후반 종속 프레임을 참조하고 있는 프레임을 제거한 후에 상기 IDR 단위 생성 단계로 진행하는 제 2 프레임 제거 단계를 더 포함한다.In addition, the other method of the present invention, the second frame removing step of proceeding to the IDR unit generation step after removing the frame referring to the removed second dependent frame in the remaining remaining frame removed in the first frame removing step It further includes.

상기와 같은 본 발명은, 서버에 연산 부하를 크게 주지 않고 원본 컨텐츠의 전송 특성을 유지함으로써, 트릭 플레이 서비스를 실시간으로 제공할 수 있는 효과가 있다.The present invention as described above has the effect of providing a trick play service in real time by maintaining the transmission characteristics of the original content without placing a large computational load on the server.

또한, 본 발명은, 트릭 플레이를 구현함에 있어서 특수한 인코딩 기법을 사용하거나 사용자 단말이 트릭 플레이를 위해 수정되지 않아도 되기 때문에, 기존 컨텐츠 및 사용자 단말의 수정 없이 서비스를 제공할 수 있는 효과가 있다.In addition, since the present invention does not need to use a special encoding scheme or the user terminal is modified for trick play in implementing trick play, there is an effect that the service can be provided without modification of the existing content and the user terminal.

상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되어 있는 상세한 설명을 통하여 보다 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다.The above objects, features, and advantages will become more apparent from the detailed description given hereinafter with reference to the accompanying drawings, and accordingly, those skilled in the art to which the present invention pertains may share the technical idea of the present invention. It will be easy to implement. In addition, in describing the present invention, when it is determined that the detailed description of the known technology related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1 은 본 발명에 이용되는 IDR 프레임 및 종속 프레임을 나타내는 일실시예 설명도이다.1 is a diagram illustrating an embodiment of an IDR frame and a dependent frame used in the present invention.

일반적으로 비디오는 도 1에 도시된 바와 같이, IDR 프레임 및 종속 프레임들의 연속으로 이루어져 있다. IDR 프레임은 H. 264에서 기준이 되는 프레임 즉, 'Reference Frame'이라 하고, 종속 프레임(P 프레임 및 B 프레임)은 'Prediction Frame'이라 한다. In general, a video consists of a series of IDR frames and dependent frames, as shown in FIG. An IDR frame is referred to as a frame referred to in H. 264, that is, a 'Reference Frame', and a dependent frame (P frame and B frame) is called a 'Prediction Frame'.

예를 들면, '초당 29.97 프레임을 보여주는 비디오'가 있다고 하면, 이 비디오는 1초에 29.97 프레임 즉, 1000ms/29.97 시간에 그림 한 장씩(한 프레임씩)을 보여준다는 의미이다. 여기서, H.264 비디오라고 하면 각 프레임마다(그림 각 장마 다) H.264 압축 방식에 의해 압축되어 있다는 의미이다.For example, suppose you have a video showing 29.97 frames per second, which means that it displays 29.97 frames per second, one picture per frame at 1000 ms / 29.97 hours. Here, H.264 video means that each frame (every picture) is compressed by H.264 compression.

H.264는 프레임을 압축함에 있어서, 프레임의 연속성이나 프레임 사이의 유사성을 판단하여 효율적으로 압축한다. 가령, IDR 프레임(101)과 P 프레임(102)이 매우 유사하다고 하면 P 프레임(102)은 IDR 프레임(101)의 변화된 부분만 추려내어 따로 압축한다. 이렇게 압축할 경우, P 프레임(102)을 그냥 압축하는 것보다 압축 효율이 높다. 이때, P 프레임과 B 프레임은 IDR 프레임을 참조한 프레임이기 때문에, IDR 프레임이 존재하지 않는다면 P 프레임과 B 프레임은 복원될 수 없다(즉, H. 264 방식으로 압축된 비디오를 압축 해제하여 프레임을 재생성할 수 없다).In compressing a frame, H.264 compresses the frame efficiently by determining the continuity of the frame or the similarity between the frames. For example, if the IDR frame 101 and the P frame 102 are very similar, the P frame 102 extracts only the changed portion of the IDR frame 101 and compresses them separately. In this case, the compression efficiency is higher than that of simply compressing the P frame 102. At this time, since the P frame and the B frame refer to the IDR frame, if the IDR frame does not exist, the P frame and the B frame cannot be recovered (that is, the frame is regenerated by decompressing the video compressed by the H.264 method). Can not).

도 2 는 본 발명에 따른 IDR 프레임을 이용한 트릭 플레이 시스템에 대한 일실시예 설명도이다.2 is a diagram illustrating an embodiment of a trick play system using an IDR frame according to the present invention.

도 2에 도시된 바와 같이, 본 발명에 따른 IDR 프레임을 이용한 트릭 플레이 시스템은, 사용자가 원하는 배속 값(S)을 입력받기 위한 배속 정보 입력부(21)와, 배속 정보 입력부(21)에 입력된 배속 값(S)을 기반으로 IDR 단위의 '전송' 혹은 '건너뜀'을 결정(전송 조건 결정)하기 위한 전송 조건 결정부(22)와, 전송하고자 하는 비디오 프레임의 개수와 데이터량을 조절하여 2배속의 IDR 단위를 생성하기 위한 IDR 단위 생성부(23)와, IDR 단위 생성부(23)에 의해 생성된 IDR 단위를 전송 조건 결정부(22)에 의해 결정된 전송 조건에 따라 사용자 단말로 전송하기 위한 전송부(24)를 포함한다. 이때, 전송부(24)는 공지의 스트리밍(Streaming) 방식으로 IDR 단위를 사용자 단말로 전송한다.As shown in FIG. 2, the trick play system using the IDR frame according to the present invention includes a speed information input unit 21 and a speed information input unit 21 for receiving a user's desired speed value S. A transmission condition determining unit 22 for determining 'transmission' or 'skipping' in IDR units (transmission condition determination) based on the double speed value S, and adjusting the number and data amount of video frames to be transmitted. The IDR unit generation unit 23 and the IDR unit generation unit 23 generating the IDR unit at the double speed are transmitted to the user terminal according to the transmission condition determined by the transmission condition determination unit 22. It includes a transmission unit 24 for the. At this time, the transmission unit 24 transmits the IDR unit to the user terminal in a known streaming (Streaming) method.

여기서, 전송 조건 결정부(22)는 배속 정보 입력부(21)에 입력된 배속 값(S)을 2로 나눈 후 1을 뺀 결과에 따라 IDR 단위의 '전송' 혹은 '건너뜀'을 결정한다. 즉, 전송 조건 결정부(22)는 배속 정보 입력부(21)에 입력된 배속 값(S)을 2로 나눈 후 1을 뺀 결과가 '0'이면 'IDR 단위만큼 전송'으로 결정하고, '0'이 아니면 '다음 IDR 프레임 위치까지 건너뜀'으로 결정하며, 배속 정보 입력부(21)에 입력된 배속 값(S)을 2로 나눈 후 1을 뺀 결과가 '0'이 될 때까지 1을 빼며 상기의 과정을 반복한다.Here, the transmission condition determining unit 22 determines the 'transfer' or 'skip' in IDR units according to the result of subtracting 1 after dividing the double speed value S input to the double speed information input unit 21 by two. That is, if the result of subtracting 1 after dividing 1 by the double speed value S inputted to the double speed information input unit 21 by 2 and subtracting 1 is '0', the transmission condition determiner 22 determines 'send by IDR unit', If not, it is determined as 'skip to the next IDR frame position', and the value 1 is subtracted until the result of subtracting 1 equals to '0' after dividing the speed value (S) input to the speed information input unit 21 by 2 and subtracting 1. Repeat the above process.

이때, 전송 조건 결정부(22)가 배속 값(S)을 2로 나눈 후 1을 빼는 이유는 IDR 단위 생성부(23)가 비디오 프레임을 처리하여 IDR 단위를 생성할 시에 2배속이 되도록 비디오 프레임을 처리하여 IDR 단위를 생성하므로 전송 조건 결정부(22)에서는 2배속에 대한 처리를 하지 않아도 되기 때문이다.In this case, the transmission condition determiner 22 divides the double speed value S by 2 and subtracts 1 from the video so that the IDR unit generator 23 processes the video frame to generate the double speed when generating the IDR unit. This is because the transmission condition determination unit 22 does not need to process the double speed because the frame is generated to generate the IDR unit.

그리고 IDR 단위 생성부(23)는 IDR 프레임 시작 위치부터 다음 IDR 프레임 시작 위치 전의 종속 프레임까지를 입력받아 두 IDR 프레임 사이에 있는 종속 프레임들 중 후반의 종속 프레임들을 제거하고, IDR 프레임 사이에 있는 종속 프레임들 중 전반의 종속 프레임들의 데이터 크기의 합이 절반을 넘지 않게 조절하여 IDR 단위를 생성한다.The IDR unit generation unit 23 receives the IDR frame start position from the IDR frame start position to the subordinate frame before the next IDR frame start position, and removes the second dependent frames among the subordinate frames between the two IDR frames, and subordinates the IDR frames. An IDR unit is generated by adjusting the sum of the data sizes of the dependent frames in the first half of the frames not more than half.

그럼, 도 1의 본 발명에 이용되는 IDR 프레임 및 종속 프레임을 기반으로 프레임을 트릭 플레이하는 과정(도 3 참조)과 본 발명에 따른 IDR 단위 생성 방법(도 4 참조)에 대해 보다 상세하게 살펴보기로 한다.Then, the process of trick-playing a frame based on the IDR frame and the dependent frame used in the present invention of FIG. 1 (see FIG. 3) and an IDR unit generation method (see FIG. 4) according to the present invention will be described in more detail. Shall be.

도 3 은 IDR 프레임 및 종속 프레임을 트릭 플레이하는 과정을 나타내는 일실시예 설명도로서, 2배속을 기준으로 하여 생성된 IDR 단위를 트릭 플레이하는 과정을 나타낸다. 이때, 한번에 '전송' 혹은 '건너뜀'을 수행하는 프레임의 한 단위를 IDR 단위라 하고, IDR 단위는 IDR 프레임 및 종속 프레임들 등으로 구성되는 것으로 가정한다.FIG. 3 is an exemplary explanatory diagram illustrating a process of trick-playing an IDR frame and a dependent frame, and illustrates a process of trick-playing an IDR unit generated based on a double speed. In this case, it is assumed that one unit of a frame that performs 'transmit' or 'skip' at one time is called an IDR unit, and the IDR unit is composed of an IDR frame and dependent frames.

여기서, 사용자가 2배속의 화면을 원할 경우, 상기 트릭 플레이 시스템이 입력받는 배속 값은 2가 된다. 그러면, 상기 트릭 플레이 시스템(특히, 전송 조건 결정부(22))은 배속 값 2를 2로 나누고, 상기 배속 값 2를 2로 나눈 결과 값 즉, 1에서 1을 뺀 결과 값이 0이 되므로, 모든 IDR 단위를 '전송'으로 결정하여, 도 3에 도시된 바와 같이 IDR 단위로 '전송'을 계속 수행한다.Here, when the user wants a double speed screen, the speed value input by the trick play system is 2. Then, the trick play system (particularly, the transmission condition determiner 22) divides the double speed value 2 by 2 and divides the double speed value 2 by 2, that is, the result of subtracting 1 from 1 becomes 0. All IDR units are determined to be 'transmit', and as shown in FIG. 3, 'transmission' is continuously performed in IDR units.

한편, 사용자가 4배속의 화면을 원할 경우, 상기 트릭 플레이 시스템이 입력받는 배속 값은 4가 된다. 그러면, 상기 트릭 플레이 시스템(특히, 전송 조건 결정부(22))은 배속 값, 4를 2로 나누고, 상기 배속 값 4를 2로 나눈 결과 값 즉, 2에서 1을 뺀 결과 값이 1이 되므로, IDR 단위를 '전송' 및 '건너뜀'을 반복 수행하는 것으로 결정하여, 도 3에 도시된 바와 같이 IDR 단위로 '전송' 및 '건너뜀'을 반복 수행한다.On the other hand, if the user wants a screen of 4x speed, the speed value input by the trick play system is 4. Then, the trick play system (particularly, the transmission condition determiner 22) divides the double speed value, 4 by 2, and divides the double speed value 4 by 2, that is, the result of subtracting 1 from 2 becomes 1. In addition, it is determined to repeatedly perform the 'transfer' and the 'skip' of the IDR unit, and repeat the 'transmit' and 'skip' in the IDR unit as shown in FIG. 3.

여기서, 만약 IDR 프레임이 30프레임마다 존재하고 2배속으로 트릭 플레이를 수행한다고 가정하면, 종래에는 '전송', '건너뜀'을 교대로 수행하여 2배속으로 트릭 플레이를 수행하였지만, 본 발명은 연속적으로 '전송' 15회, 연속적 '건너뜀' 15회를 통하여 2배속의 트릭 플레이를 수행한다.Here, assuming that IDR frames exist every 30 frames and perform trick play at twice the speed, conventionally, trick play was performed at twice the speed by alternately performing 'transfer' and 'skip', but the present invention is continuous. Performs trick play at twice the speed through 15 transfers and 15 consecutive skips.

그 이유는, 사람의 눈은 30ms의 그림 변화(초당 30프레임 컨텐츠의 경우)를 크게 인지하지 못하여 30장 중 15장을 전송하고 15장을 건너뛰어도 크게 구분하지 못하기 때문이다. 물론, IDR 프레임이 10초마다 한 장씩 존재한다면 사용자가 트릭 플레이의 부자연스러움을 인식할 수 있지만, 현재 DMB(Digital Multimedia Broadcasting) 표준에도 나타나 있듯이 IDR 프레임은 1초 이내에 한 장 이상 존재하기 때문에 사용자가 크게 부자연스러움을 인식하지 못한다. 하지만, 간혹 IDR이 비교적 큰 간격으로 존재할 경우에 배속 조절을 IDR 단위로 하면 부자연스러움이 나타날 수 있기 때문에, 본 발명은 IDR 단위를 생성하는 방식으로 이러한 부자연스러움을 최소화한다.The reason is that the human eye does not notice much of the 30 ms picture change (for 30 frames of content per second), so that 15 out of 30 pieces are skipped and 15 pieces are skipped. Of course, if there is one IDR frame every 10 seconds, the user can recognize the unnaturalness of trick play, but as the current DMB (Digital Multimedia Broadcasting) standard shows, one or more IDR frames exist within one second. It does not recognize unnaturalness greatly. However, in some cases, when IDRs are present at relatively large intervals, when the speed control is set to IDR units, unnaturalness may appear, the present invention minimizes such unnaturalness by generating IDR units.

한편, 비디오 압축(손실 압축이라고도 함)은 눈에 보이지 않는 부분을 제거하면서 압축하는 것이기 때문에 100% 복원이 되지 않는다(물론, 인간의 눈에는 100% 복원된 것처럼 보인다). 그래서, 차이점(변화된 부분)만 추출하여 압축을 하게 되면(인간의 눈에 보이지 않는 것을 제거한다고 하지만 완벽하지 못해 약간 보이는 것도 제거하게 됨) 손실량이 점차 누적되어 오류가 커지게 된다.Video compression (also known as lossy compression), on the other hand, is not 100% reconstructed because it compresses while removing invisible parts (of course, it appears to be 100% reconstructed by the human eye). Thus, if you extract only the differences (changes) and compress them (removing what is invisible to the human eye, but removing something that is not perfect and slightly visible), the amount of loss gradually accumulates and the error increases.

이러한 오류를 최소화하기 위해서는 일반적으로, 기준 프레임을 주기적으로 넣어주는 방식을 사용하고 있다. 즉, 첫 장은 기준으로 하고 이후 10장은 차이점만 압축하는 방식, 그리고 그 다음 장은 다시 기준 프레임으로 하고, 그 이후 10장은 다시 차이점만 압축하는 방식을 반복한다. 일예로, MPEG-2(Moving Picture Experts Group-2)에서는 15장마다 이러한 과정을 반복하고 MPEG-4에서는 30장마다 이러한 과정을 반복한다.In order to minimize such an error, a method of periodically inserting a reference frame is generally used. That is, the first chapter is used as a reference, the next 10 are compressed only with differences, and the next chapter is used as a reference frame again. For example, this process is repeated every 15 sheets in Moving Picture Experts Group-2 (MPEG-2), and is repeated every 30 sheets in MPEG-4.

만약, 파일을 2배속으로 재생을 한다면, 한 장씩 건너뛰어 재생시키는 것이 2배속 재생의 가장 효과적인 방법일 수 있다. 하지만, 한 장씩 건너뛰어 2배속 재생을 시킬 경우, IDR 프레임이 제거된다면 IDR 프레임을 참조하여 압축된 P 프레임 및 B 프레임은 복원될 수 없게 된다. 일예로, 'IDR, P, P, B, B, IDR, P, B, B, B, IDR'과 같이 구성된 비디오에서 중앙의 IDR 프레임이 제거되면, 제거된 IDR 프레임과 다음 IDR 프레임 사이에 있는 P, B, B, B는 쓸모없는 압축 프레임이 되어 재생이 불가능하게 된다.If a file is played at twice the speed, playing the file one by one may be the most effective method of double speed playback. However, when double-speed playback is skipped one by one, if the IDR frame is removed, the P frame and the B frame compressed with reference to the IDR frame cannot be recovered. For example, if a central IDR frame is removed from a video composed of 'IDR, P, P, B, B, IDR, P, B, B, B, IDR', the IDR frame between the removed IDR frame and the next IDR frame P, B, B, and B become useless compressed frames, and playback is impossible.

그러나 IDR 단위로 재생을 하게 되면 이렇게 IDR 프레임이 제거되는 문제점을 해결할 수 있을 것이다. 가령, 비디오가 (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B)를 2배속으로 재생한다고 할 경우 IDR, P, B, B를 하나의 단위로 보아서 1단위, 2단위, 3단위로 생각하면, 1단위, 3단위만 보여주는 방식으로 해서 2배속으로 재생할 수 있다. 이러한 방식은 참조 프레임이 누락되어서 발생하는 문제점을 손쉽게 방지할 수 있다. 하지만, IDR 프레임이 나오는 빈도가 낮을 경우, 예를 들어, IDR 프레임이 1초에 1회가 나올 경우에(일반적으로 IDR 프레임은 0.5초마다 1회 나옴) 1초 동안에는 그림이 부드럽게 나오고 갑자기 1초 분량이 사라진 이후에 다시 1초 동안 부드럽게 나오고, 또 1초 분량이 사라지는 경우가 발생할 수 있다.However, playing in IDR unit may solve the problem of removing the IDR frame. For example, suppose a video plays (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B) at twice the speed. In terms of units of 1, 2, and 3 units, it can be reproduced at double speed by displaying only 1 unit or 3 units. This approach can easily prevent problems caused by missing reference frames. However, if the frequency of IDR frames is low, for example, once IDR frames appear once per second (typically IDR frames appear once every 0.5 seconds), the picture appears smoothly and suddenly for 1 second. After the volume disappears, it may come out again for 1 second, and the 1 second volume may disappear.

따라서 본 발명은 원본 비디오가 (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B)와 같이 압축되어 있을 경우, 이를 2배속 재생시에 (IDR, P, B, B), (버림), (IDR, P, B, B), (버림)의 형태로 재생하지 않고, (IDR, P), (IDR, P), (IDR, P), (IDR, P)와 같이 재생하는 방법을 제안한다.Therefore, in the present invention, the original video is compressed as (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B), (IDR, P, B, B). If present, do not play them in the form of (IDR, P, B, B), (Discard), (IDR, P, B, B), (Discard) during double-speed playback, and (IDR, P), (IDR). , P), (IDR, P), (IDR, P).

그럼, IDR 그룹이 (IDR, P, B, B, P, B, B, P, B, B)와 같이 압축되어 있을 경우, 이를 IDR 단위로 어떻게 나눌 것이냐의 문제가 존재한다.Then, if the IDR group is compressed as (IDR, P, B, B, P, B, B, P, B, B), there is a problem of how to divide it into units of IDR.

이때, IDR 단위로 나누는 방법 중 가장 쉬운 방법은 IDR 그룹(IDR, P, B, B, P, B, B, P, B, B)에서 앞부분(IDR, P, B, B, P)을 추려내고 뒷부분(B, B, P, B, B)은 버리는 것이다. 이렇게 IDR 단위를 나누게 되면(앞부분 5프레임, 뒷부분 5프레임), 프레임 수로 따져보면 절반으로 나누어진 것이 되지만, 실질적으로는 절반이라고 할 수 없다. 그 이유는 P 프레임과 B 프레임은 IDR 프레임과의 차이점만 압축했으므로 데이터 양이 IDR 프레임보다 적기 때문이다. 즉, IDR 프레임을 압축한 데이터가 50KByte라고 하면, P 프레임의 경우는 20KBytes, B 프레임의 경우는 10KBytes 정도라는 의미이다. 따라서 실질적으로 나누어진 IDR 단위의 데이터 양으로는 앞의 프레임 5개(IDR, P, B, B, P)는 총 110KBytes(50 + 20 + 10 + 10 + 20)이고, 뒤의 프레임 5개(B, B, P, B, B)는 총 60KByets(10 + 10 + 20 + 10 + 10)이다. 이렇게 나누어진 IDR 단위를 전송하게 되면 서버가 클라이언트에게 보내는 데이터 전송률이 올라가게 되는 문제점이 있다. 왜냐하면, 원본 비디오는 10장 보내는데 총 110 + 60 KBytes(1장당 평균 160/10KBytes)였는데, 2배속으로 재생하면 5장 전송에 110KBytes(1장당 평균 110/5KBytes)가 되어 평균 전송률이 크게 올라가 버리는 문제점이 생긴다. 따라서 단순히 10장을 5장씩 나눌 것이 아니라 전송률도 고려하여 자르는 것이 중요하다.At this time, the easiest way of dividing by IDR unit is to extract the first part (IDR, P, B, B, P) from IDR group (IDR, P, B, B, P, B, B, P, B, B). Throw out the back part (B, B, P, B, B). If you divide the IDR unit (5 frames in the front, 5 frames in the back), the number of frames is divided in half, but it is not actually half. This is because the P frame and the B frame only compress the difference from the IDR frame, so the amount of data is smaller than the IDR frame. In other words, if the compressed data of the IDR frame is 50 KByte, it means that 20 KBytes for P frame and 10 KBytes for B frame. Therefore, the actual amount of data in IDR units divided by 5 frames in the front (IDR, P, B, B, P) totals 110KBytes (50 + 20 + 10 + 10 + 20), and 5 frames in the back ( B, B, P, B, B) total 60 KByets (10 + 10 + 20 + 10 + 10). When the divided IDR unit is transmitted, the data rate that the server sends to the client increases. Because the original video is sent 10 times, the total was 110 + 60 KBytes (average of 160 / 10KBytes per sheet), but when playing at double speed, it becomes 110KBytes (average of 110 / 5KBytes per sheet) for 5 transmissions, and the average transfer rate increases significantly. This occurs. Therefore, it is important to cut not only 10 sheets by 5 but also by considering the transmission rate.

그럼, 도 4를 참조하여 IDR 단위를 생성하는 방법에 대해 보다 상세하게 살 펴보기로 한다.Next, a method of generating IDR units will be described in more detail with reference to FIG. 4.

도 4 는 본 발명에 따른 트릭 플레이를 위한 IDR 단위 생성 방법에 대한 일실시예 흐름도로서, IDR 프레임과 다음 IDR 프레임 사이에 15장의 프레임이 있다고 가정하여 이를 F0(IDR 프레임), F1 내지 F15(종속 프레임), F16(다음 IDR 프레임)으로 설명하기로 한다.FIG. 4 is a flowchart illustrating a method of generating an IDR unit for trick play according to the present invention, assuming that there are 15 frames between an IDR frame and a next IDR frame, and F0 (IDR frame) and F1 to F15 (dependent). Frame) and F16 (next IDR frame).

여기서, 트릭 플레이 시스템은 IDR 단위를 생성하는데 있어서, 서버에 부하를 주지 않고 원본 컨텐츠의 전송률을 유지하기 위해 IDR 단위로 생성할 프레임들의 데이터 크기가 IDR 프레임(F0)부터 다음 IDR 프레임(F16) 전까지의 프레임들의 데이터 크기의 절반 정도가 되게 한다. 이때, 트릭 플레이 시스템은 IDR 단위로 생성할 프레임으로 IDR 프레임을 포함한 전반 프레임을 취하고 후반 프레임을 제거하는데, 이에 대해 연산을 효율적으로 수행하기 위해서 스택을 사용하기로 한다(스택을 사용하면 후반 프레임부터 역순으로 제거할 수 있으므로 보다 효율적이다).Here, the trick play system generates IDR units so that the data size of frames to be generated in IDR units is maintained from IDR frame F0 to the next IDR frame F16 in order to maintain the transmission rate of the original content without putting a load on the server. It is about half of the data size of the frames. At this time, the trick play system takes the first half frame including the IDR frame and removes the second half frame as a frame to be generated in units of IDR, and in order to efficiently perform the operation, the stack is used (from the second half of the stack, More efficient because they can be removed in reverse order).

먼저, 트릭 플레이 시스템은 입력된 IDR 프레임의 시작 위치(IPos)를 검색하기 위해 IDR 프레임을 포함한 연속된 프레임의 개수(N1)와 IDR 프레임을 포함한 연속된 압축 프레임의 크기(S1)를 초기화한다(N1 = 0, S1 = 0)(401).First, the trick play system initializes the number N1 of consecutive frames including the IDR frame and the size S1 of the consecutive compressed frames including the IDR frame in order to retrieve the start position IPos of the input IDR frame ( N1 = 0, S1 = 0) (401).

이후, 트릭 플레이 시스템은 프레임의 시작 위치(F1)를 검색하여(402), 현재 프레임이 IDR 프레임(F16)인지를 확인한다(403). 이때, 트릭 플레이 시스템은 "ISO 14496-10"에서 명시된 프레임의 시작 위치를 검색하는 방식에 따라 프레임의 시작 위치(F1)를 검색한다.Thereafter, the trick play system searches (402) the start position (F1) of the frame and checks whether the current frame is the IDR frame (F16) (403). At this time, the trick play system searches for the start position F1 of the frame according to a method of searching for the start position of the frame specified in "ISO 14496-10".

상기 확인 결과(403), 현재 프레임이 IDR 프레임(F16)이 아닐 경우 트릭 플레이 시스템은 현재 프레임까지의 개수(N1)와 크기(S1)에 대한 정보를 누적하여 스택에 저장하고(N1 = N1 + 1, S1 = S1 + 현재 프레임 크기)(404), 다음 프레임을 검색하여(405) 검색된 프레임이 IDR 프레임(F16)일 때까지 상기 과정(403 내지 405)을 반복한다.As a result of the check 403, when the current frame is not the IDR frame F16, the trick play system accumulates information on the number N1 and the size S1 up to the current frame and stores it on the stack (N1 = N1 + 1, S1 = S1 + current frame size) 404, searching for the next frame (405) and repeating steps 403 to 405 until the retrieved frame is an IDR frame F16.

한편, 상기 확인 결과(403), 현재 프레임이 IDR 프레임(F16)일 경우 트릭 플레이 시스템은 스택에 저장되어 있는 IDR 프레임(F0)과 다음 IDR 프레임(F16) 사이의 프레임들 중 절반의 프레임을 수행시키기 위하여 제거 프레임 개수 "N2"를 N1/2로 설정하고, 제거 프레임들의 누적된 데이터 크기(S2)를 초기화한다(N2 = N1/2, S2 = 0)(406).On the other hand, if the check result 403, the current frame is the IDR frame (F16), the trick play system performs a half of the frames between the IDR frame (F0) and the next IDR frame (F16) stored in the stack The erase frame number "N2" is set to N1 / 2, and the accumulated data size S2 of the erase frames is initialized (N2 = N1 / 2, S2 = 0) (406).

여기서, 트릭 플레이 시스템이 제거 프레임의 개수 "N2"를 N1/2로 설정하는 이유는 스택에 저장된 프레임들의 절반을 수행시키기 위함이다. 이때, N1의 값(F0 내지 F15의 프레임 개수)은 16이고, N2(N1의 절반)의 값은 8이 된다.Here, the reason why the trick play system sets the number of removal frames "N2" to N1 / 2 is to perform half of the frames stored in the stack. At this time, the value of N1 (number of frames from F0 to F15) is 16, and the value of N2 (half of N1) is 8.

이후, 트릭 플레이 시스템은 스택에 저장되어 있는 전체 프레임(F0 내지 F15) 중 후반 프레임을 하나 제거하고 제거 프레임의 개수 'N2"를 하나 감소시키며(N2 = N2-1)(408), 해당 후반 프레임(F15)의 데이터 크기(S2)를 누적하여 저장하는 과정(S2 = S2 + 프레임 크기)(409)을 제거 프레임의 개수 'N2"가 0이 될 때까지 반복 수행한다(407). 이때, N2의 값은 8이므로 "407" 내지 "409"의 과정은 총 8회 수행된다.After that, the trick play system removes one of the second frames among the entire frames F0 to F15 stored in the stack, and decreases the number of removed frames 'N2' by one (N2 = N2-1) 408, and corresponding second frames. The process of accumulating and storing the data size S2 of (F15) (S2 = S2 + frame size) 409 is repeatedly performed until the number of removed frames 'N2' becomes 0 (step 407). At this time, since the value of N2 is 8, the process of "407" to "409" is performed a total of eight times.

이후, 트릭 플레이 시스템은 전반 프레임(F0 내지 F7) 중 제거된 후반 프레 임(F8 내지 F15)을 참조하고 있는 프레임이 존재하는지를 확인하여(410), 후반 프레임(F8 내지 F15)을 참조하지 않으면 전반 프레임을 그대로 두고, 후반 프레임(F8 내지 F15)을 참조하고 있다면 참조를 잃어버린 해당 전반 프레임을 제거하고 제거 프레임들의 누적 데이터 크기(S2)를 갱신한다(411).Thereafter, the trick play system checks whether there is a frame referring to the removed late frames F8 to F15 among the first half frames F0 to F7 (410), and if the second half frames F8 to F15 are not referenced, If the frame is left as it is, and the latter frames F8 to F15 are referred to, the corresponding first half frame that has lost the reference is removed and the cumulative data size S2 of the removed frames is updated (411).

이어서, 트릭 플레이 시스템은 제거 프레임들의 누적 데이터 크기(S2)가 IDR 프레임(F0)부터 다음 IDR 프레임(F16) 전까지의 전체 프레임(F0 내지 F15)의 데이터 크기(S1)의 절반을 초과하는지를 확인하여(S1 < S2 * 2)(412)(즉, 잔여 프레임들의 데이터 크기가 전체 프레임(F0 내지 F15)의 데이터 크기의 절반 미만인지를 확인하여), 제거 프레임들의 누적 데이터 크기(S2)가 IDR 프레임(F0)부터 다음 IDR 프레임(F16) 전까지의 전체 프레임(F0 내지 F15)의 데이터 크기(S1)의 절반을 초과하면(즉, 잔여 프레임들의 데이터 크기가 전체 프레임(F0 내지 F15)의 데이터 크기의 절반 미만이면) 서버에 부하를 주지 않고 원본 컨텐츠의 전송률을 유지할 수 있다고 판단하여 IDR 프레임(F0)부터 조건을 만족시킨 프레임까지를 IDR 단위로 생성한다(413).Then, the trick play system checks whether the cumulative data size S2 of the elimination frames exceeds half of the data size S1 of the entire frames F0 to F15 from the IDR frame F0 to the next IDR frame F16. (S1 < S2 * 2) 412 (i.e., verifying that the data size of the remaining frames is less than half the data size of the entire frames F0 to F15), the cumulative data size S2 of the eliminating frames is the IDR frame. If half of the data size S1 of the entire frames F0 to F15 from F0 to the next IDR frame F16 is exceeded (that is, the data size of the remaining frames is equal to the data size of the entire frames F0 to F15). If it is less than half), it is determined that the transmission rate of the original content can be maintained without putting a load on the server, and then, from IDR frame F0 to a frame that satisfies the condition is generated in IDR units (413).

한편, 상기 확인 결과(412), 제거 프레임들의 데이터 크기(S2)가 IDR 프레임(F0)부터 다음 IDR 프레임(F16) 전까지의 전체 프레임(F0 내지 F15)의 데이터 크기(S1)의 절반 이하이면(즉, 잔여 프레임들의 데이터 크기가 전체 프레임(F0 내지 F15)의 데이터 크기의 절반 이상이면), 트릭 플레이 시스템은 잔여 전반 프레임을 후반부터 하나씩 제거하여 제거 프레임들의 누적 데이터 크기(S2)를 갱신한 후에(414) "412" 과정으로 진행하여 반복 수행한다.On the other hand, if the check result 412, the data size (S2) of the removal frame is less than half of the data size (S1) of the entire frame (F0 to F15) from the IDR frame (F0) to the next IDR frame (F16) ( That is, if the data size of the remaining frames is more than half of the data size of the entire frames F0 to F15, the trick play system removes the remaining first half frames one by one from the second half to update the cumulative data size S2 of the removed frames. (414) It proceeds to "412" process and repeats.

상기와 같은 트릭 플레이를 위한 IDR 단위 생성 방법에서 두 IDR 프레임 사이에 있는 프레임들 중에 후반 프레임들을 제거하는 것은 생성할 IDR 단위가 근사적으로 2배속이 되도록 하기 위한 것이고, 전반 프레임들의 데이터 크기의 합이 전체 프레임들의 데이터 크기의 절반을 넘지 않도록 조절하는 것은 생성할 IDR 단위의 전송률이 원본 컨텐츠의 전송률을 넘지 않게 하려는 것이다.In the method of generating an IDR unit for the trick play as described above, removing the latter frames among the frames between the two IDR frames is such that the IDR unit to be generated is approximately doubled and the sum of the data sizes of the first half frames. Adjusting not to exceed half of the data size of these entire frames is to ensure that the rate of IDR units to be generated does not exceed the rate of original content.

도 5 는 본 발명에 따른 IDR 프레임을 이용한 트릭 플레이 방법에 대한 일실시예 흐름도이다.5 is a flowchart illustrating a trick play method using an IDR frame according to the present invention.

먼저, 트릭 플레이 시스템은 사용자로부터 원하는 배속 값(S)을 입력받고(501), 입력받은 배속 값(S)을 기반으로 전송 조건을 결정한다(502).First, the trick play system receives a desired speed value S from the user (501), and determines a transmission condition based on the input speed value S (S502).

즉, 트릭 플레이 시스템은 입력받은 배속 값(S)을 2로 나누고(N = S/2)(503), 배속 값(S)을 2로 나눈 결과(N)에서 1을 뺀다(N = N - 1)(504). 그리고 트릭 플레이 시스템은 N의 값이 '0'인지를 확인하여(505), N의 값이 '0'이면 'IDR 단위만큼 전송'으로 결정하고(506), N의 값이 '0'이 아니면 '다음 IDR 프레임 위치까지 건너뜀'으로 결정한다(507).That is, the trick play system divides the input double speed value (S) by 2 (N = S / 2) (503) and subtracts 1 from the result (N) of dividing the double speed value (S) by 2 (N = N- 1) 504. The trick play system checks whether the value of N is '0' (505), and if the value of N is '0', decides to transmit by IDR unit (506), and if the value of N is not '0' It is determined as 'skip to the next IDR frame position' (507).

이후, 트릭 플레이 시스템은 '전송' 또는 '건너뜀'을 수행할 IDR 단위를 생성한다(508).Thereafter, the trick play system generates an IDR unit to perform 'transfer' or 'skip' (508).

여기서, 트릭 플레이 시스템이 IDR 단위를 생성하는 과정은 상기 도 4에서 상세하게 살펴보았으므로 구체적으로 설명하지 않기로 한다.Here, the process of generating the IDR unit by the trick play system has been described in detail with reference to FIG. 4 and will not be described in detail.

이후, 트릭 플레이 시스템은 상기 "506" 혹은 "507" 단계의 결정 결과에 따 라 상기 "508" 단계에서 생성된 IDR 단위를 공지의 스트리밍(Streaming) 방식으로 사용자 단말에 전송한다(509).Thereafter, the trick play system transmits the IDR unit generated in step “508” to the user terminal in a known streaming method according to the determination result of step “506” or “507” (509).

전술한 바와 같이, 본 발명은 IDR 단위 생성 과정에서 2배속의 IDR 단위를 생성함으로서 자동적으로 2배속으로 배속을 조절하고(1단계 배속 조절), 전송 과정에 전송 조건에 따라 "연속 전송"(2배속의 경우) 혹은 "전송-건너뜀 반복"(4배속의 경우) 등을 통하여 다시 배속을 조절(2단계 배속 조절)하는 것을 특징으로 한다.As described above, the present invention automatically generates a double speed IDR unit in the process of generating an IDR unit, and automatically adjusts the double speed at a double speed (step 1 double speed control), and according to the transmission conditions in the transmission process, "continuous transmission" (2 In the case of double speed) or "transfer-skip repetition" (for 4 times speed), etc., the speed is adjusted again (two speed control).

상기에서는 본 발명에 따른 트릭 플레이를 위한 IDR 단위 생성 방법을 트릭 플레이 시스템에 적용하여 설명하였지만, 본 발명은 이에 한정되지 않고 VCR(Video Cassette Recorder)과 같은 시스템 등에도 적용될 수 있다.In the above, the method of generating an IDR unit for trick play according to the present invention has been described by applying the trick play system. However, the present invention is not limited thereto and may be applied to a system such as a video cassette recorder (VCR).

한편, 전술한 바와 같은 본 발명의 방법은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체(정보저장매체)에 저장되고, 컴퓨터에 의하여 판독되고 실행됨으로써 본 발명의 방법을 구현한다. 그리고 상기 기록매체는 컴퓨터가 판독할 수 있는 모든 형태의 기록매체를 포함한다.On the other hand, the method of the present invention as described above can be written in a computer program. And the code and code segments constituting the program can be easily inferred by a computer programmer in the art. In addition, the written program is stored in a computer-readable recording medium (information storage medium), and read and executed by a computer to implement the method of the present invention. The recording medium may include any type of computer readable recording medium.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the drawings.

본 발명은 H.264 VoD(Video on Demand) 시스템 등에 이용될 수 있다.The present invention can be used in an H.264 VoD (Video on Demand) system.

도 1 은 본 발명에 이용되는 IDR 프레임 및 종속 프레임을 나타내는 일실시예 설명도, 1 is a diagram illustrating an embodiment of an IDR frame and a dependent frame used in the present invention;

도 2 는 본 발명에 따른 IDR 프레임을 이용한 트릭 플레이 시스템에 대한 일실시예 설명도,2 is a diagram illustrating an embodiment of a trick play system using an IDR frame according to the present invention;

도 3 은 IDR 프레임 및 종속 프레임을 트릭 플레이하는 과정을 나타내는 일실시예 설명도,3 is an exemplary explanatory diagram illustrating a process of trick-playing an IDR frame and a dependent frame;

도 4 는 본 발명에 따른 트릭 플레이를 위한 IDR 단위 생성 방법에 대한 일실시예 흐름도,4 is a flowchart illustrating an embodiment of a method of generating an IDR unit for trick play according to the present invention;

도 5 는 본 발명에 따른 IDR 프레임을 이용한 트릭 플레이 방법에 대한 일실시예 흐름도이다.5 is a flowchart illustrating a trick play method using an IDR frame according to the present invention.

* 도면의 주요 부분에 대한 부호 설명* Explanation of symbols on the main parts of the drawing

21 : 배속 정보 입력부 22 : 전송 조건 결정부21: double speed information input unit 22: transmission condition determination unit

23 : IDR 단위 생성부 24 : 전송부23: IDR unit generation unit 24: transmission unit

Claims (15)

트릭 플레이 시스템에 있어서,In the trick play system, 배속 정보를 입력받기 위한 배속 정보 입력 수단;Double speed information input means for receiving double speed information; 상기 입력된 배속 정보를 기반으로 IDR(Instantaneous Decoding Refresh) 단위의 전송 조건을 결정하기 위한 전송 조건 결정 수단;Transmission condition determining means for determining a transmission condition in units of Instantaneous Decoding Refresh (IDR) based on the input double speed information; IDR(Instantaneous Decoding Refresh) 프레임과 상기 IDR 프레임과의 차이민점으로 압축된 P 프레임 및 B 프레임의 종속 프레임들로 구성된 전체 프레임을 상기 트릭 플레이를 위해 상기 IDR 프레임과 상기 종속 프레임들 중 상기 IDR 프레임부터 총 데이터 양의 절반이 되는 프레임까지를 이용하여 IDR 단위를 생성하기 위한 IDR 단위 생성 수단; 및An IDR frame and an IDR frame among the dependent frames are configured for the trick play of the entire frame including a P-frame and a B-frame, which are compressed by the difference between the Instantaneous Decoding Refresh (IDR) frame and the IDR frame. IDR unit generation means for generating an IDR unit using up to a frame which is half of the total data amount; And 상기 IDR 단위 생성 수단에 의해 생성된 IDR 단위를 상기 전송 조건 결정 수단에 의해 결정된 전송 조건에 따라 외부의 사용자 단말로 전송하기 위한 전송 수단Transmitting means for transmitting the IDR unit generated by the IDR unit generating means to an external user terminal according to the transmission condition determined by the transmission condition determining means 을 포함하는 트릭 플레이 시스템.Trick play system that includes. 제 1 항에 있어서,The method of claim 1, 상기 전송 조건 결정 수단은,The transmission condition determining means, 상기 배속 정보 입력 수단을 통하여 입력된 배속 값을 2로 나눈 값에서 1을 뺀 결과에 따라 IDR 단위의 '전송' 혹은 '건너뜀'을 결정하는 것을 특징으로 하는 트릭 플레이 시스템.And determining the transmission or skipping in units of IDR based on a result of subtracting 1 from a value of a double speed inputted through the double speed information input unit. 제 2 항에 있어서,The method of claim 2, 상기 전송 조건은,The transmission condition is, 상기 배속 값을 2로 나눈 결과에서 1을 뺀 결과가 0인 경우, 'IDR 단위만큼 전송'으로 결정하고,If the result of subtracting 1 from the result of dividing the double speed value by 2 is 0, it is determined as 'send by IDR unit', 상기 배속 값을 2로 나눈 결과에서 1을 뺀 결과가 1인 경우, 'IDR 단위만큼 건너뜀'으로 결정하는 것을 특징으로 하는 트릭 플레이 시스템.And a result of subtracting 1 from a result of dividing the double speed value by 2, wherein the value is 1 and skips by IDR units. 삭제delete 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,The method according to any one of claims 1 to 3, 상기 IDR 단위 생성 수단은,The IDR unit generating means, 스택(Stack)을 사용하여 상기 전체 프레임 중 후반의 종속 프레임부터 제거하는 것을 특징으로 하는 트릭 플레이 시스템.Trick play system, characterized in that to remove from the dependent frame of the second half of the entire frame using a stack (Stack). 트릭 플레이 방법에 있어서,In the trick play method, 배속 정보를 입력받는 배속 정보 입력 단계;A speed information input step of receiving speed information; 상기 입력받은 배속 정보를 기반으로 IDR(Instantaneous Decoding Refresh) 단위의 전송 조건을 결정하는 전송 조건 결정 단계;A transmission condition determining step of determining a transmission condition in an Instantaneous Decoding Refresh (IDR) unit based on the input double speed information; IDR(Instantaneous Decoding Refresh) 프레임과 상기 IDR 프레임과의 차이민점으로 압축된 P 프레임 및 B 프레임의 종속 프레임들로 구성된 전체 프레임을 상기 트릭 플레이를 위해 상기 IDR 프레임과 상기 종속 프레임들 중 상기 IDR 프레임부터 총 데이터 양의 절반이 되는 프레임까지를 이용하여 IDR 단위를 생성하는 IDR 단위 생성 단계; 및An IDR frame and an IDR frame among the dependent frames are configured for the trick play of the entire frame including a P-frame and a B-frame, which are compressed by the difference between the Instantaneous Decoding Refresh (IDR) frame and the IDR frame. An IDR unit generation step of generating an IDR unit using frames up to half of the total data amount; And 상기 IDR 단위 생성 단계에서 생성된 IDR 단위를 상기 전송 조건 결정 단계에서 결정된 전송 조건에 따라 사용자 단말로 전송하는 단계Transmitting the IDR unit generated in the IDR unit generation step to the user terminal according to the transmission condition determined in the transmission condition determination step. 를 포함하는 트릭 플레이 방법.The trick play method comprising a. 제 6 항에 있어서,The method of claim 6, 상기 전송 조건 결정 단계는,The transmission condition determining step, 상기 배속 정보 입력 단계에서 입력된 배속 값을 2로 나눈 값에서 1을 뺀 결과에 따라 IDR 단위의 '전송' 혹은 '건너뜀'을 결정하는 것을 특징으로 하는 트릭 플레이 방법.And determining 'transmit' or 'skip' in IDR units according to a result of subtracting 1 from a value of a double speed inputted in the double speed information input step. 제 7 항에 있어서,The method of claim 7, wherein 상기 전송 조건은,The transmission condition is, 상기 배속 값을 2로 나눈 결과에서 1을 뺀 결과가 0인 경우, 'IDR 단위만큼 전송'으로 결정하고, If the result of subtracting 1 from the result of dividing the double speed value by 2 is 0, it is determined as 'send by IDR unit', 상기 배속 값을 2로 나눈 결과에서 1을 뺀 결과가 1인 경우, 'IDR 단위만큼 건너뜀'으로 결정하는 것을 특징으로 하는 트릭 플레이 방법.If the result of subtracting 1 from the result of dividing the double speed value by 2 is 1, the trick play method characterized in that it is determined as "skip by IDR unit." 삭제delete 제 6 항 내지 제 8 항 중 어느 한 항에 있어서,The method according to any one of claims 6 to 8, 상기 IDR 단위 생성 단계는,The IDR unit generation step, 제 1 IDR 프레임으로부터 다음의 제 2 IDR 프레임 전까지의 전체 프레임 중에서 데이터 양의 절반이 되도록 후반 종속 프레임들을 제거하는 제 1 프레임 제거 단계;A first frame removing step of removing the late dependent frames such that half of the data amount is among the entire frames from the first IDR frame to the next second IDR frame; 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 전체 프레임의 데이터 크기의 절반 미만인지를 확인하여 해당 잔여 프레임을 2배속 기반의 IDR 단위로 생성하는 생성 단계; 및Generating a residual frame in double-speed-based IDR units by checking whether the data size of the remaining frame removed from the entire frame is less than half of the data size of the entire frame; And 상기 제 1 프레임 제거 단계에서 제거되고 남은 잔여 프레임 중에 상기 제거된 후반 종속 프레임을 참조하고 있는 프레임을 제거한 후에 상기 생성 단계로 진행하는 제 2 프레임 제거 단계A second frame removing step of proceeding to the generating step after removing the frame referring to the removed late dependent frame among the remaining frames that are removed in the first frame removing step; 를 더 포함하는 트릭 플레이 방법.The trick play method comprising more. 제 10 항에 있어서,The method of claim 10, 상기 제 1 프레임 제거 단계는,The first frame removing step, 스택(Stack)을 사용하여 상기 전체 프레임 중 절반의 후반 종속 프레임부터 제거하는 것을 특징으로 하는 트릭 플레이 방법.And using a stack to remove half of the dependent frames from the latter half of the entire frame. 트릭 플레이(Trick Play)를 위한 IDR(Instantaneous Decoding Refresh) 단위 생성 방법에 있어서,In the method of generating an Instantaneous Decoding Refresh (IDR) unit for trick play, 제 1 IDR 프레임으로부터 상기 제 1 IDR 프레임에 후속하는 P 프레임들 및 B 프레임들의 종속 프레임들 다음의 제 2 IDR 프레임 전까지의 전체 프레임 중에서 데이터 양이 절반이 되도록 후반 종속 프레임들을 제거하는 제 1 프레임 제거 단계; 및A first frame elimination that eliminates late dependent frames such that the amount of data is half of the entire frame from the first IDR frame to the second IDR frame following the first and second dependent frames of the P and B frames step; And 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 상기 전체 프레임의 데이터 크기의 절반 미만인지를 확인하여 해당 잔여 프레임을 IDR 단위로 생성하는 IDR 단위 생성 단계An IDR unit generation step of generating a corresponding residual frame in IDR units by checking whether the data size of the remaining remaining frames removed from the entire frames is less than half of the data size of the entire frames 를 포함하는 IDR 단위 생성 방법.IDR unit generation method comprising a. 제 12 항에 있어서,The method of claim 12, 상기 제 1 프레임 제거 단계에서 제거되고 남은 잔여 프레임 중에 상기 제거된 후반 종속 프레임을 참조하고 있는 프레임을 제거한 후에 상기 IDR 단위 생성 단계로 진행하는 제 2 프레임 제거 단계A second frame removing step of proceeding to generating the IDR unit after removing a frame referring to the removed late dependent frame among the remaining remaining frames removed in the first frame removing step; 를 더 포함하는 IDR 단위 생성 방법.IDR unit generation method further comprising. 제 12 항 또는 제 13 항에 있어서,The method according to claim 12 or 13, 상기 IDR 단위 생성 단계는,The IDR unit generation step, 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 상기 전체 프레임의 데이터 크기의 절반 미만인지를 확인하는 확인 단계;A checking step of checking whether a data size of the remaining remaining frames removed from the entire frame is less than half of the data size of the entire frame; 상기 확인 단계의 확인 결과, 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 상기 전체 프레임의 데이터 크기의 절반 이상이면 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임 중에서 후반의 프레임을 추가적으로 제거한 후에 상기 확인 단계로 진행하는 제 3 프레임 제거 단계; 및If the data size of the remaining frame removed from the entire frame is more than half of the data size of the entire frame, as a result of the checking of the checking step, after removing the second frame from the remaining remaining frame and additionally removing the second frame Removing the third frame to proceed to; And 상기 확인 단계의 확인 결과, 상기 전체 프레임 중에서 제거되고 남은 잔여 프레임의 데이터 크기가 상기 전체 프레임의 데이터 크기의 절반 미만이면 해당 잔여 프레임을 IDR 단위로 생성하는 단계If the data size of the remaining remaining frames removed from the entire frame is less than half of the data size of the entire frame as a result of the checking step, generating the corresponding residual frame in IDR units 를 포함하는 IDR 단위 생성 방법.IDR unit generation method comprising a. 제 14 항에 있어서,The method of claim 14, 상기 제 1 프레임 제거 단계는,The first frame removing step, 스택(Stack)을 사용하여 상기 전체 프레임 중 절반의 후반 종속 프레임부터 제거하는 것을 특징으로 하는 IDR 단위 생성 방법.A method of generating an IDR unit according to claim 1, wherein the second subframe of the half of the entire frames is removed using a stack.
KR1020070099982A 2006-12-04 2007-10-04 Method for forming IDR unit for trick play, and Trick play system and method using that KR100914318B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US11/949,746 US8483551B2 (en) 2006-12-04 2007-12-03 Method for generating double-speed IDR-unit for trick play, and trick play system and method using the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060121275 2006-12-04
KR20060121275 2006-12-04

Publications (2)

Publication Number Publication Date
KR20080051025A KR20080051025A (en) 2008-06-10
KR100914318B1 true KR100914318B1 (en) 2009-08-27

Family

ID=39806169

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070099982A KR100914318B1 (en) 2006-12-04 2007-10-04 Method for forming IDR unit for trick play, and Trick play system and method using that

Country Status (1)

Country Link
KR (1) KR100914318B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020014857A (en) * 2000-08-19 2002-02-27 구자홍 A system for video skimming using shot segmentation information
KR20030008997A (en) * 2001-07-21 2003-01-29 삼성전자 주식회사 Apparatus and method for searching a broadcasting signal using storage medium in the television unit
WO2005050999A1 (en) * 2003-11-18 2005-06-02 Koninklijke Philips Electronics N.V. Reproduction of a trick play signal
KR20060017769A (en) * 2003-05-05 2006-02-27 톰슨 라이센싱 Forward trick modes on non-progressive video using special groups of pictures

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020014857A (en) * 2000-08-19 2002-02-27 구자홍 A system for video skimming using shot segmentation information
KR20030008997A (en) * 2001-07-21 2003-01-29 삼성전자 주식회사 Apparatus and method for searching a broadcasting signal using storage medium in the television unit
KR20060017769A (en) * 2003-05-05 2006-02-27 톰슨 라이센싱 Forward trick modes on non-progressive video using special groups of pictures
WO2005050999A1 (en) * 2003-11-18 2005-06-02 Koninklijke Philips Electronics N.V. Reproduction of a trick play signal

Also Published As

Publication number Publication date
KR20080051025A (en) 2008-06-10

Similar Documents

Publication Publication Date Title
US10547850B2 (en) Audio splitting with codec-enforced frame sizes
US10623785B2 (en) Streaming manifest quality control
US8483551B2 (en) Method for generating double-speed IDR-unit for trick play, and trick play system and method using the same
US9038121B2 (en) Bit-rate constrained trick play through stream switching and adaptive streaming
KR20030014709A (en) Video error resilience
JP2009521164A (en) Processing apparatus and processing method of input data stream composed of input frame sequence
KR100950540B1 (en) User selectable variable trick mode speed
JP6258168B2 (en) Distribution device, playback device, and distribution system
KR100914318B1 (en) Method for forming IDR unit for trick play, and Trick play system and method using that
JP4416845B2 (en) Encoding apparatus and method thereof, and recording apparatus and method thereof
KR20090039232A (en) Method for encoding and decoding moving images
JP5367687B2 (en) Data distribution system, data distribution apparatus, and data distribution method
US20110321110A1 (en) Systems and methods for adapting video data transmissions to communication network bandwidth variations
US20170230612A1 (en) Adaptive resolution encoding for streaming data
JP2004015164A (en) Method of storing mpeg data and apparatus thereof
KR20080065133A (en) Apparatus and method for controlling playback speed of video frame
JP2011066611A (en) Streaming system, server, and method and program of the streaming system and the server

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee