KR20190062815A - Live Steaming Server device and operating method thereof - Google Patents
Live Steaming Server device and operating method thereof Download PDFInfo
- Publication number
- KR20190062815A KR20190062815A KR1020170161380A KR20170161380A KR20190062815A KR 20190062815 A KR20190062815 A KR 20190062815A KR 1020170161380 A KR1020170161380 A KR 1020170161380A KR 20170161380 A KR20170161380 A KR 20170161380A KR 20190062815 A KR20190062815 A KR 20190062815A
- Authority
- KR
- South Korea
- Prior art keywords
- file
- client
- mpd
- media file
- media
- Prior art date
Links
- 238000011017 operating method Methods 0.000 title 1
- 238000010025 steaming Methods 0.000 title 1
- 238000004891 communication Methods 0.000 claims abstract description 43
- 238000012545 processing Methods 0.000 claims abstract description 32
- 238000000034 method Methods 0.000 claims abstract description 16
- 230000003044 adaptive effect Effects 0.000 claims abstract description 5
- 239000012634 fragment Substances 0.000 claims description 13
- 238000012546 transfer Methods 0.000 abstract description 5
- 230000008569 process Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 20
- 230000005540 biological transmission Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
본 발명은 컨텐츠 제공과 관련한 라이브 스트리밍 서버 장치 및 이의 운용 방법에 관한 것이다. The present invention relates to a live streaming server apparatus and a method of operating the same.
인터넷 네트워크의 발달에 따라 고화질의 대용량 미디어 파일의 전송이 가능해지고 있다. 하지만 아직까지도 대용량 미디어 컨텐츠 스트리밍 서비스를 위해서 인터넷망의 QoS(Quality of Service)가 보장되지 않고, 제한적인 대역폭 운용으로 인하여 소비자에게 끊김 없는 스트리밍 서비스가 어려운 문제점이 있다. With the development of the Internet network, it is becoming possible to transmit high-quality large-capacity media files. However, QoS (Quality of Service) of the Internet network is not guaranteed for high capacity media content streaming service yet, and there is a problem that continuous streaming service is difficult for consumers due to limited bandwidth operation.
이를 해결하기 위해 네트워크 환경에 적응적으로 서비스 할 수 있는 스트리밍 기술 개발이 요구되었으며, 국제 표준화 기구인 MPEG(Moving Picture Experts Group)에서 DASH(Dynamic Adaptive Streaming over HTTP)라는 이름으로 표준화가 진행되었다.In order to solve this problem, it was required to develop a streaming technology adaptable to the network environment, and the standardization was carried out under the name of DASH (Dynamic Adaptive Streaming over HTTP) in the Moving Picture Experts Group (MPEG), an international standardization organization.
MPEG-DASH는 사용자 환경(네트워크 및 단말 성능 등)에 맞추어 미디어 컨텐츠를 사용자에게 끊김 없이 서비스하기 위한 표준으로, MPEG-DASH에서 다루는 표준화 범위는 미디어 컨텐츠의 소비, 조합 및 기타 정보를 기술하는 MPD(Media Presentation Description) 기술, 시간 기반 컨텐츠 분할 기술인 Media Segmentation 기술, 시분할된 각각의 파일을 다운로드/스트리밍 할 수 있는 액세스 위치 기술, MPEG-DASH를 지원하는 file format 기술, 디지털 미디어 소비 및 저장 형식에 따라 MPD 구성을 변경할 수 있는 Profiling 기술 등이 해당된다.MPEG-DASH is a standard for seamlessly serving media contents to users in accordance with user environment (network and terminal performance, etc.). The standard scope covered by MPEG-DASH is MPD Media Segmentation technology as a time-based content segmentation technology, access location technology capable of downloading / streaming each time-divided file, file format technology supporting MPEG-DASH, MPD And profiling techniques to change the configuration.
한편, 종래 MPEG-DASH 기반으로 컨텐츠를 제공하더라도, 고해상도의 영상에 대한 라이브 스트리밍 서비스 형태로 컨텐츠를 제공하는 경우, 끊김 없는 컨텐츠 제공이 어려운 문제가 있었다.On the other hand, even if the content is provided on the basis of MPEG-DASH in the related art, there is a problem that it is difficult to provide seamless contents when a content is provided in the form of a live streaming service for a high-resolution image.
이에, 본 발명은 보다 원활하고 끊김 없는 또는 상대적으로 저지연 스트리밍 서비스를 제공할 수 있는 라이브 스트리밍 서버 장치 및 이의 운용 방법을 제공함에 있다.Accordingly, the present invention provides a live streaming server apparatus and a method of operating the same, which can provide a smooth streaming-free streaming service or a relatively low-delay streaming service.
본 발명의 실시 예에 따르면, 본 발명의 라이브 스트리밍 서버 장치는 미디어 파일을 제공하는 트랜스코더와 통신 채널을 형성하는 제1 통신 회로, 클라이언트 단말과 통신 채널을 형성하는 제2 통신 회로, 상기 미디어 파일 및 상기 미디어 파일을 DASH(Dynamic Adaptive Streaming over HTTP) 처리한 미디어 파일 조각들을 저장하는 메모리, 상기 제1 통신 회로, 상기 제2 통신 회로 및 상기 메모리에 전기적으로 연결되는 프로세싱부를 포함하고, 상기 프로세싱부는 상기 수신된 미디어 파일을 DASH 처리하면서 생성된 MPD(Media Presentation Description) 파일 및 세그먼트 파일들에 대한 인덱싱을 수행하고, 클라이언트 요청에 따라 MPEG-DASH(Moving Picture Experts Group - Dynamic Adaptive Streaming over HTTP) 기반으로 상기 MPD 파일 및 상기 세그먼트 파일들을 상기 클라이언트에 전송하는 동안 이전 전송된 파일의 인덱스 정보를 참조하여 다음 파일을 전송하도록 설정될 수 있다.According to an embodiment of the present invention, a live streaming server apparatus of the present invention includes a first communication circuit for forming a communication channel with a transcoder for providing a media file, a second communication circuit for forming a communication channel with the client terminal, And a memory for storing media file fragments obtained by processing the media file by Dynamic Adaptive Streaming over HTTP (DASH); and a processing unit electrically connected to the first communication circuit, the second communication circuit, and the memory, wherein the processing unit Indexing the MPD (Media Presentation Description) file and the segment files generated by DASH processing of the received media file, and performing indexing based on MPEG-DASH (Moving Picture Experts Group) While transmitting the MPD file and the segment files to the client With reference to the index information of all the transmitted file may be configured to send the file.
상기 프로세싱부는 케이블 인터페이스를 지원하는 상기 제1 통신 회로를 기반으로 상기 트랜스코더로부터 상기 미디어 파일을 수신하도록 설정될 수 있다.The processing unit may be configured to receive the media file from the transcoder based on the first communication circuit supporting a cable interface.
상기 프로세싱부는 상기 트랜스코더로부터 HEVC(high efficiency video coding) Tiled Encoding 된 미디어 파일을 수신하되, 다양한 해상도의 미디어 파일들을 수신하도록 설정될 수 있다.The processing unit may be configured to receive a HEVC (High Efficiency Video Coding) Tiled Encoded media file from the transcoder, and receive media files of various resolutions.
상기 프로세싱부는 상기 미디어 파일 수신과 관련한 타임 스탬프 정보를 기반으로 상기 인덱싱 정보를 생성하도록 설정될 수 있다.The processing unit may be configured to generate the indexing information based on time stamp information related to receiving the media file.
상기 프로세싱부는 상기 클라이언트 요청에 따라 Client ID를 생성하고, 상기 Client ID를 기반으로 상기 MPD 파일, 상기 세그먼트 파일들 및 상기 인덱싱 정보를 상기 클라이언트에 전송하도록 설정될 수 있다.The processing unit may be configured to generate a client ID according to the client request, and to transmit the MPD file, the segment files, and the indexing information to the client based on the client ID.
또한, 본 발명의 다양한 실시 예에 따르면, 본 발명의 라이브 스트리밍 서버 장치 운용 방법은 트랜스코더로부터 HEVC Tiled Encoding된 미디어 파일을 라이브 스트리밍 서버가 수신하는 단계, 상기 수신된 미디어 파일을 DASH 처리하여 MPD(Media Presentation Description) 파일 및 세그먼트 파일을 생성하면서 각 MPD 파일 및 세그먼트 파일들에 대한 인덱싱을 수행하는 단계, 클라이언트 요청에 따라 MPEG-DASH(Moving Picture Experts Group - Dynamic Adaptive Streaming over HTTP) 기반으로 상기 MPD 파일 및 상기 세그먼트 파일들을 전송하는 단계를 포함하고, 상기 전송하는 단계는 이전 전송한 파일의 인덱스를 참조하여 다음 파일을 전송하도록 설정하는 단계를 포함할 수 있다.According to various embodiments of the present invention, a method of operating a live streaming server apparatus according to the present invention includes receiving a HEVC Tiled Encoded media file from a transcoder, a live streaming server, DASH processing the received media file, A step of performing indexing of each MPD file and a segment file while generating a media presentation description file and a segment file, and a step of performing indexing of the MPD file and segment file based on MPEG-DASH (Dynamic Picture Experts Group) And transmitting the segment files, wherein the transmitting step may include setting the transmission of the next file by referring to the index of the previously transmitted file.
상술한 바와 같이, 본 발명의 라이브 스트리밍 서버 장치 및 이의 운용 방법에 따르면, 본 발명은 끊김 없는 컨텐츠 제공 또는 상대적으로 저지연의 스트리밍 서비스가 가능하도록 지원할 수 있다. As described above, according to the live streaming server apparatus and the operation method thereof of the present invention, the present invention can support seamless content provisioning or relatively low-delay streaming service.
도 1은 본 발명의 실시 예에 따른 라이브 스트리밍 서비스 시스템의 한 예를 나타낸 도면이다.
도 2는 본 발명의 실시 예에 따른 라이브 스트리밍 서버 구성의 일예를 나타낸 도면이다.
도 3은 본 발명의 일 실시 예에 따른 프로세싱부의 구성의 한 예를 나타낸 도면이다.
도 4는 본 발명의 일 실시 예에 따른 라이브 스트리밍 서버의 수신부 구성의 일예를 나타낸 도면이다.
도 5는 본 발명의 일 실시 예에 따른 미디어 파일의 데싱 및 인덱싱 결과를 나타낸 도면이다.
도 6은 본 발명의 일 실시 예에 따른 MPD 매니저의 일 예를 나타낸 도면이다.
도 7은 본 발명의 일 실시 예에 따른 세그먼트 매니저의 일 예를 나타낸 도면이다.
도 8은 본 발명의 일 실시 예에 따른 인덱스 매니저의 일 예를 나타낸 도면이다.
도 9는 본 발명의 일 실시 예에 따른 데쉬 커넥터 모듈의 한 예를 나타낸 도면이다.
도 10은 본 발명의 일 실시 예에 따른 라이브 스트리밍 시스템에서 라이브 스트리밍 서버와 클라이언트 간의 신호 흐름을 나타낸 도면이다.
도 11은 본 발명의 일 실시 예에 따른 라이브 스트리밍 시스템에서 트랜스코더와 라이브 스트리밍 서버간의 신호 흐름을 나타낸 도면이다.1 is a diagram illustrating an example of a live streaming service system according to an embodiment of the present invention.
2 is a diagram illustrating an example of a configuration of a live streaming server according to an embodiment of the present invention.
3 is a diagram illustrating an example of a configuration of a processing unit according to an embodiment of the present invention.
4 is a diagram illustrating an example of a configuration of a receiver of a live streaming server according to an embodiment of the present invention.
FIG. 5 is a diagram illustrating results of indexing and indexing of a media file according to an exemplary embodiment of the present invention. Referring to FIG.
6 is a diagram illustrating an example of an MPD manager according to an embodiment of the present invention.
7 is a diagram illustrating an example of a segment manager according to an embodiment of the present invention.
8 is a diagram illustrating an example of an index manager according to an embodiment of the present invention.
9 is a view showing an example of a dash connector module according to an embodiment of the present invention.
10 is a diagram illustrating a signal flow between a live streaming server and a client in a live streaming system according to an exemplary embodiment of the present invention.
11 is a diagram illustrating a signal flow between a transcoder and a live streaming server in a live streaming system according to an embodiment of the present invention.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Various embodiments of the invention will now be described with reference to the accompanying drawings. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes various modifications, equivalents, and / or alternatives of the embodiments of the invention. In connection with the description of the drawings, like reference numerals may be used for similar components.
도 1은 본 발명의 실시 예에 따른 라이브 스트리밍 서비스 시스템의 한 예를 나타낸 도면이다.1 is a diagram illustrating an example of a live streaming service system according to an embodiment of the present invention.
도 1을 참조하면, 일 실시 예에 따른 라이브 스트리밍 서비스 시스템(10)은 라이브 미디어 소스(11), 트랜스코더(12), 라이브 스트리밍 서버(13)(또는 라이브 스트리밍 서버, 또는 라이브 스트리밍 서버 장치), 클라이언트(14)(또는 클라이언트 단말 장치)를 포함할 수 있다.1, a live
상술한 라이브 스트리밍 서비스 시스템(10)은 라이브 미디어 소스(11)에서 실시간으로 전달된 영상(또는 Media 파일)을 트랜스코더(12)가 수신할 수 있다. 트랜스코더(12)은 지정된 정책 및 룰에 따라 영상(또는 Media 파일)을 동일한 해상도의 복수의 공간들로 분할하거나 또는 서로 다른 해상도의 복수의 공간들로 분할하거나 또는 지정된 시간 단위로 분할할 수 있다. 분할된 미디어 파일들(예: HEVC 타일드 인코딩된 파일들)은 라이브 스트리밍 서버(13)에 전달될 수 있다. 라이브 스트리밍 서버(13)는 수신된 데이터들에 대한 MEPG-DASHing을 수행할 수 있다. 라이브 스트리밍 서버(13)는 생성된 MPD 파일 및 세그먼트 파일들에 대한 인덱싱을 수행하여 관리하고, 클라이언트(14) 요청에 대응하여 인덱싱된 미디어 파일 조각들(예: MPD 파일 및 세그먼트 파일들)을 클라이언트(14)에 제공할 수 있다. 상술한 바와 같이, 라이브 스트리밍 서비스 시스템(10)은 지정된 정책 또는 룰에 따라 MPEG-DASH-SRD(Spatial Relationship Description)를 기반으로 미디어 파일 조각들(또는 데이터 청크들)을 클라이언트(14) 전송함으로써, 데이터 전송의 부하를 저감하여 저지연 라이브 스트리밍 또는 끊김 없는 라이브 스트리밍 서비스를 가능하도록 지원할 수 있다.The above-described live
라이브 미디어 소스(11)는 미디어 소스를 라이브 형태로 제공하는 구성으로 예컨대, 방송 카메라 또는 라이브 형태로 영상 컨텐츠를 제공하는 컨텐츠 서버 등을 포함할 수 있다. The
트랜스코더(12)는 라이브 중계 영상을 타일드 인코딩(Tiled Encoding(HEVC)) 또는 Encoding(HEVC) 하여 라이브 스트리밍 서버(13)로 전송할 수 있다. Tiled Encoding 동작 수행 시, 트랜스코더(12)는 라이브 스트리밍 서버(13)에서 필요한 Tiled 정보(MetaInfo)를 작성하고, 작성된 Tiled 정보(MetaInfo)를 미디어 파일 전송 시 함께 라이브 스트리밍 서버(13)에 전송할 수 있다. 트랜스코더(12)는 고품질 영상에 대해 실시간으로 HEVC Tiled Encoding을 수행할 수 있다. 이 동작에서 트랜스코더(12)는 하나의 영상을 특정 시간 단위로 분할하고, 분할된 미디어 파일에 대해 순차적으로 HEVC Tiled Encoding을 수행하여 라이브 스트리밍 서버(13)에 전송할 수 있다. 또는, 트랜스코더(12)는 하나의 영상을 일정 크기(또는 공간) 단위로 분할하고, 분할된 미디어 파일에 대하여 순차적으로 HEVC Tiled Encoding을 수행하여 라이브 스트리밍 서버(13)에 전송할 수 있다. 트랜스코더(12)가 라이브 스트리밍 서버(13)에 전송하는 영상은 예컨대, HQ(8K 급 이상의 HEVC Tiled Encoding된 고품질 영상), MQ(2K 또는 4K 급 이상의 HEVC Tiled Encoding된 중품질 영상), FullMQ(2K 또는 4K급의 HEVC Encoding된 중품질 영상)을 포함할 수 있다. MetaInfo(또는 Tiled 정보)는 상술한 HQ, MQ 파일에 대한 Meta 정보(Tile, Bitrate, FPS, bandwidth 등)를 포함할 수 있다.The
라이브 스트리밍 서버(13)는 트랜스코더(12)로부터 수신 받은 미디어 파일에 대한 데싱(Dashing) 작업을 수행할 수 있다. 라이브 스트리밍 서버(13)는 데싱 작업이 수행된 미디어 파일 조각들(예: MPD 파일 및 세그먼트 파일들)을 클라이언트(14)요청에 따라 MPEG-DASH-SRD(Spatial Relationship Description) 기반의 스트리밍 서비스를 통해 제공할 수 있다. DASH(Dynamic Adaptive Streaming over HTTP) 처리(또는 Dashing)된 컨텐츠는 HTTP를 기반으로 하는 세그먼트의 시퀀스로 분할될 수 있다. The
클라이언트(14)는 라이브 스트리밍 서버(13)와 MPEG-DASH 기반으로 연결되고, 사용자 입력에 따라 선택된 영상을 라이브 스트리밍 서버(13)에 요청할 수 있다. 클라이언트(14)는 라이브 스트리밍 서버(13)가 제공한 미디어 파일 조각들 및 인덱싱 정보를 수신하고, 수신된 미디어 파일 조각들을 인덱싱 정보들을 기반으로 조합하여 출력할 수 있다. MPD 파일은 가능한 컨텐츠, 제공하는 alternative bit rates, URL 주소 값 등의 정보를 포함하는 Manifest. 파일에 대응될 수 있다. 클라이언트(14)는 MPD 파일을 파싱하면서, 프로그램 타이밍, media-content availability, media type, 화질, 최소 및 최대 bandwidths, 사용할 수 있는 encoded-alternatives, DRM 등의 정보를 획득할 수 있다. 클라이언트()는 네트워크 상태 또는 단말의 상태에 맞는 encoding을 선택한 후 HTTP GET Request를 통해서 스트리밍을 수행할 수 있다. The
도 2는 본 발명의 실시 예에 따른 라이브 스트리밍 서버 구성의 일예를 나타낸 도면이다.2 is a diagram illustrating an example of a configuration of a live streaming server according to an embodiment of the present invention.
도 2를 참조하면, 일 실시 예에 따른 라이브 스트리밍 서버(13)는 제1 통신 회로(110), 제2 통신 회로(120), 메모리(140) 및 프로세싱부(300)(예: 컨트롤러, 적어도 하나의 프로세서, 또는 적어도 하나의 프로세싱 모듈)를 포함할 수 있다.2, a
제1 통신 회로(110)는 트랜스코더(12)와 통신할 수 있는 통신 채널을 형성할 수 있다. 제1 통신 회로(110)는 유선 통신 인터페이스 또는 무선 통신 인터페이스 중 적어도 하나를 포함할 수 있다. 예컨대, 제1 통신 회로(110)는 케이블망을 통한 통신 채널을 형성할 수 있다. 제1 통신 회로(110)는 트랜스코더(12)가 전송하는 다양한 품질의 미디어 파일을 수신할 수 있다. 제1 통신 회로(110)는 트랜스코더(12)가 전송하는 다양한 품질의 미디어 파일들에 대한 MetaInfo를 수신할 수 있다.The
제2 통신 회로(120)는 클라이언트(14)와 통신할 수 있는 통신 채널을 형성할 수 있다. 제2 통신 회로(120)는 유선 통신 인터페이스 또는 무선 통신 인터페이스 중 적어도 하나를 포함할 수 있다. 예컨대, 제2 통신 회로(120)는 인터넷망을 통한 통신 채널을 형성할 수 있다. 제2 통신 회로(120)는 클라이언트(14) 접속에 따른 채널을 할당하고, 클라이언트(14)로부터 영상 요청 신호를 수신할 수 있다. 제2 통신 회로(120)는 영상 요청 신호에 대응하는 미디어 파일 조각들(예: MPD 파일 및 세그먼트 파일들) 및 미디어 파일 조각들에 대응하는 인덱싱 정보를 클라이언트(14)에 제공할 수 있다.The
메모리(140)는 라이브 스트리밍 서버(13) 운용에 필요한 다양한 프로그램 또는 다양한 명령어를 저장할 수 있다. 예컨대, 메모리(140)는 제1 통신 회로(110)를 기반으로 트랜스코더(12)로부터 미디어 파일을 수신하도록 설정된 적어도 하나의 명령어들, 트랜스코더(12)로부터 수신한 미디어 파일에 대한 MPD 파일을 작성하도록 설정된 적어도 하나의 명령어들, 수신한 미디어 파일에 대한 세그먼테이션을 수행하도록 설정된 적어도 하나의 명령어들, DASHing 작업이 적용된 미디어 파일 조각들(예: MPD 파일 및 세그먼트 파일들)에 대한 인덱싱을 수행하도록 설정된 적어도 하나의 명령어들, 클라이언트(14)의 요청을 수신 및 수신된 요청에 대응하여 미디어 파일 조각들 및 인덱싱 정보를 전송하도록 설정된 적어도 하나의 명령어들을 저장할 수 있다. The
프로세싱부(300)는 라이브 스트리밍 서버(13) 운용과 관련한 명령어의 처리 및 데이터(예: 미디어 파일 조각들 또는 데이터 청크들)의 저장 관리와 전송을 수행할 수 있다. 이러한 프로세싱부(300)는 적어도 하나의 프로세서로 구현되거나 또는 적어도 하나의 소프트웨어 모듈에 의해 구현되고 지정된 프로세서에 의해 운용될 수 있다. The
도 3은 본 발명의 일 실시 예에 따른 프로세싱부의 구성의 한 예를 나타낸 도면이다.3 is a diagram illustrating an example of a configuration of a processing unit according to an embodiment of the present invention.
도 3을 참조하면, 일 실시 예에 따른 프로세싱부(300)는 라이브 미디어 수신기(310)(LiveMediaReceiver), 라이브 핸들 쓰레드(320)(LiverHandleThread), 데싱 모듈(330)(DashingModule), MPD 매니저(350), 세그먼트 매니저(360), 인덱스 매니저(370), 파일 시스템(340), 데쉬 핸들 쓰레드(380)(DashHandleThread), 데쉬 커넥터 모듈(390)(Dash Connector)를 포함할 수 있다. 상술한 라이브 미디어 수신기(310), 라이브 핸들 쓰레드(320), 데싱 모듈(330), MPD 매니저(350), 세그먼트 매니저(360), 인덱스 매니저(370), 파일 시스템(340), 데쉬 핸들 쓰레드(380), 및 데쉬 커넥터 모듈(390) 중 적어도 하나는 앞서 언급한 바와 같이 적어도 하나의 하드웨어 프로세서로 구현되거나 또는 적어도 하나의 소프트웨어 모듈로 구현될 수 있다. 상술한 프로세싱부(300)는 실감형 VR(Virtual Reality)용 인터랙티브 스트리밍 서비스(또는 360도 VR 영상 서비스)를 지원할 수 있다. 이와 관련하여, 라이브 스트리밍 서버(13)는 트랜스코더(12)로부터 실시간 VR 스트리밍 서비스와 관련한 미디어 파일(예: HEVC Encoding Files(*.mp4)) 또는 라이브 중계 영상을 Tiled Encoding(HEVC) 또는 Encoding(HEVC)한 미디어 파일을 수신할 수 있다. 3, the
라이브 미디어 수신기(310) 및 라이브 핸들 쓰레드(320)는 케이블망을 통해 전송되는 트랜스코더(12)로부터 MetaInfo와, HQ, MQ, FullMQ 미디어 파일들을 수신할 수 있다. 데싱 모듈(330)은 수신된 미디어 파일들에 대한 Dashing을 수행하고, 인덱스 매니저(370)는 DASHing된 미디어 파일 조각들에 대한 인덱싱을 수행할 수 있다. 데쉬 핸들 쓰레드(380) 및 데쉬 커넥터 모듈(390)은 클라이언트(14)와 통신 채널을 형성하고, 클라이언트 요청에 따라 MPEG-DASH 프로토콜에 맞추어 MPD(Media Presentation description) 파일 및 Segments 파일(*.m4s)을 제공할 수 있다. 상술한 프로세싱부(300)에 포함된 각 구성들은 역할(기능에) 따라 모듈화 될 수 있다. 프로세싱부(300)는 영상을 M4S(MPEG Dash Streaming) 파일로 분할하고, MPD 파일을 생성하는 Dashing 기능은 MPEG-DASH(ISO_IEC_23009)를 기준으로 수행할 수 있다. The
Dashing 된 M4S 파일 및 MPD 파일을 클라이언트(14)에 제공하는 절차는 MPEG-DASH(ISO_IEC_23009)를 기준으로 수행되며, 클라이언트(14)에서 라이브 스트리밍 서버(13)로 요청하는 HTTP URI는 HTTP GET 프로토콜에 맞추어 라이브 스트리밍이 가능하도록 별도로 프로토콜(어플리케이션 패킷)을 기반으로 운용될 수 있다. The procedure for providing the dashing M4S file and the MPD file to the
파일 시스템(340)은 도 2에서 설명한 메모리(140)에 저장되는 시스템으로서, 데싱된 파일을 저장할 수 있는 시스템으로 세팅될 수 있다.The
도 4는 본 발명의 일 실시 예에 따른 라이브 스트리밍 서버의 수신부 구성의 일예를 나타낸 도면이다.4 is a diagram illustrating an example of a configuration of a receiver of a live streaming server according to an embodiment of the present invention.
도 3 및 도 4를 참조하면, 라이브 스트리밍 서버(13)의 수신부는 라이브 미디어 수신기(310) 및 라이브 핸들 쓰레드(320)를 포함하고, HQ 수신기(321), MQ 수신기(322) 및 FullMQ 수신기(323)를 포함할 수 있다.3 and 4, the receiver of the
라이브 스트리밍 서버(13)의 수신부는 트랜스코더(12)에서 HEVC Tiled Encoding된 HQ, MQ, FullMQ Media 파일과, MetaInfo 파일을 수신하여 Dashing, Indexing, Caching하는 역할을 수행할 수 있다.The receiving unit of the
이와 관련하여, 라이브 미디어 수신기(310)는 제1 통신 회로(110)를 기반으로 트랜스코더(12)와 통신 채널을 형성할 수 있다. 라이브 미디어 수신기(310)는 설정된 스케줄에 대응하여 트랜스코더(12)로부터 미디어 파일에 대응하는 MetaInfo를 수신할 수 있다. 라이브 미디어 수신기(310)는 수신된 MetaInfo를 라이브 핸들 쓰레드(320)에 전달할 수 있다. 예컨대, 라이브 미디어 수신기(310)는 트랜스코더(12)와 연결(Connection)이 이루어지면 해당 소켓 연결(Socket Connection)을 처리하기 위한 하위 쓰레드인 라이브 핸들 쓰레드(320)를 생성할 수 있다. In this regard, the
라이브 핸들 쓰레드(320)는 MetaInfo파일을 수신하고, 해당 타임 스탬프를 기준으로 인덱스를 생성할 수 있다. 라이브 핸들 쓰레드(320)는 수신된 MetaInfo파일에서 Tiled Encoding된 Media File(또는 영상 조각들)을 파싱(Parsing)할 수 있다. 라이브 핸들 쓰레드(320)는 파싱된 미디어 파일들에 대하여 Indexing, Dashing, Caching을 수행할 하위 수신 쓰레드를 생성할 수 있다. 수신 쓰레드는 Callable 인터페이스로 구현되어 미디어 파일들에 대한 수신을 완료할 경우 자신을 생성한 라이브 핸들 쓰레드(320)로 그 결과를 리턴할 수 있다.The
라이브 핸들 쓰레드(320)는 모든 하위 수신 쓰레드에서 미디어 파일들에 대한 수신이 완료되면, MetaInfo파일을 참고하여 Media File에 대한 Dashing 작업을 수행할 수 있다. The
라이브 핸들 쓰레드(320)는 Dashing된 결과를 MPD 매니저(350), 세그먼트 매니저(360), 인덱스 매니저(370)의 캐쉬들(예: MPD 캐쉬, 세그먼트 캐쉬, 인덱스 캐쉬)에 추가하여, 최신의 인덱싱에 해당하는 Dashing 파일을 캐쉬들에 캐싱(Caching)할 수 있다. 인덱스는 미디어 파일들을 수신하는 동안 획득된 타임 스탬프 값을 이용하여 설정될 수 있다. The
캐쉬들은 FIFO(First In First Out) 구조로 설계될 수 있으며, Size(data 건수, 메모리 크기)는 Properties를 통해 설정될 수 있다. Caches can be designed in FIFO (First In First Out) structure, and Size (number of data, memory size) can be set through Properties.
도 5는 본 발명의 일 실시 예에 따른 미디어 파일의 데싱 및 인덱싱 결과를 나타낸 도면이다.FIG. 5 is a diagram illustrating results of indexing and indexing of a media file according to an exemplary embodiment of the present invention. Referring to FIG.
도 5를 참조하면, 미디어 파일 데싱 및 인덱싱 결과는 도시된 바와 같은 다양한 화면들로 표시될 수 있다. 예컨대, 라이브 스트리밍 서버(13)는 사용자 입력 또는 지정된 작업 처리 결과에 따라, 인덱싱 리스트가 출력되는 제1 화면(501), MPD 파일 리스트가 출력되는 제2 화면(503), 원래 파일 리스트가 출력되는 제3 화면(505) 중 적어도 하나를 출력할 수 있다. 또는, 라이브 스트리밍 서버(13)는 설정에 따라, 인덱스 리스트가 포함된 제1 영역, MPD 파일 리스트가 포함된 제2 영역 및 원래 파일 리스트가 포함된 제3 영역 중 적어도 하나를 포함하는 하나의 화면을 출력할 수도 있다.Referring to FIG. 5, media file dying and indexing results may be displayed in various screens as shown. For example, the
이와 관련하여, 라이브 스트리밍 서버(13)는 디스플레이를 포함하고, 데싱 및 인덱싱된 결과 화면 중 적어도 하나의 화면을 출력할 수 있다. 또한, 라이브 스트리밍 서버(13)는 화면 제어와 관련한 사용자 입력을 수신하기 위하여 적어도 하나의 입력 장치를 포함할 수 있다. In this regard, the
도 6은 본 발명의 일 실시 예에 따른 MPD 매니저의 일 예를 나타낸 도면이다.6 is a diagram illustrating an example of an MPD manager according to an embodiment of the present invention.
도 6을 참조하면, 일 실시 예에 따른 MPD 매니저(350)는 제1 인덱스 리스트(351) 및 MPD 캐쉬(353)를 포함할 수 있다.Referring to FIG. 6, the
MPD 매니저(350)는 Dashing된 MPD 파일을 MPD 캐쉬(353)에 적재할 수 있다. 여기서, MPD 매니저(350)는 MPD 캐쉬(353)가 Full일 경우 오래된 MPD 파일을 MPD 캐쉬(353)에서 삭제하고, 새로운 MPD 파일을 MPD 캐쉬(353)에 적재할 수 있다. 또한 MPD 매니저(350)는 클라이언트(14)에서 MPD 파일의 요청이 있을 경우 필요한 MPD 파일을 MPD 캐쉬(353) 또는 지정된 파일(예: 트랜스코더(12)가 제공하고 메모리에 저장된 원본 파일)에서 로드(Load)하여 제공할 수 있다. The
MPD 캐쉬(353)는 Key/Value 형식의 해쉬맵(HashMap)으로 구성될 수 있다. 예컨대, Key는 해당 MPD의 Index이며, Value는 MPD 파일의 내용이며, Byte Array(byte[])가 될 수 있다. The
MPD 매니저(350)는 제1 인덱스 리스트(351)를 사용하여 MPD 파일의 Caching 여부를 검색할 수 있다. MPD 매니저(350)는 제1 인덱스 리스트(351)의 마지막 번지의 해당하는 인덱스를 Delete Ptr로 정의하여, MPD 캐쉬(353)가 Full인 경우 Delete Ptr의 인덱스에 해당하는 key/value Cache Data를 해쉬맵에서 삭제할 수 있다.The
MPD 파일 탐색과 관련하여, MPD 매니저(350)는 인덱스 매니저(370)를 통하여 MPD 파일을 요청한 클라이언트(14)에 마지막으로 전송했던 MPD 인덱스의 다음 인덱스(Next Index)를 확인할 수 있다. 인덱스 매니저(370)는 다음 인덱스가 존재하지 않을 경우 기존 인덱스를 최신 인덱스로 판단할 수 있다. MPD 매니저(350)는 MPD 캐쉬(353)에서 MPD 파일을 먼저 탐색하고, 존재하지 않을 경우 파일(예: 메모리에 저장된 원본 파일)에서 MPD 파일을 읽어오고 이를 데쉬 핸들 쓰레드(380)에 리턴할 수 있다. In connection with the MPD file search, the
도 7은 본 발명의 일 실시 예에 따른 세그먼트 매니저의 일 예를 나타낸 도면이다.7 is a diagram illustrating an example of a segment manager according to an embodiment of the present invention.
도 7을 참조하면, 일 실시 예에 따른 세그먼트 매니저(360)는 제2 인덱스 리스트(361), 세그먼트 캐쉬(363) 및 세그먼트 구조체(365)를 포함할 수 있다.Referring to FIG. 7, the
세그먼트 매니저(360)는 Dashing된 세그먼트 파일들(Segment Files)을 세그먼트 캐쉬(363)에 적재할 수 있다. 세그먼트 매니저(360)는 세그먼트 캐쉬(363)가 Full일 경우 오래된 인덱스에 해당하는 세그먼트 데이터들을 세그먼트 캐쉬(363)에 삭제하고, 현재 Dashing 된 세그먼트 파일들을 적재할 수 있다. 또한 세그먼트 매니저(360)는 클라이언트(14)에서 세그먼트 파일들을 요청하면, 필요한 세그먼트 파일들을 세그먼트 캐쉬(363) 또는 파일(예: 메모리에 저장된 원본 파일)에서 로드하여 클라이언트(14)에 제공할 수 있다. The
세그먼트 캐쉬(363)는 Key/Value 형식의 해쉬맵(HashMap)으로 구성될 수 있다. Key는 인덱스(Index)이며, Value는 다시 Key/Value형식의 해쉬맵 구조를 가지며, 그 구조는 세그먼트 데이터 구조(SegmentData Structure) 에서와 같이, Key는 Filename, Value는 Byte Array(byte[]) 구조의 Data 구조를 가질 수 있다. The
세그먼트 매니저(360)는 제2 인덱스 리스트(361)를 사용하여 세그먼트 파일의 Caching 여부를 검색할 수 있다. 세그먼트 매니저(360)는 제2 인덱스 리스트(361)의 마지막 번지의 해당하는 인덱스를 Delete Ptr로 정의하여, 세그먼트 캐쉬(363)가 Full인 경우 Delete Ptr의 인덱스에 해당하는 key/value Cache Data를 해쉬맵에서 삭제할 수 있다. The
도 8은 본 발명의 일 실시 예에 따른 인덱스 매니저의 일 예를 나타낸 도면이다.8 is a diagram illustrating an example of an index manager according to an embodiment of the present invention.
도 8을 참조하면, 일 실시 예에 따른 인덱스 매니저(370)는 클라이언트 인덱스 맵(371) 및 제3 인덱스 리스트(373)를 포함할 수 있다.Referring to FIG. 8, the
인덱스 매니저(370)는 타임스탬프 기반의 인덱스를 생성 및 관리할 수 있다. 이와 관련하여, 인덱스 매니저(370)는 클라이언트 인덱스 맵(371)을 생성하고, 클라이언트 ID별로 제3 인덱스 리스트(373)(예: 마지막 인덱스)를 관리할 수 있다. The
MPD 파일 탐색과 관련하여, 인덱스 매니저(370)는 클라이언트 인덱스 맵에 클라이언트 ID가 존재하지 않을 경우 최근 인덱스를 선택할 수 있다. 인덱스 매니저(370)는 선택된 인덱스의 MPD 파일을 MPD 매니저(350)에게 요청할 수 있다. Regarding the MPD file search, the
세그먼트 파일 탐색과 관련하여, 인덱스 매니저(370)는 URI에 인덱스가 존재하는지 여부를 확인하고, 인덱스가 존재할 경우 해당 인덱스의 세그먼트 파일을 세그먼트 매니저(360)에게 요청할 수 있다. 인덱스가 존재 하지 않을 경우 인덱스 매니저(370)는 Client ID를 기준으로 클라이언트 인덱스 맵(ClientIndexMap)에서 현재 요청하는 인덱스를 확인하고, 세그먼트 매니저(360)에게 해당 인덱스의 세그먼트 파일을 요청할 수 있다. With respect to the segment file search, the
인덱스 매니저(370)가 세그먼트 파일을 요청하면, 세그먼트 매니저(360)는 세그먼트 캐쉬(363) 검색을 수행할 수 있다. 세그먼트 캐쉬(363) 검색 시, 세그먼트 매니저(360)는 인덱스를 기준으로 세그먼트 리스트를 탐색하고, 다시 세그먼트 파일명(Segmentsfilename)을 기준으로 세그먼트 데이터를 검색할 수 있다. 세그먼트 매니저(360)는 검색 결과가 존재 하지 않을 경우 파일(예: 메모리에 저장된 원본 파일로서, DASH 작업 수행전 파일)에서 세그먼트 파일을 읽어와서, 이를 리턴(예: 인덱스 매니저에게 전달)할 수 있다. When the
도 9는 본 발명의 일 실시 예에 따른 데쉬 커넥터 모듈의 한 예를 나타낸 도면이다.9 is a view showing an example of a dash connector module according to an embodiment of the present invention.
도 9를 참조하면, 일 실시 예에 따른 데쉬 커넥터 모듈(390)은 데쉬 라이브 연결 쓰레드(393) 및 데쉬 라이브 커넥터(391)를 포함할 수 있다. Referring to FIG. 9, the
데쉬 라이브 커넥터(391)는 클라이언트(14)로부터 HTTP 연결 요청을 수신하는 역할을 수행할 수 있다. 데쉬 라이브 커넥터(391)는 HTTP 연결 시, 데쉬 라이브 연결 쓰레드(393)를 생성하고, HTTP Connection을 데쉬 라이브 연결 쓰레드(393)에 전달하고 실행하는 역할을 수행할 수 있다. 데쉬 라이브 커넥터(391)는 멀티 쓰레드 소켓(MultiThread Socket)과 동일한 구조로 시스템이 허락하는 한도에서 적어도 하나의 연결(Connection) 요청을 수신할 수 있다.The dhs
데쉬 라이브 연결 쓰레드(393)는 데쉬 커넥터 모듈(391)에서 생성하는 서브 쓰레드로서, HTTP URI를 파싱하여 해당하는 Work을 수행하는 Thread를 포함할 수 있다. 데쉬 라이브 연결 쓰레드(393)는 예컨대, run( ), parseURI( ), sendClientID( ) 등의 함수를 운용할 수 있다. run ( )은 쓰레드의 코어 메서드로서, 파싱된 URI 메시지에 따라 클라이언트 ID 생성 및 전송, MPD 전송, Segment 전송, 인덱스 리스트 전송 여부를 결정할 수 있다. parseURI( )는 HTTP URI를 파싱하여 run( )에 제공할 수 있다. sendCientID( )는 run( )으로부터 클라이언트 ID, MPD, 세그먼트 파일, 인덱스 리스트 등을 수신하고, 수신된 정보를 해당 클라이언트(14)에 전송할 수 있다. sendClientID( ), sendMPD( ), sendSegment( ), sendIndexList( )는 각각 Client ID의 전송, MPD 파일의 전송, 세그먼트 파일들의 전송 및 인덱스 리스트의 전송을 수행할 수 있다.The dash
도 10은 본 발명의 일 실시 예에 따른 라이브 스트리밍 시스템에서 라이브 스트리밍 서버와 클라이언트 간의 신호 흐름을 나타낸 도면이다.10 is a diagram illustrating a signal flow between a live streaming server and a client in a live streaming system according to an exemplary embodiment of the present invention.
도 10을 참조하면, 일 실시 예에 따른 라이브 스트리밍 서버(13) 및 클라이언트(14) 간의 신호 흐름과 관련하여, 1001 단계에서, 클라이언트(14)는 라이브 스트리밍 서버(13)에 Client ID를 요청할 수 있다. 예를 들어, 클라이언트(14)는 http://{ip_address}:{dash_live_port}/GET_CLIENT_ID 메시지를 라이브 스트리밍 서버(13)에 전송할 수 있다. 이에 대응하여, 라이브 스트리밍 서버(13)는 클라이언트(14)에 대응하는 Client ID를 생성하고, 1003 단계에서 Client ID를 클라이언트(14)에 전달할 수 있다. 예를 들어, 라이브 스트리밍 서버(13)는 af074e8c-2702-40b1-b0c8-657216394e24 값을 클라이언트(14)에 전달할 수 있다.10, in connection with the signal flow between the
클라이언트(14)는 1005 단계에서, MPD 파일을 라이브 스트리밍 서버(13)에 요청할 수 있다. 이와 관련하여, 클라이언트(14)는 http://{ip_address}:{dash_live_port}/GET_MPD?client_id=af074e8c-2702-40b1-b0c8-657216394e24를 포함하는 메시지를 라이브 스트리밍 서버(13)에 전송할 수 있다. The
라이브 스트리밍 서버(13)는 1007 단계에서, 클라이언트(14)가 요청한 MPD 파일을 클라이언트(14)에 전송할 수 있다.The
클라이언트(14)는 1009 단계에서, 라이브 스트리밍 서버(13)에 연속된 세그먼트 파일들을 요청할 수 있다. 이와 관련하여, 클라이언트(14)는 http://{ip_address}:{dash_live_port}/{segment_file_name}?cleint_id=af074e8c-2702-40b1-b0c8-657216394e24를 포함하는 메시지를 라이브 스트리밍 서버(13)에 전송할 수 있다. In step 1009, the
라이브 스트리밍 서버(13)는 클라이언트(14)로부터 세그먼트 파일을 요청하는 메시지를 수신하면, 1011 단계에서, 해당 세그먼트 파일을 클라이언트(14)에 전송할 수 있다. 클라이언트(14)는 세그먼트 파일을 수신하면, 1013 단계에서, 연속된 세그먼트 파일들 중 마지막 세그먼트 파일(예: (N) Segment 파일)을 라이브 스트리밍 서버(13)에 요청할 수 있다. 라이브 스트리밍 서버(13)는 1015 단계에서, 대응되는 세그먼트 파일을 클라이언트(14)에 전달할 수 있다. 상술한 동작에서, 라이브 스트리밍 서버(13)는 이전 전송한 파일(예: MPD 파일 또는 세그먼트 파일들)의 마지막 인덱스 정보를 토대로 다음 파일의 전송을 수행할 수 있다. When the
세그먼트 파일들의 수신이 완료되면, 클라이언트는 사용자 입력에 따라 또는 스케줄링된 프로세스에 따라 1005 단계 이전으로 분기하여 이하 동작을 반복적으로 수행할 수 있다.When the reception of the segment files is completed, the client branches to step 1005 and repeats the following operations according to the user input or according to the scheduled process.
도 11은 본 발명의 일 실시 예에 따른 라이브 스트리밍 시스템에서 트랜스코더와 라이브 스트리밍 서버간의 신호 흐름을 나타낸 도면이다.11 is a diagram illustrating a signal flow between a transcoder and a live streaming server in a live streaming system according to an embodiment of the present invention.
도 11을 참조하면, 일 실시 예에 따른 트랜스코더와 라이브 스트리밍 서버 간의 신호 흐름과 관련하여, 트랜스코더(12)는 1101 단계에서 라이브 스트리밍 서버(13)에 소켓 연결을 수행할 수 있다. 소켓 연결이 완료되면, 트랜스코더(12)는 1103 단계에서 MetaInfo 파일을 라이브 스트리밍 서버(13)에 전송할 수 있다. Referring to FIG. 11, in connection with a signal flow between a transcoder and a live streaming server according to an embodiment, the
라이브 스트리밍 서버(13)는 1105 단계에서, MetaInfo 파일 파싱 및 Media 파일 수신을 위한 서버 소켓(Server Socket) 생성을 수행할 수 있다. 라이브 스트리밍 서버(13)는 1107 단계에서 Media 파일 수신이 가능한 Server Socket Port 리스트를 응답 메시지로서 라이브 스트리밍 서버(13)에 전송할 수 있다. 라이브 스트리밍 서버(13)는 1109 단계에서 소켓을 닫을 수 있다. In step 1105, the
트랜스코더(12)는 1111 단계에서 스트리밍 서버(13)에 Media 파일 송신을 위한 소켓 연결을 수행할 수 있다. 트랜스코더(12)는 1113 단계에서 해당 소켓으로 Media 파일을 전송할 수 있다.The
라이브 스트리밍 서버(13)는 1115 단계에서 미디어 파일들의 수신을 완료하고, 소켓을 닫을 수 있다.The
상술한 트랜스코더(12)와 라이브 스트리밍 서버(13) 간 주고 받는 패킷의 구조는 다음 표 1에서와 같이 Payload Header (8byte)와 Payload (Nbyte)로 구성될 수 있다.The structure of a packet exchanged between the
Payload Header는 다음 표 2에서와 같이 Payload의 Type, Payload의 길이 각 4byte, 총 8byte로 구성될 수 있다.The payload header can be composed of 8 bytes of payload type and 4 bytes of payload length, as shown in Table 2 below.
트랜스코더 to 라이브 스트리밍 서버 Payload Type 정의이 아래와 같다.The transcoder to live streaming server payload type definition is as follows.
트랜스코더(12)에서 라이브 스트리밍 서버(13)로 전송하는 Payload Type은 총 4가지(MetaInfo, MainHQ, MainMQ, FullMQ)를 포함할 수 있다. Payload Type 코드는 Big Decimal 4byte Integer 자료형으로 정의할 수 있으나, 코드 값은 변경 될 수 있다. The payload types transmitted from the
상술한 본 문서에 개시된 실시 예는 개시된, 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 발명의 범위를 한정하는 것은 아니다. 따라서, 본 문서의 범위는, 본 발명의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예를 포함하는 것으로 해석되어야 한다.The embodiments disclosed in the above-mentioned document are presented for the description and understanding of the disclosed contents, and do not limit the scope of the present invention. Accordingly, the scope of this document should be interpreted to include all modifications based on the technical idea of the present invention or various other embodiments.
11 : 라이브 미디어 소스
12 : 트랜스코더
13 : 라이브 스트리밍 서버
14 : 클라이언트11: Live media source
12: Transcoder
13: Live streaming server
14: Client
Claims (6)
클라이언트 단말과 통신 채널을 형성하는 제2 통신 회로;
상기 미디어 파일 및 상기 미디어 파일을 DASH(Dynamic Adaptive Streaming over HTTP) 처리한 미디어 파일 조각들을 저장하는 메모리; 및
상기 제1 통신 회로, 상기 제2 통신 회로 및 상기 메모리에 전기적으로 연결되는 프로세싱부;를 포함하고,
상기 프로세싱부는
상기 수신된 미디어 파일을 DASH 처리하면서 생성된 MPD(Media Presentation Description) 파일 및 세그먼트 파일들에 대한 인덱싱을 수행하고, 상기 클라이언트 요청에 따라 MPEG-DASH(Moving Picture Experts Group - Dynamic Adaptive Streaming over HTTP) 기반으로 상기 MPD 파일 및 상기 세그먼트 파일들을 상기 클라이언트에 전송하는 동안 이전 전송된 파일의 인덱스 정보를 참조하여 다음 파일을 전송하도록 설정된 라이브 스트리밍 서버 장치.A first communication circuit forming a communication channel with a transcoder providing a media file;
A second communication circuit forming a communication channel with the client terminal;
A memory for storing media file and media file fragments processed by dynamic adaptive streaming over HTTP (DASH) processing of the media file; And
And a processing unit electrically connected to the first communication circuit, the second communication circuit, and the memory,
The processing unit
(MPS) file and segment files generated while performing DASH processing on the received media file, and performs indexing based on MPEG-DASH (Moving Picture Experts Group) To transmit the next file while referring to the index information of the previously transmitted file while transmitting the MPD file and the segment files to the client.
상기 프로세싱부는
케이블 인터페이스를 지원하는 상기 제1 통신 회로를 기반으로 상기 트랜스코더로부터 상기 미디어 파일을 수신하도록 설정된 라이브 스트리밍 서버 장치.The method according to claim 1,
The processing unit
And to receive the media file from the transcoder based on the first communication circuit supporting a cable interface.
상기 프로세싱부는
상기 트랜스코더로부터 HEVC Tiled Encoding 된 미디어 파일을 수신하되, 다양한 해상도의 공간 분할된 미디어 파일들을 수신하도록 설정된 라이브 스트리밍 서버 장치.The method according to claim 1,
The processing unit
A live streaming server device configured to receive a HEVC Tiled Encoded media file from the transcoder and to receive media files in various resolutions.
상기 프로세싱부는
상기 미디어 파일 수신과 관련한 타임 스탬프 정보를 기반으로 상기 인덱스 정보를 생성하도록 설정된 라이브 스트리밍 서버 장치.The method according to claim 1,
The processing unit
And generate the index information based on the time stamp information related to the reception of the media file.
상기 프로세싱부는
상기 클라이언트 요청에 따라 Client ID를 생성하고, 상기 Client ID를 기반으로 상기 MPD 파일, 상기 세그먼트 파일들 및 상기 인덱스 정보를 상기 클라이언트에 전송하도록 설정된 라이브 스트리밍 서버 장치.The method according to claim 1,
The processing unit
A client ID is generated according to the client request, and the MPD file, the segment files, and the index information are transmitted to the client based on the client ID.
상기 수신된 미디어 파일을 DASH 처리하여 MPD(Media Presentation Description) 파일 및 세그먼트 파일을 생성하면서 각 MPD 파일 및 세그먼트 파일들에 대한 인덱싱을 수행하는 단계, 및
클라이언트 요청에 따라 상기 MPD 파일 및 상기 세그먼트 파일들을 전송하는 단계를 포함하고,
상기 전송하는 단계는
이전 전송한 파일의 인덱스를 참조하여 다음 파일을 전송하도록 설정하는 단계를 포함하는 라이브 스트리밍 서버 장치의 운용 방법.
Receiving a HEVC Tiled Encoded media file from a transcoder;
Performing DASH processing on the received media file to perform indexing on each MPD file and segment files while generating a MPD (Media Presentation Description) file and a segment file, and
Transmitting the MPD file and the segment files according to a client request,
The transmitting step
And setting to transmit the next file with reference to the index of the previously transmitted file.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170161380A KR102024642B1 (en) | 2017-11-29 | 2017-11-29 | Live Steaming Server device and operating method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170161380A KR102024642B1 (en) | 2017-11-29 | 2017-11-29 | Live Steaming Server device and operating method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190062815A true KR20190062815A (en) | 2019-06-07 |
KR102024642B1 KR102024642B1 (en) | 2019-09-24 |
Family
ID=66850255
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170161380A KR102024642B1 (en) | 2017-11-29 | 2017-11-29 | Live Steaming Server device and operating method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102024642B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110324727A (en) * | 2019-07-16 | 2019-10-11 | 浙江大华技术股份有限公司 | Computer readable storage medium, server and its method for responding playing request |
KR102438747B1 (en) | 2021-03-31 | 2022-08-31 | 인하대학교 산학협력단 | Method and apparatus for allocating quality-aware transcoding task under limited power in live-streaming systems |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150048216A (en) * | 2012-10-26 | 2015-05-06 | 인텔 코포레이션 | Streaming with coordination of video orientation (cvo) |
KR20150105381A (en) * | 2013-01-04 | 2015-09-16 | 퀄컴 인코포레이티드 | Live timing for dynamic adaptive streaming over http (dash) |
KR101764317B1 (en) | 2016-11-03 | 2017-08-02 | 주식회사 헤카스 | Streaming server, streaming system and streaming method |
-
2017
- 2017-11-29 KR KR1020170161380A patent/KR102024642B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150048216A (en) * | 2012-10-26 | 2015-05-06 | 인텔 코포레이션 | Streaming with coordination of video orientation (cvo) |
KR20150105381A (en) * | 2013-01-04 | 2015-09-16 | 퀄컴 인코포레이티드 | Live timing for dynamic adaptive streaming over http (dash) |
KR101764317B1 (en) | 2016-11-03 | 2017-08-02 | 주식회사 헤카스 | Streaming server, streaming system and streaming method |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110324727A (en) * | 2019-07-16 | 2019-10-11 | 浙江大华技术股份有限公司 | Computer readable storage medium, server and its method for responding playing request |
US11849157B2 (en) | 2019-07-16 | 2023-12-19 | Zhejiang Dahua Technology Co., Ltd. | Systems and methods for live streaming |
KR102438747B1 (en) | 2021-03-31 | 2022-08-31 | 인하대학교 산학협력단 | Method and apparatus for allocating quality-aware transcoding task under limited power in live-streaming systems |
Also Published As
Publication number | Publication date |
---|---|
KR102024642B1 (en) | 2019-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3446461B1 (en) | Just in time transcoding and packaging in ipv6 networks | |
EP3979602B1 (en) | Request-based encoding for streaming content portions | |
US11477262B2 (en) | Requesting multiple chunks from a network node on the basis of a single request message | |
US20140165119A1 (en) | Offline download method, multimedia file download method and system thereof | |
JP5120943B2 (en) | Content providing apparatus, content providing method, client, information processing method of client, and program | |
EP2487919A2 (en) | Method for providing media content to a client device, system and computer software | |
CN102547478B (en) | Triggered slice on-demand system and method of streaming media based on CDN (Content Distribution Network) | |
CA2965795A1 (en) | Hypermedia apparatus and method | |
WO2014007083A1 (en) | Transmission apparatus, transmission method, and network apparatus | |
CN108449633B (en) | Set top box cloud system based on NFV and service implementation method | |
US9923945B2 (en) | Virtual assets for on-demand content generation | |
KR102030983B1 (en) | Operating Method for Live Streaming Service based on Tiled Encoding image and electronic device supporting the same | |
KR20220133938A (en) | Client-based storage of remote element resolutions | |
KR102024642B1 (en) | Live Steaming Server device and operating method thereof | |
CN108271039B (en) | File sending method and device | |
KR101283791B1 (en) | System for encoding distributed moving pictur file and method for the same | |
KR102007669B1 (en) | Video on demand Server device for internet broadcasting and operating method thereof | |
CN116636224A (en) | System and method for replacing networking application program service | |
KR102123070B1 (en) | Video on Demand Steaming Server device and operating method thereof | |
US20210204018A1 (en) | Content distribution system using broadcast network | |
US20230171441A1 (en) | Method providing to a user terminal a target multimedia content available at a master server |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
A302 | Request for accelerated examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |