WO2010058908A2 - Mobile terminal equipped with multi-interface, method for receiving multimedia streaming, server for providing multimedia streaming using multi-network, and method thereof - Google Patents

Mobile terminal equipped with multi-interface, method for receiving multimedia streaming, server for providing multimedia streaming using multi-network, and method thereof Download PDF

Info

Publication number
WO2010058908A2
WO2010058908A2 PCT/KR2009/005952 KR2009005952W WO2010058908A2 WO 2010058908 A2 WO2010058908 A2 WO 2010058908A2 KR 2009005952 W KR2009005952 W KR 2009005952W WO 2010058908 A2 WO2010058908 A2 WO 2010058908A2
Authority
WO
WIPO (PCT)
Prior art keywords
mobile terminal
content
data packet
access network
multimedia streaming
Prior art date
Application number
PCT/KR2009/005952
Other languages
French (fr)
Korean (ko)
Other versions
WO2010058908A3 (en
Inventor
이종민
전승현
최준균
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020090091693A external-priority patent/KR101064002B1/en
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Publication of WO2010058908A2 publication Critical patent/WO2010058908A2/en
Publication of WO2010058908A3 publication Critical patent/WO2010058908A3/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10Architectures or entities
    • H04L65/1059End-user terminal functionalities specially adapted for real-time communication

Definitions

  • the present invention relates to a multimedia streaming service, and more particularly, to a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for more efficiently downloading multimedia contents by fully utilizing network resources of a terminal. will be.
  • a streaming service may refer to a technology capable of processing various multimedia data transmitted as if it is a continuous and continuous flow of water.
  • Multimedia streaming technology is becoming more and more important with the growth of the Internet because most users do not have fast access lines to download large amounts of multimedia content immediately. In these situations, streaming technology allows the client browser or plug-in to start presenting data even before all the files are transferred.
  • streaming services provide services regardless of QoS (Quality of Service), user preference, and bandwidth of a user application considering a single access network, despite a mixed network of wired and wireless access networks. .
  • QoS Quality of Service
  • the state of the network does not always remain constant.
  • the multimedia streaming service is executed in accordance with the initial network bandwidth, if the service target is large, the bandwidth is reduced, and if it is more severe, network congestion occurs, and thus, a stable service cannot be guaranteed.
  • the existing streaming service is not only able to support an efficient service to the user, but also various access network conditions and user requirements are excluded.
  • the present invention provides a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for supporting a highly available multimedia streaming service by utilizing the available interface of the mobile terminal to the maximum.
  • the present invention provides a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for supporting an efficient multimedia streaming service in consideration of the bandwidth of each access network for a mobile terminal capable of multiple network access.
  • a method for providing multimedia streaming using multiple networks may include: determining an access network of the mobile terminal according to a content request of the mobile terminal; And when the at least two access networks exist, allocating a data packet of content to each access network and transmitting the data packet to the access terminal.
  • the connection information receiving unit for determining the access network of the mobile terminal according to the content request of the mobile terminal; And, if there are at least two access network may include a content transmission unit for allocating a data packet of the content to each access network to transmit to the mobile terminal.
  • the multimedia streaming reception method of a mobile terminal in the multimedia streaming reception method of a mobile terminal having at least two interfaces corresponding to different access networks, the step of receiving access information from each access network; ; Transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And receiving the content by activating each interface corresponding to the access network when the multimedia streaming providing server transmits the content through two or more access networks based on the access information of the access network.
  • a mobile terminal equipped with multiple interfaces includes a mobile terminal having at least two interfaces corresponding to different access networks, comprising: a connection information receiver configured to receive access information from each access network; An access information transmitter for transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And a content receiver configured to receive the content by activating each interface corresponding to the access network when the multimedia streaming server transmits the content through two or more access networks based on the access information of the access network.
  • the present invention it is possible to increase the service availability and to provide a query service for the multimedia contents by supporting a multimedia streaming service by simultaneously using several access networks.
  • FIG. 1 is a view for explaining the configuration of a mobile terminal and a multimedia streaming server for providing a multimedia streaming service of the present invention.
  • FIG. 2 is a diagram illustrating a multimedia streaming service process between a mobile terminal and a multimedia streaming providing server according to an embodiment of the present invention.
  • FIG. 3 is a diagram for describing a process of splitting and transmitting a data packet of content according to a bandwidth of an access network in a multimedia streaming providing server.
  • FIG. 4 is a diagram for describing a process of splitting and transmitting a data packet of content using RTP in a multimedia streaming providing server.
  • FIG. 5 is a diagram illustrating an example of an RTP protocol structure used in a multimedia streaming providing server.
  • FIG. 6 is a diagram illustrating a process of splitting and transmitting a data packet of content using SVC in a multimedia streaming providing server.
  • FIG. 7 is a diagram illustrating an example of an SCTP protocol structure used in a multimedia streaming providing server.
  • FIG. 8 is a diagram for describing a process of splitting and transmitting a data packet of content using SCTP in a multimedia streaming providing server.
  • FIG. 9 is a diagram for describing a content receiving process in a mobile terminal equipped with multiple interfaces.
  • FIG. 1 is a view for explaining the configuration of a mobile terminal and a multimedia streaming server for providing a multimedia streaming service of the present invention.
  • the mobile terminal 110 includes a wired LAN, a wireless LAN (IEEE 802.11a / b / g, etc.), WiBro, HSPDA, etc.
  • a terminal device capable of multiple access to two or more access networks 120_1, 120_2,..., 120_n may be referred to.
  • the mobile terminal 110 may access the multimedia streaming providing server 130 to download and play the multimedia content desired by the user from the multimedia streaming providing server 130.
  • the mobile terminal 110 may maintain a connection with the multimedia streaming providing server 130 through an access network based on an IP (internet protocol) communication method among the available access networks 120_1, 120_2,..., 120_n.
  • IP internet protocol
  • the multimedia streaming providing server 130 constructs various multimedia contents (for example, internet protocol television (IPTV) contents, video on demand (VOD) contents, etc.), and provides multimedia contents desired by the user to the mobile terminal 110.
  • IPTV internet protocol television
  • VOD video on demand
  • a multimedia streaming service for downloading can be provided.
  • the mobile terminal 110 may include a connection unit 111, a connection information receiving unit 112, a connection information transmitting unit 113, and a content receiving unit 114.
  • connection part 111 provides a multi-connection interface, and corresponds to an interface (interface 1, interface 2, ..., interface n) 111_1, 111_2 corresponding to different connection networks 120_1, 120_2, ..., 120_n to maintain a connection. , ..., 111_n).
  • the connection information receiver 112 may receive the connection information from each of the access networks 120_1, 120_2,..., 120_n maintaining the connection state with the interfaces 111_1, 111_2,..., 111_n.
  • the access information may include a link bandwidth currently available for maintaining the interconnection.
  • the access information transmitter 113 accesses the access networks 120_1, 120_2,..., 120_n that are currently maintained together with the download request command for the multimedia content. Information may be transmitted to the multimedia streaming providing server 130.
  • the content receiving unit 114 may receive a response signal for the download request command of the multimedia content from the multimedia streaming providing server 130, and may receive the requested multimedia content from the multimedia streaming providing server 130. have.
  • the multimedia streaming providing server 130 may divide and transmit the multimedia content using two or more access networks 120_1, 120_2,..., 120_n based on the access information.
  • the content receiving unit 114 activates the interfaces 111_1, 111_2,..., 111_n corresponding to the access networks 120_1, 120_2,..., 120_n used by the multimedia streaming providing server 130, and then, each interface.
  • Data packets of the multimedia content may be received through 111_1, 111_2,..., And 111_n, and the received data packets may be combined according to the data order.
  • the multimedia streaming providing server 130 may include a content storage unit 131, a connection information receiver 132, and a content transmitter 133.
  • the content storage unit 131 may process and store various multimedia contents in a form capable of a multimedia streaming service.
  • the access information receiver 132 may receive access information of the access networks 120_1, 120_2,..., 120_n currently connected to the mobile terminal 110 from the mobile terminal 110.
  • the content transmitter 133 is based on the access information of the access network (120_1, 120_2, ..., 120_n) when there are two or more access networks (120_1, 120_2, ..., 120_n) currently connected to the mobile terminal 110.
  • the multimedia content may be divided and transmitted to the mobile terminal 110.
  • the content transmitter 133 allocates data packets of the multimedia content to the access networks 120_1, 120_2,..., 120_n that are currently connected to the mobile terminal 110, respectively, to access networks 120_1, 120_2,..., 120_n
  • the multimedia content can be divided and transmitted.
  • FIG. 2 is a diagram illustrating a multimedia streaming service method between a mobile terminal and a multimedia streaming providing server according to an embodiment of the present invention.
  • the embodiment of the present invention can be implemented by the configuration of FIG.
  • the mobile terminal 110 may receive access information from each of the access networks 120_1, 120_2,..., 120_n maintaining the interconnection.
  • the mobile terminal 110 is capable of multiple access with access network 1 (120_1), access network 2 (120_2), access network n (120_n), and is currently connected with access network 1 (120_1) and access network 2 (120_2) of the access network.
  • access information may be received from access network 1 (120_1) and access network 2 (120_2), respectively.
  • the access information may include a link bandwidth that can be used to maintain the interconnection.
  • step S202 the mobile terminal 110 streams the multimedia information based on the user's request to download the multimedia content and the access information of the access network 1 120_1 and the access network 2 120_2 that maintain the current access state. It may transmit to the providing server 130. In this case, the mobile terminal 110 may maintain a connection with the multimedia streaming providing server 130 using an access network capable of IP communication among the access network 1 120_1 and the access network 2 120_2.
  • the multimedia streaming providing server 130 uses the access information of the access network 1 (120_1) and the access network 2 (120_2) received from the mobile terminal 110 (download session for the multimedia content (download session) ) Can be divided. In other words, the multimedia streaming providing server 130 calculates available bandwidths of the access network 1 (120_1) and the access network 2 (120_2), respectively, to the access network 1 (120_1) and the access network 2 (120_2) according to the available bandwidth.
  • the data packet of the multimedia content may be allocated.
  • the multimedia streaming providing server 130 may calculate the available bandwidth by using the link bandwidth and the carrier-to-noise ratio of the access network 1 120_1 and the access network 2 120_2.
  • the available bandwidth may be defined as in Equation 1.
  • C i may represent an available bandwidth of the access network i
  • B i may represent a link bandwidth of the access network i
  • CINR i may mean a carrier-to-noise ratio of a corresponding link of the access network i.
  • sequence numbers S1 to S8 are assigned to each data packet according to the data order. ) Can be given.
  • the multimedia streaming providing server 130 transmits the multimedia content 301 using a real-time transport protocol (RTP) as shown in FIG. 4, a sequence number of the RTP is provided. Can be used.
  • RTP real-time transport protocol
  • the multimedia streaming providing server 130 allocates a data packet of the multimedia content 301 in proportion to the available bandwidths of the access network 1 120_1 and the access network 2 120_2 to perform a download preparation process for the multimedia content. You can finish it.
  • the available bandwidths of the access network 1 (120_1) and the access network 2 (120_2) are 12 Mbps and 4 Mpps, respectively
  • S1, S3, S4, S5, S7, and S8 correspond to the access network 1 120_1 having a speed of 12 Mbps
  • a data packet corresponding to S2 and S6 may be allocated to the access network 2 120_2 having a speed of 4 Mbps.
  • the multimedia streaming providing server 130 may transmit response information about the download request command of the multimedia contents to the mobile terminal 110 when the download preparation process of the multimedia contents is completed.
  • the multimedia streaming providing server 130 may transmit data packets of the multimedia content to the mobile terminal 110 through the allocated access network, respectively.
  • the multimedia streaming providing server 130 transmits data packets corresponding to S1, S3, S4, S5, S7, and S8 through the access network 1 120_1 and receives data packets corresponding to S2 and S6. It may be transmitted to the mobile terminal 110 through the access network 2 (120_2).
  • the mobile terminal 110 may receive data packets of S1, S3, S4, S5, S7, and S8 through the interface 1 (111_1) connected to the access network 1 (120_1) with respect to the multimedia content.
  • the data packet of S2 and S6 may be received through the interface 2 111_2 that is in a connection state with the access network 2 120_2.
  • the multimedia streaming providing server 130 may transmit a data packet of the multimedia content to the mobile terminal 110 using an RTP protocol, an SVC protocol, or an SCTP protocol.
  • FIG. 4 is a diagram for describing a process of splitting and transmitting a data packet of content using RTP in a multimedia streaming providing server.
  • the multimedia streaming providing server 130 may identify a source of an RTP stream for each RTP session by setting a SSRC (Synchronization Source) value starting with a randomly selected number in the multimedia content 301.
  • SSRC Synchronization Source
  • the sequence number set in the RTP packets of the multimedia content 301 using the same SSRC value is an initial value 411 and a value that increases by 1 for each RTP packet transmitted. 412.
  • the interface included in the access unit 111 of the mobile terminal 110 may restore the received packet in the correct order by checking the packet loss and the data order based on the sequence number.
  • SSRC values 1100 are set in the multimedia content 301, and sequence numbers assigned to the frames included in the multimedia content 410 are 1, 2, 3,...
  • the multimedia streaming providing server 130 is an example of transmitting the multimedia content 410 to the mobile terminal 110 through the WiMAX 420 and the WLAN 430.
  • the WLAN 430 may receive three frames 431, 432, 433 at a time interval in which the WiMAX 420 receives one frame 421. Can be. In this case, the WLAN 430 may be about three times larger than the available bandwidth measured using Equation 1 than the WiMAX 420.
  • FIG. 5 is a diagram illustrating an example of an RTP protocol structure used in a multimedia streaming providing server.
  • the RTP protocol structure used by the multimedia streaming providing server 130 to transmit the multimedia content 410 may be divided into 32-bit units.
  • the first column 510 of the RTP protocol structure is a 2-bit version (V) 511, a 1-bit padding (P) 512, and a 1-bit extension (X) 513, as shown in FIG. , 4-bit CSRC count (CC) 514, 1-bit marker (M) 515, 7-bit payload type (PT) 516, and sequence number 517.
  • the version (V) 511 may be information for identifying a version of the RTP
  • the padding (P) 512 may be information indicating that one or more other padding octets have been added to the end of the payload when set to 1.
  • the padded first octet may indicate the number of additional octets included.
  • extension (X) 513 is information that can indicate whether there is an extension header added to the fixed RTP header
  • CSRC Count (CC: CSRS Count)
  • CSRC Distributing Source
  • the marker (M) 515 may be information indicating whether to use a marker bit defined according to the RTP profile, and the payload type (PT) 516 may be information defining an RTP payload type. .
  • the second column 520 of the RTP protocol structure may consist of a 32-bit Timestamp.
  • the timestamp may indicate the sampling instant of the first octet in the RTP packet.
  • the sampling frequency used in the RTP packet depends on the data type. For example, when using the G.711 voice codec in Windows XP, the sampling frequency may be set to 8 kHz.
  • the third column 530 of the RTP protocol structure may consist of 32-bit Synchronization Source (SSRC).
  • Synchronization Source may be a value starting with a randomly selected number set in the multimedia content 301 by the multimedia streaming providing server 130 to identify the source of the RTP stream for each RTP session.
  • the fourth column and the column 540 following the fourth column of the RTP protocol structure may be configured as 32-bit contributing sources (CSRs).
  • the CSRC value is information representing sources of various streams that contributed to the RTP session, and the SSRC value of each source in the RTP session may be added to the CSRC value by the RTP mixer.
  • FIG. 6 is a diagram illustrating a process of splitting and transmitting a data packet of content using SVC in a multimedia streaming providing server.
  • the multimedia streaming providing server 130 may first encode the multimedia content 301 into a base layer 621.
  • the multimedia streaming providing server 130 includes a minimum quality substream and at least one enhancement layer in a base layer 621.
  • Scalable Layer 611 may be created.
  • the upper layer may add additional quality to the base layer.
  • the multimedia streaming providing server 130 may further generate a fine grained scalability (GFS) layer 612 that encodes an upper layer as close as possible to each other to follow the network band.
  • GFS fine grained scalability
  • the multimedia streaming providing server 130 transmits using a base layer 621, a spatial scalable layer 611, and a fine grained scalability (GFS) layer 612.
  • a desired data packet may be transformed into a format used for transmission in scalable video coding (SVC), and a sequence number 630 may be set for each data packet.
  • SVC scalable video coding
  • the format of the data packet that can be changed by the multimedia streaming providing server 130 is shown in Table 1 below.
  • the unit of resolution is pixel.
  • the multimedia streaming providing server 130 may transmit the QCIF 720 transformed into the base layer 621 and the FGS layer 612 to the WLAN band using a scalable video coding (SVC) method.
  • SVC scalable video coding
  • the multimedia streaming server 130 may additionally increase the resolution by transmitting the CIF 610 transformed into the spatial scalable layer 611 and the FGS layer 612 to the WiMAX band. Yes, and vice versa.
  • FIG. 7 is a diagram illustrating an example of an SCTP protocol structure used in a multimedia streaming providing server.
  • SCTP Stream Control Transmission Protocol
  • the SCTP has a multi-streaming function for sending a multi-stream to one SCTP association and a multi-homing function for using two or more interfaces.
  • the SCTP consists of a header format 710, a junk 720, and a parameter 730 as shown in FIG. 7.
  • the junk 720 may include a TSN 721, a stream identifier 722, a stream sequence number 723, and a payload protocol identifier 724.
  • the transport sequence number (TSN) 721 may be any number for identifying each junk of the SCTP packet.
  • SCTP may be composed of several TSNs according to each stream ID.
  • the Stream Identifier 722 is an identifier representing each stream
  • the Stream Sequence Number 723 may be a number of each piece arbitrarily set when the stream is divided into pieces.
  • the payload protocol identifier 724 may be an ID of a higher application protocol.
  • FIG. 8 is a diagram for describing a process of splitting and transmitting a data packet of content using SCTP in a multimedia streaming providing server.
  • the multimedia streaming providing server 130 first sets a stream identifier 722 for each stream of the multimedia content 301 to be transmitted to different access networks 120, and sets a sequence number indicating the transmission order for each stream identifier 722.
  • SSN Stream Sequence Number (723) can be set.
  • the mobile terminal 110 may order the received streams using the SSN 723.
  • the SSN 723 of the stream 810 transmitted by the multimedia streaming providing server 130 using WLAN is 0, and the SSN 723 of the stream 820 transmitted using WiMAX is 1. Since it is set to, the mobile terminal 110 may determine that the order of the stream 810 is first.
  • the multimedia streaming providing server 130 may set a transmission sequence number (TSN) 721 in a frame transmitted through each stream.
  • TSN transmission sequence number
  • the mobile terminal 110 may order each frame based on the TSN.
  • the multimedia streaming providing server 130 may include a frame in which the TSN 721 is set and transmit the stream in which the Stream Identifier 722 and the SSN 723 are set to different access networks 120.
  • the mobile terminal 110 receives streams transmitted through different access networks 120, and based on the TSN 721, the Stream Identifier 722, and the SSN 723, each stream and a frame included in the stream. Can be ordered.
  • the mobile terminal 110 may arrange the frames 811, the frames 821, the frames 812, and the frames 813 sequentially according to the TSN 721 set in each frame. .
  • FIG. 9 is a diagram for describing a content receiving process in a mobile terminal equipped with multiple interfaces.
  • step S901 the mobile terminal 110 transmits the access information of the access network 120 that maintains the current connection state to the multimedia streaming providing server 130 together with the download request command of the multimedia content.
  • step S902 and step S903 when the mobile terminal 110 receives the response information for the download request command of the multimedia content from the multimedia streaming providing server 130, that is, the access network 120 in the connected state 120 It may be determined whether there are two or more interfaces 111 currently available.
  • step S904 and step S905 the mobile terminal 110 activates one interface as a single interface when there is only one currently available interface, and thus, through the access network 120 in a connected state with the activated interface, Data packets of multimedia content may be sequentially received.
  • step S906 and step S907 when there are two or more currently available interfaces, the mobile terminal 110 activates both of the two or more interfaces as multiple interfaces, thereby connecting each access network 120 to the active interface. ) Can receive the data packet of the multimedia content, respectively.
  • the mobile terminal 110 may combine the received data packets according to sequence numbers in the process of receiving data packets of the multimedia content through two or more interfaces.
  • the mobile terminal 110 receives data packets of S1, S3, S4, S5, S7, and S8 through interface 1 111_1 corresponding to the access network 1 120_1 and the access network 2.
  • Data packets of S2 and S6 may be received through interface 2 111_2 corresponding to 120_2, and the received data packets may be combined according to sequence numbers.
  • the data amount of the multimedia content to be streamed through each access network can be adjusted in consideration of the bandwidth of the access network. Can be played after.
  • the present invention can receive a service by applying a cooperative method even if it is difficult to receive the service due to a lack of BW of one access network, the existing protocol such as RTP or RTCP, or layered coding such as SVC (Scalable Video Coding) It can also be used to provide wide scalability.
  • the existing protocol such as RTP or RTCP
  • layered coding such as SVC (Scalable Video Coding) It can also be used to provide wide scalability.

Abstract

The invention relates to a mobile terminal equipped with a multi-interface, to a method for receiving multimedia streaming, to a server for providing multimedia streaming using a multi-network, and to a method thereof. The method for providing multimedia streaming using a multi-network comprises the steps of: determining a connection network of a mobile terminal in accordance with the request for content from the mobile terminal; and allocating a content data packet to each of the connection networks if at least two connection networks exist, and transmitting the data packet to the mobile terminal.

Description

다중 인터페이스를 탑재한 이동 단말 및 멀티미디어 스트리밍 수신 방법, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버 및 그 방법Mobile terminal and multimedia streaming receiving method equipped with multiple interfaces, multimedia streaming providing server using multiple networks and method thereof
본 발명은 멀티미디어 스트리밍 서비스에 관한 것으로, 더욱 상세하게는 단말의 네트워크 자원을 충분히 활용하여 보다 효율적으로 멀티미디어 컨텐츠의 다운로드를 실행하기 위한 이동 단말, 멀티미디어 스트리밍 수신 방법, 멀티미디어 스트리밍 제공 서버 및 그 방법에 관한 것이다.The present invention relates to a multimedia streaming service, and more particularly, to a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for more efficiently downloading multimedia contents by fully utilizing network resources of a terminal. will be.
일반적으로, 스트리밍 서비스(streaming service)는 전송되는 각종 멀티미디어 데이터를 마치 끊임없고 지속적인 물의 흐름처럼 처리할 수 있는 기술을 의미할 수 있다.In general, a streaming service may refer to a technology capable of processing various multimedia data transmitted as if it is a continuous and continuous flow of water.
멀티미디어 스트리밍 기술은 인터넷의 성장과 함께 더욱 더 중요해지고 있는데, 그 이유는 대부분의 사용자가 대용량 멀티미디어 컨텐츠를 즉시 다운로드 할 만큼 빠른 접속회선을 가지고 있지 못하기 때문이다. 이러한 상황에서 스트리밍 기술을 이용할 경우 파일이 모두 전송되기 전에라도 클라이언트 브라우저 또는 플러그인(plug in)이 데이터의 표현을 시작할 수 있다.Multimedia streaming technology is becoming more and more important with the growth of the Internet because most users do not have fast access lines to download large amounts of multimedia content immediately. In these situations, streaming technology allows the client browser or plug-in to start presenting data even before all the files are transferred.
그러나, 현재 제공되고 있는 스트리밍 서비스는 다양한 유/무선 접속망이 혼재하는 네트워크 환경에도 불구하고, 단일 접속망을 고려하여 사용자 어플리케이션의 QoS(Quality of Service)와 사용자 선호도 및 대역폭에 관계없이 서비스를 제공하고 있다.However, currently provided streaming services provide services regardless of QoS (Quality of Service), user preference, and bandwidth of a user application considering a single access network, despite a mixed network of wired and wireless access networks. .
또한, 스트리밍 환경에서 네트워크의 상태는 항상 일정한 상태를 유지하지 않는다. 일반적으로, 초기 네트워크 대역폭에 맞게 멀티미디어 스트리밍 서비스를 실행 하더라도 서비스 대상이 많아지면 대역폭이 감소하게 되고 더 심할 경우 네트워크 혼잡(Congestion) 상태가 발생하게 되어 안정된 서비스를 보장할 수 없게 된다.Also, in a streaming environment, the state of the network does not always remain constant. In general, even if the multimedia streaming service is executed in accordance with the initial network bandwidth, if the service target is large, the bandwidth is reduced, and if it is more severe, network congestion occurs, and thus, a stable service cannot be guaranteed.
다시 말해, 기존의 스트리밍 서비스는 사용자에게 효율적인 서비스를 지원해 줄 수 없을 뿐 아니라 다양한 접속망 상황과 사용자의 요구 사항이 배제되고 있는 실정이다.In other words, the existing streaming service is not only able to support an efficient service to the user, but also various access network conditions and user requirements are excluded.
본 발명은 이동 단말의 이용 가능한 인터페이스를 최대한으로 활용하여 가용성 높은 멀티미디어 스트리밍 서비스를 지원하기 위한 이동 단말, 멀티미디어 스트리밍 수신 방법, 멀티미디어 스트리밍 제공 서버 및 그 방법을 제공한다.The present invention provides a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for supporting a highly available multimedia streaming service by utilizing the available interface of the mobile terminal to the maximum.
본 발명은 다중 망 접속이 가능한 이동 단말에 대하여 각 접속망의 대역폭을 고려하여 효율적인 멀티미디어 스트리밍 서비스를 지원하기 위한 이동 단말, 멀티미디어 스트리밍 수신 방법, 멀티미디어 스트리밍 제공 서버 및 그 방법을 제공한다.The present invention provides a mobile terminal, a multimedia streaming receiving method, a multimedia streaming providing server, and a method for supporting an efficient multimedia streaming service in consideration of the bandwidth of each access network for a mobile terminal capable of multiple network access.
본 발명의 일실 시 예에 따른 다중 망을 이용한 멀티미디어 스트리밍 제공 방법은, 이동 단말의 컨텐츠 요청에 따라 상기 이동 단말의 접속망을 판단하는 단계; 및, 상기 접속망이 적어도 두 개 존재할 경우 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는 단계를 포함할 수 있다.According to an embodiment of the present invention, a method for providing multimedia streaming using multiple networks may include: determining an access network of the mobile terminal according to a content request of the mobile terminal; And when the at least two access networks exist, allocating a data packet of content to each access network and transmitting the data packet to the access terminal.
또한, 본 발명의 일실시예에 따른 다중 망을 이용한 멀티미디어 스트리밍 제공 서버는, 이동 단말의 컨텐츠 요청에 따라 상기 이동 단말의 접속망을 판단하는 접속정보 수신부; 및, 상기 접속망이 적어도 두 개 존재할 경우 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는 컨텐츠 전송부를 포함할 수 있다.In addition, the multimedia streaming providing server using multiple networks according to an embodiment of the present invention, the connection information receiving unit for determining the access network of the mobile terminal according to the content request of the mobile terminal; And, if there are at least two access network may include a content transmission unit for allocating a data packet of the content to each access network to transmit to the mobile terminal.
또한, 본 발명의 일실시예에 따른 이동 단말의 멀티미디어 스트리밍 수신 방법은 서로 다른 접속망에 대응하는 적어도 두 개의 인터페이스를 구비한 이동 단말의 멀티미디어 스트리밍 수신 방법에 있어서, 각 접속망으로부터 접속정보를 수신하는 단계; 사용자의 컨텐츠 요청에 따라 상기 접속망의 접속정보를 멀티미디어 스트리밍 제공 서버로 전송하는 단계; 및, 상기 멀티미디어 스트리밍 제공 서버에서 상기 접속망의 접속정보를 근거로 두 개 이상의 접속망을 통해 컨텐츠를 전송할 경우 상기 접속망과 대응되는 각 인터페이스를 활성하여 상기 컨텐츠를 수신하는 단계를 포함할 수 있다.In addition, the multimedia streaming reception method of a mobile terminal according to an embodiment of the present invention in the multimedia streaming reception method of a mobile terminal having at least two interfaces corresponding to different access networks, the step of receiving access information from each access network; ; Transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And receiving the content by activating each interface corresponding to the access network when the multimedia streaming providing server transmits the content through two or more access networks based on the access information of the access network.
또한, 본 발명의 일실시예에 따른 다중 인터페이스를 탑재한 이동 단말은 서로 다른 접속망에 대응하는 적어도 두 개의 인터페이스를 구비한 이동 단말에 있어서, 각 접속망으로부터 접속정보를 수신하는 접속정보 수신부; 사용자의 컨텐츠 요청에 따라 상기 접속망의 접속정보를 멀티미디어 스트리밍 제공 서버로 전송하는 접속정보 전송부; 및, 상기 멀티미디어 스트리밍 제공 서버에서 상기 접속망의 접속정보를 근거로 두 개 이상의 접속망을 통해 컨텐츠를 전송할 경우 상기 접속망과 대응되는 각 인터페이스를 활성하여 상기 컨텐츠를 수신하는 컨텐츠 수신부를 포함할 수 있다.In addition, a mobile terminal equipped with multiple interfaces according to an embodiment of the present invention includes a mobile terminal having at least two interfaces corresponding to different access networks, comprising: a connection information receiver configured to receive access information from each access network; An access information transmitter for transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And a content receiver configured to receive the content by activating each interface corresponding to the access network when the multimedia streaming server transmits the content through two or more access networks based on the access information of the access network.
본 발명에 따르면, 여러 접속망을 동시에 이용하여 멀티미디어 스트리밍 서비스를 지원함으로써 서비스 가용도를 높이고 보다 향상된 멀티미디어 컨텐츠에 대한 질의 서비스를 제공할 수 있다.According to the present invention, it is possible to increase the service availability and to provide a query service for the multimedia contents by supporting a multimedia streaming service by simultaneously using several access networks.
특히, 접속망의 대역폭을 고려하여 멀티미디어의 다운로드 데이터를 할당함으로써 스트리밍 전송 효율을 향상시키고 네트워크 자원의 효율성을 향상시킬 수 있다.In particular, by allocating the download data of the multimedia in consideration of the bandwidth of the access network, it is possible to improve the streaming transmission efficiency and the efficiency of network resources.
도 1은 본 발명의 멀티미디어 스트리밍 서비스를 제공하기 위한 이동 단말과 멀티미디어 스트리밍 제공 서버의 구성을 설명하기 위한 도면이다.1 is a view for explaining the configuration of a mobile terminal and a multimedia streaming server for providing a multimedia streaming service of the present invention.
도 2는 본 발명의 일실시예에 따른 이동 단말과 멀티미디어 스트리밍 제공 서버 간의 멀티미디어 스트리밍 서비스 과정을 설명하기 위한 도면이다.2 is a diagram illustrating a multimedia streaming service process between a mobile terminal and a multimedia streaming providing server according to an embodiment of the present invention.
도 3은 멀티미디어 스트리밍 제공 서버에서 접속망의 대역폭에 따라 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.FIG. 3 is a diagram for describing a process of splitting and transmitting a data packet of content according to a bandwidth of an access network in a multimedia streaming providing server.
도 4는 멀티미디어 스트리밍 제공 서버에서 RTP를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.4 is a diagram for describing a process of splitting and transmitting a data packet of content using RTP in a multimedia streaming providing server.
도 5는 멀티미디어 스트리밍 제공 서버에서 사용하는 RTP 프로토콜 구조의 일례를 나타낸 도면이다.5 is a diagram illustrating an example of an RTP protocol structure used in a multimedia streaming providing server.
도 6은 멀티미디어 스트리밍 제공 서버에서 SVC를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.FIG. 6 is a diagram illustrating a process of splitting and transmitting a data packet of content using SVC in a multimedia streaming providing server.
도 7은 멀티미디어 스트리밍 제공 서버에서 사용하는 SCTP 프로토콜 구조의 일례를 나타낸 도면이다.7 is a diagram illustrating an example of an SCTP protocol structure used in a multimedia streaming providing server.
도 8은 멀티미디어 스트리밍 제공 서버에서 SCTP를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.FIG. 8 is a diagram for describing a process of splitting and transmitting a data packet of content using SCTP in a multimedia streaming providing server.
도 9는 다중 인터페이스를 탑재한 이동 단말에서의 컨텐츠 수신 과정을 설명하기 위한 도면이다.9 is a diagram for describing a content receiving process in a mobile terminal equipped with multiple interfaces.
이하에서는, 첨부된 도면을 참조하여 본 발명의 일실시예에 따른 다중 인터페이스를 탑재한 이동 단말 및 멀티미디어 스트리밍 수신 방법과, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버 및 그 방법을 설명하기로 한다.Hereinafter, with reference to the accompanying drawings will be described a mobile terminal and a multimedia streaming receiving method, a multimedia streaming providing server and a method using multiple networks according to an embodiment of the present invention.
도 1은 본 발명의 멀티미디어 스트리밍 서비스를 제공하기 위한 이동 단말과 멀티미디어 스트리밍 제공 서버의 구성을 설명하기 위한 도면이다.1 is a view for explaining the configuration of a mobile terminal and a multimedia streaming server for providing a multimedia streaming service of the present invention.
도 1을 참조하면, 이동 단말(110)은 유선 랜, 무선 랜(IEEE 802. 11a/b/g 등), 와이브로(Wibro), HSPDA 등 각종 유선 또는 무선 통신 방식을 따르는 접속망(120) 특히, 둘 이상의 접속망(120_1, 120_2, …, 120_n)에 다중 접속이 가능한 단말 장치를 의미할 수 있다.Referring to FIG. 1, the mobile terminal 110 includes a wired LAN, a wireless LAN (IEEE 802.11a / b / g, etc.), WiBro, HSPDA, etc. A terminal device capable of multiple access to two or more access networks 120_1, 120_2,..., 120_n may be referred to.
상기 이동 단말(110)은 멀티미디어 스트리밍 제공 서버(130)에 접속하여 사용자가 원하는 멀티미디어 컨텐츠를 상기 멀티미디어 스트리밍 제공 서버(130)로부터 다운로드 받아 재생할 수 있다.The mobile terminal 110 may access the multimedia streaming providing server 130 to download and play the multimedia content desired by the user from the multimedia streaming providing server 130.
이때, 상기 이동 단말(110)은 사용 가능한 접속망(120_1, 120_2, …, 120_n) 중 IP(internet protocol) 통신 방식을 따르는 접속망을 통해 상기 멀티미디어 스트리밍 제공 서버(130)와의 접속을 유지할 수 있다.In this case, the mobile terminal 110 may maintain a connection with the multimedia streaming providing server 130 through an access network based on an IP (internet protocol) communication method among the available access networks 120_1, 120_2,..., 120_n.
상기 멀티미디어 스트리밍 제공 서버(130)는 각종 멀티미디어 컨텐츠(예를 들어, IPTV(internet protocol television) 컨텐츠, VOD(video on demand) 컨텐츠 등)를 구축하고 사용자가 원하는 멀티미디어 컨텐츠를 상기 이동 단말(110)로 다운로드하기 위한 멀티미디어 스트리밍 서비스를 제공할 수 있다.The multimedia streaming providing server 130 constructs various multimedia contents (for example, internet protocol television (IPTV) contents, video on demand (VOD) contents, etc.), and provides multimedia contents desired by the user to the mobile terminal 110. A multimedia streaming service for downloading can be provided.
도 1을 참조하면, 상기 이동 단말(110)은 접속부(111)와, 접속정보 수신부(112)와, 접속정보 전송부(113)와, 컨텐츠 수신부(114)로 구성될 수 있다.Referring to FIG. 1, the mobile terminal 110 may include a connection unit 111, a connection information receiving unit 112, a connection information transmitting unit 113, and a content receiving unit 114.
상기 접속부(111)는 다중 접속 인터페이스를 제공하는 것으로, 서로 다른 접속망(120_1, 120_2, …, 120_n)과 대응되어 접속을 유지하는 인터페이스(인터페이스 1, 인터페이스 2, …, 인터페이스 n)(111_1, 111_2, …, 111_n)로 구성될 수 있다.The connection part 111 provides a multi-connection interface, and corresponds to an interface (interface 1, interface 2, ..., interface n) 111_1, 111_2 corresponding to different connection networks 120_1, 120_2, ..., 120_n to maintain a connection. , ..., 111_n).
상기 접속정보 수신부(112)는 상기 인터페이스(111_1, 111_2, …, 111_n)와의 접속 상태를 유지하고 있는 각 접속망(120_1, 120_2, …, 120_n)으로부터 접속정보를 수신할 수 있다. 이때, 상기 접속정보는 상호 연결을 유지하는데 현재 사용 가능한 링크 대역폭을 포함할 수 있다.The connection information receiver 112 may receive the connection information from each of the access networks 120_1, 120_2,..., 120_n maintaining the connection state with the interfaces 111_1, 111_2,..., 111_n. In this case, the access information may include a link bandwidth currently available for maintaining the interconnection.
상기 접속정보 전송부(113)는 사용자로부터 상기 멀티미디어 컨텐츠에 대한 다운로드 요청 명령이 발생할 경우 상기 멀티미디어 컨텐츠의 다운로드 요청 명령과 함께 현재 접속 상태를 유지하고 있는 접속망(120_1, 120_2, …, 120_n)의 접속정보를 상기 멀티미디어 스트리밍 제공 서버(130)로 전송할 수 있다.When the download request command for the multimedia content is generated from the user, the access information transmitter 113 accesses the access networks 120_1, 120_2,..., 120_n that are currently maintained together with the download request command for the multimedia content. Information may be transmitted to the multimedia streaming providing server 130.
상기 컨텐츠 수신부(114)는 상기 멀티미디어 스트리밍 제공 서버(130)로부터 상기 멀티미디어 컨텐츠의 다운로드 요청 명령에 대한 응답신호를 수신할 수 있으며, 상기 멀티미디어 스트리밍 제공 서버(130)로부터 상기 요청한 멀티미디어 컨텐츠를 수신할 수 있다. 이때, 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 접속정보를 근거로 두 개 이상의 접속망(120_1, 120_2, …, 120_n)을 이용하여 상기 멀티미디어 컨텐츠를 분할 전송할 수 있다. 한편, 상기 컨텐츠 수신부(114)는 상기 멀티미디어 스트리밍 제공 서버(130)에서 이용한 접속망(120_1, 120_2, …, 120_n)과 대응되는 인터페이스(111_1, 111_2, …, 111_n)를 활성화 한 후, 각각의 인터페이스(111_1, 111_2, …, 111_n)를 통해 상기 멀티미디어 컨텐츠의 데이터 패킷을 수신하여 데이터 순서에 따라 상기 수신된 데이터 패킷을 조합할 수 있다.The content receiving unit 114 may receive a response signal for the download request command of the multimedia content from the multimedia streaming providing server 130, and may receive the requested multimedia content from the multimedia streaming providing server 130. have. In this case, the multimedia streaming providing server 130 may divide and transmit the multimedia content using two or more access networks 120_1, 120_2,..., 120_n based on the access information. Meanwhile, the content receiving unit 114 activates the interfaces 111_1, 111_2,..., 111_n corresponding to the access networks 120_1, 120_2,..., 120_n used by the multimedia streaming providing server 130, and then, each interface. Data packets of the multimedia content may be received through 111_1, 111_2,..., And 111_n, and the received data packets may be combined according to the data order.
도 1을 참조하면, 상기 멀티미디어 스트리밍 제공 서버(130)는 컨텐츠 저장부(131)와, 접속정보 수신부(132)와, 컨텐츠 전송부(133)로 구성될 수 있다.Referring to FIG. 1, the multimedia streaming providing server 130 may include a content storage unit 131, a connection information receiver 132, and a content transmitter 133.
상기 컨텐츠 저장부(131)는 다양한 멀티미디어 컨텐츠를 멀티미디어 스트리밍 서비스가 가능한 형태로 처리한 후 저장 및 유지할 수 있다.The content storage unit 131 may process and store various multimedia contents in a form capable of a multimedia streaming service.
상기 접속정보 수신부(132)는 상기 이동 단말(110)로부터 상기 이동 단말(110)과 현재 접속 상태인 접속망(120_1, 120_2, …, 120_n)의 접속정보를 수신할 수 있다.The access information receiver 132 may receive access information of the access networks 120_1, 120_2,..., 120_n currently connected to the mobile terminal 110 from the mobile terminal 110.
상기 컨텐츠 전송부(133)는 상기 이동 단말(110)과 현재 접속 상태인 접속망(120_1, 120_2, …, 120_n)이 두 개 이상일 경우 상기 접속망(120_1, 120_2, …, 120_n)의 접속정보를 근거로 상기 이동 단말(110)로 상기 멀티미디어 컨텐츠를 분할 전송할 수 있다. 상기 컨텐츠 전송부(133)는 상기 이동 단말(110)과 현재 접속 상태인 접속망(120_1, 120_2, …, 120_n)에 상기 멀티미디어 컨텐츠의 데이터 패킷을 각각 할당하여 각 접속망(120_1, 120_2, …, 120_n)을 통해 상기 멀티미디어 컨텐츠를 분할 전송할 수 있다.The content transmitter 133 is based on the access information of the access network (120_1, 120_2, ..., 120_n) when there are two or more access networks (120_1, 120_2, ..., 120_n) currently connected to the mobile terminal 110. The multimedia content may be divided and transmitted to the mobile terminal 110. The content transmitter 133 allocates data packets of the multimedia content to the access networks 120_1, 120_2,..., 120_n that are currently connected to the mobile terminal 110, respectively, to access networks 120_1, 120_2,..., 120_n The multimedia content can be divided and transmitted.
도 2는 본 발명의 일실시예에 따른 이동 단말과 멀티미디어 스트리밍 제공 서버 간의 멀티미디어 스트리밍 서비스 방법을 설명하기 위한 도면이다. 여기서, 본 발명의 실시예는 도 1의 구성에 의해 구현될 수 있다.2 is a diagram illustrating a multimedia streaming service method between a mobile terminal and a multimedia streaming providing server according to an embodiment of the present invention. Here, the embodiment of the present invention can be implemented by the configuration of FIG.
단계(S201)에서 상기 이동 단말(110)은 상호 접속을 유지하고 있는 각 접속망(120_1, 120_2, …, 120_n)으로부터 접속정보를 수신할 수 있다. 여기서, 상기 이동 단말(110)은 접속망1(120_1), 접속망2(120_2), 접속망n(120_n)과 다중 접속 가능하고 상기 접속 가능한 접속망 중 접속망1(120_1), 접속망2(120_2)과 현재 접속을 유지하고 있는 상태라고 가정할 경우 접속망1(120_1), 접속망2(120_2)로부터 각각 접속정보를 수신할 수 있다. 이때, 상기 접속정보는 상호 연결을 유지하는데 사용할 수 있는 링크 대역폭을 포함할 수 있다.In operation S201, the mobile terminal 110 may receive access information from each of the access networks 120_1, 120_2,..., 120_n maintaining the interconnection. Here, the mobile terminal 110 is capable of multiple access with access network 1 (120_1), access network 2 (120_2), access network n (120_n), and is currently connected with access network 1 (120_1) and access network 2 (120_2) of the access network. When it is assumed that the state is maintained, access information may be received from access network 1 (120_1) and access network 2 (120_2), respectively. In this case, the access information may include a link bandwidth that can be used to maintain the interconnection.
단계(S202)에서 상기 이동 단말(110)은 사용자의 요청에 따라 멀티미디어 컨텐츠의 다운로드 요청 명령과, 현재 접속 상태를 유지하고 있는 접속망1(120_1), 접속망2(120_2)의 접속정보를 상기 멀티미디어 스트리밍 제공 서버(130)로 전송할 수 있다. 이때, 상기 이동 단말(110)은 접속망1(120_1), 접속망2(120_2) 중 IP 통신이 가능한 접속망을 이용하여 상기 멀티미디어 스트리밍 제공 서버(130)와의 접속을 유지할 수 있다.In step S202, the mobile terminal 110 streams the multimedia information based on the user's request to download the multimedia content and the access information of the access network 1 120_1 and the access network 2 120_2 that maintain the current access state. It may transmit to the providing server 130. In this case, the mobile terminal 110 may maintain a connection with the multimedia streaming providing server 130 using an access network capable of IP communication among the access network 1 120_1 and the access network 2 120_2.
단계(S203)에서 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 이동 단말(110)로부터 수신된 접속망1(120_1), 접속망2(120_2)의 접속정보를 이용하여 상기 멀티미디어 컨텐츠에 대한 다운로드 세션(download session)을 분할할 수 있다. 다시 말해, 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 접속망1(120_1), 접속망2(120_2)의 가용 대역폭을 각각 산출한 후 상기 가용 대역폭에 따라 상기 접속망1(120_1), 접속망2(120_2)에 대한 상기 멀티미디어 컨텐츠의 데이터 패킷을 할당할 수 있다.In step S203, the multimedia streaming providing server 130 uses the access information of the access network 1 (120_1) and the access network 2 (120_2) received from the mobile terminal 110 (download session for the multimedia content (download session) ) Can be divided. In other words, the multimedia streaming providing server 130 calculates available bandwidths of the access network 1 (120_1) and the access network 2 (120_2), respectively, to the access network 1 (120_1) and the access network 2 (120_2) according to the available bandwidth. The data packet of the multimedia content may be allocated.
상기 멀티미디어 스트리밍 제공 서버(130)는 상기 접속망1(120_1), 접속망2(120_2)의 링크 대역폭과 반송파 대 노이즈 비율(carrier-to-noise-ratio)을 이용하여 상기 가용 대역폭을 산출할 수 있으며, 상기 가용 대역폭은 수학식 1과 같이 정의할 수 있다.The multimedia streaming providing server 130 may calculate the available bandwidth by using the link bandwidth and the carrier-to-noise ratio of the access network 1 120_1 and the access network 2 120_2. The available bandwidth may be defined as in Equation 1.
[수학식 1][Equation 1]
C i B i log2 (1 + CINR i ) (i = 1, 2, …, n) C i B i log2 (1 +CINR i (i = 1, 2, ..., n)
여기서, Ci는 접속망 i의 가용 대역폭, Bi는 접속망 i의 링크 대역폭, CINRi는 접속망 i의 해당 링크의 반송파 대 노이즈 비율을 의미할 수 있다.Here, C i may represent an available bandwidth of the access network i, B i may represent a link bandwidth of the access network i, and CINR i may mean a carrier-to-noise ratio of a corresponding link of the access network i.
상기 멀티미디어 스트리밍 제공 서버(130)는 도 3에 도시된 바와 같이 상기 멀티미디어 컨텐츠(301)가 8개의 데이터 패킷으로 구성되어 있다고 가정할 경우, 데이터 순서에 따라 각각의 데이터 패킷에 시퀀스 번호(S1~S8)를 부여할 수 있다.When the multimedia streaming providing server 130 assumes that the multimedia content 301 is composed of eight data packets as illustrated in FIG. 3, sequence numbers S1 to S8 are assigned to each data packet according to the data order. ) Can be given.
또한, 상기 멀티미디어 스트리밍 제공 서버(130)는 도 4에 도시된 바와 같이 RTP(Real-time Transport Protocol)를 사용하여 상기 멀티미디어 컨텐츠(301)를 전송한다고 가정할 경우, RTP의 시퀀스 넘버(sequence number)를 사용할 수 있다.In addition, assuming that the multimedia streaming providing server 130 transmits the multimedia content 301 using a real-time transport protocol (RTP) as shown in FIG. 4, a sequence number of the RTP is provided. Can be used.
상기 멀티미디어 스트리밍 제공 서버(130)가 RTP을 사용하여 상기 멀티미디어 컨텐츠(301)를 전송하는 경우의 일례는 이하 도 4를 참조하여 상세히 설명한다.An example in which the multimedia streaming providing server 130 transmits the multimedia content 301 using RTP will be described in detail with reference to FIG. 4.
그리고, 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 접속망1(120_1), 접속망2(120_2)의 가용 대역폭에 비례하여 상기 멀티미디어 컨텐츠(301)의 데이터 패킷을 할당함으로써 상기 멀티미디어 컨텐츠에 대한 다운로드 준비 과정을 완료할 수 있다. 예를 들어, 상기 접속망1(120_1), 접속망2(120_2)의 가용 대역폭이 각각 12Mbps, 4Mpbs인 경우 12Mbps의 속도를 가진 접속망1(120_1)에 S1, S3, S4, S5, S7, S8에 해당하는 데이터 패킷을, 4Mbps의 속도를 가진 접속망2(120_2)에 S2, S6에 해당하는 데이터 패킷을 할당할 수 있다.In addition, the multimedia streaming providing server 130 allocates a data packet of the multimedia content 301 in proportion to the available bandwidths of the access network 1 120_1 and the access network 2 120_2 to perform a download preparation process for the multimedia content. You can finish it. For example, when the available bandwidths of the access network 1 (120_1) and the access network 2 (120_2) are 12 Mbps and 4 Mpps, respectively, S1, S3, S4, S5, S7, and S8 correspond to the access network 1 120_1 having a speed of 12 Mbps A data packet corresponding to S2 and S6 may be allocated to the access network 2 120_2 having a speed of 4 Mbps.
단계(S204)에서 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 멀티미디어 컨텐츠의 다운로드 준비 과정이 완료되면 상기 멀티미디어 컨텐츠의 다운로드 요청 명령에 대한 응답 정보를 상기 이동 단말(110)로 전송할 수 있다.In operation S204, the multimedia streaming providing server 130 may transmit response information about the download request command of the multimedia contents to the mobile terminal 110 when the download preparation process of the multimedia contents is completed.
단계(S205)에서 상기 멀티미디어 스트리밍 제공 서버(130)는 상기 멀티미디어 컨텐츠의 데이터 패킷을 각각 할당된 접속망을 통해 상기 이동 단말(110)로 전송할 수 있다. 도 3을 참조하면, 상기 멀티미디어 스트리밍 제공 서버(130)는 S1, S3, S4, S5, S7, S8에 해당하는 데이터 패킷을 상기 접속망1(120_1)을 통해, S2, S6에 해당하는 데이터 패킷을 상기 접속망2(120_2)를 통해 상기 이동 단말(110)로 전송할 수 있다. 이때, 상기 이동 단말(110)은 상기 멀티미디어 컨텐츠에 대하여 상기 접속망1(120_1)과 접속 상태에 있는 인터페이스1(111_1)을 통해 S1, S3, S4, S5, S7, S8의 데이터 패킷을 수신할 수 있으며, 상기 접속망2(120_2)와 접속 상태에 있는 인터페이스2(111_2)을 통해 S2, S6의 데이터 패킷을 수신할 수 있다.In operation S205, the multimedia streaming providing server 130 may transmit data packets of the multimedia content to the mobile terminal 110 through the allocated access network, respectively. Referring to FIG. 3, the multimedia streaming providing server 130 transmits data packets corresponding to S1, S3, S4, S5, S7, and S8 through the access network 1 120_1 and receives data packets corresponding to S2 and S6. It may be transmitted to the mobile terminal 110 through the access network 2 (120_2). In this case, the mobile terminal 110 may receive data packets of S1, S3, S4, S5, S7, and S8 through the interface 1 (111_1) connected to the access network 1 (120_1) with respect to the multimedia content. The data packet of S2 and S6 may be received through the interface 2 111_2 that is in a connection state with the access network 2 120_2.
이때, 상기 멀티미디어 스트리밍 제공 서버(130)는 RTP 프로토콜이나, SVC 프로토콜 또는 SCTP 프로토콜을 이용하여 상기 멀티미디어 컨텐츠의 데이터 패킷을 상기 이동 단말(110)로 전송할 수 있다.In this case, the multimedia streaming providing server 130 may transmit a data packet of the multimedia content to the mobile terminal 110 using an RTP protocol, an SVC protocol, or an SCTP protocol.
도 4는 멀티미디어 스트리밍 제공 서버에서 RTP를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.4 is a diagram for describing a process of splitting and transmitting a data packet of content using RTP in a multimedia streaming providing server.
상기 멀티미디어 스트리밍 제공 서버(130)는 멀티미디어 컨텐츠(301)에 무작위로 선택된 숫자로 시작되는 SSRC(Synchronization Source) 값을 설정하여 각 RTP 세션에 대한 RTP 스트림의 소스를 식별할 수 있다. 이때, 동일한 SSRC 값을 사용하는 멀티미디어 컨텐츠(301)의 RTP 패킷들에 설정되는 시퀀스 넘버(Sequence number)는 초기 값(411)이 임의 값이며, 각 RTP 패킷이 전송될 때 마다 1씩 증가하는 값(412)일 수 있다.The multimedia streaming providing server 130 may identify a source of an RTP stream for each RTP session by setting a SSRC (Synchronization Source) value starting with a randomly selected number in the multimedia content 301. At this time, the sequence number set in the RTP packets of the multimedia content 301 using the same SSRC value is an initial value 411 and a value that increases by 1 for each RTP packet transmitted. 412.
이때, 상기 이동 단말(110)의 상기 접속부(111)에 포함된 인터페이스는 상기 시퀀스 넘버로 패킷 손실 및 데이터의 순서를 확인하여 수신한 패킷을 올바른 순서로 복원할 수 있다. In this case, the interface included in the access unit 111 of the mobile terminal 110 may restore the received packet in the correct order by checking the packet loss and the data order based on the sequence number.
도 4는 멀티미디어 컨텐츠(301)에 SSRC 값 1100이 설정되고, 멀티미디어 컨텐츠(410)에 포함된 각 프레임에 부여된 시퀀스 넘버가 1,2,3,…,N인 경우에 상기 멀티미디어 스트리밍 제공 서버(130)는 멀티미디어 컨텐츠(410)를 WiMAX(420)과 WLAN(430)을 통하여 상기 이동 단말(110)로 전송하는 일례이다.4, SSRC values 1100 are set in the multimedia content 301, and sequence numbers assigned to the frames included in the multimedia content 410 are 1, 2, 3,... In the case of N, the multimedia streaming providing server 130 is an example of transmitting the multimedia content 410 to the mobile terminal 110 through the WiMAX 420 and the WLAN 430.
이때, WLAN(430)은 WiMAX(420)에 비해 상대적으로 넓은 대역을 갖고 있으므로 WiMAX(420)가 1개의 프레임(421)을 수신하는 시간 간격(Time interval)에서 3개의 프레임(431,432,433)을 수신할 수 있다. 이때, WLAN(430)은 상기 수학식 1을 사용하여 측정된 상기 가용 대역폭이 WiMAX(420)보다 3배 정도 클 수 있다.At this time, since the WLAN 430 has a relatively wider band than the WiMAX 420, the WLAN 430 may receive three frames 431, 432, 433 at a time interval in which the WiMAX 420 receives one frame 421. Can be. In this case, the WLAN 430 may be about three times larger than the available bandwidth measured using Equation 1 than the WiMAX 420.
도 5는 멀티미디어 스트리밍 제공 서버에서 사용하는 RTP 프로토콜 구조의 일례를 나타낸 도면이다.5 is a diagram illustrating an example of an RTP protocol structure used in a multimedia streaming providing server.
도 5를 참조하면 상기 도 4의 일실시예에서 멀티미디어 스트리밍 제공 서버(130)가 멀티미디어 컨텐츠(410) 전송에 사용한 RTP 프로토콜 구조는 32비트 단위로 구분될 수 있다.Referring to FIG. 5, in the exemplary embodiment of FIG. 4, the RTP protocol structure used by the multimedia streaming providing server 130 to transmit the multimedia content 410 may be divided into 32-bit units.
RTP 프로토콜 구조의 제1 열(510)은 도 5에 도시된 바와 같이 2비트의 버전(V)(511), 1비트의 패딩(P)(512), 1비트의 확장(X)(513), 4비트의 CSRC 개수(CC: CSRS Count)(514), 1비트의 마커(M)(515), 7비트의 페이로드 유형(PT: Payload Type)(516), 및 시퀀스 번호(Sequence number)(517)로 구성된다.The first column 510 of the RTP protocol structure is a 2-bit version (V) 511, a 1-bit padding (P) 512, and a 1-bit extension (X) 513, as shown in FIG. , 4-bit CSRC count (CC) 514, 1-bit marker (M) 515, 7-bit payload type (PT) 516, and sequence number 517.
이때, 버전(V)(511)는 RTP의 버전을 식별하기 위한 정보이고, 패딩(P)(512)는 1로 설정된 경우 하나 이상의 다른 패딩 옥텟이 페이로드의 끝에 추가되었음을 의미하는 정보일 수 있다. 이때, 패딩된 첫 번째 옥텟은 포함된 추가 옥텟의 개수를 나타낼 수 있다.In this case, the version (V) 511 may be information for identifying a version of the RTP, and the padding (P) 512 may be information indicating that one or more other padding octets have been added to the end of the payload when set to 1. . In this case, the padded first octet may indicate the number of additional octets included.
또한, 확장(X)(513)는 고정 RTP 헤더에 추가된 확장 헤더가 존재하는 지를 나타낼 수 있는 정보이고, CSRC 개수(CC: CSRS Count)(514)는 고정 RTP 헤더 뒤에 오는 CSRC(Contributing Source) 식별자의 수를 나열할 수 있다.In addition, the extension (X) 513 is information that can indicate whether there is an extension header added to the fixed RTP header, CSRC Count (CC: CSRS Count) (514) is a CSRC (Contributing Source) after the fixed RTP header You can list the number of identifiers.
그리고, 마커(M)(515)는 RTP 프로필에 따라 정의된 마커 비트의 사용 여부를 나타내는 정보이고, 페이로드 유형(PT: Payload Type)(516)은 RTP 페이로드 유형을 정의하는 정보일 수 있다.The marker (M) 515 may be information indicating whether to use a marker bit defined according to the RTP profile, and the payload type (PT) 516 may be information defining an RTP payload type. .
RTP 프로토콜 구조의 제2 열(520)은 32 비트의 타임스탬프(Timestamp)로 구성될 수 있다.The second column 520 of the RTP protocol structure may consist of a 32-bit Timestamp.
이때, 타임스탬프(Timestamp)는 RTP 패킷에서 첫 번째 옥텟의 샘플링 순간을 나타낼 수 있다. RTP 패킷에서 사용되는 샘플링 빈도는 데이터 유형에 따라 다르며, 일례로, Windows XP에서 G.711 음성 코덱을 사용할 경우 샘플링 빈도는 8kHz로 설정될 수 있다.In this case, the timestamp may indicate the sampling instant of the first octet in the RTP packet. The sampling frequency used in the RTP packet depends on the data type. For example, when using the G.711 voice codec in Windows XP, the sampling frequency may be set to 8 kHz.
RTP 프로토콜 구조의 제3 열(530)은 32 비트의 SSRC(Synchronization Source)로 구성될 수 있다.The third column 530 of the RTP protocol structure may consist of 32-bit Synchronization Source (SSRC).
SSRC(Synchronization Source)는 멀티미디어 스트리밍 제공 서버(130)가 각 RTP 세션에 대해 RTP 스트림의 소스를 식별하기 위하여 멀티미디어 컨텐츠(301)에 설정한 무작위로 선택된 숫자로 시작되는 값일 수 있다.Synchronization Source (SSRC) may be a value starting with a randomly selected number set in the multimedia content 301 by the multimedia streaming providing server 130 to identify the source of the RTP stream for each RTP session.
RTP 프로토콜 구조의 제4 열과 제4열 다음의 열(540)은 각각 32비트의 CSRC(Contributing source)로 구성될 수 있다.The fourth column and the column 540 following the fourth column of the RTP protocol structure may be configured as 32-bit contributing sources (CSRs).
CSRC 값은 RTP 세션에 기여한 여러 스트림의 소스를 나타내는 정보이며, RTP 세션에서 각 소스의 SSRC 값이 RTP 믹서에 의해 CSRC 값에 추가될 수 있다.The CSRC value is information representing sources of various streams that contributed to the RTP session, and the SSRC value of each source in the RTP session may be added to the CSRC value by the RTP mixer.
도 6은 멀티미디어 스트리밍 제공 서버에서 SVC를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.FIG. 6 is a diagram illustrating a process of splitting and transmitting a data packet of content using SVC in a multimedia streaming providing server.
상기 멀티미디어 스트리밍 제공 서버(130)는 먼저 멀티미디어 컨텐츠(301)를 기본 레이어(base layer)(621)로 인코딩할 수 있다.The multimedia streaming providing server 130 may first encode the multimedia content 301 into a base layer 621.
이때, 상기 멀티미디어 스트리밍 제공 서버(130)는 기본 레이어(base layer)(621)에 최소의 퀄리티 서브 스트림(quality sub stream)과 적어도 하나의 상위 레이어(enhancement layer)를 포함하여 공간 스케일러블 레이어(Spatial Scalable Layer)(611)를 생성할 수 있다. 이때, 상기 상위 레이어는 추가적인 퀄리티를 기본 레이어에게 추가할 수 있다.In this case, the multimedia streaming providing server 130 includes a minimum quality substream and at least one enhancement layer in a base layer 621. Scalable Layer 611 may be created. In this case, the upper layer may add additional quality to the base layer.
또한, 상기 멀티미디어 스트리밍 제공 서버(130)는 네트워크 대역을 따르기 위해 서로에게 가능한 근접한 상위 레이어를 인코딩하는 FGS(Fine Grained Scalability) 레이어(612)를 더 생성할 수 있다.In addition, the multimedia streaming providing server 130 may further generate a fine grained scalability (GFS) layer 612 that encodes an upper layer as close as possible to each other to follow the network band.
마지막으로, 상기 멀티미디어 스트리밍 제공 서버(130)는 기본 레이어(base layer)(621), 공간 스케일러블 레이어(Spatial Scalable Layer)(611), 및 FGS(Fine Grained Scalability) 레이어(612)를 사용하여 전송하고자 하는 데이터 패킷을 SVC(Scalable Video Coding)에서 전송에 사용되는 형식으로 변형하고 각각의 데이터 패킷에 시퀀스 넘버(630)를 설정할 수 있다.Finally, the multimedia streaming providing server 130 transmits using a base layer 621, a spatial scalable layer 611, and a fine grained scalability (GFS) layer 612. A desired data packet may be transformed into a format used for transmission in scalable video coding (SVC), and a sequence number 630 may be set for each data packet.
이때, 상기 멀티미디어 스트리밍 제공 서버(130)가 변경할 수 있는 데이터 패킷의 형식은 하기된 표 1과 같다. 이때, 해상도의 단위는 pixel이다.At this time, the format of the data packet that can be changed by the multimedia streaming providing server 130 is shown in Table 1 below. In this case, the unit of resolution is pixel.
[표 1]TABLE 1
Figure PCTKR2009005952-appb-I000001
Figure PCTKR2009005952-appb-I000001
도 6의 일례에서 상기 멀티미디어 스트리밍 제공 서버(130)는 SVC(Scalable Video Coding) 방법을 이용하여 기본 레이어(621)와 FGS 레이어(612)로 변형한 QCIF(720)을 WLAN 대역으로 전송할 수 있다.In the example of FIG. 6, the multimedia streaming providing server 130 may transmit the QCIF 720 transformed into the base layer 621 and the FGS layer 612 to the WLAN band using a scalable video coding (SVC) method.
또한, WiMAX 대역이 사용 가능한 경우에 상기 멀티미디어 스트리밍 제공 서버(130)는 추가적으로 공간 스케일러블 레이어 (611)와 FGS 레이어(612)로 변형한 CIF(610)를 WiMAX 대역으로 전송하여 해상도를 증가 시킬 수 있있으며, 그 반대도 가능하다.In addition, when the WiMAX band is available, the multimedia streaming server 130 may additionally increase the resolution by transmitting the CIF 610 transformed into the spatial scalable layer 611 and the FGS layer 612 to the WiMAX band. Yes, and vice versa.
도 7은 멀티미디어 스트리밍 제공 서버에서 사용하는 SCTP 프로토콜 구조의 일례를 나타낸 도면이다.7 is a diagram illustrating an example of an SCTP protocol structure used in a multimedia streaming providing server.
SCTP(Stream Control Transmission Protocol)는 TCP나 UDP와 동일한 트렌스포트(Transport) 계층의 프로토콜로 IETF Signalling Transport 워킹 그룹에서 2007년 9월에 RFC 4960의 표준으로 제정된 차세대 전송 프로토콜이다.Stream Control Transmission Protocol (SCTP) is a transport layer protocol identical to TCP or UDP. It is a next-generation transport protocol that was enacted as a standard for RFC 4960 in September 2007 by the IETF Signaling Transport Working Group.
상기 SCTP는 하나의 SCTP Association에 멀티 스트림을 보낼 수 있는 멀티 스트리밍 기능 및 두 개 이상의 인터페이스를 이용할 수 있는 멀티호밍 기능을 갖고 있다.The SCTP has a multi-streaming function for sending a multi-stream to one SCTP association and a multi-homing function for using two or more interfaces.
상기 SCTP는 도 7에 도시된 바와 같이 헤더 포맷(710)과 정크(720) 및 파라메터(730)로 구성된다.The SCTP consists of a header format 710, a junk 720, and a parameter 730 as shown in FIG. 7.
또한, 정크(Chunk)(720)는 TSN(721), Stream Identifier(722), Stream Sequence Number(723), 및 Payload Protocol Identifier(724)를 포함할 수 있다.In addition, the junk 720 may include a TSN 721, a stream identifier 722, a stream sequence number 723, and a payload protocol identifier 724.
이때, TSN(Transport Sequence Number)(721)는 SCTP 패킷의 각 정크(chunk)를 구분하기 위한 임의 번호일 수 있다. SCTP는 각 Stream ID에 따라 여러 개의 TSN으로 구성될 수 있다.In this case, the transport sequence number (TSN) 721 may be any number for identifying each junk of the SCTP packet. SCTP may be composed of several TSNs according to each stream ID.
또한, Stream Identifier(722)는 각 Stream을 대표하는 식별자이며, Stream Sequence Number(723)는 스트림이 여러 조각으로 나뉠 때, 임의로 설정한 각 조각의 넘버일 수 있다.In addition, the Stream Identifier 722 is an identifier representing each stream, and the Stream Sequence Number 723 may be a number of each piece arbitrarily set when the stream is divided into pieces.
그리고, Payload Protocol Identifier(724)는 상위 어플리케이션 프로토콜의 ID일 수 있다.The payload protocol identifier 724 may be an ID of a higher application protocol.
또한, 파라메터(Optional/Variable-length Parameter)(730)는 파라미터 값에 따라 다르게 표현될 수 있다. 일례로, Parameter Type=5 이면, IPv4 주소가 파라미터 값으로 나타나고 길이는 8이 될 수 있다.In addition, the parameter (Optional / Variable-length Parameter) 730 may be expressed differently according to the parameter value. For example, if Parameter Type = 5, the IPv4 address may appear as a parameter value and the length may be 8.
도 8은 멀티미디어 스트리밍 제공 서버에서 SCTP를 사용하여 컨텐츠의 데이터 패킷을 분할 전송하는 과정을 설명하기 위한 도면이다.FIG. 8 is a diagram for describing a process of splitting and transmitting a data packet of content using SCTP in a multimedia streaming providing server.
상기 멀티미디어 스트리밍 제공 서버(130)는 먼저 각기 다른 접속망(120)에 전송할 멀티미디어 컨텐츠(301)의 스트림 별로 Stream Identifier(722)를 설정하고, 각각의 Stream Identifier(722)별로 전송 순서를 나타내는 순서번호(SSN: Stream Sequence Number)(723)를 설정할 수 있다. 이동 단말(110)은 상기 SSN(723)을 사용하여 수신한 스트림의 순서를 맞출 수 있다.The multimedia streaming providing server 130 first sets a stream identifier 722 for each stream of the multimedia content 301 to be transmitted to different access networks 120, and sets a sequence number indicating the transmission order for each stream identifier 722. SSN: Stream Sequence Number (723) can be set. The mobile terminal 110 may order the received streams using the SSN 723.
도 8의 일례에서 상기 멀티미디어 스트리밍 제공 서버(130)가 WLAN를 사용하여 전송한 스트림(810)의 SSN(723)는 0이고, WiMAX를 사용하여 전송한 스트림(820)의 SSN(723)은 1로 설정되어 있으므로, 이동 단말(110)은 스트림(810)의 순서가 먼저인 것으로 판단할 수 있다.In the example of FIG. 8, the SSN 723 of the stream 810 transmitted by the multimedia streaming providing server 130 using WLAN is 0, and the SSN 723 of the stream 820 transmitted using WiMAX is 1. Since it is set to, the mobile terminal 110 may determine that the order of the stream 810 is first.
다음으로 상기 멀티미디어 스트리밍 제공 서버(130)는 각 스트림을 통해 전송되는 프레임에 TSN(Transmission Sequence Number)(721)를 설정할 수 있다. 이때, 이동 단말(110)은 TSN에 기초하여 각 프레임의 순서를 맞출 수 있다.Next, the multimedia streaming providing server 130 may set a transmission sequence number (TSN) 721 in a frame transmitted through each stream. In this case, the mobile terminal 110 may order each frame based on the TSN.
그 다음으로 멀티미디어 스트리밍 제공 서버(130)는 각기 다른 접속망(120)에 TSN(721)이 설정된 프레임을 포함하고, Stream Identifier(722), SSN(723)가 설정된 스트림을 전송할 수 있다.Subsequently, the multimedia streaming providing server 130 may include a frame in which the TSN 721 is set and transmit the stream in which the Stream Identifier 722 and the SSN 723 are set to different access networks 120.
마지막으로 이동 단말(110)은 각기 다른 접속망(120)을 통하여 전송된 스트림을 수신하고, TSN(721), Stream Identifier(722), 및 SSN(723)에 기초하여 각 스트림과 스트림에 포함된 프레임의 순서를 맞출 수 있다.Finally, the mobile terminal 110 receives streams transmitted through different access networks 120, and based on the TSN 721, the Stream Identifier 722, and the SSN 723, each stream and a frame included in the stream. Can be ordered.
도 8의 일례에서 이동 단말(110)은 각 프레임에 설정된 TSN(721)에 따라 프레임(811), 프레임(821), 프레임(812), 프레임(813)가 순차적으로 나열되도록 순서를 맞출 수 있다.In the example of FIG. 8, the mobile terminal 110 may arrange the frames 811, the frames 821, the frames 812, and the frames 813 sequentially according to the TSN 721 set in each frame. .
도 9는 다중 인터페이스를 탑재한 이동 단말에서의 컨텐츠 수신 과정을 설명하기 위한 도면이다.9 is a diagram for describing a content receiving process in a mobile terminal equipped with multiple interfaces.
단계(S901)에서 상기 이동 단말(110)은 상기 멀티미디어 컨텐츠의 다운로드 요청 명령과 함께, 현재 접속 상태를 유지하고 있는 접속망(120)의 접속정보를 상기 멀티미디어 스트리밍 제공 서버(130)로 전송한다.In step S901, the mobile terminal 110 transmits the access information of the access network 120 that maintains the current connection state to the multimedia streaming providing server 130 together with the download request command of the multimedia content.
단계(S902)와 단계(S903)에서 상기 이동 단말(110)은 상기 멀티미디어 스트리밍 제공 서버(130)로부터 상기 멀티미디어 컨텐츠의 다운로드 요청 명령에 대한 응답 정보가 수신될 경우 접속 상태에 있는 접속망(120) 즉, 현재 사용 가능한 인터페이스(111)가 두 개 이상인지 여부를 판단할 수 있다.In step S902 and step S903, when the mobile terminal 110 receives the response information for the download request command of the multimedia content from the multimedia streaming providing server 130, that is, the access network 120 in the connected state 120 It may be determined whether there are two or more interfaces 111 currently available.
단계(S904)와 단계(S905)에서 상기 이동 단말(110)은 현재 사용 가능한 인터페이스가 한 개일 경우 단일 인터페이스로서 하나의 인터페이스를 활성하여 상기 활성된 인터페이스와 접속 상태에 있는 접속망(120)을 통해 상기 멀티미디어 컨텐츠의 데이터 패킷을 차례로 수신할 수 있다.In step S904 and step S905, the mobile terminal 110 activates one interface as a single interface when there is only one currently available interface, and thus, through the access network 120 in a connected state with the activated interface, Data packets of multimedia content may be sequentially received.
단계(S906)와 단계(S907)에서 상기 이동 단말(110)은 현재 사용 가능한 인터페이스가 두 개 이상일 경우 다중 인터페이스로서 두 개 이상의 인터페이스를 모두 활성하여 상기 활성된 인터페이스와 접속 상태에 있는 각 접속망(120)을 통해 상기 멀티미디어 컨텐츠의 데이터 패킷을 각각 수신할 수 있다. 상기 이동 단말(110)은 두 개 이상의 인터페이스를 통해 상기 멀티미디어 컨텐츠의 데이터 패킷을 수신하는 과정에서 상기 수신된 데이터 패킷을 시퀀스 번호에 따라 조합할 수 있다.In step S906 and step S907, when there are two or more currently available interfaces, the mobile terminal 110 activates both of the two or more interfaces as multiple interfaces, thereby connecting each access network 120 to the active interface. ) Can receive the data packet of the multimedia content, respectively. The mobile terminal 110 may combine the received data packets according to sequence numbers in the process of receiving data packets of the multimedia content through two or more interfaces.
도 3을 참조하면, 상기 이동 단말(110)은 상기 접속망1(120_1)에 대응되는 인터페이스1(111_1)을 통해 S1, S3, S4, S5, S7, S8의 데이터 패킷을 수신함과 동시에 상기 접속망2(120_2)에 대응되는 인터페이스2(111_2)을 통해 S2, S6의 데이터 패킷을 수신하고 상기 수신된 데이터 패킷을 시퀀스 번호에 따라 조합할 수 있다.Referring to FIG. 3, the mobile terminal 110 receives data packets of S1, S3, S4, S5, S7, and S8 through interface 1 111_1 corresponding to the access network 1 120_1 and the access network 2. Data packets of S2 and S6 may be received through interface 2 111_2 corresponding to 120_2, and the received data packets may be combined according to sequence numbers.
따라서, 본 발명은 이동 단말이 다중 망에 접속 가능할 경우 접속망의 대역폭을 고려하여 각 접속망을 통해 스트리밍하고자 하는 멀티미디어 컨텐츠의 데이터 량을 조정할 수 있으며 이동 단말에서 다중 접속을 통해 멀티미디어 컨텐츠를 분할 수신하여 조합 후 재생할 수 있다.Therefore, when the mobile terminal can access the multiple networks, the data amount of the multimedia content to be streamed through each access network can be adjusted in consideration of the bandwidth of the access network. Can be played after.
또한, 본 발명은 하나의 접속망의 BW가 부족하여 서비스 받기 힘든 경우라도 cooperative 방식을 적용하여 서비스를 받을 수 있으며, RTP나 RTCP와 같은 기존의 프로토콜이나, SVC(Scalable Video Coding)와 같은 layered coding 방식에도 활용이 가능하므로 넓은 확장성을 제공할 수 있다.In addition, the present invention can receive a service by applying a cooperative method even if it is difficult to receive the service due to a lack of BW of one access network, the existing protocol such as RTP or RTCP, or layered coding such as SVC (Scalable Video Coding) It can also be used to provide wide scalability.
그리고, 하나의 단말기에 동일한 인터페이스 두 개를 넣는 것은 비효율적이므로 현재 출시되고 있는 현재 서로 다른 이종망 (WLAN + WiMAX, WLAN + HSPA, WiMAX+HSPA)이 조합된 단말을 사용하여 서비스를 제공할 수 있다.In addition, since it is inefficient to put two identical interfaces in one terminal, it is possible to provide a service using a terminal combining different heterogeneous networks (WLAN + WiMAX, WLAN + HSPA, WiMAX + HSPA) currently on the market. .
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, although the present invention has been described with reference to limited embodiments and drawings, the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.

Claims (36)

  1. 이동 단말의 컨텐츠 요청에 따라 상기 이동 단말의 접속망을 판단하는 단계; 및,Determining an access network of the mobile terminal according to a content request of the mobile terminal; And,
    상기 접속망이 적어도 두 개 존재할 경우 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는 단계When at least two access networks exist, allocating a data packet of content to each access network and transmitting the same to each access network;
    를 포함하는 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.Multimedia streaming method using a multi-network including a.
  2. 제1항에 있어서,The method of claim 1,
    상기 이동 단말의 접속망을 판단하는 단계는,Determining the access network of the mobile terminal,
    상기 이동 단말로부터 현재 사용 가능한 접속망 및 각 접속망의 접속정보를 수신하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.Receiving a currently available access network and access information of each access network from the mobile terminal, Multimedia streaming providing method using multiple networks.
  3. 제2항에 있어서,The method of claim 2,
    상기 접속정보는,The connection information,
    상기 이동 단말과의 연결을 유지하는 상기 접속망의 링크 대역폭을 포함하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.And a link bandwidth of the access network maintaining the connection with the mobile terminal.
  4. 제1항에 있어서,The method of claim 1,
    상기 컨텐츠의 데이터 패킷을 상기 이동 단말로 전송하는 단계는,The step of transmitting the data packet of the content to the mobile terminal,
    각 접속망의 가용 대역폭을 산출하는 단계와,Calculating available bandwidth of each access network;
    상기 가용 대역폭에 따라 상기 데이터 패킷을 할당하는 단계와,Allocating the data packet according to the available bandwidth;
    상기 할당된 데이터 패킷을 각 접속망을 통해 상기 이동 단말로 전송하는 단계Transmitting the allocated data packet to the mobile terminal through each access network.
    를 포함하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.Including, multimedia streaming providing method using multiple networks.
  5. 제4항에 있어서,The method of claim 4, wherein
    상기 가용 대역폭을 산출하는 단계는,Computing the available bandwidth,
    상기 이동 단말에 대한 상기 접속망의 링크 대역폭을 이용하여 상기 가용 대역폭을 산출하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.And calculating the available bandwidth by using the link bandwidth of the access network to the mobile terminal.
  6. 제4항에 있어서,The method of claim 4, wherein
    상기 컨텐츠의 데이터 패킷을 상기 이동 단말로 전송하는 단계는 RTP 프로토콜, SVC 프로토콜 또는 SCTP 프로토콜을 이용하여 상기 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.The step of transmitting the data packet of the content to the mobile terminal is a multimedia streaming by using a multi-network to allocate the data packet of the content to each access network using the RTP protocol, SVC protocol or SCTP protocol, to the mobile terminal How to Provide.
  7. 제6항에 있어서,The method of claim 6,
    상기 컨텐츠의 데이터 패킷을 상기 이동 단말로 전송하는 단계는 RTP 프로토콜을 사용할 경우에The step of transmitting the data packet of the content to the mobile terminal when using the RTP protocol
    상기 컨텐츠에 무작위로 선택된 숫자로 시작되는 SSRC(Synchronization Source) 값을 설정하는 단계; 및Setting a synchronization source (SSRC) value starting with a randomly selected number in the content; And
    동일한 SSRC 값을 사용하는 상기 컨텐츠의 RTP 패킷들에 시퀀스 넘버(Sequence number)를 설정하는 단계Setting a sequence number in the RTP packets of the content using the same SSRC value
    를 더 포함하고,More,
    상기 할당된 데이터 패킷을 각 접속망을 통해 상기 이동 단말로 전송하는 단계는 상기 할당된 데이터 패킷과 함께 상기 데이터 패킷에 설정된 SSRC 값과 시퀀스 넘버를 각 접속망을 통해 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.The transmitting of the allocated data packet to the mobile terminal through each access network includes transmitting the SSRC value and the sequence number set in the data packet to the mobile terminal through each access network together with the allocated data packet. How to provide multimedia streaming using.
  8. 제7항에 있어서,The method of claim 7, wherein
    상기 시퀀스 넘버는 초기 값이 임의 값이며, 상기 데이터 패킷이 전송될 때 마다 1씩 증가하는 값인, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.The sequence number is an initial value is an arbitrary value, a value that increases by one each time the data packet is transmitted, multimedia streaming providing method using multiple networks.
  9. 제6항에 있어서,The method of claim 6,
    상기 컨텐츠의 데이터 패킷을 상기 이동 단말로 전송하는 단계는 SVC 프로토콜을 사용할 경우에The step of transmitting the data packet of the content to the mobile terminal when using the SVC protocol
    멀티미디어 컨텐츠를 기본 레이어(base layer)로 인코딩하는 단계;Encoding the multimedia content into a base layer;
    상기 기본 레이어에 최소의 퀄리티 서브 스트림(quality sub stream)과 적어도 하나의 상위 레이어(enhancement layer)를 포함하여 공간 스케일러블 레이어(Spatial Scalable Layer)를 생성하는 단계;Generating a spatial scalable layer including a minimum quality sub stream and at least one enhancement layer in the base layer;
    네트워크 대역을 따르기 위해 서로에게 가능한 근접한 상위 레이어를 인코딩하는 FGS 레이어를 생성하는 단계; 및Generating an FGS layer encoding a higher layer as close as possible to each other to follow the network band; And
    상기 기본 레이어, 상기 공간 스케일러블 레이어, 및 상기 FGS 레이어를 사용하여 상기 할당된 데이터 패킷을 SVC(Scalable Video Coding)에서 전송에 사용되는 형식으로 변경하고 각각의 패킷에 시퀀스 넘버를 설정하는 단계Changing the allocated data packet into a format used for transmission in scalable video coding (SVC) using the base layer, the spatial scalable layer, and the FGS layer and setting a sequence number for each packet
    를 포함하고,Including,
    상기 할당된 데이터 패킷을 각 접속망을 통해 상기 이동 단말로 전송하는 단계는 상기 시퀀스 넘버를 설정하는 단계에서 형식이 변경된 데이터 패킷과 함께 상기 데이터 패킷에 설정된 시퀀스 넘버를 각 접속망을 통해 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.The transmitting of the allocated data packet to the mobile terminal through each access network may include transmitting the sequence number set in the data packet to the mobile terminal through each access network together with the data packet whose format has been changed in setting the sequence number. Method for providing multimedia streaming using multiple networks.
  10. 제9항에 있어서,The method of claim 9,
    상기 할당된 데이터 패킷을 각 접속망을 통해 상기 이동 단말로 전송하는 단계는 상기 접속망이 WLAN 대역과 WiMAX 대역인 경우에, The step of transmitting the allocated data packet to the mobile terminal through each access network is when the access network is a WLAN band and a WiMAX band,
    상기 기본 레이어와 상기 FGS 레이어로 변형한 QCIF을 WLAN 대역으로 전송하는 단계; 및 Transmitting the modified QCIF to the base layer and the FGS layer in a WLAN band; And
    상기 공간 스케일러블 레이어와 상기 FGS 레이어로 변형한 CIF를 WiMAX 대역으로 전송하여 해상도를 증가 시키는 단계Transmitting the CIF transformed with the spatial scalable layer and the FGS layer to a WiMAX band to increase the resolution;
    를 더 포함하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.Further comprising, a multimedia streaming providing method using multiple networks.
  11. 제6항에 있어서,The method of claim 6,
    상기 컨텐츠의 데이터 패킷을 상기 이동 단말로 전송하는 단계는 SCTP 프로토콜을 사용할 경우에The step of transmitting the data packet of the content to the mobile terminal when using the SCTP protocol
    각기 다른 접속망에 전송할 멀티미디어 컨텐츠(301)의 스트림 별로 Stream Identifier를 설정하는 단계;Setting a stream identifier for each stream of multimedia content 301 to be transmitted to different access networks;
    각각의 Stream Identifier 별로 전송 순서를 나타내는 순서번호(SSN: Stream Sequence Number)를 설정하는 단계; 및Setting a sequence number (SSN) indicating a transmission order for each stream identifier; And
    각 스트림을 통해 전송될 프레임에 TSN(Transmission Sequence Number)을 설정하는 단계Setting a transmission sequence number (TSN) in a frame to be transmitted through each stream
    를 포함하고, 상기 할당된 데이터 패킷을 각 접속망을 통해 상기 이동 단말로 전송하는 단계는 각기 다른 접속망에 상기 TSN이 설정된 프레임을 포함하고, 상기 Stream Identifier와 상기 SSN가 설정된 데이터 패킷을 전송하는 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.And transmitting the allocated data packet to the mobile terminal through each access network includes a frame in which the TSN is set in different access networks, and transmits the data packet in which the stream identifier and the SSN are set. Multimedia streaming method using.
  12. 이동 단말의 컨텐츠 요청에 따라 상기 이동 단말의 접속망을 판단하는 접속정보 수신부; 및,A connection information receiver for determining an access network of the mobile terminal according to a content request of the mobile terminal; And,
    상기 접속망이 적어도 두 개 존재할 경우 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는 컨텐츠 전송부Content transmission unit for transmitting the data packet of the content to each access network and transmits to the mobile terminal when at least two access network exists
    를 포함하는 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.Multimedia streaming server using multiple networks including a.
  13. 제12항에 있어서,The method of claim 12,
    상기 접속정보 수신부는,The connection information receiver,
    상기 이동 단말로부터 현재 사용 가능한 접속망 및 각 접속망의 접속정보를 수신하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.Receiving a currently available access network and access information of each access network from the mobile terminal, multimedia streaming providing server using multiple networks.
  14. 제13항에 있어서,The method of claim 13,
    상기 접속정보는,The connection information,
    상기 이동 단말과의 연결을 유지하는 상기 접속망의 링크 대역폭을 포함하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.And a link bandwidth of the access network maintaining the connection with the mobile terminal.
  15. 제12항에 있어서,The method of claim 12,
    상기 컨텐츠 전송부는,The content transmission unit,
    각 접속망의 가용 대역폭을 산출하고 상기 가용 대역폭에 따라 상기 데이터 패킷을 할당하여 각 접속망을 통해 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.Computing the available bandwidth of each access network, allocates the data packet according to the available bandwidth and transmits to the mobile terminal through each access network, multimedia streaming providing server using multiple networks.
  16. 제15항에 있어서,The method of claim 15,
    상기 컨텐츠 전송부는,The content transmission unit,
    상기 이동 단말에 대한 상기 접속망의 링크 대역폭을 이용하여 상기 가용 대역폭을 산출하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.Computing the available bandwidth using the link bandwidth of the access network to the mobile terminal, multimedia streaming providing server using multiple networks.
  17. 제15항에 있어서,The method of claim 15,
    상기 컨텐츠 전송부는 RTP 프로토콜, SVC 프로토콜 또는 SCTP 프로토콜을 이용하여 상기 컨텐츠의 데이터 패킷을 각각의 접속망에 할당하여 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.The content transmission unit allocates the data packet of the content to each access network using the RTP protocol, SVC protocol or SCTP protocol to transmit to the mobile terminal, multimedia streaming providing server using multiple networks.
  18. 제17항에 있어서,The method of claim 17,
    상기 컨텐츠 전송부는 RTP 프로토콜을 사용할 경우에 상기 컨텐츠에 무작위로 선택된 숫자로 시작되는 SSRC(Synchronization Source) 값을 설정하고, 동일한 SSRC 값을 사용하는 상기 컨텐츠의 RTP 패킷들에 시퀀스 넘버(Sequence number)를 설정하며, 상기 할당된 데이터 패킷과 함께 상기 데이터 패킷에 설정된 SSRC 값과 시퀀스 넘버를 각 접속망을 통해 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.When using the RTP protocol, the content transmitter sets a SSRC (Synchronization Source) value starting with a randomly selected number for the content, and assigns a sequence number to RTP packets of the content using the same SSRC value. And transmitting the SSRC value and the sequence number set in the data packet to the mobile terminal through each access network together with the allocated data packet.
  19. 제18항에 있어서,The method of claim 18,
    상기 시퀀스 넘버는 초기 값이 임의 값이며, 상기 데이터 패킷이 전송될 때 마다 1씩 증가하는 값인, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.The sequence number is an initial value is a random value, a value that increases by one each time the data packet is transmitted, multimedia streaming providing server using multiple networks.
  20. 제17항에 있어서,The method of claim 17,
    상기 컨텐츠 전송부는 SVC 프로토콜을 사용할 경우에 멀티미디어 컨텐츠를 기본 레이어(base layer) 로 인코딩하고, 상기 기본 레이어에 최소의 퀄리티 서브 스트림(quality sub stream)과 적어도 하나의 상위 레이어(enhancement layer)를 포함하여 공간 스케일러블 레이어(Spatial Scalable Layer)를 생성하며, 네트워크 대역을 따르기 위해 서로에게 가능한 근접한 상위 레이어를 인코딩하는 FGS 레이어를 생성하고, 상기 기본 레이어, 상기 공간 스케일러블 레이어, 및 상기 FGS 레이어를 사용하여 상기 할당된 데이터 패킷을 SVC(Scalable Video Coding)에서 전송에 사용되는 형식으로 변경하고 각각의 패킷에 시퀀스 넘버를 설정하며, 형식이 변경된 데이터 패킷과 함께 상기 데이터 패킷에 설정된 시퀀스 넘버를 각 접속망을 통해 상기 이동 단말로 전송하는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.The content transmitter encodes multimedia content into a base layer when using the SVC protocol, and includes a minimum quality substream and at least one enhancement layer in the base layer. Create a spatial scalable layer, generate an FGS layer that encodes a higher layer as close as possible to each other to follow the network band, and use the base layer, the spatial scalable layer, and the FGS layer The assigned data packet is changed into a format used for transmission in SVC (Scalable Video Coding), a sequence number is set for each packet, and the sequence number set in the data packet together with the changed data packet is transmitted through each access network. Multi transmission using the multiple network to the mobile terminal Streaming media servers provide.
  21. 제20항에 있어서,The method of claim 20,
    상기 컨텐츠 전송부는 상기 접속망이 WLAN 대역과 WiMAX 대역인 경우에, 상기 기본 레이어와 상기 FGS 레이어로 변형한 QCIF을 WLAN 대역으로 전송하고, 상기 공간 스케일러블 레이어와 상기 FGS 레이어로 변형한 CIF를 WiMAX 대역으로 전송하여 해상도를 증가 시키는, 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.When the access network is a WLAN band and a WiMAX band, the content transmitter transmits the QCIF transformed into the base layer and the FGS layer to the WLAN band, and converts the CIF transformed into the spatial scalable layer and the FGS layer into a WiMAX band. Multistream streaming server to increase the resolution by transmitting to the server.
  22. 제17항에 있어서,The method of claim 17,
    상기 컨텐츠 전송부는 SCTP 프로토콜을 사용할 경우에 각기 다른 접속망에 전송할 멀티미디어 컨텐츠(301)의 스트림 별로 Stream Identifier를 설정하고, 각각의 Stream Identifier 별로 전송 순서를 나타내는 순서번호(SSN: Stream Sequence Number)를 설정하며, 각 스트림을 통해 전송될 프레임에 TSN(Transmission Sequence Number)을 설정한 다음에, 각기 다른 접속망에 상기 TSN이 설정된 프레임을 포함하고, 상기 Stream Identifier와 상기 SSN가 설정된 데이터 패킷을 전송하는 다중 망을 이용한 멀티미디어 스트리밍 제공 서버.When using the SCTP protocol, the content transmitter sets a stream identifier for each stream of multimedia content 301 to be transmitted to different access networks, and sets a sequence sequence (SSN) indicating a transmission order for each stream identifier. After setting the transmission sequence number (TSN) in the frame to be transmitted through each stream, and including the frame in which the TSN is set to different access networks, and transmitting the data packet set the stream identifier and the SSN Multimedia streaming server using.
  23. 서로 다른 접속망에 대응하는 적어도 두 개의 인터페이스를 구비한 이동 단말의 멀티미디어 스트리밍 수신 방법에 있어서,In the multimedia streaming reception method of a mobile terminal having at least two interfaces corresponding to different access networks,
    각 접속망으로부터 접속정보를 수신하는 단계;Receiving access information from each access network;
    사용자의 컨텐츠 요청에 따라 상기 접속망의 접속정보를 멀티미디어 스트리밍 제공 서버로 전송하는 단계; 및,Transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And,
    상기 멀티미디어 스트리밍 제공 서버에서 상기 접속망의 접속정보를 근거로 두 개 이상의 접속망을 통해 컨텐츠를 전송할 경우 상기 접속망과 대응되는 각 인터페이스를 활성하여 상기 컨텐츠를 수신하는 단계Receiving the content by activating each interface corresponding to the access network when transmitting the content through two or more access networks based on the access information of the access network in the multimedia streaming providing server
    를 포함하는 이동 단말의 멀티미디어 스트리밍 수신 방법.Multimedia streaming receiving method of a mobile terminal comprising a.
  24. 제23항에 있어서,The method of claim 23, wherein
    상기 접속정보는,The connection information,
    상호 연결을 유지하는 링크 대역폭을 포함하는, 이동 단말의 멀티미디어 스트리밍 수신 방법.A method for receiving multimedia streaming of a mobile terminal, comprising a link bandwidth maintaining an interconnection.
  25. 제23항에 있어서,The method of claim 23, wherein
    상기 컨텐츠를 수신하는 단계는,Receiving the content,
    각 인터페이스를 통해 상기 컨텐츠의 데이터 패킷을 각각 수신하여 데이터 순서에 따라 상기 수신된 데이터 패킷을 조합하는, 이동 단말의 멀티미디어 스트리밍 수신 방법.And receiving the data packets of the contents through respective interfaces and combining the received data packets according to the data order.
  26. 제25항에 있어서,The method of claim 25,
    상기 컨텐츠를 수신하는 단계는 RTP 프로토콜을 사용할 경우에,Receiving the content when using the RTP protocol,
    상기 데이터 패킷에 설정된 SSRC 값과 시퀀스 넘버에 기초하여, 수신된 상기 데이터 패킷을 조합하는 이동 단말의 멀티미디어 스트리밍 수신 방법.And combining the received data packets based on an SSRC value and a sequence number set in the data packets.
  27. 제25항에 있어서,The method of claim 25,
    상기 컨텐츠를 수신하는 단계는 SVC 프로토콜을 사용할 경우에 SVC(Scalable Video Coding)에서 전송에 사용되는 형식으로 변경된 상기 데이터 패킷을 복호화하고, 각각의 상기 데이터 패킷에 설정된 시퀀스 넘버에 기초하여 수신된 상기 데이터 패킷을 조합하는 이동 단말의 멀티미디어 스트리밍 수신 방법.The receiving of the content may include decoding the data packet changed into a format used for transmission in SVC (Scalable Video Coding) when using the SVC protocol, and receiving the data based on a sequence number set in each of the data packets. A method for receiving multimedia streaming of a mobile terminal combining packets.
  28. 제27항에 있어서,The method of claim 27,
    상기 컨텐츠를 수신하는 단계는 상기 접속망이 WLAN 대역과 WiMAX 대역인 경우에, WLAN 대역으로 수신한 QCIF에 WiMAX 대역으로 수신한 CIF의 정보를 추가하여 상기 데이터 패킷의 해상도를 증가시키는, 다중 망을 이용한 멀티미디어 스트리밍 제공 방법.The receiving of the content may include adding information of the CIF received in the WiMAX band to the QCIF received in the WLAN band and increasing the resolution of the data packet when the access network is the WLAN band and the WiMAX band. How to provide multimedia streaming.
  29. 제25항에 있어서,The method of claim 25,
    상기 컨텐츠를 수신하는 단계는 SCTP 프로토콜을 사용할 경우에Receiving the content when using the SCTP protocol
    상기 데이터 패킷에 설정된 Stream Identifier와 SSN 및 상기 데이터 패킷에 포함된 프레임들에 설정된 TSN에 기초하여 수신된 상기 데이터 패킷을 조합하는 이동 단말의 멀티미디어 스트리밍 수신 방법.And combining the received data packet based on the Stream Identifier set in the data packet and the SSN and the TSN set in the frames included in the data packet.
  30. 서로 다른 접속망에 대응하는 적어도 두 개의 인터페이스를 구비한 이동 단말에 있어서,A mobile terminal having at least two interfaces corresponding to different access networks,
    각 접속망으로부터 접속정보를 수신하는 접속정보 수신부;A connection information receiver for receiving connection information from each access network;
    사용자의 컨텐츠 요청에 따라 상기 접속망의 접속정보를 멀티미디어 스트리밍 제공 서버로 전송하는 접속정보 전송부; 및,An access information transmitter for transmitting access information of the access network to a multimedia streaming providing server according to a content request of a user; And,
    상기 멀티미디어 스트리밍 제공 서버에서 상기 접속망의 접속정보를 근거로 두 개 이상의 접속망을 통해 컨텐츠를 전송할 경우 상기 접속망과 대응되는 각 인터페이스를 활성하여 상기 컨텐츠를 수신하는 컨텐츠 수신부Content reception unit for receiving the content by activating each interface corresponding to the access network when the multimedia streaming server transmits content through two or more access networks based on the access information of the access network
    를 포함하는 다중 인터페이스를 탑재한 이동 단말.Mobile terminal equipped with a multi-interface comprising a.
  31. 제30항에 있어서,The method of claim 30,
    상기 접속정보는,The connection information,
    상호 연결을 유지하는 링크 대역폭을 포함하는, 다중 인터페이스를 탑재한 이동 단말.A mobile terminal with multiple interfaces, comprising link bandwidth to maintain interconnection.
  32. 제30항에 있어서,The method of claim 30,
    상기 컨텐츠 수신부는,The content receiving unit,
    각 인터페이스를 통해 상기 컨텐츠의 데이터 패킷을 각각 수신하여 데이터 순서에 따라 상기 수신된 데이터 패킷을 조합하는, 다중 인터페이스를 탑재한 이동 단말.A mobile terminal equipped with multiple interfaces, each receiving a data packet of the content through each interface and combines the received data packet in data order.
  33. 제32항에 있어서,33. The method of claim 32,
    상기 컨텐츠 수신부는, RTP 프로토콜을 사용할 경우에, 상기 데이터 패킷에 설정된 SSRC 값과 시퀀스 넘버에 기초하여, 수신된 상기 데이터 패킷을 조합하는 다중 인터페이스를 탑재한 이동 단말.The content receiving unit is a mobile terminal equipped with a multiple interface for combining the received data packet based on the SSRC value set in the data packet and the sequence number when using the RTP protocol.
  34. 제32항에 있어서,33. The method of claim 32,
    상기 컨텐츠를 수신하는 단계는 SVC 프로토콜을 사용할 경우에 SVC(Scalable Video Coding)에서 전송에 사용되는 형식으로 변경된 상기 데이터 패킷을 복호화하고, 각각의 상기 데이터 패킷에 설정된 시퀀스 넘버에 기초하여 수신된 상기 데이터 패킷을 조합하는 다중 인터페이스를 탑재한 이동 단말.The receiving of the content may include decoding the data packet changed into a format used for transmission in SVC (Scalable Video Coding) when using the SVC protocol, and receiving the data based on a sequence number set in each of the data packets. Mobile terminal equipped with multiple interfaces for combining packets.
  35. 제34항에 있어서,The method of claim 34, wherein
    상기 컨텐츠를 수신하는 단계는 상기 접속망이 WLAN 대역과 WiMAX 대역인 경우에, WLAN 대역으로 수신한 QCIF에 WiMAX 대역으로 수신한 CIF의 정보를 추가하여 상기 데이터 패킷의 해상도를 증가시키는, 다중 인터페이스를 탑재한 이동 단말.Receiving the content is a multi-interface, when the access network is a WLAN band and WiMAX band, to increase the resolution of the data packet by adding the information of the CIF received in the WiMAX band to the QCIF received in the WLAN band One mobile terminal.
  36. 제32항에 있어서,33. The method of claim 32,
    상기 컨텐츠를 수신하는 단계는 SCTP 프로토콜을 사용할 경우에 상기 데이터 패킷에 설정된 Stream Identifier와 SSN 및 상기 데이터 패킷에 포함된 프레임들에 설정된 TSN에 기초하여 수신된 상기 데이터 패킷을 조합하는 다중 인터페이스를 탑재한 이동 단말.Receiving the content includes a multi-interface that combines the received data packet based on the Stream Identifier set in the data packet and the TSN set in the frames included in the data packet when using the SCTP protocol Mobile terminal.
PCT/KR2009/005952 2008-11-24 2009-10-15 Mobile terminal equipped with multi-interface, method for receiving multimedia streaming, server for providing multimedia streaming using multi-network, and method thereof WO2010058908A2 (en)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20080116993 2008-11-24
KR10-2008-0116993 2008-11-24
KR10-2009-0091693 2009-09-28
KR1020090091693A KR101064002B1 (en) 2008-11-24 2009-09-28 Mobile terminal and multimedia streaming receiving method equipped with multiple interfaces, multimedia streaming providing server using multiple networks and method thereof

Publications (2)

Publication Number Publication Date
WO2010058908A2 true WO2010058908A2 (en) 2010-05-27
WO2010058908A3 WO2010058908A3 (en) 2010-07-15

Family

ID=42198621

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/005952 WO2010058908A2 (en) 2008-11-24 2009-10-15 Mobile terminal equipped with multi-interface, method for receiving multimedia streaming, server for providing multimedia streaming using multi-network, and method thereof

Country Status (1)

Country Link
WO (1) WO2010058908A2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012171403A1 (en) * 2011-06-14 2012-12-20 中兴通讯股份有限公司 Method and system supporting multi-interface multi-connection communication
CN103747364A (en) * 2013-12-11 2014-04-23 北京瑞汛世纪科技有限公司 A method and apparatus for downloading network contents
WO2014175694A1 (en) * 2013-04-25 2014-10-30 Samsung Electronics Co., Ltd. Electronic device for multiple radio access and method thereof
CN115174539A (en) * 2022-06-28 2022-10-11 上海网达软件股份有限公司 Security video stream transmission method, system, equipment and storage medium

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010006455A (en) * 1997-04-15 2001-01-26 엠씨아이 월드콤 인코포레이티드 A system, method and article of manufacture for switched telephony communication
KR20060121198A (en) * 2003-12-15 2006-11-28 텔레폰악티에볼라겟엘엠에릭슨(펍) Distributed medium access control for broadband access system
KR20070091983A (en) * 2006-03-08 2007-09-12 삼성전자주식회사 Client apparatus and method for streaming contents and computer readable recording medium storing program for performing the method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010006455A (en) * 1997-04-15 2001-01-26 엠씨아이 월드콤 인코포레이티드 A system, method and article of manufacture for switched telephony communication
KR20060121198A (en) * 2003-12-15 2006-11-28 텔레폰악티에볼라겟엘엠에릭슨(펍) Distributed medium access control for broadband access system
KR20070091983A (en) * 2006-03-08 2007-09-12 삼성전자주식회사 Client apparatus and method for streaming contents and computer readable recording medium storing program for performing the method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012171403A1 (en) * 2011-06-14 2012-12-20 中兴通讯股份有限公司 Method and system supporting multi-interface multi-connection communication
WO2014175694A1 (en) * 2013-04-25 2014-10-30 Samsung Electronics Co., Ltd. Electronic device for multiple radio access and method thereof
US9565719B2 (en) 2013-04-25 2017-02-07 Samsung Electronics Co., Ltd. Electronic device for multiple radio access and method thereof
CN103747364A (en) * 2013-12-11 2014-04-23 北京瑞汛世纪科技有限公司 A method and apparatus for downloading network contents
CN103747364B (en) * 2013-12-11 2017-03-01 湖南网数科技有限公司 The method and apparatus that a kind of Web content is downloaded
CN115174539A (en) * 2022-06-28 2022-10-11 上海网达软件股份有限公司 Security video stream transmission method, system, equipment and storage medium

Also Published As

Publication number Publication date
WO2010058908A3 (en) 2010-07-15

Similar Documents

Publication Publication Date Title
KR101278297B1 (en) Method and apparatus for reliably delivering multicast data
KR101064002B1 (en) Mobile terminal and multimedia streaming receiving method equipped with multiple interfaces, multimedia streaming providing server using multiple networks and method thereof
Perkins et al. RTP payload for redundant audio data
CN102265553B (en) Method and apparatus for reliable multicast streaming
US20090216897A1 (en) Method and system for controlling streaming rates
JP3690316B2 (en) Data transmission system, header information addition device, data format conversion device, and data transmission method
WO2011068355A2 (en) Method and apparatus for transmitting a multimedia data packet using cross-layer optimization
WO2012167638A1 (en) Media data control method and apparatus
JP2005527126A (en) Method and apparatus for performing multicast communication in a UMTS network
WO2011017982A1 (en) System, method and terminal for processing media services
WO2018174367A1 (en) Broadcast signal transmitting and receiving method and device
WO2010058908A2 (en) Mobile terminal equipped with multi-interface, method for receiving multimedia streaming, server for providing multimedia streaming using multi-network, and method thereof
WO2011126271A2 (en) Apparatus and method for inserting advertisement in a broadcasting system
WO2003013096A1 (en) A speech transmitting method for saving the bandwidth
CN104580983A (en) Method for achieving video communication PTT
US20080240123A1 (en) Method and system for communicating h.263 macroblock boundaries using h.221 bas for rfc2190-compliant fragmentation
WO2010108416A1 (en) Method, device and communication system for forwarding scalable video coding data messages
JP2002503069A (en) Communication network, signal transmission method, network connection unit, and method for adjusting bit rate of scaled data flow
US20100002779A1 (en) Mechanism for the management of receivers/decoders connections
Nightingale et al. Removing path-switching cost in video delivery over multiple paths in mobile networks
KR100793862B1 (en) Method of transmitting contents in tree structure server topology
CN100521769C (en) Network voice/video communication realizing method
WO2013048031A1 (en) Method of providing a mobile iptv service, and system for executing same
KR100586025B1 (en) Method for communication in groups using conversion between multicasting style and unicasting style
WO2015084000A1 (en) Apparatus and method for transmitting and receiving content

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09827673

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase in:

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09827673

Country of ref document: EP

Kind code of ref document: A2