KR101737325B1

KR101737325B1 - 멀티미디어 시스템에서 멀티미디어 서비스의 경험 품질 감소를 줄이는 방법 및 장치

Info

Publication number: KR101737325B1
Application number: KR1020100101067A
Authority: KR
Inventors: 박경모; 김철근; 송재연; 서덕영; 이용헌
Original assignee: 삼성전자주식회사; 경희대학교 산학협력단
Priority date: 2010-08-19
Filing date: 2010-10-15
Publication date: 2017-05-22
Also published as: US20120047280A1; EP2606641A2; US8661152B2; WO2012023833A2; WO2012023833A3; KR20120018042A; EP2606641B1; EP2606641A4

Abstract

본 발명은 멀티미디어 서비스에서의 경험 품질의 감소를 줄이는 방법 및 장치에 관한 것으로, 본 발명의 일 실시 예에 따른 멀티미디어 스트리밍 서비스를 제공하기 위한 방법은, 컨텐츠의 제1 멀티미디어 스트림을 재생하는 단계; 상기 제1 멀티미디어 스트림의 재생 중에 상기 컨텐츠의 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림으로부터 독립적으로 복호화가 가능한 단위 영상에 관한 정보를 참조하여 상기 제2 멀티미디어 스트림을 재생하는 단계를 포함하며, 상기 단위 영상에 관한 정보는 상기 단위 영상의 단위 시간당 개수 정보를 포함하고, 상기 제2 멀티미디어 스트림은 상기 제1 멀티미디어 스트림보다 저화질 영상을 재생하기 위한 스트림임을 특징으로 한다.

Description

멀티미디어 시스템에서 멀티미디어 서비스의 경험 품질 감소를 줄이는 방법 및 장치{METHOD AND APPARATUS FOR REDUCING DECREASING OF QUALITLY OF EXPERIENCE IN A MULTIMEDIA SYSTEM}

본 발명은 멀티미디어 시스템의 서비스 품질 향상 방법 및 장치에 대한 것으로서, 특히 멀티미디어 서비스에서 경험 품질(Quality of Experience : QoE)의 감소를 줄이는 방법 및 장치에 대한 것이다.

멀티미디어 서비스에서 HTTP(Hypertext Transfer Protocol) 기반의 미디어 스트리밍 서비스는 마이크로 소프트, Adobe, Apple에 의해 서비스가 이루어 지고 있다. 기존의 HTTP 기반의 미디어 스트리밍 서비스(이하, '멀티미디어 서비스라 함)에서는 일정한 시간 단위로 스트림을 구분하고, 클라이언트의 요청에 따라 해당 스트림을 클라이언트에게 전달한다. 이 과정에서 초기 버퍼링에 의한 지연을 감소시키는 데 한계가 있다.

도 1은 HTTP 기반의 멀티미디어 스트리밍 서비스에서 고속 전진(fast forward) 동작의 일 예를 나타낸 도면이다.

멀티미디어 서비스 이용 중에 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경을 할 경우 버퍼링으로 인해서 지연이 발생하게 된다.

도 1에서 T0(101)는 멀티미디어 서비스에서 fast forward를 시작한 시점을 나타내고 T1(103)은 상기 fast forward가 끝난 시점을 나타낸다. 실선(105)은 T0 이전의 데이터를 나타내고, 실선(107)은 T1 이후의 데이터를 나타낸다. 점선(109)은 버퍼의 임계 값(109)을 나타낸다. 버퍼의 임계 값(109)보다 많은 데이터가 있어야 멀티미디어의 재생이 시작된다. T0(101) 이전에, 버퍼에 임계 값(109)보다 많은 데이터가 있는 상태에서, T0(101)에 fast forward가 시작되고 T1(103)에 fast forward가 멈추면, 버퍼에는 임계 값(109)보다 적은 데이터가 있게 된다. Tb(111)는 버퍼가 임계 값에 도달하는 데 걸리는 시간을 나타낸다. Tb(111)의 시간 동안 멀티미디어의 재생이 불가능하다. Tb(111)를 시작 지연이라고 하며 Tb (111) 동안 사용자는 서비스를 제공받지 못한다. 이로 인해 서비스의 경험 품질이 감소하게 된다.

도 2는 멀티미디어 서비스에서 부호화 단위에 따른 지연의 일 예를 나타낸 도면이다.

도 2와 같이 임의접근(Random Access)을 한 시점의 위치가 스트림에서 독립적으로 복호화가 불가능한 영상 단위 영상인 Inter(203)인 경우에는 스트림에서 독립적으로 복호화가 가능한 영상 단위 영상인 Intra(201)가 올 때까지 지연이 발생하게 된다. 결국 독립적으로 복호화가 가능한 단위 영상을 통해로 입임의접근이나 트릭모드가 가능하게 되는 것이다.

본 발명은 멀티미디어 서비스에서 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 따른 지연으로 인한 경험 품질(QoE) 감소를 최소화하는 방법 및 장치를 제공한다.

본 발명의 일 실시 예에 따른 멀티미디어 스트리밍 서비스를 제공하기 위한 방법은, 컨텐츠의 제1 멀티미디어 스트림을 재생하는 단계; 상기 제1 멀티미디어 스트림의 재생 중에 상기 컨텐츠의 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림으로부터 독립적으로 복호화가 가능한 단위 영상에 관한 정보를 참조하여 상기 제2 멀티미디어 스트림을 재생하는 단계를 포함하며, 상기 단위 영상에 관한 정보는 상기 단위 영상의 단위 시간당 개수 정보를 포함하고, 상기 제2 멀티미디어 스트림은 상기 제1 멀티미디어 스트림보다 저화질 영상을 재생하기 위한 스트림임을 특징으로 한다.
본 발명의 일 실시 예에 따른 멀티미디어 스트리밍 서비스를 제공하기 위한 장치는, 멀티미디어 스트림을 재생하는 표시부; 및 상기 표시부를 통한 컨텐츠의 제1 멀티미디어 스트림의 재생 중에 상기 컨텐츠의 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면, 상기 제2 멀티미디어 스트림으로부터 독립적으로 복호화가 가능한 단위 영상에 관한 정보를 참조하여 상기 제2 멀티미디어 스트림을 상기 표시부를 통하여 재생하는 제어부를 포함하며, 상기 단위 영상에 관한 정보는 상기 단위 영상의 단위 시간당 개수 정보를 포함하고, 상기 제2 멀티미디어 스트림은 상기 제1 멀티미디어 스트림보다 저화질 영상을 재생하기 위한 스트림임을 특징으로 한다.

삭제

도 1은 멀티미디어 서비스에서 고속 전진 동작의 일 예를 나타낸 도면,
도 2는 멀티미디어 서비스에서 부호화 단위에 따른 지연의 일 예를 나타낸 도면,
도 3a,b는 본 발명의 실시 예에 따라 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 추가적인 멀티미디어 스트림의 일 예를 나타낸 도면,
도 4는 본 발명의 실시 예에 따른 방법을 HTTP 기반의 멀티미디어 서비스에 적용한 예를 나타낸 도면,
도 5는 본 발명의 실시 예에 따라 HTTP 기반의 멀티미디어 서비스에서 추가적인 멀티미디어 스트림을 이용한 고속 전진 동작을 나타낸 도면,
도 6은 본 발명의 실시 예에 제안하는 방법의 TRA 버퍼와 기존의 일반 버퍼의 일 예를 나타낸 도면,
도 7은 HTTP 기반의 멀티미디어 서비스에서 본 발명의 실시 예에서 제안하는 방법을 이용한 representation 간의 교체의 예를 나타낸 도면,
도 8은 본 발명의 실시 예에서 제안하는 방법을 위한 확장된 인덱스의 일 구성 예를 나타낸 도면,
도 9는 본 발명의 실시 예에서 제안하는 방법에 따른 상호 참조를 위한 확장된 인덱스의 다른 구성 예를 나타낸 도면.

하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 이하 첨부된 도면을 참조하여 본 발명의 실시 예를 설명하기로 한다.

사용자가 멀티미디어 서비스 중에 재생할 컨텐츠의 시간적 위치를 앞이나 뒤로 이동하는 것을 임의 접근(random access)이라 하고, 컨텐츠의 재생의 속도 또는 컨텐츠 재생의 시간적 방향을 변경하는 것을 트릭 모드(trick mode)라고 한다. 이러한 임의 접근 또는 트릭 모드의 동작을 수행하게 되면 기존에 수신한 데이터는 버퍼에서 삭제하고 새로 수신한 데이터로 버퍼링을 수행하여야 한다. 그 과정에서 멀티미디어 서비스에 지연이 발생하게 되고 그로 인해 QoE가 감소하게 된다.

따라서 본 발명의 실시 예에서는 각종 유무선 방송 시스템을 통해 제공되는 멀티미디어 서비스에서 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 추가적인 멀티미디어 스트림을 제안한다. 상기 특화된 멀티미디어 스트림은 지연을 최소화하기 위해서 작은 단위로 부호화가 된다. 예를 들어 프레임의 영상 그룹, 즉GOP의 크기, Intra 주기 등이 짧게 부호화된다. 그렇기 때문에 버퍼링의 속도가 빠르다. 본 발명의 다른 실시 예로 컨텐츠의 변경에 빨리 대응할 수 있도록 컨텐츠 간의 상호 참조를 위한 인덱스를 제안한다. 컨테츠간의 변경을 위한 인덱스를 할당함으로써 interaction을 최소화하여 컨텐츠 변경으로 인한 지연을 최소화 한다.

본 발명의 실시 예에서는 지연에 따른 QoE를 최소화하기 위해 사용자가 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경을 수행할 경우 기존에 수신하던 멀티미디어 스트림을 본 발명이 제안하는 특화된 멀티미디어 스트림으로 교체한다. 컨텐츠 내의 재생 위치 변경 또는 컨텐츠 변경의 수행이 끝나면 다시 기존의 멀티미디어 스트림으로 교체한다. 본 발명의 실시 예는 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 멀티미디어 스트림을 이용하여 QoE의 감소를 최소화하는 방법과, 본 발명에서 제안하는 멀티미디어 스트림과 기존의 멀티미디어 스트림간의 교체 방법을 포함한다.

이러한 본 발명의 실시 예는 멀티미디어 서비스의 QoE를 향상시키기 위한 기술로 폭넓게 활용될 수 있다.

상기와 같이 본 발명의 실시 예에서 제안하는 방법은 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 추가적인 멀티미디어 스트림을 이용하여 지연에 따른 경험 품질(QoE) 감소를 최소화할 수 있다. 그리고 지연을 최소화하기 위해서는 독립적으로 복호화가 가능한 단위가 작아야 한다. 즉 GOP의 크기, Intra 주기 등이 짧아야 한다. 여기서 상기 복호화가 가능한 단위, 즉 단위 영상의 주기가 짧아진다는 것은 멀티미디어 스트림에서 단위 시간당 포함되는 단위 영상의 개수가 많아진다는 것을 의미한다.

도 3a,b는 본 발명의 실시 예에 따라 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 추가적인 멀티미디어 스트림(TRA Stream)의 일 예를 나타낸 도면이다.

도 3a를 참조하면, 일반 스트림(Normal stream)은 기존 기술에서 일반적으로 이용되는 스트림을 의미하고, 도 3b의 TRA(Trick mode and Random Access) Stream은 본 발명의 실시 예에서 제안하는 스트림을 의미한다. 상기 일반 스트림은 고화질 영상, 상기 TRA 스트림은 상대적으로 저화질 영상에 이용할 수 있다. 그리고 상기 일반 스트림과 상기 TRA 스트림은 각각 하나 또는 복수 개가 될 수 있다.

도 3a,b를 참조하면, TRA Stream이 상대적으로 인트라의 주기가 짧은 것을 볼 수 있다. 같은 시점에 random access를 시도할 경우, normal stream에서의 지연은 Tb(315)이고 TRA stream에서의 지연은 T'B(335)이다. 본 발명의 실시 예에 따라 TRA 스트림을 이용하는 경우, 지연이 더 짧은 것을 볼 수 있다. 또한, 도 3에서 Normal stream의 Intra의 크기를 A(311), Inter의 크기를 B(313)라고 하고 TRA stream의 Intra의 크기를 A'(331), Inter의 크기를 'B'(333)라고 하였을 때 빠른 버퍼링을 위하여 TRA stream의 Intra와 Inter의 크기(331, 333)가 Normal stream의 Intra와 Inter의 크기(311, 313)에 비해 작음을 알 수 있다.

도 4는 본 발명의 실시 예에 따른 방법을 HTTP 기반의 멀티미디어 서비스에 적용한 예를 나타낸 도면이다.

도 4를 참조하면, 참조 번호 400, 410, 411, 413은 미디어 표현의 구조를 나타낸 것이다. 도 4를 참조하면, 예컨데, 종래 일반 스트림의 경우, 표현 1(representation 1)(413)의 주기가 10초이고, 본 발명에서 제안하는 TRA 스트림의 경우, TRA 표현(TRA representation)(411)의 주기는 5초로 더 짧음을 알 수 있다. 또한, 표현 1(413)의 bandwidth는 500kbit/s인 반면, TRA 표현(411)의 bandwidth는 400kbit/s로 더 낮음을 알 수 있다. 따라서, 본 발명에 따른 TRA 스트림을 이용하면Seeking 후 지연이 짧게 된다.

도 5는 HTTP 기반의 멀티미디어 서비스에서 본 발명의 실시 예에서 제안하는 TRA 스트림을 이용한 고속 전진 동작을 나타낸 도면이다.

도 5를 참조하면, 실선은 일반적인 재생 구간을 나타내고, 점선은 fast forward 구간을 나타낸다. 시점(501)은 fast forward를 시작한 시점을 나타내고, 시점(503)은 사용자가 fast forward 를 멈춘 시점을 나타낸다. Block A(505)는 TRA representation과 representation 2간의 switching 구간을 나타내고, Block B(507)는 Block A((505)를 더 자세히 묘사한 것이다.

도 5의 Block B(507)에서 Ta 는 fast forward를 멈춘 시점을 의미한다. Ta에서 fast forward를 멈추면 TRA representation에서 representation 2로 switching 하기 위해 representation 2를 요청한다. 이 때 Ta 에 해당하는 것을 요청하는 것이 아니라 Tc에 해당하는 것을 요청한다. 요청 후 버퍼링(buffering)하는 동안은 TRA representation 을 보여준다. 그 후 Buffering이 완료되면 representation 2로 교체하여 보여준다. "Tc - Ta"인 Tb는 representation 2를 요청 후에 representation 2의 buffering에 필요한 시간을 나타낸다. 본 발명의 실시 예에서 제안하는 방법은 Tb 동안 TRA representation을 display하기 때문에 seeking후에 사용자가 느끼는 시작 지연(start-up delay)이 적다. 반면 기존의 방법을 사용한다면 Tb 동안 display가 불가능하다.

도 6은 본 발명의 실시 예에서 제안하는 방법의 TRA 버퍼와 기존의 일반 버퍼의 일 예를 나타낸 도면이다.

도 6은 도 5에서 TRA representation의 버퍼(610)와 representation 2의 버퍼(630)를 나타낸다. TRA representation의 버퍼(610)의 임계 값(611)은 representation 2의 버퍼(630)의 임계 값(631)보다 작다. 그 이유는 TRA representation의 대역폭(bandwidth)이 더 작고 Intra의 주기가 짧기 때문이다. 도 6의 예에서는 Representation 2의 버퍼(630)가 임계 값(631)에 도달하지 않았지만 TRA representation의 버퍼(610)는 이미 임계 값(611)을 넘었기 때문에 representation 2의 버퍼(630)가 임계 값(631)에 도달하기 전까지 TRA representation을 보여줄 수 있고 사용자는 시작 지연(start-up delay)을 적게 느끼게 되어 QoE의 감소가 줄어든다. 상기 TRA representation의 버퍼(610)의 임계 값(611)은 클라이언트의 버퍼 관리 동작을 위해서 클라이언트에 전송될 수 있다.

아래 알고리즘은 TRA representation의 버퍼(610)의 임계값 정보를 전송하는 일 예를 나타낸 것이다. TRA representation의 인덱스 정보에 TRA representation의 버퍼(610)의 임계값을 새로운 구조 형태로 추가할 수도 있고, 기존 represnetation 인덱스(sidx) 정보 자체를 포함시킬 수도 있다. 또한, 하기 <표 1> 에서와 같이 상기 임계값 정보는 멀티미디어 스트림의 헤더 정보인 MPD의 새로운 속성 형태로 추가되어 전송 될 수 있다.

이러한 상기 임계값 또는 인덱스 정보들을 통해서 클라이언트는 시작 지연(start-up delay)을 최소화 할 수 있는 버퍼 관리 기능을 수행할 수 있다.

< TRA representation의 버퍼의 임계값 정보를 전송하는 알고리즘>

도 7은 HTTP 기반의 멀티미디어 서비스에서 본 발명의 실시 예에서 제안하는 방법을 이용한 representation 간의 교체의 예를 나타낸 도면이다.

도 5를 참조하여 살펴본 바와 같이, 사용자가 Ta 시점에 Tc 시점에 해당하는 representation 2의 데이터를 요청하기 위해서는 TRA representation에 representation 2의 index 정보가 있어야 한다. 예를 들어, 도 7에 도시된 바와 같이 TRA representation의 media segment 2의 S1(701)에 representation 2의 S2(705)의 정보가 있는 경우, S1(701)를 이용하여 S2를 획득할 수 있고, S2(705)의 F7(703)의 정보를 이용해 F7(703)을 요청할 수 있다.

본 발명의 실시 예에서는 컨텐츠 내의 재생 위치 변경 또는 컨텐츠의 변경에 특화된 추가적인 멀티미디어 스트림을 제안한다. 사용자가 컨텐츠 내의 재생 위치를 변경하거나 컨텐츠를 변경하면 기존의 멀티미디어 스트림에서 본 발명이 제안하는 멀티미디어 스트림으로 교체되고, 재생 위치 또는 컨텐츠의 변경이 완료되면 다시 기존의 멀티미디어 스트림으로 교체된다. 이러한 교체작업을 수행하기 위해서는 본 발명에서 제안하는 멀티미디어 스트림을 식별할 수 있어야 한다.

하기 <표 1>은 HTTP 기반의 멀티미디어 서비스에서 본 발명이 제안하는 방법을 이용한 멀티미디어 스트림의 식별법을 나타낸다.

사용자가 서비스 중인 representation에서 트릭 모드(trick mode)와 임의접근(random access)에 특화된 TRA representation으로 이동하기 위하여 MPD(Media Presentation Description)에 "TRArepresentationURL"를 명시한 것을 볼 수 있다. 이 예와 같이 본 발명이 제안한 TRA representation 에 대한 식별자를 추가하여 기존의 representation과의 교체가 가능하도록 해야 한다. 그와 반대로 TRA representation에서 기존의 representation으로의 교체도 가능해야 한다.

도 5와 도 7에서와 같이 Ta 시점에서 Tc 시점에 해당하는 representation 2의 데이터를 중복없이 효율적으로 요청하기 위해서는 다른 representation의 정보 혹은 각 스트림의 기준 정보가 필요하다. 예를 들어 스트림의 시간정보를 이용하여 중복 수신, 디코딩을 방지할 수 있다. 따라서, 예를 들어 TRA representation의 인덱스(sidx) 정보에 다른 representation의 인덱스(sidx) 정보가 있어야 한다.

아래는 TRA representation의 인덱스(sidx) 정보에 다른 representation의 인덱스(sidx)의 위치 값을 추가하는 알고리즘의 일 예를 나타낸 것이다. 이와 같이 TRA representation의 인덱스(sidx) 정보에 다른 representation의 인덱스(sidx) 정보의 위치 값을 추가할 수도 있고, 다른 representation의 인덱스(sidx) 정보 자체를 포함시킬 수도 있다. 예를 들어, 데이터의 중복이 발생하지 않도록 요청을 하기 위해서 필요한 인덱스(Sidx) 정보는 다른 representation 인덱스(sidx)에 대한 위치 값과 해당 스트림의 재생에 필요한 재생 시간이다.

상기 알고리즘에서 각 변수의 의미는 아래와 같다.

1) TRArepresentation: representation을 식별하기 위한 것으로 'ture'이면 TRA reprentation이고 'false'이면 보통의 representation이다. 이 변수는 경우에 따라 보통의 representation 속성을 기반으로 추가 기능을 위한 참, 거짓을 표현하는 Flag 형태로 표현 될 수 있다.

2) Representation_count : TRA representation을 제외한 총 representation의 숫자를 나타낸다.

3) ref_Sidx : TRA representation에서 보통의 representation으로 switching 하기 위한 인덱스(sidx)의 point를 나타낸다.

하기 <표 2>은 HTTP 기반의 멀티미디어 서비스에서 본 발명이 제안하는 방법을 이용한 멀티미디어 스트림의 식별법의 상기 <표 1>의 다른 예를 나타낸다. 표 1에서는 TRA에 적합한 멀티미디어의 URL을 통하여 사용자가 TRA시에 적절한 멀티미디어 스트림을 선택할 수 있었다면 표 2에서는 멀티미디어 스트림의 RAP 주기 정보와 같은 특성정보를 통하여 어떤 멀티미디어 스트림이 TRA에 적합한지 식별할 수 있다. 하기 <표 2>에서와 같이 상기 RAP 주기 정보와 같은 특성 정보는 MPD의 새로운 속성 형태로 추가되어 전송될 수 있다.

도 8은 본 발명의 실시 예에서 제안하는 방법을 위한 확장된 인덱스(extended sidx)의 일 구성 예를 나타낸 도면이다.

도 8은 HTTP 기반의 멀티미디어 서비스에서 TRA representation에서 기존의 representation으로의 교체를 위한 extended sidx의 예를 나타낸 것으로서,도 8에서 Representation_count 는 2가 된다. 참조 번호 801, 803으로 도시된 실선은 TRA representation의 인덱스(sidx)가 가지고 있어야 할 기존 representation의 인덱스(sidx) 정보인 참조 인덱스(ref_Sidx)를 나타낸다. 도 8에서 TRA representation의 인덱스(sidx)는 두 개의 참조 인덱스(ref_Sidx)를 갖는다.

아울러 도시되지는 않았으나, 본 발명의 실시 예에 따라 멀티미디어 서비스를 재생하는 멀티미디어 장치는 표시부, 키입력부, 버퍼 및 제어부를 포함하여 구성될 수 있다. 상기 표시부는 멀티미디어 서비스를 디스플레이한다. 상기 키입력부는 사용자로부터 상기 재생과 관련된 각종 명령을 입력받는다. 상기 버퍼는 멀티미디어 스트림을 버퍼링한다. 상기 제어부는 상기 표시부를 통한 제1 멀티미디어 스트림의 재생 중 상기 키입력부를 통해 재생과 관련된 특정 명령이 실행된 경우 상기 버퍼에서 상기 특정 명령에 해당하는 멀티미디어 스트림의 버퍼링에 필요한 시간 동안 상기 표시부를 통해 제2 멀티미디어 스트림을 재생하고, 상기 버퍼링이 완료된 후, 상기 표시부를 통해 상기 특정 명령에 해당하는 멀티미디어 스트림을 재생하도록 제어한다.

도 9는 본 발명의 실시 예에서 제안하는 방법에 따른 상호 참조를 위한 확장된 인덱스(extended sidx)의 다른 구성 예를 나타낸 것이다.

도 9의 실시 예는 컨테츠의 변경을 위한 추가적인 representation의 사용이 불가능할 경우에 사용할 수 있다. 도 9에서 참조 번호 901과 902로 도시된 지시선은 representation간의 인덱스 정보를 나타낸다. 도 8의 실시 예에서는 TRA representation이 다른 representation의 인덱스 정보를 모두 가지고 있었지만, 도 9의 실시 예에서는 인접 representation의 인덱스 정보를 각 representation이 가지고 있고 컨텐츠의 변경이 요청될 경우, 상기 인접 representation의 인덱스 정보를 이용하여 다른 representation의 정보를 요청한다. 예를 들어, 도 9에서 representation 1은 representation 2의 인덱스 정보를 가지고 있고 representation 2는 representation 1과 3의 인덱스 정보를 가지고 있다.　 각각의 representation이 인접하는 representation의 인덱스 정보를 갖도록 하는 방법 이외에도 다양한 방법을 이용할 수 있다.

아래는 도 9의 실시 예를 위한 알고리즘을 나타낸 것이다.

aligned(8) class SegmentIndexBox extends FullBox('sidx', version, ,0) {

unsigned int(8) REF_Representation_count;

for(i=1; i <= Representation_count; i++)

{

unsigned int(8) ref_Sidx_count;

for(j=1; j <= ref_Sidx_count; j++)

{

unsigned int(31) Sidx_position

}

상기 알고리즘에서 각 변수의 의미는 아래와 같다.

1) REF_Representation_count: 참조 인덱스를 가지고 있어야 할 representation의 수를 의미한다.

2) ref_Sidx_count: 참조 Sidx의 수를 의미한다.. 참조 representation의 Media segment에 몇 개의 참조 인덱스를 가질 것인 가를 의미한다.

3) Sidx_position : 컨텐츠 변경을 위한 인덱스 정보의 위치를 의미한다. 경우에 따라서 위치가 아니라 offset, byte range가 될 수도 있다.

Claims

멀티미디어 스트리밍 서비스를 제공하기 위한 방법에 있어서,
컨텐츠의 제1 멀티미디어 스트림을 재생하는 단계;
상기 제1 멀티미디어 스트림의 재생 중에 상기 컨텐츠의 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림으로부터 독립적으로 복호화가 가능한 단위 영상에 관한 정보를 참조하여 상기 제2 멀티미디어 스트림을 재생하는 단계를 포함하며,
상기 단위 영상에 관한 정보는 상기 단위 영상의 단위 시간당 개수 정보를 포함하고,
상기 제2 멀티미디어 스트림은 상기 제1 멀티미디어 스트림보다 저화질 영상을 재생하기 위한 스트림임을 특징으로 하는 멀티미디어 스트리밍 서비스 제공 방법.
제1항에 있어서,
상기 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제1 멀티미디어 스트림의 재생을 중지하는 단계를 더 포함하는 멀티미디어 스트리밍 서비스 제공 방법.
제1항에 있어서,
상기 제2 멀티미디어 스트림의 재생 중에 상기 제1 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림으로부터 상기 제1 멀티미디어 스트림의 인덱스 관련 정보를 참조하여 상기 제1 멀티미디어 스트림을 재생하는 단계를 더 포함하는 멀티미디어 스트리밍 서비스 제공 방법.
제3항에 있어서, 상기 제1 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림의 재생을 중지하는 단계를 더 포함하는 멀티미디어 스트리밍 서비스 제공 방법.
제1항에 있어서, 상기 제2 멀티미디어 스트림에 포함된 단위 영상의 단위 시간당 개수는 상기 제1 멀티미디어 스트림에 포함된 단위 영상의 단위 시간당 개수보다 많은 멀티미디어 스트리밍 서비스 제공 방법.
제1항에 있어서, 상기 단위 영상에 관한 정보는, 멀티미디어 스트림의 헤더 정보인 MPD에 포함되는 멀티미디어 스트리밍 서비스 제공 방법.
삭제
삭제
멀티미디어 스트리밍 서비스를 제공하기 위한 장치에 있어서,
멀티미디어 스트림을 재생하는 표시부; 및
상기 표시부를 통한 컨텐츠의 제1 멀티미디어 스트림의 재생 중에 상기 컨텐츠의 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면, 상기 제2 멀티미디어 스트림으로부터 독립적으로 복호화가 가능한 단위 영상에 관한 정보를 참조하여 상기 제2 멀티미디어 스트림을 상기 표시부를 통하여 재생하는 제어부를 포함하며,
상기 단위 영상에 관한 정보는 상기 단위 영상의 단위 시간당 개수 정보를 포함하고,
상기 제2 멀티미디어 스트림은 상기 제1 멀티미디어 스트림보다 저화질 영상을 재생하기 위한 스트림임을 특징으로 하는 멀티미디어 스트리밍 서비스 제공 장치.
제9항에 있어서, 상기 제어부는, 상기 제2 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제1 멀티미디어 스트림의 재생을 중지하는 멀티미디어 스트리밍 서비스 제공 장치.
제9항에 있어서, 상기 제어부는, 상기 제2 멀티미디어 스트림의 재생 중에 상기 제1 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림으로부터 상기 제1 멀티미디어 스트림의 인덱스 관련 정보를 참조하여 상기 제1 멀티미디어 스트림을 재생하는 멀티미디어 스트리밍 서비스 제공 장치.
제11항에 있어서, 상기 제어부는, 상기 제1 멀티미디어 스트림의 재생과 관련한 특정 명령이 입력되면 상기 제2 멀티미디어 스트림의 재생을 중지하는 멀티미디어 스트리밍 서비스 제공 장치.
제9항에 있어서, 상기 제2 멀티미디어 스트림에 포함된 단위 영상의 단위 시간당 개수는 상기 제1 멀티미디어 스트림에 포함된 단위 영상의 단위 시간당 개수보다 많은 멀티미디어 스트리밍 서비스 제공 장치.
제9항에 있어서, 상기 단위 영상에 관한 정보는, 멀티미디어 스트림의 헤더 정보인 MPD에 포함되는 멀티미디어 스트리밍 서비스 제공 장치.
삭제
삭제