KR100587972B1 - 인터넷 멀티미디어 서비스 품질 평가 방법 - Google Patents
인터넷 멀티미디어 서비스 품질 평가 방법 Download PDFInfo
- Publication number
- KR100587972B1 KR100587972B1 KR1020040073568A KR20040073568A KR100587972B1 KR 100587972 B1 KR100587972 B1 KR 100587972B1 KR 1020040073568 A KR1020040073568 A KR 1020040073568A KR 20040073568 A KR20040073568 A KR 20040073568A KR 100587972 B1 KR100587972 B1 KR 100587972B1
- Authority
- KR
- South Korea
- Prior art keywords
- quality
- quality score
- time
- internet multimedia
- connection
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 230000005540 biological transmission Effects 0.000 claims abstract description 32
- 238000013441 quality evaluation Methods 0.000 claims abstract description 16
- 238000004364 calculation method Methods 0.000 claims abstract description 7
- 238000012544 monitoring process Methods 0.000 claims abstract description 4
- 230000003139 buffering effect Effects 0.000 claims description 13
- 230000008929 regeneration Effects 0.000 claims 2
- 238000011069 regeneration method Methods 0.000 claims 2
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 238000000275 quality assurance Methods 0.000 description 4
- 239000000872 buffer Substances 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000000691 measurement method Methods 0.000 description 2
- 238000003908 quality control method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/50—Business processes related to the communications industry
Landscapes
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
1. 청구범위에 기재된 발명이 속하는 기술분야
본 발명은, 인터넷 멀티미디어 서비스 품질 평가 방법에 관한 것임.
2. 발명이 해결하려고 하는 기술적 과제
본 발명은, 인터넷 멀티미디어 서비스의 품질을 측정하고 평가하는데 있어서, 종래와 같이 접속에서 재생까지의 전과정을 일률적인 파라메터(예를 들어, 패킷손실율, 패킷지연율)로 평가하는 것이 아니라, 접속 과정, 전송 과정, 재생 과정에 따라 각기 다른 성능 파라메터 값을 모니터링하여 수집하고, 이를 통합적으로 합산하여 서비스 품질을 평가함으로써, 서버, 네트워크의 상태 및 애플리케이션의 종류를 모두 고려하여 보다 정확하게 인터넷 멀티미디어 서비스 품질을 평가하기 위한, 인터넷 멀티미디어 서비스 품질 평가 방법을 제공하는데 그 목적이 있음.
3. 발명의 해결 방법의 요지
본 발명은, 인터넷 멀티미디어 서비스 품질 평가 방법에 있어서, 클라이언트에서 서버로 인터넷 멀티미디어 서비스를 요청함에 따라 접속 과정, 전송 과정, 재생 과정에 따라 각각 미리 정의된 성능 파라메터 값을 모니터링하여 수집하는 파라메터 값 수집 단계; 상기 수집한 성능 파라메터 값들을 이용하여 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수를 산출하는 과정별 품질 점수 산출 단계; 상기 산출한 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수 각각에 대하여 기설정된 가중치를 적용한 후 합산하여, 서비스 품질 점수(Stream QoS Score)를 계산하는 서비스 품질 점수 계산 단계; 및 상기 계산한 서비스 품질 점수(Stream QoS Score)를 저장하는 저장 단계를 포함함.
4. 발명의 중요한 용도
본 발명은 인터넷 서비스 품질 평가 시스템 등에 이용됨.
인터넷 멀티미디어 서비스, 서비스 품질 평가, 성능 파라메터, 접속 품질, 전송 품질, 재생 품질
Description
도 1은 본 발명이 적용되는 인터넷 서비스 시스템의 일실시예 구성도,
도 2는 본 발명이 적용되는 인터넷 서비스 시스템에서 클라이언트 접속 및 멀티미디어 데이터 전송 과정에 대한 일실시예 설명도,
도 3은 본 발명에 따른 인터넷 멀티미디어 서비스 품질 평가 방법 중 서비스 품질 점수를 산출하는 과정에 대한 일실시예 설명도,
도 4 는 본 발명에 따른 인터넷 멀티미디어 서비스 품질 평가 방법에 대한 일실시예 흐름도이다.
* 도면의 주요 부분에 대한 부호 설명
11 : 클라이언트 12 : 멀티미디어 서비스 서버
13 : 웹 서버 14 : 미디어 서버
본 발명은, 인터넷 멀티미디어 서비스 품질 평가 방법에 관한 것으로, 더욱 상세하게는 인터넷 멀티미디어 서비스의 품질을 측정하고 평가하는데 있어서, 종래와 같이 접속에서 재생까지의 전과정을 일률적인 파라메터(예를 들어, 패킷손실율, 패킷지연율)로 평가하는 것이 아니라, 접속 과정, 전송 과정, 재생 과정에 따라 각기 다른 성능 파라메터 값을 모니터링하여 수집하고, 이를 통합적으로 합산하여 서비스 품질을 평가함으로써, 서버, 네트워크의 상태 및 애플리케이션의 종류를 모두 고려하여 보다 정확하게 인터넷 멀티미디어 서비스 품질을 평가하기 위한, 인터넷 멀티미디어 서비스 품질 평가 방법에 관한 것이다.
인터넷의 사회 의존도가 높아지면서 인터넷 서비스 제공자들은 가입자들과 서비스 수준 협약(Service Level Agreement)이라는 일종의 품질 보증 계약을 맺고 있다. 이러한 서비스 수준 협약(Service Level Agreement)의 대부분은 인터넷 서비스의 특성상, 통신 품질을 측정하는 항목들에 대한 보증 내용을 주로 포함하고 있다.
통신 품질을 측정하는 항목의 대표적인 예를 들면 가입자 구간의 패킷지연율, 패킷손실율 같은 것을 들 수 있다. 이러한 통신 품질에 대한 보증 내용의 예를 살펴보면 대부분 "한달 평균 패킷지연율이 300ms이상이거나, 한달 평균 패킷손실율이 2% 이상일 경우에는 서비스 제공자가 결정한 방식에 의해 가입자에게 보상해준다" 라는 식으로 기술되어 있다.
그러나, 이처럼 모호하고 단순한 통신 품질 보증은 폭발적인 성장세를 지속 하고 있는 인터넷 환경에서 서비스 가입자나 제공자 모두에게 현실적이지 못한 경우가 대부분이다.
우선, 가입자의 입장에서는 서비스 제공자가 일방적으로 명시한 통신 품질의 통계 데이터를 여러 가지 이유에서 신뢰하지 못할 수도 있으며, 제공자의 입장에서는 가입자의 무조건적인 품질 보증 요구에 논리적으로 대처하지 못하여 사업적인 측면에서 기업이미지 실추와 같은 적지 않은 타격을 받을 가능성도 있기 때문이다.
이러한 문제를 막기 위해서는 서비스 제공자와 서비스 가입자가 서비스에 대한 통신 품질에 대한 신뢰성을 높이기 위한 제한 조건을 품질 보증 계약에 협의하여 명시하고, 서비스 제공자 측에서는 이러한 제한 조건을 수용한 정확한 품질 측정 데이터를 수집하고 분석할 수 있는 방법이 절실히 필요하다.
한편, 서비스 가입자가 고품질의 인터넷 서비스, 예를 들어 인터넷 멀티미디어 서비스를 제공 받기 위해서는 크게 몇 가지 보장되어야 할 사항들이 있다.
첫째, 멀티미디어 서비스를 제공하는 서버의 성능이 확보되어야 한다.
둘째, 멀티미디어 서버가 연결되는 통신망의 성능이 보장되어야 한다.
셋째, 멀티미디어 서비스를 최종적으로 수신하는 클라이언트의 성능이 보장되어야 한다.
이 때, 클라이언트의 성능 부분을 제외한 나머지 고려사항들은 주로 인터넷 서비스 제공자의 역할이라고 할 수 있다. 최근에는 인터넷 수능 강의 등과 같이 인터넷을 이용한 멀티미디어 서비스의 이용율이 매우 높아짐에 따라 인터넷 서비스 제공자들은 멀티미디어 서비스에 대한 품질 관리에 많은 투자를 하고 있다. 이처럼 인터넷 멀티미디어 서비스에 대한 품질 관리를 위해서는 서비스 가입자와 서비스 제공자의 입장을 모두 고려한 실질적인 측정 방법과 분석 방법이 무엇보다 요구된다.
그런데, 종래의 인터넷 서비스 품질 평가 방법은 애플리케이션 레벨의 서비스와는 상관없이 단순한 측정 방법을 사용하여 그 성능을 평가하고 있기 때문에, 가입자에 대한 통신 품질을 제대로 보장해주지 못하거나, 가입자의 무조건적인 품질 보증 요구에 논리적으로 대처하지 못하고 있는 실정이다.
예를 들어, 서비스 제공자 측에서 가입자 별로 24시간 핑(ping) 테스트를 수행하여 패킷손실율과 패킷지연율을 측정한 후, 한달 동안의 평균을 산출하여 가입자에게 제공하는 등과 같은 종래 방식은, 가입자의 이용 성향이나 사용하는 애플리케이션의 종류에 따라 그 결과가 매우 좋지 않게 나올 수 있는 가능성을 내포하고 있다. 따라서, 서비스 제공자는 이를 입증할만한 정확한 데이터를 제시하지 못하기 때문에 가입자에게 보상을 해줘야 하는 경우가 발생할 수도 있으며, 가입자의 입장에서는 인터넷 서비스 성능이 저하되는 원인을 정확하게 파악하지 못하기 때문에 서비스 제공자에 대한 불만을 초래할 수 있는 문제점이 있었다.
즉, 인터넷 서비스의 종류에 따라 가입자가 체감하는 인터넷 품질은 매우 다르다. 인터넷 멀티미디어 서비스를 이용할 경우에 가입자가 품질을 판단하는 기준과 이미지를 포함한 일반 텍스트 기반의 인터넷 서비스를 이용할 경우에 가입자가 품질을 판단하는 기준은 서로 다르다.
즉, 게임을 포함한 인터넷 멀티미디어 서비스는 일정한 시간 동안 사용자에 게 끊김없는 데이터를 전송하여야 하는 특성을 만족시켜줘야 하며, 이러한 연속적인 특징을 만족시키기 위해서는 서버의 성능과 그 상태가 매우 중요하다. 이에 비해, 이미지를 포함한 일반 텍스트 기반의 인터넷 서비스는 이러한 특성이 크게 적용되지 않는다. 따라서, 텍스트 기반의 일반 인터넷 서비스에 대한 통신 품질은 그 서비스를 제공하는 서버의 성능을 품질 관리 요소로 굳이 포함시킬 필요가 없는 반면, 인터넷 멀티미디어 서비스는 그 특성상 서버의 성능과 상태를 품질 관리 요소로 포함시켜야 할 필요가 있다.
따라서, 패킷손실율, 패킷지연율 등과 같이 단순한 품질 지표 이외에도, 서버와 클라이언트가 연결된 네트워크의 상태와 애플리케이션의 종류를 모두 고려한 품질 지표를 포함하는 인터넷 멀티미디어 서비스 품질 측정 방법이 절실히 요구된다.
본 발명은, 상기와 같은 문제점을 해결하고 상기와 같은 요구에 부응하기 위하여 제안된 것으로, 인터넷 멀티미디어 서비스의 품질을 측정하고 평가하는데 있어서, 종래와 같이 접속에서 재생까지의 전과정을 일률적인 파라메터(예를 들어, 패킷손실율, 패킷지연율)로 평가하는 것이 아니라, 접속 과정, 전송 과정, 재생 과정에 따라 각기 다른 성능 파라메터 값을 모니터링하여 수집하고, 이를 통합적으로 합산하여 서비스 품질을 평가함으로써, 서버, 네트워크의 상태 및 애플리케이션의 종류를 모두 고려하여 보다 정확하게 인터넷 멀티미디어 서비스 품질을 평가하기 위한, 인터넷 멀티미디어 서비스 품질 평가 방법을 제공하는데 그 목적이 있다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기의 목적을 달성하기 위한 본 발명은, 인터넷 멀티미디어 서비스 품질 평가 방법에 있어서, 클라이언트에서 서버로 인터넷 멀티미디어 서비스를 요청함에 따라 접속 과정, 전송 과정, 재생 과정에 따라 각각 미리 정의된 성능 파라메터 값을 모니터링하여 수집하는 파라메터 값 수집 단계; 상기 수집한 성능 파라메터 값들을 이용하여 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수를 산출하는 과정별 품질 점수 산출 단계; 상기 산출한 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수 각각에 대하여 기설정된 가중치를 적용한 후 합산하여, 서비스 품질 점수(Stream QoS Score)를 계산하는 서비스 품질 점수 계산 단계; 및 상기 계산한 서비스 품질 점수(Stream QoS Score)를 저장하는 저장 단계를 포함한다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명 이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.
도 1은 본 발명이 적용되는 인터넷 서비스 시스템의 일실시예 구성도이다.
도 1에 도시된 바와 같이, 본 발명이 적용되는 인터넷 서비스 시스템은, 인터넷을 통하여 멀티미디어 서비스 서버(12)에 접속하여 멀티미디어 스트림 서비스를 제공받기 위한 클라이언트(11), 및 인터넷을 통하여 접속한 클라이언트(11)로 멀티미디어 스트림 서비스를 제공하기 위한 멀티미디어 서비스 서버(12)를 포함한다.
상기 멀티미디어 서비스 서버(12)는 멀티미디어 데이터의 인덱스를 관리하고 있으며 클라이언트(11)가 멀티미디어 데이터에 접속하는 것을 처리하기 위한 웹 서버(13)와 상기 웹 서버(13)로부터의 요청에 따라 멀티미디어 데이터의 인덱스에 상응하는 멀티미디어 데이터를 재생시켜 상기 클라이언트(11)로 멀티미디어 스트림 서비스를 제공하기 위한 미디어 서버(14)를 포함한다.
이처럼, 상기 멀티미디어 서비스 서버(12)는 멀티미디어 데이터의 인덱스와 멀티미디어 데이터를 같은 서버에 존재시키지 않고 분산시킨다. 즉, 상기 멀티미디어 서비스 서버(12)는 멀티미디어 데이터의 인덱스를 웹 서버(13)에 저장시키고, 실질적인 멀티미디어 데이터를 미디어 서버(14)에 저장시킨다. 이는 멀티미디어 데이터를 한곳에 집중시켜 저장하는 것이 비효율적이기 때문이다. 따라서, 일반적으로는 미디어 서버(14)를 여러 위치에 분산시키고, 멀티미디어 데이터도 다수의 미 디어 서버(14)에 위치시킴으로써 서버의 부하 분담과 접속의 효율성을 높이게 된다.
도 2는 본 발명이 적용되는 인터넷 서비스 시스템에서 클라이언트 접속 및 멀티미디어 데이터 전송 과정에 대한 일실시예 설명도이다.
도 2에 도시된 바와 같이, 먼저 클라이언트(11)가 웹 서버(13)로 연결 설정 요청을 전송하면, 상기 웹 서버(13)가 연결을 설정하고 연결 설정 응답을 클라이언트(11)로 반환함으로써, 상기 클라이언트(11)가 웹 서버(13)에 접속하게 된다.
이후, 상기 클라이언트(11)는 특정 멀티미디어 데이터의 재생을 미디어 서버(14)로 요청하고, 상기 미디어 서버(14)는 그에 대한 재생 응답을 반환한 후, 해당 멀티미디어 데이터를 스트리밍 방식으로 상기 클라이언트(11)로 전송해준다.
이처럼, 인터넷 멀티미디어 서비스는 접속을 담당하는 서버(웹 서버(13))와 멀티미디어 데이터의 재생을 담당하는 서버(미디어 서버(14))가 별도로 존재하므로, 접속에 대한 품질과 재생에 대한 품질을 서로 구분하여 측정하는 것이 바람직할 것이다.
하기의 [표 1]은 본 발명에 따른 인터넷 멀티미디어 서비스 품질 평가 방법을 위하여 수집하는 품질 평가 파라메터를 나타낸 표로서, 품질 평가 파라메터는 멀티미디어 서비스 등을 제공하는 서버 및 재생을 위한 클라이언트 프로그램에서 수집 가능하다.
| 지표 | 파라메터 | 정의 |
| 겁속 품질 | 웹 서버 연결시간 | 스트리밍 인덱스가 있는 웹 서버에 연결하는데 소요되는 시간 |
| 미디어 서버 연결시간 | 웹서버에서 실제 스트리밍 데이터가 있는 미디어 서버에 연결하는데 소요되는 시간 | |
| 최초 버퍼링 시간 | 미디어 서버에 연결되어 최초 버퍼링에 소요되는 시간 | |
| 전송 품질 | 수신된 패킷 수 | 스트리밍 재생 중 수신된 패킷의 수 |
| 손실된 패킷 수 | 스트리밍 재생 중 손실이 발생한 패킷의 수 | |
| 복구된 패킷 수 | 스트리밍 재생 중 복구된 패킷의 수 | |
| 전송 속도 | 스트리밍 전송 속도 | |
| 재생 품질 | 재버퍼링 횟수 | 스트리밍 재생 중 재버퍼링이 일어난 횟수 |
| 총 재버퍼링 시간 | 스트리밍 재생 중 재버퍼링이 발생한 총 소요 시간 | |
| 최대 재버퍼링 시간 | 재버퍼링 시간 중 최대 재버퍼링 시간 | |
| 최소 재버퍼링 시간 | 재버퍼링 시간 중 최소 재버퍼링 시간 | |
| 컨텐츠 길이 | 스트리밍 컨텐츠의 총 길이(분, 초로 표현) |
먼저, 접속 품질은 사용자가 최초 접속 시도부터 최초 버퍼링되는 시간까지의 품질을 측정하기 위한 파라메터를 포함한다. 즉, 스트리밍 인덱스가 있는 웹 서버(13)에 연결하는데 소요되는 시간을 측정하기 위한 웹 서버 연결시간, 웹 서버(13)에서 실제 스트리밍 데이터가 있는 미디어 서버(14)에 연결하는데 소요되는 시간을 측정하기 위한 미디어 서버 연결시간, 및 미디어 서버(14)에 연결되어 최초 버퍼링되기까지 소요되는 시간을 측정하기 위한 최초 버퍼링 시간을 포함한다.
그리고, 전송 품질은 네트워크 상에서 발생하는 멀티미디어 패킷들의 오류를 측정하기 위한 파라메터를 포함한다. 일반적으로 멀티미디어 서비스는 연결성에 기반한 서비스가 아니라 전달성을 강조하는 서비스이다. 즉, 스트리밍 전달 과정에서 발생하는 일정 수준의 패킷 손실은 사용자가 인지하지 못할 수 있지만, 연결성 위주로 제공한다면 재생 중 발생하는 패킷의 지터, 화면 왜곡 등의 심각한 문제가 발생할 수 있다. 따라서, 전송 측면에서 고려되어야 할 품질 요소는 전달 중 발생하는 패킷의 손실율이 가장 중요하다고 할 수 있다.
상기 전송 품질을 측정하기 위한 파라메터는 스트리밍 재생 중 수신된 패킷의 수, 스트리밍 재생 중 손실이 발생한 패킷의 수, 스트리밍 재생 중 복구된 패킷의 수, 및 스트리밍 전송 속도를 포함한다.
한편, 재생 품질은 멀티미디어 서비스 제공시 클라이언트(가입자 단말)에서 수행하는 버퍼링과 관련된다. 멀티미디어 서비스의 소스(멀티미디어 데이터)가 수십 메가(Mbps)에서 수백 기가(Giga) 단위의 용량을 가진 만큼 장시간 일정 수준의 품질을 유지하기 위해서는 버퍼링 기법이 반드시 필요하다. 그러나, 재생 중에 버 퍼링을 위하여 끊어지는 현상은 가입자 측면에서 보면 심각한 품질 저하가 아닐 수 없다.
일반적으로 끊김 현상이 발생하는 원인은 충분히 전송되지 못한 패킷들로 인해 언더 버퍼링이 발생한 것으로서, 영상 화면을 재생하기 위해 최소 단위로 필요한 패킷들이 버퍼에 있지 않을 때 발생한다. 이는 서버측의 문제이거나 네트워크 측면에서의 문제일 수 있다. 따라서, 적절한 패킷들은 버리는 오버 버퍼링을 이용함으로써 품질 저하를 최소화할 수 있다.
상기 재생 품질을 측정하기 위한 파라메터는 스트리밍 재생 중 재버퍼링이 일어난 횟수, 스트리밍 재생 중 재버퍼링이 발생한 총 소요 시간, 재버퍼링 시간 중 최대 재버퍼링 시간, 재버퍼링 시간 중 최소 재버퍼링 시간, 및 스트리밍 컨텐츠의 총 길이를 포함한다.
한편, 서버 및 클라이언트에서 수집한 성능 파라메터들의 값을 이용하여 재생 품질 점수, 전송 품질 점수, 및 접속 품질 점수를 추출할 수 있다. 먼저, 접속 품질 점수를 추출하는 점수표를 [표 2]에 나타내고 있다.
| 웹 서버 연결시간 + 미디어 서버 연결시간 + 최초 버퍼링 시간 (초, second) | 접속 품질 점수 |
| 1 ~ 4 | 100 |
| 4 ~ 5 | 90 |
| 5 ~ 6 | 80 |
| 6 ~ 8 | 70 |
| 8 ~ 10 | 60 |
| 10 ~ 13 | 50 |
| 13 ~ 16 | 40 |
| 16 ~ 20 | 30 |
| 20 ~ 25 | 20 |
| 25 ~ 30 | 10 |
| 30 ~ 40 | 0 |
| 40 이상 | 판정 불가 |
상기 [표 2]에 도시된 접속 품질 점수는 웹 서버 연결시간부터 실질적인 미디어 서버 연결시간과 미디어 서버에 연결된 후 최초 버퍼링 완료 때까지의 시간에 따라 점수를 부여할 수 있다. 상기의 일실시예에서는 일반적으로 잘 알려진 8초룰(Rule)에 따라 8초를 기준으로 접속 품질 점수를 배정하였다.
한편, 전송 품질 점수는 네트워크 상에서 발생하는 멀티미디어 패킷들의 오류에 대한 비율값이라고 할 수 있다. 일정 수준의 패킷 손실은 사용자가 인지하지 못 할 수도 있지만, 그 정도가 심한 패킷 손실은 사용자가 인지할 수 있는 정도의 화면 왜곡, 지터 등의 문제를 발생시키게 되므로 패킷 손실 값은 정확히 계산되어야 한다.
즉, 본 발명에서는 하기의 [수학식 1]과 같이, 전체 패킷 수에서 손실된 패킷 수가 차지하는 비율을 제외한 값으로 전송 품질 점수를 산출한다.
마지막으로, 재생 품질 점수는 컨텐츠 길이에 대한 재버퍼링 시간의 비율값 이라고 할 수 있다. 실제로, 사용자가 멀티미디어 스트림을 재생시키다가 재버퍼링이 발생하면 대부분 재생이 바로 중지되는 것이 일반적이다. 따라서, 멀티미디어 서비스의 품질 성능을 평가하기 위해서는 재버퍼링 횟수 보다는 재퍼버링 시간을 파라메터로 삼는 것이 현실적이다.
즉, 본 발명에서는 하기의 [수학식 2]와 같이, 전체 컨텐츠의 길이(시간 단위)에서 총 재버퍼링 시간이 차지하는 비율을 제외한 값으로 재생 품질 점수를 산출한다.
(단, 총 재버퍼링 시간 < 컨텐츠 길이)
한편, 이상에서와 같이 산출한 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수는 도 3에 도시된 바와 같이 일정한 가중치를 두어 전체적인 서비스 품질 점수(Stream QoS Score)를 계산해낸다. 즉, 멀티미디어 스트림 서비스의 접속부터 재생이 완료될 때까지의 성능을 평가할 때 접속 품질이 차지하는 비율(301), 전송 품질이 차지하는 비율(302) 그리고, 재생 품질이 차지하는 비율(303)을 각 품질점수에 곱하여 서비스 품질 점수(Stream QoS Score)를 계산한다.
도 4를 참조하여 본 발명의 전체적인 동작 과정에 대하여 좀 더 상세히 살펴보기로 한다.
도 4 는 본 발명에 따른 인터넷 멀티미디어 서비스 품질 평가 방법에 대한 일실시예 흐름도이다.
먼저, 클라이언트에서 서버로 인터넷 멀티미디어 서비스를 요청하면(401), 접속 과정, 전송 과정, 재생 과정에 따라 각각 정의된 인터넷 멀티미디어 서비스 품질을 측정하기 위한 성능 파라메터 값을 모니터링하여 수집한다(402).
그리고, 상기 수집한 성능 파라메터 값들을 이용하여 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수를 산출한다(403). 그리고, 각 품질 점수(접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수)에 기설정된 가중치를 적용한 후(곱한 후) 합산하여 최종적으로 서비스 품질 점수(Stream QoS Score)를 계산한다(404).
이후, 상기 계산한 서비스 품질 점수(Stream QoS Score)를 저장하여(405), 이후에 인터넷 멀티미디어 서비스 품질 평가에 사용되도록 제공한다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
상기와 같이 본 발명은, 인터넷 멀티미디어 서비스의 품질을 측정하고 평가하는데 있어서, 종래와 같이 접속에서 재생까지의 전과정을 일률적인 파라메터(예를 들어, 패킷손실율, 패킷지연율)로 평가하는 것이 아니라, 접속 과정, 전송 과정, 재생 과정에 따라 각기 다른 성능 파라메터 값을 모니터링하여 수집하고, 이를 통합적으로 합산하여 서비스 품질을 평가함으로써, 서버, 네트워크의 상태 및 애플리케이션의 종류를 모두 고려하여 보다 정확하게 인터넷 멀티미디어 서비스 품질을 평가할 수 있는 효과가 있다.
Claims (8)
- 인터넷 멀티미디어 서비스 품질 평가 방법에 있어서,클라이언트에서 서버로 인터넷 멀티미디어 서비스를 요청함에 따라 접속 과정, 전송 과정, 재생 과정에 따라 각각 미리 정의된 성능 파라메터 값을 모니터링하여 수집하는 파라메터 값 수집 단계;상기 수집한 성능 파라메터 값들을 이용하여 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수를 산출하는 과정별 품질 점수 산출 단계;상기 산출한 접속 품질 점수, 전송 품질 점수, 및 재생 품질 점수 각각에 대하여 기설정된 가중치를 적용한 후 합산하여, 서비스 품질 점수(Stream QoS Score)를 계산하는 서비스 품질 점수 계산 단계; 및상기 계산한 서비스 품질 점수(Stream QoS Score)를 저장하는 저장 단계를 포함하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 1 항에 있어서,상기 접속 과정에 대한 성능 파라메터는,상기 클라이언트의 최초 접속 시도부터 최초 버퍼링되는 시간까지의 품질을 측정하기 위한 파라메터인 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 2 항에 있어서,상기 접속 과정에 대한 성능 파라메터는,스트리밍 인덱스가 있는 웹 서버에 연결하는데 소요되는 시간을 측정하기 위한 웹 서버 연결시간;상기 웹 서버에서 실제 스트리밍 데이터가 있는 미디어 서버에 연결하는데 소요되는 시간을 측정하기 위한 미디어 서버 연결시간; 및상기 미디어 서버에 연결되어 최초 버퍼링되기까지 소요되는 시간을 측정하기 위한 최초 버퍼링 시간을 포함하는 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 1 항에 있어서,상기 전송 과정에 대한 성능 파라메터는,네트워크 상에서 발생하는 멀티미디어 패킷들의 오류를 측정하기 위한 파라메터인 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 4 항에 있어서,상기 전송 과정에 대한 성능 파라메터는,스트리밍 재생 중 수신된 패킷의 수;스트리밍 재생 중 손실이 발생한 패킷의 수;스트리밍 재생 중 복구된 패킷의 수; 및스트리밍 전송 속도를 포함하는 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 1 항에 있어서,상기 재생 과정에 대한 성능 파라메터는,클라이언트(가입자 단말)에서 스트리밍 재생 중 발생하는 재버퍼링과 관련된 지연시간을 측정하기 위한 파라메터인 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 6 항에 있어서,상기 재생 과정에 대한 성능 파라메터는,스트리밍 재생 중 재버퍼링이 일어난 횟수;스트리밍 재생 중 재버퍼링이 발생한 총 소요 시간;재버퍼링 시간 중 최대 재버퍼링 시간;재버퍼링 시간 중 최소 재버퍼링 시간; 및스트리밍 컨텐츠의 총 길이를 포함하는 것을 특징으로 하는 인터넷 멀티미디어 서비스 품질 평가 방법.
- 제 1 항 내지 제 7 항 중 어느 한 항에 있어서,상기 과정별 품질 점수 산출 단계는,상기 클라이언트의 최초 접속 시도부터 최초 버퍼링되는 시간까지의 총 소요 시간에 상응하는 접속 품질 점수를 기설정되어 있는 접속 품질 점수표로부터 검색하여 산출하는 접속 품질 점수 산출 단계;전체 패킷 수에서 손실된 패킷 수가 차지하는 비율을 제외한 값으로 전송 품질 점수를 산출하는 전송 품질 점수 산출 단계; 및전체 컨텐츠의 길이(시간 단위)에서 총 재버퍼링 시간이 차지하는 비율을 제외한 값으로 재생 품질 점수를 산출하는 재생 품질 점수 산출 단계를 포함하는 인터넷 멀티미디어 서비스 품질 평가 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040073568A KR100587972B1 (ko) | 2004-09-14 | 2004-09-14 | 인터넷 멀티미디어 서비스 품질 평가 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040073568A KR100587972B1 (ko) | 2004-09-14 | 2004-09-14 | 인터넷 멀티미디어 서비스 품질 평가 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20060024733A KR20060024733A (ko) | 2006-03-17 |
| KR100587972B1 true KR100587972B1 (ko) | 2006-06-08 |
Family
ID=37130502
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020040073568A KR100587972B1 (ko) | 2004-09-14 | 2004-09-14 | 인터넷 멀티미디어 서비스 품질 평가 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100587972B1 (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100992345B1 (ko) | 2005-12-28 | 2010-11-04 | 인터내셔널 비지네스 머신즈 코포레이션 | 서비스 평가 방법, 시스템 및 컴퓨터 판독가능한 기록매체 |
| KR101011344B1 (ko) | 2009-01-07 | 2011-01-28 | (주) 지니테크 | 전화 통화 서비스 망의 통화 품질 측정 및 안내 시스템 |
| KR101329864B1 (ko) | 2011-04-20 | 2013-11-14 | 주식회사 케이티 | Ｉｐｔｖ 서비스 품질 모니터링 방법 및 장치 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101225036B1 (ko) * | 2010-10-26 | 2013-01-23 | 한국전자통신연구원 | 하드웨어 기반 아이피 미디어 품질 측정 시스템 및 개방형 인터페이스 제공 방법 |
| CN103458264B (zh) * | 2012-05-28 | 2015-02-25 | 华为技术有限公司 | 一种媒体质量的评估方法及装置 |
| CN103024440B (zh) * | 2013-01-11 | 2014-12-31 | 德科仕通信(上海)有限公司 | 针对has的视频质量评价和故障诊断方法 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20020069892A (ko) * | 2001-02-28 | 2002-09-05 | 주식회사 인터넷과 꿈 | 인터넷 사이트의 평가정보 제공방법 |
-
2004
- 2004-09-14 KR KR1020040073568A patent/KR100587972B1/ko not_active IP Right Cessation
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20020069892A (ko) * | 2001-02-28 | 2002-09-05 | 주식회사 인터넷과 꿈 | 인터넷 사이트의 평가정보 제공방법 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100992345B1 (ko) | 2005-12-28 | 2010-11-04 | 인터내셔널 비지네스 머신즈 코포레이션 | 서비스 평가 방법, 시스템 및 컴퓨터 판독가능한 기록매체 |
| KR101011344B1 (ko) | 2009-01-07 | 2011-01-28 | (주) 지니테크 | 전화 통화 서비스 망의 통화 품질 측정 및 안내 시스템 |
| KR101329864B1 (ko) | 2011-04-20 | 2013-11-14 | 주식회사 케이티 | Ｉｐｔｖ 서비스 품질 모니터링 방법 및 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20060024733A (ko) | 2006-03-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10841358B2 (en) | System and method for determining quality of a media stream | |
| US10911344B1 (en) | Dynamic client logging and reporting | |
| US9398347B2 (en) | Systems and methods for measuring quality of experience for media streaming | |
| US7725576B2 (en) | Method and apparatus for measuring stream availability, quality and performance | |
| US9032427B2 (en) | System for monitoring a video network and methods for use therewith | |
| US20070271590A1 (en) | Method and system for detecting of errors within streaming audio/video data | |
| US20150222939A1 (en) | System for monitoring a video network and methods for use therewith | |
| CN116233084A (zh) | 自适应内容递送网络切换设备和方法 | |
| Schwind et al. | Dissecting the performance of YouTube video streaming in mobile networks | |
| WO2010054690A1 (en) | Method for estimating the 'quality of experience' of a user in respect of audio and/or video contents distributed through telecommunications networks | |
| US10757220B2 (en) | Estimating video quality of experience metrics from encrypted network traffic | |
| CN106993014A (zh) | 缓存内容的调整方法、装置及系统 | |
| Madanapalli et al. | Inferring netflix user experience from broadband network measurement | |
| KR100587972B1 (ko) | 인터넷 멀티미디어 서비스 품질 평가 방법 | |
| Szilágyi et al. | Network side lightweight and scalable YouTube QoE estimation | |
| CA2742038C (en) | Systems and methods for measuring quality of experience for media streaming | |
| Wehner et al. | Beauty is in the eye of the smartphone holder a data driven analysis of youtube mobile qoe | |
| JP3706077B2 (ja) | ストリーム配信方法，ストリーム配信装置，ストリーム品質管理装置，ストリーム配信用プログラムおよびストリーム品質管理用プログラム | |
| Venkataraman et al. | Towards a video QoE definition in converged networks | |
| JP2004048565A (ja) | ネットワーク品質推定制御方式 | |
| CN108495178A (zh) | 在线视频处理方法及系统 | |
| Karthikeyan et al. | Benchmarking video service quality: Quantifying the viewer impact of loss-related impairments | |
| JP2005102049A (ja) | ストリーミングコンテンツ配信管理システム | |
| Hohlfeld | Impact of buffering on quality of experience | |
| Jarwalli et al. | Evaluating Quality of Experience (QoE) for Live Radio Streaming Over IP Networks |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130527 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20140529 Year of fee payment: 9 |
|
| LAPS | Lapse due to unpaid annual fee |