KR101693567B1 - 스트리밍 미디어 세그먼트 준비 방법 및 장치 - Google Patents

스트리밍 미디어 세그먼트 준비 방법 및 장치 Download PDF

Info

Publication number
KR101693567B1
KR101693567B1 KR1020157022629A KR20157022629A KR101693567B1 KR 101693567 B1 KR101693567 B1 KR 101693567B1 KR 1020157022629 A KR1020157022629 A KR 1020157022629A KR 20157022629 A KR20157022629 A KR 20157022629A KR 101693567 B1 KR101693567 B1 KR 101693567B1
Authority
KR
South Korea
Prior art keywords
quality
point
segment
quality point
streaming media
Prior art date
Application number
KR1020157022629A
Other languages
English (en)
Other versions
KR20150110694A (ko
Inventor
페이윤 디
신 류
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20150110694A publication Critical patent/KR20150110694A/ko
Application granted granted Critical
Publication of KR101693567B1 publication Critical patent/KR101693567B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H04L65/4092—
    • H04L65/4084—
    • H04L65/602—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS

Abstract

본 발명의 실시예는 스트리밍 미디어 세그먼트 준비 방법 및 장치를 제공한다. 상기 방법은 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 개별적으로 나타내는 데 사용되는 적어도 하나의 품질 포인트를 결정하는 단계; 및 상기 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계를 포함한다. 본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.

Description

스트리밍 미디어 세그먼트 준비 방법 및 장치{STREAMING MEDIA SEGMENT PREPARATION METHOD AND APPARATUS}
본 발명의 실시예는 통신 분야에 관한 것이며, 특히 스트리밍 미디어 세그먼트 준비 방법 및 장치에 관한 것이다.
스트리밍 미디어 기술은 미디어 데이터 전송을 수행하는 하이퍼텍스트 트랜스포트 프로토콜(Hyper Text Transport Protocol: HTTP) 기술이다. 이 기술에 따라 스트리밍 미디어는 시청 중에도 다운로드가 가능하다.
단말의 다양성과 사용자가 액세스한 네트워크의 대역폭의 변동에 적응하기 위해, 스트리밍 미디어의 세그먼트를 준비할 때, 비트 레이트가 다른 복수의 비트 스트림이 서버 측에 준비된다. 또한, 각각의 비트는 시구간에 따라 복수의 세그먼트로 분할될 수 있고, 여기서 각각의 세그먼트는 독립적으로 플레이될 수 있다. 이 경우, 단말의 네트워크 상황이 변하면, 단말은 단말의 현재 네트워크 상황에 일치하는 세그먼트를 더 잘 플레이할 수 있도록 계속 전환할 수 있다.
그렇지만, 동일한 시구간에서, 상이한 비트 레이트에 대응하는 세그먼트 내에 품질이 유사한 세그먼트가 있을 수 있고, 이를 과잉 세그먼트라 한다. 과잉 세그먼트가 있음으로 해서 사용자 경험은 향상되지 않으면서 서버의 저장 용량을 많아진다.
본 발명의 실시예는 서버의 저장 용량을 감소하기 위해, 스트리밍 미디어 세그먼트 전파 방법 및 장치를 제공한다.
제1 관점에서, 스트리밍 미디어 세그먼트 준비 방법이 제공되며, 상기 방법은: 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 나타내는 데 개별적으로 사용되는 적어도 하나의 품질 포인트를 결정하는 단계; 및 상기 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계를 포함한다.
제1 관점을 참조해서, 제1 관점의 실시 방식에서, 상기 적어도 하나의 품질 포인트를 결정하는 단계는: 후보 품질 포인트로서 역할을 하는, 상기 제1 시구간 내의 스트리밍 미디어에 존재하는, 복수의 세그먼트의 품질을 획득하는 단계; 및 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계는: 상기 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 결정하는 단계; 및 상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계는: 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계는: 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하는 단계; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계를 포함하며, 여기서 i는 1 내지 M 범위의 양의 정수가다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 적어도 하나의 품질 포인트에 따라 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계는: 상기 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트로서 결정하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 적어도 하나의 품질 포인트를 결정하는 단계는: 제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하는 단계; 상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하는 단계; 및 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 단계는: 상기 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성된 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 반복 종료 조건은, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것을 더 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 적어도 하나의 품질 포인트에 따라 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계는: 상기 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하는 단계; 및 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 획득하기 위해, 상기 적어도 하나의 비트 레이트에 따라 개별적으로, 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하는 단계를 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 방법은: 모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하는 단계; 및 상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트를 설명하는 데 사용되는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하는 단계를 더 포함한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정한다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용된다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용된다.
제1 관점 및 제1 관점의 전술한 실시 방식을 참조해서, 제1 관점의 다른 실시 방식에서, 각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, 상기 MPD는 상기 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용한다.
제2 관점에서, 스트리밍 미디어 세그먼트 준비 장치가 제공되며, 상기 장치는: 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 나타내는 데 개별적으로 사용되는 적어도 하나의 품질 포인트를 결정하도록 구성되어 있는 제1 결정 유닛; 및 상기 제1 결정 유닛에 의해 결정된 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하도록 구성되어 있는 제2 결정 유닛을 포함한다.
제2 관점을 참조하여, 제2 관점의 실시 방식에서, 상기 제1 결정 유닛은 구체적으로, 후보 품질 포인트로서 역할을 하는, 상기 제1 시구간 내의 스트리밍 미디어에 존재하는 복수의 세그먼트의 품질을 획득하고, 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 제1 결정 유닛은 구체적으로 상기 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 결정하고, 상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제1 결정 유닛은 구체적으로 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제1 결정 유닛은 구체적으로, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하거나; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하거나; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하도록 구성되어 있으며, 여기서 i는 1 내지 M 범위의 양의 정수가다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제2 결정 유닛은 구체적으로 상기 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트로서 결정하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제1 결정 유닛은 구체적으로 제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하고, 상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하며, 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제1 결정 유닛은 구체적으로, 상기 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성되는 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 반복 종료 조건은, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것을 더 포함한다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 제2 결정 유닛은 구체적으로, 상기 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하고, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 획득하기 위해, 상기 적어도 하나의 비트 레이트에 따라 개별적으로 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하도록 구성되어 있다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 장치는: 모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하도록 구성되어 있는 제3 결정 유닛; 및 상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트를 설명하는 데 사용되는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하도록 구성되어 있는 생성 유닛을 더 포함한다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 생성 유닛에 의해 생성된 MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정한다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 생성 유닛에 의해 생성된 MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용된다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용된다.
제2 관점 및 제2 관점의 전술한 실시 방식을 참조하여, 제2 관점의 다른 실시 방식에서, 각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, 상기 생성 유닛에 의해 생성된 MPD는 상기 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
본 발명의 실시예의 기술적 솔루션을 더 명확하게 설명하기 위해, 이하에서는 본 발명의 실시예를 설명하는 데 필요한 첨부된 도면에 대해 간략하게 설명한다. 당연히, 이하의 실시예의 첨부된 도면은 본 발명의 일부의 실시예에 지나지 않으며, 당업자라면 창조적 노력 없이 첨부된 도면으로부터 다른 도면을 도출해낼 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 개략적인 흐름도이다.
도 2는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 개략적인 흐름도이다.
도 3은 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다.
도 4는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다.
도 7은 본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 장치이다.
이하에서는 본 발명의 실시예에 첨부된 도면을 참조하여 본 발명의 실시예의 기술적 솔루션에 대해 명확하고 완전하게 설명한다. 당연히, 설명된 실시예는 본 발명의 모든 실시예가 아닌 일부에 지나지 않는다. 당업자가 창조적 노력 없이 본 발명의 실시예에 기초하여 획득하는 모든 다른 실시예는 본 발명의 보호 범위 내에 있게 된다.
도 1은 본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 개략적인 흐름도이다. 도 1에서의 방법은 스트리밍 미디어가 위치하는 서버에 의해 실행될 수 있고, 전용 스트리밍 미디어 세그먼트 준비 유닛에 의해서도 실행될 수 있으며, 여기서 스트리밍 미디어 세그먼트 준비 유닛은 독립형 물리 장치일 수 있고 논리적 유닛일 수도 있다. 본 발명의 실시예에는 이에 제한되지 않는다.
110: 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 나타내는 데 개별적으로 사용되는 적어도 하나의 품질 포인트를 결정한다.
120: 상기 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
본 발명의 실시예에서, 스트리밍 미디어의 제1 시구간 내에서 생성된 복수의 목표 세그먼트는 동일한 스트리밍 미디어 콘텐츠를 가지며, 상이한 비트 레이트 또는 품질을 가진다. 다른 시구간 내의 세그먼트 준비 방식은 본 발명의 실시예에서 임의의 세그먼트 준비 방식을 사용할 수 있다. 복수의 시구간 내에서의 세그먼트 준비는 순서대로 실행될 수도 있고, 병렬로 실행될 수 있고, 임의의 미리 정해진 규칙에 따라 실행될 수 있으며, 본 발명의 실시예는 이에 제한되지 않는다.
단계 110에서의 품질의 특정한 형태는 본 발명의 실시예에서 제한되지 않으며, 그 품질은 비디오의 품질일 수도 있고, 오디오의 품질일 수도 있으며, 2가지의 조합일 수도 있다는 것에 주목해야 한다. 구체적으로, 품질은 피크 신호대잡음비(Peak Signal to Noise Ratio, PSNR), 평균 오피니언 스코어(Mean Opinion Score, MOS), 또는 구조적 유사성(Structural Similarity, SSIM)일 수 있으며, 다른 주관적 또는 객관적 품질 정보일 수도 있다.
단계 110에서의 제1 시구간은 전체 스트리밍 미디어에서의 임의의 시구간일 수 있다는 것에 주목해야 한다.
단계 110에서, 제1 시구간에 대응하는 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질이란 적어도 하나의 품질 포인트가 적어도 하나의 목표 세그먼트에 일대일 대응한다는 것을 말하며, 각각의 품질 포인트는 품질 포인트에 대응하는 목표 세그먼트 품질을 설명한다는 것에 주목해야 한다.
본 발명의 실시예에서, 품질 포인트는 품질에 일대일 대응하고, 품질의 양자화된 값으로서 고려될 수 있다는 것에 주목해야 한다.
단계 110에서 적어도 하나의 품질 포인트를 결정하는 특정한 방식은 본 발명의 실시예에서 제한되지 않는다는 것에 유의해야 한다.
구체적으로, 적어도 하나의 품질 포인트는 스트리밍 미디어 상의 사람의 시각적 및/또는 청각적 인지에 따라 결정될 수 있다. 이 방법에서 적어도 하나의 품질 포인트를 결정하는 단계는 사용자 경험이 유지된다는 전제하에 과잉 세그먼트의 생성을 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다. 예를 들어, 복수의 품질 구간이 스트리밍 미디어의 콘텐츠 및/또는 사람의 시각/청각 해상도에 따라 결정되며, 품질 포인트는 각각의 구간에서 선택되며, 품질 포인트에 대응하는 세그먼트는 단계 120에서 적어도 하나의 목표 세그먼트로서 역할을 하기 위해 획득된다.
선택적으로, 다른 실시예로서, 단계 110에서 적어도 하나의 품질 포인트를 결정하는 단계는: 후보 품질 포인트로서 역할을 하는, 제1 시구간 내의 스트리밍 미디어에 존재하는 복수의 세그먼트의 품질을 획득하는 단계; 및 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계를 포함한다. 구체적으로, 스트리밍 미디어의 복수의 세그먼트는 종래기술의 방법을 사용하여 생성되었었다. 이 경우, 본 발명의 실시예에 따르면, 기존의 세그먼트의 품질은 예를 들어 기존의 세그먼트에 실려 있는 세그먼트 품질 정보에 따라, 또는 미디어 디스크립션 정보 파일에 실려 있는 기존의 세그먼트의 품질 정보에 따라, 또는 인코더에 의해 직접적으로 출력되는 세그먼트의 품질 정보에 따라, 후보 품질 포인트로서 먼저 결정되며, 그런 다음, 단계 110에 설명된 적어도 하나의 품질 포인트가 후보 품질 포인트 중에서 선택된다.
단계 110에서 설명된 적어도 하나의 품질 포인트를 후보 품질 포인트 중에서 선택하는 특정한 방식은 본 발명의 실시예에서 제한되지 않으며, 예를 들어, 방식은 품질 구간을 설정하는 방식, 또는 품질 포인트를 설정하는 방식일 수 있다.
선택적으로, 일실시예로서, 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 포인트를 후보 품질 포인트 중에서 선택하는 단계는: 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 선택하는 단계; 및 상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하는 단계를 포함할 수 있다.
예를 들어, 기존의 세그먼트 준비 방법에 따르면, 스트리밍 미디어의 상이한 품질의 8개의 세그먼트가 기존의 세그먼트로서 역할을 하기 위해 소정의 시구간에서 생성되며, 품질은 개별적으로 1 내지 8이다. 먼저, 구간 [1,4)가 결정되고, 이 구간에 해당하는 품질은 개별적으로 1, 2, 및 3이며, 이로부터 품질이 1인 기존의 세그먼트가 목표 세그먼트 중 하나로서 선택되며; 그런 다음, 다음 구간, 예를 들어 [4,6)이 결정되고, 이 구간에 해당하는 품질은 개별적으로 4 및 5이며, 이로부터 품질이 4인 기존의 세그먼트가 목표 세그먼트 중 하나로서 선택되며; 마찬가지로, 구간 [6,9)가 추가로 결정되고, 이 구간에 해당하는 품질은 개별적으로 6, 7, 및 8이며, 이로부터 품질이 6인 기존의 세그먼트가 목표 세그먼트 중 하나로서 선택된다. 위의 과정에 따라, 단계 110에서 설명된 적어도 하나의 목표 세그먼트는 품질이 1, 4, 및 6인 기존의 세그먼트이다.
본 발명의 실시예에서, 구간은 사람의 시각/청각 해상도의 임계값에 따라 선택될 수 있다는 것에 유의해야 하며, 예를 들어, 품질의 범위가 1 내지 4인 스트리밍 미디어 콘텐츠를 사람이 구별하는 것은 어려우며, 이때 구간이 [1,4)에 설정될 수 있다.
구간에 해당하는 품질이 최대 거리의 규칙에 따라 선택될 수 있으며, 예를 들어, 제1 구간에 해당하는 품질의 최댓값은 제1 구간으로부터 선택되며, 다음 구간에 해당하는 품질의 최솟값 역시 다음 구간으로부터 선택되며, 따라서 목표 세그먼트의 품질 차이가 크게 되고 상이한 목표 세그먼트의 품질이 확실하게 향상된다는 것에도 주목해야 한다. 당연히, 본 발명의 실시예는 이에 제한되지 않는다. 구간에 해당하는 어떠한 품질 포인트라도 선택될 수 있다.
선택적으로, 다른 실시예로서, 후보 품질 포인트의 품질 분포에 따라 후보 품질 포인트 중에서 적어도 하나의 품질 포인트를 선택하는 단계는: 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계를 포함한다.
상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 특정한 방식은 본 발명의 실시예에 제한되지 않는다.
선택적으로, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계는: 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하는 단계; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계를 포함할 수 있으며, 여기서 i는 1 내지 M 범위의 양의 정수가다.
예를 들어, 기존의 세그먼트 준비 방법에 따르면, 품질이 개별적으로 3.1, 5.3, 10.3, 및 13.6인 기존의 세그먼트로서 역할을 하기 위해 스트리밍 미디어의 4개의 세그먼트가 생성되고, 2개의 품질 포인트는 4 및 11에 개별적으로 사전설정되며; 그런 다음, 사전설정된 품질 포인트 4에 대응하는 품질 포인트가 위의 4개의 기존의 세그먼트의 품질로부터 선택되며, 최소 절댓값 차이를 가지는 품질 포인트 3.1이 선택되며, 마찬가지로, 품질 포인트 10.3과 사전설정된 품질 포인트 11 간의 최소 절댓값을 가지는 품질 포인트 10.3이 선택되며, 최소 절댓값 차이를 가지는 품질 포인트 3.1이 선택되며, 위의 과정에 따라, 단계 110에서 설명된 적어도 하나의 목표 세그먼트는 품질이 3.1 및 10.3인 기존의 세그먼트이다.
본 발명의 실시예에서, 사전설정된 품질 포인트는 사람의 시각/청각 해상도의 임계값에 따라 선택될 수 있으며, 예를 들어, 사람은 품질이 4에 이르는 품질에 대한 최저 요건을 가지며, 범위가 4 내지 10인 스트리밍 미디어의 품질을 구별하기 어려우며, 따라서 다음의 사전설정된 품질 포인트로서 11이 선택될 수 있다.
전술한 바에서, 단계 110에서의 적어도 하나의 품질 포인트는 기존의 세그먼트에 기초하여 선택되며, 그런 다음, 선택적으로, 단계 120에서 적어도 하나의 품질 포인트에 따라 적어도 하나의 목표 세그먼트를 결정하는 단계는: 적어도 하나의 목표 세그먼트로서 역할을 하는, 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를 결정하는 단계를 포함한다. 즉, 단계 110에서의 적어도 하나의 품질 포인트는 기존의 세그먼트의 품질 포인트이고, 목표 세그먼트의 선택에 있어서, 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를 목표 세그먼트로서 사용하기만 하면 된다.
당연히, 단계 110에서의 적어도 하나의 품질 포인트를 결정하는 방식은: 제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하는 단계; 상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하는 단계; 및 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 단계를 더 포함할 수 있다.
제1 비트 레이트는 스트리밍 미디어의 최소 인코딩 비트 레이트, 스트리밍 미디어의 최대 인코딩 비트 레이트, 또는 비트 레이트 범위 내의 임의의 비트 레이트일 수 있고, 본 발명의 실시예는 이에 제한되지 않는다.
상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 특정한 방식은 본 발명의 실시예에 제한되지 않으며, 예를 들어: 상기 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성되는 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하는 단계를 포함한다. 반복 단계는 고정 단계 또는 가변 단계일 수 있으며, 반복 단계는 스트리밍 미디어 상의 사람의 시각/청각 해상도에 따라 결정될 수 있다.
예를 들어, 단계 110에서의 스트리밍 미디어는 최소 비트 레이트 R0로 인코딩되어 제1 세그먼트를 생성하고, 제1 세그먼트의 품질은 Q0=1로 결정되며; 다음의 반복 포인트 0.5는 Q0를 초기 반복 포인트로서 사용하고 0.5를 반복 단계로서 사용하여 획득되며; 품질이 0.5인 세그먼트의 비트 레이트가 결정되는 데, 예를 들어, R1은 식 R1=4*R0*2(Q0-Q1)/6에 따라 결정될 수 있으며; R1이 사전설정된 비트 레이트 범위를 초과하지 않으면, 반복은 R1이 사전설정된 최소 비트 범위를 초과할 때까지 계속 수행된다.
반복 단계는 고정일 수도 있고 가변일 수 있으며, 반복 단계는 스트리밍 미디어 품질에 대한 사람의 시각/청각 해상도에 기초하여 선택될 수 있다는 것에 주목하라. 구체적으로, 스트리밍 미디어 품질에 대한 사람의 시각/청각 해상도가 스트리밍 미디어의 품질에 따라 가변하면, 반복 단계는 가변이 되도록 설명될 수 있으며, 예를 들어, 품질이 1이면, 스트리밍 미디어 품질에 대한 사람의 시각/청각 해상도는 0.5이고, 품질이 1.5이면, 스트리밍 미디어 품질에 대한 사람의 시각/청각 해상도는 0.7이 되고, 0.7은 다음의 반복 단계로서 바람직하게 선택된다.
반복 종료 조건은 또한, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것일 수 있고, 최대 품질 범위의 선택은 사람이 구별하는 스트리밍 미디어의 시각 및 청각 품질의 범위에 따라 결정될 수 있으며, 예를 들어, 사람이 구별할 수 있는 최소 품질 및 최대 품질은 각각 1 및 10이고, 이 경우, 최대 품질 범위는 1-10에 설정될 수 있다.
당연히, 반복 종료 조건은 또한 사전설정된 비트 레이트 범위와 최대 품질 범위의 조합일 수도 있으며, 즉 새로운 품질 포인트는 반복이 수행될 때마다 생성된다. 새로운 품질 포인트는 사전설정된 비트 레이트 범위를 충족할 뿐만 아니라, 사전설정된 최대 품질 범위를 충족한다.
적어도 하나의 품질 포인트가 초기 품질 포인트에 따라 결정된 후, 적어도 하나의 품질 포인트에 따라 적어도 하나의 목표 세그먼트를 결정하는 단계는: 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하는 단계; 및 적어도 하나의 목표 세그먼트를 획득하기 위해, 적어도 하나의 비트 레이트에 따라 개별적으로 제1 시구간 내에 스트리밍 미디어를 인코딩하는 단계를 포함할 수 있다.
구체적으로, 식 Ri=4*Rj*2( Qj - Qi )/6이 사용될 수 있으며, Rj 및 Qj는 각각 공지의 세그먼트의 비트 레이트 및 품질이다.
선택적으로, 일실시예로서, 상기 방법은: 모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하는 단계; 및 상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트의 세그먼트 정보를 포함하는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하는 단계를 더 포함한다.
선택적으로, 다른 실시예로서, MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호(serial number)를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정한다.
번호를 부여하는 특정한 방식은 본 발명의 실시예에서 제한되지 않으며, 예를 들어, 번호 부여는 전체 스트리밍 미디어 내의 목표 세그먼트의 재생 시간에 따라 수행될 수 있으며, 예를 들어, 제1 목표 세그먼트는 0 내지 10분으로 번호가 부여될 수 있으며, 번호 부여는 또한 목표 세그먼트의 시구간에 따라 수행될 수도 있으며, 예를 들어, 제3 목표 세그먼트는 3으로 번호가 부여되며, 당연히, 번호 부여는 다른 형태로 세그먼트 ID에 따라 수행될 수도 있다.
시구간에 의한 불연속 번호 부여란 구체적으로, 예를 들어 시구간에 의한 번호 부여를 사용하는 것을 말할 수 있으며, 제1 시구간에 목표 세그먼트가 존재하면, 일련번호는 1이고, 제2 시구간에 목표 일련번호가 존재하지 않으면, 일련번호 2는 생략되고, 제3 시구간에 목표 일련번호가 존재하면, 일련번호는 3이고, 나머지는 동일한 방식으로 처리될 수 있고, 1, 3...이 MPD에 기록된다. 수신단이 MPD 파일을 분석할 때, 1과 3 사이의 일련번호 2의 존재에 따라 시구간 2에 목표 세그먼트가 존재하지 않는다는 것이 공지될 수 있다.
선택적으로, 다른 실시예로서, MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용된다.
선택적으로, 다른 실시예로서, 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용된다.
예를 들어, MPD 내의 소정의 레프리젠테이션에 대응하는 지시 정보가 1이면, 레프리젠테이션의 소정의 시구간에 목표 세그먼트가 존재하지 않는다는 것을 나타내고, 지시 정보가 2이면, 레프리젠테이션의 모든 시구간에 목표 세그먼트가 존재한다는 것을 나타낸다.
당연히, MPD는 또한 구체적으로 각각의 레프리제테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타낼 수 있으며, 예를 들어, 제1 레프리젠테이션에 대응하는 지시 정보는 1, 4, 및 5이며, 제1 시구간, 제4 시구간, 및 제5 시구간에 목표 세그먼트가 존재하지 않는다는 것을 나타낸다.
선택적으로, 다른 실시예로서, 각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, MPD는 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용한다.
예를 들어, MPD에서, 제1 레프리젠테이션이 (1,1), (1,2), 및 (2,3)이고, 여기서 괄호 안의 첫째 항목은 레프리젠테이션의 ID를 나타내고, 둘째 항목은 시구간의 ID를 나타내며; 그러므로 제1 레프리젠테이션의 첫 번째 2개의 시구간에 목표 세그먼트가 존재하고, 제3 시구간 (2,3)에는 목표 세그먼트가 존재하지 않으며, 제3 시구간은 제2 레프리젠테이션에서의 시구간 3으로 대체된다.
구체적으로, 기존의 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)는 여전히 사용될 수 있다. 클라이언트가 요구한 세그먼트(segment)가 존재하지 않는다는 것을 서버가 검출하면, 서버는 다른 비트 스트림의 대응하는 세그먼트(또는 레프리젠테이션(representation))를 클라이언트에 송신하거나; 또는 새로운 MPD가 생성되고, 비트 스트림에 존재하지 않는 세그먼트가 MPD에서 확인되지 않으며, 클라이언트는 식별로 세그먼트를 분석할 때, 클라이언트는 다른 비트 스트림의 대응하는 세그먼트로 전환할 수 있거나; 또는 MPD는 비트 스트림에 존재하지 않는 세그먼트가 다른 비트 스트림 내의 세그먼트로 대체하며, 클라이언트가 존재하지 않는 세그먼트를 분석할 때, 클라이언트는 다른 비트 스트림의 세그먼트로 전환하거나; 또는 MPD 내의 비트 스트림의 세그먼트 ID(segment ID)는 불연속이며, 클라이언트가 불연속 ID를 검출할 때, 클라이언트는 불연속 위치에서 다른 비트 스트림의 대응하는 세그먼트로 전환한다.
클라이언트가 스트리밍 미디어 데이터를 서버에 요구하는데, 특정한 프로세스는 다음과 같을 수 있다: 먼저 MPD를 획득하고; 그런 다음 MPD를 분석하고, MPD에서 설명된 복수의 레프리젠테이션 중에서 하나의 레프리젠테이션을 선택하며; 그리고 레프리젠테이션이 소정의 시구간에서 세그먼트 정보를 가지지 않으면, 시구간 내의 다른 레프리젠테이션의 대응하는 세그먼트를 대신 사용하며, 대응하는 세그먼트를 요구하는 요구 메시지를 서버에 송신한다.
서버에 요구 메시지를 송신하는 단계는 세그먼트 정보가 존재하지 않는 시구간이 재생 프로세스에서 분석될 때마다 서버에 요구 메시지를 송신하는 단계일 수 있으며; 재생 전에 레프리젠테이션에서, 세그먼트 정보가 존재하지 않는 모든 시구간을 결정하고, 대응하는 시구간에서 다른 레프리젠테이션의 대체 가능한 세그먼트를 결정하며, 그런 다음 상이한 시구간에서 요구될 세그먼트를 결정하며, 세그먼트에 요구하는 요구 메시지를 서버에 송신하는 단계일 수도 있다는 것에 유의해야 한다.
이에 대응해서, 서버단에서, 특정한 프로세스는 다음과 같을 수 있다:
클라이언트의 세그먼트 요구를 수신하고; 요구된 세그먼트를 검색하며, 여기서 요구된 세그먼트가 존재하지 않을 때, 다른 레프리젠테이션 내에서, 그 요구된 세그먼트와 동일한 시구간 내에 있는 세그먼트가 송신될 수 있다.
본 발명의 실시에는 특정한 예를 참조하여 이하에 더 상세히 설명한다. 도 2 내지 도 6에서의 예는, 본 발명의 실시예를 예시적 특정한 번호 또는 특정한 시나리오에 제한하는 대신, 단지 당업자가 본 발명의 실시예를 이해하는 데 일조하는 데 사용된다는 것에 유의해야 한다. 당연히, 당업자는 도 2 내지 도 6에 제공된 예에 따라 다양한 등가의 변형 또는 수정을 수행할 수 있으며, 이러한 변형 또는 수정도 본 발명의 실시예의 범위 내에 해당된다.
도 2는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 개략적인 흐름도이다. 도 2의 방법에서, 시구간 t에 대응하는 스트리밍 데이터는 기존의 방법에 따라 분할될 수 있다(시간 주시 t는 무작위 시구간이다). 방법에서, 기존의 세그먼트의 품질이 기존의 세그먼트에 기초하여 먼저 결정되고, 그런 다음 품질 구간이 기존의 세그먼트의 품질에 따라 최저 품질로부터 연속적으로 결정되며, 조건을 충족하는 기존의 세그먼트가 목표 세그먼트로서 역할을 하기 위해 품질 구간에 따라 선택된다(각각의 구간에서 하나의 품질 포인트가 최대로 선택된다).
210: 시구간 t에서 기존의 세그먼트의 품질을 획득한다.
품질은 PSNR, MOS, SSIM, 또는 다른 주관적 및 객관적 품질 정보일 수 있다.
선택적으로, 품질 범위는 미리 설정될 수 있으며, 품질 범위 밖의 세그먼트가 먼저 배제된다. 품질 범위는 스트리밍 미디어 상의 사람의 시각/청각 해상도의 범위에 따라 선택될 수 있다.
220: 세그먼트 Fi의 품질 Qi를 획득하고, Qi만을 구간 [Qi,Qi+Ti)에서 유지한다.
최저 품질의 세그먼트로부터 시작된다. 품질 임계값 Ti는 고정값일 수 있고 또한 i에 따라 가변할 수 있으며; Ti는 스트리밍 미디어의 시각 및 청각 품질에 대한 사람의 해상도에 따라 선택될 수 있다.
230: 품질이 Qi+Ti보다 높거나 또는 높거나 같은 기존의 세그먼트로부터 최저 품질의 세그먼트 Fi+1을 선택한다.
i의 값은 0에서부터 시작하고, 연속적으로 1씩 부가된다.
240: 품질이 Qi+Ti보다 높거나 또는 높거나 같은 기존의 세그먼트가 없을 때까지 단계 220 및 230을 반복한다.
250: 전술한 과정에서 획득된 세그먼트 Fi를 목표 세그먼트로서 사용한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
도 3은 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다. 도 3의 방법에서, 시구간 t에 대응하는 스트리밍 미디어는 기존의 방법에 따라 분할되었었다(시간 주시 t는 무작위 시구간이다). 방법에서, 기존의 세그먼트의 품질은 기존의 세그먼트에 기초하여 먼저 결정되고, 그런 다음 품질 구간이 기존의 세그먼트의 품질에 따라 최고 품질로부터 연속적으로 결정되며, 조건을 충족하는 기존의 세그먼트가 목표 세그먼트로서 역할을 하기 위해 품질 구간에 따라 선택된다(각각의 구간에서 하나의 품질 포인트가 최대로 선택된다). 특정한 프로세스는 다음과 같다:
310: 시구간 t에서 기존의 세그먼트의 품질을 획득한다.
품질은 PSNR, MOS, SSIM, 또는 다른 주관적 및 객관적 품질 정보일 수 있다.
320: 세그먼트 Fi의 품질 Qi를 획득하고, Qi만을 구간 (Qi-Ti,Qi]에서 유지한다.
최고 품질의 세그먼트로부터 시작된다.
330: 품질이 Qi-Ti보다 낮거나 또는 낮거나 같은 기존의 세그먼트로부터 최고 품질의 세그먼트 Fi+1을 선택한다.
i의 값은 0에서부터 시작하고, 연속적으로 1씩 부가된다. 품질 임계값 Ti는 고정값일 수 있고, 또한 i에 따라 가변할 수 있으며; Ti는 스트리밍 미디어의 시각 및 청각 품질에 대한 사람의 해상도에 따라 선택될 수 있다.
340: 품질이 Qi-Ti보다 낮거나 또는 낮거나 같은 기존의 세그먼트가 없을 때까지 단계 320 및 330을 반복한다.
350: 전술한 과정에서 획득된 세그먼트 Fi를 목표 세그먼트로서 사용한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
도 4는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다. 도 4의 방법에서, 시구간 t에 대응하는 스트리밍 미디어는 기존의 방법에 따라 분할되었었다(시간 주시 t는 무작위 시구간이다). 먼저, 한 그룹의 품질 포인트가 사전설정되고, 그런 다음 사전설정된 품질 포인트에 가장 근접한 품질 포인트에 대응하는 세그먼트가 목표 세그먼트로서 역할을 하기 위해 기존의 세그먼트의 품질로부터 선택된다.
410: 한 그룹의 품질 포인트 {Q0, Q1, ..., Qn}를 사전설정한다.
420: 모든 기존의 세그먼트의 품질을 획득한다.
430: 기존의 세그먼트의 품질 중에서, 품질 포인트 Qi에 가장 근접한 품질 포인트를 선택한다.
i의 값의 범위는 0 내지 n이다.
선택적으로, 단계 430에서, 품질이 Qi보다 낮거나 Qi에 가장 근접한 품질 포인트, 또는 품질이 Qi보다 높거나 Qi에 가장 근접한 품질 포인트가 추가로 선택될 수 있다.
440: 단계 430에서 선택된 품질 포인트에 대응하는 기존의 세그먼트를 목표 세그먼트로서 사용한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
도 5는 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다. 도 5의 방법에서, 시구간 t에 대응하는 스트리밍 미디어가 분할되지 않는다(시간 주시 t는 무작위 시구간이다). 방법에서, 스트리밍 미디어를 인코딩하기 위한 최저 비트 레이트 R0에 따라 스트리밍 미디어를 먼저 인코딩하여 세그먼트 F0를 획득하며; F0의 품질 Q0가 결정되며; 비트 레이트 조건을 충족하는 복수의 품질 인자는 Q0를 초기 반복 포인트로서 사용하고 고정 또는 가변의 반복 단계를 사용함으로써 반복에 의해 획득되며; 마지막으로, 반복에 의해 획득된 품질 포인트에 대응하는 세그먼트가 결정된다.
510. 시구간 t에 대응하는 스트리밍 미디어를 획득한다.
520. 최저 비트 레이트 R0에 따라 스트리밍 미디어를 인코딩하여, 세그먼트 F0를 획득한다.
530: 세그먼트 F0의 품질 Q0를 결정한다.
540: 다음 세그먼트 Qi=Qi-1+Ti-1을 결정한다.
i의 값은 1부터 시작한다. 선택적으로, Qi가 사전설정된 최대 품질 범위를 초과할 때, 단계 570으로 건너뛴다.
550: 비트 레이트 및 품질 공식 Ri=f(Qi,S)에 따라 Qi에 대응하는 비트 레이트 Ri를 결정한다.
선택적으로, 식 Ri=Rj*2( Qi - Qj )/ 6 을 사용하여 Ri를 결정한다.
560: Ri가 사전설정된 비트 레이트 범위를 초과할 때까지 단계 540 및 550을 반복한다.
570: Ri에 따라, 전술한 단계에서 결정된 Qi를 인코딩하여 세그먼트 Fi를 획득한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
도 6은 본 발명의 다른 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대한 흐름도이다. 도 6의 방법에서, 시구간 t에 대응하는 스트리밍 미디어가 분할되지 않는다(시간 주시 t는 무작위 시구간이다). 방법에서, 스트리밍 미디어를 인코딩하기 위한 최고 비트 레이트 R0에 따라 스트리밍 미디어를 먼저 인코딩하여 세그먼트 F0를 획득하며; F0의 품질 Q0가 결정되며; 비트 레이트 조건을 충족하는 복수의 품질 인자는 Q0를 초기 반복 포인트로서 사용하고 고정 또는 가변의 반복 단계를 사용함으로써 반복에 의해 획득되며; 마지막으로, 반복에 의해 획득된 품질 포인트에 대응하는 세그먼트가 결정된다.
610. 시구간 t에 대응하는 스트리밍 미디어를 획득한다.
620. 최고 비트 레이트 R0에 따라 스트리밍 미디어를 인코딩하여, 세그먼트 F0를 획득한다.
630: 세그먼트 F0의 품질 Q0를 결정한다.
640: 다음 세그먼트 Qi=Qi-1-Ti-1을 결정한다.
i의 값은 1부터 시작한다. 선택적으로, Qi가 사전설정된 최대 품질 범위를 초과할 때, 단계 670으로 건너뛴다.
650: 비트 레이트 및 품질 공식 Ri=f(Qi,S)에 따라 Qi에 대응하는 비트 레이트 Ri를 결정한다.
선택적으로, 식 Ri=Rj*2( Qi - Qj )/ 6 을 사용하여 Ri를 결정한다.
660: Ri가 사전설정된 비트 레이트 범위를 초과할 때까지 단계 640 및 650을 반복한다.
670: Ri에 따라, 전술한 단계에서 결정된 Qi를 인코딩하여 세그먼트 Fi를 획득한다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 방법에 대해 도 1 내지 도 6을 참조하여 위에서 상세히 설명하였으며; 본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 장치에 대해 도 7을 참조하여 이하에 상세히 설명한다.
도 7은 본 발명의 실시예에 따른 스트리밍 미디어 세그먼트 준비 장치이다. 도 7의 장치는 제1 결정 유닛(710) 및 제2 결정 유닛(720)을 포함한다.
도 7의 장치는 도 1 내지 도 6에서의 단계를 실행할 수 있고, 이에 대해서는 설명을 간략하게 하기 위해 여기서 반복 설명하지 않는다.
제1 결정 유닛(710)은 제1 시구간에 대응하는 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 나타내는 데 개별적으로 사용되는 적어도 하나의 품질 포인트를 결정하도록 구성되어 있다.
제2 결정 유닛(720)은 상기 제1 결정 유닛(710)에 의해 결정된 적어도 하나의 품질 포인트에 따라 적어도 하나의 목표 세그먼트를 결정하도록 구성되어 있다.
본 발명의 실시예에서는, 스트리밍 미디어 세그먼트의 품질 인자를 고려함으로써 스트리밍 미디어 세그먼트를 준비하므로, 스트리밍 미디어 세그먼트를 준비하는 동안 비트 레이트에 따라 과잉 세그먼트가 생기는 문제를 회피할 수 있으며, 이에 의해 서버의 저장 용량을 감소할 수 있다.
선택적으로, 실시예로서, 제1 결정 유닛(710)은 구체적으로, 후보 품질 포인트로서 역할을 하는, 스트리밍 미디어에 존재하는 복수의 세그먼트의 품질을 획득하고, 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 제1 결정 유닛은 구체적으로 상기 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 결정하고, 상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 제1 결정 유닛(710)은 구체적으로 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 제1 결정 유닛(710)은 구체적으로, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하거나; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하거나; 또는 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하도록 구성되어 있으며, 여기서 i는 1 내지 M 범위의 양의 정수가다.
선택적으로, 다른 실시예로서, 제2 결정 유닛(720)은 구체적으로, 상기 적어도 하나의 목표 세그먼트로서 역할을 하는, 상기 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를 결정하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 제1 결정 유닛(710)은 구체적으로 제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하고, 상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하며, 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 제1 결정 유닛(710)은 구체적으로, 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성되는 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 상기 반복 종료 조건은, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것을 더 포함한다.
선택적으로, 다른 실시예로서, 제2 결정 유닛(720)은 구체적으로, 상기 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하고, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 획득하기 위해, 상기 적어도 하나의 비트 레이트에 따라 개별적으로 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하도록 구성되어 있다.
선택적으로, 다른 실시예로서, 상기 장치는: 모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하도록 구성되어 있는 제3 결정 유닛; 및 상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트를 설명하는 데 사용되는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하도록 구성되어 있는 생성 유닛을 더 포함한다.
선택적으로, 다른 실시예로서, 상기 생성 유닛에 의해 생성된 MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정한다.
선택적으로, 다른 실시예로서, 상기 생성 유닛에 의해 생성된 MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용된다.
선택적으로, 다른 실시예로서, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용된다.
선택적으로, 다른 실시예로서, 각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, 상기 생성 유닛에 의해 생성된 MPD는 상기 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용한다.
당업자라면 본 명세서에 개시된 실시예를 참조하여 설명된 예시적인 유닛 및 산출적 단계들은 전자식 하드웨어를 통해, 또는 컴퓨터 소프트웨어와 전자식 하드웨어의 조합을 통해 실현될 수 있다는 것을 인지할 수 있을 것이다. 이러한 기능들이 하드웨어로 실현되는지 소프트웨어로 실현되는지는 특별한 애플리케이션 및 기술적 솔루션의 설계 제약 조건에 따라 다르다. 당업자라면 다른 방법을 사용하여 각각의 특별한 실시예에 대해 설명된 기능을 실행할 수 있을 것이나, 그 실행이 본 발명의 범위를 넘어서는 것으로 파악되어서는 안 된다.
당업자라면 설명의 편의 및 간략화를 위해, 전술한 시스템, 장치, 및 유닛에 대한 상세한 작업 프로세스는 전술한 방법 실시예의 대응하는 프로세스를 참조하면 된다는 것을 자명하게 이해할 수 있을 것이므로 그 상세한 설명은 여기서 다시 설명하지 않는다.
본 출원에서 제공하는 수 개의 실시예에서, 전술한 시스템, 장치, 및 방법은 다른 방식으로도 실현될 수 있다는 것은 물론이다. 예를 들어, 설명된 장치 실시예는 단지 예시에 불과하다. 예를 들어, 유닛의 분할은 단지 일종의 논리적 기능 분할일 뿐이며, 실제의 실행 동안 다른 분할 방식으로 있을 수 있다. 예를 들어, 복수의 유닛 또는 구성요소를 다른 시스템에 결합 또는 통합할 수 있거나, 또는 일부의 특징은 무시하거나 수행하지 않을 수도 있다. 또한, 도시되거나 논의된 상호 커플링 또는 직접 결합 또는 통신 접속은 일부의 인터페이스를 통해 실현될 수 있다. 장치 또는 유닛 간의 직접 결합 또는 통신 접속은 전자식, 기계식 또는 다른 형태로 실현될 수 있다.
별도의 부분으로 설명된 유닛들은 물리적으로 별개일 수 있고 아닐 수도 있으며, 유닛으로 도시된 부분은 물리적 유닛일 수도 있고 아닐 수도 있으며, 한 위치에 위치할 수도 있고, 복수의 네트워크 유닛에 분산될 수도 있다. 유닛 중 일부 또는 전부는 실제의 필요에 따라 선택되어 실시예의 솔루션의 목적을 달성할 수 있다.
또한, 본 발명의 실시예에서의 기능 유닛은 하나의 프로세싱 유닛으로 통합될 수 있거나, 각각의 유닛이 물리적으로 단독으로 존재할 수도 있거나, 2개 이상의 유닛이 하나의 유닛으로 통합될 수도 있다.
통합 유닛이 소프트웨어 기능 유닛의 형태로 실현되어 독립 제품으로 시판되거나 사용되면, 이 통합 유닛은 컴퓨터 판독 가능형 저장 매체에 저장될 수 있다. 이러한 이해를 바탕으로, 본 발명의 필수적 기술적 솔루션 또는, 또는 종래기술에 기여하는 부분, 또는 기술적 솔루션의 일부는 소프트웨어 제품의 형태로 실현될 수 있다. 컴퓨터 소프트웨어 제품은 저장 매체에 저장되고, 본 발명의 실시예에 설명된 방법의 단계 중 일부 또는 전부를 수행하도록 컴퓨터 장치(이것은 퍼스널 컴퓨터, 서버, 또는 네트워크 장치 등이 될 수 있다)에 명령하는 수개의 명령어를 포함한다. 전술한 저장 매체는: 프로그램 코드를 저장할 수 있는 임의의 저장 매체, 예를 들어, USB 플래시 드라이브, 휴대형 하드디스크, 리드-온리 메모리(ROM), 랜덤 액세스 메모리(RAM), 자기디스크 또는 광디스크를 포함한다.
전술한 설명은 단지 본 발명의 특정한 실행 방식에 불과하며, 본 발명의 보호 범위를 제한하려는 것이 아니다. 본 발명에 설명된 기술적 범위 내에서 당업자가 용이하게 실현하는 모든 변형 또는 대체는 본 발명의 보호 범위 내에 있게 된다. 그러므로 본 발명의 보호 범위는 특허청구범위의 보호 범위에 있게 된다.

Claims (30)

  1. 스트리밍 미디어 세그먼트 준비 방법으로서,
    적어도 하나의 품질 포인트를 결정하는 단계 - 상기 적어도 하나의 품질 포인트 각각은 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 개별적으로 나타내는 데 사용되고, 품질 포인트는 주관적 또는 객관적 품질 정보를 포함하고, 상기 적어도 하나의 품질 포인트는 상기 적어도 하나의 목표 세그먼트에 일대일 대응하며, 각각의 품질 포인트는 품질 포인트에 대응하는 목표 세그먼트의 품질을 설명함 - ; 및
    상기 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계
    를 포함하는 스트리밍 미디어 세그먼트 준비 방법.
  2. 제1항에 있어서,
    상기 적어도 하나의 품질 포인트를 결정하는 단계는,
    후보 품질 포인트로서 역할을 하는, 상기 제1 시구간 내의 스트리밍 미디어에 존재하는, 복수의 세그먼트의 품질을 획득하는 단계; 및
    상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  3. 제2항에 있어서,
    상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계는,
    상기 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 결정하는 단계; 및
    상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  4. 제2항에 있어서,
    상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하는 단계는,
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  5. 제4항에 있어서,
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하는 단계는,
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하는 단계; 또는
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계; 또는
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하는 단계
    를 포함하며,
    여기서 i는 1 내지 M 범위의 양의 정수인, 스트리밍 미디어 세그먼트 준비 방법.
  6. 제2항에 있어서,
    상기 적어도 하나의 품질 포인트에 따라 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계는,
    상기 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트로서 결정하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  7. 제1항에 있어서,
    상기 적어도 하나의 품질 포인트를 결정하는 단계는,
    제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하는 단계;
    상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하는 단계; 및
    상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  8. 제7항에 있어서,
    상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하는 단계는,
    상기 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성되는 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  9. 제8항에 있어서,
    상기 반복 종료 조건은, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것을 더 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  10. 제7항에 있어서,
    상기 적어도 하나의 품질 포인트에 따라 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하는 단계는,
    상기 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하는 단계; 및
    상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 획득하기 위해, 상기 적어도 하나의 비트 레이트에 따라 개별적으로, 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하는 단계
    를 포함하는, 스트리밍 미디어 세그먼트 준비 방법.
  11. 제1항에 있어서,
    모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하는 단계; 및
    상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트를 설명하는 데 사용되는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하는 단계
    를 더 포함하는 스트리밍 미디어 세그먼트 준비 방법.
  12. 제11항에 있어서,
    상기 MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호(serial number)를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정하는, 스트리밍 미디어 세그먼트 준비 방법.
  13. 제11항에 있어서,
    상기 MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용되는, 스트리밍 미디어 세그먼트 준비 방법.
  14. 제13항에 있어서,
    상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용되는, 스트리밍 미디어 세그먼트 준비 방법.
  15. 제11항에 있어서,
    각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, 상기 MPD는 상기 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용하는, 스트리밍 미디어 세그먼트 준비 방법.
  16. 스트리밍 미디어 세그먼트 준비 장치로서,
    적어도 하나의 품질 포인트를 결정하도록 구성되어 있는 제1 결정 유닛 - 상기 적어도 하나의 품질 포인트 각각은 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트의 품질을 개별적으로 나타내는 데 사용되고, 품질 포인트는 주관적 또는 객관적 품질 정보를 포함하고, 상기 적어도 하나의 품질 포인트는 상기 적어도 하나의 목표 세그먼트에 일대일 대응하며, 각각의 품질 포인트는 품질 포인트에 대응하는 목표 세그먼트의 품질을 설명함 - ; 및
    상기 제1 결정 유닛에 의해 결정된 적어도 하나의 품질 포인트에 따라 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 결정하도록 구성되어 있는 제2 결정 유닛
    을 포함하는 스트리밍 미디어 세그먼트 준비 장치.
  17. 제16항에 있어서,
    상기 제1 결정 유닛은 구체적으로, 후보 품질 포인트로서 역할을 하는, 상기 제1 시구간 내의 스트리밍 미디어에 존재하는, 복수의 세그먼트의 품질을 획득하고, 상기 후보 품질 포인트의 품질 분포에 따라 상기 후보 품질 포인트 중에서 상기 적어도 하나의 품질 포인트를 선택하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  18. 제17항에 있어서,
    상기 제1 결정 유닛은 구체적으로 상기 후보 품질 포인트의 품질 분포에 따라 적어도 하나의 품질 구간을 결정하고, 상기 적어도 하나의 품질 포인트가 상기 적어도 하나의 품질 구간의 상이한 구간에 개별적으로 해당할 수 있도록, 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 적어도 하나의 품질 구간에 대응하는 후보 품질 포인트를 선택하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  19. 제17항에 있어서,
    상기 제1 결정 유닛은 구체적으로 상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 사전구성된 M개의 품질 구간에 대응하는 품질 포인트를 선택하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  20. 제19항에 있어서,
    상기 제1 결정 유닛은 구체적으로,
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 품질 포인트와 상기 M개의 품질 포인트 중 i번째 품질 포인트 간의 품질 차이의 최소 절댓값을 가지는 품질 포인트를 선택하거나; 또는
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 낮되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하거나; 또는
    상기 후보 품질 포인트 중에서, 상기 적어도 하나의 품질 포인트로서 역할을 하는, 상기 M개의 품질 포인트 중 i번째 품질 포인트의 품질보다 품질이 높되 상기 i번째 품질 포인트의 품질에 가장 근접하는 품질 포인트를 선택하도록 구성되어 있으며,
    여기서 i는 1 내지 M 범위의 양의 정수인, 스트리밍 미디어 세그먼트 준비 장치.
  21. 제17항에 있어서,
    상기 제2 결정 유닛은 구체적으로 상기 적어도 하나의 품질 포인트에 대응하는 기존의 세그먼트를, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트로서 결정하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  22. 제16항에 있어서,
    상기 제1 결정 유닛은 구체적으로 제1 세그먼트를 획득하기 위해 제1 비트 레이트에 따라 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하고, 상기 제1 세그먼트의 품질을 초기 품질 포인트로서 결정하며, 상기 초기 품질 포인트에 기초하여 상기 적어도 하나의 품질 포인트를 결정하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  23. 제22항에 있어서,
    상기 제1 결정 유닛은 구체적으로, 상기 초기 품질 포인트를 초기 반복 포인트로서 사용하고, 적어도 하나의 품질 임계값을 반복 단계로서 사용하며, 반복에 의해 생성되는 품질 포인트에 대응하는 비트 레이트가 상기 스트리밍 미디어의 사전설정된 비트 레이트 범위를 초과하는 반복 종료 조건을 사용함으로써, 반복에 의해, 상기 적어도 하나의 품질 포인트를 생성하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  24. 제23항에 있어서,
    상기 반복 종료 조건은, 반복에 의해 생성된 품질 포인트가 사전설정된 품질 범위를 초과하는 것을 더 포함하는, 스트리밍 미디어 세그먼트 준비 장치.
  25. 제22항에 있어서,
    상기 제2 결정 유닛은 구체적으로, 상기 적어도 하나의 품질 포인트에 따라 적어도 하나의 비트 레이트를 개별적으로 결정하고, 상기 제1 시구간 내의 스트리밍 미디어의 적어도 하나의 목표 세그먼트를 획득하기 위해, 상기 적어도 하나의 비트 레이트에 따라 개별적으로 상기 제1 시구간 내의 스트리밍 미디어를 인코딩하도록 구성되어 있는, 스트리밍 미디어 세그먼트 준비 장치.
  26. 제16항에 있어서,
    모든 시구간 내의 스트리밍 미디어의 목표 세그먼트를 결정하도록 구성되어 있는 제3 결정 유닛; 및
    상기 스트리밍 미디어의 각각의 레프리젠테이션에 포함된 목표 세그먼트를 설명하는 데 사용되는 미디어 프레젠테이션 디스크립션 파일(media presentation description file: MPD)을 생성하도록 구성되어 있는 생성 유닛
    을 더 포함하는 스트리밍 미디어 세그먼트 준비 장치.
  27. 제26항에 있어서,
    상기 생성 유닛에 의해 생성된 MPD는 각각의 레프리젠테이션 내의 목표 세그먼트의 세그먼트 일련번호를 포함하며, 각각의 레프리젠테이션 내의 목표 세그먼트에는 시구간에 의해 불연속적으로 번호가 부여되며, 이에 따라 수신단은 상기 일련번호의 불연속성에 따라 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 결정하는, 스트리밍 미디어 세그먼트 준비 장치.
  28. 제26항에 있어서,
    상기 생성 유닛에 의해 생성된 MPD는 지시 정보를 포함하며, 상기 지시 정보는 각각의 레프리젠테이션이 목표 세그먼트가 존재하지 않는 시구간을 가지는지를 나타내는 데 사용되거나, 상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간을 나타내는 데 사용되는, 스트리밍 미디어 세그먼트 준비 장치.
  29. 제28항에 있어서,
    상기 지시 정보는 각각의 레프리젠테이션 내에서, 목표 세그먼트가 존재하지 않는 시구간의 일련번호를 나타내는 데 사용되는, 스트리밍 미디어 세그먼트 준비 장치.
  30. 제26항에 있어서,
    각각의 레프리젠테이션이 특정한 시구간에서 목표 세그먼트의 세그먼트 정보를 가지지 않을 때, 상기 생성 유닛에 의해 생성된 MPD는 상기 특정한 시구간에서 다른 레프리젠테이션 내의 목표 세그먼트의 세그먼트 정보를 대신 사용하는, 스트리밍 미디어 세그먼트 준비 장치.
KR1020157022629A 2013-04-03 2014-04-03 스트리밍 미디어 세그먼트 준비 방법 및 장치 KR101693567B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310115656.3 2013-04-03
CN201310115656.3A CN104105012B (zh) 2013-04-03 2013-04-03 流媒体的片段准备方法和装置
PCT/CN2014/074697 WO2014161498A1 (zh) 2013-04-03 2014-04-03 流媒体的片段准备方法和装置

Publications (2)

Publication Number Publication Date
KR20150110694A KR20150110694A (ko) 2015-10-02
KR101693567B1 true KR101693567B1 (ko) 2017-01-06

Family

ID=51655303

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157022629A KR101693567B1 (ko) 2013-04-03 2014-04-03 스트리밍 미디어 세그먼트 준비 방법 및 장치

Country Status (6)

Country Link
US (1) US9432432B2 (ko)
EP (1) EP2941007B1 (ko)
JP (1) JP6336568B2 (ko)
KR (1) KR101693567B1 (ko)
CN (1) CN104105012B (ko)
WO (1) WO2014161498A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9894130B2 (en) * 2014-09-23 2018-02-13 Intel Corporation Video quality enhancement
CN107534798A (zh) * 2015-04-22 2018-01-02 Lg 电子株式会社 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
US9276983B2 (en) * 2015-05-01 2016-03-01 Amazon Technologies, Inc. Content delivery network video content invalidation through adaptive bitrate manifest manipulation
JP6891497B2 (ja) * 2017-01-06 2021-06-18 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システム及びプログラム
CN111510790B (zh) * 2019-01-30 2021-10-15 上海哔哩哔哩科技有限公司 视频请求方法、系统、计算机设备及计算机可读存储介质
US11026021B2 (en) * 2019-02-19 2021-06-01 Sony Interactive Entertainment Inc. Hybrid speaker and converter
JP7363923B2 (ja) 2019-12-20 2023-10-18 Dic株式会社 水性樹脂組成物、水性表面処理剤、及び、物品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120166667A1 (en) 2010-12-22 2012-06-28 Edward Hall Streaming media
US20120209952A1 (en) * 2011-02-11 2012-08-16 Interdigital Patent Holdings, Inc. Method and apparatus for distribution and reception of content
WO2013004260A1 (en) * 2011-07-07 2013-01-10 Telefonaktiebolaget L M Ericsson (Publ) Network-capacity optimized adaptive http streaming

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7961717B2 (en) * 2005-05-12 2011-06-14 Iposi, Inc. System and methods for IP and VoIP device location determination
CN101540896A (zh) 2008-03-17 2009-09-23 中国移动通信集团公司 一种视频业务质量测试方法、装置及系统
KR101786051B1 (ko) * 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치
CN101753439A (zh) 2009-12-18 2010-06-23 深圳市融创天下科技发展有限公司 一种流媒体分发传输方法
TW201210325A (en) 2010-07-21 2012-03-01 Nokia Corp Method and apparatus for indicating switching points in a streaming session
US8943215B2 (en) * 2010-12-21 2015-01-27 Microsoft Corporation Distributed smooth streaming utilizing dynamic manifests
CN102710586B (zh) * 2011-03-28 2014-10-08 华为技术有限公司 流媒体传输控制方法、媒体传输控制方法、相关设备
US8924580B2 (en) * 2011-08-12 2014-12-30 Cisco Technology, Inc. Constant-quality rate-adaptive streaming
US9445136B2 (en) * 2011-09-21 2016-09-13 Qualcomm Incorporated Signaling characteristics of segments for network streaming of media data
US20130304934A1 (en) * 2011-09-29 2013-11-14 Avvasi Inc. Methods and systems for controlling quality of a media session
CN102546191B (zh) * 2012-01-30 2015-08-05 华为技术有限公司 流媒体服务的计费方法、装置及系统
US20140189064A1 (en) * 2012-12-31 2014-07-03 Bruce R. Cilli Method and system for adaptive video transmission
US20140237019A1 (en) * 2013-02-15 2014-08-21 Dropbox, Inc. Server-side transcoding of media files
US20140281002A1 (en) * 2013-03-14 2014-09-18 General Instrument Corporation Devices, systems, and methods for managing and adjusting adaptive streaming traffic

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120166667A1 (en) 2010-12-22 2012-06-28 Edward Hall Streaming media
US20120209952A1 (en) * 2011-02-11 2012-08-16 Interdigital Patent Holdings, Inc. Method and apparatus for distribution and reception of content
WO2013004260A1 (en) * 2011-07-07 2013-01-10 Telefonaktiebolaget L M Ericsson (Publ) Network-capacity optimized adaptive http streaming

Also Published As

Publication number Publication date
CN104105012B (zh) 2018-04-20
KR20150110694A (ko) 2015-10-02
JP2016518057A (ja) 2016-06-20
JP6336568B2 (ja) 2018-06-06
EP2941007A4 (en) 2015-11-11
WO2014161498A1 (zh) 2014-10-09
US20140304422A1 (en) 2014-10-09
EP2941007B1 (en) 2018-06-13
EP2941007A1 (en) 2015-11-04
CN104105012A (zh) 2014-10-15
US9432432B2 (en) 2016-08-30

Similar Documents

Publication Publication Date Title
KR101693567B1 (ko) 스트리밍 미디어 세그먼트 준비 방법 및 장치
US10298985B2 (en) Systems and methods for performing quality based streaming
KR102326282B1 (ko) 대역폭에 적응적인 대쉬 기반 컨텐츠 제공 장치 및 방법
US11973996B2 (en) Staggered key frame video encoding
CN106688239A (zh) 视频下载方法、装置及系统
KR20180018747A (ko) 미디어 세그먼트들을 저장하기 위한 디렉토리 제한 기반 시스템 및 방법
KR101678540B1 (ko) 스트리밍 미디어 전송 방법 및 장치
KR102313136B1 (ko) 실시간 비디오 스트리밍에서의 초해상화 가속을 위한 장치 및 방법
KR20150073207A (ko) 스트림 미디어에 기반하여 비트스트림 세그먼트를 선택하는 방법, 플레이어, 및 단말
KR20140020807A (ko) 콘텐츠 인식 멀티미디어 스트리밍을 위한 방법 및 시스템
US20160269462A1 (en) Adaptive real-time transcoding method and streaming server therefor
US20160212054A1 (en) Multiple Protocol Media Streaming
US10708667B1 (en) Combining fragments with different encodings
WO2015106383A1 (zh) 一种评估视频质量的方法以及相关设备
CN104853226A (zh) 多媒体数据的处理方法、装置、设备及系统
US11496535B2 (en) Video data transmission apparatus, video data transmitting method, and storage medium
Juluri et al. Look-ahead rate adaptation algorithm for DASH under varying network environments
CN106559684B (zh) 降低直播延时的方法、终端和系统
US20160014181A1 (en) Content transfer method, content transfer apparatus and content receiving apparatus
JP2017175597A (ja) 動画配信システム、配信サーバ、受信装置、及びプログラム
Vlaović et al. Content Dependent Representation Selection Model for Systems Based on MPEG DASH. Electronics 2021, 10, 1843

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191217

Year of fee payment: 4