ES2627579T3 - Método, reproductor y terminal para seleccionar segmentaciones de flujo de código sobre la base de un flujo multimedia - Google Patents

Método, reproductor y terminal para seleccionar segmentaciones de flujo de código sobre la base de un flujo multimedia Download PDF

Info

Publication number
ES2627579T3
ES2627579T3 ES13871204.7T ES13871204T ES2627579T3 ES 2627579 T3 ES2627579 T3 ES 2627579T3 ES 13871204 T ES13871204 T ES 13871204T ES 2627579 T3 ES2627579 T3 ES 2627579T3
Authority
ES
Spain
Prior art keywords
segment
quality
terminal
buffer
initial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES13871204.7T
Other languages
English (en)
Inventor
Peiyun Di
Xin Liu
Yangpo Xu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Application granted granted Critical
Publication of ES2627579T3 publication Critical patent/ES2627579T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/756—Media network packet handling adapting media to device capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

Un método realizado en un reproductor para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia, cuyo método comprende: obtener (S11) información de segmento de cada segmento de al menos dos segmentos que corresponden a un primer tiempo en el flujo multimedia, en donde la información de segmento comprende una calidad de segmento; seleccionar (S12), en conformidad con la calidad de segmento de cada segmento y de un umbral de calidad preestablecido, un segmento inicial de entre los al menos dos segmentos que corresponden al primer tiempo; obtener información de parámetro de memoria intermedia de un terminal, en donde la información de parámetro de memoria intermedia comprende un umbral de memoria intermedia preestablecido; y si se determina, en conformidad con la información de segmento del segmento inicial y la información de parámetro de memoria intermedia del terminal, que la descarga del segmento inicial no hace que una memoria intermedia disponible del terminal sea inferior al umbral de memoria intermedia preestablecido, determinar que la descarga del segmento inicial no causa una excepción de reproducción del terminal, utilizar (S13) el segmento inicial como un segmento de flujo binario seleccionado; caracterizado por cuanto que, después de la obtención de la información de parámetro de memoria intermedia del terminal, el método comprende, además: si se determina, en función de la información de segmento del segmento inicial y de la información de parámetro de memoria intermedia del terminal, que la descarga del segmento inicial hace que la memoria intermedia disponible del terminal sea inferior al umbral de memoria intermedia preestablecido, seleccionar, de forma secuencial, a partir de todos los segmentos correspondientes al primer tiempo, un segundo segmento cuya calidad de segmento es inferior a la calidad de segmento del segmento inicial, utilizar el segundo segmento como un segmento inicial actualizado, repetir las etapas anteriores hasta que se determine que la descarga del segmento inicial actualizado no causa que la memoria intermedia disponible del terminal sea inferior al umbral de memoria intermedia preestablecido, y utilizar el segmento inicial actualizado como un segmento del flujo binario seleccionado.

Description

imagen1
imagen2
imagen3
imagen4
imagen5
15
25
35
45
55
65
segmento de flujo binario basado en un flujo multimedia, en donde el terminal incluye: un receptor y un procesador; el receptor está configurado para obtener información de segmento de cada segmento de los al menos dos segmentos correspondientes a un primer tiempo en el flujo multimedia, en donde la información de segmento incluye una calidad de segmento; y el procesador está configurado para seleccionar, en conformidad con la calidad de segmento de cada segmento obtenido por el receptor y un umbral de calidad preestablecido, un segmento inicial a partir de los al menos dos segmentos correspondientes al primer tiempo; y si se determina que la descarga del segmento inicial no causa una excepción de reproducción de un terminal, el procesador está configurado, además, para utilizar el segmento inicial obtenido por el módulo de selección de seguimiento como un segmento de flujo binario seleccionado.
El terminal para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia en conformidad con las formas de realización del cuarto aspecto de la idea inventiva hace que un segmento de flujo binario finalmente seleccionado utilice completamente el ancho de banda, la calidad de segmentos se hace más estrecha y la calidad de vídeo durante la reproducción de vídeo se hace más suave.
En una manera de puesta en práctica posible de las formas de realización del cuarto aspecto de la idea inventiva, el receptor está configurado, además, para obtener información de parámetro de memoria intermedia del terminal, y la información de parámetro de memoria intermedia incluye un umbral de memoria intermedia preestablecido; y el procesador está configurado, además, para, si se determina, en conformidad con la información de segmento del segmento inicial recibido por el receptor y la información de parámetro de memoria intermedia del terminal, que la descarga del segmento inicial no causa que una memoria intermedia disponible del terminal sea menor que el umbral de memoria intermedia preestablecido, determinar que la descarga del segmento inicial no causa una excepción de reproducción del terminal.
Con referencia a cualquiera de las formas de realización anteriores, en una segunda manera de puesta en práctica posible de las formas de realización del cuarto aspecto de la idea inventiva, la información de segmento incluye, además, una longitud de tiempo de segmento y una tasa binaria de segmento; la información de parámetro de memoria intermedia del terminal incluye, además, una longitud de tiempo del flujo multimedia que está en una memoria intermedia y no ha sido objeto de reproducción; el receptor está configurado, además, para obtener un ancho de banda de red nivel para la descarga del flujo multimedia por el terminal; y el procesador está configurado específicamente, además, para seleccionar el segmento que es de un valor absoluto mínimo de una diferencia entre la calidad de segmento y el umbral de calidad a partir de todos los segmentos correspondientes al primer tiempo; determinar, en función de una longitud de tiempo de segmento y de una tasa binaria de segmento del segmento inicial y el ancho de banda de red disponible, una longitud de tiempo para terminar la descarga del segmento inicial; y determinar que una suma de la longitud de tiempo del flujo multimedia que está en la memoria intermedia del terminal y no ha sido objeto de reproducción y la longitud de tiempo del segmento del segmento inicial no es menor que una suma de la longitud de tiempo para terminar la descarga del segmento inicial y del umbral de memoria intermedia preestablecido, considerar que la descarga del segmento inicial no causa que la memoria intermedia disponible del terminal sea menor que el umbral de memoria intermedia preestablecido, y utilizar el segmento inicial como un segmento de flujo binario seleccionado.
Con referencia a cualquiera de las formas de realización anteriores, en una tercera manera de puesta en práctica posible de las formas de realización del cuarto aspecto de la idea inventiva, el procesador está configurado, además, para, si se determina, en conformidad con la información de segmento del segmento inicial y la información de parámetro de memoria intermedia del terminal, que la descarga del segmento inicial causa que la memoria intermedia disponible del terminal es menor que el umbral de memoria intermedia preestablecido, el módulo de selección de segmento está, además, configurado específicamente para seleccionar, en un orden descendente de calidad de segmento y a partir de todos los segmentos correspondientes al primer tiempo, un segundo segmento cuya calidad de segmento es menor que la calidad de segmento del segmento inicial, utilizar el segundo segmento como un segmento inicial actualizado, repetir las etapas anteriores hasta que se determine que la descarga del segmento inicial actualizado no causa que la memoria intermedia disponible del terminal sea menor que el umbral de memoria intermedia preestablecido y utilizar el segmento inicial actualizado como un segmento de flujo binario seleccionado.
BREVE DESCRIPCIÓN DE LOS DIBUJOS
Para describir las soluciones técnicas en las formas de realización de la presente invención o en la técnica anterior con mayor claridad, a continuación se introducen brevemente los dibujos adjuntos requeridos para describir las formas de realización o la técnica anterior. Evidentemente, los dibujos adjuntos en la siguiente descripción ilustran simplemente algunas formas de realización de la presente invención, y un experto en esta técnica puede derivar todavía otros dibujos a partir de estos dibujos adjuntos sin necesidad de esfuerzos creativos.
La Figura 1 es un diagrama de flujo de un método para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia en conformidad con una forma de realización de un primer aspecto de la presente invención;
La Figura 2 es otro diagrama de flujo de un método para seleccionar un segmento de flujo binario sobre la base de
imagen6
imagen7
15
25
35
45
55
65
el umbral de calidad puede ser un valor calculado de forma dinámica, a modo de ejemplo, un valor que se obtiene realizando un cálculo empleando la calidad de un segmento que ha sido descargado (el umbral de calidad puede obtenerse en una manera de calcular una media de la calidad de segmentos que han sido descargados), o bien, un valor que se obtiene realizando un cálculo utilizando la calidad de un segmento que ha sido descargado y la calidad de un segmento que debe descargarse (diferentes valores ponderados pueden ser respectivamente asignados a la calidad del segmento que ha sido descargado y la calidad de segmento que ha de descargarse, y el umbral de calidad se obtiene en una manera de cálculo ponderado). Puede entenderse que la manera anterior de calcular el umbral de calidad es solamente un ejemplo dado para facilitar el entendimiento de esta forma de realización de la presente invención y no deberá considerarse como una limitación sobre esta forma de realización de la presente invención. Maneras de obtener el umbral de calidad incluyen, además, otra manera que pueda ponerse en práctica por un experto en esta técnica sin necesidad de esfuerzos creativos.
En una forma de realización de la presente invención, puede seleccionarse un intervalo de umbral de calidad (de forma estática o dinámica), a modo de ejemplo, [QTH1, QTH2], o (QTH1, QTH2] o (QTH1, QTH2) o [QTH1, QTH2). El intervalo de umbral de calidad puede expresarse también de otra manera, a modo de ejemplo, una manera tal como un límite superior del umbral de calidad QTH2 y un margen de fluctuación en sentido descendente DeltaQ2, un límite inferior del umbral de calidad QTH1 y un margen de fluctuación en sentido ascendente DeltaQ1 o un umbral de calidad QTH y márgenes de fluctuación en sentido ascendente y descendente, DeltaQ1 y DeltaQ2. Puede entenderse que la selección anterior de un intervalo de umbral de calidad es solamente un ejemplo dado para facilitar el entendimiento de esta forma de realización de la presente invención, en lugar de ser una limitación sobre esta forma de realización de la presente invención.
S25: Seleccionar un segmento de flujo binario.
Durante la selección de un segmento, un segmento de flujo binario cuya calidad de segmento es la más próxima al umbral de calidad se selecciona primero con un segmento inicial, y luego, se determina si la descarga del segmento inicial causa, o no, un sobreflujo de memoria intermedia del terminal; si el sobreflujo de memoria intermedia del terminal no se causa, se selecciona el segmento; y si el sobreflujo de memoria intermedia del terminal es causado, un segmento de flujo binario cuya calidad de segmento es menor que la calidad de segmento del segmento inicial se selecciona a partir del segmento de flujo binario en un orden descendente, continúa la determinación de si la descarga del segmento causa, o no, un sobreflujo de memoria intermedia del terminal, repitiéndose esta etapa hasta que un segmento de flujo binario seleccionado no cause un sobreflujo de memoria intermedia del terminal, y luego, se interrumpe la operación.
En una forma de realización de la presente invención, durante la selección del segmento, un segmento que puede utilizar completamente el ancho de banda y los recursos de memoria intermedia se selecciona en primer lugar, y luego, la calidad/tasa binaria de un segmento finalmente seleccionado cuya calidad de segmento es mayor que el umbral de calidad QTH es regulado en sentido descendente y/o la calidad/tasa binaria de un segmento cuya calidad es menor que QTH se regula en sentido ascendente.
En una forma de realización de la presente invención, la regulación en sentido descendente de la calidad o de la tasa binaria puede disminuir a un segmento cuya calidad sea más alta que QTH y seleccionar un segmento de flujo binario cuya calidad es inferior a QTH o puede ser seleccionando un segmento cuya calidad sea la más próxima al umbral de calidad QTH; de forma análoga, la regulación de la calidad o tasa binaria en sentido ascendente puede dar lugar a un segmento cuya calidad es inferior que el umbral QTH y seleccionar un segmento de flujo binario cuya calidad es más alta que QTH, o puede ser seleccionando un segmento cuya calidad es la más próxima al umbral de calidad QTH. Según se ilustra en la tabla, a modo de ejemplo, un segmento de flujo binario inicialmente seleccionado es F21 y la calidad de flujo binario de F21 se representa utilizando un valor de PSNR, en donde PSNR = 40. En este caso, la regulación ascendente de la calidad se refiere a seleccionar un segmento cuyo valor PSNR es mayor que el de F21, es decir, seleccionando F11 en la tabla; la regulación en sentido descendente de la calidad se refiere a seleccionar un segmento cuya relación PSNR es menor que la de F21, es decir, seleccionando F31 en la tabla. A continuación, un valor de la relación PSNR de un segmento seleccionado se compara con el umbral de calidad QTH para determinar si la selección es adecuada o no lo es, y si es inadecuada, continúa realizándose la selección de un segmento de flujo binario. Puede entenderse que la regulación en sentido ascendente y la selección en sentido descendente, en relación con la calidad de un segmento de flujo binario, son, en este caso, ejemplos específicos dados para facilitar el entendimiento de esta forma de realización de la presente invención, en lugar de constituir una limitación sobre esta forma de realización de la presente invención.
En una forma de realización de la presente invención, haciendo referencia a los datos en la tabla anterior, se selecciona F11 en el tiempo t1, Tbuf = 6+2-(2000*2)/1000 = 4 s y la memoria intermedia del terminal no tiene un sobreflujo cuando se selecciona F11. Si QTH = 40, se sigue determinando una condición de memoria intermedia del terminal después de que se seleccione F21; en este caso, puesto que la memoria intermedia no tiene un sobreflujo, un segmento que se selecciona finalmente en el tiempo t1 es F21. Si QTH = 50, F11 se selecciona directamente como un segmento de flujo binario que se selecciona en el tiempo t1.
El método para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia en conformidad con
imagen8
imagen9
15
25
35
45
55
65
selecciona en la tapa S34 y se puede reproducir de forma continua. En una forma de realización de la presente invención, en un grupo de segmentos [F21, F22, F33], un segmento con una calidad mínima es F33 y la calidad de segmento Q33 = 27; esto es así porque un más alto valor de la relación PSNR representa más alta calidad de segmento; a continuación, un segmento de flujo binario con un valor de PSNR mínimo puede seleccionarse a partir del grupo de segmentos. En otra manera de representación de la calidad, un segmento de flujo binario con un valor máximo puede necesitarse seleccionarse como un segmento con calidad mínima y por ello, sus detalles no se describen aquí de nuevo.
Puesto que un tiempo correspondiente al segmento de flujo binario F33 es t3, una operación en este caso es seleccionar, de forma secuencial, un segmento de flujo binario cuya calidad de segmento es mayor que la de F33 a partir de múltiples segmentos de flujo binario correspondientes al tiempo t3. Según se indica en la tabla, un segmento de flujo binario seleccionado es F23 en este caso, es decir, un nuevo grupo de segmentos es [F21, F32, F23].
S36: Determinar si un nuevo grupo de segmentos puede reproducirse continuamente.
Se calcula si el nuevo grupo de segmentos obtenido en la etapa S35 se puede reproducir de forma continua, es decir, si la descarga de un segmento puede terminarse antes de que se reproduzca el segmento. Una tasa binaria de un segmento en el tiempo t1 es menor que el ancho de banda y por lo tanto, puede terminarse la descarga del segmento en el tiempo t1. El tiempo de memorización intermedia de terminación de la descarga de los datos en el tiempo t1 es Tbuf = 6-2+2 =6 s; el tiempo de memorización intermedia de terminar la descarga de un segmento en el tiempo t2 es Tbuf = 6+3-(950*3)/1000= 6,15 s; y un tiempo de memorización intermedia de terminar la descarga de un segmento en el tiempo t3 es Tbuf = 6,15+2,5-(1200*2,5)/1000 = 5,65 s. Una memoria intermedia en cada tiempo es mayor que 2,5 (la memoria intermedia no tiene sobreflujo) y por lo tanto, el nuevo grupo de segmentos puede reproducirse de forma continua y se retorna a la etapa S5 en este caso.
Si el nuevo grupo de segmentos no puede reproducirse de forma continua, se retorna a la etapa S37.
En una forma de realización de la presente invención, las etapas S35 y S36 necesitan repetirse. Un segmento encontrado con calidad mínima es F23, una tasa binaria de un segmento en el tiempo t3 se selecciona como F13, y los dos segmentos anteriores permanecen sin cambio alguno; por lo tanto, y solamente el tiempo de memorización intermedia del volumen de datos memorizados después de la descarga del segmento de tiempo t3 se termina y es objeto del cálculo correspondiente: Tbuf = 5,65+2,5-(2300*2,5)/1000 = 2,4 s; puesto que el segmento F13 es ya un segmento con la mejor calidad entre los segmentos en el tiempo t3, la sustitución de más baja calidad no se realiza en F13 cuando se repiten las etapas 5 y 6. Puesto que 2,4 es menor que 2,5, un segmento en el tiempo t3 se reproduce cuando no se ha terminado la descarga del segmento en ese momento; si un reproductor soporta dicho mecanismo de iniciación de la reproducción cuando no está terminada la descarga, todavía retorna de nuevo a la etapa S35, pero si el reproductor no soporta el mecanismo de iniciación de la reproducción cuando no se termina la descarga, es necesario retornar a la etapa S37; el segundo mecanismo de reproducción se utiliza en este ejemplo y por lo tanto, es necesario retornar a la etapa S37.
S37: Seleccionar un segmento que está antes de un segmento que no puede reproducirse continuamente y tiene la más alta calidad de segmento para su procesamiento.
El segmento (un segmento que incluye un punto que no puede reproducirse continuamente) que está antes de un segmento que no se puede reproducir continuamente y tiene la más alta calidad de segmento, a modo de ejemplo, un segmento F22 en el tiempo t2 se selecciona a este respecto; un segmento de flujo binario cuya calidad de segmento es menor que la de F22 se selecciona a partir de los segmentos en el tiempo t2 y luego, se retorna a la etapa S36; si el segmento seleccionado con la más alta calidad es un segmento de baja calidad que se selecciona en la etapa S35 y cuya tasa binaria se mejora, la tasa binaria del segmento se regula en sentido descendente (es decir, el segmento de flujo binario seleccionado en la etapa S35 anterior se vuelve a seleccionar, y en este caso, la mejora y la regulación en sentido descendente se refieren a un cambio relativo entre la calidad de segmento o una tasa binaria seleccionada a partir de un segmento de flujo binario en un determinado tiempo y la calidad de segmento o una tasa binaria de un segmento anteriormente seleccionado, en lugar de una operación de procesamiento sobre el segmento anteriormente seleccionado) y el segmento no está implicado en el ajuste de calidad posterior; cuando todos los segmentos no están implicados finalmente en el ajuste o no se puede aumentar más la tasa binaria, finaliza el ajuste y se retorna a la etapa S38. (En un ajuste cíclico posterior, un número cada vez mayor de segmentos no están implicados en el ajuste de la calidad; por último, las tasas binarias de todos los segmentos ya no se ajustan y finaliza la operación de ajuste).
Un tiempo de memorización intermedia de terminación de la descarga de datos en el tiempo t1 es Tbuf= 6-2+2 = 6 s; el tiempo de memorización intermedia de terminación de la descarga de datos en el tiempo t2 es Tbuf = 6+3(490*3)/1000 = 6,3 s; el tiempo de memorización intermedia de terminación de la descarga de datos en el tiempo t3 es Tbuf = 6,3+2,5-(2300*2,5)/1000 = 3,05 s. En este caso, un grupo de segmentos es [F21, F32, F13].
Después del ajuste realizado en la etapa S37, una nueva combinación es [F21, F32, F13] en este caso, el tiempo de
15
25
35
45
55
65
memorización intermedia de terminación de descarga de datos en el tiempo t1 es Tbuf = 6-2+2 = 6 s, el tiempo de memorización intermedia de terminación de la descarga de datos en el tiempo t2 es Tbuf = 6+3-(490*3)/1000 = 6,3 s y el tiempo de memorización intermedia de terminación de la descarga de datos en el tiempo t3 es Tbuf = 6,3+2,5(2300*2,5)/1000 = 3,05 s. La combinación puede reproducirse de forma continua y luego, se retorna a la etapa S35. El segmento F32 con la más baja calidad se sigue seleccionado a partir de [F21, F32] y una nueva combinación es [F21, F22, F13]; la combinación ha sido calculada con anterioridad y no se puede reproducir de forma continua y se retorna a la etapa S37. En este caso, un segmento seleccionado que tiene la más alta calidad y está antes del punto en que no se puede reproducir continuamente es F22, en donde F22 es el segmento con la más baja calidad que se selecciona en la etapa S35 y cuya tasa binaria se mejora y por lo tanto, una tasa binaria de F22 se regula en sentido descendente a F32 (es decir, el segmento F32 es de nuevo seleccionado). F32 no está implicado en el ajuste de calidad posterior y la combinación es [F21, F22, F13] y se puede reproducir continuamente en este caso. A continuación, se retorna a la etapa S35. En este caso, un segmento que puede seleccionarse para ajustar una tasa binaria es F21 solamente, una nueva combinación es [F11, F32, F13] y se retorna a la etapa S36. El tiempo de memorización intermedia de terminar la descarga de los datos en el tiempo t1 es Tbuf = 6+2-(2000*2)/1000 = 4 s, el tiempo de memorización intermedia de terminarla descarga de los datos en el tiempo t2 es Tbuf = 4+3-(490*3)/1000 = 5,53 s y el tiempo de memorización intermedia de terminar la descarga de los datos en el tiempo t3 es Tbuf = 5,53+2,5-(2300*2,5)/1000 = 2,28 s; 2,28 <2,5, y no se puede realizar la reproducción continua; a continuación, se retorna a la etapa S37. Un segmento seleccionado con la más alta calidad es F11, en donde F11 es un segmento con la más baja calidad que se selecciona en la etapa S35 y cuya tasa binaria se mejora; por lo tanto, la tasa binaria de F11 se regula en sentido descendente a F21 (es decir, se reselecciona el segmento F21). F21 no está implicado en el ajuste de calidad posterior; en este caso, los segmentos F21 y F32 en la combinación no están implicados ya en el ajuste, F13 tiene ya la tasa binaria más alta en el tiempo t3 y la tasa binaria ya no se puede aumentar más. Por lo tanto, finaliza el ajuste, y una combinación de segmentos finalmente seleccionada es [F21, F32, F13].
S38: Seleccionar un grupo de segmentos de flujo binario.
A modo de ejemplo, los segmentos finalmente seleccionados que se indican son [F21, F32, F13] y puede deducirse que una combinación de calidad de los segmentos es [40, 39, 40]; la fluctuación en la calidad es la menor, y la combinación utiliza completamente el ancho de banda y los recursos de memoria intermedia.
Puede deducirse del resultado anterior que la estabilidad de la calidad de un programa que observa un usuario puede asegurarse mejorando la calidad/tasa binaria de un segmento con la más baja calidad y/o reduciendo la calidad/tasa binaria de un segmento con la más alta calidad, con lo que se mejora efectivamente la calidad subjetiva de observación del programa por el usuario.
En las etapas anteriores, un valor de memoria intermedia puede ser un volumen de datos de multimedia que no se han reproducido por un terminal, o pueden ser un valor obtenido mediante la sustracción de un valor preestablecido desde el volumen de datos de multimedia que no ha sido reproducido por un terminal.
En esta forma de realización de la presente invención, después de que se seleccione una combinación de segmentos, una nueva combinación de segmentos se puede seleccionar después de que la descarga de segmentos en la combinación de segmentos se termine sucesivamente, o una nueva combinación de segmentos se reselecciona después de que se termine la descarga de cada segmento, o una nueva combinación de segmentos se reselecciona después de que se termine la descarga de varios segmentos de la combinación de segmentos.
Haciendo referencia a la Figura 3, se describe a continuación otro método para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia en conformidad con una forma de realización de la presente invención. Según se ilustra en la Figura 3, después de que se seleccione un grupo de segmentos de flujo binario, el método comprende, además:
S39: Establecer un umbral de calidad QTH.
El umbral de calidad puede ser un valor preestablecido, a modo de ejemplo, un umbral de calidad QTH = 40; o bien, el umbral de calidad puede ser un valor calculado de forma dinámica, a modo de ejemplo, un valor que se obtiene realizando un cálculo empleando la calidad de un segmento que ha sido descargado (el umbral de calidad puede obtenerse en una manera de calcular una media de la calidad de segmentos que han sido descargados), o bien, un valor que se obtiene realizando un cálculo utilizando la calidad de un segmento que ha sido descargado y la calidad de un segmento que ha de descargarse (diferentes valores ponderados pueden ser respectivamente asignados a la calidad del segmento que ha sido descargado y a la calidad de segmento que ha de descargarse, y el umbral de calidad se obtiene en una manera de cálculo ponderado). Puede entenderse que la manera anterior de calcular el umbral de calidad es solamente un ejemplo dado para facilitar el entendimiento de esta forma de realización de la presente invención y no deberá considerarse como una limitación sobre esta forma de realización de la presente invención. Las maneras de obtener el umbral de calidad incluyen, además, otra manera que pueda ponerse en práctica por un experto en esta técnica sin necesidad de esfuerzos creativos.
En una forma de realización de la presente invención, puede seleccionarse un intervalo de umbral de calidad (de
15
25
35
45
55
65
forma estática o dinámica), a modo de ejemplo, [QTH1, QTH2], o (QTH1, QTH2] o (QTH1, QTH2) o [QTH1, QTH2). El intervalo de umbral de calidad puede expresarse también de otra manera, a modo de ejemplo, una manera tal como un límite superior del umbral de calidad QTH2 y un margen de fluctuación en sentido descendente DeltaQ2, un límite inferior del umbral de calidad QTH1 y un margen de fluctuación en sentido ascendente DeltaQ1, o un umbral de calidad QTH y márgenes de fluctuación en sentido ascendente y descendente, DeltaQ1 y DeltaQ2. Puede entenderse que la selección anterior de un intervalo de umbrales de calidad es solamente un ejemplo dado para facilitar el entendimiento de esta forma de realización de la presente invención, en lugar de ser una limitación sobre esta forma de realización de la presente invención.
S310: Obtener un grupo de segmento final ajustando el grupo de segmentos de flujo binario seleccionado de conformidad con el umbral de calidad QTH.
El grupo de segmentos de flujo binario seleccionado en la etapa S38 se ajusta de conformidad con el umbral de calidad QTH obtenido en la etapa S9. La calidad de un segmento de flujo binario cuya calidad es más alta que QTH se regula en sentido descendente para ser menor que QTH (es decir, un segmento de flujo binario cuya calidad de segmento es más baja que QTH es objeto de selección), o bien, la calidad del segmento de flujo binario puede regularse en sentido descendente al valor más próximo al umbral de calidad QTH. La calidad de cada segmento ajustado en esta etapa es próxima al umbral de calidad, con lo que se asegura que la calidad de los segmentos seleccionados esté relativamente próxima, y la fluctuación en la calidad después de que se reproduzcan los segmentos es también reducida en gran medida, lo que mejora la calidad subjetiva de observación de un programa por un usuario.
En una forma de realización de la presente invención, en un proceso de seleccionar la calidad de segmento en función de un umbral de calidad, una memoria intermedia todavía necesita estimarse para asegurar que la memoria intermedia no tenga un sobreflujo, de modo que un grupo de segmentos de flujo binario pueda reproducirse con normalidad. Un valor de memoria intermedia en la forma de realización anterior puede ser un volumen de datos de multimedia que no se haya reproducido por un terminal, o puede ser un valor obtenido mediante la sustracción de un valor desde el volumen de datos multimedia que no ha sido reproducido por un terminal. En general, una memoria intermedia de un terminal no tiene un sobreflujo cuando la calidad de un segmento de flujo binario cuya calidad es más alta que QTH se regula en sentido descendente para ser más baja que QTH (es decir, un segmento de flujo binario cuya calidad de segmento es menor que QTH); en este caso, no es necesario determinar si un nuevo grupo de segmentos causa un sobreflujo de memoria intermedia del terminal y con ello se simplifica el cálculo.
Con referencia a la Figura 4, se describe a continuación un reproductor 40 para seleccionar un segmento de flujo binario sobre la base de un flujo multimedia de conformidad con una forma de realización de la presente invención. Según se ilustra en la Figura, el aparato incluye: un módulo de recepción 401, un módulo de selección de segmento inicial 402 y un módulo de selección de segmento 403.
En una forma de realización de la presente invención, el módulo de recepción 401 está configurado para adquirir información de segmento, información de memoria intermedia de multimedia y el ancho de banda de red, en donde:
el módulo de recepción 401 puede configurarse para recibir información de MPD enviada por un servidor. Información sobre un segmento Fij de un flujo binario de un programa, información de duración Dij del segmento, información de tasa binaria Rij del segmento e información de calidad Qij del segmento se adquieren en una manera de análisis sintáctico de la información de MPD, en donde Fij representa un j-ésimo segmento de un flujo binario i, Dij representa una longitud de tiempo de reproducción del segmento Fij, Rij es información de tasa binaria del segmento y Qij es información de calidad del segmento, y la información puede ser un valor de PSNR (Peak Signal to Noise Ratio, relación de señal a ruido máxima), SIMM (Structural SIMilarity, similaridad estructural), MOS (MeanOpinionScore, puntuación de opinión media) u otros datos de calidad subjetivos y objetivos o información de nivel de calidad. Puede entenderse que los valores descritos a continuación de la calidad de segmento se refieren a resultados de calidad de segmento que se representan por estos datos de calidad o información de nivel de calidad, en lugar de referirse específicamente a valores de estos datos de calidad e información del nivel de calidad; i y j son números enteros mayores que 0.
En una forma de realización de la presente invención, el módulo de recepción 401 puede adquirir, en una manera de detección de una memoria intermedia de multimedia, una longitud de tiempo Tbuf de contenido multimedia que está en una memoria intermedia y que no ha sido objeto de reproducción.
En una forma de realización de la presente invención, el módulo de recepción 401 puede adquirir, además, un ancho de banda disponible para la descarga de datos multimedia por un terminal.
El módulo de selección de segmento inicial 402 está configurado para, durante la selección de segmento, seleccionar primero un segmento de flujo binario cuya calidad de segmento es más próxima a un umbral de calidad que un segmento inicial. A continuación, el módulo de selección de segmento 403 determina si la descarga del segmento inicial causa, o no, que una memoria intermedia del terminal sea de menor magnitud que un valor establecido, en donde el valor establecido puede ser 0 u otro valor distinto de 0; si la memoria intermedia del
15
25
35
45
55
65
terminal no se hace de magnitud menor que el valor establecido, el módulo de selección de segmentos 403 selecciona el segmento; y si la memoria intermedia del terminal se hace que tenga un valor inferior al valor establecido, el módulo de selección de segmento 403 continúa la selección, desde los segmentos de flujo binario en un orden descendente, un segmento de flujo binario cuya calidad de segmento es menor que la del segmento inicial, y luego, sigue determinando si la descarga del segmento hace que la memoria intermedia del terminal tenga una magnitud inferior al valor establecido, repitiéndose esta etapa hasta un segmento de flujo binario seleccionado no cause que la memoria intermedia del terminal tenga una magnitud inferior al valor establecido, interrumpiendo la operación y proporcionando, a la salida un segmento de flujo binario seleccionado.
En una forma de realización de la presente invención, durante la selección del segmento, un segmento que puede utilizarse complemente el ancho de banda y los recursos de memoria intermedia se selecciona en primer lugar, y luego, la calidad/tasa binaria de un segmento finalmente seleccionado, cuya calidad de segmento es mayor que el umbral de calidad QTH, es objeto de regulación en sentido descendente y/o la calidad/tasa binaria de un segmento cuya calidad es menor que QTH es objeto de regulación en sentido ascendente.
En una forma de realización de la presente invención, la regulación en sentido descendente de la tasa binaria o calidad puede dar lugar a un segmento cuya calidad sea más alta que QTH y la selección de un segmento de flujo binario cuya calidad es menor que QTH; o puede ser seleccionando un segmento cuya calidad sea la más próxima al umbral de calidad QTH; de forma análoga, la regulación en sentido ascendente de la tasa binaria o de la calidad puede dar lugar a un segmento cuya calidad sea menor que QTH y la selección de un segmento de flujo binario cuya calidad sea más alta QTH, o puede ser seleccionando un segmento cuya calidad sea la más próxima al umbral de calidad QTH.
El reproductor 40 para seleccionar un segmento de flujo binario basado en un flujo multimedia de conformidad con esta forma de realización de la presente invención hace que la calidad de todos los segmentos de flujo binario seleccionados sea más próxima a un umbral de calidad, con lo que se asegura que la calidad de todos los segmentos seleccionados esté en un margen relativamente estrecho, reduciendo, en gran medida, la fluctuación en la calidad cuando se reproducen los segmentos, de modo que la calidad de reproducción de vídeo se haga más suave y se mejore efectivamente la experiencia de observación de un programa por un usuario.
Con referencia a la Figura 5, a continuación se describe un terminal 50 para seleccionar un segmento de flujo binario basado en un flujo multimedia en conformidad con una forma de realización de la presente invención. Según se ilustra en la Figura 5, el terminal 50 incluye: un receptor 501 y un procesador 502.
Cuando un usuario observa un programa, el terminal 50 necesita adquirir primero un MPD, y un MPD relacionado con el programa puede adquirirse en la manera siguiente: un editor del programa envía el MPD del programa al terminal por anticipado; o bien, el editor del programa presenta un sitio web del MPD al usuario del terminal y el usuario accede al MPD utilizando dicho sitio web.
El receptor 501 puede configurarse para adquirir, en función del MPD, información de segmento de todos los flujos binarios relacionados con el programa, en donde la información incluye, sin limitación, a la información de duración de un segmento, información de tasa binaria de un segmento, información de calidad de un segmento e información de URL de un segmento. Estas informaciones pueden obtenerse mediante un análisis sintáctico del MPD del programa o pueden adquirirse a partir de otra información que se envía por un servidor y se relaciona con el programa o puede adquirirse a partir de datos de flujo multimedia del programa o puede adquirirse a partir de una combinación de las maneras operativas anteriores. En un proceso de reproducción del programa, el receptor 501 adquiere, además, un estado de memoria intermedia de multimedia de un desarrollador y una longitud de tiempo o volumen de datos de datos multimedia que está en una memoria intermedia de multimedia y no ha sido objeto de reproducción; el receptor 501 adquiere, además, información de condición de red del terminal, en donde la información es un ancho de banda para descargar datos desde una red y una condición de fluctuación del ancho de banda, con el fin de estimar el ancho de banda disponible para descargar datos multimedia; y el receptor 501 puede adquirir, además, información sobre un segmento que ha sido descargado por el terminal.
El procesador 502 determina, utilizando un volumen de datos multimedia en la memoria intermedia, el ancho de banda disponible para la descarga de datos multimedia y la información obtenida sobre un segmento que ha de descargarse y/o información sobre un segmento que ha sido descargado que se obtienen por el receptor 501, cuyo segmento de flujo binario ha de descargarse. Para un método para seleccionar un segmento de flujo binario por el procesador 502, se hace referencia a las formas de realización del método y del aparato anteriores, y por ello sus detalles no se describen aquí de nuevo.
En una forma de realización de la presente invención, el terminal incluye, además, un transmisor 503, en donde el transmisor 503 obtiene un URL de un segmento que se selecciona por el procesador 502 y que ha de descargarse, y envía una demanda de GET al servidor.
El receptor 501 está configurado, además, para recibir datos multimedia enviados por el servidor, u otra información de respuesta enviada por el servidor, o una MPD. Una memoria intermedia de multimedia (es decir, la memoria
imagen10

Claims (1)

  1. imagen1
    imagen2
ES13871204.7T 2013-01-14 2013-07-23 Método, reproductor y terminal para seleccionar segmentaciones de flujo de código sobre la base de un flujo multimedia Active ES2627579T3 (es)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310012242 2013-01-14
CN201310012242.8A CN103929684B (zh) 2013-01-14 2013-01-14 一种基于流媒体选择码流分段的方法、播放器和终端
PCT/CN2013/079881 WO2014107951A1 (zh) 2013-01-14 2013-07-23 一种基于流媒体选择码流分段的方法、播放器和终端

Publications (1)

Publication Number Publication Date
ES2627579T3 true ES2627579T3 (es) 2017-07-28

Family

ID=51147739

Family Applications (1)

Application Number Title Priority Date Filing Date
ES13871204.7T Active ES2627579T3 (es) 2013-01-14 2013-07-23 Método, reproductor y terminal para seleccionar segmentaciones de flujo de código sobre la base de un flujo multimedia

Country Status (6)

Country Link
EP (2) EP3214820A1 (es)
JP (1) JP6155519B2 (es)
KR (1) KR101708728B1 (es)
CN (1) CN103929684B (es)
ES (1) ES2627579T3 (es)
WO (1) WO2014107951A1 (es)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016149863A1 (zh) * 2015-03-20 2016-09-29 华为技术有限公司 流媒体资源的下载方法、装置和终端设备
WO2017063189A1 (en) * 2015-10-16 2017-04-20 Qualcomm Incorporated Deadline signaling for streaming of media data
CN106713948B (zh) * 2015-11-13 2019-10-11 北京国双科技有限公司 视频分段加载方法和装置
CN105898403A (zh) * 2015-11-16 2016-08-24 乐视云计算有限公司 在线媒体服务的码流自适应方法及系统
CN107333153B (zh) * 2016-04-28 2020-06-02 华为技术有限公司 一种视频传输方法、基站及系统
CN110139168B (zh) * 2018-02-02 2021-07-13 中南大学 视频编码方法、装置、计算机设备及存储介质
CN109151584B (zh) * 2018-09-07 2020-10-27 华为技术有限公司 控制网络流量的方法与装置
CN110213643B (zh) * 2019-06-11 2023-03-24 北京奇艺世纪科技有限公司 一种流媒体缓存方法、装置及终端设备
CN110662093A (zh) * 2019-10-17 2020-01-07 北京达佳互联信息技术有限公司 一种初始码率确定方法、装置、电子设备及存储介质
DE112021001616T5 (de) 2020-04-10 2022-12-29 Fanuc Corporation Spritzgiesssystem
CN114501084B (zh) * 2022-02-17 2023-08-01 北京百度网讯科技有限公司 播放器的起播方法、装置、设备和介质
CN117560525B (zh) * 2024-01-11 2024-04-19 腾讯科技（深圳）有限公司 一种数据处理方法、装置、设备以及可读存储介质

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003019394A1 (en) * 2001-08-24 2003-03-06 Intel Corporation A general input/output architecture, protocol and related methods to support legacy interrupts
JP3935419B2 (ja) * 2002-11-19 2007-06-20 Ｋｄｄｉ株式会社 動画像符号化ビットレート選択方式
CN100440866C (zh) * 2005-10-21 2008-12-03 清华大学 数据驱动覆盖网络中的分段发送调度方法
US20070133405A1 (en) * 2005-12-08 2007-06-14 Microsoft Corporation Congestion controller for network transmissions
CN100531210C (zh) * 2006-01-12 2009-08-19 北京邮电大学 一种用于移动流媒体传输的无缝切换的方法
US7796532B2 (en) * 2006-05-31 2010-09-14 Cisco Technology, Inc. Media segment monitoring
US9380096B2 (en) * 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US8812673B2 (en) * 2007-02-14 2014-08-19 Alcatel Lucent Content rate control for streaming media servers
US9124642B2 (en) * 2009-10-16 2015-09-01 Qualcomm Incorporated Adaptively streaming multimedia
EP2383999A1 (en) * 2010-04-29 2011-11-02 Irdeto B.V. Controlling an adaptive streaming of digital content
US8996713B2 (en) * 2010-06-30 2015-03-31 British Telecommunications Public Limited Company Video streaming
EP2410743A1 (en) * 2010-07-23 2012-01-25 Alcatel Lucent Method for transferring video chunks, server entity, client entity and intermediate network entity realizing such a method
EP2410744A1 (en) * 2010-07-23 2012-01-25 Alcatel Lucent Method for transferring video segments, client entity and proxy entity realizing such a method
JP5837621B2 (ja) * 2011-02-11 2015-12-24 インターデイジタル パテント ホールディングス インコーポレイテッド コンテンツの配信および受信の方法および装置
CN102710586B (zh) * 2011-03-28 2014-10-08 华为技术有限公司 流媒体传输控制方法、媒体传输控制方法、相关设备
KR101757994B1 (ko) * 2012-07-10 2017-07-13 브이아이디 스케일, 인크. 품질 주도형 스트리밍

Also Published As

Publication number Publication date
KR101708728B1 (ko) 2017-02-24
KR20150073207A (ko) 2015-06-30
CN103929684A (zh) 2014-07-16
EP2903219B1 (en) 2017-04-26
WO2014107951A1 (zh) 2014-07-17
JP2016502351A (ja) 2016-01-21
EP2903219A1 (en) 2015-08-05
CN103929684B (zh) 2018-06-15
EP3214820A1 (en) 2017-09-06
EP2903219A4 (en) 2015-11-25
JP6155519B2 (ja) 2017-07-05

Similar Documents

Publication Publication Date Title
ES2627579T3 (es) Método, reproductor y terminal para seleccionar segmentaciones de flujo de código sobre la base de un flujo multimedia
US20210250627A1 (en) Systems and Methods for Encoding and Streaming Video Encoded Using a Plurality of Maximum Bitrate Levels
JP5947345B2 (ja) ストリーミングデータダウンロード方法及びコンピューター読み取り可能な記録媒体
CN105721340B (zh) 一种在线阅读预加载量计算方法和装置
JP2016502351A5 (es)
CN110430453B (zh) 视频多码率切换处理方法、装置、电子设备及存储介质
JP2014527783A (ja) マルチメディアコンテンツのシームレスな解像度切替のための解像度の選択
JP2007036666A (ja) コンテンツ配信システム、クライアント及びクライアントプログラム
BR112013013944B1 (pt) Método e sistema para transferir conteúdo de vídeo digital
CN106464942B (zh) 流媒体资源的下载方法、装置和终端设备
CN106488325B (zh) 网络媒体文件播放方法、装置及设备
CN108012166B (zh) 视频播放的方法和装置及存储介质
US10741214B2 (en) Image processing apparatus that selects images, image processing method, and storage medium
CN110392297B (zh) 视频处理方法及设备、存储介质、终端
JP2010008518A (ja) 音楽生成装置、音楽生成方法、及びプログラム
TWI647954B (zh) 動態調整串流播放的系統及方法
Fu et al. 360hrl: Hierarchical reinforcement learning based rate adaptation for 360-degree video streaming
CN113674833B (zh) 健身视频生成方法、系统、终端及存储介质
CN114302189B (zh) 直播清晰度处理方法及装置
ES2934239T3 (es) Recepción de contenido digital en modo truco
JP6865259B2 (ja) 対話型楽曲リクエスト方法、装置、端末、記憶媒体及びプログラム
US20200326905A1 (en) Computer implemented method and computer system for customized execution of a media file
CN109996120A (zh) 影音串流控制装置及其控制方法
WO2022214091A1 (zh) 一种控制直播封面显示的方法及装置
CN104168301B (zh) 提供多媒体内容的方法和装置