FI109393B - Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite - Google Patents

Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite Download PDF

Info

Publication number
FI109393B
FI109393B FI20001674A FI20001674A FI109393B FI 109393 B FI109393 B FI 109393B FI 20001674 A FI20001674 A FI 20001674A FI 20001674 A FI20001674 A FI 20001674A FI 109393 B FI109393 B FI 109393B
Authority
FI
Finland
Prior art keywords
den
data stream
och
att
första
Prior art date
Application number
FI20001674A
Other languages
English (en)
Swedish (sv)
Other versions
FI20001674A0 (fi
FI20001674A (fi
Inventor
Pasi Ojala
Teemu Parkkinen
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Priority to FI20001674A priority Critical patent/FI109393B/fi
Publication of FI20001674A0 publication Critical patent/FI20001674A0/fi
Priority to EP01660140.3A priority patent/EP1173028B1/en
Priority to US09/904,486 priority patent/US7072366B2/en
Priority to JP2001215833A priority patent/JP4160278B2/ja
Publication of FI20001674A publication Critical patent/FI20001674A/fi
Application granted granted Critical
Publication of FI109393B publication Critical patent/FI109393B/fi

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/002—Dynamic bit allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/197—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

109393
Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkoo-deri ja päätelaite - Förfarande för koding av mediaström, en skalabel enkoda-re och en terminal 5 Keksintö kohdistuu yleisesti mediavirtojen koodaamiseen. Erityisesti keksintö kohdistuu skaalautuviin koodausmenetelmiin ja skaalautuviin koodereihin.
Ennen kuin mediavirta esimerkiksi lähetetään tiedonsiirtoverkon yli tai tallennetaan myöhempää käyttöä varten, se yleensä koodataan, ts. pakataan pienempään tilaan. Mediavirta voi koostua esimerkiksi videoleikkeestä, joka on sarja peräkkäisiä vi-10 deokuvia, tai audiodatasta, joka tyypillisesti käsittää digitoitua puhetta tai musiikkia. Esimerkiksi multimediasovelluksessa voidaan siirtää samaan aikaan useita mediavirtoja.
Sopivalla dekooderilla voidaan tuottaa koodatusta mediavirrasta dekoodattu mediavirta, joka on samankaltainen tai täsmälleen sama kuin alkuperäinen mediavirta, jol-15 le koodaus tehtiin. Jos dekoodattu mediavirta on täsmälleen sama kuin alkuperäinen, koodausta sanotaan häviöttömäksi. Useimmat koodausmenetelmät aiheuttavat häviöitä koodattuun mediavirtaan.
Termillä skaalautuvuus viitataan mediavirran koodaamiseen pakatuksi virraksi, joka voidaan dekoodata eri datanopeuksilla. Tyypillisesti osa koodatusta datavirrasta 20 muodostaa ydindatavirran, jonka dekoodaaminen tuottaa dekoodatun mediavirran, jolla on havaittu laatu, joka on huonompi kuin alkuperäisen mediavirran havaittu laatu. Lisäksi koodattu datavirta käsittää muita nk. laajennusdatavirtoja, ja jos näitä käytetään dekoodausprosessissa ydindatavirran lisäksi, dekoodatun mediavirran havaittu laatu paranee. Koska skaalautuvassa multimediavirrassa on nämä ydin- ja laa-25 jennusdatavirrat, sitä voidaan pakkauksen yhteydessä manipuloida suhteellisen hel-:' ·, · posti, jolloin sitä voidaan siirtää eri kaistanleveyksien omaavien kanavien yli ja silti "'. dekoodata ja esittääkin reaaliajassa.
': · *: Skaalautuvuus on toivottava ominaisuus heterogeenisissä ja virhealttiissa ympäris- : ’": töissä. Se on toivottava, koska se lieventää rajoituksia, jotka kohdistuvat tiedonsiir- ‘. 30 tonopeuteen, verkon suoritustehoon ja dekooderin monimutkaisuuteen. Esimerkiksi ‘; moni- ja yleislähetyksessä (multicast, broadcast) skaalautuva koodaus mahdollistaa ‘ · · · ‘ sen, että eri vastaanottimet voivat vastaanottaa dataa eri nopeuksilla tai dekoodata lähetetyn koodatun datavirran erilaisilla dekoodereilla, joilla on yhteinen ydinde-kooderi. Lisäksi skaalautuvuutta voidaan käyttää parantamaan virhe sietoisuutta ••m i · » t ' /'ti", ***** *****»**»,I,,** i 2 109393 sellaisessa siirtojäqestelmässä, jossa skaalautuva koodaus yhdistyy lähetysprio-risointiin. Lähetyspriorisoinnilla tarkoitetaan tässä erilaisia mekanismeja lähetyksen eri palvelutasojen tuottamiseksi, mukaan lukien epäsymmetrinen virhesuojaus, jolloin saadaan erilaisia kanavia, joilla on erilainen virhe/häviösuhde. Luonteestaan 5 riippuen tiedot osoitetaan eri tavoin, esimerkiksi koodattu ydindatavirta voidaan siirtää sellaisen kanavan kautta, jolla on suuri virhesuojaus, ja laajennusdatavirrat voidaan siirtää virhealttiimpien kanavien kautta.
Kuvassa 1 on kaavamaisesti esitetty skaalautuva kooderi 100 ja vastaava dekooderi 130. Mediavirta 101 tulee skaalautuvalle kooderille 100, joka muodostaa ydindata-10 virran 102 ja laajennusdatavirran 103. Tyypillisesti nämä datavirrat syötetään mul-tiplekserille 110, joka muodostaa skaalautuvan koodatun datavirran 104. Tämä multipleksoitu datavirta voidaan sitten esimerkiksi lähettää eteenpäin tai tallentaa myöhempää käyttöä varten. Dekoodauksen yhteydessä skaalautuva koodattu data-virta 104 demultipleksoidaan demultiplekserissä 120 ydindatavirraksi 102 ja mah-15 dollisesti laajennusdatavirraksi tai -virroiksi 103. On esimerkiksi mahdollista, että vastaanotetussa datavirrassa 104 ei ole lainkaan laajennusdatavirtoja esimerkiksi rajallisten lähetysresurssien vuoksi. Dekooderi 130 saa syöttönä ydindatavirran 102 ja mahdollisen laajennusdatavirran (tai mahdolliset laajennusdatavirrat) 103 ja muodostaa dekoodatun audiosignaalin 105. Dekoodatun audiosignaalin 105 havaittu 20 laatu tyypillisesti riippuu siitä, käytetäänkö dekoodauksessa laajennusdatavirtaa tai -; virtoja 103. On myös mahdollista, että tietty dekooderi ei pysty hyödyntämään tiet- : tyä laajennusdatavirtaa (tiettyjä laajennusdatavirtoja), mutta voi silti dekoodata ydindatavirran 102.
Kuvassa 2 on kaavamaisesti esitetty eräs esimerkinomainen skaalautuva audiokoo-25 deri multimedia-audiovirtojen koodaamiseksi, jotka virrat tyypillisesti käsittävät puhe- ja/tai muita audiosignaaleja. Skaalautuva kooderi 200 käsittää ydinkooderin 210, joka on esimerkiksi erityisesti suunniteltu puheen koodaukseen. Se voi olla ; _ / esimerkiksi 3GPP AMR (Adaptive Multi-Rate) -puhekooderi, joka käsittää erilaisia koodekkeja, joiden nimellisnopeus on 4,75-12,2 kbit/s. Lisäksi skaalautuva kooderi ·:··:' 30 200 käsittää laajennuskooderin 230, joka on suunniteltu yleisten audiovirtojen koo- daamiseen. Laajennuskooderi voi esimerkiksi käsittää MPEG-4 AAC -audio-kooderin. Ydinkooderi 210 muodostaa audiovirrasta 101 ydindatavirran 102. Ydin-;; datavirta 102 syötetään ydindekooderille 220, joka dekoodaa ydindatavirran ja '···’ muodostaa dekoodatun ydindatavirran 201. Erovirta 202 on alkuperäisen audiovir- 35 ran 101 ja dekoodatun ydindatavirran 201 erotus, joka syötetään laajennuskooderille 230 yhdessä alkuperäisen audio virran 101 kanssa. Alkuperäistä audio virtaa 101 3 109393 tarvitaan laajennuskooderissa 230 tyypillisesti päätettäessä psykoakustisesta mallista kvantisoinnin bittivarausta varten. Laajennuskooderi 230 muodostaa laajen-nusdatavirran 103. Ydindatavirta 102 ja laajennusdatavirta 103 multipleksoidaan skaalautuvaksi koodatuksi datavirraksi 104 multiplekserissä 110. Kuvassa on esi-5 tetty lisäksi ydinpuskuri 240 ja laajennuspuskuri 250, jotka ovat ydin- ja laajennus-kooderien lähtöpuskurit.
Kuvassa 3 on kaavamaisesti esitetty skaalautuvaa kooderia 200 vastaava dekooderi 300. Skaalautuva koodattu datavirta 104 demultipleksoidaan ydindatavirraksi 102, joka syötetään ydindekooderille 220, ja laajennusdatavirraksi 103, joka syötetään 10 laajennusdekooderille 310. Ydindekooderi 220 on tyypillisesti samanlainen kuin vastineensa skaalautuvassa kooderissa 200 ja tuottaa dekoodatun ydindatavirran 201. Laajennusdekooderi 310 muodostaa dekoodatun laajennusdatavirran 301, joka summataan dekoodatun datavirran 201 kanssa. Tuloksena on dekoodattu audiosignaali 105.
15 Tyypillisesti, mutta ei välttämättä, ydinpuhekooderilla on pienempi bittinopeus ja näytteistystaajuus kuin laajennusaudiokooderilla. Ydin- ja laajennuskooderin näyt-teistystaajuus voi olla sama tai erisuuri riippuen siitä, mitä koodereita käytetään. Yleensä koodattu laajennusdatavirta parantaa syntesoidun signaalin havaittua laatua lisäämällä siihen suuremman kaistanleveyden signaalikomponentit.
20 Skaalautuvissa audiomultimediakoodereissa ydinpuhekooderilla on tyypillisesti kiinteä bittinopeus ja se voi mahdollisesti hyödyntää puheaktiviteetin ilmaisua (VAD) ja epäjatkuvaa lähetystä (DTX). Laajennuskerroksen kooderi puolestaan toimii tyypillisesti vaihtuvalla nopeudella. Ydin- ja laajennuskooderien tavoitebitti-nopeutta säädetään tyypillisesti toisistaan riippumatta lähetyskanavan tiedonsiirto-25 nopeuden perusteella, joka tyypillisesti on nimellinen tiedonsiirtonopeus. Jotta skaalautuvan koodatun datavirran lähetys olisi mahdollista, datavirran bittinopeuden tulisi tietysti olla keskimäärin pienempi kuin käytettävissä oleva siirtonopeus.
Vaikka koodausalgoritmit pakkaavat multimediadataa tehokkaasti, rajoittavaksi :": tekijäksi, varsinkin radiorajapinnan yli toimivissa päätelaitteissa, muodostuu siirto-
* * I
...: 30 kapasiteetti, ja siksi tämän rajallisen resurssin optimointi on hyvin tärkeää. Yleisesti ,:. ottaen skaalautuva multimediakoodaus kärsii huonommasta pakkaustehokkuudesta ··, kuin skaalautumaton koodaus. Toisin sanoen multimedialeike, joka on koodattu skaalautuvaksi multimedialeikkeeksi kaikkine laajennuskerroksineen, vaatii suuremman kaistanleveyden kuin jos se olisi koodattu skaalautumattomaksi yksiker-35 roksiseksi leikkeeksi, jolla on vastaava havaittu laatu. Lukuisten etujensa vuoksi 4 109393 skaalautuvan koodauksen käyttö on erittäin suotavaa, ja siksi olisi edullista, jos voitaisiin toteuttaa menetelmä, joka mahdollistaisi käytettävissä olevan siirtokapasiteetin tehokkaamman hyödyntämisen.
Lähetettävä ydin- ja laajennusdata tallennetaan tilapäisesti multiplekseripuskuriin, 5 josta lähetettävät dataviipaleet otetaan ulos esimerkiksi määräajoin. Tyypillisesti multiplekseripuskurista otetaan vanhin data, ja ydin- ja laajennusdatavirtojen bitti-nopeuksien suhde määrää lähetettävän datavirran ydin- ja laajennusdatavirtojen suhteen. Tällöin on mahdollista, että esimerkiksi vaihtuvanopeuksinen audiokooderi voi muodostaa niin suuren datapurskeen, että tämän datapurskeen lähettäminen 10 aiheuttaa kulkuaikavääristymää ydinpuhedatan siirrossa. Vaihtoehtoisesti ydin-(puhe)data voidaan priorisoida niin, että laajennusdatavirta lähetetään käyttäen siirtokapasiteettia, jota ei käytetä ydindatavirran siirtoon. Tällä tavoin voidaan paremmin taata, että ydindatavirta siirtyy virheettömästi.
Multiplekseripuskurissa käytettävissä olevan tilan määräävät ydin- ja laajennusda-15 tavirtojen bittinopeudet syötettäessä dataa multiplekseripuskuriin ydin- ja laajen-nusdatan bittinopeuksien summaa vastaavalla kokonaisbittinopeudella, ja siirtonopeus, jolla dataa otetaan ulos multiplekseripuskurista. Multiplekseripuskurilla on jokin tietty koko. Tyypillisesti ainakin yksi ydin- ja laajennusdatavirta on vaihtuvanopeuksinen, ja siksi on mahdollista, että jokin datapurske täyttää jäljellä olevan 20 multiplekseripuskurin tilan tai että se ei edes mahdu puskuriin kokonaan. Tätä tilannetta kutsutaan multiplekseripuskurin ylivuodoksi. Toinen esimerkki multiplekseripuskurin ylivuodon mahdollisesta syystä ovat hetkellisen siirtonopeuden dynaamiset muutokset. Jos siirtonopeus laskee tietyn ajan, dataa otetaan multiplekseripuskurista jonkin aikaa alemmalla nopeudella ja multiplekseripuskurin täyttöaste kasvaa 25 johtaen mahdollisesti multiplekseripuskurin ylivuotoon. Jos tällaisessa tilanteessa tulee uusi datapurske, multiplekseripuskurin ylivuotoriski kasvaa entisestään. Mul-. . tiplekseripuskurin ylivuoto-ongelmaa voidaan yrittää ratkaista käyttämällä suurem- ; t ‘: paa multiplekseripuskuria, mutta tyypillisesti tämä johtaa suurempiin siirtoviivei- ; ·' siin. Lisäksi suurempi puskuri on tehoton tapa ratkaista ongelma, sillä suurimman ; · : 30 osan ajasta lisätilaa ei tarvita.
' I
Keksinnön tavoitteena on toteuttaa monipuolinen menetelmä multimediadatavirran ‘ koodaamiseksi skaalautuvasti, skaalautuva kooderi ja skaalautuvan kooderin käsit- :tävä multimediapäätelaite. Lisäksi keksinnön tavoitteena on toteuttaa skaalautuva koodausmenetelmä, skaalautuva kooderi ja skaalautuvan kooderin käsittävä multi-35 mediapäätelaite, joissa multiplekseripuskurin ylivuotoriskiä voidaan huomattavasti pienentää. Tavoitteena on myös toteuttaa skaalautuva koodausmenetelmä, skaalau- 5 109393 tuva kooderi ja skaalautuvan kooderin käsittävä multimediapäätelaite, joissa skaa-lautuvaa koodattua datavirtaa voidaan säätää vastaamaan erilaisia ja mahdollisesti dynaamisesti muuttuvia olosuhteita.
Nämä ja keksinnön muut tavoitteet saavutetaan määrittämällä ydindatavirran ja 5 laajennusdatavirran tavoitebittinopeuksien suhde ja, sikäli kuin siirtonopeus sallii, säätämällä ydindatavirtaa ja laajennusdatavirtaa siten, että suhde pysyy oleellisesti muuttumattomana.
Keksinnön mukainen skaalautuva kooderi on kooderi mediasignaalin koodaamiseksi käsittäen 10 - ensimmäiset koodausvälineet ensimmäisen datavirran muodostamiseksi, joka en simmäinen datavirta on mediasignaaliin liittyvä ydindatavirta, jolla on ensimmäinen bittinopeus, - toiset koodausvälineet toisen datavirran muodostamiseksi, joka toinen datavirta käsittää joukon mediasignaaliin liittyviä laajennusdatavirtoja, joilla on toinen bitti- 15 nopeus, ja - multiplekserin ainakin ensimmäisen datavirran ja toisen datavirran yhdistämiseksi kolmanneksi datavirraksi, ja sille on tunnusomaista, että se lisäksi käsittää ohjausvälineet, jotka on järjestetty vastaanottamaan ohjaustietoa, määrittämään ohjaustiedon perusteella ensimmäisen datavirran ja toisen datavirran tavoiteyhdistelmä kol- 20 mannessa datavirrassa ja säätämään ensimmäisen datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen ja toiseen bitti-. nopeuteen.
Keksinnön mukainen multimediapäätelaite käsittää skaalautuvan kooderin, joka käsittää ensimmäiset koodausvälineet ensimmäisen datavirran muodostamiseksi, 25 joka ensimmäinen datavirta on mediasignaaliin liittyvä ydindatavirta, jolla on ensimmäinen bittinopeus, toiset koodausvälineet toisen datavirran muodostamiseksi, ,' · · joka toinen datavirta käsittää joukon mediasignaaliin liittyviä laajennusdatavirtoja, ’: joilla on toinen bittinopeus, ja multiplekserin ainakin ensimmäisen datavirran ja toisen datavirran yhdistämiseksi kolmanneksi datavirraksi, ja sille on tunnusomais-30 ta, että se lisäksi käsittää ohjausyksikön, joka on jäljestetty vastaanottamaan ohjaustietoa, määrittämään ohjaustiedon perusteella ensimmäisen datavirran ja toisen ' datavirran tavoiteyhdistelmä kolmannessa datavirrassa ja säätämään ensimmäisen : "; datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen ja toiseen bittinopeuteen.
* · » I*** *·» » *»**« * * 6 109393
Keksintö kohdistuu myös menetelmään mediasignaalin koodaamiseksi skaalautu-vasti, joka menetelmä käsittää vaiheet, joissa: - koodataan mediasignaali ensimmäiseksi datavirraksi, joka on mediasignaalia vastaava ydindatavirta, jolla on ensimmäinen bittinopeus, 5 - koodataan mediasignaali toiseksi datavirraksi, joka koostuu joukosta mediasig naalia vastaavia laajennusdatavirtoja, joilla on toinen bittinopeus, ja - multipleksoidaan ainakin ensimmäinen datavirta ja toinen datavirta kolmanneksi datavirraksi, ja jolle menetelmälle on tunnusomaista, että se lisäksi käsittää vaiheet, joissa: 10 - vastaanotetaan ohjaustietoa, - määritetään ohjaustiedon perusteella ensimmäisen datavirran ja toisen datavirran tavoiteyhdistelmä kolmannessa datavirrassa, ja - säädetään ensimmäisen datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen ja toiseen bittinopeuteen.
15 Termillä ohjaustieto tarkoitetaan tässä tietoa, jota käytetään määrittämään ydindata-virran ja laajennusdatavirran tavoiteyhdistelmä yhdistetyssä koodatussa datavirrassa. Mahdolliset siirtonopeuden sekä ydindatavirran (ensimmäisen datavirran) ja laajennusdatavirran (toisen datavirran) bittinopeuksien muutokset aiheuttavat multi-plekseripuskurin täyttöasteen muuttumisen. Näin ollen multiplekseripuskurin täyt-. 20 töasteesta kertova tieto on yksi esimerkki ohjaustiedosta, jota voidaan käyttää to- ' teuttamaan ohjaava takaisinkytkentä ydin- ja laajennusvirtojen tavoitebittinopeuksi- en määrittämiseksi. Ohjaustietona voidaan käyttää myös mm. käyttäjän valintoja ···' liittyen ydin- ja laajennusdatavirtojen yhdistelmään. Käyttäjän valintoja koskevat ...: tiedot voivat olla peräisin lähettävältä ja/tai vastaanottavalta käyttäjältä/pääte- ...: 25 laitteelta.
Eräs keksinnön perusajatuksia on määrittää yhteisesti ydindatavirralle ja laajennus-. . datavirralle sopiva yhdistelmä sen sijaan, että näiden datavirtojen tavoitebittinope- uksia säädettäisiin toisistaan riippumattomasti. Säätämällä datavirtoja esimerkiksi ·;·' multiplekseripuskurin täyttöastetiedon avulla skaalautuvien kooderien toimintaa : ·: 30 voidaan ohjata senhetkisen käyttötarkoituksen ja esimerkiksi tiedonsiirtokanavan , ‘: tilan mukaan. Lisäksi rajallisen siirtokapasiteetin käyttö on optimaalisempaa ver rattuna ratkaisuun, jossa vain laajennusdatavirran bittinopeutta säädetään tai jossa ;;; ydin- ja laajennusdatavirran bittinopeuksia säädetään toisistaan riippumattomasti.
Lisäksi kun sekä ydin- että laajennusdatavirran bittinopeuksia säädetään yhteisesti, 35 on mahdollista ylläpitää tiettyä bittinopeuksien suhdetta. Toisaalta jos esimerkiksi käyttäjä haluaa asettaa puheen etusijalle audioon nähden, on mahdollista alentaa * * ' · I i t ^ * mm t , *»* ia , 7 109393 audiovirran bittinopeutta merkittävästi ja yrittää pitää lähetetyn puheen havaittu laatu ennallaan. Keksinnön soveltaminen mahdollistaa näin ollen monipuolisen skaalautuvan koodauksen. Koodattaessa mediavirtaa keksinnön mukaisesti voidaan säätää ydin- ja/tai laajennusdatavirran bittinopeutta, jolloin käytettävissä oleva siir-5 tokapasiteetti pystytään hyödyntämään tehokkaammin. Tämän ydin- ja laajennusdatavirran yhteisen ohjauksen ansiosta myös multiplekseripuskurin ylivuodon riski pienenee, jolloin optimitapauksessa voidaan pienentää kokonaispuskuritilaa pienentäen samalla myös kulkuaikaviivettä. Tilanteessa, jossa multiplekseripuskurissa on käytettävissä vain rajoitettu määrä tilaa, voidaan keksinnön mukaisesti esimer-10 kiksi alentaa sekä ydin- että laajennusdatavirran bittinopeutta sen sijaan, että alennettaisiin pelkästään laajennusdatavirran bittinopeutta.
Skaalautuva kooderi voi muodostaa joukon laajennusdatavirtoja. Tällöin ydindata-virta ja laajennusdatavirrat, jotka muodostavat laajennusdatavirtajoukon, multiplek-soidaan skaalautuvaksi koodatuksi datavirraksi. Laajennusdatavirtojen määrää voi-15 daan säätää esimerkiksi kun multiplekseripuskurin täyttöaste ylittää tietyn kynnysarvon ja/tai kullekin laajennusdatalle osoitettua bittinopeutta voidaan säätää. Kullekin laajennusdatavirralle osoitettua bittinopeutta voidaan säätää itsenäisesti tai kullekin laajennusdatavirralle osoitettua bittinopeutta voidaan säätää esimerkiksi samalla tavoin.
20 Keksinnön mukainen skaalautuva kooderi voi muodostaa osan koodausjäijestelystä, jossa esimerkiksi koodataan sekä audiosignaaleja että videosignaaleja. Sellainen koodausjärjestely voi käsittää esimerkiksi kaksi skaalautuvaa kooderia (yhden audiosignaalille ja yhden videosignaalille) tai yhden skaalautumattoman kooderin ja yhden skaalautuvan kooderin.
25 Keksintöä on seuraavassa selostettu yksityiskohtaisemmin viitaten keksinnön edullisiin suoritusmuotoihin ja oheisiin kuviin, joissa kuva 1 esittää kaavamaisesti tekniikan tason mukaista skaalautuvaa kooderia ja : ‘ vastaavaa dekooderia, •. kuva 2 esittää kaavamaisesti tekniikan tason mukaista skaalautuvaa kooderia, 30 jossa on puhekooderi ja audiokooderi, kuva 3 esittää kaavamaisesti kuvassa 2 esitettyä skaalautuvaa kooderia vastaavaa tekniikan tason mukaista dekooderia, 8 109393 kuva 4 esittää kaavamaisesti keksinnön erään ensimmäisen edullisen suoritusmuodon mukaista skaalautuvaa kooderia, kuva 5 esittää kaavamaisesti keksinnön erään toisen edullisen suoritusmuodon mukaista skaalautuvaa kooderia, 5 kuva 6 esittää kaavamaisesti keksinnön erään kolmannen edullisen suoritusmuodon mukaiseen ydinkooderiin liittyvää ohjausyksikköä, kuva 7 esittää kaavamaisesti keksinnön erään neljännen edullisen suoritusmuodon mukaiseen ydinkooderiin liittyvää ohjausyksikköä, kuva 8 esittää kaavamaisesti keksinnön erään viidennen edullisen suoritusmuo-10 don mukaiseen laajennuskooderiin liittyvää ohjausyksikköä, kuva 9 esittää kaavamaisesti keksinnön erään kuudennen edullisen suoritusmuodon mukaiseen ydinkooderiin ja laajennuskooderiin liittyvää ohjausyksikköä, kuva 10 esittää keksinnön mukaista menetelmää vastaavaa vuokaaviota, ja 15 kuva 11 esittää kaavamaisesti keksinnön erään seitsemännen edullisen suoritusmuodon mukaista audio-ja videovirtojen skaalautuvaa kooderia, kuva 12 esittää kaavamaisesti keksinnön mukaista H.324-multimediapäätelaitetta, ja kuva 13 esittää erästä esimerkinomaista keksinnön mukaista langatonta multime-20 diapäätelaitetta.
Kuvia 1-3 käsiteltiin edellä tekniikan tason mukaisten skaalautuvien kooderien -, ; selostuksen yhteydessä.
’,..: Keksinnön yksityiskohtaisessa selostuksessa käytetään esimerkkinä yhtä laajennus- ... datavirtaa. Keksinnön mukainen skaalautuva kooderi voi myös muodostaa laajen- , · ·. 25 nusdatavirtojen joukon, joka käsittää useamman kuin yhden laajennusdatavirran.
Kuvassa 4 on esitetty kaavamaisesti keksinnön erään ensimmäisen edullisen suoritusmuodon mukainen skaalautuva kooderijäijestely 400. Se käsittää skaalautuvan kooderin 410 ja ohjausyksikön 420, joka on järjestetty säätämään ydindatavirran 102 ja laajennusdatavirran 103 bittinopeuksia. Ohjausyksikkö 420 vastaanottaa 30 ohjaustiedon 401, jota se käyttää määrittäessään ydin- ja laajennusdatavirran tavoi- ? » I » J ,··, »·. » * t , » » * » ti * ' l . * I ' * ^ * * » « · »»»·** * * < i » 9 109393 teyhdistelmän. Tavallisesti ydin- ja laajennusdatavirralle määritetään sopivat tavoi-tebittinopeudet, jotka voivat olla keskimääräisiä tavoitebittinopeuksia ja/tai tavoi-temaksimibittinopeuksia. Tavoiteyhdistelmän määrittämisen lisäksi ohjausyksikkö 420 voi myös tarkkailla ydindatavirran ja laajennusdatavirran 402, 403 senhetkisiä 5 bittinopeuksia ja esimerkiksi säätää kooderia siten, että valittu tavoitebittinopeus saavutetaan. Käytössä olevia bittinopeuksia mitataan tyypillisesti skaalautuvan koo-derin 410 lähtöpuskurien 431, 432 avulla.
Kuvassa 5 on esitetty kaavamaisesti keksinnön erään toisen edullisen suoritusmuodon mukainen skaalautuva kooderijärjestely 500. Tämä skaalautuva kooderi 500 10 käsittää esimerkinomaisesti puheydinkooderin 210 ja audiolaajennuskooderin 230. Puhekooderi ja audiokooderi ovat tyypillisesti samanlaisia kuin kuvan 2 yhteydessä esitetyt kooderit. Puhekooderi voi olla esimerkiksi vaihtuvanopeuksinen puhekooderi tai moninopeuspuhekooderi, jolla on tietty joukko käytettävissä olevia koodausalgoritmeja, jotka tuottavat koodattua puhetta eri nimellisillä bittinopeuksilla.
15 Vaihtuvanopeuksinen puhekooderi voi olla esimerkiksi sellainen vaihtuvanopeuksinen kooderi, jota on selostettu dokumentissa “Toll quality variable rate speech codec”, Pasi Ojala, Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing, Munich, Germany, April 1997. Moninopeuspu-he[kooderi] voi olla esimerkiksi 3GPP AMR (Adaptive Multi-Rate) -puhekooderi.
20 Kuvassa 5 on esitetty esimerkkinä kaksi mahdollista ohjaustiedon lähdettä. Ohjaustietona voidaan käyttää multiplekseripuskurin täyttöasteesta kertovaa tietoa 401b. Esimerkiksi kun tiedonsiirtokanavan siirtokapasiteetti muuttuu dynaamisesti tai jos laajennusdatavirran bittinopeus kasvaa äkillisesti tietyn ajan, vaarana voi olla multiplekseripuskurin ylivuoto, kuten edellä tekniikan tason selostuksen yhteydessä ku-25 vattiin. Keksinnön mukaisesti multiplekseripuskurin ylivuodon uhatessa on mahdollista pienentää ydindatavirran ja/tai laajennusdatavirran tavoitebittinopeutta yh-distelmädatavirran bittinopeuden alentamiseksi.
": Kuvassa 5 on esitetty myös syöttöelin 510 käyttäjän valintatietojen 501 vastaanottoa varten. Syöttöelin on tyypillisesti osa multimediapäätelaitetta, johon kooderi 500 30 kuuluu. Syöttöelimelle 501 tuleva valintatieto 501 voi olla peräisin useista eri läh-; · teistä. Syöttö voi tulla lähettävän päätelaitteen käyttäjältä, jolloin syöttöelin tyypilli sesti on osa multimediapäätelaitteen käyttöliittymää. Termillä käyttöliittymä tarkoitetaan esimerkiksi näppäimistön, näytön ja sopivan ohjelmiston muodostamaa kokonaisuutta käyttäjän antamien komentojen muuttamiseksi tietyllä tavalla muo-35 toilluksi valintatiedoksi. Tällaisessa ratkaisussa käyttäjän valintaa voidaan ohjata myös esimerkiksi liukukytkimellä, jolloin liukukytkimen asettaminen yhteen ää- * t I , , . , ! ' « » , * f , * * * » » ♦ · I * , , ****** > *''»»**,,* * · » * * !, I i * * * · » 10 109393 riasentoon merkitsee täyttä etusijaa korkealaatuiselle puheäänelle ja kytkimen asettaminen toiseen ääriasentoon merkitsee täyttä etusijaa korkealaatuiselle audiolle ja kytkimen asettaminen jonnekin kahden ääriasennon välille merkitsee kytkimen sijainnin mukaista kompromissia puheen ja audion välillä. Syöttötieto voi myös 5 tulla jostakin ulkoisesta lähteestä, esimerkiksi vastaanottavalta käyttäjältä, jolloin syöttöelin on osa multimediapäätelaitteen vastaanottotoimintoja. Syöttötieto voidaan vastaanottaa esimerkiksi osana puhelunohjaus- tai kaistansisäistä merkinantoa.
Tieto voidaan toimittaa viestiyhteyden alussa tai sitä voidaan päivittää yhteyden aikana. Lisäksi multimediapäätelaitteeseen tai itse kooderiin voidaan tallentaa tiet-10 tyjä ennalta asetettuja arvoja, jotka ilmaisevat ydin- ja laajennusdatavirran vastaavia yhdistelmiä. Nämä ennalta asetetut arvot voivat esimerkiksi riippua siirtokanavan bittinopeudesta.
Valintatieto 501 ilmoittaa ydin- ja laajennusdatavirran 102, 103 halutun yhdistelmän skaalautuvassa koodatussa datavirrassa 104, ja mahdolliset vaihtoehdot käsit-15 tävät kaikki kombinaatiot yhden bittivirran täydestä alisteisuudesta (0%) täyteen etusijaan (100%) kaikki välimuodot mukaan lukien. Valintatieto 501 muunnetaan ohjaustiedoksi 401a, ja tämä ohjaustieto 401a syötetään puhe-ja audiobittinopeuden ohjausyksiköille 421, 422. Puhebittinopeuden ohjausyksikkö 421 ja audiobittinopeuden ohjausyksikkö 422 on jäljestetty säätämään koodauksen tavoitebittinopeuk-20 siä valintatiedon asettamien haluttujen suhteiden mukaisesti. Tämän jälkeen koode-rit 210, 230 on järjestetty toimimaan mainituilla tavoitebittinopeustasoilla. Tyypillisesti, jos etusija on korkealla puhelaadulla, ohjaustieto 401a saa ohjausyksiköt asettamaan suhteellisen korkean tavoitebittinopeuden ydinkooderille ja suhteellisen «' alhaisen tavoitebittinopeuden audiokooderille. Tavoitebittinopeudet voivat olla 25 keskimääräisiä bittinopeuksia ja/tai maksimibittinopeuksia. Seuraavassa on selostettu tarkemmin tapoja, joilla kooderi on jäljestetty säätämään bittinopeutta.
Tilanteessa, jossa on odotettavissa, että skaalautuvaa koodattua datavirtaa vastaan-': ottava päätelaite pystyy dekoodaamaan vain ydindatavirran, on suotavaa, että ydin- datavirralla on suurempi bittinopeus kuin laajennusdatavirralla. On esimerkiksi 30 mahdollista, että ennen datan varsinaisen koodauksen aloittamista multimedia-istuntoon osallistuvat päätelaitteet tiedottavat toisilleen koodaus- ja dekoodausky-vystään. Tätä tietoa voidaan käyttää ohjaustietona. On järkevää antaa suurempi prioriteetti vastaanottavalta päätelaitteelta/käyttäjältä tulevalle ohjaustiedolle kuin .. lähettävältä päätelaitteelta/käyttäjältä tulevalle.
35 Kuten kuva 5 osoittaa, ydindatavirran käytössä olevaa bittinopeutta 402 tai laajennusdatavirran käytössä olevaa bittinopeutta 403 voidaan tarkkailla ja käyttää ydin- 11 109393 ja laajennuskooderien ohjaukseen. Lisäksi nuoli 502 kuvassa 5 kuvaa mahdollista tietojen vaihtoa ohjausyksikköjen 421 ja 422 välillä. Ydin- ja laajennusdatavirran tavoitebittinopeuksien yhteinen ohjaus voidaan toteuttaa toistensa kanssa kommunikoivina erillisinä ohjausyksikköinä tai vaihtoehtoisesti erillisinä ohjausyksikköinä, 5 joilla on yhteinen logiikka, joka mahdollistaa bittinopeuksien yhteisen ohjauksen. Lisäksi on mahdollista, että toteutuksessa on vain yksi ohjausyksikkö, joka valitsee tavoitebittinopeudet ja tarkkailee sekä ydinkooderin että laajennuskooderin käytössä olevia bittinopeuksia.
Keksinnön mukainen kooderi voidaan toteuttaa laitetoteutuksena, ohjelmistototeu-10 tuksena tai niiden yhdistelmänä. Se voi olla esimerkiksi tietokoneohjelma, joka käsittää tietokoneohjelmakoodivälineet, jotka on järjestetty suorittamaan tarvittavat vaiheet (esimerkiksi keksinnön mukaisen menetelmän vaiheet), kun mainittu ohjelma suoritetaan tietokoneessa. Tietokoneohjelma voi sijaita tietokoneluettavalla välineellä.
15 Kuvassa 6 on kaavamaisesti esitetty keksinnön erään kolmannen edullisen suoritusmuodon mukaiseen vaihtuvanopeuksiseen ydinkooderiin 210 liittyvä ohjausyksikkö 421. Vaihtuvanopeuksinen kooderi voi olla esimerkiksi vaihtuvanopeuksinen puhekooderi. Ohjaustarkoituksia varten ydinkooderilta 210 tulevan ydindatavirran 102 bittinopeutta tarkkaillaan ja se syötetään takaisinkytkentäsuodattimelle 601, .:· 20 jossa se keskiarvoistetaan bittinopeuden lyhytaikaisten vaihtelujen tasaamiseksi.
Tällä tavoin saatu arvioitu keskimääräinen bittinopeus 611 vähennetään ydinkooderin 210 tavoitebittinopeudesta 612, jolloin saadaan virhesignaali 613, joka syötetään ohjaimelle 603 ydinkooderin 210 ohjaussignaalin 614 muodostamiseksi. Puhekoo-derissa käytettyä koodausalgoritmia säädetään ohjaimelta saadun ohjaussignaalin 25 614 mukaan. Säädön yksityiskohdat riippuvat koodausalgoritmista: tyypillisesti esimerkiksi säädetään alkuperäistä mediasignaalia vastaavien kertoimien kvan-tisointia. Ohjaimessa 603 voidaan käyttää mitä tahansa ohjausalgoritmia tai logiik-: kaa. Yksi mahdollisuus on esimerkiksi PI-tyyppinen (Proportional Integral) ohjaus, joka on alan ammattimiehen yleisesti tuntema. Tavoitebittinopeus 612 määritetään ; 30 tavoitebittinopeuden määritysyksikössä 602, joka on myös osa ohjausyksikköä 421.
Ohjaustieto 401 vaikuttaa tavoitebittinopeuden määritykseen, joka tyypillisesti suo-J ritetaan yhdessä laajennuskooderin 230 tavoitebittinopeuden määrityksen kanssa.
| Nuoli 502 kuvassa 6 kuvaa tiedon vaihtoa näiden ohjausyksikköjen välillä.
Ohjaussilmukan tehtävänä on oleellisesti ohjata arvioitu keskimääräinen bittinopeus 35 611 seuraamaan annettua tavoitebittinopeutta 612, ja syöttösignaalia 101 voidaan pitää häiriönä ohjaussilmukassa. Esimerkiksi lähdeohjatun vaihtuvanopeuksisen 12 109393 puhekooderin tapauksessa bittinopeus valitaan käyttäen mukautuvia raja-arvoja. Ohjaimelta 603 tulevaa ohjaussignaalia 614 voidaan käyttää säätökertoimena puhekooderin 210 mukautuvan raja-arvon valinnassa. Yksityiskohtaisempi selostus mukautuvien raja-arvojen käytöstä bittinopeuden ohjaamiseksi on luettavissa esimer-5 kiksi dokumentista “Toll quality variable rate speech codec”, Pasi Ojala, Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing, Munich, Germany, April 1997. Keskimääräisen bittinopeuden lisäksi myös puhekooderin maksimibittinopeutta voidaan säädellä rajoittamalla suurinta bittino-peutta vaativien koodikirjojen käyttöä. Sovellettaessa puhekooderin keskimääräisen 10 bittinopeuden ja maksimibittinopeuden ohjausta koodatulle ydindatavirralle 102 voidaan asettaa jokin tietty tavoitetaso.
Kuvassa 7 on kaavamaisesti esitetty keksinnön erään neljännen edullisen suoritusmuodon mukaiseen ydinkooderiin 210 liittyvä ohjausyksikkö 421. Tässä tapauksessa ydinkooderi 210 on moninopeuskooderi, joka käsittää joukon erillisiä koodausal-15 goritmeja, joista kukin tuottaa koodattua puhetta tietyllä bittinopeudella. Ohjaustieto 401 syötetään tavoitebittinopeuden määritysyksikköön 602, jossa määritetään ydin-kooderin 210 tavoitebittinopeus. Se määritetään yhdessä laajennusdatavirran tavoitebittinopeuden kanssa. Nuoli 502 kuvassa 7 kuvaa tiedon vaihtoa ydinohjausyksi-kön 421 ja laajennusohjausyksikön 422 välillä. Määritetty tavoitebittinopeus 612 20 syötetään koodaustilan valintayksikölle 701, joka valitsee sopivan koodausalgoritmin ja lähettää valitun koodausalgoritmin ilmaisevan ohjaussignaalin 711 ydinkoo-; derille 210.
Kuvassa 8 on kaavamaisesti esitetty keksinnön erään viidennen edullisen suoritusmuodon mukaiseen laajennuskooderiin 230 liittyvä ohjausyksikkö 422. Laajennus-25 kooderi on tyypillisesti vaihtuvanopeuksinen kooderi. On mahdollista esimerkiksi tarkkailla laajennusdatavirran 103 keskimääräistä bittinopeutta käyttäen suodatinta 801, joka tasoittaa bittinopeuden lyhytaikaisia vaihteluja ja tuottaa arvioidun keski-: määräisen bittinopeuden 811. Tavoitebittinopeus 812, joka valitaan tavoitebittino- peuden valintayksikössä 802 yhdessä ydinkooderin tavoitebittinopeuden kanssa : 30 (vrt. nuoli 502 kuvassa 8) ohjaustiedon 401 avulla, syötetään yhdessä keskimääräi sen bittinopeuden 811 kanssa bittinopeuden säätöyksikölle 803. Tyypillisesti vaih- » · ' tuvanopeuksisen audiokooderin lähtöbittinopeutta säädetään esimerkiksi valitse- ; ’ maila sopiva kvantisointitarkkuus audiokooderin muodostamille taajuusalueen muunnoskertoimille. Lähtöbittinopeutta voidaan myös säätää säätämällä audiokais-35 tanleveyttä. Termillä audiokaistanleveys tarkoitetaan koodattavan signaalin taajuuskaistaa. Se voi olla esimerkiksi 0-12 kHz tai 0-16 kHz. Audiokaistanleveyden kas- 13 109393 väessä myös audiosignaalin esittämiseen tarvittavien taajuusaluekertoimien määrä kasvaa.
Kuvassa 9 on kaavamaisesti esitetty keksinnön erään kuudennen edullisen suoritusmuodon mukaiseen ydinkooderiin 210 ja laajennuskooderiin 230 liittyvä ohjaus-5 yksikkö 420. Tässä ydinkooderi 210 käsittää joukon käytettävissä olevia koodausalgoritmeja, jotka tuottavat koodattua puhetta eri bittinopeuksilla. Ohjausyksikkö 420 käsittää nopeudenmääritysalgoritmiyksikön (RDA-yksikön) 901, jossa analysoidaan signaalin 101 sisältö. Tässä kuvattu nopeudenmääritysalgoritmi analysoi audiosignaalin puhesisällön, mutta on mahdollista käyttää mitä tahansa signaalisisällön 10 analysoijaa. Nopeudenmääritysalgoritmiyksikkö 901 valitsee koodausalgoritmin, joka tuottaa laajennusdatavirran, jolla on pienin mahdollinen bittinopeus ja samalla kuitenkin riittävä audiolaatu. Valintatekijöinä voidaan käyttää esimerkiksi pitkän aikavälin jaksollisuusvahvistusta ja pitkän aikavälin ennustusvahvistusta. Pitkän aikavälin jaksollisuus viittaa signaalissa esiintyviin perustaajuuksiin; jaksolliset 15 signaalit tuottavat suuren pitkän aikavälin ennustusvahvistuksen ja tyypillisesti ilmaisevat soinnillisia äänteitä. Hyvän laadun saavuttamiseksi tarvitaan jaksollisten komponenttien tarkkaa koodausta. Tämä tyypillisesti merkitsee sellaisen koodausalgoritmin valintaa, joka tuottaa koodattua puhetta suhteellisen suurella bittino-peudella. Toisaalta pieni pitkän aikavälin ennustusvahvistus tyypillisesti ilmaisee 20 soinnitonta äännettä, eikä pitkän aikavälin koodausta tyypillisesti tarvita. Tämä merkitsee, että koodattavan signaalin tarkkaan esitykseen tarvitaan pienempää bitti-nopeutta. Lyhyen aikavälin ennustus on toinen audiodatan, erityisesti puhedatan, • koodauksessa usein käytetty menetelmä, ja tyypillisesti siihen liittyy signaalispekt- : rin (taajuusspektrin) mallinnus käyttäen lineaarista ennustavaa koodausta (LPC).
; 25 Hyvä LPC-sopivuus tavallisesti ilmaisee, että signaali sisältää puhetta ja vaatii siten suurta ydinbittinopeutta hyvän puheenlaadun saavuttamiseksi.
Lisäksi ydinkoodausalgoritmin valintatekijänä voidaan käyttää esimerkiksi dekoo-i datun ydindatavirran signaali-kohinasuhdetta (SNR). Kaikki koodausalgoritmit .: voidaan esimerkiksi suorittaa rinnakkain ja valita niistä se, joka antaa parhaan sig- 30 naali-kohinasuhteen. Lisäksi ydinkooderin sopivan koodausalgoritmin tai tavoite-bittinopeuden valinnassa voidaan käyttää signaalin energia-ja taajuussisältöä.
Tyypillisesti ydin- ja laajennusdatavirtojen bittinopeuksia säädetään toisistaan riippumattomasti sen jälkeen, kun datavirtojen tavoitebittinopeudet on määritetty yhteisesti. Vaikka tavoitebittinopeudet määritetään yhteisesti, esimerkiksi laajennusdata-35 virran tavoitebittinopeutta (812) voidaan muuttaa useammin kuin ydindatavirran * · * * * * * * ·» *»*· *» * » · *· I I « 14 109393 tavoitebittinopeutta (612). Tämä voi olla edullista esimerkiksi kun laajennuskooderi on vaihtuvanopeuksinen kooderi ja ydinkooderi on moninopeuskooderi.
Kuvassa 10 on esitetty esimerkkinä keksinnön mukaista menetelmää vastaava vuo-kaavio, jossa ydinkooderin ja laajennuskooderin tavoitebittinopeudet määritetään 5 yhteisesti ohjaustiedon avulla. Vaihe 1001 suoritetaan koodauksen alussa alustavan ohjaustiedon määrittämiseksi. Alustava ohjaustieto voi olla esimerkiksi ennalta määrätty oletusasetus tai se voi olla peräisin esimerkiksi lähettävältä käyttäjäl-tä/päätelaitteelta tai vastaanottavalta käyttäjältä/päätelaitteelta. Vaiheessa 1002 määritetään ydindatavirran ja laajennusdatavirran tavoiteyhdistelmä alustavan ohjaus-10 tiedon mukaisesti. Sen jälkeen suoritetaan koodausprosessin aikana vaiheiden 1003-1010 muodostamaa silmukkaa. Vaiheessa 1003 määritetään käytettävissä oleva multiplekseripuskurin tila. Jos puskuritilaa on käytettävissä riittävästi (puskurin täyttöaste on esimerkiksi alle tietyn raja-arvon Ti vaiheessa 1004), ydin- ja laa-jennusdatavirtojen tavoitebittinopeudet määritetään vaiheessa 1005 käyttäen ohja-15 ustietona esimerkiksi RDA-tietoa ja käyttäjän valintatietoa. Todellinen siirtonopeus voidaan esimerkiksi arvioida puskurin täyttöasteesta ja ydin- ja laajennusdatavirto-jen bittinopeuksista. RDA määrittää esimerkiksi tietyn bittinopeuden ydindatavir-ralle, ja edellyttäen että siirtonopeus todennäköisesti riittää siirtämään datavirran, joka sisältää ydindatavirran, jonka bittinopeus on RDA:n määräämä, ja laajennus-20 datavirran, jonka bittinopeus määräytyy sellaisen valintatiedon mukaan, joka ilmoittaa ydin- ja laajennusdatavirran tavoitebittinopeuksien suhteen, RDA:n avulla saadut bittinopeudet voidaan sallia. Jos RDA ehdottaa liian suurta bittinopeutta, . haluttu bittinopeuksien suhde voidaan säilyttää alentamalla ydin- ja laajennusdata- : virtojen bittinopeuksia vastaavasti. Jos RDA ehdottaa niin pientä bittinopeutta ydin- 25 datavirralle, että osa käytettävissä olevasta siirtokapasiteetista jäisi käyttämättä tietyllä ydin- ja laajennusdatavirtojen yhdistelmällä, voidaan valita suurempi tavoite-bittinopeus ydindatavirralle ja vastaavasti laajennusdatavirralle.
• Jos puskurin täyttöaste ylittää esimerkiksi ensimmäisen raja-arvon T} (ilmaisten, , · että multiplekseripuskurin ylivuodon vaara on lisääntynyt) mutta jää toisen raja- : 30 arvon T2 alle (vaihe 1006), ydin- ja/tai laajennusdatavirtojen bittinopeuksia voidaan rajoittaa esimerkiksi käyttäjän valintatiedon tai oletusarvotiedon mukaisesti vaiheessa 1007 säätämällä ydin- ja/tai laajennusdatavirtojen tavoitebittinopeuksia. Jos ' multiplekseripuskurin täyttöaste ylittää toisen raja-arvon T2 (vaihe 1008) ilmaisten, että multiplekseripuskuri on oleellisesti täynnä, ydin- ja laajennusdatavirtojen bitti-35 nopeuksia rajoitetaan lisää vaiheessa 1009. Tämä voi tarkoittaa esimerkiksi, että laajennuskooderia ei käytetä lainkaan ja esimerkiksi moninopeusydinkooderin tapa- 15 109393 uksessa valitaan koodausalgoritmi, joka tuottaa pienimmän bittinopeuden omaavan ydindata virran.
Mahdollisen ylivuototilanteen mentyä ohi puskurin täyttöaste alenee. Tämä merkitsee, että jossakin vaiheessa mahdollisen ylivuototilanteen jälkeen multiplekseripus-5 kurin täyttöaste on pienempi kuin T2 ja ydin- ja laajennusdatavirtojen tavoitebitti-nopeuksia voidaan säätää halutun bittinopeussuhteen mukaisesti. Lisäksi kun multi-plekseripuskurin täyttöaste alittaa arvon Ti, voidaan mahdollisesti käyttää RDA:n määräämää tavoitebittinopeutta ydindatavirralle.
On myös mahdollista antaa tai päivittää käyttäjän valintatietoja tai muita ohjaustie-10 toja koodausprosessin aikana. Siinä tapauksessa ydindatavirran ja laajennusdatavir-ran tavoiteyhdistelmä määräytyy annetun/päivitetyn ohjaustiedon mukaan vaiheiden 1003-1009 muodostamassa silmukassa.
Sen jälkeen, kun ydin- ja laajennusdatavirtojen tavoitebittinopeudet on määritetty vaiheessa 1005 (tai vaiheessa 1007 tai 1009), ydin- ja laajennusdatavirtojen bittino-15 peuksia säädetään määritettyjen tavoitebittinopeuksien mukaisesti vaiheessa 1010. Bittinopeuksia voidaan säätää vaiheessa 1010 esimerkiksi kuvissa 7-9 esitettyjen järjestelyjen avulla. Tyypillisesti tämä bittinopeuksien säätö on jatkuva prosessi, joka on käynnissä myös vaiheiden 1003-1009 suorituksen aikana. Säädössä käytettäviä tavoitebittinopeuksia päivitetään (vaiheet 1005, 1007, 1009) esimerkiksi joka 20 kerran vastaanotettaessa tieto multiplekseripuskurin täyttöasteesta.
• Kuvassa 10 ei ole erikseen esitetty koodattavan datan vastaanottoa, varsinaista koo dausta tai ydin- ja laajennusdatavirtojen multipleksointia yhdistetyksi datavirraksi. Tyypillisesti nämä kaikki kuitenkin suoritetaan keksinnön mukaisessa menetelmässä.
25 On myös skaalautuvia videokoodereita, jotka tyypillisesti käsittävät peruskerroksen (ydin)koodauksen ja laajennuskerroksen koodauksen toteutettuna yhdessä ja samas-.: sa kooderissa. Näin ollen kuva 4 esittää kaavamaisesti myös tyypillistä keksinnön : mukaista skaalautuvaa videokooderia. Videojakso koostuu sarjasta peräkkäin esi tettäviä kuvaruutuja eli nk. kehyksiä, joita erottaa toisistaan tietty aikaväli. Videon 30 pakkaus/koodausmenetelmät perustuvat videosekvensseissä esiintyvän toiston, ns. redundanssin, sekä havaitsemisen kannalta merkityksettömien osien vähentämiseen.
.: Videosekvenssien redundanssi voi olla tila-, aika- tai spektriredundanssia. Tilare- dundanssilla tarkoitetaan kuvan vierekkäisten pikselien korrelaatiota. Aikaredun-danssi viittaa videosekvenssin peräkkäisten kuvien samankaltaisuuteen. Pienentä- 16 109393 mällä aikaredundanssia tietty kuvasarja voidaan esittää pienemmällä datamäärällä, jolloin kuvadata tiivistyy. Tämä voidaan saada aikaan käyttämällä liikkeen kompen-sointitietoja, jotka kuvaavat käsiteltävän ja sitä edeltävän (referenssi)kuvan välistä liikettä. Käytännössä siis käsiteltävä kuva ennustetaan edeltävästä kuvasta. Spektri-5 redundanssilla tarkoitetaan tietyn kuvan eri värikomponenttien korrelaatiota.
Skaalautuva videokoodaus voi perustua aikaskaalautuvuuteen, signaali-kohinasuhdeskaalautuvuuteen tai tilaskaalautuvuuteen. Aikaskaalautuvuus tarjoaa mekanismin, jonka avulla havaittavissa olevaa laatua voidaan parantaa kasvattamalla kuvan näyttönopeutta. Tämä saadaan aikaan valitsemalla peräkkäisten refe-10 renssikuvien pari ja ennustamalla joko parin toisen kuvan tai parin molempien kuvi en avulla lisäkuvia. Ennustetut lisäkuvat voidaan sitten esittää kahden referenssikuvan välissä. Ennustettuja lisäkuvia ei käytetä referenssikuvina, so. niiden avulla ei koskaan ennusteta eikä muutoinkaan koodata muita kuvia. Näin ollen ne voidaan hylätä vaikuttamatta tulevien kuvien laatuun, ja siten ne mahdollistavat aikaskaa-15 lautuvuuden. Tilaskaalautuvuus ja signaali-kohinasuhdeskaalautuvuus liittyvät läheisesti toisiinsa, ja niiden ainoa ero onkin tilaskaalautuvuuden mahdollistama suurempi tilaresoluutio. Signaali-kohinasuhdeskaalautuvuuteen liittyy moninopeusbit-tivirtojen muodostaminen. Se mahdollistaa koodausvirheiden korjaamisen, millä viitataan alkuperäisen kuvan ja siitä peruskerroksen datavirran avulla muodostetun 20 kuvan välisiin eroihin. Tämä saadaan aikaan käyttämällä tarkempaa kvantisoijaa erotuskuvan koodaukseen laajennuskerroksessa. Tämä lisätieto kasvattaa tuotetun kokonaiskuvan signaali-kohinasuhdetta.
Tilaskaalautuvuudessa moniresoluutioisten bittivirtojen muodostus voi tapahtua erilaisten näyttövaatimusten ja/tai -rajoitusten mukaisesti. Se on oleellisesti sama 25 asia kuin signaali-kohinasuhdeskaalautuvuus sillä erotuksella, että spatiaalinen laa-jennuskerros pyrkii korvaamaan koodaushäviön muodostetun referenssikerroskuvan ylösnäytteistetyn version ja alkuperäisen kuvan suurempiresoluutioisen version välillä. Jos esimerkiksi referenssikerroksella on QCIF-resoluutio (quarter common intermediate format, 176x144 pikseliä) ja laajennuskerroksella on CIF-resoluutio ; 30 (352x288 pikseliä), referenssikerroksen kuva on tällöin skaalattava niin, että laajen- nuskerroksen kuva voidaan ennustaa siitä. QCIF-standardi sallii resoluution kasvattamisen kaksinkertaiseksi vain pystysuunnassa, vain vaakasuunnassa tai sekä pysty- että vaakasuunnassa yhden laajennuskerroksen osalta. Laajennuskerroksia , > voi siten olla useampia, joista kussakin kuvan resoluutio kasvaa edelliseen kerrok- 35 seen verrattuna.
» * M ' * » * * » » i t i t * · rt* · t > · ·
• I t * * » »I · ** t I I I * » * »I»*· I
17 109393
Skaalautuvissa videokoodereissa laajennusdatavirta tyypillisesti käsittää ennustettuja lisäkuvia (aikaskaalautuvuus) ja/tai lisätietoja alkuperäistä kuvaa kuvaavista kertoimista. Keksinnön mukaisessa skaalautuvassa videokooderissa peruskerrosku-van tarkkuutta ja laajennuskerroskuvan tarkkuutta tyypillisesti säädetään säätämällä 5 kertoimien kvantisointia tai, aikaskaalautuvuudessa, myös säätämällä ennustettujen lisäkuvien määrää.
Kuvassa 11 on kaavamaisesti esitetty keksinnön erään seitsemännen edullisen suoritusmuodon mukainen esimerkki järjestelystä, joka käsittää kaksi skaalautuvaa kooderia, kooderin 500 audiosignaalin 101a koodaamiseksi ja kooderin 400 video-10 signaalin 101b koodaamiseksi. Tässä suoritusmuodossa ohjaustieto toimitetaan molempien skaalautuvien kooderien ohjausyksiköille 420, 421, 422. Ohjaustieto voi ilmaista esimerkiksi käyttäjän valinnan audion ja videon välillä ja/tai hienosäätöva-linnan skaalautuvalle audiokooderille 500 ja skaalautuvalle videokooderille 400.
Kuvassa 12 on esitetty erään keksinnön mukaisen multimediapäätelaitteen 20 toi-15 mintalohkokaavio. Multimediapäätelaite 20 on tässä esimerkissä H.324-multimedia-päätelaite. H.324-yhteensopiva multimediatiedonsiirtojärjestelmä, jollainen on esitetty kuvassa 12, käsittää päätelaiteyksikön 20, liitäntäyksikön 31, GSTN-verkon (yleisen kytkentäisen puhelinverkon) 32 ja monipisteohjausyksikön (MCU) 33. H.324-toteutuksissa ei tarvitse olla kaikkia toiminnallisia elimiä. Matkaviestinpää-20 telaitteet voidaan toteuttaa käyttäen liitäntäyksikkönä 31 mitä tahansa sopivaa langatonta rajapintaa (kuten on määritelty dokumentissa H.324 Annex C). Siinä tapauksessa GSTN-verkko on oikeastaan PLMN-verkko (Public Land Mobile Network).
MCU 33 toimii siltana, joka keskitetysti ohjaa tiedon kulkua GSTN-verkossa 32 mahdollistaen tiedonsiirron useiden päätelaiteyksiköiden välillä. Liitäntäyksikkö 31 25 muuntaa multipleksoidut bittivirrat signaaliksi, joka voidaan siirtää GSTN-verkossa, ja muuntaa vastaanotetun signaalin bittivirraksi, joka lähetetään päätelaitteen 20 multipleksointi/demultipleksointiprotokollayksikölle 21. Multipleksointiprotokolla multipleksoi koodatut media-, data- ja ohjausvirrat yhdeksi bittivirraksi lähetystä varten ja demultipleksoi vastaanotetun bittivirran eri mediavirroiksi. Lisäksi se suo-30 riitaa loogisen kehystyksen, jaksonumeroinnin, virheenilmaisun ja virheenkorjauksen esimerkiksi uudelleenlähetyksen avulla kullekin mediatyypille sopivalla tavalla. Järjestelmäohjauksen 26 ohjausprotokolla 22 toteuttaa päästä-päähän -merkinannon multimediapäätelaitteen toimintaa varten ja huolehtii kaikkien muiden päästä-päähän -järjestelmätoimintojen merkinannosta. Se mahdollistaa ominaisuustietojen 35 vaihdon, komentojen ja ilmoitusten signaloinnin sekä sanomat loogisten kanavien avaamiseksi ja niiden sisällön kuvaamiseksi täydellisesti. Dataprotokollat 23 tuke- 19 109393 ulkoinen tietojenkäsittelylaite kuten henkilökohtainen tietokone. Keksinnön mukainen mobiilipäätelaite käsittää lisäksi ainakin yhden keksinnön mukaisen skaalautu-van kooderin; kuvassa 13 on esitetty skaalautuva kooderi 500. Tyypillisesti keksinnön mukainen mobiilipäätelaite käsittää myös vastaavan dekooderin. Lisäksi mo-5 biilipäätelaite käsittää multiplekserin 88 sellaisen yhdistelmädatavirran muodostamiseksi, joka käsittää skaalautuvan kooderin tuottamat ydin- ja laajennusdatavirrat sekä ohjaustietoja. Lisäksi se muodostaa vastaanotetusta datavirrasta dekoodausta varten puretut datavirrat. Multiplekseri on jäljestetty lähettämään koodatut multi-pleksoidut bittivirrat multiplekseripuskuriin 520. Skaalautuva kooderi 500 käsittää 10 ohjausvälineet, jotka on tyypillisesti kytketty ohjausdatan takaisinkytkentäsilmukan avulla ohjaamaan koodausprosessin toimintoja ja jotka vastaanottavat tietoja multi-plekseripuskurin 520 täyttöasteesta, kuten kuvan 5 selostuksen yhteydessä kuvattiin. Vaikka kuvassa 13 on esitetty vain kaksi data virtaa, bittivirtoja voi myös olla enemmän (esimerkiksi ohjausdata, datasovellusten data jne. kuvan 12 mukaisesti).
15 Kunkin datavirran tavoitebittinopeus asetetaan esimerkiksi päätelaitteen vastaanottaman valintatiedon mukaisesti, ja tavoitenopeuksien säädölle määritellään säännöt multiplekseripuskurin ylivuodon varalta edellä kuvatulla tavalla.
Mobiilipäätelaitteen syöttöelin 510 voidaan järjestää vastaanottamaan valintatietoa käyttöliittymän 84 kautta kuten kuvien 5 ja 13 yhteydessä selostettiin. Mobiilipää-20 telaitteen syöttöelin 510 voidaan myös järjestää vastaanottamaan valintatietoa päätelaitteelta, jonka kanssa se kommunikoi, kyseisten kahden päätelaiteyksikön välisen kommunikointiprotokollan toteuttamien ohjaussignaalien avulla. Tuoreimmat j ITU-T:n (ITU Telecommunication Standardization Sector) videopuhelinstandardit, i kuten ITU-T H.324 ja H.323, käyttävät H.245-ohjausprotokollaa yhteyden alustuk- i 25 seen, so. avaamaan loogisia kanavia, vaihtamaan ominaisuustietoja jne. Tätä ohja-usprotokollaa voidaan käyttää lähettämään myös yhteydenaikaisia komentoja ja ilmoituksia, joilla voidaan välittää vastaanottavan käyttäjän/päätelaitteen valintoja koskevia ohjaustietoja lähettävälle päätelaitteelle (vrt. yksikkö 510 kuvassa 12).
Vaikka keksintöä on havainnollistettu ja selostettu eräiden edullisten suoritusmuo-30 tojen avulla, tavalliselle alan ammattimiehelle on selvää, että edullisia suoritusmuotoja voidaan muunnella poikkeamatta oheisten patenttivaatimusten määrittelemästä keksinnön suojapiiristä.
' ♦ * * * » i # » »» ί I 1 I I i J i » ti f it ' ' ' ' * ‘ *> » »· « »» » t » I il*»» »
Sj»» > i ft f t f t I * *«*»»» 1 *»*»♦».» i » · i )»»» »il 1 * ' 1 1 * * * »» *» »» » * i i li» 20 109393
Patenttivaatimukset 1. Skaalautuva kooderi (100) mediasignaalin koodaamiseksi, joka käsittää - ensimmäiset koodausvälineet (210) ensimmäisen datavirran (102) muodostamiseksi, joka ensimmäinen datavirta on mediasignaaliin (101) liittyvä ydindatavirta, 5 jolla on ensimmäinen bittinopeus, - toiset koodausvälineet (230) toisen datavirran (103) muodostamiseksi, joka toinen datavirta käsittää joukon mediasignaaliin liittyviä laajennusdatavirtoja, joilla on toinen bittinopeus, ja - multiplekserin (110) ainakin ensimmäisen datavirran ja toisen datavirran yhdistä-10 miseksi kolmanneksi datavirraksi (104), tunnettu siitä, että se lisäksi käsittää ohjausvälineet (420, 421, 422), jotka on järjestetty vastaanottamaan ohjaustietoa (401), määrittämään ohjaustiedon perusteella ensimmäisen datavirran ja toisen datavirran tavoiteyhdistelmä kolmannessa datavirrassa ja säätämään ensimmäisen datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäi- 15 seen ja toiseen bittinopeuteen.
2. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että ainakin yhdet ensimmäisistä ja toisista koodausvälineistä ovat vaihtuvanopeuksiset koodausvälineet.
3. Patenttivaatimuksen 2 mukainen skaalautuva kooderi, tunnettu siitä, että oh-20 jausyksikössä on välineet (602, 802) tavoitebittinopeuden määrittämiseksi ainakin mainittujen yksien ensimmäisistä ja toisista koodausvälineistä tuottamalle datavir-| ralle ja että ohjausyksikkö on järjestetty säätämään mainitun datavirran bittinopeut- I ta.
4. Patenttivaatimuksen 2 mukainen skaalautuva kooderi, tunnettu siitä, että oh-25 jausyksikkö lisäksi käsittää takaisinkytkentäsilmukan (601, 801), vertailuvälineet ja ohjainyksikön (603, 803); ja - mainittu takaisinkytkentäsilmukka on järjestetty siirtämään tietoja mainitun data-virran arvioidusta todellisesta bittinopeudesta vertailuvälineille; - mainituille vertailuvälineille toimitetaan tavoitebittinopeus ja ne on jäljestetty las-30 kemaan mainitun datavirran arvioidun todellisen bittinopeuden ja tavoitebittinopeuden välinen erotus ja lähettämään laskettu erotus ohjainyksikölle; - mainittu ohjain on jäljestetty lähettämään ohjaussignaali mainituille yksille ensimmäisistä ja toisista koodausvälineistä vasteena mainitun lasketun erotuksen vastaanottamiseen; ja , t , t I * » * ♦ f * tillit * » * I * 1 * » = , , , , , , , > > . i its I · « ***** »
* * * ltt> f « f . » »li» # » · » I » I
I » , »»*»»* » * * » « . ♦ * » * * * * « » . . . * * » · ‘ * I » *

Claims (69)

109393 - mainitut yhdet ensimmäisistä ja toisista koodausvälineistä on järjestetty säätämään mainitun datavirran bittinopeutta ohjaimelta vastaanotetun ohjaussignaalin perusteella.
5. Patenttivaatimuksen 4 mukainen skaalautuva kooderi, tunnettu siitä, että mai-5 nitut yhdet ensimmäisistä ja toisista koodausvälineistä on järjestetty säätämään me- diasignaalia edustavien kertoimien kvantisointia ohjaussignaalin perusteella.
6. Patenttivaatimuksen 4 mukainen skaalautuva kooderi, tunnettu siitä, että mainitut yhdet ensimmäisistä ja toisista koodausvälineistä ovat ensimmäiset koodaus-välineet, jotka käsittävät vaihtuvanopeuksisen audiokooderin.
7. Patenttivaatimuksen 4 mukainen skaalautuva kooderi, tunnettu siitä, että mai nitut yhdet ensimmäisistä ja toisista koodausvälineistä ovat toiset koodausväiineet, jotka käsittävät vaihtuvanopeuksisen audiokooderin.
8. Patenttivaatimuksen 7 mukainen skaalautuva kooderi, tunnettu siitä, että vaihtuvanopeuksinen audiokooderi on järjestetty määrittämään mediasignaalin 15 kaistanleveys ohjaussignaalin perusteella.
9. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että ainakin yhdet ensimmäisistä ja toisista koodausvälineistä käsittävät moninopeuksiset koodausväiineet, joilla on joukko käytettävissä olevia koodausalgoritmeja.
10. Patenttivaatimuksen 9 mukainen skaalautuva kooderi, tunnettu siitä, että oh- 2. jausyksikkö käsittää välineet (602) tavoitebittinopeuden määrittämiseksi ainakin mainittujen yksien ensimmäisistä ja toisista koodausvälineistä tuottamalle datavir-ralle, välineet (701, 901) koodausalgoritmin valitsemiseksi mainitusta joukosta koodausalgoritmeja ja mainitun valitun koodausalgoritmin ilmoittamiseksi mainituille yksille ensimmäisistä ja toisista koodausvälineistä, jotka on järjestetty käyttä-25 mään ilmoitettua koodausalgoritmia.
11. Patenttivaatimuksen 10 mukainen skaalautuva kooderi, tunnettu siitä, että mainitut välineet koodausalgoritmin valitsemiseksi käsittävät nopeudenmääritysvä-lineet(901).
12. Patenttivaatimuksen 9 mukainen skaalautuva kooderi, tunnettu siitä, että mai-30 nitut yhdet ensimmäisistä ja toisista koodausvälineistä ovat ensimmäiset koodaus- välineet, jotka käsittävät moninopeuspuhekooderin. 109393
13. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että se käsittää välineet (602, 802) ensimmäisen tavoitebittinopeuden määrittämiseksi ensimmäiselle datavirralle ja toisen tavoitebittinopeuden toiselle datavirralle yhteisesti mainitun ohjaustiedon perusteella.
14. Patenttivaatimuksen 13 mukainen skaalautuva kooderi, tunnettu siitä, että se lisäksi käsittää multiplekseripuskurin (520) datan tallentamiseksi multiplekseristä lähettämistä varten ja että mainittu multiplekseripuskuri on kytketty ohjausyksikköön mainitun multiplekseripuskurin täyttöastetta koskevan ohjaustiedon (401b) välittämiseksi, mainitun täyttöastetiedon ilmaistessa multiplekseripuskuriin sillä 10 hetkellä tallennetun datan määrää.
15. Patenttivaatimuksen 14 mukainen skaalautuva kooderi, tunnettu siitä, että välineet (602, 802), joilla yhteisesti määritetään ensimmäinen tavoitebittinopeus ensimmäiselle datavirralle ja toinen tavoitebittinopeus toiselle datavirralle, on järjestetty säätämään tavoitebittinopeutta siten, että tavoitebittinopeuksien suhde pysyy 15 oleellisesti vakiona niin kauan kuin puskurin täyttöaste pysyy tietyn ensimmäisen rajan alapuolella.
16. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että ohjausyksikkö on järjestetty vastaanottamaan ohjaustieto (401a), joka ilmoittaa ensimmäisen ja toisen datavirran halutun yhdistelmän.
17. Patenttivaatimuksen 16 mukainen skaalautuva kooderi, tunnettu siitä, että mainittua ensimmäisen ja toisen datavirran halutun yhdistelmän ilmoittavaa ohjaustietoa käytetään määrittämään ensimmäisen datavirran tavoitebittinopeuden ja toisen datavirran tavoitebittinopeuden haluttu suhde.
18. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että 25. se lisäksi käsittää dekoodausvälineet mainitun ensimmäisen datavirran dekoodaa- miseksi dekoodatuksi signaaliksi, ja | - mainitut toiset koodausvälineet on jäljestetty koodaamaan erosignaali, joka on mediasignaalin ja dekoodatun signaalin välinen erotus, mainittujen toisten koodaus-välineiden muodostaessa toisen datavirran, jolla on mainittu toinen bittinopeus.
19. Patenttivaatimuksen 18 mukainen skaalautuva kooderi, tunnettu siitä, että ensimmäiset koodausvälineet ovat puhekooderi ja toiset koodausvälineet ovat au-diokooderi. 109393
20. Patenttivaatimuksen 19 mukainen skaalautuva kooderi, tunnettu siitä, että puhekooderi on moninopeuspuhekooderi ja audiokooderi on vaihtuvanopeuksinen audiokooderi.
21. Patenttivaatimuksen 19 mukainen skaalautuva kooderi, tunnettu siitä, että 5 puhekooderi on vaihtuvanopeuksinen puhekooderi ja audiokooderi on vaihtuvanopeuksinen audiokooderi.
22. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että ensimmäiset koodausvälineet ovat peruskerroksen videokoodausvälineet ja toinen kooderi käsittää ainakin yhdet laajennuskerroksen videokoodausvälineet.
23. Patenttivaatimuksen 1 mukainen skaalautuva kooderi, tunnettu siitä, että se lisäksi käsittää - kolmannet koodausvälineet neljännen datavirran muodostamiseksi, joka on toista mediasignaalia vastaava ydindatavirta, jolla on neljäs bittinopeus, ja -neljännet koodausvälineet viidennen datavirran muodostamiseksi, joka käsittää 15 joukon toista mediasignaalia vastaavia laajennusdatavirtoja, joilla on viides bittinopeus, ja että multiplekseri on jäljestetty yhdistämään ainakin ensimmäinen, toinen, neljäs ja viides datavirta kolmanneksi datavirraksi ja ohjausyksikkö on jäljestetty määrittämään ensimmäisen, toisen, neljännen ja viidennen datavirran tavoiteyhdistelmä 20 kolmannessa datavirrassa ohjaustiedon perusteella ja säätämään mainittujen data-virtojen yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen, toiseen, neljänteen ja viidenteen bittinopeuteen.
24. Multimediapäätelaite (20), joka käsittää skaalautuvan kooderin, joka käsittää ensimmäiset koodausvälineet (210) ensimmäisen datavirran muodostamiseksi, joka 25 ensimmäinen datavirta on mediasignaaliin liittyvä ydindatavirta, jolla on ensimmäinen bittinopeus, toiset koodausvälineet (230) toisen datavirran muodostamiseksi, joka toinen datavirta käsittää joukon mediasignaaliin liittyviä laajennusdatavirtoja, joilla on toinen bittinopeus, ja multiplekserin (110) ainakin ensimmäisen datavirran ja toisen datavirran yhdistämiseksi kolmanneksi datavirraksi, tunnettu siitä, että se 30 lisäksi käsittää ohjausyksikön (420, 421, 422), joka on jäljestetty vastaanottamaan ohjaustietoa (401), määrittämään ohjaustiedon perusteella ensimmäisen datavirran ja toisen datavirran tavoiteyhdistelmä kolmannessa datavirrassa ja säätämään ensimmäisen datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen ja toiseen bittinopeuteen. 109393
25. Patenttivaatimuksen 24 mukainen multimediapäätelaite, tunnettu siitä, että se lisäksi käsittää syöttöelimen (510) ensimmäisen datavirran ja toisen datavirran haluttua yhdistelmää ilmaisevan valintatiedon syöttämiseksi, jolloin mainittu valinta-tieto toimitetaan ohjaustietona ohjausyksikölle.
26. Patenttivaatimuksen 25 mukainen multimediapäätelaite, tunnettu siitä, että mainittu syöttöelin on osa multimediapäätelaitteen käyttöliittymää.
27. Patenttivaatimuksen 26 mukainen multimediapäätelaite, tunnettu siitä, että käyttöliittymä käsittää liukukytkimen.
28. Patenttivaatimuksen 25 mukainen multimediapäätelaite, tunnettu siitä, että 10 mainittu syöttöelin on järjestetty vastaanottamaan ulkoista ohjaustietoa.
29. Patenttivaatimuksen 28 mukainen multimediapäätelaite, tunnettu siitä, että mainittu syöttöelin on jäljestetty vastaanottamaan syöttötietoa tiedonsiirtoverkolta.
30. Patenttivaatimuksen 28 mukainen multimediapäätelaite, tunnettu siitä, että mainittu syöttöelin on järjestetty vastaanottamaan syöttötietoa toiselta multime- 15 diapäätelaitteelta.
31. Patenttivaatimuksen 24 mukainen multimediapäätelaite (1300), tunnettu siitä, että se on mobiiliverkon matkaviestin.
32. Patenttivaatimuksen 24 mukainen multimediapäätelaite, tunnettu siitä, että se on H.324-multimediapäätelaite.
33. Menetelmä mediasignaalin koodaamiseksi skaalautuvasti, joka menetelmä käsittää vaiheet, joissa - koodataan mediasignaali ensimmäiseksi datavirraksi, joka on mediasignaalia vastaava ydindatavirta, jolla on ensimmäinen bittinopeus, - koodataan mediasignaali toiseksi datavirraksi, joka koostuu joukosta mediasig-25 naalia vastaavia laajennusdatavirtoja, joilla on toinen bittinopeus, ja - multipleksoidaan ainakin ensimmäinen datavirta ja toinen datavirta kolmanneksi datavirraksi, tunnettu siitä, että se lisäksi käsittää vaiheet, joissa: - vastaanotetaan (1001, 1003) ohjaustietoa, -määritetään (1002, 1005, 1007) ohjaustiedon perusteella ensimmäisen datavirran 30 ja toisen datavirran tavoiteyhdistelmä kolmannessa datavirrassa, ja - säädetään (1010) ensimmäisen datavirran ja toisen datavirran yhdistelmää kolmannessa datavirrassa vaikuttamalla ensimmäiseen ja toiseen bittinopeuteen. ! * 4 t ; , , , , ‘ ‘ ' * * « r t j , , # ” I * , ‘ , ' f ' ' ' ► t 109393
34. Patenttivaatimuksen 33 mukainen menetelmä, tunnettu siitä, että se lisäksi käsittää vaiheet, joissa: - määritetään ohjaustiedon perusteella ensimmäisen datavirran tavoitebittinopeuden ja toisen datavirran tavoitebittinopeuden haluttu suhde, 5. määritetään yhteisesti mainitut tavoitebittinopeudet, - syötetään kolmas datavirta puskuriin, ja - määritetään puskurin täyttöaste, ja että kun puskurin täyttöaste jää alle tietyn ensimmäisen rajan (T2), mainittujen bittinopeuksien suhde on oleellisesti mainittu haluttu suhde.
35. Patenttivaatimuksen 34 mukainen menetelmä, tunnettu siitä, että kun pusku rin täyttöaste jää alle tietyn toisen rajan (Tj), ensimmäisen datavirran tavoitebittino-peus määritetään mediasignaalin sisällön perusteella.
1. Skalbar koder (100) för kodning av en mediasignal, omfattande 15. första kodningsorgan (210) för generering av en första dataström (102), vilken för- sta dataström är en kämdataström som anknyter tili mediasignalen (101) och som uppvisar en första bithastighet, - andra kodningsorgan (230) för generering av en andra dataström (103), vilken andra dataström omfattar en mängd utvidgningsdataströmmar som anknyter tili me- 20 diasignalen och som uppvisar en andra bithastighet, och - en multiplexer (110) för kombinering av ätminstone den första dataströmmen och den andra dataströmmen tili en tredje dataström (104), kännetecknad av att den dessutom omfattar styrorgan (420, 421, 422), vilka har anordnats att mottaga styrin-formation (401), att pä basis av styrinformationen fastställa en mälkombination av 25 den första dataströmmen och den andra dataströmmen i den tredje dataströmmen och att reglera kombinationen av den första dataströmmen och den andra dataströmmen i den tredje dataströmmen genom att päverka den första och den andra bithastigheten.
2. Skalbar koder enligt patentkrav 1, kännetecknad av att ätminstone ett av de 30 första och de andra kodningsorganen är kodningsorgan med variabel hastighet.
3. Skalbar koder enligt patentkrav 2, kännetecknad av att styrenheten uppvisar organ (602, 802) för att fastställa en mälbithastighet för ätminstone den dataström som genererats av nämnda ena av de första och de andra kodningsorganen och att styrenheten har anordnats att reglera bithastigheten för nämnda dataström. Y: Y :Y *:·*:· .··. *· :>*· ·' Y Y: \.· \ : ‘ :· :Y ‘ ; 109393
4. Skalbar koder enligt patentkrav 2, kännetecknad av att styrenheten dessutom omfattar en äterkopplingsslinga (601, 801), jämförelseorgan och en styrenhet (603, 803); och - nämnda äterkopplingsslinga har anordnats att överföra information om en estime-5 rad verklig bithastighet för nämnda dataström till jämförelseorganen; - till nämnda jämförelseorgan levereras mälbithastigheten och jämförelseorganen har anordnats att beräkna skillnaden mellan den estimerade verkliga bithastigheten och mälbithastigheten för nämnda dataström och sända den beräknade skillnaden tili styrenheten; 10. nämnda styrare har anordnats att sända en styrsignal tili nämnda ena av de första och de andra kodningsorganen i respons pä mottagningen av nämnda beräknade skillnad; och - nämnda ena av de första och de andra kodningsorganen har anordnats att reglera bithastigheten för nämnda dataström pä basis av den frän styraren mottagna styrsig- 15 nalen.
5. Skalbar koder enligt patentkrav 4, kännetecknad av att nämnda ena av de första och de andra kodningsorganen har anordnats att reglera kvantiseringen av de ko-efficienter som representerar mediasignalen pä basis av styrsignalen.
6. Skalbar koder enligt patentkrav 4, kännetecknad av att nämnda ena av de för-20 sta och de andra kodningsorganen är de första kodningsorganen, vilka omfattar en audiokoder med variabel hastighet.
7. Skalbar koder enligt patentkrav 4, kännetecknad av att nämnda ena av de första och de andra kodningsorganen är de andra kodningsorganen, vilka omfattar en audiokoder med variabel hastighet.
8. Skalbar koder enligt patentkrav 7, kännetecknad av att audiokodem med va riabel hastighet har anordnats att fastställa mediasignalens bandbredd pä basis av styrsignalen.
9. Skalbar koder enligt patentkrav 1, kännetecknad av att ätminstone ett av nämnda första och andra kodningsorgan omfattar multihastighets kodningsorgan, 30 vilka uppvisar en mängd användningsbara kodningsalgoritmer. |
10. Skalbar koder enligt patentkrav 9, kännetecknad av att styrenheten omfattar organ (602) för att fastställa mälbithastigheten för den dataström som genereras av nämnda ett av de första och andra kodningsorganen, organ (701, 901) för att väljä kodningsalgoritm bland nämnda mängd kodningsalgoritmer och för att meddela 109393 nämnda valda kodningsalgoritm tili nämnda ett av de första och andra kodningsor-ganen, vilka har anordnats att använda den meddelade kodningsalgoritmen.
11. Skalbar koder enligt patentkrav 10, kännetecknad av att nämnda organ för att väljä en kodningsalgoritm omfattar hastighetsfastställningsorgan (901).
12. Skalbar koder enligt patentkrav 9, kännetecknad av att nämnda ett av de första och andra kodningsorganen är de första kodningsorganen, vilka omfattar en multihastighetstalkoder.
13. Skalbar koder enligt patentkrav 1, kännetecknad av att den omfattar organ (602, 802) för att fastställa en första mälbithastighet för den första dataströmmen 10 och en andra mälbithastighet för den andra dataströmmen gemensamt pä basis av nämnda styrinformation.
14. Skalbar koder enligt patentkrav 13, kännetecknad av att den dessutom omfattar en multiplexerbuffert (520) för lagring av data frän multiplexem för att sändas och att nämnda multiplexerbuffert har kopplats tili styrenheten för förmedling av 15 styrinformation (401b) gällande fyllnadsgraden för nämnda multiplexerbuffert, vil-ken fyllnadsgrad indikerar den mängd data som för tillfället lagrats i multiplexer-bufferten.
15. Skalbar koder enligt patentkrav 14, kännetecknad av att organen (602, 802) medelst vilka gemensamt en första mälbithastighet fastställes för den första data- 20 strömmen och en andra mälbithastighet fastställes för den andra dataströmmen har anordnats att reglera mälbithastighetema pä sä sätt att förhällandet mellan mälbit-hastigheterna hälls väsentligen konstant sä länge som fyllnadsgraden för bufferten halls under en viss första gräns.
16. Skalbar koder enligt patentkrav 1, kännetecknad av att styrenheten har anord-25 nats att mottaga styrinformation (401a) som indikerar en önskad kombination av den första och den andra dataströmmen.
17. Skalbar koder enligt patentkrav 16, kännetecknad av att nämnda styrinformation som indikerar en önskad kombination av den första och den andra dataströmmen används för att fastställa det önskade förhällandet mellan den första dataström- 30 mens mälbithastighet och den andra dataströmmens mälbithastighet. » · ·»*»· » # | | »··»·» ·»· · I * ' 1 ·»»· ··*· , , , , · t I » #»♦»»«»» 109393
18. Skalbar koder enligt patentkrav 1, kännetecknad av att - den dessutom omfattar dekodningsorgan för dekodning av nämnda första data-ström till en dekodad signal, och - nämnda andra kodningsorgan har anordnats att koda en differenssignal som utgör 5 skillnaden mellan mediasignalen och den dekodade signalen, varvid nämnda andra kodningsorgan genererar den andra dataströmmen som uppvisar nämnda andra bit-hastighet.
19. Skalbar koder enligt patentkrav 18, kännetecknad av att de första kodnings-organen är en talkoder och de andra kodningsorganen är en audiokoder.
20. Skalbar koder enligt patentkrav 19, kännetecknad av att talkodem är en mul- tihastighetstalkoder och audiokodem är en audiokoder med variabel hastighet.
21. Skalbar koder enligt patentkrav 19, kännetecknad av att talkodem är en talkoder med variabel hastighet och audiokodem är en audiokoder med variabel hastighet.
22. Skalbar koder enligt patentkrav 1, kännetecknad av att de första kodningsor ganen är videokodningsorgan för ett basskikt och den andra kodem omfattar ätmin-stone ett videokodningsorgan för ett utvidgningsskikt.
23. Skalbar koder enligt patentkrav 1, kännetecknad av att den dessutom omfattar 20. tredje kodningsorgan för generering av en fjärde dataström, vilken är en kämdata- ström som motsvarar en andra mediasignal med en fjärde bithastighet, och i - fjärde kodningsorgan för generering av en femte dataström, vilken omfattar en j mängd utvidgningsdataströmmar som motsvarar den andra mediasignalen med en femte bithastighet, 25 och att multiplexem har anordnats att kombinera ätminstone den första, den andra, den fjärde och den femte dataströmmen tili en tredje dataström, och styrenheten har anordnats att fastställa en mälkombination av den första, den andra, den fjärde och den femte dataströmmen i den tredje dataströmmen pä basis av styrinformationen och att reglera kombinationen av nämnda dataströmmar i den tredje dataströmmen 30 genom att päverka den första, den andra, den fjärde och den femte bithastigheten.
24. Multimediaterminal (20), vilken omfattar en skalbar koder, omfattande första kodningsorgan (210) för generering av en första dataström, vilken första dataström är en kämdataström som anknyter tili mediasignalen och som uppvisar en första bithastighet, andra kodningsorgan (230) för generering av en andra dataström, vil-• · »» »* ♦ »« ♦# *>»·►* *»· ·* · ·· »I *’»»·····# »I·· ♦*·· * * * 109393 ken andra dataström omfattar en mängd utvidgningsdataströmmar som anknyter tili mediasignalen och som uppvisar en andra bithastighet, och en multiplexer (110) för kombinering av ätminstone den första dataströmmen och den andra dataströmmen tili en tredje dataström, kännetecknad av att den dessutom omfattar en styrenhet 5 (420, 421, 422), vilken har anordnats att mottaga styrinformation (401), att pä basis av styrinformationen fastställa en mälkombination av den första dataströmmen och den andra dataströmmen i den tredje dataströmmen och att reglera kombinationen av den första dataströmmen och den andra dataströmmen i den tredje dataströmmen genom att päverka den första och den andra bithastigheten.
25. Multimediaterminal enligt patentkrav 24, kännetecknad av att den dessutom omfattar matningsorgan (510) för matning av valinformation som indikerar en öns-kad kombination av den första dataströmmen och den andra dataströmmen, varvid nämnda valinformation levereras som styrinformation tili styrenheten.
26. Multimediaterminal enligt patentkrav 25, kännetecknad av att nämnda mat-15 ningsorgan är en del av multimediaterminalens användargränssnitt.
27. Multimediaterminal enligt patentkrav 26, kännetecknad av att användargräns-snittet omfattar en glidbrytare.
28. Multimediaterminal enligt patentkrav 25, kännetecknad av att nämnda matningsorgan har anordnats att mottaga yttre styrinformation.
29. Multimediaterminal enligt patentkrav 28, kännetecknad av att nämnda mat ningsorgan har anordnats att mottaga styrinformation fran ett datakommunikations-nät.
30. Multimediaterminal enligt patentkrav 28, kännetecknad av att nämnda matningsorgan har anordnats att mottaga styrinformation frän en andra multimediater- 25 minal.
31. Multimediaterminal (1300) enligt patentkrav 24, kännetecknad av att den är en mobiltelefon i ett mobiltelefonnät.
32. Multimediaterminal enligt patentkrav 24, kännetecknad av att den är en H.324-multimediaterminal. 109393
33. Förfarande för kodning av en mediasignal skalbart, vilket förfarande omfattar steg i vilka - mediasignalen kodas tili en första dataström, som är en kämdataström som mot-svarar mediasignalen och som uppvisar en första bithastighet, 5. mediasignalen kodas tili en andra dataström, som bestär av en mängd utvidgnings- dataströmmar som motsvarar mediasignalen och som uppvisar en andra bithastighet, och - ätminstone den första dataströmmen och den andra dataströmmen multiplexeras tili en tredje dataström, kännetecknat av att den dessutom omfattar steg i vilka: 10. styrinformation mottages (1001, 1003), - en mälkombination av den första dataströmmen och den andra dataströmmen i den tredje dataströmmen fastställes (1002, 1005, 1007) pä basis av styrinformationen, och - kombinationen av den första dataströmmen och den andra dataströmmen i den 15 tredje dataströmmen regleras (1010) genom att päverka den första och den andra bithastigheten.
34. Förfarande enligt patentkrav 33, kännetecknat av att det dessutom omfattar steg i vilka: - pä basis av styrinformationen fastställes ett önskat förhällande mellan en mälbit-20 hastighet för den första dataströmmen och en mälbithastighet för den andra dataströmmen, - nämnda mälbithastigheter fastställes gemensamt, - en tredje dataström mätäs in i en buffert, och - buffertens fyllnadsgrad fastställes, 25 och att da buffertens fyllnadsgrad är under en viss första gräns (T2) är förhällandet mellan nämnda bithastigheter väsentligen nämnda önskade förhällande.
35. Förfarande enligt patentkrav 34, kännetecknat av att da buffertens fyllnadsgrad är under en viss andra gräns (Tj) fastställes mälbithastigheten för den första dataströmmen pä basis av mediasignalens innehäll. 109393 200 1 /7 N* 240 110
102 H—- rtjnf jL_. YDIN- - U 210 220 PUSKURI L ιοί _ rL_ _ T fj > YDIN- YDINDE- 3°1 ‘ 104 | KOODERI KOODERI Ύ j_ fj ^ [——i 103 E + X 230 I 250 K '-&V /_J d_b s XJ\ E LAAJENNUS- \ LAAJENNUS- -► KOODERI PUSKURI * H FIG. 2 TEKNIIKAN TASO - - ^ 120 /1/ 220 300 D 102 fj _ 1/ E _* YDINDE- JJ KOODERI L
104 T + 105 -CU f Λ—+ E 310 +>k 301 k y y : £ Ί03 y- ' E y LAAJENNUS- _ π 1 d"kqoderi I F!G. 3 TEKNIIKAN TASO 110 120 100 fj fj 130 ··': y 102 Γ| 104 ΓΤΠ 102 f/ 101. y / ° y y 105 y SKAALAU- -L-> M jJ E -► y -► TUVA U —L-► M ^-► KOODERI -T-► X U --1----* v\ x y 103 103 FIG. 1 TEKNIIKAN TASO
FI20001674A 2000-07-14 2000-07-14 Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite FI109393B (fi)

Priority Applications (4)

Application Number Priority Date Filing Date Title
FI20001674A FI109393B (fi) 2000-07-14 2000-07-14 Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite
EP01660140.3A EP1173028B1 (en) 2000-07-14 2001-07-11 Scalable encoding of media streams
US09/904,486 US7072366B2 (en) 2000-07-14 2001-07-13 Method for scalable encoding of media streams, a scalable encoder and a terminal
JP2001215833A JP4160278B2 (ja) 2000-07-14 2001-07-16 媒体ストリームのスケーラブル符号化方法、スケーラブルエンコーダおよびマルチメディア端末

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI20001674 2000-07-14
FI20001674A FI109393B (fi) 2000-07-14 2000-07-14 Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite

Publications (3)

Publication Number Publication Date
FI20001674A0 FI20001674A0 (fi) 2000-07-14
FI20001674A FI20001674A (fi) 2002-01-15
FI109393B true FI109393B (fi) 2002-07-15

Family

ID=8558788

Family Applications (1)

Application Number Title Priority Date Filing Date
FI20001674A FI109393B (fi) 2000-07-14 2000-07-14 Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite

Country Status (4)

Country Link
US (1) US7072366B2 (fi)
EP (1) EP1173028B1 (fi)
JP (1) JP4160278B2 (fi)
FI (1) FI109393B (fi)

Families Citing this family (151)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100530475B1 (ko) 1999-11-10 2006-01-09 론치 미디어, 인크. 인터넷 라디오와 방송 방법
US6389467B1 (en) 2000-01-24 2002-05-14 Friskit, Inc. Streaming media search and continuous playback system of media resources located by multiple network addresses
US6891893B2 (en) * 2000-04-21 2005-05-10 Microsoft Corp. Extensible multimedia application program interface and related methods
US7634011B2 (en) 2000-04-21 2009-12-15 Microsoft Corporation Application program interface (API) facilitating decoder control of accelerator resources
US6940912B2 (en) * 2000-04-21 2005-09-06 Microsoft Corporation Dynamically adaptive multimedia application program interface and related methods
US7649943B2 (en) * 2000-04-21 2010-01-19 Microsoft Corporation Interface and related methods facilitating motion compensation in media processing
US7162482B1 (en) 2000-05-03 2007-01-09 Musicmatch, Inc. Information retrieval engine
US8352331B2 (en) 2000-05-03 2013-01-08 Yahoo! Inc. Relationship discovery engine
US7024485B2 (en) * 2000-05-03 2006-04-04 Yahoo! Inc. System for controlling and enforcing playback restrictions for a media file by splitting the media file into usable and unusable portions for playback
US8271333B1 (en) 2000-11-02 2012-09-18 Yahoo! Inc. Content-related wallpaper
US7307963B2 (en) * 2001-08-03 2007-12-11 At&T Corp. Architecture and method for using IEEE 802.11-like wireless LAN system to emulate private land mobile radio system (PLMRS) radio service
US7738407B2 (en) * 2001-08-03 2010-06-15 At&T Intellectual Property Ii, L.P. Method and apparatus for delivering IPP2T (IP-push-to-talk) wireless LAN mobile radio service
US7778341B2 (en) 2001-08-23 2010-08-17 Nortel Networks Limited System and method performing quadrature amplitude modulation by combining co-sets and strongly coded co-set identifiers
US20030076858A1 (en) * 2001-10-19 2003-04-24 Sharp Laboratories Of America, Inc. Multi-layer data transmission system
KR100420601B1 (ko) * 2001-11-22 2004-03-02 에스케이 텔레콤주식회사 비디오 데이터 스트리밍 서비스 방법
JP4150951B2 (ja) * 2002-02-19 2008-09-17 ソニー株式会社 動画配信システム、動画配信装置および方法、並びにプログラム
US7076263B2 (en) * 2002-02-19 2006-07-11 Qualcomm, Incorporated Power control for partial channel-state information (CSI) multiple-input, multiple-output (MIMO) systems
US6959171B2 (en) * 2002-02-28 2005-10-25 Intel Corporation Data transmission rate control
CN1639984B (zh) * 2002-03-08 2011-05-11 日本电信电话株式会社 数字信号编码方法、解码方法、编码设备、解码设备
KR100908114B1 (ko) 2002-03-09 2009-07-16 삼성전자주식회사 스케일러블 무손실 오디오 부호화/복호화 장치 및 그 방법
CN1266673C (zh) 2002-03-12 2006-07-26 诺基亚有限公司 可伸缩音频编码的有效改进
US7707221B1 (en) 2002-04-03 2010-04-27 Yahoo! Inc. Associating and linking compact disc metadata
WO2003091989A1 (en) 2002-04-26 2003-11-06 Matsushita Electric Industrial Co., Ltd. Coding device, decoding device, coding method, and decoding method
KR100713435B1 (ko) * 2002-05-03 2007-05-07 삼성전자주식회사 이동통신시스템에서 다중 데이터 전송률 서비스 제공 장치 및 방법
KR100486524B1 (ko) * 2002-07-04 2005-05-03 엘지전자 주식회사 비디오 코덱의 지연시간 단축 장치
JP2004061646A (ja) * 2002-07-25 2004-02-26 Fujitsu Ltd Ｔｆｏ機能を有する音声符号化器および方法
FR2843517B1 (fr) * 2002-08-06 2005-02-11 Medialive Dispositif pour le brouillage de contenus multimedias et audiovisuels de type mpeg-4
US8194770B2 (en) 2002-08-27 2012-06-05 Qualcomm Incorporated Coded MIMO systems with selective channel inversion applied per eigenmode
JP3881943B2 (ja) * 2002-09-06 2007-02-14 松下電器産業株式会社 音響符号化装置及び音響符号化方法
US8320301B2 (en) 2002-10-25 2012-11-27 Qualcomm Incorporated MIMO WLAN system
US8169944B2 (en) 2002-10-25 2012-05-01 Qualcomm Incorporated Random access for wireless multiple-access communication systems
US7986742B2 (en) 2002-10-25 2011-07-26 Qualcomm Incorporated Pilots for MIMO communication system
US8570988B2 (en) 2002-10-25 2013-10-29 Qualcomm Incorporated Channel calibration for a time division duplexed communication system
US20040081131A1 (en) 2002-10-25 2004-04-29 Walton Jay Rod OFDM communication system with multiple OFDM symbol sizes
US7002900B2 (en) 2002-10-25 2006-02-21 Qualcomm Incorporated Transmit diversity processing for a multi-antenna communication system
US7324429B2 (en) 2002-10-25 2008-01-29 Qualcomm, Incorporated Multi-mode terminal in a wireless MIMO system
US8208364B2 (en) 2002-10-25 2012-06-26 Qualcomm Incorporated MIMO system with multiple spatial multiplexing modes
US8134976B2 (en) 2002-10-25 2012-03-13 Qualcomm Incorporated Channel calibration for a time division duplexed communication system
US8218609B2 (en) 2002-10-25 2012-07-10 Qualcomm Incorporated Closed-loop rate control for a multi-channel communication system
US8170513B2 (en) 2002-10-25 2012-05-01 Qualcomm Incorporated Data detection and demodulation for wireless communication systems
US8036250B1 (en) * 2002-10-25 2011-10-11 Bigband Networks Inc. Method and apparatus of mutliplexing media streams
US8204079B2 (en) * 2002-10-28 2012-06-19 Qualcomm Incorporated Joint transmission of multiple multimedia streams
US20040083495A1 (en) * 2002-10-29 2004-04-29 Lane Richard D. Mulitmedia transmission using variable gain amplification based on data importance
JP2004151195A (ja) * 2002-10-29 2004-05-27 Sony Corp 通信装置、通信方法、プログラム、記憶媒体、端末装置
US7720999B2 (en) * 2002-11-26 2010-05-18 Qualcomm Incorporated System and method for optimizing multimedia compression using plural encoders
FR2849733A1 (fr) * 2003-01-02 2004-07-09 Thomson Licensing Sa Dispositif et procede d'ajustement de debit d'un flux de contenus et produits associes
GB0300359D0 (en) * 2003-01-07 2003-02-05 Koninkl Philips Electronics Nv Joint bit rate control
FR2852172A1 (fr) * 2003-03-04 2004-09-10 France Telecom Procede et dispositif de reconstruction spectrale d'un signal audio
JP3968317B2 (ja) * 2003-03-31 2007-08-29 松下電器産業株式会社 無線基地局装置
US7406176B2 (en) * 2003-04-01 2008-07-29 Microsoft Corporation Fully scalable encryption for scalable multimedia
US7313814B2 (en) * 2003-04-01 2007-12-25 Microsoft Corporation Scalable, error resilient DRM for scalable media
WO2004090870A1 (ja) * 2003-04-04 2004-10-21 Kabushiki Kaisha Toshiba 広帯域音声を符号化または復号化するための方法及び装置
EP1482435A1 (de) * 2003-05-26 2004-12-01 Franz Maurer Nachf. GmbH &amp; Co.KG Verkaufsvorrichtung für multimediale Werke
DE602004004950T2 (de) * 2003-07-09 2007-10-31 Samsung Electronics Co., Ltd., Suwon Vorrichtung und Verfahren zum bitraten-skalierbaren Sprachkodieren und -dekodieren
GB0321093D0 (en) * 2003-09-09 2003-10-08 Nokia Corp Multi-rate coding
CN1875377A (zh) 2003-09-10 2006-12-06 音乐匹配公司 音乐购买和播放系统及其方法
US8437347B2 (en) * 2003-10-14 2013-05-07 Qualcomm Incorporated Scalable encoding for multicast broadcast multimedia service
KR100571824B1 (ko) * 2003-11-26 2006-04-17 삼성전자주식회사 부가정보 삽입된 ｍｐｅｇ-4 오디오 ｂｓａｃ부호화/복호화 방법 및 장치
US9473269B2 (en) 2003-12-01 2016-10-18 Qualcomm Incorporated Method and apparatus for providing an efficient control channel structure in a wireless communication system
US7519274B2 (en) 2003-12-08 2009-04-14 Divx, Inc. File format for multiple track digital data
US20060200744A1 (en) * 2003-12-08 2006-09-07 Adrian Bourke Distributing and displaying still photos in a multimedia distribution system
US8472792B2 (en) 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
KR20050076019A (ko) * 2004-01-19 2005-07-26 삼성전자주식회사 스케일러블 부호화에 기반한 비트스트림의 적응적 부호화및/또는 복호화 방법, 및 이를 구현하기 위한프로그램이 기록된 기록 매체
KR100586883B1 (ko) 2004-03-04 2006-06-08 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩방법, 프리디코딩방법, 비디오 디코딩방법, 및 이를 위한 장치와, 이미지 필터링방법
KR100561869B1 (ko) * 2004-03-10 2006-03-17 삼성전자주식회사 무손실 오디오 부호화/복호화 방법 및 장치
MXPA06014314A (es) * 2004-06-07 2007-05-23 Agency Science Tech & Res Sistemas y metodos para codificar y descodificar datos escalablemente.
US7756271B2 (en) * 2004-06-15 2010-07-13 Microsoft Corporation Scalable layered access control for multimedia
JP2006060813A (ja) * 2004-08-20 2006-03-02 Polycom Inc ビデオデコーダにおける誤り隠蔽
JP4771674B2 (ja) * 2004-09-02 2011-09-14 パナソニック株式会社 音声符号化装置、音声復号化装置及びこれらの方法
CN101124626B (zh) 2004-09-17 2011-07-06 皇家飞利浦电子股份有限公司 用于最小化感知失真的组合音频编码
JP4977471B2 (ja) * 2004-11-05 2012-07-18 パナソニック株式会社 符号化装置及び符号化方法
US7751324B2 (en) * 2004-11-19 2010-07-06 Nokia Corporation Packet stream arrangement in multimedia transmission
FR2880743A1 (fr) * 2005-01-12 2006-07-14 France Telecom Dispositif et procedes de codage et de decodage echelonnables de flux de donnees d'images, signal, programme d'ordinateur et module d'adaptation de qualite d'image correspondants
EP1847071A4 (en) * 2005-01-26 2010-10-20 Internet Broadcasting Corp B V MULTI-DIFFUSION IN LAYERS AND EXACT ATTRIBUTION OF BANDWIDTH AND PRIORIZATION OF PACKETS
US7672742B2 (en) * 2005-02-16 2010-03-02 Adaptec, Inc. Method and system for reducing audio latency
KR100643291B1 (ko) * 2005-04-14 2006-11-10 삼성전자주식회사 랜덤 엑세스의 지연을 최소화하는 비디오 복부호화 장치 및방법
US7466749B2 (en) 2005-05-12 2008-12-16 Qualcomm Incorporated Rate selection with margin sharing
US9130706B2 (en) * 2005-05-26 2015-09-08 Unwired Planet, Llc Method and apparatus for signal quality loss compensation in multiplexing transmission systems
US8358714B2 (en) 2005-06-16 2013-01-22 Qualcomm Incorporated Coding and modulation for multiple data streams in a communication system
JP4936688B2 (ja) * 2005-07-19 2012-05-23 パナソニック株式会社 中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラム
NZ566935A (en) * 2005-09-27 2010-02-26 Qualcomm Inc Methods and apparatus for service acquisition
US8229983B2 (en) * 2005-09-27 2012-07-24 Qualcomm Incorporated Channel switch frame
US8477840B2 (en) 2005-09-29 2013-07-02 Thomson Research Funding Corporation Method and apparatus for constrained variable bit rate (VBR) video encoding
KR100736080B1 (ko) * 2005-10-27 2007-07-06 삼성전자주식회사 다 계층으로 구성된 멀티미디어 스트림의 저작권을 계층별로 관리하는 방법 및 장치
US7515710B2 (en) 2006-03-14 2009-04-07 Divx, Inc. Federated digital rights management scheme including trusted systems
EP1990800B1 (en) * 2006-03-17 2016-11-16 Panasonic Intellectual Property Management Co., Ltd. Scalable encoding device and scalable encoding method
US7647276B2 (en) 2006-05-11 2010-01-12 Cfph, Llc Methods and apparatus for electronic file use and management
EP1855271A1 (en) * 2006-05-12 2007-11-14 Deutsche Thomson-Brandt Gmbh Method and apparatus for re-encoding signals
JP4707623B2 (ja) * 2006-07-21 2011-06-22 富士通東芝モバイルコミュニケーションズ株式会社 情報処理装置
JP4918841B2 (ja) * 2006-10-23 2012-04-18 富士通株式会社 符号化システム
CA2669153A1 (en) * 2006-11-15 2008-05-22 Qualcomm Incorporated Systems and methods for applications using channel switch frames
US20080120098A1 (en) * 2006-11-21 2008-05-22 Nokia Corporation Complexity Adjustment for a Signal Encoder
JP5339919B2 (ja) * 2006-12-15 2013-11-13 パナソニック株式会社 符号化装置、復号装置およびこれらの方法
CN101001371B (zh) * 2007-01-19 2010-05-19 华为技术有限公司 视频转码的方法及其装置
US8553757B2 (en) * 2007-02-14 2013-10-08 Microsoft Corporation Forward error correction for media transmission
JP5294713B2 (ja) * 2007-03-02 2013-09-18 パナソニック株式会社 符号化装置、復号装置およびそれらの方法
JP4708446B2 (ja) * 2007-03-02 2011-06-22 パナソニック株式会社 符号化装置、復号装置およびそれらの方法
US8098941B2 (en) * 2007-04-03 2012-01-17 Aptina Imaging Corporation Method and apparatus for parallelization of image compression encoders
US8571027B2 (en) * 2007-04-18 2013-10-29 At&T Intellectual Property I, L.P. System and method for multi-rate video delivery using multicast stream
US8331334B2 (en) * 2007-07-20 2012-12-11 Broadcom Corporation Method and system for a handheld wireless communication device for configuring connection to and use of local and remote resources
CN101889306A (zh) * 2007-10-15 2010-11-17 Lg电子株式会社 用于处理信号的方法和装置
KR20100106327A (ko) 2007-11-16 2010-10-01 디브이엑스, 인크. 멀티미디어 파일을 위한 계층적 및 감소된 인덱스 구조
US9872066B2 (en) * 2007-12-18 2018-01-16 Ibiquity Digital Corporation Method for streaming through a data service over a radio link subsystem
US8411569B2 (en) * 2008-01-10 2013-04-02 Alcatel Lucent Method of splicing encoded multimedia data streams
WO2009136872A1 (en) * 2008-05-07 2009-11-12 Agency For Science, Technology And Research Method and device for encoding an audio signal, method and device for generating encoded audio data and method and device for determining a bit-rate of an encoded audio signal
EP2152028A1 (en) * 2008-08-06 2010-02-10 Nokia Siemens Networks OY Method and devices for bit rate allocation for point-to-multipoint multimedia communications
US8155670B2 (en) * 2008-11-04 2012-04-10 2Wire, Inc. Cell notification
WO2010080911A1 (en) 2009-01-07 2010-07-15 Divx, Inc. Singular, collective and automated creation of a media guide for online content
KR100924309B1 (ko) 2009-06-04 2009-11-02 전자부품연구원 시간확장성과 버퍼상태판단을 통한 품질 적응적 멀티미디어 데이터 스트리밍 방법 및 시스템
FR2947944A1 (fr) * 2009-07-07 2011-01-14 France Telecom Codage/decodage perfectionne de signaux audionumeriques
KR101282193B1 (ko) * 2009-11-10 2013-07-04 한국전자통신연구원 칼만 필터와 ｆｉｒ 필터를 사용한 동영상 인코더에서의 비트율 제어 방법
US9313512B2 (en) * 2009-11-25 2016-04-12 Vudu, Inc. Multiple bit rate encoding by segments
WO2011068668A1 (en) 2009-12-04 2011-06-09 Divx, Llc Elementary bitstream cryptographic material transport systems and methods
US20110268175A1 (en) * 2010-04-30 2011-11-03 Wai-Tian Tan Differential protection of a live scalable media
US8626900B2 (en) * 2010-07-02 2014-01-07 At&T Intellectual Property I, L.P. Method and system to proactively identify degraded network performance
TWI495330B (zh) * 2010-08-02 2015-08-01 Ncomputing Inc 有效地串流數位視訊的系統及方法
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
US9467708B2 (en) 2011-08-30 2016-10-11 Sonic Ip, Inc. Selection of resolutions for seamless resolution switching of multimedia content
US9955195B2 (en) 2011-08-30 2018-04-24 Divx, Llc Systems and methods for encoding and streaming video encoded using a plurality of maximum bitrate levels
US8818171B2 (en) 2011-08-30 2014-08-26 Kourosh Soroushian Systems and methods for encoding alternative streams of video for playback on playback devices having predetermined display aspect ratios and network connection maximum data rates
US8964977B2 (en) 2011-09-01 2015-02-24 Sonic Ip, Inc. Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US8909922B2 (en) 2011-09-01 2014-12-09 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US20150163271A1 (en) * 2011-12-22 2015-06-11 Telefonaktiebolaget L M Ericsson (Publ) Apparatus and method for monitoring performance in a communications network
US20130282868A1 (en) * 2012-04-23 2013-10-24 Jae Chung Integral Controller Based Pacing for HTTP Pseudo-streaming
US10452715B2 (en) 2012-06-30 2019-10-22 Divx, Llc Systems and methods for compressing geotagged video
US9191457B2 (en) 2012-12-31 2015-11-17 Sonic Ip, Inc. Systems, methods, and media for controlling delivery of content
US9313510B2 (en) 2012-12-31 2016-04-12 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9578342B2 (en) * 2013-06-24 2017-02-21 Dialogic Corporation Rate control algorithm for scalable video encoding with disposable P-frames
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
WO2015009693A1 (en) * 2013-07-15 2015-01-22 Sony Corporation Layer based hrd buffer management for scalable hevc
WO2015007795A1 (en) * 2013-07-16 2015-01-22 Bitmovin Gmbh Apparatus and method for cloud assisted adaptive streaming
GB201314067D0 (en) * 2013-08-06 2013-09-18 Microsoft Corp Allocating Processor Resources
FR3011704A1 (fr) * 2013-10-07 2015-04-10 Orange Procede de mise en œuvre d'une session de communication entre une pluralite de terminaux
US10116943B2 (en) * 2013-10-16 2018-10-30 Nvidia Corporation Adaptive video compression for latency control
US9727460B2 (en) * 2013-11-01 2017-08-08 Samsung Electronics Co., Ltd. Selecting a memory mapping scheme by determining a number of functional units activated in each cycle of a loop based on analyzing parallelism of a loop
US20150163484A1 (en) * 2013-12-09 2015-06-11 Vixs Systems Inc. Variable bitrate encoding for multiple video streams
US20150170655A1 (en) * 2013-12-15 2015-06-18 Qualcomm Incorporated Systems and methods of blind bandwidth extension
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
CA2985019C (en) * 2016-02-17 2022-05-03 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Post-processor, pre-processor, audio encoder, audio decoder and related methods for enhancing transient processing
GB2598255B (en) 2016-02-17 2022-07-27 V Nova Int Ltd Physical adapter, signal processing equipment, methods and computer programs
US10148989B2 (en) 2016-06-15 2018-12-04 Divx, Llc Systems and methods for encoding video content
US10346126B2 (en) * 2016-09-19 2019-07-09 Qualcomm Incorporated User preference selection for audio encoding
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
GB2561036A (en) * 2017-03-31 2018-10-03 Cirrus Logic Int Semiconductor Ltd Methods and apparatus for buffering and compression of data
US10686859B2 (en) * 2017-12-28 2020-06-16 Intel Corporation Content scenario and network condition based multimedia communication
GB2570324A (en) * 2018-01-19 2019-07-24 V Nova Int Ltd Multi-codec processing and rate control
JP7019096B2 (ja) * 2018-08-30 2022-02-14 ドルビー・インターナショナル・アーベー 低ビットレート符号化オーディオの増強を制御する方法及び機器
US11128869B1 (en) 2018-10-22 2021-09-21 Bitmovin, Inc. Video encoding based on customized bitrate table

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2126467A1 (en) 1993-07-13 1995-01-14 Barin Geoffry Haskell Scalable encoding and decoding of high-resolution progressive video
US5512939A (en) * 1994-04-06 1996-04-30 At&T Corp. Low bit rate audio-visual communication system having integrated perceptual speech and video coding
JP3788823B2 (ja) 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置
US5956674A (en) * 1995-12-01 1999-09-21 Digital Theater Systems, Inc. Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels
US6477202B1 (en) * 1997-09-03 2002-11-05 Matsushita Electric Industrial Co., Ltd. Apparatus of layered picture coding, apparatus of picture decoding, methods of picture decoding, apparatus of recording for digital broadcasting signal, and apparatus of picture and audio decoding
US6275531B1 (en) * 1998-07-23 2001-08-14 Optivision, Inc. Scalable video coding method and apparatus
FI106998B (fi) 1999-01-15 2001-05-15 Nokia Mobile Phones Ltd Bittinopeuden ohjaus multimedialaitteessa

Also Published As

Publication number Publication date
FI20001674A0 (fi) 2000-07-14
JP2002100994A (ja) 2002-04-05
EP1173028A2 (en) 2002-01-16
US20030206558A1 (en) 2003-11-06
EP1173028A3 (en) 2004-01-28
US7072366B2 (en) 2006-07-04
EP1173028B1 (en) 2018-06-27
JP4160278B2 (ja) 2008-10-01
FI20001674A (fi) 2002-01-15

Similar Documents

Publication Publication Date Title
FI109393B (fi) Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite
US20240340356A1 (en) Method and system for providing media content to a client
US6704281B1 (en) Bit-rate control in a multimedia device
EP1638333A1 (en) Rate adaptive video coding
CA2565977C (en) Delivery of information over a communication channel
US20020136298A1 (en) System and method for adaptive streaming of predictive coded video data
EP1755308A2 (en) Video streaming
TW201741864A (zh) 增強編解碼引擎控制之方法
JPH07202820A (ja) ビットレート制御システム
EP2276023A2 (en) Efficient speech stream conversion
US8204740B2 (en) Variable frame offset coding
WO2007035147A1 (en) Adaptive source signal encoding
EP1501228A1 (en) Encoded packet transmission/reception method, device thereof, and program
US7773633B2 (en) Apparatus and method of processing bitstream of embedded codec which is received in units of packets
US7522665B2 (en) Mobile terminal with camera
US20150348563A1 (en) Encoder and decoder to encode signal into a scalable codec and to decode scalable codec, and encoding and decoding methods of encoding signal into scalable codec and decoding the scalable codec
CN112004084A (zh) 一种利用量化参数排序的码率控制优化方法及系统
US20230047127A1 (en) Method and system for providing media content to a client
CN112004083B (zh) 一种利用帧间预测特性优化码率控制方法及系统
Wagner et al. Playback delay optimization in scalable video streaming
KR100690710B1 (ko) 동영상 전송방법
Wagner et al. Playback delay and buffering optimization in scalable video broadcasting