NO344483B1 - Kompatibel flerkanal-koding/dekoding - Google Patents

Kompatibel flerkanal-koding/dekoding Download PDF

Info

Publication number
NO344483B1
NO344483B1 NO20180980A NO20180980A NO344483B1 NO 344483 B1 NO344483 B1 NO 344483B1 NO 20180980 A NO20180980 A NO 20180980A NO 20180980 A NO20180980 A NO 20180980A NO 344483 B1 NO344483 B1 NO 344483B1
Authority
NO
Norway
Prior art keywords
channel
downmix
side information
channels
original
Prior art date
Application number
NO20180980A
Other languages
English (en)
Other versions
NO20180980A1 (no
Inventor
Jürgen Herre
Johannes Hilpert
Stefan Geyerserger
Andreas Holzer
Claus Spenger
Original Assignee
Fraunhofer Ges Forschung
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=34394093&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=NO344483(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Publication of NO20180980A1 publication Critical patent/NO20180980A1/no
Application filed by Fraunhofer Ges Forschung filed Critical Fraunhofer Ges Forschung
Publication of NO344483B1 publication Critical patent/NO344483B1/no

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03Application of parametric coding in stereophonic audio systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Mathematical Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Theoretical Computer Science (AREA)
  • Algebra (AREA)
  • Pure & Applied Mathematics (AREA)
  • Stereophonic System (AREA)
  • Transmission Systems Not Characterized By The Medium Used For Transmission (AREA)
  • Error Detection And Correction (AREA)
  • Executing Machine-Instructions (AREA)
  • Stereo-Broadcasting Methods (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

Oppfinnelsen angår et apparat og en fremgangsmåte for å behandle et flerkanals audiosignal og især et apparat og en fremgangsmåte for å behandle et flerkanals audiosignal nal på en stereokompatibel måte.
Flerkanals audioreproduseringsteknikker er blitt stadig viktigere. Dette kan skyldes at audiokompresjon/kodeteknikker, for eksempel den kjente mp3-teknikken har gjort det mulig å distribuere audioinnspillinger via Internet eller andre overføringskanaler med en begrenset båndbredde. mp3-kodeteknikken er blitt så kjent på grunn av at denmuliggjør distribusjon av alle innspillinger i et stereoformat, dvs. en digital gjengivelse av audioinnspillingen med en første eller venstre stereokanal og en andre eller høyre stereokanal.
Uansett finnes det en grunnleggende ulempe med konvensjonelle tokanals lydsystemer. Dette førte til utviklingen av surround-teknikken. En anbefalt, flerkanalssurround-gjengivelse omfatter, i tillegg til de to stereokanaler L og R, en senterkanal C og to surround-kanaler Ls, Rs. Dette referanselydformatet kalles også tre/to-stereo som innebærer tre frontkanaler og to surround-kanaler. Generelt kreves det fem overføringskanaler. I et avspillingsmiljø trengs det minst fem høyttalere på deres fem forskjellige steder for å få et optimalt lyttested i en bestemt avstand fra de fem, godt plassertehøyttalere.
US5701346 A refererer til en fremgangsmåte for koding av flere lydsignaler, omfattende trinnene å kombinere minst to signaler ved felles stereokoding for å oppnå et felles kodet signal, hvorpå det felles kodede signalet dekodes for å gi simulerte dekodete signaler, som kombineres ved matrisisering i en kompatibilitetsmatrise sammen med tilleggssignaler for å gi signaler som er kompatible med eksisterende dekodere.
Oppfinnelse omhandler spesielt en flerkanals kodeteknikk for lydsignaler som er tilpasset for anvendelse i forbindelse med kodingsstandarden MPEG-2.
EP0688113 A2 vedrører en kodingsmetode og et apparat for koding av flerkanalsignaler anvendt i for eksempel et stereoanlegg for en videodiskavspiller, en videobåndopptaker, et filmsystem eller en såkalt multi-surround akustisk system.
Oppfinnelsen vedrører også en tilsvarende dekodingsmetode og apparat, og et opptaksmedium.
Flere teknikker er kjent for å redusere mengden av data som kreves for overføringen av et flerkanals lydsignal. Slike teknikker kalles samlestereoteknikker. For å oppnå dette henvises det til fig. 10 som viser en samlestereoenhet 60. Denne enhet kan være en enhet som implementerer for eksempel intensitetsstereo (IS) eller "binaural cuecoding" (BCC). En slik enhet mottar generelt minst to kanaler (CHI, CH2, ... CHn) og sender ut en enkelt bærerkanal og parametriske data. De parametriske data defineres slik at en approksimering av en opprinnelige kanal (CHI, CH2, ... CHn) kan bli beregnet i en dekoder.
Normalt vil bærerkanalen omfatte delbåndsampler, spektralkoeffisienter, tidsdomenesampler osv., som gir en relativt fin gjengivelse av det underliggende signal, mens parameterdataene ikke omfatter slike sampler av spektralkoeffisienten men snarere styrer parametere for å regulere en bestemt rekonstruksjonsalgoritme, for eksempel veiing ved multiplisering, tidsforskyvning, frekvensforskyvning, ... De parametriske data om-fatter derfor bare en relativt grov gjengivelse av signalet eller den tilhørende kanal. Istørrelse vil mengden av data som kreves av en bærerkanal være i området 60-70 kbit/s mens mengden av data som kreves av parametersideinformasjon for en kanal vil være mellom 1,5-2,5 kbit/s. Et eksempel på parameterdata er de kjente skaleringsfaktorer, intensitetsstereoinformasjon eller binaural cue parametere, som beskrevet nedenfor.
Intensitetsstereokoding er beskrevet i AES-utkastet 3799 "Intensity stereo coding", J. Herre, K.H. Brandenburg, D. Lederer, februar 1994, Amsterdam. Generelt er ideen med intensitetsstereo basert på at en hovedakse omdanner tilføres data til begge de stereofoniske lydkanalene. Hvis de fleste datapunkter er konsentrert rundt den førstehovedakse, kan en kodegevinst oppnås ved å dreie begge signalene i en viss vinkel før kodingen. Dette er imidlertid ikke alltid tilfelle for virkelig stereoproduksjonsteknikker. Følgelig modifiseres denne teknikk ved å utelukke den andre, ortogonale komponent fra overføringen i bitstrømmen. Således består de rekonstruerte signalene fra venstre og høyre kanal av forskjellige vektede eller skalerte versjoner av det samme, overførte signal. Uansett skiller de rekonstruerte signalene seg i deres amplitude, men er identiske når det gjelder deres faseinformasjon. Energi-tid-eneloppene av begge de opprinnelig lydkanaler opprettholdes imidlertid ved hjelp av den selektive skalering som typisk opererer på frekvensselektiv måte. Dette samsvarer med den menneskelige oppfattelsen av lyd ved høyere frekvenser hvor de dominerende, spatiale stikknoter bestemmes avenergienveloppene.
I tillegg, og i praksis, genereres det overførte signalet, dvs. bærerkanalen fra det summerte signal av venstre og høyre kanal i stedet for å dreie begge komponentene. Videre utføres denne behandling, dvs. generering av intensitetsstereoparametere for å utføre skaleringen, frekvensselektivt, dvs. uavhengig av hvert skaleringsfaktorbånd, dvs.koderfrekvenspartisjonen. Fortrinnsvis kombineres begge kanalene for å danne en kombinert eller "bærer"-kanal og i tillegg til den kombinerte kanal blir intensitetsstereoinformasjonen avgjort avhengig av energien av den første kanal, energien av den andre kanal eller energien av den kombinerte kanal.
BCC-teknikken er beskrevet i AES-konvensjonsdokumentet 5574, "Binaural cuecoding applied to stereo and multichannel audio compression", C. Faller, F. Baumgarte, mai 2002, Miinchen. I BCC-koding blir et antall audioinngangskanaler konvertert til en spektral gjengivelse ved å bruke en DFT-basert omforming med overlappende vinduer. Det resulterende, ensartede spektrum blir delt inn i ikkeoverlappende partisjoner som hver har en indeks. Hver partisjon har en båndbredde som er proporsjonal med dentilsvarende rektangulære båndbredde (ERB). Mellomkanalnivåforskjellene (ICLD) og mellomkanaltidsforskjellene (ICTD) beregnes for her partisjon for hver pakke k. ICLD og ICTD kvantiseres og kodes til en BCC-bitstrøm. Mellomkanalnivåforskjellene og mellomkanaltidsforskjellene blir gitt for hver kanal i forhold til referansekanalen. Deretter beregnes parametrene i samsvar med foreskrevne formler som avhenger av de enkeltepartisjoner av signalet som skal behandles.
På dekodersiden mottar dekoderen et monosignal og BCC-bitstrømmen. Monosignalet blir omdannet til frekvensdomene og sendt til en spatial synteseblokk som også mottar dekodede ICLD- og ICTD-verdier. I spatialsynteseblokken blir BCC-parameterverdiene (ICLD og ICTD) for å utføre en veiet operasjon av monosignalet for å syntetisere flerkanalssignalene som, etter en frekvens/tidskonvertering gir en rekonstruksjon av det opprinnelige flerkanalslydsignalet.
Når det gjelder BCC kan den samlede stereomodul 60 brukes for å sende kanalsideinformasjon, slik at parameterkanaldataene blir kvantisert og kodet til ICLD-eller ICTD-parametere hvor en av de opprinnelige kanaler brukes som referansekanal for koding av kanalsideinformasjon.
Normalt formes bærerkanalen av summen av de tiltakende, opprinnelige kanaler. Naturligvis gir de ovennevnte teknikker bare en monogjengivelse for en dekoder som bare kan behandle bærerkanalen men som ikke erstatter behandling av parameterdataene for å generere en eller flere approksimasjoner av mer enn en inngangskanal.
For å overføre de fem kanalene på en kompatibel måte, dvs. i et bitstrømformat som også kan forstås av en normal stereodekoder, har den såkalte matriseteknikk blitt brukt som beskrevet i "MUSICAM-surround: et universalt flerkanals kodesystem kompatibelt med ISO 11172-3", G. Theile og G. Stoll, .AES-utkast 3403, oktober 1992,San Francisco. De fem inngangskanaler L, R, C, Ls og Rs mates inn i matriseenheten som utfører en matriseoperasjon for å beregne grunnstereokanalene eller de kompatible stereokanalene Lo, Ro fra de fem inngangskanaler. Især beregnes disse grunnleggende stereokanaler Lo/Ro som beskrevet nedenfor:
Lo=L+xC+yLs
Ro=R+xC+yRs
hvor x og y er konstanter. De andre tre kanalene C, Ls, Rs blir overført som de er i et forlengelseslag, i tillegg til et basisstereolag som omfatter en kodet versjon avbasisstereosignalene Lo/Ro. Når det gjelder bitstrømmen omfatter dette Lo/Ro-basisstereolag en tittelinformasj on, for eksempel skaleringsfaktorer og delbåndsampler.
Multikanalforlengelseslaget, dvs. sentralkanalen og de to surround-kanalene er omfattet i flerkanalens forlengede felt som også kalles tilleggsdatafelt.
På dekodersiden blir en omvendt matriseoperasjon utført for å danne rekonstruksjoner av venstre og høyre kanal i fem-kanalsgjengivelsen ved å bruke basisstereokanalene Lo, Ro og de tre tilleggskanalene. I tillegg blir de tre tilleggskanalene dekodet fra tilleggsinformasjonen for å oppnå en dekodet femkanals- eller surround gjengivelse av det opprinnelige flerkanals lydsignalet.
En annen fremgangsmåte for flerkanalskoding; er beskrevet i publikasjonen "Improved MPEG-2 audio multi-channel encoding", B. Grill, J. Herre, K.H. Brandenburg, E. Eberlein, J. Koller, J. Mueller, AES-utkast 3865, februar 1994, Amsterdam, hvor bakoverkompatible moduser vurderes for å oppnå bakoverkompatibilitet. For å oppnå dette brukes en kompatibilitetsmatrise for å oppnå to såkalte nedblandekanaler Lc, Rc fra de opprinnelige fem inngangskanaler. Videre er det mulig å velge dynamisk tre hjelpekanaler som overføres som tilleggsdata.
For å utnytte stereoirrelevans, brukes en samlet stereoteknikk til grupper av kanaler, dvs. de tre frontkanalene, dvs. for venstre kanal, høyre kanal og midtkanalen. Forå oppnå dette blir disse tre kanalene kombinert for å oppnå en kombinert kanal. Denne kombinerte kanal kvantiseres og pakkes inn i bitstrømmen. Deretter blir denne kombinerte kanal sammen med tilsvarende samlet stereoinformasjon sendt til en dekodingsmodul for samlet vurdering for å oppnå samlede stereodekodede kanaler, dvs. en samlet stereodekodet venstrekanal, en samlet stereodekodet høyrekanal og en samlet stereodekodet midtkanal. Disse samlede stereodekodede kanaler blir, sammen med venstre surroundkanal og høyre surroundkanal sendt til en kompatibilitetsmatriseblokk for å danne første og andre nedblandekanaler Lc, Rc. Deretter blir kvantiserte versjoner av begge nedblandekanaler og en kvantisert versjon av den kombinerte kanal pakket inn i bitstrømmen sammen med de sammenføyde stereokodeparametere.Ved å bruke intensitetsstereokoding blir følgelig en gruppe av uavhengige, opprinnelige kanalsignaler sendt i en enkelt porsjon av "bærer"-data. Dekoderen vil så re-konstruere de aktuelle signaler som identiske data som blir omskalert ifølge deres opprinnelige energi-tidenvelopper. Følgelig vil en lineær kombinasjon av de sendte kanaler føre til resultater som er helt forskjellige i forhold til den opprinneligenedblanding. Dette gjelder enhver type av sammenføyd. stereokoding basert på intensitetsstereokonseptet. For et kodesystem som leverer kompatible nedblandekanaler vil dette får en direkte konsekvens. Gjengivelsen ved avmatrising som beskrevet i den foregående publikasjon lider av unaturligheter forårsaket av den utilfredsstillende rekonstruksjon. Ved å bruke et såkalt samlet stereo for-distorsjonsopplegg hvor en sammenføydstereokoding av venstre, høyre og midtkanalene utføres før matrising i koderen, kan dette minske problemet. På denne måte vil avmatriseopplegget for rekonstruksjonen medføre færre kunstgrep siden de samlede stereodekodede signalene på kodesiden har blitt brukt for å generere nedblandekanalen. Således blir den ikke-perfekte rekonstruksjon forflyttet inn i de kompatible nedblandekanalene Lc og Rc hvor den mer sannsynligvis vil bli maskert av selve lydsignalet.
Selv om et slikt system har ført til færre kunstgrep på grunn av dematriseringen av dekodersiden vil det uansett ha enkelte ulemper. En ulempe er at de stereokompatible nedblandekanalene Lc og Rc ikke blir avledet fra de opprinnelige kanalene men fra intensitetsstereokodede/dekodede versjoner av de opprinnelige kanalene. Følgelig blir datatappå grunn av intensitetsstereokodesystemet omfattet i de kompatible nedblandekanalene. En stereodekoder som bare dekoder de kompatible kanalene snarere enn de forbedrede intensitetsstereokodede kanaler vil derfor være et utgangssignal som blir påvirket av intensitetsstereoinduserte datatap. I tillegg må en full tilleggskanal overføres ved siden av de to nedblandekanalene. Denne kanal er den kombinerte kanal som dannes ved hjelp av en sammenføyd stereokoding av venstre, høyre og midtkanalen. I tillegg må også intensitetsstereoinformasjonen for å rekonstruere de opprinnelige kanaler L, R, C fra den kombinerte kanal ogsåoverføres til dekoderen. Ved dekoderen utføres en omvendt matrising, det vil si en dematrising utføres for å avlede surroundkanalene fra de to nedblandekanaler. I tillegg blir de opprinnelige venstre, høyre og midtkanaler approksimert ved sammenføyd stereodekoding ved å bruke den overførte kombinerte kanal og de overførte, sammenføyde stereoparametere. Det skal bemerkes at den opprinnelige venstre, høyre og midtkanal avledes av den sammenføyde stereodekoding av den kombinerte kanal.
Det er et formål med oppfinnelsen å tilveiebringe et konsept for en biteffektiv og kunstgrepreduserende behandling eller omvendt behandling av et flerkanals audiosignal.
Ifølge et første aspekt ved oppfinnelsen oppnås dette formål av apparat for å behandle et flerkanals audiosignal med minst tre opprinnelige kanaler: anordning for å tilveiebringe en første nedblandekanal og en andre nedblandekanal, idet første og andre nedblandekanaler avledes fra de opprinnelige kanaler; anordning for å beregne kanalsideinformasjonen for en valgt, opprinnelig kanal av de opprinnelige signaler, idet anordningen for å beregne kan beregne kanalsideinformasjonen slik at en nedblandekanal eller en kombinert nedblandekanal med første og andre nedblandekanal når den er vektetved å bruke kanalsideinformasjonen, fører til en approksimasjon av den valgte, opprinnelige kanal; og anordning for å generere utgangsdata omfattende kanalsideinformasjon, den første nedblandekanal eller et signal avledet fra den første nedblandekanal og den andre nedblandekanal, eller et signal avledet fra den andre nedblandekanal.
Ifølge et andre aspekt ved oppfinnelsen oppnås dette formål ved en fremgangsmåte for å behandle et flerkanals audiosignal med minst tre opprinnelige kanaler som om-fatter: tilveiebringe en første nedblandekanal og en andre nedblandekanal, idet disse avledes fra de opprinnelige kanaler; beregne kanalsideinformasjonen for en valgt, opprinnelig kanal av de opprinnelige signaler, slik at en nedblandekanal eller en kombinert nedblandekanal med den første og andre nedblandekanal når den er vektet vedå bruke kanalsideinformasjonen, fører til en approksimasjon av den valgte, opprinnelige kanal; og generere utgangsdata med kanalsideinformasjonen, den første nedblandekanal eller et signal avledet fra den første nedblandekanal og den andre nedblandekanal eller et signal avledet fra den andre nedblandekanal.
Ifølge et tredje aspekt ved oppfinnelsen oppnås dette formål av et apparat foromvendt behandling av inngangsdata med kanalsideinformasjon, en første nedblandekanal eller et signal avledet fra den første nedblandekanal og en andre nedblandekanal eller et signal avledet fra den andre nedblandekanal, idet den første nedblandekanal og en andre nedblandekanal avledes fra minst tre opprinnelige kanaler av et flerkanals audiosignal og hvor kanalsideinformasjon beregnes slik at en nedblandekanal eller en kombinert nedblandekanal med den første nedblandekanal og den andre nedblandekanal, når den er vektet ved å bruke kanalsideinformasjonen, fører til en approksimasjon av den valgte, opprinnelige kanal, idet apparatet omfatter; en inngangsdataleser for å lese inngangsdataene for å oppnå den første nedblandekanal eller et signal avledet fra denførste nedblandekanal og den andre nedblandekanal eller et signal avledet fra den andre nedblandekanal og kanalsideinformasjonen; og en kanalrekonstruktør for å rekonstruere approksimasjonen av den valgte, opprinnelige kanal ved å bruke kanalsideinformasjonen og nedblandekanalen eller den kombinerte nedblandekanal for å oppnå approksimasjonen av den valgte, opprinnelige kanal.
Ifølge et fjerde aspekt ved oppfinnelsen oppnås dette formål ved en fremgangsmåte med omvendt behandling av inngangsdata med kanalsideinformasjon, en første ned-blandekanal eller et signal avledet fra den første nedblandekanal og en andre nedblandekanal eller et signal avledet fra den andre nedblandekanal, idet den første nedblandekanal og den andre nedblandekanal avledes fra minst tre opprinnelige kanaler av et flerkanalsaudiosignal og hvor kanalsideinformasjon beregnes slik at en nedblandekanal eller en kombinert nedblandekanal med den første nedblandekanal og den andre nedblandekanal, når den veies, ved å bruke kanalsideinformasjonen, fører til en approksimasjon av den valgte, opprinnelige kanal, idet fremgangsmåten omfatter; lese inngangsdataene for å oppnå den første nedblandekanal eller et signal avledet fra den første nedblandekanal ogden andre nedblandekanal eller et signal avledet fra den andre nedblandekanal og kanal-sideinformasjonen; og rekonstruere approksimasjonen av den valgte, opprinnelige kanal ved å bruke kanalsideinformasjonen og nedblandekanalen eller den kombinerte ned-blandekanal for å oppnå approksimasjonen av den valgte, opprinnelige kanal.
Ifølge et femte aspekt ved oppfinnelsen og et sjette aspekt oppnås dette formål avet dataprogram som omfatter fremgangsmåten med behandling eller fremgangsmåten med omvendt behandling.
Oppfinnelsen er basert på å finne at en effektiv og kunstgrepreduserende koding av flerkanals audiosignal oppnås når to nedblandekanaler fortrinnsvis som representerer venstre og høyre stereokanaler, blir pakket inn i utgangsdata.
Ifølge oppfinnelsen blir parameterkanalsideinformasjon for en eller flere av de opprinnelige kanaler avledet slik at de relateres til flere av nedblandekanalene snarere enn, som tidligere, til en ekstra "kombinert" samlet stereokanal. Dette innebærer at parameterkanalsideinformasjon blir beregnet slik at kanalrekonstruktør, på dekodersiden, bruker kanalsideinformasjonen og en av nedblandekanalene eller en kombinasjon av nedblandekanalene for å rekonstruere en approksimasjon av den opprinnelige audiokanal som kanalsideinformasjonen er tildelt.
Det nye konsept er fordelaktig ved at det tilveiebringer en biteffektiv flerkanalforlengelse, slik at et flerkanals audiosignal kan spilles av ved en dekoder.
I tillegg er det nye konsept bakoverkompatibelt siden en lavere skaleringsdekoder som bare er tilpasset for tokanalbehandling ganske enkelt kan ignorere forlengelsesinformasjonen, dvs. kanalsideinformasjonen. Den lavere skaleringsdekoder kan bare spille av de to nedblandekanaler for å oppnå en stereogjengivelse av det opprinnelige, flerkanalsaudiosignal. En høyere skaleringsdekoder, som imidlertid er aktivert for flerkanalsbruk, kan bruke den overførte kanalsideinformasjon for å rekonstruere approksimasjoner av de opprinnelige kanaler.
Oppfinnelsen er fordelaktig ved at den er biteffektiv siden ingen ekstra bærerkanal utenfor de første og andre nedblandekanaler Lc, Rc er nødvendig, i motsetning til tidligere teknikk. I stedet blir kanalsideinformasjonen relatert til en eller begge nedblandekanalene. Dette innebærer at nedblandekanalene selv kun tjener som en bærerkanal som kanalsideinformasjonen kombineres til for å rekonstruere en opprinnelig audiokanal. Dette innebærer at kanalsideinformasjonen fortrinnsvis er parametersideinformasjonen, dvs. informasjon som ikke omfatter eventuelle delbåndsampler eller spektral-koeffisienter. I stedet er parametersideinformasjonen en funksjon som brukes for veiing (i tid og/eller frekvens) av den respektive nedblandekanal eller kombinasjonen av de respektive nedblandekanaler for å oppnå en rekonstruert versjon av en valgt, opprinnelig kanal.
I en foretrukket utførelse av oppfinnelsen oppnås en bakoverkompatibel kodingav et flerkanalssignal basert på et kompatibelt stereosignal. Fortrinnsvis blir det kompatible stereosignal (nedblandesignalet) generert ved å bruke matrising av de opprinnelige kanalene av flerkanalsaudiosignalet.
I oppfinnelsen oppnås kanalsideinformasjon for en valgt, opprinnelig kanal basert på samlede stereoteknikker, for eksempel intensitetsstereokoding eller "binaural cuecoding". Således er det ikke nødvendig med noen dematrising på dekodersiden. Problemene i forbindelse med dematrising, dvs. enkelte kunstgrep knyttet til uønsket fordeling av kvantiseringsstøy i dematrisingsoperasjoner, unngås. Dette på grunn av at dekoderen bruker en kanalrekonstruktør som rekonstruerer et opprinnelig signal ved å bruke en av nedblandekanalene eller en kombinasjon av nedblandekanaler og den overførte kanalsideinformasjonen.
Fortrinnsvis brukes det nye konsept på et flerkanals audiosignal fem kanaler. Disse fem kanalene er en venstrekanal L, en høyrekanal R, en senterkanal C, en venstre surroundkanal Ls og en høyre surroundkanal Rs. Fortrinnsvis er nedblandekanalene stereokompatible nedblandekanaler Ls og Rs som leverer en stereogjengivelse av det opp-rinnelige flerkanals audiosignal.
Ifølge den foretrukne utførelse av oppfinnelsen blir kanalsideinformasjonen, for hver opprinnelige kanal, beregnet ved en kodeside pakket inn i utgangsdata. Kanalsideinformasjonen for den opprinnelige venstrekanal avledes ved å bruke venstre nedblandekanal. Kanalsideinformasjonen for den opprinnelige venstre surroundkanal blir avledet ved å bruke den venstre nedblandekanal. Kanalsideinformasjonen for den opprinnelige høyrekanal avledes fra den høyre nedblandekanal. Kanalsideinformasjonen for den opprinnelige høyre surroundkanal blir avledet fra den høyre nedblandekanal.
Ifølge den foretrukne utførelse av oppfinnelsen avledes kanalinformasjonen forden opprinnelig sendte kanal ved å bruke den første nedblandekanal samt den andre ned-blandekanal, for eksempel ved å bruke en kombinasjon av de to nedblandekanaler. Fortrinnsvis er denne kombinasjon en summering.
Således er grupperingene, dvs. forholdet mellom kanalsideinformasjonen og bærersignalet, dvs. den brukte nedblandekanal for å tilveiebringe kanalsideinformasjon for en valgt, opprinnelig kanal slik at en bestemt nedblandekanal blir valgt for optimal kvalitet, og som inneholder den høyest mulige relative mengde av det respektive, opprinnelige flerkanalssignalet som representeres av kanalsideinformasjonen. Som sådant brukes et samlet stereobærersignal og første og andre nedblandekanaler. Fortrinnsvis kan også summen av første og andre nedblandekanaler brukes. Naturligvis kan summen av første og andre nedblandekanaler brukes for å beregne kanalsideinformasjonen for hver av de opprinnelige kanaler. Fortrinnsvis brukes imidlertid summen av nedblandekanalene for å beregne kanalsideinformasjonen av den opprinnelige senterkanal i et surroundmiljø, for eksempel femkanalssurround, syvkanalssurround, 5.1-surround eller 7.1-surround. Bruken av summen av første og andre nedblandekanaler er spesielt fordelaktig siden ingen ekstraoverføringstittel må utføres. Dette på grunn av at begge nedblandekanalene er til stede ved dekoderen, slik at summeringen av disse nedblandekanalene lett kan utføres ved dekoderen uten ekstra overføringsbiter.
Fortrinnsvis vil kanalsideinformasjonen som danner flerkanalsforlengelsen sendt til utgangsdatabitstrømmen på en kompatibel måte, slik at en lavere skaleringsdekoderganske enkelt ignorerer flerkanalsforlengelsesdataene og bare leverer en stereogjengivelse av flerkanalsaudiosignalet. Uansett vil en høyere skaleringskoder ikke bare bruke to ned-blandekanaler, men i tillegg bruke kanalsideinformasjonen for å rekonstruere en full flerkanals gjengivelse av det opprinnelige audiosignal.
En ny dekoder vil først dekode begge nedblandekanaler og avlese kanalsideinformasjonen for de valgte, opprinnelige kanaler. Deretter blir kanalsideinformasjonen og nedblandekanalene brukt for å rekonstruere approksimasjoner av de opprinnelige kanaler. For å oppnå dette vil fortrinnsvis ingen dematrising utføres i det hele tatt. Dette innebærer at hver av de for eksempel fem opprinnelige inngangskanaler i denne utførelse blir rekonstruert ved å bruke for eksempel fem sett av forskjellige kanalsideinformasjon. Idekoderen utføres samme gruppering som i koderen for å beregne den rekonstruerte kanalapproksimasjon. I et femkanals surroundmiljø innebærer dette for å rekonstruere den opprinnelige venstrekanal, at venstre nedblandekanal og kanalsideinformasjon for den venstre kanal blir brukt. For å rekonstruere den opprinnelige høyrekanal blir den høyre nedblandekanal og kanalsideinformasjonen for høyre kanal, brukt. For å rekonstruere den opprinnelige venstre surroundkanal blir venstre nedblandekanal og kanalsideinformasjonen for den venstre surroundkanal brukt. For å rekonstruere den opprinnelige høyre surroundkanal, blir kanalsideinformasjon for den høyre surroundkanal og den høyre ned-blandekanal, brukt. For å rekonstruere den opprinnelige senterkanal, blir en kombinertkanal dannet av den første nedblandekanal og den andre nedblandekanal og senterkanalside-informasjonen, brukt.
Naturligvis er det også mulig å spille tilbake første og andre nedblandekanaler som venstre og høyre kanal, slik at bare tre sett (av f.eks. fem) av kanalsideinformasjonsparametere behøver å overføres. Dette er imidlertid bare tilrådelig i situasjoner hvor det finnes mindre strenge regler for kvalitet. Dette på grunn av at venstre og høyre ned-blandekanal normalt er forskjellig fra den opprinnelige venstre og høyre kanal. Bare i situasjoner hvor man ikke har anledning til å overføre kanalsideinformasjon for å bære de opprinnelige kanalene, er en slik behandling fordelaktig.
Oppfinnelsen skal nå beskrives nærmere i det følgende under henvisning til utførelser, hvor:
fig. 1 er et blokkskjema over en foretrukket utførelse av den nye koder, fig. 2 er et blokkskjema av en foretrukket utførelse av den nye dekoder,
fig. 3A er et blokkskjema av en foretrukket implementering av anordningen for å beregne for å oppnå frekvensselektiv kanalsideinformasjon,
fig. 3B er en foretrukket utførelse av en kalkulator som implementerer samlet stereobehandling, for eksempel intensitetskoding eller "binaural cue coding",
fig. 4 viser en annen foretrukket utførelse av anordningen for å beregne kanalsideinformasjon hvor kanalsideinformasjonen er forsterkningsfaktorer,
fig. 5 illustrerer en foretrukket utførelse av en implementering av dekoderen når 25 koderen implementeres som vist på fig. 4,
fig. 6 viser en foretrukket implementering av anordningen for å tilveiebringe nedblandekanaler,
fig. 7 viser grupperinger av opprinnelige og nedblandekanaler for å beregne kanalsideinformasjonen for de respektive, opprinnelige kanaler,
fig. 8 viser en annen foretrukket utførelse av en ny koder,
fig. 9 viser en annen implementering av en ny dekoder, og
fig. 10 viser en sammenføyd stereodekoder av gjeldende teknikk.
Fig. 1 viser et apparat for å behandle et flerkanals audiosignal 10 ved minst tre opprinnelige kanaler, for eksempel R, L og C. Fortrinnsvis har det opprinnelige audiosignal mer enn tre kanaler, for eksempel fem kanaler i surroundmiljøet, som vist på fig. 1. De fem kanalene er venstrekanal L, høyrekanal R, senterkanalen C og venstre surroundkanal Ls og høyre surroundkanal Rs. Det nye apparatet omfatter anordning 12 for å tilveiebringe en første nedblandekanal Lc og en andre nedblandekanal Rc, idet første og kanalene fra de opprinnelige kanaler finnes det flere muligheter. En mulighet er å avlede nedblandekanalene Lc og Rc ved hjelp av matrising av de opprinnelige kanaler ved å bruke matriseoperasjonen som vist på fig. 6. Denne matriseoperasjon utføres i tidsdomenet.
Matriseparametrene a, b og t velges slik at de er lavere eller lik 1. Fortrinnsvis er a og b 0,7 eller 0,5. Den totale vektingsparameter t velges fortrinnsvis slik at kanalklipping unngås.
Alternativt som vist på fig. 1, kan nedblandekanalene Lc og Rc også leveres eksternt. Dette kan utføres når nedblandekanalene Lc og Rc er resultatet av en "håndblande"-operasjon. I dette tilfellet blander lydteknikeren ned blandekanalene selv snarere enn ved å bruke automatisert matriseoperasjon. Lydteknikeren utfører kreativ blanding for å oppnå optimale nedblandekanaler Lc og Rc som gir best mulig stereogjengivelse av det opprinnelige flerkanals audiosignal.
I tilfellet en ekstern tilførsel av nedblandekanaler, utfører anordningen ikke en 15 matriseoperasjon men videresender ganske enkelt de eksternt tilførte nedblandekanalene til en etterfølgende beregningsanordning 14.
Beregningsanordningen 14 kan beregne kanalsideinformasjonen for eksempel l, lsi, ri, eller rsi, for valgte, opprinnelige kanaler, så som L, Ls, R eller Rs. Især kan anordningen 14 for beregning beregne kanalsideinformasjon, slik at en nedblandekanal, når den veies ved å bruke kanalsideinformasjon, fører til en approksimasjon av den valgte, opprinnelige kanal.
Alternativt, eller i tillegg, kan anordningen for å beregne kanalsideinformasjonen brukes for å beregne kanalsideinformasjonen for en valgt, opprinnelig kanal, slik at den kombinerte nedblandekanal omfatter en kombinasjon av første og andre nedblandekanaler, som når de veies, ved å bruke den beregnede kanalsideinformasjonen, fører til en approksimasjon av den valgte, opprinnelige kanal. For å vise denne egenskap på figuren, er det vist en tilleggingsenhet 14a og en kombinert kanalsideinformasjonskalkulator 14b.
Det vil fremgå for en fagmann at disse elementene ikke behøver implementeres som atskilte elementer. I stedet kan hele funksjonaliteten av blokkene 14, 14a og 14b implementeres av en prosessor som kan være en generell prosessor eller en annen anordning for å utføre den ønskede funksjonalitet.
I tillegg skal det bemerkes at kanalsignalene er delbåndsampler eller frekvensdomeneverdier som indikert med store bokstaver. Kanalsideinformasjonen er i motsetning til selve kanalene, vist med små bokstaver. Kanalsideinformasjonen c; erfølgelig kanalsideinformasjonen for den opprinnelige senterkanal C.
Kanalsideinformasjonen, samt nedblandekanalene Lc og Rc eller en kodet versjon Lc' og Rc' som produsert av en lydkoder 16, blir sendt til en utgangsdataformaterer 18. Generelt virker utgangsdataformatereren 18 som anordning for å generere utgangsdata, herunder kanalsideinformasjon for minst en opprinnelig kanal, den første nedblandekanal eller et signal som avledes fra den første nedblandekanal (f.eks. en kodet versjon derav) og den andre nedblandekanal eller signal avledet fra den andre nedblandekanal (f.eks. en kodet versjon derav.)
Utgangsdataene eller utgangsbitstrømmen 20 kan deretter overføres til enbitstrømdekoder eller kan lagres eller distribueres. Fortrinnsvis er utgangsbitstrømmen 20 en kompatibel bitstrøm som også kan leses av en lavere skaleringsdekoder som ikke har en flerkanals forlengelsesmulighet. Slike lavere skaleringskodere, for eksempel de fleste normale, eksisterende mp3-dekodere, vil ganske enkelt ignorere flerkanalsforlengelsesdata, dvs. kanalsideinformasjon. De vil bare dekode første og andre nedblandekanaler for å produsere et stereosignal. Høyre skaleringsdekodere, for eksempel flerkanalsaktiverte dekodere vil avlese kanalsideinformasjonen og vil deretter generere en opprinnelig approksimasjon av de opprinnelige audiokanaler, slik at det oppnås en flerkanals audiogjengivelse.
Fig. 8 viser en foretrukket utførelse av oppfinnelsen i miljøet med femkanalssurround/mp3. Her er det foretrukket surroundforbedrende data inn i tilleggsdatafeltet i den standardiserte mp3-bitstrømsyntaks, slik at det oppnås en "mp3-surround"-bitstrøm.
Fig. 2 viser en illustrasjon av en ny dekoder som virker som et apparat for omvendt behandling av inngangsdata mottatt ved inngangsdataporten 22. Dataene mottatt ved inngangsdataporten 22 er de samme data som ble sendt ved utgangsdataporten 20 på fig. 1. Når dataene ikke sendes via en fysisk kanal men via en trådløs kanal, blir alternativt dataene mottatt ved datainngangsporten 22 avledet fra de opprinnelige dataene produsert av koderen.
Dekoderinngangsdataene blir sendt inn i en datastrømleser 24 for å avlese inngangsdataene for til slutt å oppnå kanalsideinformasjonen 26 og den venstre nedblandekanal 28 og den høyre nedblandekanal 30. Når inngangsdataene omfatter kodede versjoner av nedblandedataene som tilsvarer tilfellet hvor audiokoderen 16 på fig. 1 er til stede, vil datastrømleseren 24 også omfatte en audiodekoder som er tilpasset audiokoderen brukt for å kode nedblandekanalen. I dette tilfellet kan audiodekoderen som er en del av datastrømleseren 24 generere den første nedblandekanal Lc og den andre nedblandekanal Rc, eller mer nøyaktig en dekodet versjon av disse kanalene. For beskrivelsen vil et skille mellom signalene og de dekodede versjoner av disse bare bli foretatt når det er uttrykkelig nevnt.
Kanalsideinformasjonen 26 og venstre og høyre nedblandekanaler 28 og 30 fra datastrømleseren 24 blir matet inn i en flerkanals rekonstruktør 32 for å levere en rekonstruert versjon 34 av de opprinnelige audiosignaler som kan spilles av ved hjelp av en flerkanals spiller 36. Når flerkanalsrekonstruktøren brukes i frekvensdomenet, vil flerkanalsspilleren 36 motta frekvensdomeneinngangsdata som må dekodes på en bestemt måte, for eksempel konverteres til tidsdomene før avspilling. For å oppnå dette kan flerkanalsspilleren også omfatte dekodingsmuligheter.
Det skal bemerkes her at en nedskaleringsdekoder bare vil ha datastrømleseren 24 som bare sender ut venstre og høyre nedblandekanaler 28 og 30 til en stereoutgang 38. En forbedret, ny dekoder vil imidlertid trekke ut kanalsideinformasjonen 26 og bruke denne sideinformasjon og nedblandekanalene 28 og 30 for å rekonstruere de rekonstruerteversjoner 34 av de opprinnelige kanaler ved å bruke flerkanalsrekonstruktøren 32.
Fig. 3A viser en utførelse av den nye kalkulator 14 for å beregne kanalsideinformasjonen som en audiokoder på den ene side og kanalsideinformasjonskalkulatoren på en annen side bevirker på den samme spektrale gjengivelse av flerkanalssignalet. Fig. 1 viser imidlertid det andre alternativ hvor audiokoderen på den ene side og kanalsideinforma-sjonskalkulatoren på en annen side virker på forskjellige spektralgjengivelser av flerekanalssignalet. Når beregning av ressursene ikke er så viktig som lydkvaliteten kan alternativet på fig. 1 foretrekkes siden filterbanker som er individuelt optimalisert for lydkoding og sideinformasjonsberegning, brukes. Når imidlertid beregningsressurser er viktig, foretrekkes alternativet på fig. 3A siden dette alternativet krever mindre beregningskraft på grunn av en delt utnyttelse av elementene.
Innretningen vist på fig. 3A kan motta to kanaler A, B. Innretningen vist på fig.
3A kan beregne en sideinformasjon for kanalen B, slik at ved å bruke denne kanalsideinformasjon for den valgte opprinnelige kanal B, kan en rekonstruert versjon av kanalen B beregnes fra kanalsignalet A. I tillegg kan enheten vist på fig. 3A frembringe kanalsidein-formasjon fra frekvensdomenet, for eksempel parametere for vekting (ved multiplisering eller tidsbehandling som i BCC-koding) av spektralverdier eller delbåndsampler. For oppnå dette omfatter den nye kalkulator vindus- og tids/frekvenskonverteringsanordningen 140a for å oppnå en frekvensgjengivelse av kanal A ved inngangen 140b eller en frekvensdomenegjengivelse av kanalen B ved en utgang 140c.
I den foretrukne utførelse utføres sideinformasjonsbestemmelsen (ved hjelp av sideinformasjonsbestemmelsesanordningen 1400f) ved å bruke kvantiserte spektralverdier. Deretter blir en kvantiserer 140d som også er til stede, brukt i forbindelse med en psyko-akustisk modell med en reguleringsinngang 140e. Uansett er det ikke behov for en kvantiserer når sideinformasjonsbestemmelsesanordningen 140c bruker en ikkekvantisertgjengivelse av kanalen A for å bestemme kanalsideinformasjonen for kanal B.
Hvis kanalsideinformasjonen for kanal B beregnes ved hjelp av en frekvensdomenegjengivelse av kanalen A og frekvensdomenegjengivelsen av kanalen B, kan vindus- og tids/frekvenskonverteringsanordningen 140a være den samme som blir brukt i en filterbankbasert audiokoder. I dette tilfellet, og når AAC (ISO/IEC 13818-3) vurderes,blir anordningen 140a implementert som en MDCT-filterbank (MDCT = modified discrete cosine transform) med 50 % overlapping og tilleggsfunksjonalitet.
I et slikt tilfelle er kvantisereren 140d en periodekvantiserer, for eksempel som brukes når mp3 eller AAC-kodede audiosignaler genereres. Frekvensdomenegjengivelsen av kanal A som fortrinnsvis allerede er kvantisert, kan deretter direkte brukes for entropikoding ved å bruke en entropikoder 140g som kan være en Huffman-basert koder eller en entropikoder som implementerer aritmetisk koding.
Sammenliknet med fig. 1 er signalet fra enheten på fig. 3A sideinformasjonen, for eksempel 1; for en opprinnelig kanal (tilsvarende sideinformasjonen for B ved signalet fra enheten 140f). Entropikodet bitstrøm for kanalen A tilsvarer for eksempel den kodede, venstre nedblandekanal L& ved utgangen av blokken 16 på fig. 1. Fra fig. 3A vil det fremgå at elementet 14 (fig. 1), for eksempel kalkulatoren for å beregne kanalsideinformasjonen og audiokoderen 16 (fig. 1) kan implementeres som separate anordninger eller implementeres som en delt versjon, slik at begge enhetene deler flere elementer, for eksempel MDCT-filterbanken 140a, kvantisereren 140e og entropikoderen 140g. Hvis det er ønskelig med en annen omvandling osv. for å behandle kanalsideinformasjonen, vil koderen 16 og kalkulatoren 14 (fig. 1) implementeres i andre enheter, slik at begge elementene ikke deler filterbanken osv.
Generelt kan den faktiske determinator for å beregne sideinformasjonen (eller generelt kalkulatoren 14) implementeres som en felles stereomodul som vist på fig. 3B som virker i samsvar med en av de felles stereoteknikkene som for eksempel intensitetsstereokoding eller "binaural cue coding".
I motsetning til tidligere intensitetsstereokodere, behøver den nye beslutningsanordning 140f ikke å måtte beregne den kombinerte kanal. Den "kombinerte kanal" eller bærerkanalen som allerede finnes og er den venstre kompatible nedblandekanal Lc eller den høyre kompatible nedblandekanal Rc eller en kombinert versjon av disse to nedblandekanaler, for eksempel Lc Rc. Følgelig må den nye enhet 140f bare måtte beregne skaleringsinformasjonen for skalering av den respektive nedblandekanal, slik at energi/tidsenveloppen av en respektivt valgt, opprinnelig kanal oppnås når nedblandekanalen blir vektet ved å bruke skaleringsinformasjon eller intensitetsretningsinformasjonen.
Følgelig er felles stereomodulen 140f på fig. 3B vist slik at den mottar, som et inngangssignal, den "kombinerte" kanal A som er den første eller andre nedblandekanal eller en kombinasjon av nedblandekanalen og den opprinnelig valgte kanal. Denne modulsender naturligvis ut den "kombinerte" kanal A og de felles stereoparametere som kanal-sideinformasjon slik at en approksimasjon av den opprinnelig valgte kanal B kan beregnes ved å bruke den kombinerte kanal A og de felles stereoparametere.
Alternativt kan den felles stereomodul 140f implementeres for å utføre "binaural cue coding".
Når det gjelder BCC, sender den felles stereomodul 140f kanalsideinformasjon, slik at kanalsideinformasjonen blir kvantisert og koder ICLD- eller ICTD-parametere, idet den valgte, opprinnelige kanal tjener som den faktiske behandlede kanal mens den respektive nedblandekanal som brukes for å beregne sideinformasjonen, for eksempel den første, den andre eller en kombinasjon av første og andre nedblandekanaler brukes som referansekanal i BCC-kode/dekodeteknikken.
På fig. 4 er det vist en enkelt energirettet implementering av elementet 140f. Denne enheten omfatter en frekvensbåndvelger 44 som velger et frekvensbånd forkanalen A og det tilsvarende frekvensbånd av kanalen B. Deretter blir en energi i begge frekvensbånd beregnet ved hjelp av en energikalkulator 42 for hver gren. Denne detaljerte implementering av energikalkulatoren 42 vil avhenge av om utgangssignalet fra blokken 40 er et delbåndsignal eller er frekvenskoeffisienter. I andre implementeringer hvor skaleringsfaktorer for skaleringsfaktorbåndene blir beregnet, kan det allerede brukes skaleringsfaktorer av første og andre kanal A, B som energiverdier EA og EB eller minst som estimater av energien. I en forsterkningsfaktorberegningsinnretning 44, blir en forsterkningsfaktor gB for det valgte frekvensbånd bestemt basert på en bestemt regel, for eksempel forsterkningsbestemmelsesregelen vist i blokk 44 på fig. 4. Her kan forsterkningsfaktoren gB direkte brukes for å vekte tidsdomenesampler eller frekvenskoeffisienter som beskrevet senere under fig. 5. For å oppnå dette blir forsterkningsfaktoren gB som er gyldig for det valgte frekvensbånd brukt som kanalsideinformasjon for kanalen B som den valgte, opprinnelige kanal. Denne valgte, opprinnelige kanal B vil ikke bli sendt til dekoderen men bli representert av parameterkanalsideinformasjonen som beregnet av kalkulatoren 14 på fig. 1.
Det skal bemerkes her at det ikke er nødvendig å sende forsterkningsverdier som kanalsideinformasjon. Det er også tilstrekkelig å sende frekvensavhengige verdier tilknyttet den absolutte energi av den valgte, opprinnelige kanal. Deretter må dekoderen beregne den faktiske verdi av nedblandekanalen og forsterkningsfaktoren basert på nedblandekanalens energi og den overførte energi for kanal B.
Fig. 5 viser en mulig implementering av en dekoder satt opp i forbindelse med en omvandlingsbasert, tenkt audiodekoder. Sammenliknet med fig. 2, vil funksjonaliteten av entropidekoderen og den omvendte kvantiserer 50 (fig. 5) omfattes i blokken 24 på fig.
2. Funksjonaliteten av frekvens/tidskonverteringselementene 52a, 52b (fig. 5) vil imidlertid bli implementert under punkt 36 på fig. 2. Elementet 50 på fig. 5 mottar en kodet versjonav første eller andre nedblandesignal Lc’ eller Rc’. Ved utgangen av elementet 50 er minst en delvis dekodet versjon av første og andre nedblandekanal til stede som til slutt vil bli kalt kanal A. Kanal A blir sendt til en frekvensbåndvelger 54 for å velge et bestemt frekvensbånd fra kanalen A. Dette valgte frekvensbånd blir vektet ved å bruke en multiplikator 56. Multiplikatoren 56 mottar for multiplisering, en bestemt forsterkningsfaktor gB som blir tildelt det valgte frekvensbånd valgt av frekvensbåndvelgeren 54 som tilsvarer frekvensbåndvelgeren 40 på fig. 4 ved kodersiden. Ved inngangen av frekvenstids-konverteren 52a vil det sammen med andre bånd finnes en frekvensdomenegjengivelse av kanal A. Ved utgangen av multiplikatoren 56 og især ved inngangen av frekvens/tidskonverteringsanordningen 52B vil det være en rekonstruert frekvensdomenegjengivelse av kanal B. Følgelig vil det ved utgangen av elementet 52a være en tidsdomenegjengivelse for kanal A mens det ved utgangen av elementet 52b vil være en tidsdomene-gjengivelse av den rekonstruerte kanal B.
Avhengig av den bestemte implementering skal det bemerkes her at den dekodede nedblandekanal Lc eller Rc ikke spiller tilbake i en flerkanals forbedret dekoder. I en slik flerkanals forbedret dekoder brukes bare de dekodede nedblandekanaler for å rekonstruere de opprinnelige kanaler. De dekodede nedblandekanaler blir bare spilt tilbake i stereo-dekodere av lavere skala.
For å oppnå dette henvises det til fig. 9 som viser den foretrukne implementering av oppfinnelsen i et surround/mp3-miljø. En mp3-forbedret surround-bitstrøm blir sendt inn i en standard mp3-dekoder 24 som sender dekodede versjoner av de opprinnelige ned-blandekanaler. Disse nedblandekanalene kan så direkte spilles tilbake ved hjelp av en lavnivådekoder. Alternativt blir disse to kanalene sendt til den arrangerte, felles stereodekodingsenhet 32 som også mottar flerkanalsforlengelsesdata som fortrinnsvis sendes til tilleggsdatafelt i en mp3-tilpasset bitstrøm.
Det henvises så til fig. 7 som viser grupperingen av den valgte, opprinnelige kanal og den respektive nedblandekanal eller kombinerte nedblandekanal. I denne henseende tilsvarer den høyre kolonne av tabellen på fig. 7 kanalen A på fig. 3A, 3B, 4 og 5 mens kolonnen i midten tilsvarer kanal 213 på disse figurene. I den venstre kolonne på fig. 7 blirden respektive kanalsideinformasjon uttrykkelig oppgitt. Ifølge tabellen på fig. 7 blir kanalsideinformasjonen 1i for den opprinnelige venstrekanal L beregnet ved å bruke venstre nedblandekanal Lc. Venstre surroundkanalsideinformasjon Isi bestemmes ved hjelp av den opprinnelig valgte venstre surroundkanal Ls og den venstre nedblandekanal Lc, er bæreren. Høyrekanalsideinformasjonen ri for den opprinnelige høyrekanal R bestemmes ved å bruke den høyre nedblandekanal Rc, I tillegg blir kanalsideinformasjonen for høyre surroundkanal Rs bestemt ved å bruke den høyre nedblandekanal Rc som bærer. Til slutt blir kanalsideinformasjonen ci for senterkanalen C bestemt ved å bruke den kombinerte nedblandekanal som oppnås ved hjelp av en kombinasjon av første og andre nedblandekanal og som lett kan beregnes både i en koder og i en dekoder som ikke krever ekstra biter for overføringen.
Naturligvis er det også mulig å beregne kanalsideinformasjon for venstre kanal, for eksempel basert på en kombinert nedblandekanal eller også en nedblandekanal som oppnås ved en vektet tillegging av første og andre nedblandekanaler, for eksempel 0,7 Lc og 0,3 Rc så lenge vektparametrene er kjent for en dekoder eller overført tilsvarende. For de fleste anvendelser vil det imidlertid være foretrukket bare å avlede kanalsideinformasjonen for senterkanalen fra den kombinerte nedblandekanal, dvs. fra en kombinasjon av første og andre nedblandekanaler.
For å vise bitbesparelsespotensialet ifølge oppfinnelsen, skal følgende typiske eksempel gis. For et femkanals audiosignal trenger en normal koder en bitrate på 64 kbit/s for hver kanal noe som oppgår til en total bitrate på 320 kbit/s for femkanalsignalet. Venstre og høyre stereosignaler krever en bitrate på 128 kbit/s. Kanalsideinformasjonen for en kanal er mellom 1,5 og 2 kbit/s. Således vil disse tilleggsdata oppgå til bare 7,5 til 10 kbit/s i et tilfelle hvor kanalsideinformasjon for hver av de fem kanalene blir overført. Således tillater det nye konsept overføring av et femkanals audiosignal ved å bruke en bitrate på 38 kbit/s (sammenliknet med 320 (!) kbit/s) med god kvalitet siden dekoderen ikke bruker den problematiske dematriseoperasjonen. Viktigere er det at det nye konsept er helt bakoverkompatibelt siden hver av de eksisterende mp3-spillere kan spille tilbake den første nedblandekanal og den andre nedblandekanal for å produsere et konvensjoneltstereosignal.
Avhengig av applikasjonsmiljøet kan den nye fremgangsmåte for å behandle eller omvendt behandle implementeres i maskinvare eller i programvare. Implementeringen kan være et digitalt lagringsmedium, for eksempel en disk eller en CD med elektronisk lesbare styresignaler som kan samvirke med et programmerbart datasystem, slik at den nye fremgangsmåte for behandling eller omvendt behandling blir utført. Generelt angår oppfinnelsen følgelig også et dataprogram med en programkode lagret på en maskinlesbar bærer, idet programvarekoden er tilpasset for å utføre den nye fremgangsmåte når dataprogrammet kjøres på en datamaskin. Med andre ord angår oppfinnelsen også et dataprogram med programkode for å utføre fremgangsmåten når dataprogrammet kjøres på en datamaskin.

Claims (3)

PATENTKRAV
1. Apparat for invers behandling av inngangsdata for et flerkanals lydsignal, karakterisert ved at apparatet omfatter:
en inngangsdata leser for å lese inngangsdata, hvor inngangsdataene omfatter kanalsideinformasjon, en første nedblandekanal eller et signal avledet fra den første nedblandekanalen og en andre nedblandekanal eller et signal som er avledet fra den andre nedblandekanalen, hvor kanalsideinformasjonen er beregnet slik at en nedblandekanal eller en kombinert nedblandekanal som omfatter den første nedblandekanalen og den andre nedblandekanalen, når den vektes ved å bruke kanalsideinformasjonen, resulterer i en approksimasjon av en valgt opprinnelig kanal hvor inngangsdataleseren er konfigurert til å oppnå den første nedblandekanalen eller et signal som er avledet fra den første nedblandekanalen og den andre nedblandekanalen eller et signal som er avledet fra den andre nedblandekanalen og kanalsideinformasjonen ; og
en kanalrekonstruktør for å rekonstruere approksimasjonen til den valgte opprinnelige kanalen ved hjelp av kanalsideinformasjonen og nedblandekanalen eller den kombinerte nedblandekanalen for å oppnå approksimasjon av den valgte opprinnelige kanalen,
hvor approksimasjonen omfatter en approksimert senterkanal,
hvor inngangsdataene inkluderer kanalsideinformasjon for den approksimerte senterkanalen,
hvor apparatet videre omfatter en kombinator for kombinering av den første nedblandekanalen og den andre nedblandekanalen for å oppnå den kombinerte nedblandekanalen; og
hvor kanalrekonstruktøren er konfigurert til å rekonstruere den approksimerte senterkanalen ved å bruke kanalsideinformasjonen for senterkanalen og å bruke den kombinerte nedblandekanalen,
hvor minst én av inngangsdataleseren og kanalrekonstruktøren omfatter en maskinvareimplementering.
2. Fremgangsmåte for invers behandling av inngangsdata for et flerkanals lydsignal, hvor fremgangsmåten omfatter:
å lese, ved en inngangsdataleser, inngangsdata, hvor inngangsdataene omfatter kanalsideinformasjon, en første nedblandekanal eller et signal som er avledet fra den første nedblandekanalen og en andre nedblandekanal eller et signal som er avledet fra den andre nedblandekanalen, hvor kanalsideinformasjonen er beregnet slik at en nedblandekanal eller en kombinert nedblandekanal som omfatter den første nedblandekanalen og den andre nedblandekanalen, når den vektes ved hjelp av kanalsideinformasjonen , resulterer i en approksimasjon av en valgt opprinnelig kanal; og
å rekonstruere, ved en rekonstruktør, approksimasjonen av den valgte opprinnelige kanal ved å bruke kanalsideinformasjonen og nedblandekanalen eller den kombinerte nedblandekanalen for å oppnå approksimasjonen av den valgte opprinnelige kanalen,
hvor approksimasjonen omfatter en approksimert senterkanal,
hvor inngangsdataene inkluderer kanalsideinformasjon for den approksimerte senterkanalen,
hvor fremgangsmåten videre omfatter å kombinere den første nedblandekanalen og den andre nedblandekanalen for å oppnå den kombinerte nedblandekanalen; og
hvor rekonstruksjonen omfatter å rekonstruere den approksimerte senterkanalen ved å bruke kanalsideinformasjonen for senterkanalen og å bruke den kombinerte nedblandekanalen, og
hvor minst én av inngangsdataleseren og kanalrekonstruktøren omfatter en maskinvareimplementering.
3. Ikke-flyktig lagringsmedium som har lagret et dataprogram som har en programkode for å utføre en fremgangsmåte for invers behandling av inngangsdata for et flerkanals lydsignal karakterisert ved at fremgangsmåten omfatter:
å lese inngangsdata, hvor inngangsdataene omfatter kanalsideinformasjon, en første nedblandekanal eller et signal avledet fra den første nedblandekanalen og en andre nedblandekanal eller et signal som er avledet fra den andre nedblandekanalen, hvor kanalsideinformasjonen er beregnet slik at en nedblandekanal eller en kombinert nedblandekanal som omfatter den første nedblandekanalen og andre nedblandekanal, når den vektes med kanalsideinformasjonen, resulterer i en approksimasjon av den valgte opprinnelige kanalen; og
å rekonstruere approksimasjonen til den valgte opprinnelige kanalen ved å bruke kanalsideinformasjonen og nedblandekanalen eller den kombinerte nedblandekanalen for å oppnå approksimasjon av den valgte opprinnelige kanalen,
hvor approksimasjonen omfatter en approksimert senterkanal,
hvor inngangsdataene inkluderer kanalsideinformasjon for den approksimerte senterkanalen,
hvor fremgangsmåten videre innbefatter kombinering av den første
nedblandekanalen og den andre nedblandekanalen for å oppnå den kombinerte nedblandekanalen; og
hvor å rekonstruere omfatter rekonstruksjon av den approksimerte
senterkanalen ved å bruke kanalsideinformasjonen for senterkanalen og å bruk av den kombinerte nedblandekanalen.
NO20180980A 2003-10-02 2018-07-12 Kompatibel flerkanal-koding/dekoding NO344483B1 (no)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/679,085 US7447317B2 (en) 2003-10-02 2003-10-02 Compatible multi-channel coding/decoding by weighting the downmix channel
PCT/EP2004/010948 WO2005036925A2 (en) 2003-10-02 2004-09-30 Compatible multi-channel coding/decoding

Publications (2)

Publication Number Publication Date
NO20180980A1 NO20180980A1 (no) 2006-06-30
NO344483B1 true NO344483B1 (no) 2020-01-13

Family

ID=34394093

Family Applications (8)

Application Number Title Priority Date Filing Date
NO20191058A NO347074B1 (no) 2003-10-02 2004-09-30 Kompatibel flerkanalkoding/dekoding
NO20061898A NO342804B1 (no) 2003-10-02 2006-04-28 Kompatibel flerkanal-koding/dekoding
NO20180978A NO344635B1 (no) 2003-10-02 2018-07-12 Kompatibel flerkanal-koding/dekoding
NO20180980A NO344483B1 (no) 2003-10-02 2018-07-12 Kompatibel flerkanal-koding/dekoding
NO20180991A NO344091B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20180993A NO344093B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20180990A NO344760B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20200106A NO345265B1 (no) 2003-10-02 2020-01-28 Kompatibel flerkanal-koding/dekoding

Family Applications Before (3)

Application Number Title Priority Date Filing Date
NO20191058A NO347074B1 (no) 2003-10-02 2004-09-30 Kompatibel flerkanalkoding/dekoding
NO20061898A NO342804B1 (no) 2003-10-02 2006-04-28 Kompatibel flerkanal-koding/dekoding
NO20180978A NO344635B1 (no) 2003-10-02 2018-07-12 Kompatibel flerkanal-koding/dekoding

Family Applications After (4)

Application Number Title Priority Date Filing Date
NO20180991A NO344091B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20180993A NO344093B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20180990A NO344760B1 (no) 2003-10-02 2018-07-13 Kompatibel flerkanal-koding/dekoding.
NO20200106A NO345265B1 (no) 2003-10-02 2020-01-28 Kompatibel flerkanal-koding/dekoding

Country Status (18)

Country Link
US (11) US7447317B2 (no)
EP (1) EP1668959B1 (no)
JP (1) JP4547380B2 (no)
KR (1) KR100737302B1 (no)
CN (1) CN1864436B (no)
AT (1) ATE350879T1 (no)
BR (5) BR122018069730B1 (no)
CA (1) CA2540851C (no)
DE (1) DE602004004168T2 (no)
DK (1) DK1668959T3 (no)
ES (1) ES2278348T3 (no)
HK (1) HK1092001A1 (no)
IL (1) IL174286A (no)
MX (1) MXPA06003627A (no)
NO (8) NO347074B1 (no)
PT (1) PT1668959E (no)
RU (1) RU2327304C2 (no)
WO (1) WO2005036925A2 (no)

Families Citing this family (152)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8605911B2 (en) 2001-07-10 2013-12-10 Dolby International Ab Efficient and scalable parametric stereo coding for low bitrate audio coding applications
SE0202159D0 (sv) 2001-07-10 2002-07-09 Coding Technologies Sweden Ab Efficientand scalable parametric stereo coding for low bitrate applications
US7469206B2 (en) 2001-11-29 2008-12-23 Coding Technologies Ab Methods for improving high frequency reconstruction
US7240001B2 (en) 2001-12-14 2007-07-03 Microsoft Corporation Quality improvement techniques in an audio encoder
SE0202770D0 (sv) 2002-09-18 2002-09-18 Coding Technologies Sweden Ab Method for reduction of aliasing introduces by spectral envelope adjustment in real-valued filterbanks
US20060171542A1 (en) * 2003-03-24 2006-08-03 Den Brinker Albertus C Coding of main and side signal representing a multichannel signal
US7394903B2 (en) * 2004-01-20 2008-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
US7460990B2 (en) * 2004-01-23 2008-12-02 Microsoft Corporation Efficient coding of digital media spectral data using wide-sense perceptual similarity
EP1719115A1 (en) * 2004-02-17 2006-11-08 Koninklijke Philips Electronics N.V. Parametric multi-channel coding with improved backwards compatibility
DE102004009628A1 (de) * 2004-02-27 2005-10-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Beschreiben einer Audio-CD und Audio-CD
US20090299756A1 (en) * 2004-03-01 2009-12-03 Dolby Laboratories Licensing Corporation Ratio of speech to non-speech audio such as for elderly or hearing-impaired listeners
EP1914722B1 (en) 2004-03-01 2009-04-29 Dolby Laboratories Licensing Corporation Multichannel audio decoding
US9992599B2 (en) * 2004-04-05 2018-06-05 Koninklijke Philips N.V. Method, device, encoder apparatus, decoder apparatus and audio system
US7813513B2 (en) * 2004-04-05 2010-10-12 Koninklijke Philips Electronics N.V. Multi-channel encoder
EP1735774B1 (en) * 2004-04-05 2008-05-14 Koninklijke Philips Electronics N.V. Multi-channel encoder
SE0400998D0 (sv) * 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
CN1954362B (zh) * 2004-05-19 2011-02-02 松下电器产业株式会社 音频信号编码装置及音频信号解码装置
US8843378B2 (en) * 2004-06-30 2014-09-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Multi-channel synthesizer and method for generating a multi-channel output signal
WO2006004048A1 (ja) * 2004-07-06 2006-01-12 Matsushita Electric Industrial Co., Ltd. オーディオ信号符号化装置、オーディオ信号復号化装置、方法、及びプログラム
US7751804B2 (en) * 2004-07-23 2010-07-06 Wideorbit, Inc. Dynamic creation, selection, and scheduling of radio frequency communications
TWI498882B (zh) * 2004-08-25 2015-09-01 Dolby Lab Licensing Corp 音訊解碼器
BRPI0516201A (pt) * 2004-09-28 2008-08-26 Matsushita Electric Ind Co Ltd aparelho de codificação escalonável e método de codificação escalonável
SE0402652D0 (sv) 2004-11-02 2004-11-02 Coding Tech Ab Methods for improved performance of prediction based multi- channel reconstruction
JP4369957B2 (ja) * 2005-02-01 2009-11-25 パナソニック株式会社 再生装置
EP1691348A1 (en) * 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
JP4610650B2 (ja) * 2005-03-30 2011-01-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 多チャンネルオーディオ符号化
WO2006103586A1 (en) * 2005-03-30 2006-10-05 Koninklijke Philips Electronics N.V. Audio encoding and decoding
US7961890B2 (en) * 2005-04-15 2011-06-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Multi-channel hierarchical audio coding with compact side information
JP4907522B2 (ja) * 2005-04-28 2012-03-28 パナソニック株式会社 音声符号化装置および音声符号化方法
JP4988716B2 (ja) 2005-05-26 2012-08-01 エルジー エレクトロニクス インコーポレイティド オーディオ信号のデコーディング方法及び装置
WO2006126859A2 (en) 2005-05-26 2006-11-30 Lg Electronics Inc. Method of encoding and decoding an audio signal
EP1905002B1 (en) * 2005-05-26 2013-05-22 LG Electronics Inc. Method and apparatus for decoding audio signal
MX2007015118A (es) * 2005-06-03 2008-02-14 Dolby Lab Licensing Corp Aparato y metodo para codificacion de senales de audio con instrucciones de decodificacion.
US8073702B2 (en) * 2005-06-30 2011-12-06 Lg Electronics Inc. Apparatus for encoding and decoding audio signal and method thereof
WO2007004833A2 (en) * 2005-06-30 2007-01-11 Lg Electronics Inc. Method and apparatus for encoding and decoding an audio signal
JP5227794B2 (ja) * 2005-06-30 2013-07-03 エルジー エレクトロニクス インコーポレイティド オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
ES2374309T3 (es) * 2005-07-14 2012-02-15 Koninklijke Philips Electronics N.V. Decodificación de audio.
US8626503B2 (en) * 2005-07-14 2014-01-07 Erik Gosuinus Petrus Schuijers Audio encoding and decoding
US7630882B2 (en) * 2005-07-15 2009-12-08 Microsoft Corporation Frequency segmentation to obtain bands for efficient coding of digital media
US7562021B2 (en) * 2005-07-15 2009-07-14 Microsoft Corporation Modification of codewords in dictionary used for efficient coding of digital media spectral data
CN101248483B (zh) 2005-07-19 2011-11-23 皇家飞利浦电子股份有限公司 多声道音频信号的生成
WO2007027051A1 (en) * 2005-08-30 2007-03-08 Lg Electronics Inc. Apparatus for encoding and decoding audio signal and method thereof
US8577483B2 (en) * 2005-08-30 2013-11-05 Lg Electronics, Inc. Method for decoding an audio signal
JP4568363B2 (ja) * 2005-08-30 2010-10-27 エルジー エレクトロニクス インコーポレイティド オーディオ信号デコーディング方法及びその装置
US7788107B2 (en) * 2005-08-30 2010-08-31 Lg Electronics Inc. Method for decoding an audio signal
US8019614B2 (en) * 2005-09-02 2011-09-13 Panasonic Corporation Energy shaping apparatus and energy shaping method
EP1946297B1 (en) * 2005-09-14 2017-03-08 LG Electronics Inc. Method and apparatus for decoding an audio signal
JP4740335B2 (ja) * 2005-09-14 2011-08-03 エルジー エレクトロニクス インコーポレイティド オーディオ信号のデコーディング方法及び装置
US20080221907A1 (en) * 2005-09-14 2008-09-11 Lg Electronics, Inc. Method and Apparatus for Decoding an Audio Signal
EP1943642A4 (en) * 2005-09-27 2009-07-01 Lg Electronics Inc METHOD AND DEVICE FOR CODING / DECODING A MULTI-CHANNEL AUDIO SIGNAL
CN102663975B (zh) * 2005-10-03 2014-12-24 夏普株式会社 显示装置
US7696907B2 (en) 2005-10-05 2010-04-13 Lg Electronics Inc. Method and apparatus for signal processing and encoding and decoding method, and apparatus therefor
WO2007040364A1 (en) 2005-10-05 2007-04-12 Lg Electronics Inc. Method and apparatus for signal processing and encoding and decoding method, and apparatus therefor
US7672379B2 (en) * 2005-10-05 2010-03-02 Lg Electronics Inc. Audio signal processing, encoding, and decoding
US7646319B2 (en) * 2005-10-05 2010-01-12 Lg Electronics Inc. Method and apparatus for signal processing and encoding and decoding method, and apparatus therefor
US8068569B2 (en) * 2005-10-05 2011-11-29 Lg Electronics, Inc. Method and apparatus for signal processing and encoding and decoding
US7751485B2 (en) * 2005-10-05 2010-07-06 Lg Electronics Inc. Signal processing using pilot based coding
KR100857111B1 (ko) * 2005-10-05 2008-09-08 엘지전자 주식회사 신호 처리 방법 및 이의 장치, 그리고 인코딩 및 디코딩방법 및 이의 장치
US7653533B2 (en) * 2005-10-24 2010-01-26 Lg Electronics Inc. Removing time delays in signal paths
KR100644715B1 (ko) * 2005-12-19 2006-11-10 삼성전자주식회사 능동적 오디오 매트릭스 디코딩 방법 및 장치
US8111830B2 (en) * 2005-12-19 2012-02-07 Samsung Electronics Co., Ltd. Method and apparatus to provide active audio matrix decoding based on the positions of speakers and a listener
WO2007080211A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation Decoding of binaural audio signals
KR101218776B1 (ko) 2006-01-11 2013-01-18 삼성전자주식회사 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체
KR100803212B1 (ko) 2006-01-11 2008-02-14 삼성전자주식회사 스케일러블 채널 복호화 방법 및 장치
KR100885700B1 (ko) * 2006-01-19 2009-02-26 엘지전자 주식회사 신호 디코딩 방법 및 장치
WO2007083952A1 (en) * 2006-01-19 2007-07-26 Lg Electronics Inc. Method and apparatus for processing a media signal
EP1984913A4 (en) 2006-02-07 2011-01-12 Lg Electronics Inc DEVICE AND METHOD FOR CODING / DECODING A SIGNAL
US20090177479A1 (en) * 2006-02-09 2009-07-09 Lg Electronics Inc. Method for Encoding and Decoding Object-Based Audio Signal and Apparatus Thereof
KR101358700B1 (ko) * 2006-02-21 2014-02-07 코닌클리케 필립스 엔.브이. 오디오 인코딩 및 디코딩
US7974287B2 (en) * 2006-02-23 2011-07-05 Lg Electronics Inc. Method and apparatus for processing an audio signal
KR100773560B1 (ko) * 2006-03-06 2007-11-05 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
KR100773562B1 (ko) 2006-03-06 2007-11-07 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
KR20080071971A (ko) * 2006-03-30 2008-08-05 엘지전자 주식회사 미디어 신호 처리 방법 및 장치
CN101361122B (zh) * 2006-04-03 2012-12-19 Lg电子株式会社 处理媒体信号的装置及其方法
US8027479B2 (en) 2006-06-02 2011-09-27 Coding Technologies Ab Binaural multi-channel decoder in the context of non-energy conserving upmix rules
CA2656867C (en) * 2006-07-07 2013-01-08 Johannes Hilpert Apparatus and method for combining multiple parametrically coded audio sources
KR101438387B1 (ko) 2006-07-12 2014-09-05 삼성전자주식회사 서라운드 확장 데이터 부호화 및 복호화 방법 및 장치
KR100763920B1 (ko) 2006-08-09 2007-10-05 삼성전자주식회사 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2채널의 바이노럴 신호로 복호화하는 방법 및 장치
US7907579B2 (en) * 2006-08-15 2011-03-15 Cisco Technology, Inc. WiFi geolocation from carrier-managed system geolocation of a dual mode device
US20080235006A1 (en) * 2006-08-18 2008-09-25 Lg Electronics, Inc. Method and Apparatus for Decoding an Audio Signal
US9319741B2 (en) 2006-09-07 2016-04-19 Rateze Remote Mgmt Llc Finding devices in an entertainment system
US8607281B2 (en) 2006-09-07 2013-12-10 Porto Vinci Ltd. Limited Liability Company Control of data presentation in multiple zones using a wireless home entertainment hub
US20080061578A1 (en) * 2006-09-07 2008-03-13 Technology, Patents & Licensing, Inc. Data presentation in multiple zones using a wireless home entertainment hub
US8005236B2 (en) * 2006-09-07 2011-08-23 Porto Vinci Ltd. Limited Liability Company Control of data presentation using a wireless home entertainment hub
US8966545B2 (en) 2006-09-07 2015-02-24 Porto Vinci Ltd. Limited Liability Company Connecting a legacy device into a home entertainment system using a wireless home entertainment hub
US9233301B2 (en) 2006-09-07 2016-01-12 Rateze Remote Mgmt Llc Control of data presentation from multiple sources using a wireless home entertainment hub
US8935733B2 (en) 2006-09-07 2015-01-13 Porto Vinci Ltd. Limited Liability Company Data presentation using a wireless home entertainment hub
US9386269B2 (en) 2006-09-07 2016-07-05 Rateze Remote Mgmt Llc Presentation of data on multiple display devices using a wireless hub
CA2874451C (en) * 2006-10-16 2016-09-06 Dolby International Ab Enhanced coding and parameter representation of multichannel downmixed object coding
CN101529504B (zh) * 2006-10-16 2012-08-22 弗劳恩霍夫应用研究促进协会 多通道参数转换的装置和方法
KR100847453B1 (ko) * 2006-11-20 2008-07-21 주식회사 대우일렉트로닉스 입체 음향을 위한 적응 간섭 제거 방법
WO2008069584A2 (en) * 2006-12-07 2008-06-12 Lg Electronics Inc. A method and an apparatus for decoding an audio signal
JP2010516077A (ja) * 2007-01-05 2010-05-13 エルジー エレクトロニクス インコーポレイティド オーディオ信号処理方法及び装置
EP2158587A4 (en) * 2007-06-08 2010-06-02 Lg Electronics Inc METHOD AND DEVICE FOR PROCESSING AUDIO SIGNAL
US7761290B2 (en) 2007-06-15 2010-07-20 Microsoft Corporation Flexible frequency and time partitioning in perceptual transform coding of audio
US8046214B2 (en) 2007-06-22 2011-10-25 Microsoft Corporation Low complexity decoder for complex transform coding of multi-channel sound
US7885819B2 (en) 2007-06-29 2011-02-08 Microsoft Corporation Bitstream syntax for multi-process audio decoding
KR101464977B1 (ko) * 2007-10-01 2014-11-25 삼성전자주식회사 메모리 관리 방법, 및 멀티 채널 데이터의 복호화 방법 및장치
US8170218B2 (en) 2007-10-04 2012-05-01 Hurtado-Huyssen Antoine-Victor Multi-channel audio treatment system and method
JPWO2009050896A1 (ja) * 2007-10-16 2011-02-24 パナソニック株式会社 ストリーム合成装置、復号装置、方法
US8249883B2 (en) * 2007-10-26 2012-08-21 Microsoft Corporation Channel extension coding for multi-channel source
KR101438389B1 (ko) * 2007-11-15 2014-09-05 삼성전자주식회사 오디오 매트릭스 디코딩 방법 및 장치
US8504377B2 (en) * 2007-11-21 2013-08-06 Lg Electronics Inc. Method and an apparatus for processing a signal using length-adjusted window
US8600532B2 (en) 2007-12-09 2013-12-03 Lg Electronics Inc. Method and an apparatus for processing a signal
TWI424755B (zh) * 2008-01-11 2014-01-21 Dolby Lab Licensing Corp 矩陣解碼器
WO2009093867A2 (en) * 2008-01-23 2009-07-30 Lg Electronics Inc. A method and an apparatus for processing audio signal
KR101024924B1 (ko) * 2008-01-23 2011-03-31 엘지전자 주식회사 오디오 신호의 처리 방법 및 이의 장치
US8615088B2 (en) * 2008-01-23 2013-12-24 Lg Electronics Inc. Method and an apparatus for processing an audio signal using preset matrix for controlling gain or panning
EP2254110B1 (en) * 2008-03-19 2014-04-30 Panasonic Corporation Stereo signal encoding device, stereo signal decoding device and methods for them
KR101614160B1 (ko) 2008-07-16 2016-04-20 한국전자통신연구원 포스트 다운믹스 신호를 지원하는 다객체 오디오 부호화 장치 및 복호화 장치
EP2154911A1 (en) * 2008-08-13 2010-02-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. An apparatus for determining a spatial output multi-channel audio signal
EP2327072B1 (en) * 2008-08-14 2013-03-20 Dolby Laboratories Licensing Corporation Audio signal transformatting
CN102227769A (zh) * 2008-10-01 2011-10-26 Gvbb控股股份有限公司 解码装置、解码方法、编码装置、编码方法和编辑装置
EP2175670A1 (en) 2008-10-07 2010-04-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Binaural rendering of a multi-channel audio signal
JP5608660B2 (ja) * 2008-10-10 2014-10-15 テレフオンアクチーボラゲット エル エム エリクソン(パブル) エネルギ保存型マルチチャネルオーディオ符号化
KR101513042B1 (ko) * 2008-12-02 2015-04-17 엘지전자 주식회사 신호 전송 방법 및 전송 장치
JP5309944B2 (ja) * 2008-12-11 2013-10-09 富士通株式会社 オーディオ復号装置、方法、及びプログラム
US20100324915A1 (en) * 2009-06-23 2010-12-23 Electronic And Telecommunications Research Institute Encoding and decoding apparatuses for high quality multi-channel audio codec
US8774417B1 (en) * 2009-10-05 2014-07-08 Xfrm Incorporated Surround audio compatibility assessment
EP2323130A1 (en) * 2009-11-12 2011-05-18 Koninklijke Philips Electronics N.V. Parametric encoding and decoding
JP5604933B2 (ja) * 2010-03-30 2014-10-15 富士通株式会社 ダウンミクス装置およびダウンミクス方法
BR112012026324B1 (pt) * 2010-04-13 2021-08-17 Fraunhofer - Gesellschaft Zur Förderung Der Angewandten Forschung E. V Codificador de aúdio ou vídeo, decodificador de aúdio ou vídeo e métodos relacionados para o processamento do sinal de aúdio ou vídeo de múltiplos canais usando uma direção de previsão variável
DE102010015630B3 (de) * 2010-04-20 2011-06-01 Institut für Rundfunktechnik GmbH Verfahren zum Erzeugen eines abwärtskompatiblen Tonformates
AR085445A1 (es) * 2011-03-18 2013-10-02 Fraunhofer Ges Forschung Codificador y decodificador que tiene funcionalidad de configuracion flexible
CN103890841B (zh) * 2011-11-01 2017-10-17 皇家飞利浦有限公司 音频对象编码和解码
US9131313B1 (en) * 2012-02-07 2015-09-08 Star Co. System and method for audio reproduction
EP2645748A1 (en) 2012-03-28 2013-10-02 Thomson Licensing Method and apparatus for decoding stereo loudspeaker signals from a higher-order Ambisonics audio signal
US20150371643A1 (en) * 2012-04-18 2015-12-24 Nokia Corporation Stereo audio signal encoder
US9288603B2 (en) 2012-07-15 2016-03-15 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for backward-compatible audio coding
US9473870B2 (en) 2012-07-16 2016-10-18 Qualcomm Incorporated Loudspeaker position compensation with 3D-audio hierarchical coding
US9479886B2 (en) 2012-07-20 2016-10-25 Qualcomm Incorporated Scalable downmix design with feedback for object-based surround codec
US9761229B2 (en) 2012-07-20 2017-09-12 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for audio object clustering
JP2015529415A (ja) * 2012-08-16 2015-10-05 タートル ビーチ コーポレーション 多次元的パラメトリック音声のシステムおよび方法
MX345622B (es) * 2013-01-29 2017-02-08 Fraunhofer Ges Forschung Decodificador para generar una señal de audio mejorada en frecuencia, método de decodificación, codificador para generar una señal codificada y metodo de codificación utilizando informacion secundaria de selección compacta.
US9818412B2 (en) 2013-05-24 2017-11-14 Dolby International Ab Methods for audio encoding and decoding, corresponding computer-readable media and corresponding audio encoder and decoder
CN117012210A (zh) * 2013-05-24 2023-11-07 杜比国际公司 对音频场景进行解码的方法、装置及计算机可读介质
US20140358565A1 (en) 2013-05-29 2014-12-04 Qualcomm Incorporated Compression of decomposed representations of a sound field
EP2830064A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for decoding and encoding an audio signal using adaptive spectral tile selection
EP2830052A1 (en) * 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio decoder, audio encoder, method for providing at least four audio channel signals on the basis of an encoded representation, method for providing an encoded representation on the basis of at least four audio channel signals and computer program using a bandwidth extension
TWI713018B (zh) 2013-09-12 2020-12-11 瑞典商杜比國際公司 多聲道音訊系統中之解碼方法、解碼裝置、包含用於執行解碼方法的指令之非暫態電腦可讀取的媒體之電腦程式產品、包含解碼裝置的音訊系統
EP2866227A1 (en) 2013-10-22 2015-04-29 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for decoding and encoding a downmix matrix, method for presenting audio content, encoder and decoder for a downmix matrix, audio encoder and audio decoder
KR102160254B1 (ko) 2014-01-10 2020-09-25 삼성전자주식회사 액티브다운 믹스 방식을 이용한 입체 음향 재생 방법 및 장치
US9344825B2 (en) 2014-01-29 2016-05-17 Tls Corp. At least one of intelligibility or loudness of an audio program
US9922656B2 (en) 2014-01-30 2018-03-20 Qualcomm Incorporated Transitioning of ambient higher-order ambisonic coefficients
US10770087B2 (en) 2014-05-16 2020-09-08 Qualcomm Incorporated Selecting codebooks for coding vectors decomposed from higher-order ambisonic audio signals
CN104486033B (zh) * 2014-12-03 2017-09-29 重庆邮电大学 一种基于c‑ran平台的下行多模信道编码系统及方法
EP3067885A1 (en) 2015-03-09 2016-09-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding or decoding a multi-channel signal
MX2019005214A (es) * 2016-11-08 2019-06-24 Fraunhofer Ges Forschung Mezclador y metodo para mezclar al menos dos canales y codificador multicanal y decodificador multicanal.
WO2019035622A1 (ko) * 2017-08-17 2019-02-21 가우디오디오랩 주식회사 앰비소닉 신호를 사용하는 오디오 신호 처리 방법 및 장치
CN111615044B (zh) * 2019-02-25 2021-09-14 宏碁股份有限公司 声音信号的能量分布修正方法及其系统
WO2020178322A1 (en) * 2019-03-06 2020-09-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for converting a spectral resolution
US10779105B1 (en) 2019-05-31 2020-09-15 Apple Inc. Sending notification and multi-channel audio over channel limited link for independent gain control

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0688113A2 (en) * 1994-06-13 1995-12-20 Sony Corporation Method and apparatus for encoding and decoding digital audio signals and apparatus for recording digital audio
US5701346A (en) * 1994-03-18 1997-12-23 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Method of coding a plurality of audio signals

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5040217A (en) * 1989-10-18 1991-08-13 At&T Bell Laboratories Perceptual coding of audio signals
SG43996A1 (en) * 1993-06-22 1997-11-14 Thomson Brandt Gmbh Method for obtaining a multi-channel decoder matrix
EP0631458B1 (en) * 1993-06-22 2001-11-07 Deutsche Thomson-Brandt Gmbh Method for obtaining a multi-channel decoder matrix
CA2124379C (en) 1993-06-25 1998-10-27 Thomas F. La Porta Distributed processing architecture for control of broadband and narrowband communications networks
JP3397001B2 (ja) * 1994-06-13 2003-04-14 ソニー株式会社 符号化方法及び装置、復号化装置、並びに記録媒体
EP1030297B1 (en) 1995-10-09 2002-10-16 Matsushita Electric Industrial Co., Ltd. An optical disk and an optical disk recording method
EP0820663B1 (en) 1996-02-08 2004-03-31 Philips Electronics N.V. 7-channel transmission, compatible with 5-channel transmission and 2-channel transmission
US5812971A (en) * 1996-03-22 1998-09-22 Lucent Technologies Inc. Enhanced joint stereo coding method using temporal envelope shaping
DE19628293C1 (de) * 1996-07-12 1997-12-11 Fraunhofer Ges Forschung Codieren und Decodieren von Audiosignalen unter Verwendung von Intensity-Stereo und Prädiktion
SG54379A1 (en) * 1996-10-24 1998-11-16 Sgs Thomson Microelectronics A Audio decoder with an adaptive frequency domain downmixer
US6449368B1 (en) * 1997-03-14 2002-09-10 Dolby Laboratories Licensing Corporation Multidirectional audio decoding
JP3657120B2 (ja) * 1998-07-30 2005-06-08 株式会社アーニス・サウンド・テクノロジーズ 左,右両耳用のオーディオ信号を音像定位させるための処理方法
JP2000214887A (ja) * 1998-11-16 2000-08-04 Victor Co Of Japan Ltd 音声符号化装置、光記録媒体、音声復号装置、音声伝送方法及び伝送媒体
US6928169B1 (en) * 1998-12-24 2005-08-09 Bose Corporation Audio signal processing
US6442517B1 (en) * 2000-02-18 2002-08-27 First International Digital, Inc. Methods and system for encoding an audio sequence with synchronized data and outputting the same
JP4304401B2 (ja) * 2000-06-07 2009-07-29 ソニー株式会社 マルチチャンネルオーディオ再生装置
US7116787B2 (en) * 2001-05-04 2006-10-03 Agere Systems Inc. Perceptual synthesis of auditory scenes
US20030035553A1 (en) * 2001-08-10 2003-02-20 Frank Baumgarte Backwards-compatible perceptual coding of spatial cues
US7006636B2 (en) * 2002-05-24 2006-02-28 Agere Systems Inc. Coherence-based audio coding and synthesis
JP4062905B2 (ja) * 2001-10-24 2008-03-19 ヤマハ株式会社 ディジタル・ミキサ
US7333930B2 (en) * 2003-03-14 2008-02-19 Agere Systems Inc. Tonal analysis for perceptual audio coding using a compressed spectral representation
US7394903B2 (en) * 2004-01-20 2008-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
JP5106115B2 (ja) * 2004-11-30 2012-12-26 アギア システムズ インコーポレーテッド オブジェクト・ベースのサイド情報を用いる空間オーディオのパラメトリック・コーディング

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5701346A (en) * 1994-03-18 1997-12-23 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Method of coding a plurality of audio signals
EP0688113A2 (en) * 1994-06-13 1995-12-20 Sony Corporation Method and apparatus for encoding and decoding digital audio signals and apparatus for recording digital audio

Also Published As

Publication number Publication date
US20190239016A1 (en) 2019-08-01
BRPI0414757B1 (pt) 2018-12-26
NO20180991A1 (no) 2006-06-30
CA2540851C (en) 2012-05-01
US10165383B2 (en) 2018-12-25
NO342804B1 (no) 2018-08-06
US10299058B2 (en) 2019-05-21
MXPA06003627A (es) 2006-06-05
DE602004004168T2 (de) 2007-10-11
NO344760B1 (no) 2020-04-14
RU2006114742A (ru) 2007-11-20
US20190110146A1 (en) 2019-04-11
CA2540851A1 (en) 2005-04-21
ES2278348T3 (es) 2007-08-01
CN1864436A (zh) 2006-11-15
NO344091B1 (no) 2019-09-02
KR100737302B1 (ko) 2007-07-09
US20130016843A1 (en) 2013-01-17
NO20180980A1 (no) 2006-06-30
US10455344B2 (en) 2019-10-22
HK1092001A1 (en) 2007-01-26
US9462404B2 (en) 2016-10-04
AU2004306509A1 (en) 2005-04-21
WO2005036925A2 (en) 2005-04-21
NO20180993A1 (no) 2006-06-30
IL174286A0 (en) 2006-08-01
NO20191058A1 (no) 2006-06-30
NO344093B1 (no) 2019-09-02
WO2005036925A3 (en) 2005-07-14
US10433091B2 (en) 2019-10-01
US10425757B2 (en) 2019-09-24
BR122018069731B1 (pt) 2019-07-09
NO345265B1 (no) 2020-11-23
US20090003612A1 (en) 2009-01-01
US20160078872A1 (en) 2016-03-17
JP2007507731A (ja) 2007-03-29
US20190239018A1 (en) 2019-08-01
BR122018069726B1 (pt) 2019-03-19
US11343631B2 (en) 2022-05-24
US7447317B2 (en) 2008-11-04
BRPI0414757A (pt) 2006-11-28
DE602004004168D1 (de) 2007-02-15
US20180359588A1 (en) 2018-12-13
NO20180990A1 (no) 2006-06-30
DK1668959T3 (da) 2007-04-10
US8270618B2 (en) 2012-09-18
US20190379990A1 (en) 2019-12-12
BR122018069728B1 (pt) 2019-03-19
RU2327304C2 (ru) 2008-06-20
NO20061898L (no) 2006-06-30
PT1668959E (pt) 2007-04-30
EP1668959A2 (en) 2006-06-14
CN1864436B (zh) 2011-05-11
NO347074B1 (no) 2023-05-08
US20180359589A1 (en) 2018-12-13
BR122018069730B1 (pt) 2019-03-19
NO344635B1 (no) 2020-02-17
US20050074127A1 (en) 2005-04-07
NO20200106A1 (no) 2006-06-30
US20190239017A1 (en) 2019-08-01
KR20060060052A (ko) 2006-06-02
US10237674B2 (en) 2019-03-19
ATE350879T1 (de) 2007-01-15
IL174286A (en) 2010-12-30
US10206054B2 (en) 2019-02-12
NO20180978A1 (no) 2006-06-30
JP4547380B2 (ja) 2010-09-22
EP1668959B1 (en) 2007-01-03

Similar Documents

Publication Publication Date Title
NO20191058A1 (no) Kompatibel flerkanalkoding/dekoding
CA2554002C (en) Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
AU2004306509B2 (en) Compatible multi-channel coding/decoding