NO323434B1 - System og metode for a produsere et selektivt lydutgangssignal - Google Patents

System og metode for a produsere et selektivt lydutgangssignal Download PDF

Info

Publication number
NO323434B1
NO323434B1 NO20054527A NO20054527A NO323434B1 NO 323434 B1 NO323434 B1 NO 323434B1 NO 20054527 A NO20054527 A NO 20054527A NO 20054527 A NO20054527 A NO 20054527A NO 323434 B1 NO323434 B1 NO 323434B1
Authority
NO
Norway
Prior art keywords
sound
signal processing
control unit
microphones
signal
Prior art date
Application number
NO20054527A
Other languages
English (en)
Other versions
NO20054527D0 (no
Inventor
Ines Hafizovic
Vibeke Jahr
Morgan Kjolerbakken
Original Assignee
Squarehead System As
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Squarehead System As filed Critical Squarehead System As
Priority to NO20054527A priority Critical patent/NO323434B1/no
Publication of NO20054527D0 publication Critical patent/NO20054527D0/no
Priority to PCT/NO2006/000334 priority patent/WO2007037700A1/en
Priority to AT06799561T priority patent/ATE487333T1/de
Priority to DK06799561.3T priority patent/DK1946606T3/da
Priority to CN2006800362379A priority patent/CN101278596B/zh
Priority to EP06799561A priority patent/EP1946606B1/en
Priority to ES06799561T priority patent/ES2355271T3/es
Priority to DE602006018050T priority patent/DE602006018050D1/de
Priority to EA200800965A priority patent/EA011601B1/ru
Priority to US12/088,315 priority patent/US20080247567A1/en
Priority to PT06799561T priority patent/PT1946606E/pt
Publication of NO323434B1 publication Critical patent/NO323434B1/no

Links

Abstract

Metode og system for digital direktiv fokusering og styring av samplet lyd innenfor et målområde for å produsere et selektivt lydutgangssignal tilhørende video. I en foretrukket utførelse er metoden og systemet karakterisert ved å motta posisjon og fokusdata fra ett eller flere kameraer som filmer en hendelse, og bruke disse inngangsdata for generering av relevant lyd sammen med bildet.

Description

Introduksjon
Den foreliggende oppfinnelsen omhandler retningsrettet lydopptak og mer spesifikt til en metode og system for å produsere selektiv lyd i en videoproduksjon, for derved å muliggjøre kringkasting med kontrollert styring og zoomefunksjonalitet.
Systemet er anvendelig for å fange inn lyd under støyende forhold hvor romlig filtrering er nødvendig, f.eks. å fange inn lyd fra friidrettsutøvere, dommere og trenere under sportshendelser for kringkastingsproduksjon.
Systemet omfatter én eller flere mikrofonmatriser, én eller flere samplingsenheter, lagringsmidler, og kontroll- og signalprosesseringsenhet med inngangsmidler for å motta posisjoneringsdata.
Tidligere kjent teknikk
En mikrofonmatrise er en flerkanals akustisk tilegnelsesoppsett som omfatter to eller flere lydtrykksensorer lokalisert ved ulike lokasjoner i rommet for å kunne romlig sample lydtrykket fra én eller flere kilder. Signalprosesseringsteknikker kan bli brukt for å kontrollere, eller mer spesifikt å styre, mikrofonmatriser mot enhver kilde av interesse. Teknikkene som kan brukes kan være: forsinkelse av signaler, filtrering, vekting, og summere opp signaler fra nukrofonelementene for å oppnå den ønskede romlige selektiviteten. Dette blir det referert til som stråleforming. Mikrofoner i en kontrollerbar mikrofonmatrise bør være vel tilpasset med hensyn til amplitude og fase. Dersom ikke dette er tilfelle må forskjellene være kjent for å kunne utføre feilkorrigering i software og/eller hardware. Prinsippene bak styring av en matrise er velkjent fra relevant signalprosesseringslitteratur. Mikrofonmatrisene kan være rektangulære, sirkulære, eller i tre dimensjoner.
Det finnes flere kjente systemer som omhandler mikrofonmatriser. Majoriteten av disse har hovedfokus på signalprosessering for optimalisering av samplede signaler og/eller tolkning av posisjonen til objekter eller elementer i bildet.
Den mest relevante tidligere kjente teknikken er beskrevet i det følgende.
US 5 940 118 beskriver et system og en metode for å styre retningsrettede mikrofoner. Systemet er tiltenkt brukt i konferansesystemer som inneholder tilhørere. Det omfatter optiske inngangsmidler, dvs. kamera og tolkningsmidler for å tolke hvilken tilhører som snakker, og midler for å aktivere lyden mot lydkilden.
US 6 469 732 beskriver en apparatur og en metode brukt i et videokonferansesystem for å tilveiebringe nøyaktig bestemmelse av posisjonen til en snakkende deltaker.
JP 2004 180197 beskriver en mikrofonmatrise som kan bli digitalt kontrollert med hensyn til akustisk fokus.
Den foreliggende oppfinnelsen er en metode og et system for å kontrollere fokusering og styring av lyd som skal presenteres sammen med video. Oppfinnelsen skiller seg fra tidligere kjent teknikk med sin fleksibilitet og enkle bruk.
I en foretrukket utførelse er oppfinnelsen en metode og system for å motta posisjon og fokuseringsdata fra ett eller flere kameraer som filmer en hendelse, og bruke disse inngangsdataene for å generere relevant lyd sammen med videoen.
I en annen utførelse kan en bruker mate inn ønsket lokasjon som det skal plukkes opp lyd fra, og signalprosesseringsmidler vil bruke dette for å utføre den nødvendige signalprosesseringen.
I ennå en annen utførelse, kan posisjoneringsdataene fra lokasjonen som det skal plukkes opp lyd fra bli sendt fra et system som omfatter antenne(r) som plukker opp radiosignaler fra radiosender(e) plassert på eller i objekt(er) som skal spores, sammen med midler for å utlede lokasjonen og sende denne informasjonen til systemet i henhold til den foreliggende oppfinnelsen. Radiosenderen kan f.eks. bli plassert i en fotball, for derved å muliggjøre systemet å registrere lyd fra lokasjonen til fotballen, og også kontrollere én eller flere kameraer slik at både video og lyd vil bli fokusert på lokasjonen til ballen.
Sammendrag av oppfinnelsen
Hensikten med den foreliggende oppfinnelsen er å tilveiebringe selektiv lyd med hensyn til relevant(e) målområde(r).
Hensikten blir oppnådd ved et system for digital direktiv fokusering og styring av samplet lyd innenfor målområdet for å produsere selektiv lyd. Systemet omfatter én eller flere bredbåndsmatriser av mikrofoner, A/D-signalkonverterende enhet og kontrollenhet.
Systemet er karakterisert ved at kontrollenheten omfatter mottakermidler for å motta digitale signaler av innfanget lyd fra alle mikrofonene omfattet av systemet, inngangsmidler for å motta instruksjoner omfattende selektive posisjonsdata, signalprosesseringsmidler for å velge signaler fra et utvalg av relevante mikrofoner i matrisen(e) for videre prosessering,
signalprosesserende midler for å utføre signalprosessering på signalene fra utvalget av relevante mikrofoner for å fokusere og styre lyden i henhold til de mottatte instruksjonene, og
signalprosesserende midler for å generere et utvalg lyder i henhold til mottatte instruksjoner og utføre signalprosessering.
Hensikten med oppfinnelsen blir videre oppnådd ved en metode for digital direktiv fokusering og styring av samplet lyd innenfor et målområde for å produsere et selektivt lydutgangssignal, hvor metoden omfatter bruk av én eller flere bredbåndsmatriser av mikrofoner, en A/D-signalkonverterende enhet, og en kontrollenhet.
Metoden er karakterisert ved at den omfatter de følgende trinnene utført av kontrollenheten: - å motta digitale signaler av innfanget lyd fra alle mikrofonene omfattet i systemet; - å motta instruksjoner omfattende selektive posisjonsdata gjennom inngangsmidlene i kontrollenheten; - å velge signaler fra et utvalg av relevante mikrofoner i bredbåndsmatrisen(e) for videre prosessering, og hvor valget utført er basert på spektralanalyse av signalet; - å utføre signalprosessering på signalene fra utvalget av relevante mikrofoner for å fokusere og styre lyden i henhold til de mottatte instruksjonene; - å generere én eller flere selektive lyder i henhold til den utførte prosesseringen.
Et hovedtrekk ved oppfinnelsen er at selektive posisjonsdata kan bli tilveiebrakt i sanntid eller i en prosesseringsprosess av lagret lyd i ettertid. Fokusområdet/områdene som det skal produseres lyd fra kan defineres av en sluttbruker som gir/mater inn instruksjoner om området/områdene eller ved posisjonering og fokusering av ett eller flere kameraer.
Hensiktene med oppfinnelsen blir oppnådd ved midler og metoder som fremsatt i det vedlagte kravsett.
Kort beskrivelse av tegningene
Oppfinnelsen vil bli beskrevet mer detaljert med henvisning til tegningene hvor: Fig. 1 viser en oversikt over ulike systemkomponenter integrert med kameraer. Fig. 2 viser et oppsett som kan tilveiebringe lyd fra ulike lokasjoner til et surroundsystem, avhengig av kameraene som blir brukt. Fig. 3 viser eksempler på frekvensoptimalisering med romlig filtrering i matrisedesignet.
Detaljert beskrivelse av foretrukne utførelser
Fig. 1 viser en oversikt over ulike systemkomponenter integrert med kameraer.
Komponentene vist i tegningen er bredbåndsmikrofonmatriser 100,110 som skal posisjoneres tilliggende til området som det skal registreres lyd fra. Analoge signaler fra hver mikrofon blir konvertert til et digitalt signal i en A/D-konverter 210 omfattet i en A/D-enhet 200. A/D-enheten kan også ha minnemidler 220 for å lagre digitale signaler, og overføringsmidler 230 for å overføre digitale signaler til en kontrollenhet 300.
Kontrollenheten 300 kan være lokalisert ved en fjerntliggende lokasjon og motta digitale signaler fra registrert lyd over et kablet eller trådløst nettverk, f.eks. gjennom kabel eller satellitt, noe som gjør at sluttbrukeren kan gjøre all styring og fokuseringssignalprosessering lokalt. Kontrollenheten 300 omfatter en datamottaker 310 for å motta digitale lydsignaler fra A/D-enheten 200. Den omfatter videre datalagringsmidler 320 for å lagre mottatte signaler, signalprosesseringsmidler 330 for sanntids eller prosessering i ettertid, og lydgenereringsmidler 340 for å generere en selektiv lyd. Før lagring av signalet i datalageret, kan signalet bli konvertert til et komprimert format for å spare plass.
Kontrollenheten 300 omfatter videre inngangsmidler 350 for å motta instruksjoner omfattende selektive posisjonsdata. Disse instruksjonene er typisk koordinater som definerer posisjon og fokuseringspunkt til ett eller flere kamera(er) som filmer en hendelse som foregår ved en spesifikk lokasjon(er) innenfor målområdet.
I en første utførelse kan koordinatene til lydkilden bli tilveiebrakt av fokuseringspunktet til kamera(er) 150, 160 og fra azimuth og høyde til kamerastativ(er). Ved å forbinde systemet til ett eller flere fjernsynskameraer og motta posisjonskoordinater i to eller tre dimensjoner (azimuth, høyde og avstand), er det mulig å styre og fokusere lyden i henhold til fokuseringspunktet til kameralinsen.
I en andre utførelse kan koordinatene og dermed lokaliseringen av lydkilden bli tilveiebrakt av en operatør som opererer et grafisk brukergrensesnitt (GUI), som viser en oversikt over målområdet, et tastatur, en lydmiksingsenhet, og én eller flere joysticker. GUI tilveiebringer operatøren med informasjon om hvor det skal styres og zoomes.
GUI kan vise direktesendt video fra ett eller flere tilkoblede kameraer (multiple kanaler). I en foretrukket utførelse, blir tilleggsgrafikk lagt til GUI for å peke på hvor systemet styrer. Dette forenkler bruken av systemet og gir operatøren full kontroll over zoome- og styrefunksjon.
I en tredje utførelse, kan systemet bruke algoritmer for å finne forhåndsdefinerte lydkilder. F.eks. kan systemet settes opp for å lytte på en dommer sin fløyte og så styre fokus av lyd og video til denne lokasjonen.
I ennå en utførelse kan lokasjonen eller koordinatene bli tilveiebrakt av systemet ved å spore lokasjonen til et objekt, f.eks. en fotball som spilles i et spilleområde.
En kombinasjon av de ovenfor nevnte utførelsene kan også være et mulig alternativ.
For at lyden til et fokusområde til kamera(ene) skal være synkronisert, trenger systemet å ha et felles koordinatsystem. Koordinatene fra kameraene vil bli kalibrert relativt til et referansepunkt felles for systemet og kameraene.
Systemet kan fange inn lyd fra flere ulike lokasjoner samtidig (flerkanalsfunksjonalitet) og tilveiebringe lyd til et surroundsystem. Lokasjonene kan være forhåndsdefinert for hvert kamera eller forandres dynamisk i sanntid i henhold til kameraposisjon, fokus og vinkel.
Selektiv lyd blir oppnådd ved å kombinere lydsignaler og posisjonsdata og kan utføre nødvendig signalprosessering i signalprosessoren.
Sampling av signalene fra mikrofonene kan utføres samtidig for alle mikrofonene eller multiplekses ved å multiplekse signaler fra mikrofonene før analog til digital konvertering.
Signalprosesseringen omfatter romlig og spektral stråleforming og beregning av signal forsinkelse grunnet multiplekset sampling, for å utføre korreksjoner i software eller hardware.
Signalprosesseringen omfatter videre beregning av lydtrykkforsinkelse fra lydmålet til matrisen av mikrofoner med det formål å utføre synkronisering av signalet med en forhåndsdefinert tidsforsinkelse.
Signalprosesseringen omfatter regulering av samplingsrate på valgte mikrofonelementer for å oppnå optimal signalsampling og prosessering.
Signalprosesseringen muliggjør dynamisk selektiv lyd med panorering, tilting og zooming av lyden til én eller flere lokasjoner samtidig og også å tilveiebringe lyd til én eller flere kanaler innbefattende surroundsystemer.
Signalprosesseringen tilveiebringer også variabel samplingsfrekvens (Fs). Fs på mikrofonelementer som er aktive ved høye frekvenser er høyere enn på elementer som er aktive ved lave frekvenser. Fs basert på spekteret av signaler og Rayleigh-kriteriet (samplingsrate som er i det minste to ganger så høy som signalfrekvensen) gir optimal signalsampling og prosessering, og tilveiebringer mindre mengder av data som skal lagres og prosesseres.
Signalprosessering omfatter forandring av aperture til mikrofonmatrisen for å oppnå en gitt frekvensrespons og redusere antall aktive elementer i mikrofonmatrisen.
Fokuseringspunkt(ene) bestemmer hvilke romlige vektefunksjoner som skal brukes for å justere graden av romlig stråleforming med fokusering og styring med forsinkelse og summering av stråleformer, og forandring av sidelobenivå og strålebredden.
Romlig stråleforming blir utført ved å velge en vektefunksjon blant Cosin, Kaiser, Hamming, Hannig, Blackmann-Harris og Prolate Spheroidal i henhold til en valgt strålebredde til hovedloben.
Systemet sampler akustisk lydtrykk fra alle elementene, eller et utvalg av elementer i alle matrisene og lagrer dataene i en lagringsenhet. Samplingen kan utføres samtidig for alle kanalene eller multiplekses. Siden hele lydfeltet blir samplet og lagret, kan all styre- og zoomesignalprosessering for lyden, i tillegg til sanntidsprosessering, bli utført som etterprosessering (gå tilbake i tid og trekke ut lyd fra en hvilken som helst lokasjon). Etterprosessering av lagrede data tilbyr samme funksjonalitet som sanntidsprosessering og en operatør kan tilveiebringe lyd fra enhver ønsket lokasjon som systemet skal dekke.
Siden det er svært viktig å tilveiebringe synkronisering med eksternt lyd- og videoutstyr, er systemet i stand til å estimere og kompensere for forsinkelse av lydsignal grunnet utbredelsestid til signalet fra lydkilden til mikrofonmatrisen(e). Operatøren vil sette maksimalt nødvendig område som systemet trenger å dekke, og maksimal tidsforsinkelse vil automatisk bli beregnet. Dette kan være utgangsforsinkelsen av systemet og all lyd ut av systemet vil ha denne forsinkelsen.
Ved å implementere ulike sensorer, kan systemet korrigere for feil i lydutbredelse grunnet temperaturgradienter, fuktighet i mediet (luft) og bevegelser i mediet forårsaket av vind og utveksling av varm eller kald luft.
Fig. 2 viser et oppsett som kan tilveiebringe lyd fra ulike lokasjoner til et surroundsystem, avhengig av kameraene som blir brukt. Figuren viser et spilleområde 400 med en matrise av mikrofoner 100 lokalisert i midten og over spilleområdet 400. Figuren viser videre et kamera 150 som dekker den korteste siden av spilleområdet 400, og et annet kamera 160 som dekker den lengste siden av spilleområdet 400.
Ved å bruke dette oppsettet, kan den foreliggende oppfinnelsen tilveiebringe relevant lyd fra et flertall kanaler (CH1-CH4) til scenen som dekkes av hvert kamera.
Ved å motta lokasjonsinformasjon fra et system som omfatter en radiosender, plassert i en ball som blir spilt i et spillfelt, og antenne(er) for å plukke opp radiosignalene, er det mulig å ha et system som alltid plukker opp lyden fra lokasjonen hvor handlingen er, og f.eks. la denne lyden være representert i senterkanelen i et surroundsystem.
Fig. 3 viser eksempler på forandring av aperture for frekvensoptimalisering med romlig filtrering i matrisedesignet.
Systemet kan dynamisk forandre aperturen til matrisen for å tilegne en optimalisert stråle i henhold til ønsket strålebredde, frekvensrespons og matriseforsterkning. Dette kan oppnåes kun ved prosessering av data fra valgte matriseelementer og på denne måten kan systemet redusere nødvendig mengde av signalprosessering.
Svarte prikker angir aktive mikrofonelementer og hvite prikker angir passive mikrofonelementer.
A viser en mikrofonmatrise med alle mikrofonelementene aktive. Denne konfigurasjonen vil gi den beste responsen og direktiviteten for alle spektra som matrisen vil dekke.
B viser en høyfrekvensoptimalisert tynnet matrise som kan bli brukt når det ikke er noen lavfrekvenslyd tilstede eller når ingen romlig filtrering for lave frekvenser er nødvendig.
C viser en midtfrekvensoptimalisert tynnet matrise som kan bli brukt når det ikke er noen lav- eller høyfrekvenslyd tilstede eller når ingen romlig filtrering for lav eller høyfrekvenser er ønskelige, f.eks. når kun normal tale er tilstede.
D viser en lavfrekvensoptimalisert tynnet matrise som kan bli brukt når det ikke er noen høyfrekvenslyd tilstede eller når ingen romlig filtrering for høye frekvenser er nødvendig.
Flere tilpasninger av systemet er mulig, for derved å muliggjøre ulike måter å bruke systemet på. Signalprosesseringen, og dermed den endelige utgangslyden kan bli prosessert lokalt, eller ved en fjerntliggende lokasjon.
Ved å muliggjøre signalprosessering ved en fjerntliggende lokasjon er det mulig for en sluttbruker, som f.eks. ser på en sportshendelse på TV, å kontrollere lokasjonene som lyden skal mottas fra. Signalprosesseringsmidler kan være lokalisert hos sluttbrukeren, og brukeren kan mate inn lokasjonene han eller hun ønsker å motta lyd fra. En innmatingsinnretning for å mate inn lokasjoner kan f.eks. være mus eller joystick som kontrollerer en markør på skjermen hvor sportshendelsen blir fremvist. Signalprosesserende midler 300 med sine utgangs- og inngangsmidler 340, 350 kan så bli implementert i en TV-boks (eng.: set-top box).
Alternativt kan sluttbrukeren sende posisjonsdata til signalprosesserende midler lokalisert ved en annen lokasjon enn den til sluttbrukeren, og deretter motta den prosesserte og styrte lyden fra relevant posisjon(er).

Claims (27)

1. System for digital direktiv fokusering og styring av samplet lyd innenfor et målområde (400) for å produsere et selektivt lydutgangssignal, omfattende én eller flere bredbåndsmatriser av mikrofoner (100,110), A/D-signalkonverterende enhet (200) og kontrollenhet (300), og hvor systemet er karakterisert ved at kontrollenheten (300) omfatter: - mottakermidler (310) for å motta digitale signaler av innfanget lyd fra alle mikrofonene omfattet av systemet; - inngangsmidler (350) for å motta instruksjoner omfattende selektive posisjonsdata; - signalprosesserende midler (330) for å velge signaler fra et utvalg av relevante mikrofoner i matrisen(e) (100, 110) for videre prosessering; - signalprosesserende midler (330) for å utføre signalprosessering på signalene fra utvalget av relevante mikrofoner for å fokusere og styre lyden i henhold til de mottatte instruksjonene, og - signalprosesserende midler (330) for å generere et utvalg lyder i henhold til mottatte instruksjoner og utføre signalprosessering.
2. System i henhold til krav 1, karakterisert ved at kontrollenheten (300) er lokalisert ved en fjerntliggende lokasjon og omfatter midler (310) for å motta digitale signaler av innfanget lyd over et kablet eller trådløst nettverk.
3. System i henhold til krav 1, karakterisert ved at innmatingsmidtene (350) i kontrollenheten (300) omfatter midler for å motta selektive posisjonsdata over et kablet eller trådløst nettverk.
4. System i henhold til krav 1, karakterisert ved at kontrollenheten (300) videre omfatter datalagringsmidler (320) for å lagre mottatte digitale signaler av innfanget lyd.
5. System i henhold til krav 1, karakterisert ved at kontrollenheten (300) utfører signalprosessering på flere kanaler basert på én eller flere ulike inngangskoordinater.
6. System i henhold til krav 1, karakterisert ved at kontrollenheten (300) omfatter midler for å forandre aperture til mikrofonmatrisen(e) (100, 110) basert på de spektrale komponentene til den innkommende lyden.
7. System i henhold til krav 4, karakterisert ved at kontrollenheten (300) videre omfatter midler for å konvertere de mottatte signaler til et komprimert format før de blir lagret i lagringsmidlene (320).
8. System i henhold til krav 1, karakterisert ved at kontrollenheten (300) videre omfatter midler for å kontrollere og fokusere ett eller flere kameraer basert på mottatte instruksjoner omfattende selektive posisjonsdata.
9. Metode for digital direktiv fokusering og styring av samplet lyd innenfor et målområde (400) for å produsere et selektivt lydutgangssignal, hvor metoden omfatter bruk av én eller flere bredbåndsmatriser av mikrofoner (100, 110), en A/D-signalkonverterende enhet (200), og en kontrollenhet (300), karakterisert ved at metoden omfatter de følgende trinnene utført av kontrollenheten (300): - å motta digitale signaler av innfanget lyd fra alle mikrofonene omfattet i systemet; • å motta instruksjoner omfattende selektive posisjonsdata gjennom innmatingsmidlene (350) i kontrollenheten (300); - å velge signaler fra et utvalg av relevante mikrofoner i bredbåndsmatrisen(e) (100, 110) for videre prosessering, og hvor valget utført er basert på spektralanalyse av signalet; - å utføre signalprosessering på signalene fra utvalget av relevante mikrofoner for å fokusere og styre lyden i henhold til de mottatte instruksjonene; - å generere én eller flere selektive lyder i henhold til den utførte prosesseringen.
10. Metode i henhold til krav 9, karakterisert ved at mottatte digitale signaler er i et komprimert format.
11. Metode i henhold til krav 9, karakterisert ved at mottatte digitale signaler av innfanget lyd fra alle mikrofonene i matrisen(e) (100, 110) blir lagret i et datalager (320).
12. Metode i henhold til krav 9, karakterisert ved at den signalprosesserende enheten (300) utfører signalprosesseringen i sanntid.
13. Metode i henhold til krav 9 og 11, karakterisert ved at den signalprosesserende enheten (300) utfører signalprosessering i en prosesseringsprosess i ettertid ved å bruke lagrede signaler av innfanget lyd.
14. Metode i henhold til krav 9, karakterisert ved at signalprosesseringen omfatter romlig og spektral stråleforming.
15. Metode i henhold til krav 9, karakterisert ved at signalprosesseringen omfatter multiplekset sampling og beregning av signal forsinkelse, grunnet multipleksing, for å utføre korrigeringer i software eller hardware.
16. Metode i henhold til krav 9, karakterisert ved at signalprosesseringen omfatter beregning av lydtrykkforsinkelse fra lydmålet til matrisen med mikrofoner med den hensikt å utføre synkronisering av signalet med en forhåndsdefinert tidsforsinkelse.
17. Metode i henhold til krav 9, karakterisert ved at signalprosesseringen muliggjør dynamisk selektivt lydutgangssignal for med zooming og panorering av lyden til én eller flere lokasjoner samtidig og også for å tilveiebringe lyd i én eller flere kanaler innbefattende surroundsystemer.
18. Metode i henhold til krav 9, karakterisert ved at signalprosesseringen omfatter regulering av samplingsrate på valgte mikrofonelementer for å oppnå optimal signalsampling og prosessering.
19. Metode i henhold til krav 9, karakterisert ved at forandring av aperture av mikrofonmatrisen blir utført for å oppnå en gitt frekvensrespons og redusere antall aktive elementer i mikrofonmatrisen.
20. Metode i henhold til krav 9, karakterisert ved at mottatte selektive posisjonsdata omfatter koordinater i to eller tre dimensjoner for å definere fokuseringspunkt(er).
21. Metode i henhold til krav 20, karakterisert ved at mottatte selektive posisjonsdata kommer fra et system som sporer ett eller flere objekter.
22. Metode i henhold til krav 14 og 20, karakterisert ved at posisjonsdata bestemmer hvilke romlige vektefunksjoner som skal brukes for å justere grad av romlig stråleforming med fokusering og styring med forsinkelse og summering av stråleformer, og forandring av sidelobenivå og strålebredden.
23. Metode i henhold til krav 22, karakterisert ved at romlig stråleforming blir utført ved å velge vektefunksjon blant Cosin, Kai ser, Hamming, Hannig, Blackmann-Harris og Prolate Spheroidal i henhold til valgte strålebredde til hovedloben.
24. Metode i henhold til krav 20, karakterisert ved at koordinatene er definert av posisjonen til fokuseringspunkt(er) til ett eller flere kamera(er) som filmer en hendelse som foregår ved spesifikk(e) lokasjon(er) innenfor målområdet.
25. Metode i henhold til krav 20, karakterisert ved at koordinatene er definert av en bruker som styrer et brukergrensesnitt som omfatter ett eller flere displayer som viser en oversikt over målområdet, et tastatur, en lydmiksingsenhet, og én eller flere joysticker.
26. Metode i henhold til krav 20, karakterisert ved at koordinatene blir brukt for å kontrollere og fokusere ett eller flere kameraer.
27. Metode i henhold til krav 17, karakterisert ved at det dynamisk valgte lydutgangssignalet i et surroundsystem er koherent med ett eller flere kamera(er).
NO20054527A 2005-09-30 2005-09-30 System og metode for a produsere et selektivt lydutgangssignal NO323434B1 (no)

Priority Applications (11)

Application Number Priority Date Filing Date Title
NO20054527A NO323434B1 (no) 2005-09-30 2005-09-30 System og metode for a produsere et selektivt lydutgangssignal
PT06799561T PT1946606E (pt) 2005-09-30 2006-09-29 Captação de áudio direccional
CN2006800362379A CN101278596B (zh) 2005-09-30 2006-09-29 定向音频捕获
AT06799561T ATE487333T1 (de) 2005-09-30 2006-09-29 Gerichtete audio-erfassung
DK06799561.3T DK1946606T3 (da) 2005-09-30 2006-09-29 Retningsbestemt lydindfangning
PCT/NO2006/000334 WO2007037700A1 (en) 2005-09-30 2006-09-29 Directional audio capturing
EP06799561A EP1946606B1 (en) 2005-09-30 2006-09-29 Directional audio capturing
ES06799561T ES2355271T3 (es) 2005-09-30 2006-09-29 Captura de audio direccional.
DE602006018050T DE602006018050D1 (de) 2005-09-30 2006-09-29 Gerichtete audio-erfassung
EA200800965A EA011601B1 (ru) 2005-09-30 2006-09-29 Способ и система для направленного захвата аудиосигнала
US12/088,315 US20080247567A1 (en) 2005-09-30 2006-09-29 Directional Audio Capturing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
NO20054527A NO323434B1 (no) 2005-09-30 2005-09-30 System og metode for a produsere et selektivt lydutgangssignal

Publications (2)

Publication Number Publication Date
NO20054527D0 NO20054527D0 (no) 2005-09-30
NO323434B1 true NO323434B1 (no) 2007-04-30

Family

ID=35307883

Family Applications (1)

Application Number Title Priority Date Filing Date
NO20054527A NO323434B1 (no) 2005-09-30 2005-09-30 System og metode for a produsere et selektivt lydutgangssignal

Country Status (7)

Country Link
CN (1) CN101278596B (no)
AT (1) ATE487333T1 (no)
DE (1) DE602006018050D1 (no)
DK (1) DK1946606T3 (no)
ES (1) ES2355271T3 (no)
NO (1) NO323434B1 (no)
PT (1) PT1946606E (no)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011076290A1 (en) 2009-12-24 2011-06-30 Nokia Corporation An apparatus
CN102137318B (zh) * 2010-01-22 2014-08-20 华为终端有限公司 拾音控制方法和装置
US9332346B2 (en) * 2010-02-17 2016-05-03 Nokia Technologies Oy Processing of multi-device audio capture
CN102377975A (zh) * 2010-08-10 2012-03-14 华为终端有限公司 用于视频通信的视频处理方法、装置及系统
GB2493327B (en) 2011-07-05 2018-06-06 Skype Processing audio signals
GB2495131A (en) 2011-09-30 2013-04-03 Skype A mobile device includes a received-signal beamformer that adapts to motion of the mobile device
GB2495129B (en) 2011-09-30 2017-07-19 Skype Processing signals
GB2495472B (en) 2011-09-30 2019-07-03 Skype Processing audio signals
CN103024629B (zh) * 2011-09-30 2017-04-12 斯凯普公司 处理信号
GB2495128B (en) 2011-09-30 2018-04-04 Skype Processing signals
GB2496660B (en) 2011-11-18 2014-06-04 Skype Processing audio signals
GB201120392D0 (en) 2011-11-25 2012-01-11 Skype Ltd Processing signals
GB2497343B (en) 2011-12-08 2014-11-26 Skype Processing audio signals
JP5958717B2 (ja) * 2013-07-19 2016-08-02 パナソニックIpマネジメント株式会社 指向性制御システム、指向性制御方法、収音システム及び収音制御方法
WO2015168901A1 (en) * 2014-05-08 2015-11-12 Intel Corporation Audio signal beam forming
EP3151534A1 (en) 2015-09-29 2017-04-05 Thomson Licensing Method of refocusing images captured by a plenoptic camera and audio based refocusing image system
US9756421B2 (en) * 2016-01-22 2017-09-05 Mediatek Inc. Audio refocusing methods and electronic devices utilizing the same
US10789949B2 (en) * 2017-06-20 2020-09-29 Bose Corporation Audio device with wakeup word detection

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3157769B2 (ja) * 1998-03-02 2001-04-16 静岡日本電気株式会社 Tv音声制御装置

Also Published As

Publication number Publication date
CN101278596B (zh) 2012-08-29
DK1946606T3 (da) 2011-02-21
ATE487333T1 (de) 2010-11-15
PT1946606E (pt) 2011-01-28
ES2355271T3 (es) 2011-03-24
CN101278596A (zh) 2008-10-01
DE602006018050D1 (de) 2010-12-16
NO20054527D0 (no) 2005-09-30

Similar Documents

Publication Publication Date Title
NO323434B1 (no) System og metode for a produsere et selektivt lydutgangssignal
EP1946606B1 (en) Directional audio capturing
US9578413B2 (en) Audio processing system and audio processing method
CN104106267B (zh) 在增强现实环境中的信号增强波束成形
Hafizovic et al. Design and implementation of a MEMS microphone array system for real-time speech acquisition
US20180213345A1 (en) Multi-Apparatus Distributed Media Capture for Playback Control
EP2046032B1 (en) A method and an apparatus for obtaining acoustic source location information and a multimedia communication system
WO2014103331A1 (ja) 音声処理システム及び音声処理方法
CN1956601B (zh) 音频再现设备与音频再现方法
US20050117033A1 (en) Image processing device, calibration method thereof, and image processing
US20060227224A1 (en) Imaging device, sound record device, and sound record method
US11832051B2 (en) Microphone arrays
JP5483027B2 (ja) 3次元画像計測方法、及び3次元画像計測装置
JP2008543144A (ja) 音響信号用装置、システム、方法
JP5939444B2 (ja) 撮像装置
US11462235B2 (en) Surveillance camera system for extracting sound of specific area from visualized object and operating method thereof
JP4892927B2 (ja) 撮影装置、および通信会議システム
JP7070910B2 (ja) テレビ会議システム
US11418871B2 (en) Microphone array
US11665391B2 (en) Signal processing device and signal processing system
JP2014072661A (ja) 映像音声記録再生装置
JP4751974B2 (ja) 携帯型音源捜索装置
JP6274251B2 (ja) 画像データ発生装置及び画像データ発生方法
Scopece et al. 360 degrees video and audio recording and broadcasting employing a parabolic mirror camera and a spherical 32-capsules microphone array
US20220394382A1 (en) Apparatus, method and computer-readable storage medium for mixing collected sound signals of microphones