NO318868B1

NO318868B1 - Videokonferanse med forbedrede multimediakapabiliteter

Info

Publication number: NO318868B1
Application number: NO20034775A
Authority: NO
Inventors: Snorre Kjesbu; Espen Christensen
Original assignee: Tandberg Telecom As
Priority date: 2003-10-24
Filing date: 2003-10-24
Publication date: 2005-05-18
Also published as: ATE538596T1; US20110134206A1; CN1871855A; US20050144233A1; NO20034775D0; WO2005041574A1; US8560641B2; JP2007513537A; EP1676439B1; EP1676439A1

Description

ftppf-iTiTi elsens område

Den foreliggende oppfinnelse relaterer seg til videokonferanser og multimediemeldinger.

rtppf-i ti ti el Sen" <ha>fcff-riiTtTi

For å avholde et møte blant flere deltakere som ikke er lokalisert innenfor samme område finnes et antall teknologiske systemer tilgjengelig. Disse systemene kan inkludere videokonferanser, web-konferanser og audiokonferanser.

Den mest realistiske erstatning for virkelige møter er "high end" -videokonferansesystemer. Konvensjonelle videokonferansesysterner omfatter et antall av endepunkter som kommuniserer sanntidsvideo, audio- og/eller datastrømmer over WAN, LAN, og/eller linjesvitsjede nettverk. Endepunktene inkluderer én eller flere monitorer, kameraer, mikrofoner og/eller datainnfangingsanordninger, og en kodek som koder og dekoder utgående og innkommende strømmer respektivt. I tillegg kreves en sentralisert kilde kjent som en "Multipoint Control Unit (MCU)" for å linke flere endepunkter sammen. MCUen utfører denne linking ved å motta multimediesignaler (audio, video og/eller data) fra endepunktterminaler over punkt-til-punkt (point-to-point) - forbindelser, og prosesserer de mottatte signaler og resender de prosesserte signaler til valgte endepunktterminaler i konferansen.

De forskjellige konferansesystemer er imidlertid ikke isolert fra hverandre. Forskjellige konferanseteknologier ser nå ut til å smelte sammen idet konferansemøter blir mer og mer vanlig, og konferanseteknologi utvikler seg. Det er ikke uvanlig å finne komplette web- eller audiodeltakere i tradisjonelle videokonferanser.

Audio- og webdeltakere vil imidlertid ikke oppnå den fulle fordel av konferanseegenskapene når de deltar i en tradisjonell videokonferanse som en følge av endepunkt- og systembegrensninger. Audiodeltakere er ikke i stand til å se de andre deltakerne eller datapresentasjonene i konferansen, mens videodeltakerne ikke en gang trenger å være klar over nærværet til audiodeltakerne. Det sistnevnte løses enkelte ganger ved å vise et audiodeItaker-ikon istedenfor et bilde i videobildet for å indikere at en audiodeltaker er til stede. Dette skaffer imidlertid lite informasjon om deltakeren i seg selv.

Sammendrag for oppfinnelsen

Det er en hensikt for den foreliggende oppfinnelse å skaffe til veie en anordning og en fremgangsmåte som tillater audiodeltakere i en konvensjonell videokonferanse å oppnå bedret ytelse for konferansen.

Trekkene definert i de selvstendige kravene vedlagt karakteriserer denne anordning og fremgangsmåte.

Spesielt fremhever den foreliggende oppfinnelse en MMS-maskin justert for å tilpasses MMS-egenskaper inn til en videokonferanse, inkludert én eller flere videodeltakere assosiert med et respektivt videokonferanseendepunkt, én eller flere audiodeltakere assosiert med en respektiv MMS-anordning. MMS-maskinen inkluderer innfangingsverktøy konfigurert for å innhente videokonferansedata fra en datakilde med sitt opphav fra én eller flere videokonferanseendepunkter, konverteringsverktøy konfigurert for å konvertere nevnte videokonferansedata til et passende format, meldingsgenererende verktøy konfigurert for å tilknytte nevnte konverterte videokonferansedata til en melding og for å sette inn i nevnte melding en adresse assosiert med den respektive MMS-anordning, og transmisjonsmidler konfigurert for å sende nevnte melding i henhold til nevnte innsatte adresse. Med den hensikt å sende multimediedata i den motsatte retning, så inkluderer MMS-maskinen MMS-mottakermidler konfigurert for å motta en MMS-melding fra den respektive MMS-anordningen og separere tilknyttede multimediedata, konverteringsmidler konfigurert for å konvertere nevnte multimediedata til et format kompatibelt med videokonferansen, og transmisjonsmidler konfigurert for å skaffe til veie nevnte konverterte multimediedata til det respektive videokonferanseendepunkt.

Den foreliggende oppfinnelse inkluderer også fremgangsmåter som korresponderer til bruksområdet for MMS-maskinen.

Kort beskrivelse av fi<g>urene

For å gjøre oppfinnelsen enklere forståelig vil diskusjonen som følger referere seg til de vedlagte tegninger.

Figur 1 beskriver formatet for en MMS-melding,

Figur 2 beskriver en konvensjonell MMS-arkitektur,

Figur 3 beskriver videokonferansearkitektur forbundet til en del av en konvensjonell MMS-arkitektur. Figur 4 beskriver en MMS-maskin i henhold til en foretrukket utførelsesform for den foreliggende oppfinnelse.

Beste fremgangsmåte for utførelse av oppfinnelsen

1 det følgende vil den foreliggende oppfinnelse bli diskutert ved å beskrive en foretrukket utførelsesform og ved å referere til de vedlagte tegninger. Fagmannen på området vil imidlertid kunne utlede andre anvendelser og modifikasjoner innenfor oppfinnelsens ramme som definert i de vedlagte selvstendige kravene.

Den foreliggende oppfinnelse drar fordel av egenskapene for kommunikasjonssystemet til hvilket audiodeltakere er forbundet, for å øke ytelsen for alle deltakerne i en blandet konferanse. Det er mange multimediefunksjoner i et digitalt kommunikasjonsnettverk. Et eksempel er multimediemeldingssystem (Multimedia Messaging System, MMS) standardisert av "Third Generation Partnership Project (3GPP) .

MMS har utviklet seg fra populariteten til SMS-meldingssysterner og bruker Wireless Application Protokoll (WAP). WAP er en protokoll som tillater mobilanordninger å kommunisere med Internett-tjenere via det mobile radiokommunikasjonsnettverket. Idet fremvisningsanordningen på mobilanordninger er mye mindre (typisk 150 x 1 50 piksler) enn datamaskinfremvisningsanordninger (typisk i det minste 640 x 480 piksler), kan ikke en webside designet for å bli fremvist på en datamaskinmonitor fremvises på en mobilanordning på en praktisk måte. I tillegg har mobilanordninger vesentlig mindre prosesseringskraft enn personlige datamaskiner.

Således ble WAP utviklet for å tillate mobilanordninger å aksessere spesielle Internettsteder som er designet for å bli fremvist på en mobilanordning og å skaffe til veie et grensesnitt mellom den mobile anordning og Internett. MMS er imidlertid en standard for å sende og motta multimediemeldinger. Multimediemeldinger kan inkludere enhver kombinasjon av formatert tekst, bilder, fotografier, audio- og videoklipp. Bildene kan være innenfor standardformatene slik som GIF og JPEG. Videoformater slik som MPEG4 og audioformater slik som MP3 og MIDI blir også støttet av MMS.

Det typisk format for en MMS-melding er illustrert i figur 1. MMS-meldingen inkluderer hode 1. Hodet 1 skaffer til veie rutinginformasjon og adresser for mottakere og sendere av MMS-meldinger. Meldingskroppen inkluderer multiraediemeldingen som i sin tur igjen kan inkludere bilder som kan være i form av JPEG, formatert eller ren tekst, audio, som i sin tur igjen kan være en Wave-fil, video, som igjen kan være i form av en MPEG-fil, og kan valgfritt inkludere en presentasjonsfil som presenterer multimedieinnholdet for mottakeren av multimediemeldingen.

En illustrasjon av MMS-trafikkrutingsekvensen i en tradisjonell "peer-to-peer"-MMS-rutinger vist i figur 2. En bruker av en mobilanordning har en MMS-melding som brukeren ønsker å sende til en annen mobilanordning. Mobilanordningen sender MMS-meldingen til en MMS-tjener via PLMN X. MMS-tjeneren ruter meldingene gjennom Internett ved bruk av SMTP og en e-postadresse. Siden meldingene sendt av mobilanordningen ble adressert til mottakerens MSISDN-nummer, må MMS-tjeneren bestemme adressen for mottakerens MMS-tjener for således å rute multimediemeldingen til mottakerens MMS-tjener. Om MMS-tjeneren er i stand til å identifisere MMS-tjeneren for mottakerens mobilanordning ved sitt MSISDN-nummer så vil multimediemeldingen bli rutet til mottakerens MMS-tjener via Internett ved bruk av SMTP og en e-postadresse for mottakerens MMS-tjener. MMS-tjeneren sender så en multimediemeldings henvisning til en "Push Access Protokoll" (PAP)-tjener. PAP-tjeneren er en Push Gateway for å "skyve'<*> (pushing) meldinger til mobilanordningen ved anvendelse av WAP-forumstandarden. PAP-tjeneren sender en henvisning til mobilanordningen via et andre PLMN Y. Mottakende mobilanordning "henter" (pulls) MMS-meldingen fra MMS-tjeneren via PLMN Y. Som respons på mobilanordningens "henting", vil MMS-tjeneren rute multimediemeldingen til mottakende mobilanordning via PLMN Y. Multimediemeldingen blir mottatt i mobilanordningen der den kan bli presentert, spilt eller fremvist til brukeren av mobilanordningen.

Hovedanliggende for den foreliggende oppfinnelse er å utnytte arkitekturen og multimediekapasiteten for MMS-systemet for å forbedre ytelsen og fordelene for audiodeltakere i en videokonferanse. En foretrukket utførelsesform vil bli beskrevet i figur 3. Sammenlignet med arkitekturen i figur 2 vil venstre side av MMS-infrastrukturen assosiert med en av "the peers" bli erstattet med et videokonferansesystem. Systemet inkluderer et første antall av endepunkter (EP) med en assosiert første MCU1 forbundet til et lokalnettverk (LAN), som i sin tur er forbundet til en nettverkstjener som er en integrert Gateway supplert med en MMS-maskin. Et andre antall av EPer med et assosiert andre MCU2 er også i kommunikasjon med

nettverkstjeneren gjennom en ISDN-linje.

EPene, MCUene og Gatewayen opererer i

videokonferansesysternet som konvensjonelle

videokonferansenoder. EPene innfanger multimediedata, koder dataene og videresender dem til videre prosessering i MCUene. Prosesseringen i MCUen skaffer til veie blant annet miksing av video, og forbereder et kodet

multimediedatasignal som blir sendt til hver av de deltakende konferanse-EPer som i sin tur dekoder multimediedatasignalene og presenterer dem til de respektive brukere. Gatewayen ordner kommunikasjon mellom EPene og MCUene som opererer med forskjellige protokoller. Den viktigste oppgaven for Gatewayen er å konvertere multimediedata fra å være juBtert for transmisjon over ISDN til multimediedata justert for IP-sending. Gatewayen er konvensjonelt blitt brukt for å forbinde et LAN (lokalnettverk) til en ekstern ISDN-forbindelse som tillater interne (enterprise i betydningen av innenfor enterprisenettverk) EPer å kommunisere med eksterne EPer.

I en foretrukket utførelsesform for den foreliggende oppfinnelse er Gatewayen inkorporert i en nettverkstjener som også inkluderer en MMS-maskin som tilveiebringer økt ytelse for audiodeltakere i en videokonferanse. Det vil fremkomme fra den etterfølgende beskrivelsen at fordi MMS-maskinen og Gatewayen har en del felles trekk, så vil de være installert i den samme noden. Som et eksempel skaffer både MMS-maskinen og Gatewayen til veie en protokoll-konvertering, og begge er passende plassert i grensen mellom et lokalt og et offentlig kommunikasjonsnettverk.

MMS-maskinen fremskaffer konvertering av

videokonferanseinnhold til en konvensjonell MMS som skal sendes til én eller flere audiodeltakere ved bruk av for eksempel mobiltelefon som er tilpasset for å kunne motta MMS-meldinger. Motsatt utfører også MMS-maskinen konverteringer av MMS-innhold mottatt fra én eller flere audiodeltakere til et format som er passende for videokonferansen som audiodeltakerne tar del i.

Én utførelsesform for MMS-maskinen er illustrert i figur 4. På venstre side av databussen er det vist et flertall temporære l/O-minner, respektive assosiert med mediedata for konvensjonelle videokonferanseformater, i tillegg til en kontroller og en prosessor. På høyre side av databussen er det også vist et flertall temporære I/O-minner, hver assosiert med respektive felter i et typisk MMS-meldingsformat, i tillegg til et MMS-meldings-l/O-minne.

Om en nå fokuserer på den første nevnte retning for konvertering, anta at videokonferansen i dette øyeblikk ser et videobilde innhentet fra EP1 sendt til alle de andre deltakerne. Det kodede videobilde blir rutet via MCU 1 og gjennom IP-nettverket til nettverkstjeneren. Hos nettverkstjeneren vil det kodede videobilde bli dekodet for å skaffe til veie et videobilde for konvensjonelle videokonferanseformater så som QCIF, CIF og 4CIF.

MMS-maskinen er konfigurert for å innfange et øyeblikksbilde av videobildet ved bestemte

forhåndsdefinerte tidsintervaller, eller ved bestemte hendelser, dvs. å velge et av bildene i en strøm av stillbilder som videobildet består av. Dette implementeres ved at bilder lagres fortløpende i et temporært minne, enten i video-I/O-minne eller i data-l/O-minnet for MMS-

maskinen, hvis innhold blir fanget samtidig som øyeblikksbildeinnhentingen, og videresendt til prosessoren via databussen. De tidspunktene for innfanging blir kontrollert av kontrolleren. Prosessoren bestemmer originalformatet for bildet og konverterer innholdet til et JPEG-format i henhold til en forhåndslagret algoritme. Konverteringen kan også inkludere skalering av bildet for å tilpasse størrelsen til en liten skjerm. Kontrolleren videresender JPEG-bildet til JPEG-minnet, og når tiden er inne for å sende en MMS til én eller flere audiodeltakere, lager prosessoren en MMS i henhold til formatet beskrevet i figur 1, hvis innhold blir bestemt av kontrolleren. Adressen for MMS-mottakeren blir satt inn i MMS-hodet, og idet det komplette MMS blir satt inn i MMS-inn/ut-minnet, vil MMS med øyeblikksbildet fra EP1 i JPEG-format være klart for sending til MMS-tjeneren(e) som mottakeren(e) er assosiert med.

Adressen satt inn i MMS-hodet er en e-postadresse, MMSen blir rutet til MMS-tjeneren på konvensjonell måte ved bruk av SMTP, og MMS-innholdet blir "trukket" (pulled) fra MMS-tjener (ne) til mottaker(ne). MMS-e-postadressene for deltakende audiodeltakere må bli lagret i adressememo for konferanseoppsettet, eller når nye audiodeltakere med MMS-egenskaper tiltrer en pågående konferanse.

Bemerk at øyeblikksbildet ikke er begrenset til å inkludere innhold fra en enkelt deltaker, men kan også inkludere såkalte CP-bilder (Continuous Presence), som er en sammensetning av bilder fra forskjellige deltakere. Merk også at bildet knyttet til MMS-meldingen ikke er begrenset til et bestemt format eller et stillbilde, men kan også være en videosekvens, for eksempel i MPEG-format. Videosekvensen kan hentes direkte fra video-l/0-minnet eller genereres ved innhenting og sammensmelting av stillbilder.

Om en nå betrakter den motsatte retning av MMS-flyten, forestill deg at videokonferansen for øyeblikket ser et Continuous Presence (CP) -bilde som inneholder et videobilde av alle deltakerne bortsett fra mottakeren av CPen, og et jevnlig oppdatert stillbilde fanget av den eneste audiodeltåkeren i videokonferansen. Audiodeltakeren har en mobiltelefon med MMS-egenskaper og et kamera. Når audiodeltakeren trer inn i konferansen vil han bli gitt en e-postadresse assosiert med konferansen og/eller nettverkstjeneren. E-postadressen kan bli sendt fra nettverkstjeneren som en MMS (for eksempel som avsenderadresse eller "retursti" for den første MMS inkludert videokonferansedata sendt i motsatt retning) og kan være ment for manuell bruk, eller kan automatisk settes inn i minnet for mobiltelefonen for senere bruk under konferansen. E-postadresser og/eller andre data kan også utveksles mellom nettverkstjeneren og mobiltelefonen/MMS-tjeneren ved midler av en proprietær signalleringsprotokoll under oppsett av anropet.

Når et anrop blir satt opp fra mobiltelefonen til en konferanse, blir et bilde innfanget av kamera assosiert med mobiltelefonen, og satt inn i en MMS-melding adressert til konferansen. MMS-meldingen blir så sendt til nettverkstjeneren via MMS-tjeneren gjennom Internett ved hjelp av av SMTP. Når en mottar MMSen, vil en konferanselD (conference ID) enten tilveiebringes ved å undersøke e-postadressen, eller ved å undersøke avsenderaddressen funnet i MMS-hodet. MMSen blir satt inn i MMS-l/O-minnet og kontrolleren initierer prosessoren for å separere de forskjellige medieelementer inkludert i meldingen, og å sette dem inn i de respektive minner. JPEG-bildet som nå befinenr seg i JPEG-minnet konverteres så til et passende format benyttet i CP-bildet av konferansen og blir lagt inn i video- eller data-l/O-minnet. Bildet blir innfanget fra minnet, så kodet og sendt til MCUen som mikser CP-bildene for konferansen i henhold til tidligere tilveiebrakt "konferanselD". MCUen legger så inn et stillbilde som opprinnelig ble skaffet av mobiltelefonen i det sjette CP-feltet sammen med de fem andre videobilder. Et alternativ til konvertering kan også være å sende multimediedata separat fra MMS-meldingen direkte til MCU, eller til videokonferanseendepunktene. Dette ville kreve at mottakeren var IP-adresserbar for for eksempel å skyve (pushing) ut multimediedata.

I tilfelle der en ser audiodeltakere med det samme stillbildet gjennom hele konferansen vil det kunne være passende å gjenbruke tidligere mottatte bilder for å redusere transmisjonstid og kostnad. I dette henseende kan et bilde mottatt fra en bestemt audiodeltaker registrert i en katalog forbundet til et endepunkt eller et styringsverktøy (management tool), kunne blitt lagret i katalogen sammen med all annen informasjon om deltakeren. Når audiodeltakeren senere deltar i en konferanse som inkluderer videokonferanseanordningen med katalogen, vil korresponderende bilde kunne hentes ut og bli brukt for fremvisning av audiodeltakerne uten at en trenger å resende bildet.

Den ovenfor beskrevne utførelsesform for den foreliggende oppfinnelse representerer et MMS-maskin implementert sammen med, eller innebygd i en Gateway. MMS-maskinen trenger imidlertid ikke nødvendigvis å være forbundet til en Gateway, men kan også være en "stand-alone"-anordning eller innebygget i andre videokonferansenoder så som MCU, eller i endepunkter. Den kan også være end el av et "Management Tool" tilknyttet videokonferansesysternet. Uansett vil MMS-maskinen, eller en node i hvilken, eller til hvilken den er innebygget eller forbundet, nødvendigvis være adresserbar i henhold til Internettprotokollen. Videre er beskrivelsen også fokusert på innfanging og sending av stillbilder mellom en videokonferanse og én eller flere audiodeltakere med multimedieegenskaper. Multimedieinnhold er imidlertid ikke begrenset til stillbilder, men kan også bestå av video, tekst og/eller audio, som i de enkelte tilfeller vil distribueres i de respektive minner i MMS-maskinen ved konvertering.

Foreliggende oppfinnelse inkluderer også et aspekt der multimediedata blir overført til MMS-kapable audiodeltakere ved anvendelse av e-post. 1 MMS-maskinen er multimediedata etter konvertering i dette tilfelle tilknyttet til en konvensjonell e-post som blir sendt til MMS-anordningen via MMS-tjeneren. Hvordan MMS-tjeneren og anordningen håndterer e-posten er operatøravhengig, men det er et velkjent faktum at sending av en e-post til en MMS-anordning er tillatt ved å adressere e-posten med phonenumberQdomain. MMS-anordningen vil motta e-posten som en MMS-melding i hvilken e-posttekst og vedheng er innsatt i MMS-inngangene.

Som allerede indikert kan et øyeblikksbilde eller andre multimedieinnhold innfanges og overføres ved forhåndsdefinerte tidspunkter, eller ved bestemte hendelser. I ett aspekt vil en slik hendelse inntreffe i det øyeblikk en vesentlig endring i innholdet av kildebildet (video- eller stillbilde), fra hvilket det nåværende øyeblikksbilde har sitt opphav blir oppdaget. Detekteringen kan finne sted for eksempel i nettverkstjeneren illustrert i figur 3. I henhold til én utførelsesform av dette aspekt av oppfinnelsen, vil det foregående sendte øyeblikksbilde bli lagret i nettverkstjeneren, og øyeblikksbildet blir kontinuerlig sammenlignet med kildebildet. Sammenligning kan utføres ved en piksel-for-piksel-metode, eller så kan én eller flere verdier assosiert med øyeblikksbildet kunne sammenlignes med én eller flere korresponderende verdier assosiert med kildebildet. Når forskjellen(e) mellom verdiene er mer enn (en) forhåndsdefinert(e) terskelverdi(er) vil sending av et nytt øyeblikksbilde til én eller flere audiodeltakere bli initialisert. Dette betyr at kontrolleren i figur 4 muliggjør lesing fra video- eller data-I/O-minnet via databussen til prosessoren, som så på sin side konverterer øyeblikksbildet fra det nåværende format til JPEG, og så setter inn JPEG-bildet i JPEG-minnet.

En hendelse som kan trigge en ny øyeblikksbildesending er sideskift i en presentasjon. Et annet eksempel er når stemmesvitsjing er aktiv, og taler skifter. Et fullstendig nytt bilde vil så fremtre som hovedvideobilde i konferansen, og et nytt øyeblikksbilde for sending vil bli initialisert.

Alternativt for hendelsesskapte snapshots (eller andre multimediedata)-innhenting, kan nye snapshots også sendes periodisk ved innhenting av det første snapshot ved oppsett av anrop. Transmisjon av multimediedata i den motsatte retning fra audiodeltakerne til videokonferansen kan bli initialisert tilsvarende, men avgjørelsesmekanismen vil trolig bli plassert i MMS-anordningen eller et annet sted i MMS- eller mobilnettverksarkitekturen. I tilfelle av implementering av avgjørelsesmekanismen i MMS-anordningen kan noe proprietær programvare måtte installeres.

Det finnes også andre grunner for å installere skreddersydd programvare i mobiltelefoner ved å utstyre dem med utvidede muligheter for å delta i en konvensjonell videokonferanse. For å bedre ytelsen og fordelene for audiodeltakerne bør det å få de utvidede MMS-egenskapene for den foreliggende oppfinnelse være så intuitive og lite anstrengende som mulig. Deltakelse vil være tungvint om brukeren manuelt må sende og motta bilder under konferansen. Således, i henhold til en foretrukken utførelsesform for den foreliggende oppfinnelse, vil MMS-anordningen være konfigurert med programvare som tillater den å både sende og motta signalleringsmeldinger omhandlende snapshot-innhenting, sending og mottak, alternativt i tillegg til å sette sammen innhold mottatt ved forskjellige tidspunkter, for derved å skaffe en kontinuitet i presentasjonen av multimediedata . fra konferansen. Programvaren er tilpasset til å motta og lagre e-postadresser for nettverkstjener/konferanse og automatisk hente inn disse adresser og sette dem inn i MMS-hodet når det sendes multimediedata til konferansen. Softwaren er fordelaktig installert som Java-script, idet dette er et fleksibelt verktøy for å tilby skreddersydde trekk for små anordninger. I tillegg er de fleste mobiltelefoner og mobile anordninger nå utstyrt med Java-teknologi.

Snapshot-innhenting ved videokonferansesiden bør fortrinnsvis også være mulig å initialisere, enten manuelt eller automatisk, fjernstyrt fra en audiodeltaker. I en foretrukken utførelsesform for den foreliggende oppfinnelse vil programvaren installert i mobiltelefonen derfor være konfigurert til å generere og sende en forespørsel for snapshot-innhenting til nettverkstjeneren. Som respons vil MMS-maskinen innhente et snapshot (eller andre multimediedata) fra et av i/O-minnene, konvertere dette til passende format og returnere snapshotet til MMS-anordningen for audiodeltakeren.

I enkelte tilfeller vil multimedieinnholdet mottatt ved forskjellige tidspunkter i MMS-anordningen ha en fordel av å sammensmelte innholdet og derved skaffe til veie en sammenheng i data overført via MMS fra videokonferansen. For eksempel vil en sanntidsvideopresentasjon kunne bli skapt fra et antall av snapshots eller videobiter sendt etter hverandre i separate MMS-meldinger fra MMS-maskinen. Programvaren er i dette tilfellet også konfigurert for fortløpende å motta og lagre de innkomne multimediedata og presentere det på en skjerm for MMS-anordningen på en slik måte at det fremstår som en kontinuerlig videostrøm.

Sanntidsvideopresentasjon impliserer imidlertid transmisjon av store og/eller mange MMS-meldinger, og vil derved kreve en vesentlig båndbredde helt frem til audiodeltakeren. Båndbreddekravet kan midlertidig reduseres ved, isteden for å konvertere videokonferansebiIdene til JPEG-format i MMS-maskinen, kode bildene i henhold til standard eller proprietære kodingsteknikker, og å sette inn de respektive kodede bilder i et av feltene i MMS-meldingene som generelle vedlegg. I dette tilfelle vil programvaren i mobiltelefonen også måtte konfigureres for å dekode vedlegget i MMS-meldingen i henhold til kodingsteknikkene som ble brukt av MMS-maskinen.

Oppgavene for programvaren i mobiltelefonen beskrevet over vil kreve noe signallering og forhandling mellom MMS-anordningen og MMS-maskinen. Denne utvekslingen av informasjon kan bli satt inn i tekst- eller presentasjonsfelter (midlertidig i tekst- eller presentasjonsminne i MMS-maskinen) for MMS-meldingene som fremdeles sendes for derved å skape en virtuell, separat signalleringskanal. Denne informasjonen kan inneholde snapshot-forespørsler, typen av hendelser som initialiserer snapshot-innhenting og synkroniseringsinformasjon.

Utførelsesformen for den foreliggende oppfinnelse fremstår i beskrivelsen over som en MMS-maskin som integrerer MMS-egenskaper innenfor konvensjonelle videokonferanser. De grunnleggende ideer for den foreliggende oppfinnelse kan imidlertid også bli utført i en mer generell fremgangsmåte. Fremgangsmåten inkluderer i én retning innhenting av videokonferansedata, for eksempel et snapshot av videobildet for én eller flere deltakere eller et CP-bilde, konvertering av data til passende format, og innsetting av de konverterte data som vedlegg i en MMS-melding. MMS-meldingen blir sendt fra en IP-adresserbar anordning til én eller flere audiodeltakere ved MMS-egenskaper via MMS-infrastrukturen. Audiodeltakerne innhenter videokonferansedata vedlagt MMS-meldingen, og presenterer dataene som en del av konferansen som audiodeltakerne tar del i.

I den motsatte retning vil audiodeltakerne innhente en eller annen form for multimediedata, normalt et stillbilde eller andre data som presenterer audiodeltakerne, og sette multimediedata inn i en MMS-melding. MMS-meldingen blir adressert og sendt til en IP-adresserbar node tilknyttet videokonferansesysternet. Vedlegget blir så hentet fra MMS-meldingen og konvertert til et passende videokonferanseformat. De konverterte multimediedata blir så kodet og sendt til en eller flere av de konvensjonelle videokonferansedeltakerne, alternativt etterfulgt av å mikse det med data fra andre deltakere.

Claims

1. En MMS-maskin tilpasset til å utnytte MMS-egenskaper i en videokonferanse med én eller flere videodeltakere assosiert med et respektivt videokonferanseendepunkt, én eller flere audiodeltakere assosiert med en respektiv MMS-anordning, karakterisert ved innfangingsverktøy konfigurert til å innhente videokonferansedata fra en datakilde med sitt opphav fra en eller flere videokonferanseendepunkter og/eller MCUer, konverteringsverktøy konfigurert til å konvertere nevnte videokonferansedata til et passende MMS-vedleggbart format, meldingsgenererende verktøy konfigurert til å tilknytte nevnte konverterte videokonferansedata til en melding og for å sette inn i nevnte melding en adresse assosiert med den respektive MMS-anordning og transmisjonsmiddel konfigurert til å sende nevnte melding i henhold til nevnte innsatte adresse.

2. En MMS-maskinen i henhold til krav 1, karakterisert ved en kontroller tilpasset til å kontrollere tidspunkt for nevnte innhenting, konvertering, meldingsgenerering og transmisjonsmidler.

3. En MMS-maskin i henhold til krav 2, karakterisert ved at nevnte kontroller er konfigurert til å initialisere nevnte innhenting, konvertering, meldingsgenerering og transmisjonsmidler ved én eller flere forhåndsdefinerte hendelser.

4. En MMS-maskin i henhold til krav 3, karakterisert ved at en av de nevnte hendelser inntreffer når nevnte videokilde endres eller når en endring mellom foregående innhentede videokonferansedata og innhold generert fra nevnte datakilde er større enn en forhåndsdefinert grense.

5. En MMS-maskin i henhold til kravene 3 eller 4, karakterisert ved at en av de nevnte hendelser inntreffer når en forespørsel for videokonferansedataoppdatering blir mottatt fra den respektive MMS-anordning.

6. En MMS-maskin i henhold til krav 2, karakterisert ved at nevnte kontroller er konfigurert til å initialisere nevnte innhentings-, konverterings-, meldingsgenererings- og transmisjonsmiddel, periodisk og/eller ved tidspunktet der en eller flere audiodeltakere trer inn i videokonferansen.

7. En MMS-maskin i henhold til et av de foregående krav, karakterisert ved at meldingen er en MMS-melding og videokonferansedata er satt inn i et korresponderende MMS-felt i nevnte MMS-melding og nevnte adresse er en adresse for en MMS-tjener assosiert med den respektive MMS-anordning.

8. En MMS-maskin i henhold til kravene 1-6, karakterisert ved at meldingen er en e-postmelding og at nevnte adresse er en e-postadresse assosiert med den respektive MMS-anordning.

9. En MMS-maskin i henhold til et av de foregående krav, karakterisert ved at nevnte videokonferansedata er et snapshot.

10. En MMS-maskin i henhold til kravene 1-8, karakterisert ved at nevnte videokonferansedata er en videosekvens.

11. En MMS-maskin i henhold til kravene 9 eller 10, karakterisert ved at nevnte videokonferansedata er satt sammen i den respektive MMS-anordning for å danne en sanntidsvideo.

12. En MMS-maskin i henhold til et av de foregående krav, karakterisert ved at nevnte MMS-maskin er bygget inn i eller forbundet til en Gateway, en MCU eller et endepunkt.

13. En MMS-maskin tilpasset til å utnytte MMS-egenskaper i en videokonferanse med én eller flere videodeltakere assosiert med et respektivt videokonferanseendepunkt og én eller flere audiodeltakere assosiert med en respektiv MMS-anordning, karakterisert ved at MMS-mottakende middel konfigurert til å motta en MMS-melding fra den respektive MMS-anordning og å separere vedlagte multimediedata, konverteringsmiddel konfigurert til å konvertere nevnte multimediedata til et format som er kompatibelt med videokonferansen, transmisjonsmiddel konfigurert til å skaffe til veie nevnte konverterte multimediedata til det respektive videokonferanseendepunkt.

14. En MMS-maskin i henhold til krav 13, karakterisert ved at MMS-mottakende middel videre er konfigurert til å avgjøre om MMS-meldingen er assosiert med videokonferansen ved å undersøke en sender-eller mottakeradresse inkludert i MMS-meldingen, fra hvilken en konferanselD for videokonferansen blir funnet, og at transmisjonsmiddelet videre er konfigurert til å sende de konverterte multimediedata til videokonferanseendepunktet i henhold til konferanseIDen.

15. En MMS-maskin i henhold til kravene 13 eller 14, karakterisert ved at videokonferansen involverer en MCU gjennom hvilken nevnte konverterte multimediedata blir sendt før de når nevnte respektive videokonferanseendepunkt.

16. En MMS-maskin i henhold til et av kravene 13 - 15, karakterisert ved en kontroller tilpasset til å kontrollere tidspunkt for nevnte konvertering og transmisjonsmiddel i tillegg til transmisjon av MMS-meldinger inkludert oppdaterte multimediedata fra MMS-anordningen.

17. En MMS-maskinen i henhold til krav 16, karakterisert ved at nevnte kontroller er konfigurert til å initialisere nevnte konverterings- og transmisjonsmidler og en forespørsel for nevnte transmisjon av MMS-meldinger ved én eller flere forhåndsdefinerte hendelser.

18. En MMS-maskin i henhold til krav 17, karakterisert ved at en av nevnte hendelser inntreffer når en forskjell mellom tidligere mottatte multimediedata og korresponderende multimediedata generert i MMS-anordningen er større enn en forhåndsdefinert terskel.

19. En MMS-maskin i henhold til krav 16, karakterisert ved at nevnte kontroller er konfigurert til å initialisere nevnte konverterings- og transmisjonsmidler og en forespørsel for nevnte transmisjon av MMS-meldinger periodisk og/eller ved de tider når en eller flere audiodeltakere trer inn i videokonferansen.

20. En MMS-maskin i henhold til ett av de foregående krav, karakterisert ved at nevnte multimediedata er et bilde lagret i MMS-anordningen eller innfanget av et kamera forbundet til, eller integrert i, MMS-anordningen.

21. En MMS-maskin i henhold til ett av kravene 13 - 19, karakterisert ved at nevnte multimediedata er en videosekvens.

22. En MMS-maskin i henhold til kravene 20 eller 21, karakterisert ved at de konverterte multimediedata slåes sammen for å danne en sanntidsvideo.

23. En MMS-maskin i henhold til ett av kravene 13 - 22, karakterisert ved at nevnte konverterte multimediedata blir behandlet som hvilke som helst andre multimediestrømmer assosiert med videokonferansen.

24. En MMS-maskin i henhold til ett av kravene 13 - 23, karakterisert ved at MMS-maskinen er innebygget i, eller forbundet til, en Gateway, en MCU eller et endepunkt.

25. En fremgangsmåte for utnyttelse av MMS-egenskaper i en videokonferanse med én eller flere videodeltakere assosiert med et respektivt videokonferanseendepunkt og én eller flere audiodeltakere assosiert med en respektiv MMS-anordning, karakterisert ved følgende trinn: å innhente videokonferansedata fra en datakilde med et opphav fra ett eller flere videokonferanseendepunkter eller MCUer, å konvertere nevnte videokonferansedata til et MMS-vedleggbart format, å vedlegge nevnte konvertert videokonferansedata til en melding, å sette inn i nevnte melding en adresse assosiert med en respektiv MMS-anordning, å sende nevnte melding i henhold til nevnte innsatte adresse.

26. Sn fremgangsmåte i henhold til krav 25, karakterisert ved de følgende tilleggstrinn: å initialisere nevnte trinn for innhenting, konvertering, vedlegging, innsetting og sending ved én eller flere forhåndsdefinerte hendelser

27. En fremgangsmåte i henhold til krav 25 eller 26, karakterisert ved at meldingen er en MMS-melding og at videokonferansedata satt inn i et korresponderende MMS-felt i nevnte MMS-melding og nevnte adresse er en adresse til en MMS-tjener assosiert med nevnte respektive MMS-anordning.

28. En fremgangsmåte i henhold til kravene 25 eller 26, karakterisert ved at meldingen er en e-postmelding og nevnte adresse er en e-post assosiert med nevnte respektive MMS-anordning.

29. En fremgangsmåte i henhold til ett av kravene 25 - 28, karakterisert ved at nevnte videokonferansedata er et snapshot.

30. En fremgangsmåte i henhold til ett av kravene 25 - 28, karakterisert ved at nevnte videokonferansedata er en videosekvens.

31. En fremgangsmåte i henhold til ett av kravene 25 - 30, karakterisert ved de følgende tilleggstrinn: å sette sammen videokonferansedata som fortløpende mottas i den respektive MMS-anordning for å danne en sanntidsvideo.

32. En fremgangsmåte for å utnytte MMS-egenskaper i en videokonferanse med én eller flere videodeltakere assosiert med et videokonferanseendepunkt og én eller flere audiodeltakere assosiert med en respektiv MMS-anordning, karakterisert ved å motta en MMS-melding fra den respektive MMS-anordning, separere multimediedata vedlagt den respektive MMS-anordning, konvertere nevnte multimediedata til et format kompatibelt med videokonferansen, skaffe til veie nevnte konverterte multimediedata til det respektive videokonferanseendepunkt.

33. En fremgangsmåte i henhold til krav 32, karakterisert ved følgende tilleggstrinn: å undersøke en sender- eller en mottakeradresse inkludert i MMS-meldingen, fra hvilken en konferanselD for videokonferansen blir funnet, å skaffe til veie de konverterte multimediedata til videokonferanseendepunktet i henhold til konferanseIDen.

34. En fremgangsmåte i henhold til krav 32 eller 33, karakterisert ved følgende tilleggstrinn: å initialisere nevnte trinn for å konvertere og sende i tillegg til en forespørsel for sending av MMS-meldinger inkludert oppdaterte multimediedata fra MMS-anordningen ved én eller flere forhåndsdefinerte hendelser.

35. En MMS-maskin i henhold til ett av kravene 32 - 34, karakterisert ved at nevnte multimediedata er et bilde lagret i MMS-anordningen eller innfanget av et kamera forbundet til, eller integrert i, MMS-anordningen.

36. En MMS-maskin i henhold til ett av kravene 32 - 34, karakterisert ved at nevnte multimediedata er en videosekvens.

37. En MMS-maskin i henhold til ett av kravene 32 - 36, karakterisert ved det følgende tilleggstrinn: å kombinere de konverterte multimediedata for å danne en sanntidsvideo.

38. En MMS-maskin i henhold til et av kravene 32 - 37, karakterisert ved følgende tilleggstrinn: å behandle nevnte konverterte multimediedata som en hvilken som helst annen multimediestrøm assosiert med videokonferansen.