NO20130201A1 - Procedure and application for capturing duo video content in a video conference. - Google Patents
Procedure and application for capturing duo video content in a video conference. Download PDFInfo
- Publication number
- NO20130201A1 NO20130201A1 NO20130201A NO20130201A NO20130201A1 NO 20130201 A1 NO20130201 A1 NO 20130201A1 NO 20130201 A NO20130201 A NO 20130201A NO 20130201 A NO20130201 A NO 20130201A NO 20130201 A1 NO20130201 A1 NO 20130201A1
- Authority
- NO
- Norway
- Prior art keywords
- separate data
- conference
- video
- vkka
- skipped
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 230000008569 process Effects 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 description 6
- 239000002131 composite material Substances 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000009977 dual effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/152—Multipoint control units therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Solid-Sorbent Or Filter-Aiding Compositions (AREA)
Abstract
En datamaskin-, nettbrett- eller smarttelefoneksekverbar applikasjon og en tilsvarende fremgangsmåte som gjør det mulig for en bruker av applikasjonen å aktivere strømming av duo video-innhold fra en pågående videokonferanse f.eks. fra en MCU, en konferansebro eller et endepunkt for avspilling, for redigering og lagring av innhold.A computer, tablet or smartphone executable application and a corresponding method which allows a user of the application to enable streaming of duo video content from an ongoing video conference e.g. from an MCU, a conference bridge, or an endpoint for playback, for editing and storing content.
Description
Fremgangsmåte, dataprogram og apparat for å fange duo video-innhold i en videokonferanse. Method, computer program and apparatus for capturing duo video content in a video conference.
Teknikkens område The area of technology
Den foreliggende oppfinnelse vedrører en fremgangsmåte og et datamaskinmplementert applikasjon for konferanser betjent av en VideoKonferanseKontrollArrangement (VKKA) som involverer separat data-innhold som er tilgjengelig fra VKKAen transmittert fra en eller flere av et antall endepunkter som deltar i en konferanse The present invention relates to a method and a computer-implemented application for conferences served by a Video Conference Control Arrangement (VKKA) involving separate data content available from the VKKA transmitted from one or more of a number of endpoints participating in a conference
Bakgrunn Background
Transmisjon av levende bilder i sanntid benyttes i flere applikasjoner som f.eks videokonferanser, nettmøter og videotelefoni . Transmission of live images in real time is used in several applications such as video conferences, online meetings and video telephony.
Videokonferansesystemer gir mulighet for samtidig utveksling av lyd, video og datainformasjon mellom flere konferansesteder. Systemer som er kjent som «Multipoint Control Units» (MCU) utfører svitsjefunksjoner som tillater endepunktene på foskjellige steder for å interkommunisere i en konferanse . Oppgavene til en MCU kan generelt utføres av generelle VideoKononferanseKontrollArrangementer (VKKAA) som distribuerte MCUer, konferansebroer, rutere eller konferansekontrollserere, som begrepet MCU heretter vil referere til. Video conferencing systems enable the simultaneous exchange of sound, video and data information between several conference locations. Systems known as "Multipoint Control Units" (MCU) perform switching functions that allow endpoints in different locations to intercommunicate in a conference. The tasks of an MCU can generally be performed by general purpose Video Conference Control Arrangements (VKKAA) such as distributed MCUs, conference bridges, routers or conference control servers, to which the term MCU will refer hereafter.
MCUen knytter stedene sammen ved å motta rammer («frames») med konferanse signaler fra de forskjellige stedene, prosesserer de mottatte signalene, og retransmittere de prosesserte signaler til de aktuelle stedene. Konferansesignaler inkluderer lyd, video, data og kontrollinformasjon. I en svitsjet konferanse blir video - signal fra ett av konferansestedene, typisk det med den høyeste talen, kringkastet til hver av deltakerne. I en kontinuerlig tilstedeværelse-konferanse («continuous presence conference»), blir videosignaler fra to eller flere steder romlig mikset for å danne et sammensatt videosignal for fremvisning hos konferansedeltakere . Når de forskjellige videostrømmer har blitt satt sammen til en enkelt videostrøm, transmitteres den sammensatte videostrømmen til de ulike deltakerne i videokonferansen, hvor hver transmitterte videostrøm gjerne følger et regelsett som angir hvem som skal motta hvilken videostrøm. Generelt foretrekker de ulike brukerne å motta ulike videostrømmer. Den kontinuerlige tilstedeværelse-videobilde eller sammensatte videobilde er et kombinert bilde som kan inkludere levende videostrømmer, stillbilder, menyer eller andre visuelle bilder fra deltakerne i konferansen . The MCU connects the locations by receiving frames with conference signals from the various locations, processes the received signals, and retransmits the processed signals to the relevant locations. Conference signals include audio, video, data and control information. In a switched conference, the video signal from one of the conference locations, typically the one with the loudest speech, is broadcast to each of the participants. In a continuous presence conference, video signals from two or more locations are spatially mixed to form a composite video signal for presentation to conference participants. When the different video streams have been combined into a single video stream, the composite video stream is transmitted to the various participants in the video conference, where each transmitted video stream usually follows a set of rules that indicate who should receive which video stream. In general, the different users prefer to receive different video streams. The continuous presence video image or composite video image is a combined image that may include live video streams, still images, menus or other visual images from the conference participants.
I tillegg til tradisjonelle, stasjonære videokonferanseendepunkter, har mobil- og datamaskinenheter som smarttelefoner, nettbrett og PC-er nylig kommet inn i det visuelle kommunikasjonsmarkedet . In addition to traditional desktop video conferencing endpoints, mobile and computing devices such as smartphones, tablets and PCs have recently entered the visual communication market.
Da videokonferanse involverer ulike ressurser og utstyr som samtidig interopererer på ulike lokaliseringer og med ulike kapabiliteter, er det behov for muligheten til å forvalte de ressursene som er involvert både for planlagte videokonferanser og ad hoc - videokonferanser. As video conferencing involves different resources and equipment that simultaneously interoperate at different locations and with different capabilities, there is a need for the ability to manage the resources involved both for planned video conferences and ad hoc video conferences.
Som nevnt ovenfor, har økt funksjonalitet og tilgjengelig båndbredde på mobile kommunikasjonsenheter gjort dem til populære verktøy i forretningskommunikasjon . Å kunne utføre visuell kommunikasjon nesten hvor som helst og når som helst, bedrer produktivitet og beslutningsprosess. As mentioned above, increased functionality and available bandwidth on mobile communication devices have made them popular tools in business communication. Being able to perform visual communication almost anywhere and anytime improves productivity and decision-making.
En tradisjonell videokonferanse har en lyd-kanal, en videokanal og en valgfri datakanal med separat datainnhold. Videokanalen bærer vanligvis kameravideobildet av deltakerne. Standarden H.239 fra ITU - T definerer regler og meldinger for å etablere en ekstra video/grafikk kanal , ofte for å overføre et PC-grafikk presentasjon eller video fra et dokumentkamera, og samtidig overføre video av den som presenterer. SIP ekvivalenten til H.239 er SIP Dual Video som bruker «RFC - 4582 Binary Floor Control Protocol», og begge er i bransjen ofte også referert til som "duo video", og i det følgende vil "duo video" referere til både H.239 og SIP Dual Video, i tillegg til mulige lignende standarder . A traditional video conference has an audio channel, a video channel and an optional data channel with separate data content. The video channel usually carries the camera video image of the participants. The standard H.239 from ITU - T defines rules and messages for establishing an additional video/graphics channel, often to transfer a PC graphics presentation or video from a document camera, and at the same time transfer video of the presenter. The SIP equivalent of H.239 is SIP Dual Video which uses "RFC - 4582 Binary Floor Control Protocol", and both are often also referred to in the industry as "duo video", and in the following "duo video" will refer to both H .239 and SIP Dual Video, in addition to possible similar standards .
For presentasjoner i flerpunktskonferanser, definerer «duo video token» prosedyrer for å sikre at bare ett endepunkt i konferansen sender ekstra videokanal som deretter distribueres til alle konferansedeltakere . For presentations in multipoint conferences, the "duo video token" defines procedures to ensure that only one endpoint in the conference sends an additional video channel that is then distributed to all conference participants.
Duo video ble opprinnelig opprettet som et skjermverktøyet, hvor innholdet mikses i et sammensatt bilde av videokonferansesesjonen eller svitsjet inn i videokonferansen på forespørsel. Det opprinnelige innholdet i duo video som vanligvis ville være en PowerPoint -presentasjon som har blitt transformert inn i en sanntidsvideostrøm, er ikke tilgjengelig fra PC, nettbrett eller smarttelefoner som er koblet til MCUen, og kan ikke deles mellom deltakerne . Derfor er det ingen måte å repetere innholdet som vises i en konvensjonell videokonferanse ved f.eks å gå igjennom en presentasjon i etterkant av konferansen . Det er således et behov for en funksjon for å få tilgang til innholdet fra disse enhetene, selv om de ikke direkte deltar i videokonferansen, og å lagre dem for senere gjennomgang. Duo video was originally created as a screen tool, where the content is mixed into a composite image of the video conference session or switched into the video conference on demand. The original duo video content, which would normally be a PowerPoint presentation that has been transformed into a real-time video stream, is not accessible from PCs, tablets or smartphones connected to the MCU, and cannot be shared between participants. Therefore, there is no way to repeat the content shown in a conventional video conference by, for example, going through a presentation after the conference. There is thus a need for a function to access the content from these devices, even if they are not directly participating in the video conference, and to store them for later review.
Oppsummering Summary
Et formål med utførelsesformene heri er å overvinne eller i det minste å redusere de ovennevnte ulemper. Dette og andre formål oppnåes ved å tilveiebringe en fremgangsmåte for konferanser som betjenes av et VideoKonferanseKontroll Arrangement (VKKA) som involverer separat datainnhold tilgjengelig fra VKKAen transmittert fra en eller flere av et antall endepunkter som deltar i en konferanse. Fremgangsmåten omfatter å motta det separate data-innhold fra VKKAen i en personlig elektronisk enhet, å midlertidig lagre det separate data-innhold in den personlige elektroniske enhet som et data-stillbilde, å fremvise en oversikt over de lagrede datastillbilder på skjermen til den personlige dataenhet, å gjøre de fremviste lagrede datastillbilder valgbare for en bruker av den personlige dataenhet. An object of the embodiments herein is to overcome or at least to reduce the above disadvantages. This and other objects are achieved by providing a method for conferences served by a Video Conference Control Arrangement (VKKA) involving separate data content available from the VKKA transmitted from one or more of a number of endpoints participating in a conference. The method includes receiving the separate data content from the VKKA in a personal electronic device, temporarily storing the separate data content in the personal electronic device as a data snapshot, presenting an overview of the stored data snapshots on the screen of the personal data device , to make the displayed stored computer snapshots selectable by a user of the personal computing device.
En fordel er at å fremvise og fange duo video-innhold fra en vanlig videokonferanse muliggjøres av en videokonferanseapplikasjon implementert på brukere som deltar i videokonferansen sine personlige enheter. An advantage is that displaying and capturing duo video content from a regular video conference is made possible by a video conference application implemented on the personal devices of users participating in the video conference.
I andre utførelser omfatter fremgangsmåten videre å transmittere det separate datainnhold kun ved tilfeller av at skift i de separate data detekteres. In other embodiments, the method further comprises transmitting the separate data content only in cases where shifts in the separate data are detected.
I andre utførelser omfatter fremgangsmåten videre å analysere hvorvidt et skift i de separate data har oppstått ved å sammenligne pikselverdier fra et referansebilde med tilsvarende pikselverdier i et gjeldende (nåværende) bilde i de separate data. In other embodiments, the method further comprises analyzing whether a shift in the separate data has occurred by comparing pixel values from a reference image with corresponding pixel values in a current (current) image in the separate data.
I andre utførelser omfatter fremgangsmåten videre å analysere hvorvidt et skift i de separate data har oppstått ved å ved å utføre en tidlig skip («early skip») prosess som definerer hver makroblokk i de separate datainnhold som "hoppes over" («skipped») eller "ikke hoppes over" («not skipped»), og stadfeste et tilfelle av skift dersom antall makroblokker som er definert "ikke hoppes over" er null eller under en forhåndsdefinert terskel. In other embodiments, the method further comprises analyzing whether a shift in the separate data has occurred by performing an early skip process that defines each macroblock in the separate data content that is "skipped" or "not skipped", and confirm a case of shift if the number of macroblocks defined "not skipped" is zero or below a predefined threshold.
I andre utførelser er VKKAen en MCU, en distribuert MCU, en konferansebro, en ruter eller en konferansekontrollserver. In other embodiments, the VKKA is an MCU, a distributed MCU, a conference bridge, a router, or a conference control server.
I andre utførelser er det separate datainnhold en duo-videostrøm. In other embodiments, the separate data content is a duo video stream.
I andre utførelser omfatter trinnet med å gjøre de fremviste datastillbilder valgbare videre å gjøre de valgte datastillbilder tilgjengelig for lagring, deling og/eller videresending. In other embodiments, the step of making the displayed data still images selectable further comprises making the selected data still images available for storage, sharing and/or forwarding.
I andre utførelser er de personlige elektroniske enheter smarttelefoner, nettbrett og/eller personlige datamaskiner med autorisert tilgang til videokonferansen eller til det separate datainnhold. In other embodiments, the personal electronic devices are smartphones, tablets and/or personal computers with authorized access to the video conference or to the separate data content.
I et annet aspekt er en datamaskin implementert applikasjon som interagerer med en konferanse betjent av en VideoKonferanseKontrollArrangement (VKKA) som er implementert i en personlig elektronisk enhet som involverer separat datainnhold tilgjengelig fra VKKAen transmittert fra en eller flere av et antall endepunkter som deltar i en konferanse tilveiebrakt. Applikasjonen omfatter en mottaksanordning tilpasset til å motta det separate datainnhold fra VKKAen, et lagringsmidddel tilpasset til midlertidig å lagre den separate datainnhold i den personlige elektroniske enheten som datastillbilder, et fremvisningsmiddel tilpasset for å fremvise en oversikt over de lagrede datastillbilder på skjermen til den personlige elektroniske enheter, et valgmiddel tilpasset til å gjøre de fremviste datastillbilder valgbare for en bruker av den personlige elektroniske enheten. In another aspect, a computer implemented application that interacts with a conference serviced by a Video Conferencing Control Arrangement (VCC) implemented in a personal electronic device that involves separate data content available from the VCC transmitted from one or more of a number of endpoints participating in a conference provided. The application comprises a receiving device adapted to receive the separate data content from the VKKA, a storage means adapted to temporarily store the separate data content in the personal electronic device as data snapshots, a display means adapted to display an overview of the stored data snapshots on the screen of the personal electronic device devices, a selection means adapted to make the displayed computer still images selectable by a user of the personal electronic device.
I andre utførelser transmitterer VKKAen kun det separate datainnhold ved tilfeller av at skift i de separate data detekteres. In other embodiments, the VKKA only transmits the separate data content in cases where shifts in the separate data are detected.
I andre utførelser analyserer VKKAen hvorvidt et skift i de separate data har oppstått ved å sammenligne pikselverdier fra et referansebilde med tilsvarende pikselverdier i et gjeldende (nåværende) bilde i de separate data. In other embodiments, the VKKA analyzes whether a shift in the separate data has occurred by comparing pixel values from a reference image with corresponding pixel values in a current (current) image in the separate data.
I andre utførelser analyserer VKKAen hvorvidt et skift i de separate data har oppstått ved å utføre en tidlig skip («early skip») prosess som definerer hver makroblokk i de separate datainnhold som "hoppes over" («skipped») eller "ikke hoppes over" («not skipped»), og stadfeste et tilfelle av skift dersom antall makroblokker som er definert "ikke hoppes over" er null eller under en forhåndsdefinert terskel. In other embodiments, the VKKA analyzes whether a shift in the separate data has occurred by performing an early skip process that defines each macroblock in the separate data contents as "skipped" ("skipped") or "not skipped" " ("not skipped"), and confirm a case of shift if the number of macroblocks defined "not skipped" is zero or below a predefined threshold.
I andre utførelser er VKKAen en MCU, en distribuert MCU, en konferansebro, en ruter eller en konferansekontrollserver. In other embodiments, the VKKA is an MCU, a distributed MCU, a conference bridge, a router, or a conference control server.
I andre utførelser er det separate datainnhold en duo-videostrøm. In other embodiments, the separate data content is a duo video stream.
I andre utførelser omfatter valgmiddelet videre å gjøre de valgte datastillbilder tilgjengelig for lagring, deling og/eller videresending. In other embodiments, the selection means further comprises making the selected data still images available for storage, sharing and/or forwarding.
I andre utførelser er de personlige elektroniske enheter smarttelefoner, nettbrett og/eller personlige datamaskiner med autorisert tilgang til videokonferansen eller til det separate datainnhold. In other embodiments, the personal electronic devices are smartphones, tablets and/or personal computers with authorized access to the video conference or to the separate data content.
Kort beskrivelse av tegningene Brief description of the drawings
Figur 1 er en illustrasjon av enhetene som er involvert i en videokonferanse i henhold til en eksempelutførelse, Fig. 2 er et eksempel på et skjermbilde av videokonferanseapplikasjonen i henhold til en eksempelutførelse, Figure 1 is an illustration of the devices involved in a video conference according to an example embodiment, Figure 2 is an example of a screen shot of the video conference application according to an example embodiment,
Figur 3 viser en pågående presentasjon. Figure 3 shows an ongoing presentation.
Fig. 4 viser en oversikt over valgbare slides i henhold til et brukereksempel. Fig. 4 shows an overview of selectable slides according to a user example.
Detaljert beskrivelse av en eksempelutførelsesform Detailed description of an example embodiment
Ifølge utførelser som her er beskrevet, er en applikasjon eksekverbar på en elektronisk enhet, for eksempel en datamaskin, nettbrett eller smarttelefon tilveiebrakt, slik at en bruker av applikasjonen kan aktivere strømming av duo video-innhold fra en pågående videokonferanse f.eks fra en MCU, en konferanse bro eller et endepunkt, for avspilling, redigering og lagring av innhold. En fremgangsmåte for konferanser betjent av et VideoKonferanseKontrollArrangement (VKKA) som involverer separat datainnhold tilgjengelig fra VCMA som transmitteres fra ett eller flere av en rekke endepunkter som deltar i en konferanse, blir nå beskrevet. Fremgangsmåten omfatter å motta ved en personlig elektronisk enhet separat datainnhold fra VCMA . Midlertidig lagring av det separate datainnholdet i den personlige elektroniske enheten som datastillbilder blir gjennomført. Fremvisning av en oversikt over de lagrede data stillbilder på skjermen til den personlige elektroniske enheten blir gjennomført. Å gjøre de fremviste datastillbilder velgbare for en bruker av den personlige elektroniske enheten blir gjennomført. According to embodiments described herein, an application executable on an electronic device, such as a computer, tablet or smartphone is provided, so that a user of the application can enable streaming of duo video content from an ongoing video conference, e.g. from an MCU , a conference bridge or endpoint, for playback, editing and storage of content. A method for conferencing served by a Video Conference Control Arrangement (VKKA) involving separate data content available from VCMA transmitted from one or more of a number of endpoints participating in a conference is now described. The procedure includes receiving separate data content from the VCMA via a personal electronic device. Temporary storage of the separate data content in the personal electronic device as data snapshots is carried out. Presentation of an overview of the stored data snapshots on the screen of the personal electronic device is carried out. Making the displayed computer still images selectable for a user of the personal electronic device is accomplished.
Figur 1 er en illustrasjon av forskjellige enheter som kan være involvert i en videokonferanse i henhold til et eksempel på en utførelsesform. Den øvre delen viser de som konvensjonelt er involvert, dvs. endepunktene og MCU er koblet via et IP-nettverk, og den nedre del viser de forskjellige personlige enheter i hvilke en konferanse applikasjon kan installeres. Figure 1 is an illustration of various devices that may be involved in a video conference according to an example embodiment. The upper part shows those that are conventionally involved, i.e. the endpoints and the MCU are connected via an IP network, and the lower part shows the different personal devices in which a conference application can be installed.
I konvensjonelle videokonferanser hvor duo video benyttes og MCU er involvert, er den ekstra video/grafikk kanal koblet fra senderen av duo video til MCUen, som igjen retranmitterer det til alle de andre deltakerne. MCUen kan fortløpende distribuere duo video-innhold idet det mottes fra ett av endepunktene til de personlige enheter med autorisert tilgang til konferansen. Konferanseapplikasjonen på de personlige enheter er tilpasset til å motta og vise frem innholdet transmittert fra MCUen. In conventional video conferences where duo video is used and the MCU is involved, the additional video/graphics channel is connected from the transmitter of duo video to the MCU, which in turn retransmits it to all the other participants. The MCU can continuously distribute duo video content as it is received from one of the endpoints to the personal devices with authorized access to the conference. The conference application on the personal devices is adapted to receive and display the content transmitted from the MCU.
Siden duo video-strømmens natur er periodisk stabile bilder, og at alt innholdet skiftes samtidig, bør det være et analysemekanisme for å identifisere skiftene, slik at MCUen er i stand til å distribuere data bare på identifiserte tilfeller av skift. Data som skal distribueres ved hvert tidspunkt kan enten være et fullstendig nytt bilde, eller forskjellen i forhold til innholdet før skiftet . Since the nature of the duo video stream is periodically stable images, and that all content is shifted simultaneously, there should be an analysis mechanism to identify the shifts, so that the MCU is able to distribute data only on identified instances of shifts. Data to be distributed at each point in time can either be a completely new image, or the difference compared to the content before the shift.
Identifisering av skift kan forekomme på det tidspunkt når en betydelig endring i innholdet av kildebildet hvorfra duo video kommer, blir oppdaget. I henhold til utførelsesformer heri, blir et stillbilde av det tidligere innholdet alltid lagret, og blir kontinuerlig sammenlignet med den nåværende innhold i MCUen. Sammenligningen kan utføres på en piksel-for-piksel-måte, eller en eller flere verdier som er knyttet til tidligere innhold kan sammenlignes med en eller flere tilsvarende verdier assosiert med det aktuelle innhold. Når differansen mellom verdiene overskrider en forhåndsdefinert terskel, blir det lagrede, tidligere innhold erstattet med nåværende innhold, og en transmisjon av nåværende innhold til de personlige enheter initieres. Dette kan typisk være et nytt stillbilde, f.eks i et JPEG -filformat. Identification of shifts can occur at the time when a significant change in the content of the source image from which the duo video comes is detected. According to embodiments herein, a snapshot of the previous content is always stored, and is continuously compared to the current content of the MCU. The comparison may be performed in a pixel-by-pixel manner, or one or more values associated with previous content may be compared with one or more corresponding values associated with the current content. When the difference between the values exceeds a predefined threshold, the stored, previous content is replaced with the current content, and a transmission of the current content to the personal devices is initiated. This can typically be a new still image, for example in a JPEG file format.
Å detektere skiftene kan også utføres ved å utnytte en allerede kjent tidlig «hopp over» Detecting the shifts can also be performed by exploiting an already known early "skip"
(«early skip»)-funksjonen som benyttes på makroblokker i The ("early skip") function used on macroblocks i
videokomprimeringstandarden H.264 for å detektere om en makroblokk i en aktuell videoramme («video frame») endrer seg tilstrekkelig i forhold til den tilsvarende makroblokk til referanserammen, for å gjøre det nødvendig å kode denne endringen. Resultatet av "tidlig hoppe over"-funksjonen er binær for hver makroblokk i bildet. Enten er en makroblokk satt til "hoppet over" eller "ikke hoppet over" . Når man benytter denne metoden for å detektere innholdsskift, vil antall makroblokker definert som "ikke hoppet over"være på triggeren. Hvis den overstigeren forhåndsdefinert antall, blir en ny oppdatering av innholdet distribuert til de personlige enheter. Igjen så kan dette typisk være et nytt stillbilse, f.eks i et JPEG- format, men det kan også være data som inneholder bare den residualen av det nye innhold i forhold til det tidligere overførte innhold. the video compression standard H.264 to detect whether a macroblock in a current video frame ("video frame") changes sufficiently in relation to the corresponding macroblock of the reference frame, to make it necessary to encode this change. The result of the "early skip" function is binary for each macroblock in the image. Either a macro block is set to "skipped" or "not skipped". When using this method to detect content shifts, the number of macroblocks defined as "not skipped" will be on the trigger. If it exceeds the predefined number, a new update of the content is distributed to the personal devices. Again, this can typically be a new still image, for example in a JPEG format, but it can also be data that contains only the residual of the new content in relation to the previously transferred content.
På mottakersiden, dvs. i konferanseapplikasjonene som er installert på de personlige enheter, blir det nye innholdet mottatt, prosessert og fremvist på skjermen. Ifølge utførelser heri, blir det også fortløpende lagret midlertidig i minnet til de personlige enheter under videokonferansen. Hvis det nye innholdet er i formatet av et full-størrelse bilde, for eksempel i et JPEG- format, lagres det bare som det er mottatt. Hvis bare residualen relativt til nåværende innhold blir mottatt, må det foreligge en form for prosess implementert i konferanseapplikasjonen for å dekomprimere og gjenskape det nye innholdet før det fremvises og lagres. On the receiving side, i.e. in the conference applications installed on the personal devices, the new content is received, processed and displayed on the screen. According to embodiments herein, it is also continuously stored temporarily in the memory of the personal devices during the video conference. If the new content is in the format of a full-size image, for example in a JPEG format, it is only saved as received. If only the residual relative to current content is received, there must be some form of process implemented in the conference application to decompress and recreate the new content before it is displayed and stored.
Til slutt, konferanseapplikasjonen kan være tilpasses til å presentere innhold som er midlertidig lagret i løpet av en konferanse for en bruker av en personlig enhet, og gjøre det mulig at brukeren kan velge innhold for deling, videresending eller permanent lagring. Finally, the conferencing application may be adapted to present content temporarily stored during a conference to a user of a personal device, enabling the user to select content for sharing, forwarding or permanent storage.
I det følgende blir et brukerscenario i henhold til en eksempelvis utførelsesform beskrevet . In the following, a user scenario according to an exemplary embodiment is described.
Et antall videoendepunkter er koblet til en MCU i en videokonferanse . I tillegg kan et antall personlige enheter, ikke nødvendigvis tilkoblet som endepunkter i konferansen, med en konferanse applikasjon installert, være koblet til MCUen og assosiert til konferansen via en autorisasjonsprosess som kan omfatte å taste inn en konferansekode i konferanseapplikasjonen ved oppkobling til MCUen, eller ved MCUen gjenkjenneren ID til den personlige enheten. A number of video endpoints are connected to an MCU in a video conference. In addition, a number of personal devices, not necessarily connected as endpoints in the conference, with a conference application installed, may be connected to the MCU and associated with the conference via an authorization process that may include entering a conference code into the conference application when connecting to the MCU, or by The MCU recognizes the ID of the personal device.
Når den personlige enheten har fått tilgang til konferansen, kan en oversikt over deltakere i tillegg til funksjonsknapper som illustrert i figur 2, vises på brukerens skjerm. I eksempelet i figur 2 , er det fire endepunkter som deltar i konferansen, og den som transmitterer lyd er til en hver tid indikert med et høyttalersymbol. Blant funksjonsknappene , er det en presentasjonsknapp som når den blir trykket på aktiverer mottak og fremvisning av presentasjonen som er til stede som duo video i videokonferansen. Ved å trykke på knappen kan et signal bli sendt til MCUen som instruerer den til å transmittere oppdateringer av duo video-innhold til den personlige enheten som beskrevet ovenfor. Once the personal device has gained access to the conference, an overview of participants in addition to function buttons as illustrated in Figure 2 can be displayed on the user's screen. In the example in Figure 2, there are four endpoints that participate in the conference, and the one that transmits sound is indicated at each time with a speaker symbol. Among the function buttons, there is a presentation button which, when pressed, activates reception and display of the presentation that is present as duo video in the video conference. By pressing the button, a signal can be sent to the MCU instructing it to transmit duo video content updates to the personal device as described above.
Figur 3 viser en pågående presentasjon. Ideen er at den nåværende slide den store, og deretter blir alle tidligere silder synlig som miniatyrbilder nederst. Figure 3 shows an ongoing presentation. The idea is that the current slide the big one, and then all previous slides become visible as thumbnails at the bottom.
Når man trykker på presentasjonsknappen, vil duo video-innhold fremvises på skjermen på brukerens personlige enhet. Innholdet vil typisk være slider i en presentasjon som vises for eksempel som illustrert i figur 4. Alle slider vil være vist, og brukeren kan velge et hvilket som helst antall slider og deretter velge å lagre, tvitre, legge ut på Facebook, lagre til Dropbox, e-post osv. When the presentation button is pressed, duo video content will be displayed on the screen of the user's personal device. The content will typically be sliders in a presentation that is displayed, for example, as illustrated in Figure 4. All sliders will be displayed, and the user can select any number of sliders and then choose to save, tweet, post on Facebook, save to Dropbox , e-mail, etc.
Det vil også være en opsjon for brukeren å editere det totale duo video-innhold, enten så langt i konferansen, på slutten av konferansen eller når en administrator av konferansen åpner for det. It will also be an option for the user to edit the total duo video content, either so far in the conference, at the end of the conference or when an administrator of the conference allows it.
Videre, ifølge en eksempelvis utførelsesform, vil hvert stillbilde eller slide være valgbar for deling, videresending eller lagring. Brukeren vil da bli invitert til å velge et antall stillbilder eller slider ved for eksempel å berøre dem på skjermen eller trykke på en "velg alle"-knapp. De valgte stillbilserbilder eller slider vil da bli markert, og brukeren vil ha muligheten til å velge mellom de tilgjengelige alternativene for hva de skal gjøre med de valgte stillbilder eller slider. Furthermore, according to an exemplary embodiment, each still image or slide will be selectable for sharing, forwarding or storage. The user will then be invited to select a number of still images or sliders by, for example, touching them on the screen or pressing a "select all" button. The selected still images or slider will then be highlighted, and the user will have the option to choose between the available options for what to do with the selected still images or slider.
Som et eksempel, når man velger å lagre det valgte innholdet, vil et browser-vindu som viser den personlig enhetens bibliotek dukke opp, slik at brukeren kan velge en mappe og et filnavn for det valgte innholdet. Brukeren vil også få mulighet til å lagre det valgte innholdet på en plassering som ikke fysisk er på den personlige enhet, men snarere i en lagringstjeneste generelt tilgjengelig via trådløse nettverk. As an example, when choosing to save the selected content, a browser window showing the personal device's library will appear, allowing the user to select a folder and a file name for the selected content. The user will also have the opportunity to save the selected content in a location that is not physically on the personal device, but rather in a storage service generally available via wireless networks.
Når man velger å videresende det valgte innholdet, vil en epost bli opprettet ved hjelp av standard e-post-program i den personlig enheten med valgt innhold som et vedlegg. When choosing to forward the selected content, an email will be created using the standard email program in the personal device with the selected content as an attachment.
Når man velger å dele det merkede innhold, vil brukeren bli presentert for alternativer for å dele innholdet i et antall sosiale nettverkstjenester eller nettskybaserte fildelingstjenester. When choosing to share the tagged content, the user will be presented with options to share the content in a number of social networking services or cloud-based file sharing services.
Utførelsesformer som er beskrevet her, gir fordelen av å fremvise og fange duo video-innhold i en vanlig videokonferanse aktivert av en videokonferanseapplikasjon implementert på personlige enheter til brukere som deltar i videokonferansen. De forskjellige utførelsesformer som er beskrevet heri er bare eksempler, og forskjellige modifikasjoner, implementeringer og variasjoner nærliggende for en person med kunnskap innenfor fagområdet, er dekket av de selvstendige kravene som er beskrevet heri. Embodiments described herein provide the benefit of displaying and capturing duo video content in a regular video conference enabled by a video conference application implemented on personal devices of users participating in the video conference. The various embodiments described herein are only examples, and various modifications, implementations and variations apparent to a person skilled in the art are covered by the independent requirements described herein.
Claims (16)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| NO20130201A NO336216B1 (en) | 2013-02-01 | 2013-02-01 | Procedure and application for capturing duo video content in a video conference. |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| NO20130201A NO336216B1 (en) | 2013-02-01 | 2013-02-01 | Procedure and application for capturing duo video content in a video conference. |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| NO20130201A1 true NO20130201A1 (en) | 2014-08-04 |
| NO336216B1 NO336216B1 (en) | 2015-06-15 |
Family
ID=47884479
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| NO20130201A NO336216B1 (en) | 2013-02-01 | 2013-02-01 | Procedure and application for capturing duo video content in a video conference. |
Country Status (1)
| Country | Link |
|---|---|
| NO (1) | NO336216B1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004072804A2 (en) * | 2003-02-10 | 2004-08-26 | Raindance Communications, Inc. | Methods and apparatus for providing egalitarian control in a multimedia collaboration session |
| US20120317483A1 (en) * | 2011-06-08 | 2012-12-13 | Ofer Shapiro | Systems and methods for improved interactive content sharing in video communication systems |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6343313B1 (en) * | 1996-03-26 | 2002-01-29 | Pixion, Inc. | Computer conferencing system with real-time multipoint, multi-speed, multi-stream scalability |
| US20030110218A1 (en) * | 2001-12-12 | 2003-06-12 | Stanley Randy P. | Local caching of images for on-line conferencing programs |
| US20060167996A1 (en) * | 2005-01-13 | 2006-07-27 | Orsolini Garry S | System and method for enabling electronic presentations |
| US8456510B2 (en) * | 2009-03-04 | 2013-06-04 | Lifesize Communications, Inc. | Virtual distributed multipoint control unit |
-
2013
- 2013-02-01 NO NO20130201A patent/NO336216B1/en unknown
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004072804A2 (en) * | 2003-02-10 | 2004-08-26 | Raindance Communications, Inc. | Methods and apparatus for providing egalitarian control in a multimedia collaboration session |
| US20120317483A1 (en) * | 2011-06-08 | 2012-12-13 | Ofer Shapiro | Systems and methods for improved interactive content sharing in video communication systems |
Also Published As
| Publication number | Publication date |
|---|---|
| NO336216B1 (en) | 2015-06-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9210373B2 (en) | System and method for scaling a video presentation based on presentation complexity and room participants | |
| US9280761B2 (en) | Systems and methods for improved interactive content sharing in video communication systems | |
| US8860776B2 (en) | Conference terminal, conference server, conference system and data processing method | |
| JP5508450B2 (en) | Automatic video layout for multi-stream and multi-site telepresence conferencing system | |
| US8803991B2 (en) | Snapshot capture in video stream | |
| US20140028778A1 (en) | Systems and methods for ad-hoc integration of tablets and phones in video communication systems | |
| US9571792B2 (en) | Method for generating an immersive video of a plurality of persons | |
| WO2011063763A1 (en) | Method, device and system for conference control including remote display conference places | |
| US20170048284A1 (en) | Non-transitory computer readable medium, information processing apparatus, and information processing system | |
| US9832422B2 (en) | Selective recording of high quality media in a videoconference | |
| WO2016206471A1 (en) | Multimedia service processing method, system and device | |
| CN113709577B (en) | Video session method | |
| US11838687B2 (en) | Method, computer program and system for configuring a multi-point video conferencing session | |
| NO20130201A1 (en) | Procedure and application for capturing duo video content in a video conference. | |
| CN113726534A (en) | Conference control method, conference control device, electronic equipment and storage medium | |
| US9426415B2 (en) | System, method and architecture for in-built media enabled personal collaboration on endpoints capable of IP voice video communication | |
| CN110719431A (en) | Method, device and system for processing documents of video conference and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| CREP | Change of representative |
Representative=s name: ONSAGERS AS, POSTBOKS 1813, VIKA, 0123 OSLO, NORGE |