BE1028937B1 - Contactloos configureren van een videoconferentie in steriele omgevingen - Google Patents

Abstract

De huidige uitvinding betreft een verbeterde werkwijze voor het contactloos initialiseren en controleren van een videoconferentie tussen een gebruiker in een steriele omgeving, waarbij in de videoconferentie output verwerkt wordt van één of meerdere beeldvormende instrumenten, en van één of meerdere remote gebruikers uit een voorafbepaalde lijst met een veelheid van remote gebruikers.

Description

° BE2020/5967

CONTACTLOOS CONFIGUREREN VAN EEN VIDEOCONFERENTIE IN STERIELE OMGEVINGEN

TECHNISCH DOMEIN De uitvinding heeft betrekking op een verbeterde werkwijze voor het configureren en beheren van sen vidsoconferentis met externe, remote gebruikers op contactiors wijze in een steriele omgeving, waarbij output van (beeldvormende) instrumenten in de steriele omgeving geïncorporeerd worden in de videoconferentie.

STAND DER TECHNIEK Bij medische ingrepen, en andere procedures in een sieriele omgeving (zoals bepaalde handelingen in een clean room en gelijkaardige situalies}, wordt steeds meer nadruk gelegd op contactioos ageren, en moet door de aanwezige personen zo veel mogelijk vermeden worden om te interageren met andere objecten, in het bijzonder met hun handen, gezien deze sleriel moeten blijven om op een later moment bepaalde handelingen uit te voeren.

In een medische omgeving, moet gerekend worden dat een chirurg reeds een geruime tijd voor de procedure begint steriel moet zijn, en vervolgens niet meer mag interageren met zaken die niet steriel zijn. Echter, in de huidige operatiekamers slaan onder meer een groot aantal medische instrumenten waarmee geïnterageerd kan worden, maar dit brengt de steriliteit in gevaar.

Daarnaast wordt bij medische ingrepen steeds vaker beroep gedaan op experts uil meerdere gebieden, zeker bij complexe ingrepen. Echter, deze kunnen moeilijk allen fysiek aanwezig zijn door de beperkie ruimte in een OK, maar evenzeer omdal elks exira persoon de steriliteit verder in gevaar brengt, en ook de voorbereiding voor elke procedure veel omslachtiger en langer maakt.

Een oplossing waar steeds vaker naar teruggegrepen wordt is videoconferencing, waarbij de experts de persoon (of personen) die tysiek aanwezig is in de sterisle ruimte kunnen assisteren en raad geven. In deze toepassing wordt daarbij ook vaak beroep gedaan op smart glasses of andere draagbare toestellen met één of meerdere beeldsensoren, zodat de persoon ter plaatse zijn handen vrij heeft, en de remote experts een gelijkaardig beeld hebben als de persoon ter plaalse, en zo onderling beter kunnen afstemmen, Hierbij is het ook voordelig dat ze de persoon ter plaalse duidelijk kunnen

° BE2020/5967 aansturen door het sterk overlappende gezichtsveld tussen de beeldsensor (wat de remote experts zien} en het zicht van de persoon ter plaatse. Het blijft echter een probleem om de vidsoconferentie te configureren, gezien dit in eersie Instantie door de persoon in de steriele omgeving dient te gebruiken, die toegang heeft tot de instrumentatie en ook overzicht heeft wie nodig is bij de videoconferentie. Deze taak uitbesteden is een optie, maar dit leidt er toe dat een bijkomende, hiervoor geschoolde, persoon dient in te staan, en het ieidt verder tot de nood dat deze bijkomende persoon remote toegang krijgt tot Instrumenten aanwezig In de operatiekamer, om deze ie integreren in de videoconferentie alsook op te starten en aan te sturen, zonder ter plaatse te zijn om eventusle problemen rechtsireeks te kunnen oplossen. Om die reden wordt toch geopteerd om het configureren en beheren van de videoconferentie aan de persoon ter plaalse toe te wijzen, die dus sterk beperkt is in vrijheid van handelen om de steriliteit te respecieren.

De huidige uitvinding beoogt sen oplossing le vinden voor lenminste enkele van bovenvermelde problemen, en voorziet sen iniullieve, eenvoudige werkwijze die een persoon toestaai om handenvrij een videoconferentie op te zeiten waarbij meerdere remote gebruikers uitgenodigd kunnen worden, en waarbij de videoconferentie visuele output krijgt van beeldvormende instrumenten in de steriele omgeving.

SAMENVATTING VAN DE UITVINDING De uitvinding betrefi sen verbeterde werkwijze voor contactioos initialiseren en controleren van een videoconferentie. Deze videoconferentie wordt gehouden met een gebruiker in een steriele omgeving, waarbij in de steriele omgeving één of meerdere beeldvormende instrumenten aanwezig zijn, en één of meerdere remote gebruikers uit een voorafbepaalde lijst met con veelheid van remote gebruikers. Deze videoconferentie wordt via een server opgezet en ondersteund, de server omvallende zen gebruikersdatabase en een instrumentdalabase. De gebruikersdatabase omvat de remote gebruikers van de voorafbepaalde lijst en sen afzonderlijke, optisch leesbare representatie, bij voorkeur een QR code, voor elk van de remote gebruikers van de voorafbepaalde lijst. Deze lijst is typisch voorzien van personen die zichzelf kunnen registreren of geregistreerd zijn als hebbende een specifieke vaardigheid in een bepaald gebied (bvb. anesthesie, kennis van bepaalde mechanische systemen, etc.), en kunnen bij voorkeur ook als zodanig geregistreerd zijn, om opzoeking bijvoorbeeld ie vereenvoudigen. In een specifiek voorbeeld gesitueerd in een medische context, is deze lijst een verzameling van alle personen ë BE2020/5967 geassocieerd aan een ziekenhuis of ziekenhuizengroep, onder meer de werknemers, maar ook collega’s waarmee samengewerkt wordt in een losser verband.

De instrumentdatabase omval verder ook een veelheid beeldvormende instrumenten en een afzonderijjke, optisch leesbare representatie, bij voorkeur een QR code, voor elk van de beeldvormende instrumenten.

De gebruiker in de steriele omgeving draagt een draagbare, handenvrije beeldsensor, bij voorkeur op het hoofd van de gebruiker voorzien, waarbij de beeldsensor draadioos verbonden is met de server.

De werkwijze omvat volgende stappen: a. het in de sieriels omgeving visueel waarneembaar voorzien van de afzonderlijke, optisch leesbare representaties van minstens een subset van de veelheid van remote gebruikers; b. het in de steriele omgeving visueel waarneembaar voorzien van de afzonderlijke, optisch leesbare representaties van de één of meerdere beeldvormende instrumenten in de steriele omgeving; c. het opstarten van de videoconferentie door de gebruiker in de steriele omgeving, bij voorkeur door het met de beeldsensor inlezen van een in de steriele omgeving voorziene optisch leesbare representatie geassocieerd aan de videoconferentie en/of aan de gebruiker in de steriels ruimte; d. het met de beeldsensor Inlezen en verwerken van de optisch leesbare representaties van één of meerdere uit ie nodigen remote gebruikers uit de gebruikersdatabase voor de videoconferentie, waarbij de uit te nodigen remote gebruikers uitgenodigd worden in de videoconferentie; e. het met de beeldsensor inlezen en verwerken van de optisch leesbare representaties van één of meerdere te visualiseren beeldvormende instrumenten uit de instrumentendatabase, waarbij de visuele ouiput van de één of meerdere te visualiseren beeldvormende instrumenten gedeeld wordt tijdens de videoconferentie; i. het vervoegen van de vidsoconferentie door één of meerdere uitgenodigde remote gebruikers via een verbinding van een elektronisch beeldschermapparaal van de remote gebruikers met de server; g. het initiëren van de videoconterentie door de gebruiker in de steriele omgeving De remote gebruikers in de videoconferentie krijgen via hun beeldscherm een grafische presentatie te zien, omvattende meerdere secties. Hierbij worden elk van de remote gebruikers in de videoconferentie, de gebruiker in de steriele omgeving en de te visualiseren beeldvormende instrumenten afzonderlijk gevisualiseerd in één van de secties, waarbij secties geassocieerd aan één van de te visualiseren beeldvormende instrumenten minstens de visuele output van genoemd instrument weergeven.

De remote gebruikers die de vidsoconterentie vervoegd hebben, verwerven controle over de gedeelde visuele output, waarbij deze controle minstens het manipuleren van focus en contrast van de gedeelde visuele output, het in de videoconferentie visueel waarneembaar annoteren van de gedeelde visuele output omvat.

In bovenstaande werkwijze wordt gebruik gemaakt van optische identifiers (QR-codes en dergelijke}, die de persoon in de slerieie omgeving in staat stellen om zonder handen, met behulp van zijn handvrij draagbare beeldsensor, contact te maken met gewensie personen of instrumenten in een videoconferentie, In een database worden de gebruikers of instrumenten gelinkt aan een optische identifier, en zo wordt de juiste entiteit uitgenodigd/opgenomen in de videoconferentie. Cruciaal hierbij is dat, eenmaal de videoconferentie geïnitieerd is, de remote gebruikers een substanticel deel van de controle verkrijgen hierover, al of niel (deeis) gedeeld met de gebruiker in de steriele omgeving, al of niet (deels) volledig afgenomen van die gebruiker in de steriele gebruiker, Dit laat hen toe om optimaal gebruik te maken van de capaciteiten van de videoconferentie, bijvoorbeeld het voorzien van bijkomende informatie, het aanpassen, maat vooral het controleren van de visuele output alkomstig van de beeldsensor van de gebruiker in de steriele ruimte. Het moeilijkste aspect aan remote procedures, is dat de remote gebruikers overgeleverd zijn aan de acties van de aanwezige persoon of personen, en dat het vaak moeilijk is om deze aan te sturen. Hoe preciezer de operatie, hoe moeilijker dit wordt door de zeer accurate instructies die verelst zijn, en die correct moeten geïnterpreteerd en uitgevoerd worden. Voor remote gebruikers is het cruciaal dat ze zeer goede visuals hebben van bepaalde zones of objecten in de steriele omgeving (bijvoorbeeld bij een operatie, de te opereren zone op het lichaam van een patiënt, In de wonde, elc.). Als de remote gebruikers deze visuele output zelf kunnen controleren en bewerken wat ze zien (contrast wijzgen, helderheid aanpassen, bepaalde filters doorvoeren, inzoomen, annoteren), verkrijgen ze een enorme meerwaarde in hun interacties, die ongekend is in de huidige stand der techniek. Aan de hand van de bovenstaande werkwijze, wordt het mogelijk voor een gebruiker in een steriele omgeving om sen videoconferentie op te zeiten met remote gebruikers, vaak experts in bepaalde vakgebieden, dis op deze manier toegang krijgen tot de visuele feed van de gebruiker in de steriele omgeving via diens beeldsensor die gedeeld wordt in de videoconferentie, maar ook tot beeldvormende instrumenten in de steriele omgeving, wal bijvoorbeeld visusle output van een X-ray toestel kan zijn, echocardiogrammen, of eenvoudigweg beelden uit andere hoeken. Door de remote

* BE2020/5967 gebruikers controle te geven over deze visuele output, beschikken zij over de mogelijkheid om zelfstandig deze te bewerken of manipuleren naar hun wens, zonder assistentie nodig te hebben van de persoon ter plaatse die gefocust kan blijven op de medische handelingen.

BESCHRIJVING VAN DE FIGUREN Figuur 1 geeft een schematische voorstelling van de grafische presentatie weergegeven bij sen remote gebruiker die desineemt aan een videoconferentie, volgens een uitvoeringsvorm van de uitvinding. Figuur 2 geeft een procesfiow weer rond het opzetten en houden van een videoconferentie volgens een uiivoeringsvorm van de uitvinding.

GEDETAILLEERDE BESCHRIJVING Tenzij anders gedefinicerd hebben alle termen die gebruikt worden in de beschrijving van de uitvinding, ook technische en welenschappelijke termen, de betekenis zoals ze algemeen begrepen worden door de vakman in het technisch veld van de uitvinding. Voor een betere beoordeling van de beschrijving van de uitvinding, worden de volgende termen expliciet uitgelegd. “Een”, ’de” en “het” refereren in dit document aan zowel het enkelvoud als hel meervoud tenzij de context duidelijk anders veronderstelt. Bijvoorbeeld, “een segment” betekent een of meer dan een segment. Wanneer ‘ongeveer’ of “rond” in dit document gebruikt wordt bij een meetbare grootheid, een parameter, een tijdsduur of moment, en dergelijke, dan worden variaties bedoeld van +/-20% of minder, bij voorkeur +/-10% of minder, meer bij voorkeur +/- 5% of minder, nog meer bij voorkeur +/-1% of minder, en zelis nog meer bij voorkeur +/-0.1% of minder dan en van de geciteerde waarde, voor zoverre zuike variaties van toepassing zijn in de beschreven uitvinding. Hier moet echter wel onder verstaan worden dat de waarde van de grootheid waarbij de term “ongeveer” of “rond” gebruikt wordt, zelf specifiek wordt bekendgemaakt.

De termen “omvatten”, ‘omvattende’, “bestaan uit”, “bestaande uit”, “voorzien van”, “bevatten”, “bevattende”, ‘behelzen’, “behelzende”, “inhouden”, “inhoudende” zijn synoniemen en zijn inclusieve of open termen die de aanwezigheid van wat volgt

° BE2020/5967 aanduiden, en die de aanwezigheid niet uitsluiten of beletten van andere componenten, kenmerken, elementen, leden, stappen, gekend uit of beschreven in de stand der techniek, Het citeren van numerieke intervallen door de eindpunten omvat alle gehele getallen, breuken en/of reëie gelallen tussen de eindpunten, deze eindpunten Inbegrepen. In een eersie aspect belrefi de uitvinding sen werkwijze volgens conclusie 1. Zoals besproken, biedt dit het voordeel dat de gebruiker in de steriele omgeving handenvrij de videoconferentie kan opstarten. Het opstarten betreft het opstarten van een nieuwe sessie, waarbij een aantal externe gebruikers uitgenodigd kunnen worden, en een aantal instrumenten hun feed kunnen toegevoegd worden aan de videoconferentie, en daarbij visuele output delen via de grafische presentatie die zichtbaar is voor de deelnemers. Het dient verder opgemerkt te worden dat ook instrumenten die een (visuele) output genereren en die niet in de steriele omgeving aanwezig zijn, hun output kan opgenomen worden in de videoconterentie. Dit kunnen instrumenten zijn die zelf remote opereren op basis van output uit de steriele omgeving, door kost, grootte, of andere omstandigheden {generatie van hitte, lawaal, gevaarlijke straling, etc), maar wiens output toch relevant kan zijn in bepaalde procedures.

Eenmaal de nodige remote gebruikers toegevoegd zijn, kan de gebruiker ter plaatse (of eventueel een remote gebruiker) de videoconferentie initiëren, waarbij de controle (deels) overgedragen wordt aan de remote gebruikers.

Deze controle omvat minstens het manipuleren van focus (in- en uitzoomen), contrast aanpassen en annoteren van de gedeelde visuele output. Een actie van een remote gebruiker op één of meerdere van de gedeelde visuele outputs wordt zichtbaar op de visuele presentatie van de videoconferentie die gedeeld wordt tussen de remote gebruikers en de gebruiker in de steriele omgeving. Op deze manier kunnen de remote gebruikers op een cenvoudige en duidelijke manier feedback en instructies doorgeven aan de gebruiker ter plaatse {alsook onder elkaar delen, en verder werken op elkaars annotaties).

Bijkomende functionaliteiten kunnen overgedragen worden aan de remote gebruikers, die al of niet deels of volledig worden afgenomen van de gebruiker ter plaatse, gezien deze geen manuele manipulaties meer kunnen/mogen ondernemen ten opzichte van de handenvriie beeldsensor zonder de steriliteit in gedrang te brengen. Door expliciet de controle af te nemen, kan deze beperking duidelijker in de verf gezet worden, en de neiging van de gebruiker ter plaatse om deze te schenden gereduceerd worden. Bijkomende functionaliteiten kunnen één of meerdere van de volgende lijst zijn, zonder hiertoe beperkt te zijn. Merk op dat een aantal functionaliteiten ook afhangen van de

; BE2020/5967 hardware aanwezig op de handenvrije beeldsensor en/of instrumenten in de steriele omgeving (of zelfs instrumenten buiten de steriele omgeving waarvan output gedeeld wordt in de vidsoconferentie).

In een voorkeurdragende uilvoeringsvorm is de besldsensor van de gebruiker in de sterieie omgeving geïntegreerd in een handenvrij toestel omvattende een beeldscherm, waarbij de gebruiker in de steriele omgeving via het beeldscherm genoemde grafische presentatie te zien krijgt. Bij voorkeur is dit handenvrij toestel sen set van smart glasses of een head-mounted device (HMD) met beeldsensor(en). Het toestel omvat één of meerdere beeldschermen, bij voorkeur in de vorm van een microdisplay zoals bij smart glasses, of zells sen (gedeeltelijk transparante) visualisalle op de glazen. in een voorkeurdragende uitvoeringsvorm omvat de werkwijze een siap van het confirmeren van de videoconferentie door de gebruiker in de sieriele ruimte, waarbij het confirmeren de vidsoconferentie initieert en waarbij het initiëren het inlezen en verwerken van optisch leesbare representaties door de gebruiker in de steriele ruimie verhindert zonder voorafgaande goedkeuring van een remote gebruiker. Door deze functionaliteit te blokkeren, loopt men tijdens een procedure niet het gevaar dat de beeldsensor bijkomende participanten en/of instrumenten uitnodigt, bijvoorbeeld door per ongeluk één van de andere optische leesbare codes in de operatieruimte te capteren. Dit kan leiden tot bijkomende druk op de teleconferentie, en zelfs mogelijk problemen met connectie veroorzaken, maar vergt het ook extra verwerkingscapaciteit van de beeldsensor, terwijl het cruciaal is dat deze zo veel mogelijk capaciteit besteed aan het optimaliseren van de verbindingen, en in het bijzonder de visuele output die gedeeld wordt vanuit de beeldsensor, Bovendien wordt zo verhinderd dat ongewenste personen uitgenodigd worden tijdens een procedure, waardoor de gebruiker ler plaatse een verhoogde bewegingsvrijheid heeft. Bij voorkeur kunnen één of meerdere van de remote gebruikers het inlezen en verwerken terug toelaten op eenvoudige wijze, zoals een hiertoe voorzien icoon in de grafische presentatie van de teleconferentie. In een voorkeurdragende uitvoeringsvorm kan de beeldsensor van de gebruiker in de steriele ruimte gecontroleerd worden door de remote gebruikers in de videoconferentie, en waarbij visuele output van genoemde beeldsensor weergegeven wordt in de grafische presentatie. Het controleren van de beeldsensor beperkt zich niet alleen tot het manipuleren van de gecapteerde beelden daarvan (bijvoorbeeld helderheid aanpassen), maar omvat ook het manipuleren van fysieke instellingen van de beeldsensor, zoals één of meerdere van de oriëntatie, fysieke zoom, aanpassen sluitertijd bij nemen van

© BE2020/5967 stilstaande beelden, aanpassen resolutie (verhogen of verlagen), aanpassen modus (warmiebeelden, etc.). In het bijzonder het aanpassen van de oriëntatie en zoom is van grool belang, gezien accurate aansturing van de gebruiker ter plaaise door sen remote gebruiker zeer moeilijk is.

Door de remote gebruikers toe te laten de beeldsensoren rechtstreeks aan te sturen, versenvoudigt dit proces sterk.

Alternatief of aanvullend kunnen er in de ruimte ook nog één of meerdere stationaire beeldsensoren voorzien worden, waarvan de oriëntatie kan aangestuurd worden door een remote gebruiker, en/of in bepaalde uitvoeringsvormen ook mobiele beeldsensoren die remote gecontroleerd kunnen worden.

In een voorkeurdragende uitvoeringsvorm betreft de visuele output van minstens één van de beeldvormende instrumenten een video feed, bij voorkeur waarbij de remote gebruikers de video feed kunnen pauzeren.

Op deze manier kunnen remote gebruikers op eenvoudige wijze annotaties maken in een gepauzeerd beeld, of het stilstaande beeld liften en gebruiken als een afzonderlijke gedeelde visuele output in situaties waar meer perspectieven nodig zijn dan beeldsensoren voorhanden (of waarin oudere beelden nodig zijn}. Ten slotte kan dit ook zijn nut hebben ter latere analyse van de procedure.

In een voorkeurdragende uitvoeringsvorm kan de remote gebruiker een sectie van de grafische presentatie selecteren als focus, waarbij de visuelle output van de geselecteerde sectie vergroot wordt weergegeven in de grafische preseniatie.

Bi voorkeur kan elke remote gebruiker dit, of alternatief slechts een subset hiervan (die een hogere machtiging hebben, en hierbij mogelijk ook andere privileges, zoals stilzetten van beelden, uitnodigen van andere remote gebruikers, etc). De grafische presentatie wordt bij voorkeur afgebeeld op beeldschermen bij de (remote) gebruikers waarbij een substantieel deel van het benutte oppervlak van hel! beeldscherm wordt voorzien voor de visuele output waarop gefocust wordt, als focuszone.

Dit kan bepaald worden door een (remote) gebruiker om toegepast te worden bij elks andere gebruiker, of enkel voor zichzelf.

De afzonderlijke secties worden geconglomereerd afgebeeld naast, rond, onder of terzijde van het oppervlak waar de visuele output met focus weergegeven wordt, vergelijkbaar met hedendaagse teleconferenties zoals Zoom® , Skype for Business® en andere.

Door remote gebruikers de mogeliikheid te geven te bepalen waar de focus ligt voor sike deelnemer van het gesprek, is het eenvoudiger om duidelijk weer te geven wat besproken wordt.

Bovendien is dit zeer nuttig wanneer annotaties voorzien worden, zodat deze zichtbaar zijn voor allen.

Meest voordelig is het echter voor de gebruiker ter plaatse, die zelf weinig tot geen controle heeft over de grafische presentatie, maar door een gepaste assistentie van de remote gebruikers, wel de gewenste/nodige visuele output te zien krijgt in de focuszone.

In een voorkeurdragende uitvoeringsvorm, omvat de werkwijze een geautomatiseerde slap van het periodiek aanpassen van resolutie waarmee de vergrote visuele outpui {focus} van het geselecteerde beeldvormende instrument wordt weergegeven op het beeldscherm van de remote gebruikers, afhankelijk is van minsiens de inkomende bitsnelheid van data-overdracht vanuit het geselecteerde beeldvormende instrument.

Bij voorkeur wordt de resolutie van eik van de visuele outputs die weergegeven worden op de grafische presentatie aangepas! aan de hand van de kwaliteit van de verbindingen.

Bij voorkeur wordt de bilsnelheid van de data-overdracht van de visuele output die niet vergroot wordt, verlaagd om de bitsnelheid van data-overdracht van de visuele output die vergroot wordt te kunnen maximaliseren.

Bij het weergeven van de grafische presentatie wordt periodiek de bitrate van de vergrote visuele output gemelen (bijvoorbeeld elke 30, 15, 10, 5, 2 seconden}, en op basis hiervan gedetermineerd of de beeldkwaliteit te hoog (of te laag) is, bijvoorbeeld door vergelijking met vooraibepaalde limielen {onder- en bovengrens), en wordt hier vervolgens automatisch naar geageerd door het navenant aanpassen van de beeldkwaliteit.

Het determineren of de becidkwaliteii te hoog of te laag is, wordt bij voorkeur gedaan op basis van een aantal voorbije metingen van de bitrate, bij voorkeur minstens de 2 laatste, bij verdere voorkeur minstens de 5 laatste waarden hiervan.

Bij overschrijden van een vooratbepaalde bovengrens met de bilrale, wordt de visuele output gedownload onder een hogere resoluiie om een hogere beeldkwaliteit te verkrijgen, Bij het dalen onder een vooraïbepaalde ondergrens met de bitrates, wordt de visuele output gedownload onder sen lagere resolutie om sen lagere beeldkwalileil te verkrijgen.

In sen specifiek voorkeurdragend scenario gebeurt de vergelijking van de laalsie X gemeten bitrates ten opzichte van de voorafbepaalde boven- of ondergrens, als volgt: Indien elk van de X bitrates boven de bovengrens of onder de ondergrens liggen, wordt automatisch respectievelijk de kwaliteit verhoogd of verlaagd.

Indien allen behalve 1 van de laatste X bitrates boven de grens liggen, en waarbij de ene die er niet boven ligt, maximaal 20% onder de grens ligt, wordt de kwaliteit verhoogd.

Indien allen behalve 1 van de laatste X bitrates boven de grens liggen, en waarbij de ene die er niet boven ligt, maximaal 40% onder de grens ligt, en de twee laatste gemeten bitrates boven de grens liggen, wordt de kwaliteit verhoogd.

+0 10 BE2020/5967 Indien allen behalve 2 van de laatste X bitrates boven de grens liggen, en waarbij de 2 die er niet boven liggen, maximaal 20% onder de grens liggen, en de laatste gemeten bitrate boven de grens ligt, wordt de kwaliteit verhoogd.

Merk op dal varianten op bovenstaande flow ook in acht genomen worden, zoals andere afwijkingen voor de ‘onderscorende’ bitrates, bijvoorbeeld 5%, 10%, 15%, 25%, 30%, 35%, 45%, 50% of tussenliggende waarden, of het schrappen van één of meerdere van de laatste drie voorwaarden.

Ook kunnen gelijkaardige regels opgesteld worden voor kwaliteitsverlaging, zodat bij te lage bitrate in niet alle van de laatste X gemeten bitrates, dit toch nog kan leiden tot een verlaging indien de ‘noog scorende bilrale siechts nipi hoger ligt dan de drempelwaarde (zie boven).

In een voorkeurdragende uitvoeringsvorm, omvalt de werkwijze een geautomatiseerde stap van het periodiek aanpassen van resolutie waarmee de visuele output van één of meer van de beeldvormende Instrumenten wordt gedeeld via de videoconferentie, afhankelijk is van minstens de bitsnelheid van data-overdracht over de verbindingen van de beeldschermapparaten van de remote gebruikers.

Het dient begrepen te worden dat het aanpassen van de resolutie volgens dezelfde regels kan uitgevoerd worden als hierboven beschreven.

In een voorkeurdragende uitvoeringsvorm omvat de draagbare beeldsensor van de gebruiker In de steriele omgeving minstens twee onderling verschillende beeldsensoren, waarbij minstens één van de beeldsensoren een zoomlens omvat, en waarbij de controle door de remote gebruikers het variëren van de brandpunisaïstand van de zoomlens omvat. Het voorzien van een bijkomende beeldsensor waarvan de remote gebruikers de focusafstand kunnen aanpassen, leidt erloe dat deze een grotere controle kunnen uitoefenen op de beelden die via de teleconferentie gedeeld worden.

In een voorkeurdragende uitvoeringsvorm is de gebruiker in de steriele omgeving iussen het opstarten en het initiëren van de videoconferentie gemachtigd om autonoom optisch leesbare representaties van één of meerdere uit te nodigen remote gebruikers in te lezen en te verwerken, en/of om autonoom optisch lsesbare representaties van één of meerders te visualiseren beeldvormende instrumenten uit de instrumentendatabase in te lezen en te verwerken. Na het iniiiëren van de videoconferentie, wordt het inlezen en verwerken van optisch leesbare representaties door de beeldsensor van de gebruiker in de steriele omgeving uitgeschakeld, en na het initiëren kan het iniezen en verwerken van optisch leesbare representaties door de a BE2020/5967 beeldsensor van de gebruiker in de steriele omgeving aangeschakeld worden door één van de remote gebruikers die de videoconferentie vervoegd hebben. Zoals eerder aangegeven wordt de controle na het initiëren van de videoconferentie afgenomen van de gebruiker ter plaatse, en quasi volledig overgedragen aan (één of meerdere van) ce remote gebruikers. De overgedragen controle betreft dan in het bijzonder het uitnodigen van deelnemers (zowei remote gebruikers als Instrumenten} in de videoconferentie. Het doel hiervan is dat de gebruiker ter plaaise in de voorbereidingstase de videoconferentie volledig opzet en dan ook de gewenste deslnemers uitnodigt. Eenmaal! de videoconferentie dan opgestart is, is de focus van de gebruiker ter plaatse voorbehouden aan het uitvoeren van de procedure, en kunnen de remote gebruikers eventueel verdere handelingen zelf opstarten (zoals bijkomende deelnemers uitnodigen}, ofwel machtiging voorzien aan de gebruiker ter plaatse om bepaalde acties te ondernemen met betrekking tot de videoconferentie. In een voorkeurdragende uitvoeringsvorm kunnen de remote gebruikers bijkomende visuele output voorzien op de grafische presentatie. De remote gebruikers nemen ivpisch deel aan de videoconferentie via sen elektronisch toestel met beeldscherm en inputmechanismen, zoals touchscreen, keyboard, muis, joystick en/of andere, en kunnen via de inpuimechanismen annotaties voorzien op de grafische presentalie. Anderzijds kunnen de remote gebruikers bijkomende visuele output voorzien, zoals via het delen van een scherm van hun pc, laptop of andere, het delen van een bestand, en/of via een eigen beeldsensor (webcam en dergelijk).

In een voorkeurdragende uitvoeringsvorm delen de instrumenten waarvan de output gedeeld wordt in de videoconferentie, de output via een draadloze verbinding, bij voorkeur via Wi-Fi. Hiertoe wordt bij voorkeur een WAP of wireless access point voorzien in de steriele omgeving, via hetwelke de instrumenten hun output via Wi-Fi rechtstreeks kunnen delen met de deelnemers aan de videoconferentie. Dit vermijdt dat de output van de instrumenten langs een lokale server moet lopen. In een voorkeurdragende uitvoeringsvorm omvat de instrumentendatabase verder een veelheid niet-visuels output genererende instrumenten en een afzonderlijke, optisch leesbare representatie, bij voorkeur sen QR code, voor elk van de niet-visuele output genererende instrumenten, de werkwijze verder omvallende volgende stap: het met de beeldsensor inlezen en verwerken van de optisch leesbare representaties van één of meerdere te visualiseren niet-visuele output

© BE2020/5967 genererende instrumenten uit de instrumentendatabase, waarbij de niet-visuele output van de één of meerdere te delen niet-visuels output genererende instrumenten gedeeld wordt tijdens de videoconferentie in een aan het niet- visuele output genererende instrument geassocieerde sectie, Het dient begrepen te worden dat niet alle relevante output visueel is. Ook auditieve input kan bijvoorbeeld gedeeld worden (hartmonitor) tijdens de videoconferentie, en hiervoor worden bijhorende protocollen voorzien om de output van deze insirumenien te ontvangen in de videoconferentie, dewelke protocollen aansluiten met deze voor het uitnodigen van beeldvormende instrumenten, namelijk via het inlezen van een optisch leesbare representatie (OR-code).

In een voorkeurdragende uitvoeringsvorm wordt de optische leesbare representatie, zoals een QR-code, voorzien op of nabij het beeldvormend instrument. Bij voorkeur wordt dit zo dicht mogelijk bij een beeldscherm van het instrument voorzien, gezien di vaak sen intuitief herkenbaar onderdeel is van de instrumenten.

Alternatief of aanvullend kunnen de optische representaties ook voorzien worden in een legende in een boek, kaart, paneel of aan een wand in de steriele ruimte, zodat de gebruiker ter plaatse deze eenvoudig kan inlezen.

In een voorkeurdragende uilvoeringsvorm genereert één of meerdere van de beeldvormende instrumenten verder niet-visusle output, waarbij de niet-visuele output gedeeld wordt tijdens de videoconferentie.

In een voorkeurdragende uilvoeringsvorm is in de steriels omgeving sen beeldvormend instrument voorzien, hetwelke geconfigureerd is voor het weergeven van de grafische presentatie van de videoconferentie. Hoewel de gebruiker in de steriele omgeving bij voorkeur via zijn handenvrije beeldsensor veelal ook een draagbaar beeldscherm heeft waarop de videoconferentie gedeeld wordt (bijvoorbeeld via smart glasses), is het voordelig om een dedicated beeldscherm te voorzien dat de grafische presentatie van de videoconferentie kan weergeven. In bepaalde uitvoeringsvormen kan genoemd beeldvormen instrument geconfigureerd zijn om ondergeschikt te zijn aan het handenvrij toestel van de gebruiker ter plaatse, en kan dit bijvoorbeeld steeds enke! een sectie vertonen waarop gefocust is (en normaal vergrool weergegeven zou worden op het beeldscherm van het draagbare toestel).

In een voorkeurdragende uitvoeringsvorm kunnen remote gebruikers augmented reality content voorzien in de gedeelde visuele output voor het markeren van objecten en/of zones in de visusle output, waarbij genoemde augmented reality content verankerd wordt aan het gemarkeerde object en/of zone, en waarbij bij beweging van het gemarkeerde object en/of zone, de positie van de augmented reality content aangepast wordt op basis van genoemde beweging. Remote gebruikers kunnen via het annoteren van bepaalde beelden met augmented reality content (hierna annotatie genoemd}, ervoor opteren dat deze annotaties verankerd zijn aan een bepaalde positie of object in het beeld (bijvoorbeeld locatie van of voor een incisie}, en niet statisch zijn (Le. verankerd op een bepaalde pixel}. Het systeem is hierbij geconfigureerd om de locatie/positie van de annotatie op te slaan, met alle relevante dala daarbij opgeslagen. Het is daarbij het doel dat, bij verandering van standpunt van de beeldsensor die het geannoteerde beeid capteert, de relatieve positie behouden blijft, en de annotatie dus meebeweegt naarmate het beeld beweegt. Zo wordt verzekerd dat bij minder stabiele beeldsensoren, de annotatie zijn gewenste betekenis of doel bijft behouden. Het aanpassen van de positie van de augmented reality content in de weergegeven visuele output kan op meerdere wijzen bereikt worden. Enerzijds kan dit door gebruik te maken van gyroscopen en dergelijke systemen, die de verandering in oriëntatie/positie van de beeldsensor kunnen bepalen, en waardoor op basis daarvan de positie van de augmented reality content kan herberekend worden, Alternaliet of aanvullend kan ook geopteerd worden voor objectherkenning. Door bij het plaatsen van de annotatie, de zone daarrond, of zelfs het volledige beeld in acht te nemen, kan dit vergeleken worden met beelden uit nieuwe standpunten, en aan de hand daarvan kan de positie van de annotatie geüpdatet worden. in het bijzonder de combinatie van de twee bovenstaande kan nuttig zijn, waarbij de objectherkenning bij voorkeur gebruikt wordt als finetuning op de ‘Joggere’ herberekening op basis van determinatie van aangepaste oriëntatie/positie via gyroscopen en aanverwante sensoren. De augmented reality content kan vele vormen aannemen, zoals tekst, tekens, een sequentie van beelden, etc. Er kunnen één of meerdere verschillende annotaties verankerd worden aan een object/positie, terwijl bijkomend ook niet-verankerde annotaties kunnen toegevoegd worden (die con vaste positie in de weergave van helt beeld krijgen, bijvoorbeeld voor algemene opmerkingen). In wat volgt, wordt de uitvinding beschreven a.d.h.v. niet-limiterende voorbeelden die de uitvinding illustreren, en die niet bedoeld zijn of geïnterpreieerd mogen worden om de omvang van de uitvinding te limiteren.

VOORBEELDEN a BE2020/5967 VOORBEELD 1: Figuur 1 toont een schematische weergave van de grafische presentatie zichtbaar voor een remote gebruiker die decineemt aan een videoconferentie.

De grafische presentatie (1} wordt weergegeven op een beeldscherm van een elektronisch toestel van de remote gebruiker, bij voorkeur een laptop, tablet of pc, voorzien van muis, joystick, toetsenbord, touchscreen, ot andere als inputmechanismen. De presentatie (1) kan hierbij eventueel gemaximaliseerd worden, of in een ander formaat weergegeven op het beeldscherm.

De grafische presentatie (1} omval sen aanlal secties (2a, 2b), waaronder een vergrote sectie (2a), en een aantal ‘gewone’ secties (2b). Elk van de secties (2a, 2b) staal voor een remote gebruiker, al of niet zichtbaar weergegeven via een eigen beeldsensor, of een beeldvormend instrument.

In dit geval geeft de vergrote sectie (2a) de visuele output weer van sen beeldsensor met zoomlens op het draagbare apparaat van de gebruiker ter plaalse, zoals ook te zien is in een label (3) in genoemde vergrote sectie (2a). ook de andere secties (2b) zijn voorzien van dergelijke labels (3). In de grafische presentatie {1} zijn hier een anesthesist aanwezig, zichtbaar in het label (3) van de bovenste sectie (2b), en de visuele output van een centrale camera op het handenvrij toestel van de gebruiker ter plaatse. Ten slotte is ook de visuele output van een echografisch apparaat beschikbaar via de videoconferentie in de onderste sectie (2b).

De remote gebruiker (anesthesist in dit geval), kan naargelang wensen kiezen welke visuele output hij wil visualiseren in de vergrote sectie (2a), bijvoorbeeld door touch- interactie met de sectie die de visuele output van de centrale camera weergeeft.

Op de grafische presentatie {1} is eveneens een actie-werkbalk (4) voorzien voor het controleren of manipuleren van de gedeelde visuele output, in het bijzonder deze in de vergrote sectie (Za). Veelal wordt dit mogslijk gemaakt via iconen (4a-4g} in de werkbalk, die kunnen Ingesteld worden naargelang de wens van de gebruikers.

In dit geval heeft de werkbalk {4) de mogelijkheid voor het aansturen van een lamp (4a) op de beeldsensor van de gebruiker ter plaatse, kan hij de grafische presentatie maximaliseren in zijn scherm (4b), kan hij een foto nemen (4c} van het beeld in de vergrote sectie (2a), kan het geluidsniveau van de videoconferentie aangepast worden (4d), wordt de levensduur van de batterij van de beeldsensor van de gebruiker ter plaatse weergegeven (4e), kunnen instellingen gewijzigd worden (4f}, kan ook de

© BE2020/5967 verbindingssterkie weergegeven worden (4g), en kunnen ten siotte annotaties voorzien worden, zowel statisch (4h} als verankerd {4i). Het dient natuurlijk beseft te worden dat voorgaande siechis een voorbeeld is, en dat bijkomende functionaliteiten kunnen voorzien worden, zoals contrast aanpassen, inzoomen, hel aanpassen van de orièntalie van de beeldsensor, ete. Ten siotte zijn op de vergrote sectie (2a} twee vormen van annotaties voorzien, een verankerde (5a), die zal meebewegen met de zone waarop ze afgebeeld is, en een stationaire {5D}, die substantieel op dezelfde positie in de vergrote sectie (2a) zal blijven staan. VOORBEELD 2: Figuur 2 geeft een procesfiow (100) weer van hel opzetten van een videoconterentie volgens een uitvoeringsvorm van de huidige uitvinding in de context van een ziekenhuis, en in het bijzonder sen operatis. in een eerste stap (101) zorgt een voorbereidende persoon (mogelijk de gebruiker ter plaaise, maar veelal verplegend personeel) ervoor dat in de operatiekamer de nodige optisch leesbare presentaties voorzien zin op de Instrumenten, alsook voor de deelnemers aan de videoconferentie, eventueel aan de hand van een ‘ielstoonlijst met daarin alle operatoren geassocieerd aan het ziekenhuis. Deze actie kan reeds ver vooral uitgevoerd worden, gezien dit ook in de verdere toskomst en latere procedures kan gebruikt worden.

Vooraîgaand aan de medische procedure, zorgt de gebruiker ter plaalse ervoor dat hij steriel is (102), waarop hij de steriele ruimte kan betreden, en vervolgens via een HMD (heac-mounted display) toestel met beeldsensor een aantal van de optisch leesbare representaties capteert (103) en deze verwerkt worden (104). Bij het verwerken worden deze automatisch gelinkt aan de corresponderende remote gebruiker of instrument uit de gebruikersdatabase of instrumentendatabase (105), en worden deze respectievslijk uitgenodigd om deel te nemen aan de videoconferentie (106a), of wordt de visuele output van het instrument automatisch verworven en gedeeld via de videconferentie (107). Bij uitnodigen van remote gebruikers, moeten deze de uitnodiging aanvaarden, en kunnen ze ofwel via specifiek programma, of via een webpagina toegang krijgen tot de videoconferentie op een elektronisch toestel met beeldscherm (106b), bij voorkeur mits inloggen op hun account.

Ale uitgenodigde gebruikers en ‘uitgenodigde’ instrumenten worden visueel weergegeven in een grafische presentatie van de videoconferentie (108).

Eenmaal de gebruiker ter plaatse alle remote gebruikers en instrumenten in de videoconferentie heeft uitgenodigd, initieert hij de videoconferentie (109), en wordt de controie over de videoconferentie voor een deel overgedragen aan de remote gebruikers (110), die vervolgens bepaalde secties kunnen selecteren en vergroot weergeven {1114}, bijkomende instrumenten en/of remote gebruikers uitnodigen (111b), het beeld dat weergegeven wordt in de vergrote sectie manipuieren, zoals bijvoorbeeld contrast wijzigen, inzoomen, annoteren, etc, (1110). Het is verondersteld dat de huidige uitvinding niet beperkt is tot de uitvoeringsvormen die hierboven beschreven zijn en dat enkele aanpassingen of veranderingen aan de beschreven voorbeelden kunnen toegevoegd worden zonder de toegevoegde conclusies te herwaarderen, Bijvoorbeeld, de huidige uitvinding werd beschreven met verwijzing naar medische procedures, maar het mag duidelijk zijn dat de uitvinding kan toegepast worden op bvb. gevaarijke operaties, zoals het ontmantelen van explosieven of onderhoud in omgevingen met hoge radioactiviteit, onderhoud van diepzee-systemen, moeilijk toegankelijke systemen of apparatuur en andere.

In elk van deze situaties zou de expertise van meerdere personen extreem voordelig uitkomen, maar is dit ofwel onmogelijk, ofwel sen te hoog bijkomend risico.

Claims (17)

a BE2020/5967 CONCLUSIES

1. Werkwijze voor contactioos initialiseren en controleren van een videoconferentie tussen een gebruiker in een sieriele omgeving omvattende één of meerdere beeldvormende instrumenten, en één of meerdere remote gebruikers uit een vooraibepaalde lijst met een veelheid van remote gebruikers, via een server, de server omvattende een gebruikersdalabase en een instrumentdatabase, de gebruikersdatabase omvallende de remote gebruikers van de voorafbepaalde lijst en een afzonderlijke, optisch leesbare representatie, bij voorkeur een QR code, voor elk van de remote gebruikers van de voorafbepaaide lijst, de instrumentdalabase omvallende een veelheid beeldvormende instrumenten en een afzonderlijke, optisch leesbare representatie, bij voorkeur sen QR code, voor elk van de beeldvormende instrumenten, waarbij de gebruiker in de steriele omgeving een draagbare, handenvrije beeldsensor draagt, bij voorkeur op het hoofd van de gebruiker voorzien, waarbij de beeldsensor draadloos verbonden is met de server, de werkwijze omvallende volgende stappen: a. het in de steriele omgeving visueel waarneembaar voorzien van de afzonderlijke, optisch leesbare representaties van minstens een subsel van de veelheid van remote gebruikers; b. het in de steriele omgeving Visuee! waarnsembaar voorzien van de afzonderlijke, optisch leesbare representaties van de één of meerdere beeldvormende instrumenten in de steriele omgeving; ©. het opstarien van de videoconferentie door de gebruiker in de steriele omgeving, bij voorkeur door nel met de beeldsensor inlezen van een in de sieriele omgeving voorziene optisch leesbare representatie geassocieerd aan de videoconferentie en/of aan de gebruiker in de steriele ruimte; d. het met de besldsensor inlezen en verwerken van de optisch leesbare representaties van één of meerdere uit te nodigen remote gebruikers uit de gebruikersdatabase voor de videoconferentie, waarbij de uit te nodigen remote gebruikers uitgenodigd worden in de videoconferentie; e. het met de besldsensor inlezen en verwerken van de optisch leesbare representaties van één of meerdere te visualiseren beeldvormende instrumenten uit de instrumentendatabase, waarbij de visuele output van de één of meerdere te visualiseren beeldvormende instrumenten gedeeld wordt tijdens de videoconferentie;

+8 18 BE2020/5967 f. Het vervoegen van de videoconferentie door één of meerdere uitgenodigde remote gebruikers via een verbinding van een elektronisch beeldschermapparaal van de remole gebruikers mel de server; g. het initiëren van de videoconferentie door de gebruiker in de steriele omgeving; waarbij de remote gebruikers in de videoconferentie via hun beeldscherm een grafische presentatie te zien krijgen omvattende meerdere secties, waarbij elk van de remote gebruikers in de videoconferentie, de gebruiker in de steriele omgeving en de te visualiseren beeldvormende instrumenten afzonderlijk gevisualiseerd worden in één van de secties, en waarbij secties geassocieerd aan één van de te visualiseren beeldvormende instrumenten minstens de visuele output van genoemd Instrument weergeeft; waarbij de remote gebruikers die de videoconferentie vervoegd hebben, controle verwerven over de gedeelde visuels output, deze controle minsiens omvattende het manipuleren van focus en contrast van de gedeelde visuele output, het in de videoconferentie visueel waarneembaar annoteren van de gedeelde visuele output.

2. Werkwijze volgens de voorgaande conclusie 1, waarbij de beeldsensor van de gebruiker in de steriele omgeving geïniegreerd is in een handenvrij toestel! omvattende een beeldscherm, waarbij de gebruiker in de steriele omgeving via het beeldscherm genoemde grafische presentatie te zien krijgt.

3. Werkwijze volgens één van de voorgaande conclusies 1 of 2, omvattende een stap van het contirmeren van de videoconferentie door de gebruiker in de steriele ruimte, waarbij het confirmeren de videoconferentie initieert en waarbij het initiëren het inlezen en verwerken van optisch leesbare representaties door de gebruiker in de steriele ruimte verhindert zonder voorafgaande goedkeuring van een remote gebruiker.

4. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 3, waarbij de beeldsensor van de gebruiker in de sterigle ruimte gecontroleerd kan worden door de remote gebruikers in de vidsoconferentie, en waarbij visusle output van genoemde beeldsensor weergegeven wordt in de grafische presentatie.

5. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 4, waarbij de visusle output van minstens één van de beeldvormende instrumenten een video

+9 a BE2020/5967 feed betreft, bij voorkeur waarbij de remote gebruikers de video feed kunnen pauzeren.

6. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 5, waarbij de remote gebruiker een sectie van de grafische presentatie kan selecteren als focus, waarbij de visuele output van de geselecteerde sectie vergroot wordt weergegeven in de grafische presentatie.

7. Werkwijze volgens de voorgaande conclusie 8, waarbij de werkwijze een geautomatiseerde stap omvat van het periodiek aanpassen van resolutie waarmee de vergrote visuele output van het geselecteerde beeldvormende instrument wordt weergegeven op het beeldscherm van de remote gebruikers, afhankelijk is van minstens de inkomende bilsnelheid van data-overdracht vanuil het geselecteerde beeldvormende instrument.

8. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 7, waarbij de werkwijze een geautomatiseerde slap omvai van het periodiek aanpassen van resolutie waarmee de visuele output van één of meer van de beeldvormende instrumenten wordt gedeeld via de videoconferentie, afhankelijk is van minstens de bitsnelheid van data-overdracht over de verbindingen van de becidschermapparaten van de remote gebruikers.

9, Werkwijze volgens één van de voorgaande conclusies 1 tot en met 8, waarbij de draagbare beeldsensor van de gebruiker in de steriele omgeving minstens {wee onderling verschillende beeldsensoren omvat, waarbij minstens één van de beeldsensoren een zoomlens omvat, en waarbij de controle door de remote gebruikers het variëren van de brandpuntsaïstand van de zoomlens omvat.

10. Werkwijze volgens één van de voorgaands conclusies 1 tot en met 9, waarbij de gebruiker in de steriele omgeving tussen het opstarten en het initiëren van de videoconferentie gemachtigd is om autonoom optisch leesbare representaties van één of meerdere uit te nodigen remote gebruikers in te lezen en te verwerken, en/of om autonoom optisch leesbare represenialies van één of meerdere te visualiseren beeldvormende instrumenten uit de instrumentendatabase in te lezen en te verwerken; waarbij na het initiëren van de videoconferentie, het inlezen en verwerken van optisch leesbare representaties door de beeldsensor van de gebruiker in de steriels omgeving uiigeschakeld wordt, en waarbij na het initiëren het inlezen en verwerken van

PS BE2020/5967 optisch leesbare representaties door de beeldsensor van de gebruiker in de sterisle omgeving aangeschakeld kan worden door één van de remote gebruikers die de vidcoconferentie vervoegd hebben.

11. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 10, waarbij de remote gebruikers bijkomende visuele output kunnen voorzien op de grafische presentatie.

12. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 11, waarbij de instrumenten waarvan de output gedeeld wordt in de videoconferentie, de output via een draadloze verbinding delen, bij voorkeur via Wi-Fi.

13. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 12, waarbij de instrumentendatabase verder een veelheid niet-visuele output genererende instrumenten en een afzonderlijke, optisch leesbare representatie, bij voorkeur een OR code, voor elk van de niet-visuele output genererende instrumenten omvat, de werkwijze verder omvattende volgende slap: het met de beeldsensor inlezen en verwerken van de optisch leesbare representaties van één of meerdere te visualiseren niet-visusle output genererende instrumenten uit de insirumentendalabase, waarbij de niet- visuele output van de één of meerdere te delen niet-visuele output genererende insirumenten gedeeld wordt tijdens de videoconferentie in een aan het niet-visuele output genererende instrument geassocieerde sectie.

14. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 13, waarbij de optisch leesbare representatie voorzen wordt op of aan het beeldvormende instrument.

15. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 14, waarbij één of meerdere van de beeldvormende instrumenten verder niet-visuele output genereert, waarbij de niel-visusle output gedeeld wordt tijdens de videoconterentie.

16. Werkwijze volgens één van de voorgaande conclusies 1 toit en met 15, waarbij in de steriele omgeving een beeldvormend instrument voorzien is, hetwelke geconfigureerd is voor het weergeven van de grafische presentatie van de videoconferentie.

17. Werkwijze volgens één van de voorgaande conclusies 1 tot en met 18, waarbij de remote gebruikers augmented reality content kunnen voorzien in de gedeelde visuele output voor het markeren van objecten en/of zones in de visuele output, waarbij genoemde augmented reality content verankerd wordt aan het 5 gemarkeerde object en/of zone, en waarbij bij beweging van het gemarkeerde object en/of zone, de positie van de augmented reality content aangepast wordt op basis van genoemde beweging.