BE1025917B1

BE1025917B1 - Werkwijzen en inrichtingen voor het dimensioneren van een object gebruikmakend van nabije apparaten

Info

Publication number: BE1025917B1
Application number: BE20185781A
Authority: BE
Inventors: Michael J Giannetta; Matthew Louis Kowalski; Charles Burton Swope; Nicole Daphne Tricoukes
Original assignee: Symbol Technologies Llc
Priority date: 2017-11-07
Filing date: 2018-11-07
Publication date: 2020-02-07
Also published as: BE1025917A9; WO2019094125A1; DE112018005351T5; BE1025917A1; CN111316059B; CN111316059A; GB2581060B; US11146775B2; US20190141312A1; GB202005391D0; GB2581060A

Abstract

Werkwijzen en inrichtingen worden verschaft voor het dimensioneren van een object door gebruik te maken van nabije apparaten om beelddata te verkrijgen die representatief zijn voor het object vanuit meerdere perspectieven. Een voorbeeldwerkwijze omvat het opnemen, door een eerste beeldopnameapparaat, van eerste beelddata die representatief zijn voor een object vanuit een eerste perspectief; het bepalen of een tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat; en wanneer het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het versturen van een verzoek aan het tweede beeldopnameapparaat voor tweede beelddata die representatief zijn voor het object vanuit een tweede perspectief, waarbij de eerste beelddata en de tweede beelddata combineerbaar zijn om een samengestelde representatie van het object te vormen.

Description

WERKWIJZEN EN INRICHTINGEN VOOR HET DIMENSIONEREN VAN EEN OBJECT GEBRUIKMAKEND VAN NABIJE APPARATEN ACHTERGROND

In een voorraadomgeving, zoals een detailhandel winkel, een magazijn, een verschepingsfaciliteit, enz., is het nuttig om de dimensies van een object, zoals een doos, te weten.

SAMENVATTING VAN DE UITVINDING

Volgens de uitvinding, is voorzien in een computergeïmplementeerde werkwijze voor het gebruik maken van nabije beeldopnameapparaten voor het opnemen van beelddata die representatief zijn voor een object vanuit meerde perspectieven, waarbij de werkwijze omvat het opnemen, door een eerste beeldopnameapparaat, van eerste beelddata die representatief zijn voor een object vanuit een eerste perspectief, het bepalen, door een processor, of een tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat; en wanneer het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het versturen van een verzoek aan het tweede beeldopnameapparaat voor tweede beelddata die representatief zijn voor het object vanuit een tweede perspectief, waarbij de eerste beelddata en de tweede beelddata combineerbaar zijn om een samengestelde representatie van het object te vormen.

Het eerste beeldopnameapparaat kan bijvoorbeeld een heads-up display samenstel zijn.

Met meer voorkeur, kan het eerste beeldopnameapparaat een eerste heads-up display samenstel zijn dat geassocieerd wordt met een eerste gebruiker, en het tweede beeldopnameapparaat kan een tweede heads-up display samenstel zijn dat geassocieerd wordt met een tweede gebruiker.

BE2018/5781

Het eerste beeldopnameapparaat kan bijvoorbeeld een mobiel apparaat zijn dat geassocieerd wordt met een eerste gebruiker, en het tweede beeldopnameapparaat kan een stationair apparaat zijn.

De computer-geïmplementeerde werkwijze kan verder het ontvangen van een gebruikersverzoek om beelddata die representatief zijn voor het object op te nemen, en het activeren van het eerste beeldopnameapparaat om eerste beelddata op te nemen op basis van het gebruikersverzoek, omvatten.

De computer-geïmplementeerde werkwijze kan verder het detecteren, door een sensor, dat het object momenteel in een doellocatie of binnen een doelbereik is voor dimensioneren, en het activeren, door de processor, van het eerste beeldopnameapparaat om eerste beelddata op te nemen op basis van data het object in de doellocatie of het doelbereik is, omvatten.

In de computer-geïmplementeerde werkwijze, kan het bepalen of het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het ontvangen, door een processor, van het eerste beeldopnameapparaat van data die indicatief zijn voor een positie van het eerste beeldopnameapparaat, het ontvangen, door een processor, van het tweede beeldopnameapparaat van data die indicatief zijn voor een positie van het tweede beeldopnameapparaat, het berekenen, door een processor, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat, en het bepalen, door een processor, of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is, omvatten.

In de computer geïmplementeerde werkwijze, kan het bepalen of het tweede beeldopnameapparaat in de nabijheid is van het eerste

BE2018/5781 beeldopnameapparaat ook het ontvangen, door een processor vanaf een vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje heeft ontvangen die is verstuurd door het eerste beeldopnameapparaat, het bepalen, door een processor, op basis van de indicatie van de vaste RFID lezer, van een positie van het eerste beeldopnameapparaat, het ontvangen, door een processor, vanaf de vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RFID signaaltje heeft ontvangen die is verstuurd door het tweede beeldopnameapparaat, het bepalen, door een processor, op basis van de indicatie van de vaste RFID lezer, van de positie van het tweede beeldopnameapparaat, het berekenen, door een processor, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat, en het bepalen, door een processor, of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is, omvatten.

In de computer-geïmplementeerde werkwijze, kan het bepalen of het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat ook het detecteren, door het eerste beeldopnameapparaat, van een kortbereik draadloos signaal verstuurd door het tweede beeldopnameapparaat, en het bepalen, op basis van het gedetecteerde kortbereik draadloze signaal, dat het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, omvatten.

De computer-geïmplementeerde werkwijze kan voordelig verder het combineren van de eerste beelddata en de tweede beelddata om een driedimensionale puntenwolk te maken, en het dimensioneren van het object gebruikmakend van de driedimensionale puntenwolk, omvatten.

BE2018/5781

Volgens een ander aspect van de uitvinding, is voorzien in een systeem voor het gebruik maken van nabije beeldopnameapparaten voor het opnemen van beelddata die representatief zijn voor een object vanuit meerdere perspectieven, waarbij het systeem omvat een meervoudig aantal beeldopnameapparaten, een geheugen geconfigureerd om door de computer uitvoerbare instructies op te slaan, en een processor geconfigureerd om samen te werken met het meervoudig aantal beeldopnameapparaten en het geheugen, en geconfigureerd om de door de computer uitvoerbare instructies uit te voeren om de processor aan te zetten tot het opnemen, door een eerste beeldopnameapparaat, van eerste beelddata die representatief zijn voor een object vanuit een eerste perspectief, het bepalen of een tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, en wanneer het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het versturen van een verzoek naar het tweede beeldopnameapparaat voor tweede beelddata die representatief zijn voor het object vanuit een tweede perspectief, waarbij de eerste beelddata en de tweede beelddata combineerbaar zijn om een samengestelde representatie te vormen van het object.

Het eerste beeldopnameapparaat kan een eerste heads-up display samenstel zijn dat geassocieerd wordt met een eerste gebruiker, en het tweede beeldopnameapparaat kan een tweede heads-up display samenstel zijn dat geassocieerd wordt met een tweede gebruiker

Het eerste beeldopnameapparaat kan bijvoorbeeld een mobiel apparaat zijn, en het tweede beeldopnameapparaat kan bijvoorbeeld stationair zijn.

BE2018/5781

De door de computer uitvoerbare instructies kunnen, wanneer uitgevoerd, bij voorkeur de processor aanzetten tot het ontvangen van een gebruikersverzoek om beelddata op te nemen die representatief zijn voor het object; en het activeren van het eerste beeldopnameapparaat om de eerste beelddata op te nemen op basis van het gebruikersverzoek.

De processor kan zijn geconfigureerd om samen te werken met een sensor, en de door de computer uitvoerbare instructies kunnen, wanneer uitgevoerd, bij voorkeur de processor aanzetten tot het detecteren, door de sensor, dat het object momenteel in een doellocatie of binnen een doelbereik is voor dimensioneren; en het activeren van het eerste beeldopnameapparaat om de eerste beelddata op te nemen op basis van dat object in een doellocatie of doelbereik is.

De door de computer uitvoerbare instructies, wanneer uitgevoerd, kunnen de processor ook aanzetten tot het ontvangen, vanaf het eerste beeldopnameapparaat, van data die indicatief zijn voor een positie van het eerste beeldopnameapparaat, het ontvangen, vanaf het tweede beeldopnameapparaat, van data die indicatief zijn voor een positie van het tweede beeldopnameapparaat, het berekenen van, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat, en het bepalen of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is.

De door de computer uitvoerbare instructies kunnen verder, wanneer uitgevoerd, de processor aanzetten tot het ontvangen, vanaf een vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje heeft ontvangen die is verstuurd door het eerste beeldopnameapparaat, het bepalen, op basis van de indicatie van de vaste

BE2018/5781

RFID lezer, van een positie van het eerste beeldopnameapparaat, het ontvangen, vanaf de vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje heeft ontvangen die is verstuurd door het tweede beeldopnameapparaat, het bepalen op basis van de indicatie van de vaste RFID lezer, van de positie van het tweede beeldopnameapparaat, het berekenen, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat, en het bepalen of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is.

De door de computer uitvoerbare instructies kunnen verder, wanneer uitgevoerd, de processor aanzetten tot het detecteren, door het eerste beeldopnameapparaat, van een kortbereik draadloos signaal dat verstuurd is door het tweede beeldopnameapparaat, en het bepalen, op basis van het gedetecteerde kortbereik draadloze signaal, dat het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat.

De door de computer uitvoerbare instructies kunnen, wanneer uitgevoerd, de processor ook aanzetten tot het combineren van de eerste beelddata en de tweede beelddata om een driedimensionale puntenwolk te maken, en het dimensioneren van het object gebruikmakend van de driedimensionale puntenwolk.

KORTE FIGUURBESCRHIJVING VAN DE VERSCHILLENDE AANZICHTEN VAN DE TEKENINGEN

De begeleidende figuren, waar gelijke referentiecijfers refereren naar identieke of functioneel vergelijkbare elementen in de verschillende

BE2018/5781 aanzichten, samen met de gedetailleerde beschrijving hierna, zijn opgenomen in en vormen onderdeel van de beschrijving, en dienen om uitvoeringsvormen van concepten die hierin zijn geopenbaard verder te illustreren, en leggen diverse principes en voordelen uit van die uitvoeringsvormen.

FIG. 1 is een blokdiagram van een voorbeeld-HUD-samenstel dat geconstrueerd is in overeenstemming met de leer van deze beschrijving

FIGs. 2A en 2B illustreren een voorbeeld-HUD-samenstel dat het voorbeeld-HUD-samenstel van FIG. 1 kan implementeren.

FIG. 3 illustreert het voorbeeld-HUD-samenstel van FIGs. 2A en 2B bevestigd op een hoofd van een gebruiker.

FIG. 4 illustreert voorbeeldcamera's bevestigd aan een voorbeeld-HUD-samenstel.

FIG. 5A illustreert een gebruiker die een voorbeeld-HUDsamenstel draagt waaraan camera's zijn bevestigd waarbij een gebruiker naar een voorbeelddoosobject kijkt dat moet worden gedimensioneerd.

FIG. 5B illustreert meerdere gebruikers die voorbeeld-HUDsamenstellen dragen waaraan camera's zijn bevestigd, waarbij elke gebruiker kijkt naar een voorbeelddoosobject dat moet worden gedimensioneerd.

FIG. 5C illustreert een voorbeelddoosobject dat moet worden gedimensioneerd binnen het gezichtsveld van een bevestigde voorbeeldcamera, en een gebruiker die een voorbeeld-HUD-samenstel draagt waaraan camera's zijn bevestigd, waarbij de gebruiker kijkt naar het voorbeelddoosobject dat moet worden gedimensioneerd.

BE2018/5781

FIG. 6 is een blokdiagram dat representatief is voor een voorbeeld logisch circuit dat geconfigureerd is in overeenstemming met de leer van deze beschrijving.

FIG. 7 is een stroomdiagram van een voorbeeldwerkwijze die hierin is beschreven voor het gebruik maken van nabije beeldopnameapparaten voor het opnemen van beelddata die representatief zijn voor een object vanuit meerdere perspectieven.

GEDETAILLEERDE FIGUURBESCHRIJVING

Systemen en werkwijzen worden voorzien voor het dimensioneren van een object door gebruik te maken van nabije beeldopnameapparaten om beelddata te verkrijgen die representatief zijn voor het object vanuit meerdere perspectieven. Hoewel beelddata vanuit een enkel beeldopnameapparaat vanuit een enkel perspectief voldoende kunnen zijn om één of meerdere afmetingen (dimensies) van een object te bepalen, worden dimensioneeroperaties (bijvoorbeeld berekeningen) verbeterd door de beschikbaarheid van additionele beelddata, bijvoorbeeld, vanuit verschillende perspectieven. Dat wil zeggen, informatie die indicatief is voor verschillende zijden van het object is nuttig bij het bepalen van de afmetingen van een object, dat verschijnt in beelddata. Voorbeelden die hierin zijn geopenbaard detecteren dat één of meerdere secundaire beeldopnameapparaten in de nabijheid (bijvoorbeeld binnen een drempelafstand) zijn van een primair beeldopnameapparaat. Als respons op dergelijke detectie('s), verzoeken voorbeelden die hierin zijn beschreven dat de nabije beeldopnameapparaten tijdsgestempelde beelddata van het object verkrijgen zodanig dat de bijbehorende additionele informatie kan worden gebruikt om, bijvoorbeeld, een samengestelde representatie van het object te vormen die korreliger is dan de representatie vanuit een enkel perspectief. De additionele informatie

BE2018/5781 bevat in de representatie verbetert de accuraatheid en snelheid van de dimensioneeroperaties.

FIG. 1 is een blokdiagram van een voorbeeld-HUD-samenstel 100 dat is geconstrueerd in overeenstemming met de leer van deze beschrijving. Alternatieve implementaties van het voorbeeld-HUDsamenstel 100 van FIG.1 omvatten één of meerdere additionele of alternatieve elementen, processen en/of apparaten. In enkele voorbeelden, kunnen één of meerdere van de elementen, processen en/of apparaten van het voorbeeld-HUD-samenstel 100 van FIG. 1 worden gecombineerd, gescheiden, herschikt, of weggelaten. Hoewel voorbeelden die hierin zijn beschreven worden beschreven in samenhang met een HUD-samenstel als een primair beeldopnameapparaat, kunnen voorbeelden die hierin zijn beschreven worden gebruikt in additionele of alternatieve apparaten, zoals een handheld mobiele computer uitgerust met een scherm en camera's (bijvoorbeeld stereoscopische camera's en/of diepte sensoren) die geschikt zijn voor het verkrijgen van beelddata en het dimensioneren van een object. Zoals hier wordt gebruikt, refereert beelddata naar ieder geschikt type data dat kan worden gebruikt om een object te dimensioneren. In sommige voorbeelden, is bijvoorbeeld de opgenomen beelddata een tweedimensionaal beeld, zoals een afbeelding en/of een paar van beelden dat is opgenomen door stereoscopische camera's. In enkele voorbeelden, is de opgenomen beelddata een dieptewaarde op een coördinaat. In enkele voorbeelden, is de opgenomen beelddata een combinatie van een RGBwaarde op een coördinaat en een dieptewaarde op de coördinaat, waar soms naar wordt verwezen als een voxel.

Het voorbeeld-HUD-samenstel 100 van FIG. 1 omvat een presentatiegenerator 102 en een hoofdbevestiging 104. De hoofdbevestiging 104 is geconstrueerd om de presentatiegenerator 102 te bevestigen aan een hoofd van een persoon zodanig dat een presentatie die

BE2018/5781 is gegenereerd door de presentatiegenerator consumeerbaar is voor de persoon. De presentatie omvat visuele mediacomponenten (bijvoorbeeld beelden) en/of audio mediacomponenten. Om beelden te generen zoals statische of geanimeerde tekst en/of grafieken, omvat de presentatiegenerator 102 van FIG 1 een beeldgenerator 106. De voorbeeldbeeldgenerator 106 van FIG. 1 staat in verbinding met één of meerdere bronnen van beelddata. De beelddata die ontvangen is bij de beeldgenerator 106 zijn representatief voor, bijvoorbeeld, tekst, grafieken en/of augmented reality elementen (bijvoorbeeld informatie die met objecten binnen het gezichtsveld overlapt).

In het geïllustreerde voorbeeld, is de presentatiegenerator 102 geconfigureerd voor het tonen van één of meerdere berichten of indicatoren die geassocieerd worden met, bijvoorbeeld, verzoeken aan nabije beeldopnameapparaten verstuurd door het HUD-samenstel 100, waarbij de verzoeken zijn voor de nabije beeldopnameapparaten om tijd gestempelde beelddata te verkrijgen die representatief zijn voor een object dat wordt vastgehouden door een gebruiker van het HUD-samenstel 100. Bijkomend of als alternatief, kan de presentatiegenerator 102 worden geconfigureerd voor het tonen van één of meerdere berichten of indicatoren dat één of meerdere nabije beeldopnameapparaten het verzoek hebben geaccepteerd en/of de verzochte beelddata hebben opgenomen.

De voorbeeldbeeldgenerator 106 in FIG. 1 maakt gebruik van een lichtbron 108 en een scherm/optiek 110 om visuele componenten van de presentatie te tonen. In enkele voorbeelden, omvat de voorbeeldbeeldgenerator 106 belichtingseenheden die de lichtbron 108 gebruiken (bijvoorbeeld licht uitzendende diodes (LEDs)) om licht te generen op basis van de ontvangen data. In enkele voorbeelden, ontvangen de belichtingseenheden verwerkte data in een staat voor directe conversie naar licht. In andere voorbeelden, verwerken de belichtingseenheden ruwe

BE2018/5781 beelddata voordat de beelddata geconverteerd worden naar licht. Om een dergelijk verwerken uit te voeren, omvatten bijvoorbeeld de belichtingseenheden en/of staan de belichtingseenheden in communicatie met één of meerdere logische circuits die zijn geconfigureerd om de beelddata te verwerken.

De belichtingseenheden converteren de ontvangen beelddata naar patronen en pulsen van licht, en communiceren het gegenereerde licht naar het scherm/optiek 110, zodanig dat de beelden behorend bij de ontvangen data worden getoond aan de gebruiker via het scherm/optiek 110. In enkele voorbeelden, omvatten de belichtingseenheden optieken die het gegenereerde licht conditioneren of manipuleren (bijvoorbeeld polariseren en/of collimeren) voorafgaand aan het scherm/optiek 110 voorzien van het licht.

In enkele voorbeelden, omvat het scherm/optiek 110 een golfgeleider die het licht dat is ontvangen van de belichtingseenheden in een richting en patroon leidt behorend bij de beelddata. In enkele voorbeelden, omvat de golfgeleider een meervoudig aantal interne oppervlakken die een lichtgeleider vormen om intern het licht te reflecteren als het licht van een invoer naar een uitvoer propageert. De golfgeleider omvat bijvoorbeeld een rooster bij de uitvoer om het licht te buigen richting een oog van de gebruiker en daarmee het beeld toont aan de gebruiker. Verder, omvat, bij enkele voorbeelden, de golfgeleider een eerste en een tweede lens die zijn opgesteld om te worden geplaatst over, respectievelijk, een eerste oog en een tweede oog van de gebruiker. Echter, iedere geschikte vorm of maat is mogelijk voor zo'n golfgeleider. In enkele voorbeelden, is de golfgeleider transparant zodanig dat de gebruiker de omgeving tegelijkertijd met het getoonde beeld kan zien, of alleen de omgeving wanneer geen beeld wordt getoond op de golfgeleider.

BE2018/5781

Hoewel de voorbeeldbeeldgenerator 106 de lichtbron 108 en het scherm/optiek 110 gebruikt voor het presenteren van visuele componenten van de presentatie, kan het voorbeeld-HUD-samenstel 100 van FIG. 1 iedere geschikte beeldgeneratietechnologie gebruiken zoals, bijvoorbeeld, kathodestraalbuis (CRT) apparaten of scanning lasers.

De voorbeeldpresentatiegenerator 102 van FIG. 1 omvat een audiogenerator 112 die audiodata ontvangt en de audiodata converteert naar geluid via een koptelefoonaansluiting 114 en/of een speaker 116. De audiogenerator 112 kan bijvoorbeeld een geluid genereren om aan te geven dat een nabij beeldopnameapparaat een verzoek om beelddata te verkrijgen van een object heeft geaccepteerd en/of dat het nabije beeldopnameapparaat de verzochte beelddata heeft verkregen. In enkele voorbeelden, werken de audiogenerator 112 en de beeldgenerator 106 samen om een audiovisuele presentatie te genereren.

In het voorbeeld van FIG. 1, omvat (bijvoorbeeld herbergt) de voorbeeldpresentatiegenerator 102 een meervoudig aantal sensoren 118. In het voorbeeld van FIG. 1, omvat het meervoudig aantal sensoren 118 een lichtsensor 120, een bewegingsensor 122 (bijvoorbeeld een accelerometer), een gyroscoop 124, een microfoon 126, en een nabijheidsensor 127. In enkele voorbeelden, wordt de presentatie die is gegenereerd door de voorbeeldbeeldgenerator 106 en/of de audiogenerator 112 beïnvloed door één of meerdere metingen en/of detecties die zijn gegenereerd door één of meerdere sensoren 118. Een karakteristiek (bijvoorbeeld graad van ondoorzichtigheid) van het scherm gegenereerd door de beelddatagenerator 106 kan bijvoorbeeld afhangen van een intensiteit van omgevingslicht dat is gedetecteerd door de lichtsensor 120. Bijkomend of als alternatief, worden één of meerdere modi, operationele parameters, of instellingen bepaald door metingen en/of detecties die zijn gegenereerd door één of meerdere van de sensoren 118. De

BE2018/5781 presentatiegenerator 102 kan bijvoorbeeld een standby-modus ingaan als de bewegingssensor 122 geen beweging heeft gedetecteerd in een drempelhoeveelheid van tijd.

In het geïllustreerde voorbeeld, is de nabijheidsensor 127 geconfigureerd om, bijvoorbeeld, een server en/of andere beeldopnameapparaten gelegen binnen een bereik van het HUDsamenstel 100 te voorzien van locatie- en/of beweging-informatie die geassocieerd wordt met het HUD-samenstel 100. In enkele voorbeelden, coördineert de nabijheidsensor 127 met andere nabijheidsensoren die worden gedragen door de andere beeldopnameapparaten om te bepalen of één of meerdere van de beeldopnameapparaten binnen een drempelafstand van elkaar zijn (dat wil zeggen zijn nabij elkaar). De nabijheidsensor 127 kan bijvoorbeeld proberen om met nabijgelegen apparaten te verbinden (pair) (bijvoorbeeld via een Bluetooth® communicatie-apparaat) die ook zijn uitgerust met vergelijkbare (bijvoorbeeld werken volgens hetzelfde communicatieprotocol) sensoren. In enkele voorbeelden, zijn het HUD-samenstel 100 en andere beeldopnameapparaten lokaliseerbaar gebruikmakend van een RFIDgebaseerd lokalisatiesysteem via de nabijheidsensor 127 en andere vergelijkbare sensoren die worden gedragen door de andere beeldopnameapparaten. De nabijheidsensor 127 kan bijvoorbeeld worden geconfigureerd om radiofrequentie signaaltjes te versturen die worden gelezen door vaste RFID lezers die in staat zijn om het HUD-samenstel 100 te lokaliseren op bases van de signaaltjes (bijvoorbeeld via triangulatie technieken). In enkele voorbeelden, is de nabijheidsensor 127 een satelliet gebaseerde sensor die in staat is om locatie-informatie te verschaffen op basis van, bijvoorbeeld, een GPS-systeem dat zich ook bewust is van de locaties van de andere beeldopnameapparaten. In dergelijke gevallen, kunnen de locaties van de verschillende

BE2018/5781 beeldopnameapparaten worden vergeleken om te bepalen of enigen van de beeldopnameapparaten in de nabijheid van elkaar zijn. In enkele voorbeelden, verschaft de nabijheidsensor 127 beweging- en/of positionele informatie die geassocieerd wordt met het HUD-samenstel 100 zoals, bijvoorbeeld, stamp- (pitch), rol-, gier-(yaw), hoogte- en koersinformatie. In enkele voorbeelden, definieert de nabijheidsensor 127 een lokale geometrie of coördinatensysteem en de bijbehorende locatie op het coördinatensysteem die geassocieerd wordt met het HUD-samenstel 100. Wanneer het HUD-samenstel 100 geïnitialiseerd wordt (bijvoorbeeld aangezet wordt), kan bijvoorbeeld de nabijheidsensor 127 de startlocatie van het HUD-samenstel als 0, 0, 0 in het coördinatensysteem loggen. In dergelijke gevallen, update de nabijheidsensor 127 de locatie van het HUD-samenstel 100 als de gebruiker beweegt. Verder, hebben, in dergelijke gevallen, andere beeldopnameapparaten locaties in het coördinatensysteem (bijvoorbeeld vaste locaties voor statische beeldopnameapparaten en geüpdatete locaties voor mobiele beeldopnameapparaten zoals andere HUD-samenstellen of handheld mobiele computerapparaten). Als zodanig, worden de beeldopnameapparaten binnen een drempelafstand volgens het coördinatensysteem beschouwd als nabije apparaten. In enkele voorbeelden, gebruikt de nabijheidsensor 127 sterkte-van-signaal (bijvoorbeeld WiFi signalen) systemen om het HUD-samenstel 100 en/of andere beeldopnameapparaten relatief ten opzichte van elkaar en/of een coördinatensysteem te lokaliseren.

Zoals hierin in detail is beschreven, worden data die verschaft zijn door de nabijheidssensor 127 gebruikt om gebruik te maken van nabije beeldopnameapparaten bij het verkrijgen van additionele beelddata die representatief zijn voor een object dat gedimensioneerd wordt door het HUD-samenstel 100 (i.e., het eerste beeldopnameapparaat).

BE2018/5781

De voorbeeldpresentatiegenerator 102 van FIG. 1 omvat een camerasubsysteem 128. In enkele voorbeelden, is het camerasubsysteem bevestigd aan of wordt gedragen door dezelfde behuizing als de presentatiegenerator 102. In enkele voorbeelden, is het camerasubsysteem 128 bevestigd aan of wordt gedragen door de hoofdbevestiging 104. Het voorbeeldcamerasubsysteem 128 omvat twee camera's 130 en een microfoon 132 om, respectievelijk, beelddata en audiodata op te nemen, die representatief zijn voor een omgeving die het HUD-samenstel 100 omgeeft. In enkele voorbeelden, omvat het camerasubsysteem 128 één of meerdere dieptesensoren om afstanden tussen objecten in een gezichtsveld en het HUD-samenstel 100 te detecteren. In enkele voorbeelden, worden de beeld- en/of audiodata die zijn opgenomen door de camera's 130 en/of microfoon 132 geïntegreerd met de presentatie die wordt gegenereerd door de beeldgenerator 106 en/of de audiogenerator 112. Het camerasubsysteem 128 van FIG. 1 communiceert bijvoorbeeld data naar de beeldgenerator 106, die de beelddata kan verwerken om één of meerdere bijbehorende beelden op het scherm/optiek 110 te generen. In enkele voorbeelden, worden de beelddata en/of audiodata die zijn opgenomen door, respectievelijk, de camera's 130 en/of de microfoon 132, opgeslagen in geheugen 135 van het voorbeeld-HUD-samenstel 100. In enkele voorbeelden, worden de beelddata en/of audiodata die zijn opgenomen door, respectievelijk, de camera's 130 en/of de microfoon 132, gecommuniceerd via, bijvoorbeeld, een USB interface 134 van het camerasubsysteem 128 naar een apparaat (bijvoorbeeld een server of een extern geheugen) dat extern is van het HUD samenstel 100.

De voorbeeldpresentatiegenerator 102 van FIG. 1 omvat een meervoudig aantal interfaces 136 die zijn geconfigureerd om het HUD samenstel 100 in staat te stellen om te communiceren met één of meerdere externe apparaten 142 en één of meerdere netwerken 138. In het

BE2018/5781 voorbeeld van FIG. 1, omvatten de interfaces 136 omzetters 140 (bijvoorbeeld een HDMI naar LVDS-RGB omzetter) om data van één format om te zetten naar een ander, een USB interface 144 en een Bluetooth® audio transmitter 146. In enkele voorbeelden, werkt de voorbeeld- Bluetooth® audio transmitter 146 samen met één of beide van de microfoons 126, 132, van het HUD samenstel 100 om steminvoer van de gebruiker te ontvangen en om de steminvoer naar één of meerdere externe apparaten 142 over te brengen. Steminvoer kan bijvoorbeeld worden verschaft aan een mobiel computerapparaat dat wordt gedragen door de gebruiker via het HUD-samenstel 100 gebruikmakend van de Bluetooth® audio transmitter 146. Voorbeelden van externe apparaten 142 omvatten keypads, Bluetooth® klikknoppen, smart watches en mobiele computerapparaten.

De voorbeeldbeeldgenerator 106, de voorbeeldlichtbron 108, de voorbeeldaudiogenerator 112, het voorbeeldcamerasubsysteem 128, de voorbeeldomzetters 140, de voorbeeldUSBinterfaces 134, 144, en/of, meer algemeen, de voorbeeldpresentatiegenerator 102 van FIG. 1 worden geïmplementeerd door hardware, software, firmware, en/of iedere combinatie van hardware, software, en/of firmware. In enkele voorbeelden, is ten minste één van de voorbeeldbeeldgenerator 106, de voorbeeldlichtbron 108, de voorbeeldaudiogenerator 112, het voorbeeldcamerasubsysteem 128, de voorbeeldomzetters 140, de voorbeeldUSB interfaces 134, 144 en/of meer algemeen, de voorbeeldpresentatiegenerator 102 van FIG. 1 geïmplementeerd door middel van een logisch circuit. Zoals hierin gebruikt, is de term “logisch circuit” uitdrukkelijk gedefinieerd als een fysiek apparaat dat ten minste één hardware component omvat die geconfigureerd is (bijvoorbeeld via bediening in overeenstemming met een vooraf bepaalde configuratie en/of via uitvoering van opgeslagen door de machine leesbare instructies) om

BE2018/5781 één of meerdere machines te bedienen en/of bewerkingen van één of meerdere machines uit te voeren. Voorbeelden van een logisch circuit omvatten één of meerdere processors, één of meerdere coprocessors, één of meerdere microprocessor, één of meerdere controllers, één of meerdere digitale signaal processors (DSPs), één of meerdere applicatie-specifieke geïntegreerde circuits (ASICs), één of meerdere veld-programmeerbare gate arrays (FPGAs), één of meerdere microcontroller eenheden (MCUs), één of meerdere hardware acceleratoren, één of meerdere special-purpose computer chips, en één of meerdere systeem-op-een-chip (SoC) apparaten. Enkele voorbeeld- logische circuits, zoals ASICs of FPGAs, zijn specifiek geconfigureerde hardware voor het uitvoeren van bewerkingen. Enkele voorbeeld- logische circuits zijn hardware die door de machine leesbare instructies uitvoeren om bewerkingen uit te voeren. Enkele voorbeeldlogische circuits omvatten een combinatie van specifiek geconfigureerde hardware en hardware die door de machine leesbare instructies uitvoeren.

Zoals hierin gebruikt, is elk van de termen “tastbaar door de machine leesbaar medium”, “niet-transitoir door de machine leesbaar medium”, en “door de machine leesbaar opslagapparaat” uitdrukkelijk gedefinieerd als een opslagmedium (bijvoorbeeld een plaat van een harde schijf, een digitale ruim toepasbare schijf, een compact disc, flash geheugen, read-only geheugen, random-access geheugen, etc.) waarop door de machine leesbare instructies (bijvoorbeeld programmacode in de vorm van, bijvoorbeeld, software en/of hardware) kunnen worden opgeslagen. Verder, zoals hierin gebruikt, is elk van de termen “tastbaar machine leesbaar medium”, “niet-transitoir door de machine leesbaar medium” en “door de machine leesbaar opslagapparaat” uitdrukkelijk gedefinieerd om het propageren van signalen uit te sluiten. Dat wil zeggen, zoals gebruikt in iedere conclusie van dit octrooi, kan een “tastbaar door de machine leesbaar medium” niet worden gelezen als te worden geïmplementeerd

BE2018/5781 door het propageren van een signaal. Verder, zoals gebruikt in iedere conclusie van dit octrooi, kan een “niet-transitoir door de machine leesbaar medium” niet worden gelezen als te worden geïmplementeerd door het propageren van een signaal. Verder, zoals gebruikt in iedere conclusie van dit octrooi, kan een “door de machine leesbaar opslagapparaat” niet worden gelezen als te worden geïmplementeerd door het propageren van een signaal.

Zoals gebruikt hierin, is elk van de termen “tastbaar door de machine leesbaar medium”, “niet-transitoir door de machine leesbaar medium” en “door de machine leesbaar opslagapparaat” uitdrukkelijk gedefinieerd als een opslagmedium waarop door de machine leesbare instructies zijn opgeslagen voor iedere geschikte tijdsduur (bijvoorbeeld permanent, voor een langere tijdsperiode (bijvoorbeeld terwijl een programma dat geassocieerd is met de machine-leesbare instructies wordt uitgevoerd)) en/of een korte tijdsperiode (bijvoorbeeld terwijl machineleesbare instructies worden in cache worden opgeslagen en/of gebufferd gedurende een buffer proces)).

FIGS. 2A en 2B illustreren een voorbeeld-HUD-samenstel 200 dat het voorbeeld-HUD-samenstel 100 van FIG. 1 kan implementeren. Het voorbeeld-HUD-samenstel 200 van FIG. 2 B omvat een presentatiegenerator 202 en een voorbeeldhoofdbevestiging 204. De voorbeeldpresentatiegenerator 202 van FIG. 2B herbergt of draagt componenten die zijn geconfigureerd om, bijvoorbeeld, een audiovisuele presentatie te generen voor consumptie door een gebruiker die het voorbeeld-HUD-samenstel 200 van FIG. 2B draagt. De presentatiegenerator 202 van FIG. 2B herbergt of draagt bijvoorbeeld de componenten van de voorbeeldpresentatiegenerator 102 van FIG. 1.

FIG. 3 illustreert het voorbeeld-HUD-samenstel 200 van FIGs. 2A en 2B bevestigd aan het hoofd 300 van een gebruiker.

BE2018/5781

FIG. 4 illustreert voorbeeldcamera's 402 die, bijvoorbeeld, de camera's 130 van FIG. 1 implementeren. Zoals boven beschreven, kunnen de camera's 402 worden geconfigureerd om beelddata op te nemen die representatief zijn voor een doosobject en de handen van een gebruiker wanneer een gebruiker die het HUD-samenstel 200 draagt naar een doosobject kijkt. Hoewel de voorbeeldcamera's 402 van FIG. 4 zijn gepositioneerd boven elk oculair, kunnen de camera's op iedere geschikte locatie worden gepositioneerd, zoals, bijvoorbeeld, op de randen van de frames. FIG. 5 A illustreert bijvoorbeeld een gebruiker die het HUDsamenstel 200 draagt en kijkt naar een doosobject, met voorbeeldcamera's 502 bevestigd aan de zijkanten van de hoofdbevestiging, die beelddata opneemt die het doosobject en de handen van de gebruiker omvat.

FIG. 5B illustreert meerdere gebruikers die de voorbeeld-HUDsamenstellen dragen waaraan camera's zijn bevestigd, waarbij elke gebruiker kijkt naar een voorbeelddoosobject dat moet worden gedimensioneerd. Zoals getoond in FIG. 5B, houdt een eerste gebruiker die het HUD-samenstel 200 draagt het doosobject vast, terwijl een tweede gebruiker die voorbeeld-HUD-samenstel 510 draagt kijkt naar hetzelfde doosobject. Wanneer de gebruikers tegenover hetzelfde object staan, zijn de camera's (niet getoond) die bevestigd zijn aan hun HUD-samenstellen 200, 510 elk gepositioneerd om beelddata van het doosobject op te nemen, vanuit meerdere perspectieven.

FIG. 5C illustreert een voorbeelddoosobject dat moet worden gedimensioneerd binnen het gezichtsveld van een bevestigde voorbeeldcamera, en een gebruiker die een voorbeeld-HUD-samenstel draagt waaraan camera's zijn bevestigd, waarbij de gebruiker kijkt naar het voorbeelddoosobject dat moet worden gedimensioneerd. Zoals getoond in FIG. 5 C, houdt een gebruiker die het voorbeeld-HUD-samenstel draagt het doosobject vast, terwijl een camera 520 (bijvoorbeeld een bevestigde

BE2018/5781 overhead camera) gericht is naar hetzelfde doosobject. Dienovereenkomstig, zijn de camera's (niet getoond) van het HUDsamenstel 200 en de bevestigde camera 520 elk gepositioneerd om beelddata van het doosobject op te nemen, vanuit meerdere perspectieven.

FIG. 6 is een blokdiagram dat representatief is voor een voorbeeld logisch circuit dat kan worden gebruikt om, bijvoorbeeld, de voorbeeldbeeldgenerator 106, de voorbeeldlichtbron 108, één of meerdere voorbeeldinterfaces 136 en/of de voorbeeldaudiogenerator 112 van FIG. 1 te implementeren. Het voorbeeld logisch circuit van FIG. 6 is een verwerkingsplatform 600 dat in staat is om door de machine leesbare instructies uit te voeren om, bijvoorbeeld, bewerkingen geassocieerd met het voorbeeld-HUD-samenstel 100 van FIG. 1 te implementeren.

Het voorbeeldverwerkingsplatform 600 van FIG. 6 omvat een processor 602 zoals, bijvoorbeeld, één of meerdere microprocessors, controllers en/of ieder geschikt type processor. Het voorbeeldverwerkingsplatform 600 van FIG. 6 omvat geheugen (bijvoorbeeld volatiel geheugen, niet-volatiel geheugen) dat toegankelijk is voor de processor 602 (bijvoorbeeld via een geheugencontroller). De voorbeeldprocessor 602 interacteert met het geheugen 604 om, bijvoorbeeld, door de machine leesbare instructies die zijn opgeslagen in het geheugen 604 te verkrijgen. Bijkomend of als alternatief, kunnen de door de machine leesbare instructies worden opgeslagen op een of meerdere verwijderbare media (bijvoorbeeld een compact disc, een digitale versatiele disc, verwijderbaar flash geheugen, etc.) die kunnen worden gekoppeld aan het verwerkingsplatform 600 om toegang te verschaffen tot de door de machine leesbare instructies die daarop zijn opgeslagen. In het bijzonder, kunnen de door de machine leesbare instructies die zijn opgeslagen op het geheugen 604 instructies omvatten voor het uitvoeren

BE2018/5781 van één van de werkwijzen die in groter detail hieronder zijn beschreven bij FIG. 7.

Het voorbeeldverwerkingsplatform 600 van FIG. 6 omvat verder een netwerkinterface 606 om communicatie met andere machines mogelijk te maken, via, bijvoorbeeld, een of meerdere netwerken. De voorbeeldnetwerkinterfaces 606 omvatten een willekeurig geschikt type van communicatieinterface(s) (bijvoorbeeld bedrade en/of draadloze interfaces) die zijn geconfigureerd om te werken in overeenstemming met een willekeurig geschikt protocol. Het voorbeeldverwerkingsplatform 600 van FIG. 6 omvat invoer/uitvoer (I/O) interfaces 608 om ontvangst van gebruikersinvoer en communicatie van uitvoerdata naar de gebruiker mogelijk te maken.

Het voorbeeldverwerkingsplatform 600 van FIG. 6 kan worden geconfigureerd om dimensioneeroperaties uit voeren gebruikmakend van de beelddata die zijn opgenomen via voorbeelden die hierin zijn beschreven. Iedere geschikte techniek voor het meten van afmetingen van het object is toepasbaar op voorbeelden die hierin zijn geopenbaard. Werkwijzen en inrichtingen voor het dimensioneren van een doosobject gebruikmakend van beelddata die, bijvoorbeeld, is opgenomen door het HUD-samenstel 100 en/of additionele beeldopnameapparaten zijn bijvoorbeeld geopenbaard in U.S. Patent No. 9,741,134 ingediend op 16 december 2013. Additionele of alternatieve werkwijzen en inrichtingen die kunnen worden gebruikt in verbinding met voorbeelden die hierin zijn geopenbaard voor het dimensioneren van een object omvatten puntenwolkgeneratoren en analyses van puntenwolkdata om objecten te meten.

FIG. 7 is een stroomdiagram die een voorbeeldwerkwijze voorstelt in overeenstemming met de leer van deze beschrijving. Hoewel het voorbeeld van FIG. 7 is beschreven in verbinding met het voorbeeld22

BE2018/5781

HUD-samenstel 100 van FIG. 1, kan het voorbeeld van FIG. 7 worden geïmplementeerd in verbinding met additionele of alternatieve typen van beeldopnameapparaten, zoals handheld mobiele Computerapparaten die beeldopnamebenodigdheden hebben.

Bij blok 700, zijn het HUD-samenstel 100 en/of andere componenten van een dimensioneersysteem (bijvoorbeeld andere mobiele beeldopnameapparaten, zoals additionele HUD-samenstellen, en/of vaste locatie beeldopnameapparaten, zoals camera's die zijn bevestigd in een dimensioneerruimte) aan het initiëren (bijvoorbeeld aangezet). Bij blok 702, omvat de initiatie het definiëren van een lokale geometrie voor gebruik in de nabijheidsbepalingen zoals hierin beschreven. Een coördinatensysteem kan bijvoorbeeld worden geïnitialiseerd op een startpunt (0,0,0).

Bij blok 704, wordt de positie van het HUD-samenstel 100 bepaald (bijvoorbeeld via de nabijheidsensor 127) en continu geüpdatet als het HUD-samenstel beweegt. In het geïllustreerde voorbeeld, wordt een meervoudigheid van positie- en beweging-informatie geassocieerd met het HUD-samenstel 100 verzameld, zoals, bijvoorbeeld, stamp (pitch), rol, gier (yaw), hoogte en koersinformatie. In enkele voorbeelden, omvat het bepalen van de positie van het HUD-samenstel 100 het kalibreren van het HUD-samenstel, bijvoorbeeld zoals beschreven door U.S. Pat. No.

9,952,432.

Als een dimensioneerverzoek is ontvangen (blok 706) (bijvoorbeeld geactiveerd door een invoer van een gebruiker, or door een detectie door een positioneringsensor dat een object momenteel in een doellocatie of binnen een doelbereik is voor dimensioneren), neemt de beeldopnameapparatuur van het HUD-samenstel 100 beelddata op (bijvoorbeeld tweedimensionale en/of driedimensionale data) die representatief zijn voor het gezichtsveld van het HUD-samenstel (blok

BE2018/5781

708), dat een object omvat dat moet worden gedimensioneerd bijvoorbeeld een doos). In het voorbeeld van FIG. 7, worden de opgenomen beelddata voorzien van een tijdstempel gebruikmakend van een referentieklok die toegankelijk is voor andere beeldopnameapparaten in de omgeving.

Bij blok 710, worden beeldopnameapparaten nabij het HUDsamenstel, zoals bepaald door de nabijheidsensor 127 en/of verwerkingscomponenten in communicatie met de nabijheidsensor 127 en vergelijkbare nabijheidsensoren van andere beeldopnameapparaten, geïdentificeerd.

In één voorbeeld, ontvangt een processor, bijvoorbeeld als onderdeel van een real-time locatiesysteem (RTLS) data die indicatief zijn voor de huidige positie van het HUD-samenstel 100, alsook data die indicatief zijn de huidige positie van ten minste één secundair beeldopnameapparaat. Secundaire beeldopnameapparaten kunnen omvatten, bijvoorbeeld, andere mobiel beeldopnameapparaten, zoals additionele HUD-samenstellen, en/of vaste-locatie beeldopnameapparaten, zoals camera's die zijn bevestigd in een dimensioneerzone. In enkele voorbeelden, ontvangt de processor data die indicatief zijn voor de huidige posities van een groot aantal secundaire beeldopnameapparaten. Op basis van de positiedata van het HUD-samenstel 100, en de verscheidene secundaire beeldopnameapparaten, berekent de processor de afstand tussen het HUD-samenstel 100 en elk van de secundaire beeldopnameapparaten om te bepalen of één van de secundaire beeldopnameapparaten binnen een nabijheidsafstandsdrempelwaarde (bijvoorbeeld vijf voet, tien voet, 100 voet, etc.) is van het HUD-samenstel 100.

Als een bijkomend of alternatief voorbeeld, versturen de verscheidene secundaire beeldopnameapparaten kortbereik draadloze signalen (bijvoorbeeld Bluetooth signalen) die detecteerbaar zijn door

BE2018/5781 sensoren van het HUD-samenstel (bijvoorbeeld nabijheidsensoren). Op basis van een bekend bereik van een dergelijk signaal, wordt bepaald dat een secundair beeldopnameapparaat binnen een nabijheidsafstanddrempelwaarde is van het HUD-samenstel wanneer het HUD-samenstel het signaal ontvangt. Omgekeerd, wordt bepaald dat een secundair beeldopnameapparaat buiten een nabijheidsafstanddrempelwaarde is wanneer het HUD-samenstel niet slaagt in het ontvangen van het signaal.

Verder, verstuurt het HUD-samenstel 100 en/of een verwerkingscomponent in communicatie met het HUD-samenstel 100 (bijvoorbeeld een server) een verzoek aan elk van de secundaire beeldopnameapparaten die zijn geïdentificeerd als nabij het HUDsamenstel 100. Het verzoek geeft aan dat het HUD-samenstel 100 een object aan het dimensioneren is op de locatie van het HUD-samenstel 100 en dat om additionele beelddata voor het object op die locatie wordt verzocht. In enkele voorbeelden, zijn de secundaire beeldopnameapparaten vaste beeldopnameapparaten die zijn gericht op een specifiek punt. In dergelijke gevallen, kunnen de beeldopnameapparaten het object afbeelden wanneer het object zich in het gezichtsveld bevindt. Als alternatief, kunnen de beeldopnameapparaten, wanneer de andere beeldopnameapparaten mobiele apparaten zijn die een dynamisch gezichtsveld hebben, bepalen (bijvoorbeeld op basis van hun koers, positie, stamp (pitch), rol en gier (yaw)) wanneer het object in het gezichtsveld is, en kunnen het object afbeelden wanneer het object in het dynamische gezichtsveld is.

Bij blok 712 neemt het nabije secundaire beeldopnameapparaat (apparaten) beelddata op die representatief zijn voor het object vanuit verschillende perspectieven dan het perspectief van het HUD-samenstel 100. Zoals getoond in FIG. 5B, staat een eerste HUD-samenstel

BE2018/5781 bijvoorbeeld tegenover het object vanuit een eerste hoek, en neemt beelddata op vanuit één perspectief, terwijl een secundair HUD-samenstel in de nabijheid van het eerste HUD-samenstel (namelijk binnen een drempelafstand) tegenover het object staat vanuit een tweede hoek, en neemt beelddata op vanuit een ander perspectief. Op dezelfde manier, zoals getoond in FIG. 5C, staat een HUD-samenstel tegenover het object vanuit een eerste hoek, en neemt beelddata op vanuit één perspectief, terwijl een bevestigde camera in de nabijheid van het eerste HUDsamenstel tegenover het object staat vanuit een tweede hoek en beelddata opneemt vanuit een ander perspectief. De opgenomen beelddata zijn voorzien van een tijdstempel gebruikmakend van de zelfde referentie als het primaire beeldopnameapparaat en wordt verschaft aan een database.

Bij blok 714, ontvangt een dimensioneerprocessor (bijvoorbeeld een server in communicatie met het HUD-samenstel 100 of een processor van het HUD-samenstel 100) de beelddata die zijn opgenomen door het HUD-samenstel 100 en een eventueel nabijgelegen beeldopnameapparaat. De dimensioneerprocessor associeert beelddata van de verschillende bronnen volgens gemeenschappelijke (bijvoorbeeld binnen een drempelhoeveelheid van tijd) tijdstempels.

Bij blok 716, combineert de dimensioneerprocessor verschillende gevallen van beelddata van de verschillende bronnen om een samengestelde representatie te vormen van het object. In het geïllustreerde voorbeeld, genereert de dimensioneerprocessor een gecombineerde puntenwolk die de verschillende gevallen van beelddata bevat. Echter, in alternatieve voorbeelden wanneer de beelddata niet puntenwolkdata is, combineert de dimensioneerprocessor de beelddata op alternatieve manieren om een samengestelde representatie te vormen van het object.

BE2018/5781

Bij blok 718, segmenteert de dimensioneerprocessor de puntenwolk van andere data (bijvoorbeeld achtergrond data) en berekent één of meerdere afmetingen van het object op basis van de gesegmenteerde puntenwolk. In enkele voorbeelden, kent de dimensioneerprocessor een vertrouwensscore toe aan de één of meerdere afmetingen. In enkele voorbeelden, communiceert de dimensioneerprocessor de één of meerdere afmetingen naar het HUDsamenstel 100 en worden de resultaten getoond op het scherm daarop.

Bij blok 720, worden de één of meerdere afmetingen gerapporteerd en/of opgeslagen. Als het dimensioneerproces voor het object compleet is (blok 722), gaat control verder naar blok 724. Anders, zet het dimensioneerproces voor het object zich voort.

Bij blok 724, als het systeem uitstaat, wordt het proces verlaten (blok 726). Anders, kan control, van blok 724, terugkeren naar blok 706 om te bepalen of een ander dimensioneerverzoek is uitgebracht.

Ten behoeve van duidelijkheid en een beknopte beschrijving, worden maatregelen hierin beschreven als deel van dezelfde of separate uitvoeringsvormen. Echter, opgemerkt wordt dat de beschermingsomvang van de uitvinding uitvoeringsvormen kan omvatten die combinaties hebben van alle of enkele van de maatregelen die hierin zijn beschreven. Getoonde uitvoeringsvormen kunnen gelijke of gelijkwaardige componenten omvatten, behalve indien anders beschreven. De voordelen, oplossingen voor problemen en ieder element dat kan leiden tot enig voordeel, of oplossing die plaatsheeft of meer benadrukt wordt, moeten niet worden geïnterpreteerd als een kritieke, benodigde, of essentiële maatregel of element van één van de of alle conclusies.

Bovendien, kunnen in dit document, betrekkelijke termen zoals eerste en tweede, bovenkant en onderkant, en dergelijke slechts worden gebruikt om één entiteit of actie te onderscheiden van een andere entiteit

BE2018/5781 of actie zonder dat noodzakelijkerwijs één van deze feitelijke relaties of ordes tussen dergelijke entiteiten of acties nodig is of wordt geïmpliceerd. De termen “omvat”, “omvattende”, “”heeft”, “hebbende”, “bevat”, “bevattende” of iedere andere variatie daarvan, zijn bedoeld om een nietuitsluitende inclusie te dekken, zodanig dat een proces, werkwijze, artikel, of inrichting die een lijst van elementen omvat, heeft, bevat niet alleen die elementen omvat, maar ook andere elementen kan omvatten die niet uitdrukkelijk zijn vermeld of inherent zijn aan een dergelijk proces, werkwijze, artikel of inrichting. Een element voorafgegaan door “omvat ... een”, “heeft ... een”, “bevat ... een” sluit niet, zonder meer beperkingen, het bestaan uit van additionele identieke elementen in het proces, de werkwijze, het artikel, of de inrichting die het element omvat, heeft, bevat. De term “een” is gedefinieerd als één of meer, tenzij dat hierin expliciet anders is aangegeven. De termen “in hoofdzaak”, “essentieel”, “ongeveer”, of iedere andere versie daarvan, zijn gedefinieerd als zijnde dichtbij, zoals begrepen door de vakman v, en in één niet beperkende uitvoeringsvorm is de term gedefinieerd als zijnde binnen 10%, in een andere uitvoeringsvorm als zijnde binnen 5%, in een andere uitvoeringsvorm als zijnde binnen 1% en in een andere uitvoeringsvorm als zijnde binnen 0.5%. De term “gekoppeld” zoals hierin gebruikt is gedefinieerd als verbonden, hoewel niet noodzakelijkerwijs direct en niet noodzakelijkerwijs mechanisch. Een apparaat of structuur die is “geconfigureerd” op een zekere manier is geconfigureerd op ten minste die manier, maar kan ook worden geconfigureerd op manieren die niet zijn aangegeven.

Voorts kunnen enkele uitvoeringsvormen één of meerdere generieke of gespecialiseerde processors (of “verwerkingsapparaten”) omvatten, zoals microprocessors, digitale signaal processors, customized processors, en veldprogrammeerbare gate arrays (FPGAs) en uniek

BE2018/5781 opgeslagen programma instructies (omvattende zowel software als hardware) die de één of meerdere processors beheren, om in combinatie met zekere niet-processor circuits, enkele, de meeste, of alle functies te implementeren van de werkwijze en/of inrichting die hierin is beschreven. Als alternatief, zouden enkele of alle functies kunnen worden geïmplementeerd door een toestandsmachine die geen opgeslagen programma instructies heeft, of in één of meerdere applicatie-specifieke geïntegreerde circuits (ASICs), waarin elke functie of enkele combinaties van zekere functies zijn geïmplementeerd als custom logic (op maat gemaakt). Uiteraard, zou een combinatie van de twee aanpakken kunnen worden gebruikt.

Bovendien, kan een uitvoeringsvorm worden geïmplementeerd als een door een computer leesbaar opslagmedium die daarop een door een computer leesbare code heeft opgeslagen voor het programmeren van een computer (bijvoorbeeld omvattende een processor) om een werkwijze uit te voeren zoals hierin wordt beschreven en geclaimd. Voorbeelden van dergelijke door een computer leesbare opslagmedia omvatten, maar zijn niet beperkt tot, een harde schijf, een CD-ROM, een optisch opslagapparaat, een magnetisch opslagapparaat, een ROM (read-only memory), een PROM (programmable read-only memory), een EPROM (erasable programmable read-only memory), een EEPROM (electrically erasable programmable read-only memory) en een flash geheugen. Verder, wordt verwacht dat de vakman, ondanks mogelijk significante inspanning en vele ontwerpkeuzes die gemotiveerd zijn door, bijvoorbeeld, beschikbare tijd, huidige technologie, en economische overwegingen, wanneer geleid door de concepten en principes die hierin zijn beschreven gemakkelijk in staat zal zijn tot het genereren van dergelijke software instructies en programma's en IC's met minimaal experimenteren.

BE2018/5781

De samenvatting van de beschrijving wordt verschaft om de lezer in staat te stellen snel achter de aard van de technische beschrijving te komen. Het wordt ingediend in de veronderstelling dat het niet zal worden gebruikt om de conclusies te interpreteren of de beschermingsomvang daarvan te beperken. Louter het feit dat zekere maatregelen worden benoemd in onderling verschillende conclusies geeft niet aan dat een combinatie van deze maatregelen niet kan worden gebruikt voor een voordeel. Een groot aantal varianten zal duidelijk zijn voor de vakman. Alle varianten worden geacht te zijn omvat binnen de beschermingsomvang van de uitvinding zoals gedefinieerd in de hierna volgende conclusies.

Claims

1. Computer-geïmplementeerde werkwijze voor het gebruik maken van nabije beeldopnameapparaten voor het opnemen van beelddata die representatief zijn voor een object vanuit meerde perspectieven, waarbij de werkwijze omvat:

het opnemen, door een eerste beeldopnameapparaat, van eerste beelddata die representatief zijn voor een object vanuit een eerste perspectief;

het bepalen, door een processor, of een tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat; en wanneer het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het versturen van een verzoek aan het tweede beeldopnameapparaat voor tweede beelddata die representatief zijn voor het object vanuit een tweede perspectief, waarbij de eerste beelddata en de tweede beelddata combineerbaar zijn om een samengestelde representatie van het object te vormen.

2. Computer-geïmplementeerde werkwijze volgens conclusie 1, waarbij het eerste beeldopnameapparaat een heads-up display samenstel is.

3. Computer-geïmplementeerde werkwijze volgens conclusie 1 of 2, waarbij het eerste beeldopnameapparaat een eerste heads-up display samenstel is dat geassocieerd wordt met een eerste gebruiker, en het tweede beeldopnameapparaat een tweede heads-up display samenstel is dat geassocieerd wordt met een tweede gebruiker.

4. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, waarbij het eerste beeldopnameapparaat een mobiel apparaat is dat geassocieerd wordt met een eerste gebruiker en het tweede beeldopnameapparaat een stationair apparaat is.

BE2018/5781

5. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, verder omvattende:

het ontvangen van een gebruikersverzoek om beelddata vast te leggen die representatief zijn voor het object; en het activeren (triggering) van het eerste beeldopnameapparaat om eerste beelddata vast te leggen op basis van het gebruikersverzoek.

6. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, verder omvattende:

het detecteren, door een sensor, dat het object momenteel in een doellocatie of binnen een doelbereik is om te dimensioneren; en het activeren, door de processor, van het eerste beeldopnameapparaat om de eerste beelddata vast te leggen op basis van dat het object in de doellocatie of het doelbereik is.

7. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, waarbij het bepalen of het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat omvat:

het ontvangen, door een processor, vanaf het eerste beeldopnameapparaat, van data die indicatief zijn voor een positie van het eerste beeldopnameapparaat;

het ontvangen, door een processor, vanaf het tweede beeldopnameapparaat, van data die indicatief zijn voor een positie van het tweede beeldopnameapparaat;

het berekenen, door een processor, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat; en

BE2018/5781 het bepalen, door een processor, of de berekende afstand tussen het eerste beeldopnameapparaat en tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is.

8. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, waarbij het bepalen of tweede beeldopnameapparaat in de nabijheid van eerste beeldopnameapparaat is omvat:

het ontvangen, door een processor, van een vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF blink heeft ontvangen die is verstuurd door het eerste beeldopnameapparaat;

het bepalen, door een processor, op basis van de indicatie van de vaste RFID lezer, van een positie van het eerste beeldopnameapparaat;

het ontvangen, door een processor, vanaf de vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje heeft ontvangen die is verstuurd door het tweede beeldopnameapparaat;

het bepalen, door een processor, op basis van de indicatie van de vaste RFID lezer, van de positie van het tweede beeldopnameapparaat;

het berekenen, door een processor, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat; en het bepalen, door een processor, of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is.

9. Computer-geïmplementeerde werkwijze volgens één van de voorgaande conclusies, waarbij het bepalen of het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat omvat:

BE2018/5781 het detecteren, door het eerste beeldopnameapparaat, van een kortbereik- (short range) draadloos signaal, dat is verstuurd door het tweede beeldopnameapparaat; en het bepalen, op basis van het gedetecteerde kortbereik- draadloze signaal, dat het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat.

10. Computer-geïmplementeerde werkwijze volgens een van de voorgaande conclusies, verder omvattende:

het combineren van de eerste beelddata en de tweede beelddata om een driedimensionale puntenwolk (point cloud) te maken (rendering); en het dimensioneren van het object gebruikmakend van de driedimensionale puntenwolk.

11. Systeem voor het gebruik maken van nabije beeldopnameapparaten voor het opnemen van beelddata die representatief zijn voor een object vanuit meerdere perspectieven, waarbij het systeem omvat:

een meervoudig aantal beeldopnameapparaten;

geheugen geconfigureerd om door de computer uitvoerbare instructies op te slaan; en een processor geconfigureerd om samen te werken met het meervoudig aantal beeldopnameapparaten en het geheugen, en geconfigureerd om de door de computer uitvoerbare instructies uit te voeren om de processor aan te zetten tot:

het bepalen of een tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat; en wanneer het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat, het versturen van een

BE2018/5781 verzoek aan het tweede beeldopnameapparaat om tweede beelddata die representatief zijn voor het object vanuit een tweede perspectief, waarbij de eerste beelddata en de tweede beelddata combineerbaar zijn om een samengestelde representatie van het object te vormen.

12. Systeem volgens conclusie 11, waarbij het eerste beeldopnameapparaat een heads-up display samenstel is.

13. Systeem volgens conclusie 11 of 12, waarbij het eerste beeldopnameapparaat een eerste heads-up display samenstel is geassocieerd met een eerste gebruiker en het tweede beeldopnameapparaat een tweede heads-up display samenstel is geassocieerd met een tweede gebruiker.

14. Systeem volgens één van de voorgaande conclusies 11-13, waarbij het eerste beeldopnameapparaat een mobiel apparaat is, en het tweede beeldopnameapparaat een stationair apparaat is.

15. Systeem volgens één van de voorgaande conclusies 11-14, waarbij de door de computer uitvoerbare instructies, wanneer uitgevoerd, de processor aanzetten tot:

het ontvangen van een gebruikersverzoek om beelddata vast te leggen die representatief zijn voor het object; en het activeren van het eerste beeldopnameapparaat om de eerste beelddata vast te leggen op basis van het gebruikersverzoek.

16. Systeem volgens één van de voorgaande conclusie 11-15, waarbij de processor is geconfigureerd om samen te werken met een sensor, en waarbij de door de computer uitvoerbare instructies, wanneer uitgevoerd, de processor aanzetten tot:

het detecteren, door de sensor, dat het object momenteel in een doellocatie of binnen doelbereik is om te dimensioneren; en

BE2018/5781 het activeren van het eerste beeldopnameapparaat om de eerste beelddata vast te leggen op basis van dat het object in de doellocatie of het doelbereik is.

17. Systeem volgens één van de voorgaande conclusies 11-16, waarbij de door de computer uitvoerbare instructies, wanneer uitgevoerd, de processor aanzetten tot:

het ontvangen, vanaf een eerste beeldopnameapparaat, van data die indicatief zijn voor een positie van het eerste beeldopnameapparaat;

het ontvangen, van het tweede beeldopnameapparaat, van data die indicatief zijn voor een positie van het tweede beeldopnameapparaat;

het berekenen, op basis van de positie van het eerste beeldopnameapparaat en de positie van het tweede beeldopnameapparaat, van een afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat; en het bepalen of de berekende afstand tussen het eerste beeldopnameapparaat en het tweede beeldopnameapparaat binnen een nabijheidsafstandsdrempelwaarde is.

18. Systeem volgens één van de voorgaande conclusies 11-17, waarbij de door computer uitvoerbare instructies, wanneer uitgevoerd, de processor aanzetten tot:

het ontvangen, vanaf een vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje verstuurd door het eerste beeldopnameapparaat heeft ontvangen;

het bepalen, op basis van de indicatie van de vaste RFID lezer, van een positie van het eerste beeldopnameapparaat;

het ontvangen, van de vaste RFID lezer, van een indicatie dat de vaste RFID lezer een RF signaaltje verstuurd door het tweede beeldopnameapparaat heeft ontvangen;

BE2018/5781 het bepalen, op basis van de indicatie van de vaste RFID lezer, van de positie van het tweede beeldopnameapparaat;

19. Systeem volgens één van de voorgaande conclusies 11-18, waarbij de door de computer uitvoerbare instructies, de processor aanzetten tot:

het detecteren, door het eerste beeldopnameapparaat, van een kortbereik- draadloos signaal verstuurd door het tweede beeldopnameapparaat; en het bepalen, op basis van het gedetecteerde kortbereik- draadloze signaal, dat het tweede beeldopnameapparaat in de nabijheid is van het eerste beeldopnameapparaat.

20. Systeem volgens één van de voorgaande conclusies 11-19, waarbij de door de computer uitvoerbare instructies, wanneer uitgevoerd, de processor aanzetten tot het:

het combineren van de eerste beelddata en de tweede beelddata om een driedimensionale puntenwolk te vormen; en het dimensioneren van het object gebruikmakend van de driedimensionale puntenwolk.