DE102020210133A1 - Data glasses system and method for operating a data glasses system - Google Patents

Data glasses system and method for operating a data glasses system Download PDF

Info

Publication number
DE102020210133A1
DE102020210133A1 DE102020210133.7A DE102020210133A DE102020210133A1 DE 102020210133 A1 DE102020210133 A1 DE 102020210133A1 DE 102020210133 A DE102020210133 A DE 102020210133A DE 102020210133 A1 DE102020210133 A1 DE 102020210133A1
Authority
DE
Germany
Prior art keywords
data glasses
light
glasses system
camera
light source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102020210133.7A
Other languages
German (de)
Inventor
Thomas Alexander Schlebusch
Andreas Petersen
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102020210133.7A priority Critical patent/DE102020210133A1/en
Publication of DE102020210133A1 publication Critical patent/DE102020210133A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0325—Detection arrangements using opto-electronic means using a plurality of light emitters or reflectors or a plurality of detectors forming a reference frame from which to derive the orientation of the object, e.g. by triangulation or on the basis of reference deformation in the picked up image
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
    • G01S5/163—Determination of attitude
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Optical Communication System (AREA)

Abstract

Die vorliegende Erfindung schafft ein Datenbrillensystem (10), umfassend zumindest einen optischen Bakensender (1) mit zumindest einer Lichtquelle (LQ), mit welcher ein Lichtsignal aussendbar ist; eine Datenbrille (DB) mit einer Detektoreinrichtung (D), mittels welcher das Licht der Lichtquelle (LQ) über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge detektierbar ist; und eine Auswerteeinrichtung (AE), mit welcher eine Information über das detektierte Licht in diesem erkennbar und auswertbar ist, wobei der optische Bakensender (1) in einer Umgebung der Datenbrille (DB) und/oder an einem Objekt positionierbar ist.The present invention creates a data glasses system (10), comprising at least one optical beacon transmitter (1) with at least one light source (LQ) with which a light signal can be emitted; data glasses (DB) with a detector device (D) by means of which the light of the light source (LQ) can be detected over a period of time and/or over at least one specific wavelength; and an evaluation device (AE) with which information about the detected light can be recognized and evaluated therein, the optical beacon transmitter (1) being positionable in the vicinity of the data glasses (DB) and/or on an object.

Description

Die vorliegende Erfindung betrifft ein Datenbrillensystem und ein Verfahren zum Betreiben eines Datenbrillensystems.The present invention relates to a data glasses system and a method for operating a data glasses system.

Stand der TechnikState of the art

Übliche teiltransparente Augmented Reality (AR) Datenbrillen überlagern meist virtuelle Inhalte einem natürlich wahrgenommenen Bild des Umfelds des Nutzers. Je nach Anwendungsfeld der AR-Brille kann eine Interaktion zwischen virtuellen Inhalten und realen Objekten wünschenswert sein, beispielsweise wenn ein Nutzer Informationen oder Kontrollmöglichkeiten zu realen Objekten angezeigt bekommen haben möchte.Conventional partially transparent augmented reality (AR) data glasses usually overlay virtual content on a naturally perceived image of the user's environment. Depending on the field of application of the AR glasses, an interaction between virtual content and real objects may be desirable, for example if a user would like information or control options for real objects to be displayed.

Dazu ist es meist erforderlich, dass die Datenbrille die realen Objekte erfasst. Dieser Schritt erfolgt meist durch eine dem Umfeld zugewandte Welt-Kamera. Anschließend erfolgt eine Objekterkennung im Bild der Weltkamera. Bekannt sind dazu Bildverarbeitungsalgorithmen, beispielsweise auf Basis der Deep Neural Network-Architekturen LeNet oder ResNet.This usually requires the data glasses to capture the real objects. This step is usually carried out by a world camera facing the environment. Object recognition then takes place in the image of the world camera. Image processing algorithms are known for this purpose, for example based on the deep neural network architectures LeNet or ResNet.

Darüber hinaus sind QR-Codes bekannt, um weitergehende Informationen über mobile Endgeräte abrufbar zu machen. Allerdings können QR-Codes aufgrund der endlichen Auflösung der Kameras nur im Nahfeld der Kamera genutzt werden. Eine entfernte Positionierung, beispielsweise auf einem Plakat auf einer Hauswand, ist in der Regel nicht möglich. Das vorliegende erfindungsgemäße System ist hingegen auch in diesen Szenarien anwendbar, da die Informationsübertragung nicht zwingend durch einen räumlichen, sondern vor allem durch einen zeitlichen Kontrast stattfinden kann.In addition, QR codes are known to make further information available via mobile devices. However, due to the finite resolution of the cameras, QR codes can only be used in the near field of the camera. A remote positioning, for example on a poster on a house wall, is usually not possible. In contrast, the present system according to the invention can also be used in these scenarios, since the information transmission cannot necessarily take place through a spatial contrast, but above all through a temporal contrast.

Ebenso bekannt sind infrarote Datenübertragungsverfahren wie IrDA oder auch hochfrequente Modulation von LED-Straßenlaternen zur Übertragung von Informationen an Kraftfahrzeuge. Darüber hinaus sind Okulografiesysteme bekannt, die über verschiedene Verfahren den Blickwinkel des Betrachters ermitteln können. Ebenso sind Verfahren bekannt, die unter Verwendung eines Okulografiesystems, und einer sogenannten Welt-Kamera, die ebenso wie der Benutzer in die Umgebung schaut, und einer individuellen Kalibrierung den Punkt im Welt-Kamera-Bild ermittelt, auf das der Nutzer gerade schaut.Also known are infrared data transmission methods such as IrDA or high-frequency modulation of LED street lamps for transmitting information to motor vehicles. In addition, oculography systems are known which can determine the viewing angle of the viewer using various methods. Methods are also known that use an oculography system and a so-called world camera, which looks at the environment just like the user, and an individual calibration to determine the point in the world camera image that the user is currently looking at.

In der DE 10 2015 213 376 A1 wird eine Projektionsvorrichtung für eine Datenbrille sowie ein Verfahren zum Betreiben dieser beschrieben, wobei die Projektionsvorrichtung einen Lichtstrahl auf ein holografisches Element in einem Brillenglas sendet.In the DE 10 2015 213 376 A1 describes a projection device for data glasses and a method for operating them, the projection device sending a light beam onto a holographic element in a spectacle lens.

Die US 10341352 beschreibt ein System, in welchem ein unsichtbares Bakensignal übermittelt werden kann.the US10341352 describes a system in which an invisible beacon signal can be transmitted.

Offenbarung der ErfindungDisclosure of Invention

Die vorliegende Erfindung schafft ein Datenbrillensystem nach Anspruch 1 und ein Verfahren zum Betreiben eines Datenbrillensystems nach Anspruch 10.The present invention provides a data glasses system according to claim 1 and a method for operating a data glasses system according to claim 10.

Bevorzugte Weiterbildungen sind Gegenstand der Unteransprüche.Preferred developments are the subject of the dependent claims.

Vorteile der ErfindungAdvantages of the Invention

Die der vorliegenden Erfindung zugrunde liegende Idee besteht darin, ein Datenbrillensystem sowie ein Verfahren zum Betreiben eines Datenbrillensystems anzugeben, wodurch Informationen über Objekte und/oder eine Umgebung eines Nutzers einer Datenbrille an diese Datenbrille übermittelt werden können. Die Objekte und/oder Bereiche in der Umgebung können mit Bakensendern versehen werden.The idea on which the present invention is based is to specify a data glasses system and a method for operating a data glasses system, whereby information about objects and/or an environment of a user of data glasses can be transmitted to these data glasses. The objects and/or areas in the environment can be provided with beacon transmitters.

Erfindungsgemäß umfasst das Datenbrillensystem zumindest einen optischen Bakensender mit zumindest einer Lichtquelle, mit welcher ein Lichtsignal aussendbar ist; eine Datenbrille mit einer Detektoreinrichtung, mittels welcher das Licht der Lichtquelle über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge detektierbar ist; und eine Auswerteeinrichtung, mit welcher eine Information über das detektierte Lichtsignal in diesem erkennbar und auswertbar ist, wobei der optische Bakensender in einer Umgebung der Datenbrille und/oder an einem Objekt positionierbar ist.According to the invention, the data glasses system comprises at least one optical beacon transmitter with at least one light source with which a light signal can be emitted; data glasses with a detector device, by means of which the light of the light source can be detected over a period of time and/or over at least one specific wavelength; and an evaluation device with which information about the detected light signal can be identified and evaluated in the latter, the optical beacon transmitter being positionable in an area surrounding the data glasses and/or on an object.

Ein Schwerpunkt des erfindungsgemäßen Datenbrillensystems kann in der Kennzeichnung von Objekten und/oder der Umgebung liegen, wo der eine oder mehrere Bakensender angebracht oder positioniert sein können.One focus of the data glasses system according to the invention can be the identification of objects and/or the environment where the one or more beacon transmitters can be attached or positioned.

Eine bekannte und in üblicher Weise durchgeführte Objekterkennung kann meist energieintensiv sein und ein umfassendes Neuronales Netzwerk benötigen und kann gleichartige Objekte nicht oder schwer voneinander unterscheiden.A known object recognition, which is carried out in the usual way, can usually be energy-intensive and require a comprehensive neural network, and it is difficult or impossible to distinguish objects of the same type from one another.

Die Information über das detektierte Licht kann eine Eigenschaft oder Beschaffenheit des Objekts oder der Umgebung, wo der Bakensender angeordnet ist, beinhalten. Dabei kann die Information in einer bestimmten Pulsfolge, etwa mit einer bestimmten Zeitsequenz von Lichtpulsen, Pulsdauer und/oder Pausen zwischen diesen, umfasst sein. Auch die Frequenz oder Variation der Frequenz sowie Dauer von Pulsen in der jeweiligen Frequenz kann eine Kodierung des Lichts darstellen, wodurch eine Information an die Datenbrille übermittelbar sein kann. Die betreffenden Pulsmuster in Zeit und Frequenz können in der Auswerteeinrichtung vorgespeichert sein oder von einer perifären Datenbank abgerufen werden.The information about the detected light can include a property or condition of the object or the environment where the beacon transmitter is located. The information can be included in a specific pulse sequence, for example with a specific time sequence of light pulses, pulse duration and/or pauses between them. Also the frequency or variation of the frequency as well as the duration of pulses in the respective frequency can represent a coding of the light, whereby information can be transmitted to the data glasses. The relevant pulse patterns in terms of time and frequency can be pre-stored in the evaluation device or can be retrieved from a peripheral database.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Lichtquelle dazu eingerichtet, Licht in einem nahinfraroten Wellenlängenbereich abzustrahlen.According to a preferred embodiment of the data glasses system, the light source is set up to emit light in a near-infrared wavelength range.

Durch den nahinfraroten Wellenlängenbereich kann das Signal von dem Bakensender vorteilhaft für den Nutzer und andere Personen unsichtbar an die Datenbrille übermittelt werden.Due to the near-infrared wavelength range, the signal from the beacon transmitter can be transmitted to the data glasses in an advantageous manner for the user and other people.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Lichtquelle dazu eingerichtet, das Licht als eine Pulsfolge mit einer vorbestimmten Taktrate abzustrahlen. Dabei kann es sich um eine Dauer der 1 oder 0 einer allgemeinen Folge wie beispielsweise 0110001010010110 oder andere handeln.According to a preferred embodiment of the data glasses system, the light source is set up to emit the light as a pulse train with a predetermined clock rate. This can be a duration of 1 or 0 of a general sequence such as 0110001010010110 or others.

Das genannte System aus optischen Bakensendern kann eine für den Menschen nicht sichtbare optische Strahlung, beispielsweise im Bereich des nahen Infrarots zwischen 750-900 nm, kodierte Pulsfolgen aussenden, die von einem Detektor, etwa einer Weltkamera erfasst werden können und über die in der Pulsfolge enthaltenen Kennung eine Identifizierung des Objekts oder der Umgebung ermöglichen und diese an die Datenbrille und somit erkennbar für den Nutzer übermitteln. Die Datenbrille kann diese Information beispielsweise bildlich im Sichtfeld des Nutzers darstellen.Said system of optical beacon transmitters can emit optical radiation that is not visible to humans, for example in the near infrared range between 750-900 nm, encoded pulse sequences that can be detected by a detector, such as a world camera, and via the pulse sequence contained in it Identifier enable identification of the object or the environment and transmit this to the data glasses and thus recognizable for the user. The data glasses can display this information, for example, in the user's field of vision.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Lichtquelle dazu eingerichtet eine Pulsfolge in vorbestimmten Wellenlängen abzustrahlen, beispielsweise rot, grün und blau abgestimmt auf die Mittenfrequenzen üblicher Bayes-Filter für Farbkameras.According to a preferred embodiment of the data glasses system, the light source is set up to emit a pulse sequence in predetermined wavelengths, for example red, green and blue tuned to the center frequencies of conventional Bayes filters for color cameras.

Die vorbestimmte(n) Wellenlänge(n) kann dabei helfen, die zum jeweiligen System zugehörigen Bakensender zu identifizieren bzw. mehr als ein Bit pro Takt zu übertragen.The predetermined wavelength(s) can help to identify the beacon transmitters associated with the respective system or to transmit more than one bit per cycle.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Lichtquelle, oder wenn der Bakensender eine Mehrzahl von Lichtquellen umfasst, sind diese dazu eingerichtet, zeitlich synchronisiert eine bestimmte Pulsfolge zu erzeugen.According to a preferred embodiment of the data glasses system, the light source, or if the beacon transmitter comprises a plurality of light sources, are set up to generate a specific pulse sequence in a time-synchronized manner.

Die Bakensender können mehrere räumliche oder wellenlängen-separierte Übertrager (Sender) darstellen, und zur Übertragung mehrerer Bits im gleichen Zeitschlitz geeignet sein. Damit kann die notwendige Übertragungszeit bei Verwendung relativ langsam abtastender anwenderorientierter Kamerasensoren signifikant reduziert werden.The beacon transmitters can represent several spatially or wavelength-separated transmitters (transmitters) and can be suitable for the transmission of several bits in the same time slot. In this way, the necessary transmission time can be significantly reduced when using user-oriented camera sensors that scan relatively slowly.

Es kann analog zu Funk-Codierungen wie QAM16, QAM32 die Übertragungszeit einer festen Datenmenge kürzer sein, je mehr Bits pro Code-Symbol übertragen werden. Hier kann beispielhaft eine Information oder ein (Link Adresse) an die Datenbrille übertragen werden. Übliche Weltkameras tasten mit 30 oder 60 Bildern pro Sekunde ab. Gemäß Nyquist-Kriterium darf der Bakensender seinen Zustand nur mit maximal der halben Bildwiederholrate ändern, damit die Codes fehlerfrei rekonstruiert werden können. Anstatt bei einer Kamera mit 30fps also 15 Bit/s mit einer Infrarot-LED zu übertragen, kann ein Array aus etwa 9 LEDs (Lichtquellen) entsprechend 135 Bit/s übertragen und der Nutzer bekommt den augmentierten Inhalt schneller eingeblendet. Das ist wichtig, wenn der Nutzer beispielsweise den Kopf dreht und dadurch die Übertragung unterbricht. Eine kürzere Übertragungszeit stellt eine bessere Nutzererfahrung (schnelle Antwortzeit) und eine höhere Wahrscheinlichkeit für fehlerfreie Übertragung dar. Bei einem Array von 9 LEDs könnte auch eine LED als Taktsignal dienen, wie es beim Flicker-Code für Chip-TAN-Geräte im Onlinebanking üblich ist. Dadurch wird eine Taktsynchronisation zwischen Sender und Empfänger erreicht. Dies ist jedoch nicht notwendig, wenn wie beispielsweise beim UART bzw. EIA-232-Verfahren auf die Dauer eines Start-Bit synchronisiert werden kann. Datenbrillen können leistungsfähige Taktquellen auf Quarzbasis enthalten, sodass ein asynchrones Verfahren (UART) ebenfalls umsetzbar ist und die Takt-LED nur optional ist. Jede der genutzten Lichtquellen kann für eine Taktung genutzt werden. Bei mehreren Lichtquellen kann eine erste Lichtquelle im Takt den Zustand wechseln wohingegen alle weiteren Lichtquellen die Daten repräsentieren können.Analogous to radio coding such as QAM16, QAM32, the transmission time of a fixed amount of data can be shorter the more bits are transmitted per code symbol. Here, for example, information or a (link address) can be transmitted to the data glasses. Conventional world cameras scan at 30 or 60 frames per second. According to the Nyquist criterion, the beacon transmitter may only change its state at a maximum of half the frame rate so that the codes can be reconstructed error-free. Instead of transmitting 15 bit/s with an infrared LED on a camera with 30 fps, an array of around 9 LEDs (light sources) can transmit 135 bit/s and the user gets the augmented content displayed faster. This is important if, for example, the user turns their head and thereby interrupts the transmission. A shorter transmission time represents a better user experience (fast response time) and a higher probability of error-free transmission. With an array of 9 LEDs, one LED could also serve as a clock signal, as is common in the flicker code for chip TAN devices in online banking . This achieves clock synchronization between transmitter and receiver. However, this is not necessary if, for example, with the UART or EIA-232 method, synchronization can be carried out for the duration of a start bit. Data glasses can contain powerful clock sources based on quartz, so that an asynchronous method (UART) can also be implemented and the clock LED is only optional. Each of the light sources used can be used for clocking. In the case of several light sources, a first light source can change state in time, while all other light sources can represent the data.

Generell kann eine zeitgleiche Erfassung mehrerer Bakensender erfolgen, sodass auch Applikationen der Indoor-Navigation ermöglicht werden können.In general, several beacon transmitters can be detected at the same time, so that indoor navigation applications can also be made possible.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems umfasst die Detektoreinrichtung eine Kamera.According to a preferred embodiment of the data glasses system, the detector device includes a camera.

Die Pulsfolge kann mit einer Taktrate oder Wechselfrequenz kleiner als die halbe Abtastrate der verwendeten Kamera kodiert sein, sodass eine sichere Erfassung der Pulsfolge möglich sein kann. Ein Umschaltpunkt der Bakensender-Zustände könnte genau mittig im Integrationsintervall der Kamera liegen. Damit wären umschaltende Pixel für die Kamera „grau“, also mittig zwischen an und aus. Je nach Rauschen, Fertigungstoleranzen etc. würde dann eine 0 oder 1 interpretiert werden können. Bei halber Taktrate kann das Pixel in einem Frame fehlerhaft, im nächsten korrekt im darauffolgenden fehlerhaft, dann wieder korrekt sein. Eine Filterung z.B. mittels Schmitt-Trigger rekonstruiert anschließend die korrekten Schaltzustände.The pulse sequence can be encoded with a clock rate or alternating frequency that is less than half the sampling rate of the camera used, so that the pulse sequence can be reliably detected. A switching point of the beacon transmitter states could lie exactly in the middle of the integration interval of the camera. This means that switching pixels would be "grey" for the camera, i.e. in the middle between on and off. Depending on the noise, manufacturing tolerances, etc., a 0 or 1 could then be interpreted. At half the clock rate, the pixel can be bad in one frame, correct in the next, bad in the next, then correct again. Filtering, for example using a Schmitt trigger, then reconstructs the correct switching states.

Durch Verwendung einer Kamera können mehrere Baken zeitgleich erfasst und räumlich im Bild lokalisiert werden.By using a camera, several beacons can be recorded at the same time and spatially localized in the image.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Kamera dazu eingerichtet, ein Licht in einem infraroten Wellenlängenbereich zu detektieren.According to a preferred embodiment of the data glasses system, the camera is set up to detect light in an infrared wavelength range.

Die Kamera kann im nahinfraroten Wellenlängenbereich sensitiv sein und zur räumlichen Lokalisation des Emitters („Bake“) eingerichtet sein, dabei kann die Information von der Bake als für den Menschen unsichtbar übermittelt werden. Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems die zumindest eine Lichtquelle dazu eingerichtet, eine Pulsfolge zu erzeugen, welche mit einer Taktrate oder Wechselfrequenz kleiner als eine halbe Abtastrate der Kamera kodiert ist.The camera can be sensitive in the near-infrared wavelength range and set up for the spatial localization of the emitter (“beacon”), with the information being transmitted by the beacon as invisible to humans. According to a preferred embodiment of the data glasses system, the at least one light source is set up to generate a pulse sequence which is encoded with a clock rate or alternating frequency that is less than half the scanning rate of the camera.

Eine Taktrate des Bakensenders (Beacons) kann kleiner als die halbe Bildwiederholrate der Kamera liegen (zur Einhaltung des Nyquist-Theorems). Die über das Bakensystem übertragene Information wie beispielsweise Eindeutige Identifier (Kennzeichner) (UUID) oder URLs (Uniform Ressource Locator, z.B. als Link zum Abruf umfangreicher Information) können typischerweise Datenmengenaufweisen, die somit eine mehrsekündige Übertragungszeit bedingen. Das genannte System kann vorteilhaft Bit-Folgen übertragen und ist damit auf den unteren beiden OSI-Schichtebenen zu finden. Das System kann einer Bit-Übertragung durch die Luft (OSI-1) dienen. Wenn eine LED noch einen Rahmen (den Framerahmen) sendet, kann das System bis auf OSI-2 kommen, danach kann der Inhalt der übertragenen Bits interpretiert werden (OSI als open system interconnection model).A clock rate of the beacon transmitter (beacons) can be less than half the frame rate of the camera (to comply with the Nyquist theorem). The information transmitted via the beacon system, such as unique identifiers (UUID) or URLs (Uniform Resource Locator, e.g. as a link for retrieving extensive information) can typically have data volumes, which thus require a transmission time of several seconds. The system mentioned can advantageously transmit bit sequences and can therefore be found on the two lower OSI layer levels. The system can serve an over-the-air (OSI-1) bit transmission. If an LED sends another frame (the frame frame), the system can come up to OSI-2, after which the content of the transmitted bits can be interpreted (OSI as open system interconnection model).

Durch Verwendung einer Kamera kann die Bake ein Array aus Infrarotemittern enthalten, sodass übertragene Symbole oder Informationen durch mehr als einen Zustand zeitgleich kodiert werden können, was die Übertragungsrate des Systems signifikant steigern kann.By using a camera, the beacon can contain an array of infrared emitters so that transmitted symbols or information can be encoded by more than one state at a time, which can significantly increase the transmission rate of the system.

Gemäß einer bevorzugten Ausführungsform des Datenbrillensystems ist die Kamera dazu eingerichtet, eine Mehrzahl von optischen Bakensendern zu erfassen und in einem von der Kamera erzeugten Bild zu lokalisieren.According to a preferred embodiment of the data glasses system, the camera is set up to detect a plurality of optical beacon transmitters and to localize them in an image generated by the camera.

Erfindungsgemäß erfolgt bei dem Verfahren zum Betreiben eines Datenbrillensystems ein Bereitstellen eines erfindungsgemäßen Datenbrillensystems, wobei zumindest ein optischer Bakensender an einem Objekt oder in der Umgebung der Datenbrille angeordnet wird; ein Detektieren des Lichts des Bakensenders durch die Detektoreinrichtung, über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge; ein Erkennen und Auswerten einer Information über das detektierte Licht durch die Auswerteeinrichtung.According to the invention, in the method for operating a data glasses system, a data glasses system according to the invention is provided, with at least one optical beacon transmitter being arranged on an object or in the vicinity of the data glasses; detecting the light of the beacon transmitter by the detector device over a period of time and/or over at least one specific wavelength; recognition and evaluation of information about the detected light by the evaluation device.

Gemäß einer bevorzugten Ausführungsform des Verfahrens wird das Licht mehrerer Bakensender zeitgleich und/oder über verschiedene Wellenlängen detektiert.According to a preferred embodiment of the method, the light of several beacon transmitters is detected simultaneously and/or over different wavelengths.

Der Empfang von Signalen von mehreren Bakensendern gleichzeitig kann ein Ergebnis der räumlichen Auflösung sein, da die Kamera als Detektor genutzt werden kann (anstatt einer Fotodiode wie beim Fernseher zum Empfang etwa von Fernbedienungs-Codes). Die verschiedenen genutzten (empfangenen) Wellenlängen dienen dann zur Erhöhung der Übertragungsgeschwindigkeit bzw. einer in einer definierten Zeit übertragbaren Datenmenge (also eine Datenmenge, die über verschiedene Frequenzen empfangen werden kann).Receiving signals from multiple beacons at the same time can be a result of spatial resolution, as the camera can be used as a detector (instead of a photodiode like a TV to receive remote control codes, for example). The different wavelengths used (received) are then used to increase the transmission speed or the amount of data that can be transmitted in a defined time (i.e. an amount of data that can be received via different frequencies).

Zur Erhöhung der Datenübertragungsrate kann das Objekt und/oder die Umgebung mehrere Bakensender und/oder einen Bakensender mit mehreren Lichtquellen umfassen, sodass in jedem Zeitschritt mehr als ein Bit übertragen werden kann. Die mehrfachen Emitter können zeitlich synchronisiert einen Pulscode darstellen.To increase the data transmission rate, the object and/or the environment can include multiple beacon transmitters and/or one beacon transmitter with multiple light sources, so that more than one bit can be transmitted in each time step. The multiple emitters can display a pulse code synchronized in time.

Das Datenbrillensystem kann sich auch durch die in Verbindung mit dem Verfahren genannten Merkmale und deren Vorteile auszeichnen und umgekehrt.The data glasses system can also be characterized by the features mentioned in connection with the method and their advantages and vice versa.

Weitere Merkmale und Vorteile von Ausführungsformen der Erfindung ergeben sich aus der nachfolgenden Beschreibung mit Bezug auf die beigefügten Zeichnungen.Further features and advantages of embodiments of the invention result from the following description with reference to the attached drawings.

Figurenlistecharacter list

Die vorliegende Erfindung wird nachfolgend anhand des in den schematischen Figuren der Zeichnung angegebenen Ausführungsbeispiels näher erläutert.The present invention is explained in more detail below with reference to the exemplary embodiment specified in the schematic figures of the drawing.

Es zeigen:

  • 1 eine schematische Darstellung einer Datenbrille in einem Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 2a einen optischen Bakensender für ein Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 2b einen optischen Bakensender für ein Datenbrillensystem gemäß einem weiteren Ausführungsbeispiel der vorliegenden Erfindung;
  • 3 ein Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; und
  • 4 eine Blockdarstellung von Verfahrensschritten in einem Verfahren gemäß einem Ausführungsbeispiel der vorliegenden Erfindung.
Show it:
  • 1 a schematic representation of data glasses in a data glasses system according to an embodiment of the present invention;
  • 2a an optical beacon transmitter for a data glasses system according to an embodiment of the present invention;
  • 2 B an optical beacon transmitter for a data glasses system according to another embodiment of the present invention;
  • 3 a data glasses system according to an embodiment of the present invention; and
  • 4 a block diagram of method steps in a method according to an embodiment of the present invention.

In den Figuren bezeichnen gleiche Bezugszeichen gleiche bzw. funktionsgleiche Elemente.In the figures, the same reference symbols denote the same elements or elements with the same function.

1 zeigt eine schematische Darstellung einer Datenbrille in einem Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. 1 shows a schematic representation of data glasses in a data glasses system according to an embodiment of the present invention.

Die Datenbrille DB umfasst eine Detektoreinrichtung D, und möglicherweise auch eine weitere Detektoreinrichtung D2, wobei beide an der Vorderseite (in Sichtrichtung) des Gestells der Datenbrille DB angeordnet sein können und dem Bakensender zugewandt sein können. Mit einer oder beiden Detektoreinrichtungen kann das Licht einer Lichtquelle über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge detektiert werden, und eine Information im Brillenglas für den Nutzer angezeigt werden, etwa an einer bestimmten Position im Bild, beispielsweise auch ein anderes Symbol oder einen bestimmten Bereich füllend oder überlagernd. Die Datenbrille DB kann auch die Auswerteeinrichtung AE aufweisen, mit welcher eine Information über das detektierte Licht in diesem erkennbar und auswertbar ist. Alternativ kann die Auswerteeinrichtung AE auch außerhalb der Datenbrille DB angeordnet sein, etwa in einem zur Datenbrille externen Computer.The data glasses DB comprise a detector device D, and possibly also a further detector device D2, both of which can be arranged on the front side (in the direction of view) of the frame of the data glasses DB and can face the beacon transmitter. With one or both detector devices, the light from a light source can be detected over a period of time and/or over at least one specific wavelength, and information can be displayed in the spectacle lens for the user, for example at a specific position in the image, for example another symbol or a filling or overlapping a specific area. The data glasses DB can also have the evaluation device AE, with which information about the detected light can be recognized and evaluated therein. Alternatively, the evaluation device AE can also be arranged outside the data glasses DB, for example in a computer external to the data glasses.

Die eine oder beide Detektoreinrichtungen D und/oder D2 können jeweils eine oder mehrere Kameras umfassen.One or both detector devices D and/or D2 can each include one or more cameras.

Die Datenbrille DB ist also vorteilhaft das Empfangselement des Systems. Integriert in die Datenbrille kann die Detektoreinrichtung D eine Welt-Kamera umfassen. Diese kann einen Infrarot-Sperrfilter umfassen und verwenden, sodass die Signale des Emitters (Bakensender) unterdrückt oder durchgelassen werden können (der Bakensender kann im infraroten oder im sichtbaren Spektrum arbeiten). Einerseits könnte ein kurzwelliger Emitter im Bereich um 780 nm kombiniert mit einem erst bei größeren Wellenlängen sperrenden Infrarotfilter eingesetzt werden. Alternativ kann eine zweite Kamera D2 eingesetzt werden, die statt eines Infrarot-Sperrfilters einen Langpassfilter besitzt, der alle kürzeren Wellenlängen als etwa 800 nm sperrt und nur langwelliges nahinfrarotes Licht passieren lässt. Alternativ oder ergänzend kann der Bakensender rotes und/oder grünes und/oder blaues Licht verwenden (senden), das auf die in üblichen Kameras verbauten Farbfilter angepasst ist.The data glasses DB are therefore advantageously the receiving element of the system. Integrated into the data glasses, the detector device D can include a world camera. This may include and use an infrared rejection filter so that the signals from the emitter (beacon) can be suppressed or passed (the beacon can operate in the infrared or visible spectrum). On the one hand, a short-wave emitter in the range around 780 nm could be used in combination with an infrared filter that blocks only at longer wavelengths. Alternatively, a second camera D2 can be used, which has a long-pass filter instead of an infrared blocking filter, which blocks all wavelengths shorter than about 800 nm and only allows long-wave near infrared light to pass. Alternatively or additionally, the beacon transmitter can use (transmit) red and/or green and/or blue light that is matched to the color filters installed in conventional cameras.

2a zeigt einen optischen Bakensender für ein Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. 2a 12 shows an optical beacon transmitter for a data glasses system according to an embodiment of the present invention.

Der Bakensender 1 kann eine Lichtquelle LQ umfassen und ein Gehäuse umfassen, etwa quaderförmig. Das zu markierende Objekt OB (durch den Bakensender zu markieren) kann aber auch selbst die Lichtquelle LQ umfassen (Die Lichtquelle kann auch selbst die Bake darstellen), die einen Pulscode emittieren kann, der von der Kamera erfassbar ist.The beacon transmitter 1 can include a light source LQ and include a housing, approximately cuboid. However, the object OB to be marked (to be marked by the beacon transmitter) can itself also include the light source LQ (the light source itself can also represent the beacon), which can emit a pulse code that can be detected by the camera.

2b zeigt einen optischen Bakensender für ein Datenbrillensystem gemäß einem weiteren Ausführungsbeispiel der vorliegenden Erfindung. 2 B 12 shows an optical beacon transmitter for a data glasses system according to a further exemplary embodiment of the present invention.

Das Objekt OB aus der 2a kann auch mehrere Lichtquellen LQ1 bis LQ9 oder weitere umfassen. Das Objekt OB kann selbst eine beliebige Form haben, hierbei quaderförmig dargestellt, und die Bakensender 1a bis 1i können auf diesem in einem bestimmten Muster angeordnet sein. Die jeweilige Bake 1a bis 1i kann eine beliebige Form haben und eine oder mehrere Lichtquellen umfassen und vorteilhaft alle Baken können in die gleiche oder in verschiedene Richtungen ausgerichtet sein. Zur Erhöhung der Datenübertragungsrate kann das Objekt OB mehrere Lichtquellen LQ (Baken) enthalten, sodass in jedem Zeitschritt mehr als ein Bit übertragen werden kann. Die mehrfachen Lichtquellen können zeitlich synchronisiert einen Pulscode abstrahlen/darstellen.The object OB from the 2a can also include several light sources LQ1 to LQ9 or others. The object OB itself can have any shape, in this case shown as a cuboid, and the beacon transmitters 1a to 1i can be arranged on it in a specific pattern. The respective beacon 1a to 1i can have any shape and can comprise one or more light sources, and advantageously all the beacons can be oriented in the same direction or in different directions. To increase the data transmission rate, the object OB can contain several light sources LQ (beacons), so that more than one bit can be transmitted in each time step. The multiple light sources can emit/display a pulse code synchronized in time.

Ein Pulscode von verschiedenen Objekten (Bakensendern) kann so gewählt werden, dass ein Objekt eindeutig anhand seines eindeutigen Pulsmusters zu erkennen ist. Die Informationen zum Objekt können direkt im Pulscode enthalten sein. Der Pulscode kann jedoch auch eine eindeutige Kennzeichnung des Objektes enthalten, über die weitere Informationen aus einer Datenbank abgerufen werden können (z. B. UUID oder URL).A pulse code from various objects (beacon transmitters) can be selected in such a way that an object can be clearly identified based on its unique pulse pattern. The information about the object can be contained directly in the pulse code. However, the pulse code can also contain a unique identifier of the object that can be used to retrieve further information from a database (e.g. UUID or URL).

3 zeigt ein Datenbrillensystem gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. 3 shows a data glasses system according to an embodiment of the present invention.

Das Datenbrillensystem 10 umfasst zumindest einen optischen Bakensender 1 mit zumindest einer Lichtquelle LQ, mit welcher ein Lichtsignal aussendbar ist; eine Datenbrille DB mit einer Detektoreinrichtung D, mittels welcher das Licht der Lichtquelle LQ über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge detektierbar ist; und eine Auswerteeinrichtung AE, mit welcher eine Information über das detektierte Licht in diesem erkennbar und auswertbar ist, wobei der optische Bakensender 1 in einer Umgebung der Datenbrille DB und/oder an einem Objekt positionierbar ist.The data glasses system 10 comprises at least one optical beacon transmitter 1 with at least one light source LQ, with which a light signal can be emitted; data glasses DB with a detector device D, by means of which the light of the light source LQ can be detected over a period of time and/or over at least one specific wavelength; and an evaluation device AE, with which information about the detected light can be recognized and evaluated therein, the optical beacon transmitter 1 being able to be positioned in the vicinity of the data glasses DB and/or on an object.

Der Bakensender 1 des Objektes OB emittiert vorteilhaft pulscode-modulierte infrarote Strahlung, die von der Detektoreinrichtung D der Datenbrille DB empfangen wird. Über ein Datennetzwerk DN kann die Auswerteeinrichtung AE der Datenbrille DB Informationen zum Objekt aus einer Datenbank B abrufen.The beacon transmitter 1 of the object OB advantageously emits pulse-code-modulated infrared radiation, which is received by the detector device D of the data glasses DB. The evaluation device AE of the data glasses DB can retrieve information about the object from a database B via a data network DN.

Bei Verwendung von mehr als einer Lichtquelle kann neben der räumlichen Kodierung des Pulskodes, wie dies 2b zeigt, auch ein Emitter nach 2a verwendet werden, wobei das Emissionsspektrum der Lichtquelle LQ1 jedoch zeitlich veränderbar sein kann. Durch Verwendung einer RGB-LED als Lichtquelle, kann eine besonders einfache Codierung eines Symbols (Information, Objekt, ein Symbol kann signaltheoretisch als Kodierzustand eines Symbols eines Alphabets eines Leitungscodes aufgefasst werden) im Emissionsspektrum der Lichtquelle möglich sein, die kosteneffizient mit Standardkameras erfasst werden kann. Dies kann im sichtbaren Spektrum erfolgen, beispielsweise durch Einsatz von roten, grünen und blauen Lichtquellen in jedem Emitter des Bakensenders oder durch Verwendung von mehreren unsichtbaren Wellenlängen, beispielsweise 830nm und 940nm) oder durch Kombination von sichtbar und unsichtbar.When using more than one light source, in addition to the spatial encoding of the pulse code, like this 2 B shows also an emitter after 2a be used, but the emission spectrum of the light source LQ1 can be changed over time. By using an RGB LED as a light source, a particularly simple coding of a symbol (information, object, a symbol can be understood signal-theoretically as a coding state of a symbol of an alphabet of a line code) in the emission spectrum of the light source is possible, which can be recorded cost-effectively with standard cameras . This can be done in the visible spectrum, for example by using red, green and blue light sources in each beacon transmitter emitter, or by using multiple invisible wavelengths, for example 830nm and 940nm) or by combining visible and invisible.

Um die Wellenlängen beim Detektieren zu separieren (jeweiliger Pulscode und die Dekodierung der übermittelten Information), können entsprechende Farbfilter an der Detektorkamera genutzt werden und dort vorhanden sein. Im sichtbaren Spektrum kann dazu eine Farbfiltermatrix üblicher RGB-Kamera-Chips vorhanden sein. Für die Kombination sichtbar und unsichtbar der Strahlung der Bake(n) kann die Funktion durch eine zusätzliche Grauwertkamera (als weitere Kamera im Gestell) mit vorgesetztem Infrarot-Transmissionsfilter genutzt werden. In order to separate the wavelengths during detection (respective pulse code and the decoding of the transmitted information), corresponding color filters can be used on the detector camera and are available there. For this purpose, a color filter matrix of conventional RGB camera chips can be present in the visible spectrum. For the combination of visible and invisible radiation from the beacon(s), the function can be used with an additional gray value camera (as an additional camera in the frame) with an infrared transmission filter in front.

Mehrere unsichtbare infrarote Wellenlängen können durch mehrere Kameras mit jeweils einem schmalbandigen Infrarot-Transmissionsfilter oder durch eine Kamera mit pixelweisen Infrarot-Bandpassfiltern umgesetzt sein. Daher kann die Datenbrille DB mehrere Kameras umfassen. Eine erfindungsgemäße Kamera könnte beispielsweise durch einen Langpass-Eingangsfilter nur langwelliges Infrarotes Licht empfangen. Die Pixel der Kamera können wiederum schachbrettartig mit Langpass- und Kurzpassfiltern ausgestattet sein, deren Eckfrequenz(en) genau zwischen zwei gewählten infraroten Wellenlängen liegen können. Damit kann die so aufgebaute Infrarotkamera beispielsweise zwei Wellenlängen des Emitters (Bake) trennen. Analog zu einer RGB-Kamera sind selbstverständlich auch mehr als zwei Filter denkbar, wobei besonders vorteilhaft schmalbandige Transmissionsfilter wie beispielsweise Laser-Linienfilter zum Einsatz kommen können.Multiple invisible infrared wavelengths can be transposed by multiple cameras, each with a narrow-band infrared transmission filter, or by a camera with pixel-by-pixel infrared bandpass filters. Therefore, the data glasses DB can include multiple cameras. A camera according to the invention could, for example, only receive long-wave infrared light through a long-pass input filter. The pixels of the camera can in turn be equipped with long-pass and short-pass filters in a chessboard pattern, the corner frequency(s) of which can lie exactly between two selected infrared wavelengths. The infrared camera constructed in this way can, for example, separate two wavelengths of the emitter (beacon). Analogously to an RGB camera, more than two filters are of course also conceivable, with narrow-band transmission filters such as laser line filters being able to be used particularly advantageously.

Der spektrale Zustand eines Emitter-Pixels (einer einzelnen Lichtquelle) ist dabei nicht exklusiv-oder, d.h. ein Pixel kann gleichzeitig mehrere Farbzustände annehmen (rot und grün gibt gelb), die über die Empfangsfilter wieder getrennt werden. Die Bitrate pro Zeitschlitz kann dadurch weiter gesteigert werden.The spectral state of an emitter pixel (an individual light source) is not exclusive-or, i.e. a pixel can simultaneously assume several color states (red and green gives yellow), which are separated again via the reception filter. The bit rate per time slot can be increased further as a result.

Der Abruf (die Auswertung) der Daten kann sofort erfolgen, sobald das System eine aktive Bake erkennt. Die abgerufenen Daten können dann der empfangenen (gesehenen) Umgebung überlagert werden. Das System kann jedoch auch über eine Kopplung mit einem Okulografiesystem verfügen oder selbst ein Okulografiesystem umfassen. Über Weltkamera- und Okulografiesystem kann der Blickpunkt des Nutzers ermittelt werden. Der Abruf und/oder die Anzeige von Informationen zum durch die Bake gekennzeichneten Objekt OB kann auch durch das Okulografiesystem getriggert (ausgelöst) werden, sobald der Blick des Nutzers für einen Moment auf dem Objekt ruht.The data can be retrieved (evaluated) immediately as soon as the system detects an active beacon. The retrieved data can then be overlaid on the received (seen) environment. However, the system can also be coupled to an oculography system or can itself comprise an oculography system. The user's point of view can be determined via the world camera and oculography system. The retrieval and/or display of information about the object OB identified by the beacon can also be triggered (triggered) by the oculography system as soon as the user's gaze rests on the object for a moment.

Neben der Integration der Bake in feste Objekte können auch Datenbrillen selbst mit einem entsprechenden Emitter (Bakensendern 1) versehen werden, sodass auch Benutzer für andere Benutzer identifizierbar werden. Besonders vorteilhaft ist dies beispielsweise bei Integration der Brillenfunktion in einen Schutzhelm, beispielsweise im Bereich der Feuerwehr, sodass trotz Gesichtsschutz die einzelnen Mitarbeiter mit ihrem Funktionsbereich augmentiert werden können. Im privaten Umfeld können auf diese Weise auch Ansprechpartner in einem Kaufhaus identifiziert werden oder Jugendliche untereinander direkt auf Social Media-Sites verweisen.In addition to integrating the beacon into fixed objects, data glasses themselves can also be provided with a corresponding emitter (beacon transmitters 1), so that users can also be identified by other users. This is particularly advantageous, for example, when integrating the glasses function into a protective helmet, for example in the fire department, so that despite face protection, the individual employees can be augmented with their functional area. In the private sphere, contact persons in a department store can also be identified in this way, or young people can refer each other directly to social media sites.

4 zeigt eine Blockdarstellung von Verfahrensschritten in einem Verfahren gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. 4 shows a block diagram of method steps in a method according to an embodiment of the present invention.

Bei dem Verfahren zum Betreiben eines Datenbrillensystems erfolgt ein Bereitstellen S1 eines erfindungsgemäßen Datenbrillensystems, wobei zumindest ein optischer Bakensender an einem Objekt oder in der Umgebung der Datenbrille angeordnet wird; ein Detektieren S2 des Lichts durch die Detektoreinrichtung, über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge; ein Erkennen und Auswerten S3 einer Information über das detektierte Licht durch die Auswerteeinrichtung.In the method for operating a data glasses system, a data glasses system according to the invention is provided S1, with at least one optical beacon transmitter being arranged on an object or in the vicinity of the data glasses; a detection S2 of the light by the detector device over a period of time and/or over at least one specific wavelength; a recognition NEN and evaluation S3 of information about the detected light by the evaluation device.

Obwohl die vorliegende Erfindung anhand des bevorzugten Ausführungsbeispiels vorstehend vollständig beschrieben wurde, ist sie darauf nicht beschränkt, sondern auf vielfältige Art und Weise modifizierbar.Although the present invention has been fully described above with reference to the preferred exemplary embodiment, it is not restricted thereto but can be modified in a variety of ways.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent Literature Cited

  • DE 102015213376 A1 [0006]DE 102015213376 A1 [0006]
  • US 10341352 [0007]US10341352 [0007]

Claims (11)

Datenbrillensystem (10), umfassend - zumindest einen optischen Bakensender (1) mit zumindest einer Lichtquelle (LQ), mit welcher ein Lichtsignal aussendbar ist; - eine Datenbrille (DB) mit einer Detektoreinrichtung (D), mittels welcher das Lichtsignal der Lichtquelle (LQ) über eine bestimmte Zeit und/oder über zumindest eine bestimmte Wellenlänge detektierbar ist; und - eine Auswerteeinrichtung (AE), mit welcher eine Information über das detektierte Lichtsignal in diesem erkennbar und auswertbar ist, wobei der optische Bakensender (1) in einer Umgebung der Datenbrille (DB) und/oder an einem Objekt positionierbar ist.Data glasses system (10), comprising - At least one optical beacon transmitter (1) with at least one light source (LQ) with which a light signal can be emitted; - Data glasses (DB) with a detector device (D) by means of which the light signal of the light source (LQ) can be detected over a specific time and/or over at least one specific wavelength; and - An evaluation device (AE) with which information about the detected light signal can be recognized and evaluated in this, the optical beacon transmitter (1) being able to be positioned in the vicinity of the data glasses (DB) and/or on an object. Datenbrillensystem (10) nach Anspruch 1, bei welchem die Lichtquelle (LQ) dazu eingerichtet ist, Licht in einem nahinfraroten Wellenlängenbereich abzustrahlen.Data glasses system (10) according to claim 1 , in which the light source (LQ) is set up to emit light in a near-infrared wavelength range. Datenbrillensystem (10) nach Anspruch 1 oder 2, bei welchem die Lichtquelle (LQ) dazu eingerichtet ist, das Lichtsignal als eine Pulsfolge mit einer vorbestimmten Taktrate abzustrahlen.Data glasses system (10) according to claim 1 or 2 , In which the light source (LQ) is set up to emit the light signal as a pulse train with a predetermined clock rate. Datenbrillensystem (10) nach einem der Ansprüche 1 bis 3, bei welchem die Lichtquelle (LQ) dazu eingerichtet ist eine Pulsfolge in vorbestimmten Wellenlängen abzustrahlen.Data glasses system (10) according to one of Claims 1 until 3 , in which the light source (LQ) is set up to emit a pulse train in predetermined wavelengths. Datenbrillensystem (10) nach einem der Ansprüche 1 bis 4, bei welcher die Lichtquelle, oder wenn der Bakensender eine Mehrzahl von Lichtquellen (LQ) umfasst, diese dazu eingerichtet ist/sind, zeitlich synchronisiert eine bestimmte Pulsfolge zu erzeugen.Data glasses system (10) according to one of Claims 1 until 4 , in which the light source, or if the beacon transmitter comprises a plurality of light sources (LQ), this is / are set up to generate a specific pulse sequence synchronized in time. Datenbrillensystem (10) nach einem der Ansprüche 1 bis 5, bei welchem die Detektoreinrichtung (D) eine Kamera umfasst.Data glasses system (10) according to one of Claims 1 until 5 , in which the detector device (D) comprises a camera. Datenbrillensystem (10) nach Anspruch 6, bei welchem die Kamera dazu eingerichtet ist, ein Licht in einem infraroten Wellenlängenbereich zu detektieren.Data glasses system (10) according to claim 6 , in which the camera is set up to detect a light in an infrared wavelength range. Datenbrillensystem (10) nach einem der Ansprüche 6 bis 7, bei welchem die zumindest eine Lichtquelle dazu eingerichtet ist, eine Pulsfolge zu erzeugen, welche mit einer Taktrate kleiner als eine halbe Abtastrate der Kamera kodiert ist.Data glasses system (10) according to one of Claims 6 until 7 , in which the at least one light source is set up to generate a pulse train which is encoded at a clock rate of less than half the sampling rate of the camera. Datenbrillensystem (10) nach einem der Ansprüche 6 bis 8, bei welchem die Kamera dazu eingerichtet ist, eine Mehrzahl von optischen Bakensendern (1) zu erfassen und in einem von der Kamera erzeugten Bild zu lokalisieren.Data glasses system (10) according to one of Claims 6 until 8th , in which the camera is set up to detect a plurality of optical beacon transmitters (1) and to localize them in an image generated by the camera. Verfahren zu Betreiben eines Datenbrillensystems (10), umfassend die Schritte: - Bereitstellen (S1) eines Datenbrillensystems (10) nach einem der Ansprüche 1 bis 9, wobei zumindest ein optischer Bakensender (1) an einem Objekt oder in der Umgebung der Datenbrille (DB) angeordnet wird; - Detektieren (S2) des Lichtsignals durch die Detektoreinrichtung (D), über eine Zeit und/oder über zumindest eine bestimmte Wellenlänge; - Erkennen und Auswerten (S3) einer Information über das detektierte Lichtsignal durch die Auswerteeinrichtung (AE).Method for operating a data glasses system (10), comprising the steps: - providing (S1) a data glasses system (10) according to one of Claims 1 until 9 , wherein at least one optical beacon transmitter (1) is arranged on an object or in the vicinity of the data glasses (DB); - Detecting (S2) the light signal by the detector device (D), over a period of time and/or over at least one specific wavelength; - Recognition and evaluation (S3) of information about the detected light signal by the evaluation device (AE). Verfahren nach Anspruch 10, bei welchem das Licht mehrerer Bakensender (1) zeitgleich und/oder über verschiedene Wellenlängen detektiert wird.procedure after claim 10 , in which the light of several beacon transmitters (1) is detected at the same time and/or over different wavelengths.
DE102020210133.7A 2020-08-11 2020-08-11 Data glasses system and method for operating a data glasses system Pending DE102020210133A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102020210133.7A DE102020210133A1 (en) 2020-08-11 2020-08-11 Data glasses system and method for operating a data glasses system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102020210133.7A DE102020210133A1 (en) 2020-08-11 2020-08-11 Data glasses system and method for operating a data glasses system

Publications (1)

Publication Number Publication Date
DE102020210133A1 true DE102020210133A1 (en) 2022-02-17

Family

ID=80000383

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102020210133.7A Pending DE102020210133A1 (en) 2020-08-11 2020-08-11 Data glasses system and method for operating a data glasses system

Country Status (1)

Country Link
DE (1) DE102020210133A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140225916A1 (en) 2013-02-14 2014-08-14 Research In Motion Limited Augmented reality system with encoding beacons
GB2535722A (en) 2015-02-25 2016-08-31 Bae Systems Plc Method and apparatus for data verification in a mixed reality system
DE102015213376A1 (en) 2015-07-16 2017-01-19 Robert Bosch Gmbh Projection device for data glasses, data glasses and methods for operating a projection device for a data glasses
US10341352B2 (en) 2016-02-06 2019-07-02 Maximilian Ralph Peter von Liechtenstein Gaze initiated interaction technique

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140225916A1 (en) 2013-02-14 2014-08-14 Research In Motion Limited Augmented reality system with encoding beacons
GB2535722A (en) 2015-02-25 2016-08-31 Bae Systems Plc Method and apparatus for data verification in a mixed reality system
DE102015213376A1 (en) 2015-07-16 2017-01-19 Robert Bosch Gmbh Projection device for data glasses, data glasses and methods for operating a projection device for a data glasses
US10341352B2 (en) 2016-02-06 2019-07-02 Maximilian Ralph Peter von Liechtenstein Gaze initiated interaction technique

Similar Documents

Publication Publication Date Title
DE102010061512B4 (en) An image capture device, method for capturing images using infrared or visible light and computer readable medium
DE102005061786B4 (en) Traffic light with transmission of additional information
EP3012785B1 (en) Method and evaluation device for evaluating signals of a led status display
DE102011086318A1 (en) Position determination of an object by detection of a position pattern by optical sensor
DE102013200381A1 (en) Method for displaying traffic information in display area of variable plate of vehicle, involves displaying optical code comprising information content of traffic information in coded form, on display surface for image capture device
DE102018125091A1 (en) Device for image frame detection, detection of frozen image frames, systems for detection of frozen image frames, method and vehicle
DE102020210133A1 (en) Data glasses system and method for operating a data glasses system
AT4892U1 (en) DEVICE FOR CONTROLLING FUNCTIONS VIA BIOMETRIC DATA
US9935709B2 (en) Header and payload signals with different optical properties
DE102019209950A1 (en) Method for sunglasses analysis and display adjustment
CN100511302C (en) Surveillance system and method
EP2862045A1 (en) Apparatus and method for identifying a laser pointer
EP2875597A1 (en) System for reading an identification code from a customer loyalty programme from the display of a mobile telephone
WO2015197701A1 (en) Projection device and method for producing a projection image
EP3340199B1 (en) Transmitter/receiver device, messaging module, method for the contactless deactivation of an alarm condition of a messaging module and computer program
DE202016000449U1 (en) Communication system for the remote support of seniors
Mackin et al. Characterizing the spatiotemporal envelope of the human visual system through the visibility of temporal aliasing artifacts
DE102014003937A1 (en) Method for bidirectional communication between a motor vehicle and an infrastructure device and motor vehicle
DE102019106901A1 (en) Communication device of a motor vehicle, illumination device of a motor vehicle for the communication device of a motor vehicle and method for car2car or car2X communication of a motor vehicle
CN111835419B (en) Data secret transmission method for visible light communication of CMOS camera
Boubezari Smartphone to smartphone visible light communications
WO2023006855A1 (en) Display system for displaying confidential image information
DE102018005870A1 (en) System for locating and classifying objects
Aggarwal Visible light optical camera communication for electroencephalography applications
WO2018211082A1 (en) System for iris recognition

Legal Events

Date Code Title Description
R163 Identified publications notified