WO2004013676A2 - Electronic device, in particular a mobile multimedia communications device - Google Patents

Electronic device, in particular a mobile multimedia communications device Download PDF

Info

Publication number
WO2004013676A2
WO2004013676A2 PCT/EP2003/007978 EP0307978W WO2004013676A2 WO 2004013676 A2 WO2004013676 A2 WO 2004013676A2 EP 0307978 W EP0307978 W EP 0307978W WO 2004013676 A2 WO2004013676 A2 WO 2004013676A2
Authority
WO
WIPO (PCT)
Prior art keywords
vrd
image
systems
user
module
Prior art date
Application number
PCT/EP2003/007978
Other languages
German (de)
French (fr)
Other versions
WO2004013676A3 (en
Inventor
Theodor Heutschi
Original Assignee
Theodor Heutschi
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Theodor Heutschi filed Critical Theodor Heutschi
Priority to AU2003260320A priority Critical patent/AU2003260320A1/en
Publication of WO2004013676A2 publication Critical patent/WO2004013676A2/en
Publication of WO2004013676A3 publication Critical patent/WO2004013676A3/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/33—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving directional light or back-light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
    • H04N5/7475—Constructional details of television projection apparatus
    • H04N5/7491—Constructional details of television projection apparatus of head mounted projectors

Definitions

  • the invention relates to an electronic device, in particular a mobile multimedia communication device, according to the preamble of claim 1.
  • Devices of this type for example mobile telephones, PDAs (Personal Digital Assistcnt) devices, MP3 players, etc.
  • PDAs Personal Digital Assistcnt
  • MP3 players etc.
  • These devices are equipped with a display for text and images, which consists of an LCD display (Liquid Crystal Display). Due to its size, this allows only moderate to poor image quality. It is therefore particularly small Devices with small screen sizes are not possible, for example watching movies, videos or a photo album in acceptable quality on the displays. If you use larger displays, the device is not only heavier and bulky, but also more expensive and also requires more power.
  • LCD display Liquid Crystal Display
  • the present invention has for its object to provide a device of the type mentioned, which ensures excellent image quality even with smaller device sizes with an inexpensive production and low power consumption, and which can be used as a universal, mobile communication device.
  • VRD Virtual Retinal Display
  • the device has a station provided for audio, video and data communication for receiving and transmitting signals via a radio network or other transmission devices, the signals via the Bluetooth, the Wireless LAN, the GSM, the GPRS, the EDGE -, the UMTS, the DAB system, the 4G or 5G system or via any telephone cable, radio or satellite are interchangeable, an inexpensive device is created which can have an excellent image quality with a high image resolution, in particular a three-dimensional color image resolution, which can be carried out easily and handily and can therefore be used as a universal multimedia communication device anytime and anywhere.
  • VRD Virtual Retinal Display
  • FIG. 1 shows a principle of an image recording and an image switching provided for a communication device according to the invention
  • FIG. 3 shows a first exemplary embodiment of a communication device
  • FIG. 4 shows a second exemplary embodiment of a communication device
  • FIG. 6 shows a third exemplary embodiment of a communication device
  • FIG. 7 shows a block diagram of the communication device according to the invention.
  • FIG. 10 shows a schematic front view of a variant of a communication device
  • Figure 1 1 is a schematic front view of a variant of a module for a communication device. and 12 shows a schematic front view of a further variant of a module.
  • FIG. 1 schematically shows a principle used in the device according to the invention for conveying three-dimensional images.
  • Two electronic cameras (preferably CCD cameras, photo diode arrays or other other suitable video image recording systems) 11, 12 are used for an image recording, also indicated in FIG. 2, which record a motif, e.g. the aircraft indicated in Fig. 2, from two different angles.
  • the two partial images can be recorded with a vertical or a horizontal shift. This means that the two cameras 1 1, 12 can be arranged vertically or horizontally and spaced apart.
  • the images recorded by the cameras 1 1, 12 are recorded and in real time or at a later point in time via a VRD (Virtual Retinal Display) system 15, 16 in the form of harmless laser beams, by means of light-emitting diodes (LED) or rays generated by other suitable light sources are projected directly onto the retina N of both eyes L, R of the device user (FIG. 1).
  • a VRD Virtual Retinal Display
  • LED light-emitting diodes
  • rays generated by other suitable light sources are projected directly onto the retina N of both eyes L, R of the device user (FIG. 1).
  • the eyes can perceive the image responsible for their perspective, so that the viewer creates a three-dimensional impression of space, as in natural vision.
  • three-dimensional images black and white images or color images
  • three-dimensional image effects can be achieved with a camera.
  • One camera is sufficient for two-dimensional image transmission.
  • More than two cameras could also be used to convey three-dimensional images.
  • small, handy electronic communication devices can also be equipped with at least one VRD system 15 or 16 for processing an image or data source and projecting it onto the eye retina of the user, and thus for excellent image quality with a high image resolution, in particular a three-dimensional color image resolution , which is completely independent of the device size.
  • it can also be a so-called multimedia Act communication device that combines video, music player, PDA (Personal Digital Assistant), laptop and game console in one device.
  • PDA Personal Digital Assistant
  • the audio, video and data communication takes place via one or more communication modules integrated in the device.
  • Data is preferably transmitted via a radio network such as Bluetooth, Wireless LAN, GSM (Global System for Mobile Communication), GPRS (General Packet Radio System), EDGE (Enhanced Data rates for GSM Evolution), UMTS (Universal Mobile Telecommunications System) , DAB (Digital Audio Broadcasting), via so-called 4G (fourth generation) or 5G (fifth generation) or via any other radio system with a transmission speed of 20-10 3 Mb / s, or through other transmission devices - for example via a telephone cable or satellite network.
  • the device can be used worldwide and is able to use MultiBand (multiple frequency spectra such as 900/1800/1900 MHz or other international frequencies).
  • the device can be connected directly to the monitor, mouse, keyboard and printer at home or in the office and can thus be expanded into a work computer.
  • the device with the connection of a keyboard can also be converted into a portable laptop computer.
  • the device can serve as a navigation system. You no longer have to deal with a multitude of electronic devices - PC, laptop, PDA, mobile phone, video and music player etc. - and constantly check where which data is stored. Everything merges into a personal companion that contains all the information and enables access to the Internet and local networks anywhere, anytime.
  • the device can also be used in an especially advantageous manner as an online game console. Two or more online game participants can also talk to each other via a live video conference, for example, and join together to form different game teams worldwide. However, two or more game participants could also be connected via the Internet in the same room or locally separated from one another.
  • the device 1 has a housing 2, which is made of plastic, metal, a metal alloy or a sintered material, so that it is light, stable and inexpensive to manufacture and enables heat dissipation.
  • EMC Electro Magnetic Compatibility
  • ESD Electrostatic Discharge
  • the device 1 is equipped with the two cameras 11, 12 already mentioned and with the two VRD systems 15, 16 which enable three-dimensional image transmission.
  • the cameras 11, 12 are vertically one above the other in this exemplary embodiment, the VRD systems 15, 16 are arranged horizontally next to one another.
  • the fields recorded by the cameras 11, 12 are stored via an image multiplexer 13a (see block diagram according to FIG. 2) on a video recorder or a video buffer T 3b for further processing.
  • the video signals can be forwarded to another device in real time via radio or cable network.
  • 5 shows a block diagram of the double VRD system present in device 1.
  • Each VRD system 15, 16 has a photon generator 17, 18 and a modulator 19, 20.
  • the photon generators 17, 18 generate photons which are modulated in the modulators 19, 20 with video information.
  • the respective modulator 19, 20 aligns the photons horizontally.
  • the photons can also be aligned in reverse order, ie first vertically and then horizontally.
  • the modulated photons are each assembled vertically to a photon grid using a scanner 21, 22.
  • the photons aligned to a raster are projected directly onto the retina N of the device user via a projection lens 23, 24, which gives the impression of an upright virtual image.
  • One photon generator Qr 17, 18 per eye is sufficient for black and white images.
  • three individual generators for red, green, and yellow or blue light are accommodated in the photon generator 17, 18, the video signals modulated in RGY (red-green-yellow) or RGB (red-green-blue) directly on the eye of the Project user.
  • a VRD system 15, 16 is provided for each eye so that a three-dimensional image that is as realistic as possible can be generated.
  • Each VRD system 15, 16 synchronously transmits a field to the retina N of the corresponding eye L, R and thus conveys a spatial image.
  • a video drive system 13c demultiplexes the video signal and assigns the correct flaled images to the right and left VRD systems 15, 16, respectively.
  • the video drive system 13c sends color information to the photon generator 17 i ⁇ > horizontal and vertical synchronizing signals to the modulators 19, 20 and to the scanners 23, 24.
  • a so-called eye tracking system ie system for determining the eye position
  • the exact position of the eye can be determined using an infrared beam or another system suitable for determining the eye position.
  • the position data are fed to the corresponding scanner 21, 22, which then makes the necessary correction so that the photon beam is always placed exactly on the pupil.
  • an electronic circuit, storage media and an energy source are accommodated in a manner not shown in FIG. 3, but mentioned below in connection with FIG. 7.
  • the energy source can e.g. be formed and rechargeable by a battery, a solar cell generator, thermoelectric generators or a mini fuel cell.
  • Solid-state memories (chip memories) are provided as working, data and program memories.
  • the device 1 can also be equipped with a hard disk. Biological and nanomechanical storage could also be used.
  • the device 1 is also equipped with an antenna 27a (this could, however, also be integrated invisibly in the housing 2).
  • a so-called joy stick 3 and buttons are provided as input means.
  • FIG. 4 shows a further variant of a communication device 1 'according to the invention, which essentially corresponds to device 1 according to FIG. 3, and also ensures three-dimensional image transmission.
  • the cameras 11, 12 are arranged horizontally next to one another and the VRD systems 15, 16 are arranged vertically one above the other. assigns.
  • a keyboard 4, as in a mobile phone, is provided as the input means.
  • FIG. 6 shows a third embodiment of a device 1 "according to the invention, which is only intended for two-dimensional image transmission and is therefore only equipped with a VRD system 15 and a camera 11.
  • the device 1" has a sensor screen (touch) as input means Screen) 5.
  • a proximity switch which can be combined with a display and which advantageously has an inductive or capacitive effect, or which switches by sound wave or infrared scanning, and which can be actuated by a magnet, which can only be operated by the person who can operate, could also be considered as input means possesses the corresponding part and knows the corresponding functions.
  • An acoustic signal can also be provided as input means, the device being able to be tuned to a specific frequency, frequency spectrum or voice.
  • Brain waves could also serve as input means, in which one or more detectors can be attached to defined locations on the head or in its vicinity and, depending on the thoughts, can issue the input command.
  • the device In the office or at home, the device can be operated like a laptop or PC with a keyboard and mouse. All peripheral devices can be wired or wireless using radio technologies such as Bluetooth, infrared, wireless LAN or Dect can be operated.
  • FIG. 7 shows a block diagram of a possible device according to the invention, with a possible configuration of the overall system.
  • Various modules are connected to a bus system 30.
  • the two cameras 11, 12 already mentioned are operatively connected to the bus system 30 via a control unit 31.
  • the two VRD systems 15, 16 are connected to the bus system 30 via a control unit 32.
  • the electronic circuit already mentioned advantageously comprises two separate processors 36, 37 (central) provided with their own memory modules 38a (ROM), 38b (RAM) or 39a (ROM), 39b (RAM) Processing Units CPU).
  • the two processors 36, 37 can be operated simultaneously with different operating systems so that the advantages of a pocket operating system (such as Windows CE or Plam OS) and a PC operating system (such as Windows XP, Mac OS, Linux) can be used.
  • the processor 36 with the memory modules 38a, 38b and a real time clock 33 (Real Time Clock RTC) is provided for the PC operating system.
  • the processor 37 with the memory modules 39a, 39b and a real-time clock 34 is responsible for the pocket operating system. Both systems run independently of one another.
  • a so-called resource manager 40 allocates the system resources to the correct processor 36 or 37 depending on the priorities and user information. If, for example, a phone call is to be made or a stored address with the associated telephone number is sought, the user can start his pocket operating system (processor 37) and make calls immediately, but also start the PC operating system (processor 36) during the telephone call , so that he can save time immediately after the phone call by working on a PC (e.g. word processor or spreadsheet lation) can begin.
  • a PC e.g. word processor or spreadsheet lation
  • a process is running on one of the operating systems which carries out the flier archiving of the MMI.
  • the task of this process is also to switch resources on and off and to switch other operating systems on and off.
  • the order of the windows must be made on the display.
  • Another task of the process is to determine which key press is forwarded to which window and thus to which operating system, and which other process data are forwarded to all other peripheral devices in which order.
  • This process is advantageously run on the operating system that requires the least resources and thus has the lowest energy consumption.
  • the Pocket operating system starts and stops the PC operating system, depending on whether or not applications that only run on the PC operating system are required.
  • the device could also be equipped with only one processor and operated with an operating system, or could include more than two processors for more than two operating systems. Further details on the use of at least two operating systems are explained below with reference to FIG. 13.
  • the preferably rechargeable energy source is designated 41 in FIG. It can consist of a battery, a charger, a cell generator, a mini fuel cell or a thermoelectric generator.
  • the overall system can also have a hard disk, a DVD, a CD, an MP3 or another music player (reference number 42 in FIG. 7) with a corresponding control unit 43.
  • SIM subscriber identity module
  • GSM mobile radio service
  • GPRS GPRS
  • UMTS mobile radio service
  • the SIM (subscriber identity module) card is a credit card-sized identification card for the subscriber to a mobile radio service (GSM, GPRS, UMTS etc.) and is generally referred to as a “chip card” or “smart card”. It contains a chip with subscriber-relevant data and algorithms as well as with the subscriber's access authorization to the mobile network. Complex keys and algorithms for security systems can also be stored on the SIM card or on the chip. Due to the constant downsizing of the devices, usually only the chip - removed from the SIM card - is installed in the device.
  • the overall system also includes a receive and transmit status , 27; : ie is formed by one or more radio modules for the wireless transmission of data and information and is connected to the bus system 30 via a control unit 47.
  • the data can for example in Short-range transmission via Bluetooth, wireless LAN and long-range transmission via GPRS, UMTS, DAB, 4G or 5G, or via satellite.
  • An audio interface 49 for a microphone 50 and for loudspeakers 51 is coupled to the radio module and the bus system 30.
  • the receiving and transmitting station 27 could also be formed by an infrared module for data transmission.
  • a position determination system 53 For the reception of satellite data and for a position determination, a position determination system 53 is connected to the bus system via a control unit 54. This position determination system 53 allows route navigation and location-based services to be used via terrestrial radio antennas or satellite systems.
  • the device can also be equipped with a conventional LCD display 55, which is operatively connected to the bus system 30 via a control unit 56.
  • a joy stick 3 and / or a keyboard 4 or a touch screen 5, operatively connected to the bus system 30 via a control unit 58, can be used for the input.
  • FIG. 8 schematically shows a module 10 provided for conveying three-dimensional images, provided with the two cameras 11, 12 and the two VRD systems 15, 16, which is designed as an independent unit and functions autonomously.
  • the module 10 can be connected to various peripheral devices such as an external headphone set 60, a PDA (Personal Digital Assistant) via radio or cable network. Exchange video signals and data with a cellular phone 62, a laptop 63 or other devices.
  • peripheral devices such as an external headphone set 60, a PDA (Personal Digital Assistant) via radio or cable network.
  • a module 10 ' provided for conveying three-dimensional images and provided with the two cameras 11, 12 and the two VRD systems 15, 16 can be connected to a device 1a, e.g. a cellular phone (cell phone) or a PDA, can be connected or attached to it.
  • a device 1a e.g. a cellular phone (cell phone) or a PDA
  • FIG. 10 shows an electronic device 70 which is basically of the same design as that according to FIG. 3 with a 3D communication, in which the input is carried out analogously via a joystick 3 'and buttons 3.
  • the two VRD systems 75, 76 and the two cameras 71, 72 in the context of the invention can advantageously be controlled individually, either manually and / or electronically, about a horizontal and a perpendicular axis Be rotated or swiveled 360 °.
  • the device according to the invention according to FIG. 11 is designed in such a way that it has an interface 77, as a result of which it can be plugged onto a mobile phone (not shown) or a PDA (Personal Digital Assistant).
  • the cameras 71, 72 for recording images and the VRD systems 75, 76 for the transmission of images are in turn arranged to be pivotable, with them individually about an axis and the cameras 71, 72 and the VRD systems 75, 76 are adjustable together about an additional axis of rotation perpendicular thereto.
  • a device is shown, which in turn has an interface 77 and can accordingly be plugged onto a mobile phone or a PDA.
  • the device according to FIG. 12 In contrast to the device according to FIG.
  • the use of the VRD method in the electronic devices according to the invention has the advantage that users with visual impairment (nearsightedness or long-sightedness) or with eye correction, in contrast to reading conventional screens or displays, do not need glasses or other visual aids, since the projection directly onto the Retina (the VRD method is self-correcting, so to speak).
  • Another advantage is the relatively low cost and low power consumption compared to conventional displays. An extremely low laser power (for example less than 100 nW) of the coherent radiation is sufficient to produce a very bright image impression. This advantage is particularly striking in strong sunlight. While LCD displays are difficult or impossible to read even in normal sunlight, VRD systems produce razor-sharp images on the retina even in the strongest sunlight.
  • the invention is sufficiently demonstrated with the above exemplary embodiments. However, it could be illustrated in other variants.
  • the device according to the invention is also particularly suitable for use in a vehicle, be it in a car, a truck, a motor bike or the like, in which it can be used as a mobile device, removable or fixed. When in use, a driver can concentrate on the road and at the same time the device projects a transparent image into his eyes.
  • step 150 The sequence of a possible operating system circuit is shown schematically in FIG. 13.
  • step 150 the pocket operating system is started immediately in accordance with step 151 and the resource manager is switched on.
  • step 152 it is judged whether a PC application is started (running). If not, then the PC operating system is stopped (step 153); If so, a decision is made in step 154 as to whether a new application should be started. If not, the system branches to a query loop. If a new application is to be started (yes), it is judged in step 155 whether a pocket application should be started. If not, then it is logically a PC application.
  • step 157 it is judged whether the PC operating system is running. If not, then the PC operating system must first be started and then the PC application is started in step 158.
  • step 155 If the assessment in step 155 is a pocket
  • step 152 PC application running?
  • the Pocket operating system is hierarchically superior to the PC operating system.
  • step 154 the user can decide whether he wants to end the system with a pocket application (step 155).

Abstract

The invention relates to an electronic device, in particular a mobile multimedia communications device, which is provided with a housing, input means, an electronic circuit, memory means and an energy source. The device comprises at least one VRD (virtual retinal display) system (15, 16) for processing an image or data source and projecting the same in the form of laser beams onto the retina (N) of the user of the device. In addition, said device has a station for audio, video and data communication that receives and transmits signals via a radio network or other transmission devices. Said signals can be exchanged by means of a bluetooth, wireless LAN, GSM, GPRS, EDGE, UMTS, DAB system, 4G or 5G system or via any telephone cable, radio or satellite network. The invention thus provides a cost-effective device, which has an excellent image quality and a high image resolution.

Description

Elektronisches Gerät, insbesondere ein mobiles Multimedia- Electronic device, especially a mobile multimedia
Kommunikationsgerätcommunication device
Die Erfindung betrifft ein elektronisches Gerät, insbesondere ein mobiles Multimedia-Kommunikationsgerät, gemäss dem Oberbegriff des Anspruches 1.The invention relates to an electronic device, in particular a mobile multimedia communication device, according to the preamble of claim 1.
Derartige Geräte, z.B. Mobiltelefone, PDA (Personal Digital Assistcnt)- Geräte, MP3-Player etc. sind in den verschiedensten Ausgestallungen bekannt und auf dem Markt erhältlich. Diese Geräte sind mit einer Anzeige für Text und Bilder ausgestattet, die aus einem LCD Display (Liquid Crys- tal Display) besteht. Dieser erlaubt aufgrund seiner Abmessung nur eine massige bis schlechte Bildqualität. Es ist daher insbesondere bei kleinen Geräten mit kleinen Bildschirmgrössen nicht möglich, beispielsweise Kinofilme, Videos oder ein Fotoalbum in einer akzeptablen Qualität auf den Displays zu betrachten. Verwendet man grössere Displays, so wird das Gerät nicht nur schwerer und sperriger, sondern auch teurer, und braucht zudem mehr Strom.Devices of this type, for example mobile telephones, PDAs (Personal Digital Assistcnt) devices, MP3 players, etc., are known in a wide variety of configurations and are available on the market. These devices are equipped with a display for text and images, which consists of an LCD display (Liquid Crystal Display). Due to its size, this allows only moderate to poor image quality. It is therefore particularly small Devices with small screen sizes are not possible, for example watching movies, videos or a photo album in acceptable quality on the displays. If you use larger displays, the device is not only heavier and bulky, but also more expensive and also requires more power.
Der vorliegenden Erfindung liegt die Aufgabe zugrunde, ein Gerät der eingangs genannten Art zu schaffen, das bei einer kostengünstigen Herstellung und geringem Stromverbrauch eine ausgezeichnete Bildqualität auch bei kleineren Gerätegrössen gewährleistet, und das als ein universelles, mobiles Kommunikationsgerät eingesetzt werden kann.The present invention has for its object to provide a device of the type mentioned, which ensures excellent image quality even with smaller device sizes with an inexpensive production and low power consumption, and which can be used as a universal, mobile communication device.
Diese Aufgabe wird erfindungsgemäss durch ein elektronisches Gerät mit den Merkmalen des Anspruches 1 gelöst.This object is achieved according to the invention by an electronic device with the features of claim 1.
Weitere bevorzugte Ausgestaltungen des erfindungsgemässen Gerätes bilden den Gegenstand der abhängigen Ansprüche.Further preferred refinements of the device according to the invention form the subject of the dependent claims.
Dadurch, dass mindestens ein VRD (Virtual Retinal Display)-System zur Verarbeitung einer Bild- oder Datenquelle und Projizierung derselben in Form von Laserstrahlen, von durch Leuchtdioden (LED) oder durch andere geeignete Lichtquellen erzeugten Strahlen auf die Augennetzhaut des Gerätebenutzers vorhanden ist, und das Gerät eine zur Audio-, Video- und Datenkommunikation vorgesehene Station zum Empfangen und Senden von Signalen über ein Funknetz oder andere Übertragungseinrichtungen aufweist, wobei die Signale über das Bluetooth-, das Wireless LAN-, das GSM-, das GPRS-, das EDGE-, das UMTS-, das DAB-System, das 4G oder 5G-System oder über ein beliebiges Telefonkabel-, Funk- oder Satel- litennetz austauschbar sind, wird ein kostengünstiges Gerät geschaffen, das über eine ausgezeichnete Bildqualität mit einer hohen Bildauflösung, insbesondere einer dreidimensionalen Farbbildauflösung verfügen kann, das leicht und handlich ausgeführt werden kann und somit als ein universelles Multimedia-Kommunikationsgerät jederzeit und überall einsetztbar ist.The fact that there is at least one VRD (Virtual Retinal Display) system for processing an image or data source and projecting it in the form of laser beams, beams generated by light-emitting diodes (LED) or other suitable light sources onto the retina of the device user, and the device has a station provided for audio, video and data communication for receiving and transmitting signals via a radio network or other transmission devices, the signals via the Bluetooth, the Wireless LAN, the GSM, the GPRS, the EDGE -, the UMTS, the DAB system, the 4G or 5G system or via any telephone cable, radio or satellite are interchangeable, an inexpensive device is created which can have an excellent image quality with a high image resolution, in particular a three-dimensional color image resolution, which can be carried out easily and handily and can therefore be used as a universal multimedia communication device anytime and anywhere.
Die Erfindung wird nachfolgend anhand der Zeichnung näher erläutert. Es zeigen rein schematisch:The invention is explained below with reference to the drawing. It shows purely schematically:
Fig. 1 ein für ein erfindungsgemässes Kommunikationsgerät vorgesehenes Prinzip einer Bildaufzeichnung und einer Bildvermittlung;1 shows a principle of an image recording and an image switching provided for a communication device according to the invention;
Fig. 2 ein Blockschema der Bildaufzeichnung;2 shows a block diagram of the image recording;
Fig. 3 ein erstes Ausführungsbeispiel eines Kommunikationsgerätes;3 shows a first exemplary embodiment of a communication device;
Fig. 4 ein zweites Ausführungsbeispiel eines Kommunikationsgerätes;4 shows a second exemplary embodiment of a communication device;
Fig. 5 ein Blockschema der Bildvermittlung;5 is a block diagram of the image switch;
Fig. 6 ein drittes Ausführungsbeispiel eines Kommunikationsgerätes;6 shows a third exemplary embodiment of a communication device;
Fig. 7 ein Blockschema des erfindungsgemässen Kommunikationsgerätes;7 shows a block diagram of the communication device according to the invention;
Fig. 8 ein autarkes, mit einigen Peripheriegeräten wirkverbundenes Multimedia-Modul;8 shows an autonomous multimedia module that is operatively connected to some peripheral devices;
Fig. 9 zwei mit einem Gerät koppelbare Multimedia-Module in schema- tischer Darstellung;9 shows two multimedia modules that can be coupled to a device in a schematic representation;
Fig. 10 eine schematische Vorderansicht einer Variante eines Kommunikationsgerätes;10 shows a schematic front view of a variant of a communication device;
Fig. 1 1 eine schematische Vorderansicht einer Variante eines Moduls für ein Kommunikationsgerät; und Fig. 12 eine schematische Vorderansicht einer weiteren Variante eines Moduls.Figure 1 1 is a schematic front view of a variant of a module for a communication device. and 12 shows a schematic front view of a further variant of a module.
In Fig. l ist schematisch ein beim erfindungsgemässen Gerät verwendetes Prinzip zur Vermittlung von dreidimensionalen Bildern dargestellt. Es werden zwei elektronische Kameras (vorzugsweise CCD-Kameras, Photo- dioden-Arrays oder andere andere geeignete Videobild- Aufnahmesysteme) 1 1 , 12 zu einer auch in Fig. 2 angedeuteten Bildaufnahme verwendet, die ein Motiv, z.B. das in Fig. 2 angedeutete Flugzeug, in zwei verschiedenen Blickwinkeln aufnehmen. Die zwei Teilbilder können dabei mit einer vertikalen oder einer horizontalen Verschiebung aufgenommen werden. Das heisst, die beiden Kameras 1 1 , 12 können vertikal oder horizontal angeordnet und voneinander beabstandet sein. Die von den Kameras 1 1 , 12 aufgenommenen Bilder (stereoskopische Halbbilder) werden aufgezeichnet und in Echtzeit oder zu einem späteren Zeitpunkt über je ein VRD (Virtual Retinal Display)-System 15, 16 in Form von ungefährlichen Laserstrahlen, von durch Leuchtdioden (LED) oder durch andere geeignete Lichtquellen erzeugten Strahlen direkt auf die Augennetzhaut (Retina) N beider Augen L, R des Gerätebenutzers projiziert (Fig. 1). Auf diese Weise können die Augen das jeweils für ihre Perspektive zuständige Bild Avahrnehmen, so dass beim Betrachter ein dreidimensionaler Raumeindruck, wie beim natürlichen Sehen, entsteht.1 schematically shows a principle used in the device according to the invention for conveying three-dimensional images. Two electronic cameras (preferably CCD cameras, photo diode arrays or other other suitable video image recording systems) 11, 12 are used for an image recording, also indicated in FIG. 2, which record a motif, e.g. the aircraft indicated in Fig. 2, from two different angles. The two partial images can be recorded with a vertical or a horizontal shift. This means that the two cameras 1 1, 12 can be arranged vertically or horizontally and spaced apart. The images recorded by the cameras 1 1, 12 (stereoscopic fields) are recorded and in real time or at a later point in time via a VRD (Virtual Retinal Display) system 15, 16 in the form of harmless laser beams, by means of light-emitting diodes (LED) or rays generated by other suitable light sources are projected directly onto the retina N of both eyes L, R of the device user (FIG. 1). In this way, the eyes can perceive the image responsible for their perspective, so that the viewer creates a three-dimensional impression of space, as in natural vision.
Projiziert man mit zwei VRD-Systemen 15, 16 je auf ein Auge L, R des Betrachters die durch die zwei elektronischen Kameras 1 1 , 12 aufgenommenen, synchronisierten Bilder, so lassen sich dreidimensionale Bilder (Schwarz- Weiss-Bilder oder Farbbilder) mit einer hohen Bildauflösung vermitteln. Mit Hilfe von speziellen Aufnahmetechniken können auch mit einer Kamera dreidimensionale Bildeffekte erreicht werden. Für eine zweidimensionale Bildübertragung ist eine Kamera ausreichend.If one projects the VRD systems 15, 16 onto one eye L, R of the viewer, the synchronized images recorded by the two electronic cameras 1 1, 12, then three-dimensional images (black and white images or color images) can be created with one convey high image resolution. With the help of special recording techniques you can also use three-dimensional image effects can be achieved with a camera. One camera is sufficient for two-dimensional image transmission.
Wird lediglich ein zweidimensionales Bild gebraucht, so können sich sogar zwei Benutzer gleichzeitig dieselben Bildinformationen ansehen, wenn über je ein VRD-System ein Licht- oder Photonenstrahl auf die Augen der beiden Benutzer projiziert wird.If only a two-dimensional image is needed, even two users can view the same image information at the same time if a light or photon beam is projected onto the eyes of the two users via a VRD system.
Mit Hilfe von speziellen technischen Mitteln ist es aber auch möglich, mit nur einem VRD-System dreidimensionale Bildeindrücke zu vermitteln.With the help of special technical means, it is also possible to convey three-dimensional image impressions with just one VRD system.
Für die Vermittlung von dreidimensionalen Bildern könnten auch mehr als zwei Kameras eingesetzt werden.More than two cameras could also be used to convey three-dimensional images.
Erfindungsgemäss können auch kleine, handliche elektronische Kommunikationsgeräte mit mindestens einem VRD-System 15 bzw. 16 zur Verarbeitung einer Bild- oder Datenquelle und Projizierung derselben auf die Augennetzhaut des Benutzers ausgerüstet sein, und dadurch über ausgezeichnete Bildqualität mit einer hohen Bildauflösung, insbesondere einer dreidimensionalen Farbbildauflösung, verfügen, die von der Gerätengrösse völlig unabhängig ist.According to the invention, small, handy electronic communication devices can also be equipped with at least one VRD system 15 or 16 for processing an image or data source and projecting it onto the eye retina of the user, and thus for excellent image quality with a high image resolution, in particular a three-dimensional color image resolution , which is completely independent of the device size.
Dies ermöglicht die Schaffung eines mobilen, universell einsetzbaren Kommunikationsgerätes, welches zur Audio-, Video- und Datenkommunikation zwischen zwei oder mehreren Benutzern und/oder zwischen dem Benutzer und externen Computersystemen und/oder Peripheriegeräten vorgesehen ist. Es kann sich jedoch auch um ein sogenanntes Multimedia- Kommunikationsgerät handeln, das Video-, Musikplayer, PDA (Personal Digital Assistent), Laptop und Spielekonsole in einem Gerät vereint.This enables the creation of a mobile, universally usable communication device which is provided for audio, video and data communication between two or more users and / or between the user and external computer systems and / or peripheral devices. However, it can also be a so-called multimedia Act communication device that combines video, music player, PDA (Personal Digital Assistant), laptop and game console in one device.
Die Audio-, Video- und Datenkommunikation erfolgt über ein oder mehrere im Gerät integrierte Kommunikationsmodule. Die Datenübertragung erfolgt vorzugsweise über ein Funknetz wie beispielsweise Bluetooth, Wi- reless LAN, GSM (Global System for Mobile Communication), GPRS (General Packet Radio System), EDGE (Enhanced Data rates for GSM Evolution), UMTS (Universal Mobile Telecommunications System), DAB (Digital Audio Broadcasting), über sogenannte 4G (fourth Generation) oder 5G (fifth Generation) oder über ein anderes beliebiges Funksystem mit einer Übertragungsgeschwindigkeit von 20- 103 Mb/s, oder durch andere Übertragungseinrichtungen - beispielsweise über ein Telefonkabel- oder Satellitennetz. Das Gerät ist weltweit einsetzbar und in der Lage, MultiBand (mehrere Frequenzspektren wie 900/1800/1900 MHz oder andere internationale Frequenzen ) zu verwenden.The audio, video and data communication takes place via one or more communication modules integrated in the device. Data is preferably transmitted via a radio network such as Bluetooth, Wireless LAN, GSM (Global System for Mobile Communication), GPRS (General Packet Radio System), EDGE (Enhanced Data rates for GSM Evolution), UMTS (Universal Mobile Telecommunications System) , DAB (Digital Audio Broadcasting), via so-called 4G (fourth generation) or 5G (fifth generation) or via any other radio system with a transmission speed of 20-10 3 Mb / s, or through other transmission devices - for example via a telephone cable or satellite network. The device can be used worldwide and is able to use MultiBand (multiple frequency spectra such as 900/1800/1900 MHz or other international frequencies).
Das Gerät kann zuhause oder im Büro direkt an den Bildschirm, Maus, Tastatur und Drucker angeschlossen und somit zu einem Arbeitscomputer ausgebaut werden. Das Gerät mit dem Anschluss einer Tastatur kann aber auch zu einem alleinigen portablen Laptop-Computer umgewandelt werden. Im Auto kann das Gerät als ein Navigationssystem dienen. Man muss sich also nicht mehr mit einer Vielzahl von elektronischen Geräten - PC, Laptop, PDA, Mobiltelefon, Video- und Musikplayer etc. - herumschlagen und ständig prüfen, wo welche Daten abgelegt sind. Alles verschmilzt zu einem persönlichen Begleiter, der sämtliche Informationen enthält und überall und jederzeit Zugang zu Internet und lokalen Netzwerken ermöglicht. Mit einer Vielzahl von Kommunikations- und Multimedia-Funktionen kann das Gerät in besonders vorteilhaften Weise auch als eine Online- Spielekonsole eingesetzt werden. Zwei oder mehrere Online- Spieleteilnehmer können sich auch beispielsweise über eine Live- Videokonferenz miteinander unterhalten und sich weltweit zu verschiedenen Spieleteams zusammenschliessen. Es könnten aber auch zwei oder mehrere Spieleteilnehmer im gleichen Raum oder örtlich voneinander getrennt über Internet zusammengeschlossen sein.The device can be connected directly to the monitor, mouse, keyboard and printer at home or in the office and can thus be expanded into a work computer. The device with the connection of a keyboard can also be converted into a portable laptop computer. In the car, the device can serve as a navigation system. You no longer have to deal with a multitude of electronic devices - PC, laptop, PDA, mobile phone, video and music player etc. - and constantly check where which data is stored. Everything merges into a personal companion that contains all the information and enables access to the Internet and local networks anywhere, anytime. With a variety of communication and multimedia functions, the device can also be used in an especially advantageous manner as an online game console. Two or more online game participants can also talk to each other via a live video conference, for example, and join together to form different game teams worldwide. However, two or more game participants could also be connected via the Internet in the same room or locally separated from one another.
Ein Ausführungsbeispiel eines solchen Gerätes 1 ist schematisch in Fig. 3 dargestellt. Das Gerät 1 weist ein Gehäuse 2 auf, welches aus Kunststoff, Metall, einer Metallegierung oder einem Sinterwerkstoff gefertigt ist, damit es leicht, stabil und herstellungstechnisch kostengünstig ist und eine Wärmeableitung ermöglicht. Bei .der Werkstoffwahl werden EMV (Elektro Magnetische Verträglichkeit)- und ESD (Elelectrostatic Discharge)- Vorschriften berücksichtigt. Das Gerät 1 ist mit den bereits erwähnten zwei Kameras 1 1 , 12 sowie mit den zwei VRD-Systemen 15, 16 ausgerüstet, die dreidimensionale Bildübertragung ermöglichen. Die Kameras 1 1 , 12 sind bei diesem Ausführungsbeispiel vertikal übereinander, die VRD- Sy steme 15, 16 horizontal nebeneinander angeordnet.An embodiment of such a device 1 is shown schematically in FIG. 3. The device 1 has a housing 2, which is made of plastic, metal, a metal alloy or a sintered material, so that it is light, stable and inexpensive to manufacture and enables heat dissipation. When choosing the material, EMC (Electro Magnetic Compatibility) and ESD (Elelectrostatic Discharge) regulations are taken into account. The device 1 is equipped with the two cameras 11, 12 already mentioned and with the two VRD systems 15, 16 which enable three-dimensional image transmission. The cameras 11, 12 are vertically one above the other in this exemplary embodiment, the VRD systems 15, 16 are arranged horizontally next to one another.
Die von den Kameras 1 1 , 12 aufgenommenen Halbbilder werden über einen Bild-Multiplexer 13a (siehe Blockschema nach Fig. 2) auf einem Videorecorder oder einem Videobuffer T 3b für die Weiterverarbeitung gespeichert. Die Videosignale können in Echtzeit über Funk- oder Kabelnetz an ein anderes Gerät weitergeleitet werden. Fig. 5 zeigt ein Blockschema des beim Gerät 1 vorhandenen Doppel-VRD- Systems. Jedes VRD-System 15, 16 weist einen Photonengenerator 1 7, 18 und einen Modulator 19, 20 auf. Die Photonengeneratoren 17, 18 erzeugen Photonen, die in den Modulatoren 19, 20 mit Videoinformationen moduliert werden. Der jeweilige Modulator 19, 20 richtet die Photonen horizontal aus. Die Ausrichtung der Photonen kann auch in umgekehrter Reihenfolge geschehen, d.h. zuerst vertikal und dann horizontal. Die modulierten Photonen werden jeweils mit Hilfe eines Scanners 21 , 22 vertikal zu einem Photonen-Raster zusammengesetzt. Die zu einem Raster ausgerichteten Photonen werden über je eine Projektionsoptik 23, 24, die den Eindruck eines aufrecht stehenden virtuellen Bildes vermittelt, direkt auf die Augennetzhaut N des Gerätebenutzers projiziert.The fields recorded by the cameras 11, 12 are stored via an image multiplexer 13a (see block diagram according to FIG. 2) on a video recorder or a video buffer T 3b for further processing. The video signals can be forwarded to another device in real time via radio or cable network. 5 shows a block diagram of the double VRD system present in device 1. Each VRD system 15, 16 has a photon generator 17, 18 and a modulator 19, 20. The photon generators 17, 18 generate photons which are modulated in the modulators 19, 20 with video information. The respective modulator 19, 20 aligns the photons horizontally. The photons can also be aligned in reverse order, ie first vertically and then horizontally. The modulated photons are each assembled vertically to a photon grid using a scanner 21, 22. The photons aligned to a raster are projected directly onto the retina N of the device user via a projection lens 23, 24, which gives the impression of an upright virtual image.
Für Schwarz-Weiss-Bilder reicht ein PhotonengeneratQr 17, 18 pro Auge aus. Bei Farbbildern sind im Photonengenerator 17, 18 drei einzelne Generatoren für rotes, grünes, und gelbes oder blaues Licht, untergebracht, die in RGY (rot-grün-gelb) oder RGB (rot-grün-blau) modulierte Videosignale direkt auf das Auge des Benutzers projizieren. Damit ein möglichst realistisches, dreidimensionales Bild erzeugt werden kann, ist für jedes Auge ein VRD-System 15, 16 vorgesehen. Jedes VRD-System 15, 16 überträgt synchron ein Halbbild auf die Netzhaut N des entsprechenden Auges L, R und vermittelt so ein räumliches Bild. Ein Video Drive System 13c demul- tiplext das Videosignal und ordnet die richtigen Flalbbilder dem rechten bzw. dem linken VRD-System 15, 16 zu. Zusätzlich sendet das Video Drive System 13c Farbinformationen an die Photonengeneratoteli .17 i δ> horizontale und vertikale Synchronsignale an die Modulatoren 19, 20 und an die Scanner 23, 24. Zusätzlich kann ein sogenanntes Eye-Tracking-System (d.h. System zum Ermitteln der Augenposition) 25, 26 für jedes Auge L, R vorgesehen sein. Beispielsweise kann über einen Infrarotstrahl oder ein anderes zur Ermittlung der Λugenposition geeignetes System die genaue Position des Auges festgelegt werden. Die Positionsdaten werden dem entsprechenden Scanner 21 , 22 zugeführt, der dann die nötige Korrektur vornimmt, damit der Photonenstrahl immer exakt auf der Pupille platziert wird.One photon generator Qr 17, 18 per eye is sufficient for black and white images. In the case of color images, three individual generators for red, green, and yellow or blue light are accommodated in the photon generator 17, 18, the video signals modulated in RGY (red-green-yellow) or RGB (red-green-blue) directly on the eye of the Project user. A VRD system 15, 16 is provided for each eye so that a three-dimensional image that is as realistic as possible can be generated. Each VRD system 15, 16 synchronously transmits a field to the retina N of the corresponding eye L, R and thus conveys a spatial image. A video drive system 13c demultiplexes the video signal and assigns the correct flaled images to the right and left VRD systems 15, 16, respectively. In addition, the video drive system 13c sends color information to the photon generator 17 i δ > horizontal and vertical synchronizing signals to the modulators 19, 20 and to the scanners 23, 24. In addition, a so-called eye tracking system (ie system for determining the eye position) 25, 26 can be provided for each eye L, R. For example, the exact position of the eye can be determined using an infrared beam or another system suitable for determining the eye position. The position data are fed to the corresponding scanner 21, 22, which then makes the necessary correction so that the photon beam is always placed exactly on the pupil.
Im Gehäuse 2 des Gerätes 1 ist in einer aus Fig. 3 nicht ersichtlichen, jedoch weiter unten noch in Zusammenhang mit Fig. 7 erwähnten Weise eine elektronische Schaltung, Speichermedien sowie eine Energiequelle untergebracht. Die Energiequelle kann z.B. durch eine Batterie, einen Solarzellengenerator, thermoelektrische Generatoren oder eine Mini- Brennstoffzelle gebildet und aufladbar sein. Als Arbeits-, Daten- und Programmspeicher sind Feststoffspeicher (Chipspeicher) vorgesehen. Aus Kapazitäts- und Kostengründen kann das Gerät l zusätzlich auch mit einer Festplatte ausgerüstet werden. Es könnten auch biologische und nanome- chanische Speicher Anwendung finden. Das Gerät 1 ist ferner mit einer Antenne 27a ausgestattet (diese könnte jedoch auch im Gehäuse 2 unsichtbar integriert werden). Als Eingabemittel ist ein sogenannter Joy-Stick 3 und Tasten vorgesehen.In the housing 2 of the device 1, an electronic circuit, storage media and an energy source are accommodated in a manner not shown in FIG. 3, but mentioned below in connection with FIG. 7. The energy source can e.g. be formed and rechargeable by a battery, a solar cell generator, thermoelectric generators or a mini fuel cell. Solid-state memories (chip memories) are provided as working, data and program memories. For capacity and cost reasons, the device 1 can also be equipped with a hard disk. Biological and nanomechanical storage could also be used. The device 1 is also equipped with an antenna 27a (this could, however, also be integrated invisibly in the housing 2). A so-called joy stick 3 and buttons are provided as input means.
Fig. 4 zeigt eine weitere Variante eines erfindungsgemässen Kommunikationsgerätes 1 ' , welches im wesentlichen dem Gerät 1 nach Fig. 3 entspricht, und ebenfalls eine dreidimensionale Bildvermittlung gewährleistet. Bei diesem Ausführungsbeispiel sind die Kameras 1 1, 12 horizontal nebeneinander und die VRD-Systeme 15, 16 vertikal übereinander ange- ordnet. Als Eingabemittel ist eine Tastatur 4, wie bei einem Mobiltelefon, vorgesehen.FIG. 4 shows a further variant of a communication device 1 'according to the invention, which essentially corresponds to device 1 according to FIG. 3, and also ensures three-dimensional image transmission. In this exemplary embodiment, the cameras 11, 12 are arranged horizontally next to one another and the VRD systems 15, 16 are arranged vertically one above the other. assigns. A keyboard 4, as in a mobile phone, is provided as the input means.
In Fig. 6 ist eine dritte Ausführungsform eines erfindungsgemässen Gerätes 1 " dargestellt, welche lediglich für eine zweidimensionale Bildvermittlung vorgesehen und deswegen nur mit einem VRD-System 15 und einer Kamera 1 1 ausgerüstet ist. Das Gerät 1 " besitzt als Eingabemittel einen Sensorbildschirm (Touch-Screen) 5.6 shows a third embodiment of a device 1 "according to the invention, which is only intended for two-dimensional image transmission and is therefore only equipped with a VRD system 15 and a camera 11. The device 1" has a sensor screen (touch) as input means Screen) 5.
Als Eingabemittel könnte allerdings auch ein mit einer Anzeige kombinierbarer Näherungsschalter in Frage kommen, der mit Vorteil induktiv oder kapazitiv wirkt, oder durch Schallwellen- oder Infrarot-Abtastung schaltet, und der durch einen Magnet betätigt werden kann, welchen nur die Person bedienen kann, die das entsprechende Teil besitzt und die entsprechenden Funktionen kennt. Als Eingabemittel kann auch ein akustisches Signal vorgesehen sein, wobei das Gerät auf eine bestimmte Frequenz, Frequenzspektrum oder Stimme abgestimmt werden kann. Es könnten auch Gehirnströme als Eingabemittel dienen, bei denen man ein oder mehrere Detektoren an definierten Orten am Kopf oder in dessen Umfeld befestigt und je nach Gedanken den Eingabebefehl tätigen kann. Im Büro oder zuhause kann das Gerät wie ein Laptop oder ein PC mit einer Tastatur und Maus bedient werden. Sämtliche Peripheriegeräte können über Kabel oder auch kabellos über Funk-Technologien wie z.B. Bluetooth, Infrarot, Wireless LAN oder Dect bedient werden.However, a proximity switch which can be combined with a display and which advantageously has an inductive or capacitive effect, or which switches by sound wave or infrared scanning, and which can be actuated by a magnet, which can only be operated by the person who can operate, could also be considered as input means possesses the corresponding part and knows the corresponding functions. An acoustic signal can also be provided as input means, the device being able to be tuned to a specific frequency, frequency spectrum or voice. Brain waves could also serve as input means, in which one or more detectors can be attached to defined locations on the head or in its vicinity and, depending on the thoughts, can issue the input command. In the office or at home, the device can be operated like a laptop or PC with a keyboard and mouse. All peripheral devices can be wired or wireless using radio technologies such as Bluetooth, infrared, wireless LAN or Dect can be operated.
Fig. 7 zeigt ein Blockschema eines möglichen erfindungsgemässen Gerätes, mit einer möglichen Konfiguration des Gesamtsystems. An ein Bussystem 30 sind verschiedene Module angeschlossen. Für die Stereobildaufnahme sind die bereits erwähnten zwei Kameras 1 1, 12 über eine Kontrolleinheit 3 1 mit dem Bussystem 30 wirkverbunden.7 shows a block diagram of a possible device according to the invention, with a possible configuration of the overall system. Various modules are connected to a bus system 30. For stereo image recording, the two cameras 11, 12 already mentioned are operatively connected to the bus system 30 via a control unit 31.
Für die dreidimensionale Bilddarstellung auf der Augennetzhaut sind die zwei VRD-Systeme 15, 16 über eine Kontrolleinheit 32. an das Bussystem 30 angeschlossen.For the three-dimensional image display on the retina, the two VRD systems 15, 16 are connected to the bus system 30 via a control unit 32.
Die bereits erwähnte elektronische Schaltung (in Fig. 7 mit 35 bezeichnet) umfasst mit Vorteil zwei separate, mit eigenen Speichermodulen 38a (ROM), 38b (RAM) bzw. 39a (ROM), 39b (RAM) versehene Prozessoren 36, 37 (Central Processing Units CPU). Die zwei Prozessoren 36, 37 lassen sich zugleich mit unterschiedlichen Betriebssystemen betreiben, damit die Vorteile eines Pocket-Betriebssystems (wie z.B. Windows CE oder Plam OS) und eines PC-Betriebssystems (wie z.B. Windows XP, Mac OS, Linux) genutzt werden können. Der Prozessor 36 mit den Speichermodulen 38a, 38b und einer Echtzeituhr 33 (Real Time Clock RTC) ist für das PC- Betriebssystem vorgesehen. Der Prozessor 37 mit den Speichermodulen 39a, 39b und einer Echtzeituhr 34 ist für das Pocket-Betriebssystem zuständig. Beide Systeme laufen unabhängig voneinander. Ein sogenannter Resource Manager 40 teilt abhängig von den Prioritäten und Benutzerangaben die Systemresourcen dem richtigen Prozessor 36 bzw. 37 zu. Ist beispielsweise ein Telefonanruf zu tätigen oder eine gespeicherte Adresse mit zugehöriger Telefonnummer gesucht, kann der Benutzer sein Pocket- Betriebssystem (Prozessor 37) starten und sofort telefonieren, dabei aber bereits während des Telefongespräches das PC-Betriebs,system (Prozessor 36) auch schon starten, damit er zeitsparend nach dem Telefongespräch sofort mit einer Arbeit am PC (z.B. Textverarbeitung oder Tabellenkalku- lation) beginnen kann. Durch selektive Benutzung unterschiedlicher Betriebssysteme und Prozessoren in einem Gerät wird die Benutzer- Akzeptanz für die sogenannten „All in One"-Systeme wesentlich erhöht, der Stromverbrauch gesenkt und somit die Belriebszeit um ein Mehrfaches verlängert.The electronic circuit already mentioned (designated 35 in FIG. 7) advantageously comprises two separate processors 36, 37 (central) provided with their own memory modules 38a (ROM), 38b (RAM) or 39a (ROM), 39b (RAM) Processing Units CPU). The two processors 36, 37 can be operated simultaneously with different operating systems so that the advantages of a pocket operating system (such as Windows CE or Plam OS) and a PC operating system (such as Windows XP, Mac OS, Linux) can be used. The processor 36 with the memory modules 38a, 38b and a real time clock 33 (Real Time Clock RTC) is provided for the PC operating system. The processor 37 with the memory modules 39a, 39b and a real-time clock 34 is responsible for the pocket operating system. Both systems run independently of one another. A so-called resource manager 40 allocates the system resources to the correct processor 36 or 37 depending on the priorities and user information. If, for example, a phone call is to be made or a stored address with the associated telephone number is sought, the user can start his pocket operating system (processor 37) and make calls immediately, but also start the PC operating system (processor 36) during the telephone call , so that he can save time immediately after the phone call by working on a PC (e.g. word processor or spreadsheet lation) can begin. By selective use of different operating systems and processors in one device, the user acceptance for the so-called "All in One" systems is significantly increased, the power consumption is reduced and the operating time is thus extended many times over.
Auf einem der Betriebssysteme läuft ein Prozess, der die Flier-archisierung des MMI vornimmt. Die Aufgabe dieses Prozesses besteht zudem im Zu- und Wegschalten von Ressourcen und im Zu- und Wegschalten von weiteren Betriebssystemen. Die Reihenfolge der Fenster muss auf dem Display vorgenommen werden. Weitere Aufgabe des Prozesses ist es, festzulegen, welcher Tastendruck zu welchem Fenster und somit zu welchem Betriebssystem weitergeleitet wird, und welche anderen Prozessdaten in welcher Reihenfolge an alle anderen Peripheriegeräte weitergeleitet werden.A process is running on one of the operating systems which carries out the flier archiving of the MMI. The task of this process is also to switch resources on and off and to switch other operating systems on and off. The order of the windows must be made on the display. Another task of the process is to determine which key press is forwarded to which window and thus to which operating system, and which other process data are forwarded to all other peripheral devices in which order.
Mit Vorteil lässt man diesen Prozess auf dem Betriebssystem laufen, welches am wenigsten Ressourcen benötigt und somit den kleinsten Energieverbrauch aufweist. Bei der in Fig. 7 dargestellten Konfiguration bedeutet das, dass das Pocket-Betriebssystem dem PC-Betriebssystem hierarchisch übergeordnet wird. Das Pocket-Betriebssystem startet und stoppt das PC- Betriebssystem, je nachdem, ob Applikationen, die nur auf dem PC- Betriebssystem laufen, benötigt werden oder nicht.This process is advantageously run on the operating system that requires the least resources and thus has the lowest energy consumption. In the configuration shown in FIG. 7, this means that the pocket operating system is hierarchically superior to the PC operating system. The Pocket operating system starts and stops the PC operating system, depending on whether or not applications that only run on the PC operating system are required.
Allerdings könnte das Gerät auch mit nur einem Prozessor ausgestattet und mit einem Betriebssystem betrieben werden, oder mehr als zwei Prozessoren für mehr als zwei Betriebssysteme beinhalten. Weitere Details zur Anwendung wenigstens zweier Betriebssysteme sind nachfolgend anhand der Fig. 13 erläutert.However, the device could also be equipped with only one processor and operated with an operating system, or could include more than two processors for more than two operating systems. Further details on the use of at least two operating systems are explained below with reference to FIG. 13.
Die vorzugsweise aufladbare Energiequelle ist in Fig. mit 41 bezeichnet. Sie kann aus einer Batterie, einem Ladegerät, einem Splarzellengenerator, einer Mini-Brennstoffzelle oder einem thermoelektrischen Generator bestehen.The preferably rechargeable energy source is designated 41 in FIG. It can consist of a battery, a charger, a cell generator, a mini fuel cell or a thermoelectric generator.
Das Gesamtsystem kann auch über eine Festplatte, einen DVD-, einen CD-, einen MP3- oder einen anderen Musik-Player (Bezugszeichen 42 in Fig. 7) mit einer entsprechenden Kontrolleinheit 43 verfügen.The overall system can also have a hard disk, a DVD, a CD, an MP3 or another music player (reference number 42 in FIG. 7) with a corresponding control unit 43.
Ferner sind ein oder mehrere SIM-Karten- oder Smart-Kartenleser 45 über eine Kontrolleinheit 46 mit dem Bussystem 30 wirkverbunden. Die SIM (subscriber identity module)-Karte ist eine scheckkartengrosse Identifizierungskarte für den Teilnehmer eines Mobilfunkdienstes (GSM, GPRS, UMTS etc.) und wird im allgemeinen als „Chipkarte" oder „Smart Card" bezeichnet. Sie enthält einen Chip mit teilnehmerrelevanten Daten und Algorithmen sowie mit der Zugangsberechtigung des Teilnehmers zum Mobilfunknetz. Es können auch komplexe Schlüssel und Algorithmen für Sicherheitssysteme auf der SIM-Karte bzw. auf dem Chip gespeichert werden. Bedingt durch die ständige Verkleinerung der Geräte wird meistens nur noch der Chip - von der SIM-Karte entfernt - in das Gerät eingebaut.Furthermore, one or more SIM card or smart card readers 45 are operatively connected to the bus system 30 via a control unit 46. The SIM (subscriber identity module) card is a credit card-sized identification card for the subscriber to a mobile radio service (GSM, GPRS, UMTS etc.) and is generally referred to as a “chip card” or “smart card”. It contains a chip with subscriber-relevant data and algorithms as well as with the subscriber's access authorization to the mobile network. Complex keys and algorithms for security systems can also be stored on the SIM card or on the chip. Due to the constant downsizing of the devices, usually only the chip - removed from the SIM card - is installed in the device.
Das Gesamtsystem enthält ferner eine Empfangs- und Sendestatiön,27; : ie durch ein oder mehrere Funkmodule für die kabellose Übertragung von Daten und Informationen gebildet ist und über eine Kontrolleinheit 47 an das Bussystem 30 angeschlossen ist. Die Daten können beispielsweise im Nahbereich über Bluetooth, Wireless LAN und im Fernbereich über GPRS, UMTS, DAB, 4G oder 5G, oder über Satellit übertragen werden. Eine Audio-Schnittstelle 49 für ein Mikrofon 50 und für Lautsprecher 51 ist mit dem Funkmodul und dem Bussystem 30 gekoppelt. Die Empfangs- und Sendestation 27 könnte auch durch ein Infrarotmodul zur Datenübertragung gebildet sein.The overall system also includes a receive and transmit status , 27; : ie is formed by one or more radio modules for the wireless transmission of data and information and is connected to the bus system 30 via a control unit 47. The data can for example in Short-range transmission via Bluetooth, wireless LAN and long-range transmission via GPRS, UMTS, DAB, 4G or 5G, or via satellite. An audio interface 49 for a microphone 50 and for loudspeakers 51 is coupled to the radio module and the bus system 30. The receiving and transmitting station 27 could also be formed by an infrared module for data transmission.
Für den Empfang von Satelliten-Daten und für eine Positionsbestimmung ist ein Positionsbestimmungssystem 53 über eine Kontrolleinheit 54 mit dem Bussystem verbunden. Durch dieses Positionsbestimmungssystem 53 können über terrestrische Funkantennen oder Satellitensysteme Routen- Navigation und ortsbezogene Dienste genutzt werden.For the reception of satellite data and for a position determination, a position determination system 53 is connected to the bus system via a control unit 54. This position determination system 53 allows route navigation and location-based services to be used via terrestrial radio antennas or satellite systems.
Das Gerät kann zusätzlich auch mit einem konventionellen, über eine Kontrolleinheit 56 mit dem Bussystem 30 wirkverbundenen LCD-Display 55 ausgestattet sein.The device can also be equipped with a conventional LCD display 55, which is operatively connected to the bus system 30 via a control unit 56.
Für die Eingabe kann - wie bereits erwähnt - ein Joy-Stick 3 und/oder eine Tastatur 4 oder ein Sensorbildschirm (Touch-Screen) 5, über eine Kontrolleinheit 58 mit dem Bussystem 30 wirkverbunden, verwendet werden.As already mentioned, a joy stick 3 and / or a keyboard 4 or a touch screen 5, operatively connected to the bus system 30 via a control unit 58, can be used for the input.
Fig. 8 zeigt schematisch ein zur Vermittlung von dreidimensionalen Bildern vorgesehenes, mit den zwei Kameras 1 1 , 12 und den zwei VRD- Systemen 15, 16 versehenes Modul 10, welches als eine selbständige Einheit ausgebildet ist und autonom funktioniert. Über Funk- oder Kabelnetz kann das Modul 10 mit verschiedenen Peripherie-Geräten wie z.B. einem externen Kopfhörer-Set 60, einem PDA (Personal Digital Assistent), ei- nem Cellular Phone (Mobiltelefon) 62, einem Laptop 63 oder anderen Geräten Videosignale und Daten austauschen.8 schematically shows a module 10 provided for conveying three-dimensional images, provided with the two cameras 11, 12 and the two VRD systems 15, 16, which is designed as an independent unit and functions autonomously. The module 10 can be connected to various peripheral devices such as an external headphone set 60, a PDA (Personal Digital Assistant) via radio or cable network. Exchange video signals and data with a cellular phone 62, a laptop 63 or other devices.
Wie in Fig. 9 angedeutet, kann ein zur Vermittlung von dreidimensionalen Bildern vorgesehenes, mit den zwei Kameras 1 1 , 12 und den zwei VRD- Systemen 15, 16 versehenes Modul 10' an ein Gerät l a, z.B. ein Cellular Phone (Mobiltelefon) oder einen PDA, angekoppelt oder auf dieses aufgesteckt werden.As indicated in Fig. 9, a module 10 'provided for conveying three-dimensional images and provided with the two cameras 11, 12 and the two VRD systems 15, 16 can be connected to a device 1a, e.g. a cellular phone (cell phone) or a PDA, can be connected or attached to it.
Fig. 10 zeigt ein im Prinzip gleich ausgebildetes elektronisches Gerät 70 wie dasjenige gemäss Fig. 3 mit einer 3D-Kommunijkation, bei dem die Eingabe analog über einen Joy Stick 3 ' und Tasten 3 erfolgt. Im Unterschied zu dem Gerät nach Fig. 3 können jedoch die beiden VRD-Systeme 75, 76 und die zwei Kameras 71 , 72 im Rahmen der Erfindung einzeln jeweils um eine horizontale und eine senkrecht dazu stehende Achse entweder manuell und/oder elektronisch gesteuert vorteilhaft um 360° gedreht bzw. geschwenkt werden.FIG. 10 shows an electronic device 70 which is basically of the same design as that according to FIG. 3 with a 3D communication, in which the input is carried out analogously via a joystick 3 'and buttons 3. In contrast to the device according to FIG. 3, however, the two VRD systems 75, 76 and the two cameras 71, 72 in the context of the invention can advantageously be controlled individually, either manually and / or electronically, about a horizontal and a perpendicular axis Be rotated or swiveled 360 °.
Das erfindungsgemässe Gerät nach Fig. 1 1 ist derart ausgestaltet, dass es ein Interface 77 aufweist, wodurch es an ein nicht näher gezeigtes Mobiltelefon oder ein PDA (Personal Digital Assistant) aufs,teckbar ist. Die Kameras 71 , 72 für die Aufnahme von Bildern und die VRD-Systems 75, 76 für die Übertragung von Bildern sind wiederum schwenkbar angeordnet, wobei sie einzeln um je eine Achse und jeweils die Kameras 71 , 72 bzw. die VRD-Systeme 75, 76 zusammen um eine zusätzliche senkrecht dazu stehende Drehachse verstellbar sind. Bei dem Ausführungsbeispiel nach Fig. 12 ist ein Gerät gezeigt, welches wiederum ein Interface 77 aufweist und dementsprechend an ein Mobiltelefon oder ein PDA aufsteckbar ist. Im Unterschied zu dem Gerät nach Fig. 1 1 sind jedoch nur entweder zwei Kameras oder zwei VRD-Systeitie oder wie dargestellt ein VRD-System 75 und eine Kamera 71 vothärideh, die jeweils um je eine Achse unabhängig voneinander in eine gewünschte Schwenkposition gebracht werden können. So fern - wie dargestellt - dem Gerät nur je eine Kamera 71 und ein VRD-System 75 zugeordnet sind, kann nur ein zweidimensionales Bild aufgenommen bzw. übertragen werden.The device according to the invention according to FIG. 11 is designed in such a way that it has an interface 77, as a result of which it can be plugged onto a mobile phone (not shown) or a PDA (Personal Digital Assistant). The cameras 71, 72 for recording images and the VRD systems 75, 76 for the transmission of images are in turn arranged to be pivotable, with them individually about an axis and the cameras 71, 72 and the VRD systems 75, 76 are adjustable together about an additional axis of rotation perpendicular thereto. In the exemplary embodiment according to FIG. 12, a device is shown, which in turn has an interface 77 and can accordingly be plugged onto a mobile phone or a PDA. In contrast to the device according to FIG. 11, however, there are only either two cameras or two VRD systems or, as shown, a VRD system 75 and a camera 71 vothärideh, which can each be brought into a desired pivot position independently of one another in each case , As far as - as shown - only one camera 71 and one VRD system 75 are assigned to the device, only a two-dimensional image can be recorded or transmitted.
Die Verwendung der VRD-Methode bei den erfindungsgemässen elektronischen Geräten hat den Vorteil, dass Benutzer mit Sehbehinderung (Kurzoder Langsichtigkeit) bzw. mit Augenkorrektur im Gegensatz zum Ablesen von herkömmlichen Bildschirmen oder Displays keine ,Brille oder andere Sehhilfe benötigen, da die Projizierung direkt auf die Augennetzhaut stattfindet (die VRD-Methode ist sozusagen selbstkorrigierend). Ein weiterer Vorteil besteht in relativ niedrigen Kosten und einem im Vergleich zu konventionellen Displays tiefen Stromverbrauch. Es genügt eine äusserst geringe Laserleistung (beispielsweise weniger als 100 nW) der kohärenten Strahlung, um einen sehr hellen Bildeindruck zu erzeugen. Dieser Vorteil ist vor allem beim starken Sonnenlicht eklatant. Während LCD Displays schon bei normalem Sonnenlicht schlecht oder überhaupt nicht lesbar sind, erzeugen VRD-Systeme auch bei stärksten Sonneneinstrahlung gestochen scharfe Bilder auf der Augennetzhaut.The use of the VRD method in the electronic devices according to the invention has the advantage that users with visual impairment (nearsightedness or long-sightedness) or with eye correction, in contrast to reading conventional screens or displays, do not need glasses or other visual aids, since the projection directly onto the Retina (the VRD method is self-correcting, so to speak). Another advantage is the relatively low cost and low power consumption compared to conventional displays. An extremely low laser power (for example less than 100 nW) of the coherent radiation is sufficient to produce a very bright image impression. This advantage is particularly striking in strong sunlight. While LCD displays are difficult or impossible to read even in normal sunlight, VRD systems produce razor-sharp images on the retina even in the strongest sunlight.
Die Erfindung ist mit den obigen Ausführungsbeispielen ausreichend dargetan. Sie könnte jedoch noch in anderen Varianten veranschaulicht sein. Das erfindungsgemässe Gerät eignet sich ganz besonders auch für die Anwendung in einem Fahrzeug, sei es in einem Auto, einem Lastwagen, einem Motorfahrrad oder dergleichen, in welchem es als mobiles Gerät, herausnehmbar oder fix eingesetzt werden kann. Bei der Benutzung kann sich ein Fahrer auf die Strasse konzentrieren und es wird ihm vom Gerät gleichzeitig quasi ein durchsichtiges Bild in die Augen projiziert.The invention is sufficiently demonstrated with the above exemplary embodiments. However, it could be illustrated in other variants. The device according to the invention is also particularly suitable for use in a vehicle, be it in a car, a truck, a motor bike or the like, in which it can be used as a mobile device, removable or fixed. When in use, a driver can concentrate on the road and at the same time the device projects a transparent image into his eyes.
Der Ablauf einer möglichen Betriebssystem-Schaltung ist schematisch in Fig. 13 dargestellt. Nach dem Einschalten des Gerätes (Schritt 150) wird gemäss Schritt 151 das Pocket-Betriebssystem sofort gestartet und der Ressourcen-Manager eingeschaltet. Im Schritt 152 wird beurteilt, ob eine PC-Applikation gestartet (am laufen) ist. Wenn nicht, dann wird das PC- Betriebssystem gestoppt (Schritt 153); Wenn ja, wird im Schritt 154 entschieden, ob eine neue Applikation gestartet werden soll. Wenn nicht, wird in eine Abfrageschlaufe verzweigt. Wenn eine neue Applikation gestartet werden soll (ja), wird im Schritt 155 beurteilt, ob eine Pocket- Applikation gestartet werden soll. Wenn nein,, dann handelt es sich logischerweise um eine PC-Applikation. Im Schritt 157 wird beurteilt, ob das PC- Betriebssystem am laufen ist. Wenn nein, dann muss zuerst das PC- Betriebssystem gestartet werden und danach wird in Schritt 158 die PC- Applikation gestartet.The sequence of a possible operating system circuit is shown schematically in FIG. 13. After switching on the device (step 150), the pocket operating system is started immediately in accordance with step 151 and the resource manager is switched on. In step 152, it is judged whether a PC application is started (running). If not, then the PC operating system is stopped (step 153); If so, a decision is made in step 154 as to whether a new application should be started. If not, the system branches to a query loop. If a new application is to be started (yes), it is judged in step 155 whether a pocket application should be started. If not, then it is logically a PC application. In step 157 it is judged whether the PC operating system is running. If not, then the PC operating system must first be started and then the PC application is started in step 158.
Handelt es sich in der Beurteilung im Schritt 155 um eine Pocket-If the assessment in step 155 is a pocket
Applikation, so wird diese gestartet (Schritt 156). Nachdem entweder dieApplication, it is started (step 156). After either the
Pocket- oder die PC-Applikation gestartet wurde, wird wieder zu Schritt 152 (PC-Applikation am laufen?) verzweigt. Das Pocket-Betriebssystem ist dem PC-Betriebssystem hierarchisch übergeordnet. Über Schritt 154 kann der Benutzer entscheiden, ob er das System mit einer Pocket-Applikation (Schritt 155) beenden will.Pocket or the PC application was started, the process branches back to step 152 (PC application running?). The Pocket operating system is hierarchically superior to the PC operating system. Via step 154, the user can decide whether he wants to end the system with a pocket application (step 155).
Somit wird sichergestellt, dass wenn keine PC-Applikation am laufen ist, das PC-Betriebssystem gestoppt wird, damit Strom gespart wird.This ensures that if no PC application is running, the PC operating system is stopped to save electricity.
Es wäre auch möglich, die zwei (oder mehrere), die gleiche Peripherie benutzende Prozessoren 36, 37 auf einem Chip koexistieren zu lassen, und mit gemeinsamen Speichermodulen (RAM, ROM) und Echtzeituhr zu versehen.It would also be possible to have the two (or more) processors 36, 37 using the same periphery coexist on one chip and to provide them with common memory modules (RAM, ROM) and real-time clock.
Möglich wäre aber auch, zwei oder mehrere Betriebssysteme auf einem oder mehreren Prozessoren laufen zu lassen, die sich die Peripherie teilen. Die Anzahl der Prozessoren, die gerade benötigt wird, bestimmt ein auf einem der Betriebssysteme laufender Prozess. Die Parameter werden von diesem Prozess laufend nachgeführt-. Es würde sich um ein Netzwerk von Prozessoren handeln, dessen Knoten ein- und ausgeschaltet werden können, d.h um ein Transputersystem.But it would also be possible to run two or more operating systems on one or more processors that share the periphery. The number of processors that is currently required determines a process running on one of the operating systems. The parameters are continuously updated by this process. It would be a network of processors whose nodes can be switched on and off, i.e. a transputer system.
Denkbar ist auch der Einsatz eines einzigen, in Rechnerleistung skalierbaren Prozessors, auf dem mehrere Betriebssysteme laufen, und der selbständig die geeignete oder nötige Rechnerleistung variieren kann. It is also conceivable to use a single processor that is scalable in terms of computing power, on which several operating systems run, and which can independently vary the suitable or necessary computing power.

Claims

PATENTANSPRUCHE PATENT CLAIMS
1. Elektronisches Gerät, insbesondere ein mobiles Multimedia- Kommunikationsgerät, mit einem Gehäuse (2), Eingabemitteln (3 ; 4; 5), einer elektronischen Schaltung (35), Speichermedien (38, 39; 42), und einer Energiequelle (40), gekennzeichnet durch mindestens ein VRD (Virtual Retinal Display)-System ( 15, 16) zur Verarbeitung einer Bild- oder Datenquelle und Projizierung derselben in Form von Laserstrahlen, von durch Leuchtdioden (LED) oder durch andere geeignete Lichtquellen erzeugten Strahlen auf die Augennetzhaut (N) des Gerätebenutzers, und durch eine zur Audio-, Video- und Datenkommunikation vorgesehene Station (27) zum Empfangen und Senden von Signalen über ein Funknetz oder andere Übertragungseinrichtungen, wobei die Signale über das Bluetooth-, das Wireless LAN-, das GSM-, das GPRS-, das EDGE-, das UMTS-, das DAB-System, das 4G oder 5G-System oder über ein beliebiges Telefonkabel-, Funk- oder Satellitennetz austauschbar sind. 1. Electronic device, in particular a mobile multimedia communication device, with a housing (2), input means (3; 4; 5), an electronic circuit (35), storage media (38, 39; 42), and an energy source (40) , characterized by at least one VRD (Virtual Retinal Display) system (15, 16) for processing an image or data source and projecting it in the form of laser beams, beams generated by light-emitting diodes (LED) or other suitable light sources onto the retina ( N) of the device user, and by a station (27) provided for audio, video and data communication for receiving and transmitting signals via a radio network or other transmission devices, the signals being transmitted via the Bluetooth, the wireless LAN, the GSM , the GPRS, the EDGE, the UMTS, the DAB system, the 4G or 5G system or can be exchanged via any telephone cable, radio or satellite network.
2. Gerät nach Anspruch 1 , dadurch gekennzeichnet, dass das VRD- System ( 15, 16) einen Teil eines ' Moduls ( 10, 10', 10") bildet, das mit mindestens einer Kamera ( 1 1 , 12) zur Aufnahme einer Bild- oder Datenquelle sowie mit einer Vorrichtung ( 13a, 13b) zum Aufzeichnen der aufgenommenen Bilder versehen ist, wobei die aufgezeichneten Bilder in Echtzeit oder zu einem späteren Zeitpunkt durch das VRD-System ( 15, 16) auf die Augennetzhaut (N) des Gerätebenutzers projizierbar sind.2. Device according to claim 1, characterized in that the VRD system (15, 16) forms part of a ' module (10, 10', 10 ") with at least one camera (1 1, 12) for recording a Image or data source and a device (13a, 13b) for recording the recorded images is provided, the recorded images in real time or at a later time by the VRD system (15, 16) on the retina (N) of the device user are projectable.
3. Gerät nach Anspruch 2, dadurch gekennzeichnet, dass zwecks Vermitteln eines dreidimensionalen Bildes das Modul (10, 10') mit zwei die Bild- oder Datenquelle in verschiedenen Bildwinkeln aufnehmenden Kameras ( 1 1 , 12) und zwei VRD-Systemen ( 15, 16) zur Proj izierung von synchronisierten Teilbildern je auf ein Auge (L, R) des Gerätebenutzers versehen ist. ,3. Device according to claim 2, characterized in that for the purpose of conveying a three-dimensional image, the module (10, 10 ') with two cameras (1 1, 12) and two VRD systems (15, 12) that record the image or data source at different image angles. 16) for projecting synchronized partial images onto one eye (L, R) of the device user. .
4. Gerät nach Anspruch 2 oder 3, dadurch gekennzeichnet, dass mit einem zwei VRD-Systeme ( 15, 16) aufweisenden Modul ( 10, 10') zweidi- mensionale Bilder auf Augen (L, R) von zwei Benutzern projizierbar sind.4. Device according to claim 2 or 3, characterized in that with a two VRD systems (15, 16) having module (10, 10 ') two-dimensional images on eyes (L, R) can be projected by two users.
5. Gerät nach einem der Ansprüche 2 bis 4, dadurch gekennzeichnet, dass das Modul im zur Audio-, Video- und Datenkommunikation zwischen zwei oder mehreren Benutzern und/oder zwischen dem Benutzer und externen Computersystemen und/oder Peripheriegeräten vorgesehenen Gerät ( 1 , 1 ' , 1 ") integriert ist. 5. Device according to one of claims 2 to 4, characterized in that the module in the device provided for audio, video and data communication between two or more users and / or between the user and external computer systems and / or peripheral devices (1, 1 ', 1 ") is integrated.
6. Gerät nach einem der Ansprüche 2 bis 4, dadurch gekennzeichnet, dass das Modul ( 10', 10") mit dem zur Audio-, Video- und Datenkommunikation zwischen zwei oder mehreren Benutzern und/oder zwischen dem Benutzer und externen Computersyslemen und/oder Peripheriegeräten vorgesehenen Gerät ( la) koppelbar oder auf das Gerät ( l a) aufsteckbar ist.6. Device according to one of claims 2 to 4, characterized in that the module (10 ', 10 ") with the for audio, video and data communication between two or more users and / or between the user and external computer systems and / or peripheral devices provided (la) can be coupled or plugged onto the device (la).
7. Gerät nach einem der Ansprüche 2 bis 4, dadurch gekennzeichnet, dass das Modul ( 10) als eine selbständige und autonom funktionierende Einheit ausgebildet und zur Kommunikation zwischen dem Benutzer und verschiedenen externen Peripheriegeräten (61 , 62, 63) vorgesehen ist.7. Device according to one of claims 2 to 4, characterized in that the module (10) is designed as an independent and autonomously functioning unit and is provided for communication between the user and various external peripheral devices (61, 62, 63).
8. Gerät nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass die mindestens eine Kamera (71 , 72) und/oder das mindestens eine VRD-System (75, 76) um wenigstens eine Achse manuell und/oder elektronisch gesteuert schwenkbar angeordnet ist bzw. sind, wobei sie vorzugsweise um einen Winkel von 360° um die Achse, in die gewünschte Schwenkposition gebracht werden können.8. Device according to one of claims 1 to 7, characterized in that the at least one camera (71, 72) and / or the at least one VRD system (75, 76) is pivoted about at least one axis manually and / or electronically controlled is or are, whereby they can preferably be brought into the desired pivot position by an angle of 360 ° around the axis.
9. Gerät nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass die Eingabemittel als eine Tastatur (4) und/oder ein Joy-Stick (3), oder ein Sensorbildschirm (Touch-Screen) (5), oder ein Näherungsschalter ausgebildet sind, oder dass als Eingabemittel akustische Signale oder Gehirnströme vorgesehen sind. 9. Device according to one of claims 1 to 8, characterized in that the input means as a keyboard (4) and / or a joy stick (3), or a sensor screen (touch screen) (5), or a proximity switch are, or that acoustic signals or brain waves are provided as input means.
10. Elektronisches Gerät, insbesondere ein mobiles Multimedia- Kommυnikationsgerät, mit einer elektronischen Schaltung, die mindestens einen mit einem Betriebssystem betreibbaren und mit Speichermedien (38a, 38b, 39a, 39b) versehenen Prozessor (36, 37) aufweist, dadurch gekennzeichnet, dass der Prozessor oder die Prozessoren (36, 37) mit zwei oder mehreren, voneinander unabhängigen Betriebssystemen betreibbar sind, wobei eines der Betriebssysteme dem oder den anderen hierarchisch übergeordnet und zum selbsttätigen Starten oder Stoppen des anderen Betriebssystems oder der anderen Betriebssysteme vorgesehen ist.10. Electronic device, in particular a mobile multimedia communication device, with an electronic circuit which has at least one processor (36, 37) which can be operated with an operating system and is provided with storage media (38a, 38b, 39a, 39b), characterized in that The processor or the processors (36, 37) can be operated with two or more operating systems that are independent of one another, one of the operating systems being hierarchically superior to the other and intended for the automatic starting or stopping of the other operating system or the other operating systems.
1 1. Gerät nach Anspruch 10, dadurch gekennzeichnet, dass ein einziger, in Rechnerleistung skalierbarer Prozessor von zwei oder mehreren Betriebssystemen gemeinsam benutzbar ist.1 1. Device according to claim 10, characterized in that a single, scalable in computing power processor shared by two or more operating systems.
12. Gerät nach Anspruch 10, dadurch gekennzeichnet, dass die Prozessoren einem gemeinsamen Chip zugeordnet und mit gemeinsamen Speichermedien versehen sind.12. Device according to claim 10, characterized in that the processors are assigned to a common chip and provided with common storage media.
13. Gerät nach Anspruch 10, dadurch gekennzeichnet, dass die Prozessoren (36, 37) über einen Ressourcen-Manager mit einer gemeinsam benutzbaren Peripherie wie beispielsweise MMI (Mensch-Maschine- Interface), Festplatte, Anzeige, I/O (Einschalten/Ausschalten) oder dergleichen verbindbar sind. 13. The device according to claim 10, characterized in that the processors (36, 37) via a resource manager with a shared peripheral such as MMI (man-machine interface), hard disk, display, I / O (switch on / switch off ) or the like can be connected.
14. Gerät nach Anspruch 13, dadurch gekennzeichnet, dass der Ressour- cen-Manager (30) automatisch Systemressourcen in Abhängigkeit von Prozessen, Prioritäten und Benutzerangaben dem richtigen Prozessor (20, 21) zuteilt.14. Device according to claim 13, characterized in that the resource manager (30) automatically allocates system resources to the correct processor (20, 21) depending on processes, priorities and user information.
15. Gerät nach Anspruch 10, dadurch gekennzeichnet, dass das Pocket- Betriebssystem einem weiteren PC-Betriebssystem hierarchisch übergeordnet und zum selbsttätigen Starten oder Stoppen des letzteren vorgesehen ist. 15. Device according to claim 10, characterized in that the pocket operating system is hierarchically superordinate to a further PC operating system and is provided for the automatic starting or stopping of the latter.
PCT/EP2003/007978 2002-07-31 2003-07-22 Electronic device, in particular a mobile multimedia communications device WO2004013676A2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
AU2003260320A AU2003260320A1 (en) 2002-07-31 2003-07-22 Electronic device, in particular a mobile multimedia communications device

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
CH13422002 2002-07-31
CH1342/02 2002-07-31
CH13412002 2002-07-31
CH1341/02 2002-07-31
CH1789/02 2002-10-24
CH17892002 2002-10-24

Publications (2)

Publication Number Publication Date
WO2004013676A2 true WO2004013676A2 (en) 2004-02-12
WO2004013676A3 WO2004013676A3 (en) 2004-10-21

Family

ID=31498875

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2003/007978 WO2004013676A2 (en) 2002-07-31 2003-07-22 Electronic device, in particular a mobile multimedia communications device

Country Status (2)

Country Link
AU (1) AU2003260320A1 (en)
WO (1) WO2004013676A2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1667423A1 (en) * 2004-12-02 2006-06-07 Swisscom Mobile AG Method and virtual retinal display for displaying the image of a person
WO2009052698A1 (en) * 2007-10-16 2009-04-30 Xuefeng Song Display device and its display method
CN105278110A (en) * 2015-12-01 2016-01-27 王占奎 Intelligent satellite communication interaction glasses device
EP2998781A1 (en) 2005-09-08 2016-03-23 Swisscom AG Communication device, system and method
WO2022184221A1 (en) * 2021-03-04 2022-09-09 Хальдун Саид Аль-Зубейди Mobile device and operating method thereof

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0564940A1 (en) * 1992-04-06 1993-10-13 Motorola, Inc. Personal communicator
US5659327A (en) * 1992-10-22 1997-08-19 Board Of Regents Of The University Of Washington Virtual retinal display
US5867795A (en) * 1996-08-23 1999-02-02 Motorola, Inc. Portable electronic device with transceiver and visual image display
US5969698A (en) * 1993-11-29 1999-10-19 Motorola, Inc. Manually controllable cursor and control panel in a virtual image
WO2000079759A1 (en) * 1999-06-18 2000-12-28 Swisscom Mobile Ag Transmission and display of video data
WO2001050754A1 (en) * 1999-12-30 2001-07-12 Swisscom Mobile Ag Image data transmission method
WO2002011074A2 (en) * 2000-08-02 2002-02-07 Nokia Mobile Phones Ltd. Electronic device cover with embedded radio frequency (rf) transponder and methods of using same
US20020085175A1 (en) * 2000-12-29 2002-07-04 Butler William C. Integrated retinal display

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0564940A1 (en) * 1992-04-06 1993-10-13 Motorola, Inc. Personal communicator
US5659327A (en) * 1992-10-22 1997-08-19 Board Of Regents Of The University Of Washington Virtual retinal display
US5969698A (en) * 1993-11-29 1999-10-19 Motorola, Inc. Manually controllable cursor and control panel in a virtual image
US5867795A (en) * 1996-08-23 1999-02-02 Motorola, Inc. Portable electronic device with transceiver and visual image display
WO2000079759A1 (en) * 1999-06-18 2000-12-28 Swisscom Mobile Ag Transmission and display of video data
WO2001050754A1 (en) * 1999-12-30 2001-07-12 Swisscom Mobile Ag Image data transmission method
WO2002011074A2 (en) * 2000-08-02 2002-02-07 Nokia Mobile Phones Ltd. Electronic device cover with embedded radio frequency (rf) transponder and methods of using same
US20020085175A1 (en) * 2000-12-29 2002-07-04 Butler William C. Integrated retinal display

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1667423A1 (en) * 2004-12-02 2006-06-07 Swisscom Mobile AG Method and virtual retinal display for displaying the image of a person
EP2998781A1 (en) 2005-09-08 2016-03-23 Swisscom AG Communication device, system and method
WO2009052698A1 (en) * 2007-10-16 2009-04-30 Xuefeng Song Display device and its display method
US8628196B2 (en) 2007-10-16 2014-01-14 Ocean Of Peace Scientific Beijing Ltd. Display device and display method
CN105278110A (en) * 2015-12-01 2016-01-27 王占奎 Intelligent satellite communication interaction glasses device
WO2022184221A1 (en) * 2021-03-04 2022-09-09 Хальдун Саид Аль-Зубейди Mobile device and operating method thereof

Also Published As

Publication number Publication date
AU2003260320A8 (en) 2004-02-23
WO2004013676A3 (en) 2004-10-21
AU2003260320A1 (en) 2004-02-23

Similar Documents

Publication Publication Date Title
DE69721482T2 (en) PORTABLE MULTIFUNCTIONAL PHONE
DE102017121076B4 (en) Method of identifying a target vehicle using application software on a mobile device
DE102019114720A1 (en) ADVANCED REALITY (AUGMENTED REALITY - AR) REMOVED VEHICLE ASSISTANCE
DE10197103B4 (en) Audio system with removable, active front panel
DE60102021T2 (en) ACTIVATING AN INTERACTIVE MULTIMEDIA TERMINAL
DE102008018166B4 (en) A terminal and method for supporting multilingualism
DE202014011193U1 (en) Mobile terminal
DE112010001770T5 (en) Controller for a directional antenna and related apparatus and methods
EP1247401B1 (en) Image data transmission method
DE102016119723A1 (en) ACTIVATION AND BLOCKING OF SYNCHRONIZATION OF DATA PROTECTION SETTINGS
DE202013005408U1 (en) Microphone mounting arrangement of a mobile terminal
DE19917169A1 (en) Video data recording and reproduction method for portable radio equipment, such as personal stereo with cartridge playback device, uses compression methods for application with portable device
DE202011110922U1 (en) Mobile terminal
DE19807300A1 (en) Digital single picture camera suitable for telecommunications
DE112006003011T5 (en) Method for wireless communication with stable modulation demodulation and device and rear view device for a vehicle
DE202017007466U1 (en) System for providing object-oriented zoom in multimedia messaging
DE202016107182U1 (en) Wireless user interface projection for vehicles
DE102005035465A1 (en) Video camera device
DE19807303B4 (en) Telecommunication-compatible digital still camera
DE102020128896A1 (en) REAL-TIME HOLOGRAPHY BY USING LEARNED ERROR FEEDBACK
DE102004062869A1 (en) Module for data transmission and peripheral device for receiving the module
EP1198957B1 (en) Mobile image acquisition, retinal projection of image data determined in accordance with a user's eye position, reproduction of useful information extracted from the determined image data
DE102018132556A1 (en) VIRTUAL VEHICLE SURFACE (SKIN)
WO2001052480A1 (en) Communications system and a control unit suitable therefor
DE102016113764A1 (en) REAL-TIME DYNAMIC SCREEN REPLICATION AND DISPLAY REPRESENTATION BASED ON MEDIA APPLICATION CHARACTERISTICS

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NI NO NZ OM PH PL PT RO RU SC SD SE SG SK SL TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
122 Ep: pct application non-entry in european phase
NENP Non-entry into the national phase

Ref country code: JP

WWW Wipo information: withdrawn in national office

Country of ref document: JP