NL1032877C2

NL1032877C2 - Apparatus is for automatic generation of data whether or not changes in procedure are to be undertaken

Info

Publication number: NL1032877C2
Application number: NL1032877A
Authority: NL
Inventors: Johan Ritser Kuipers
Original assignee: Johan Ritser Kuipers
Priority date: 2006-11-16
Filing date: 2006-11-16
Publication date: 2007-11-14
Also published as: NL1032877A1

Abstract

In order to provide relevant information, the apparatus collects current data related to the user and his or her ambiance. The apparatus uses its knowledge in order to interpret this data and if necessary to provide relevant information to the user. In this respect, the apparatus can automatically assist in the daily preparation of procedures. The aim of the invention inter alia is to replace human assistance by an apparatus. The apparatus comprises different components connected to one another in a closed or open system via a fixed or wireless network. The apparatus comprsies two modules forming a system. Module A is the virtual assistant, Module B is the interface and C is the user and ambiance factors. Module A comprises hardware, software and data together with differently distributed components which work in conjunction in a closed or open network, making use of fixed or wireless connections. The first component is the computer, comprising one or more physical systems which process data. The computer communicates with Module B via an input/output device. The second component is the intelligence comprising knowledge about the curriculum, circumstances such as global position, environmental variables (objects, measurements, rules, obstacles, other users of the ambiance, etc.), reference conduct of the user, reference conduct of other users and/or purpose groups, communication via media such as audio, visual display unit, text, motion, haptic feedback, vibration and other stimulators, suitable methodology for information transmission such as virtual reality, ambient reality, augmented reality, skill training, insight training, procedure training, etc. The third component is a data memory and comprises all memories and produced data. Module B Interface is formed by one or more computers, machines, mechanisms or structures, such as a mobile computer, production line, motorcar, space or chamber. The interface communicates via a fourth component (input/output device) in real time with Module A. The interface for registration of User C and ambient information is equipped with one or more registration components, such as electronic meters, sensors, speech recognition, camera picture recognition, scanners, radar, general short message facility, etc. For feedback with user C, Module B has one or more communication components, for transmission of pictures, tactile information such as vibration, odor and audio.

Description

Apparaat voor automatische informatie generatieDevice for automatic information generation

De unieke vinding betreft een apparaat dat gebruikt kan worden voor real time informatie vergaring over, en het beoordelen van, gedrag van mensen, dieren en apparaten voor het geven van gerichte informatie zoals geautomatiseerde instructie en/of adviezen voor het 5 al dan niet uitvoeren van handelingen zoals procedures door mensen dieren en apparaten.The unique finding relates to a device that can be used for real-time information gathering and assessment of human, animal and device behavior for providing targeted information such as automated instruction and / or advice on whether or not to perform acts such as procedures by human animals and devices.

Bestaande apparaten of vindingen voor het beïnvloeden van gedrag richten zich op specifieke toepassingen zoals training en/of het gebruik in voertuigen en vaartuigen. Deze bestaande apparaten en 10 vindingen kenmerken zich door enerzijds een gesloten systeem architectuur voor het monitoren van gedrag en het geven van automatische instructie en/of adviezen en anderzijds door geen of beperkte mogelijkheden voor het gebruik van informatie afkomstig van externe bronnen zoals verkeersinformatie en/of geavanceerde observatie 15 technieken zoals beeld herkenning en plaatsbepaling. Doelen van deze vinding zijn; het integreren van informatie over gedrag, omgevingsinformatie, curricula, regels, gewenst gedrag, en referentiegedrag in een apparaat dat op basis van deze informatie de gebruiker automatisch kan assisteren bij het uitvoeren van 20 handelingen, zonder dat daarvoor een mens voor nodig is of een specifiek apparaat met een gesloten systeem architectuur.Existing devices or findings for influencing behavior focus on specific applications such as training and / or use in vehicles and vessels. These existing devices and inventions are characterized on the one hand by a closed system architecture for monitoring behavior and by giving automatic instruction and / or advice and on the other by no or limited possibilities for the use of information from external sources such as traffic information and / or advanced observation techniques such as image recognition and positioning. Goals of this finding are; integrating information about behavior, environmental information, curricula, rules, desired behavior, and reference behavior into a device that can automatically assist the user in performing actions based on this information, without the need for a human being or a specific device with a closed system architecture.

De unieke vinding betreft een apparaat waarmee menselijk gedrag, dierlijk gedrag, en het gedrag van apparaten, direct of indirect 25 bestuurt door mensen, wordt gedigitaliseerd en opgeslagen. Het apparaat digitaliseert tevens actuele omgevingsinformatie , analyseert deze informatie en slaat deze op. Het apparaat vergelijkt de nieuw opgeslagen informatie met reeds opgeslagen informatie en berekent welke informatie ze moet communiceren naar de gebruiker om de 30 gebruiker optimaal te assisteren. De berekening worden gemaakt op basis van onder andere omgevingsomstandigheden, regels, curricula en voorbeeld gedrag voortkomende uit eerder vastgelegd gedrag en digitale instructies worden omgezet in waarneembare informatie zoals instructies en/of adviezen (feedback) en/of digitale informatie voor 35 externe intelligente systemen.The unique finding relates to a device with which human behavior, animal behavior, and the behavior of devices, directly or indirectly controlled by humans, is digitized and stored. The device also digitizes current environment information, analyzes and stores this information. The device compares the newly stored information with already stored information and calculates which information it must communicate to the user in order to optimally assist the user. The calculation is made on the basis of, among other things, environmental conditions, rules, curricula and example behavior arising from previously recorded behavior and digital instructions are converted into observable information such as instructions and / or advice (feedback) and / or digital information for external intelligent systems.

1032877 21032877 2

Het apparaat is opgebouwd uit 2 modulen die te sasten een systeem vorsten (fig 1). Module A is de zogenaamde 'Virtual Assistant', Module B ie de zogenaastde 'Interface' .The device is made up of 2 modules that can be used to saste a system (fig. 1). Module A is the so-called 'Virtual Assistant', Module B ie the so-called 'Interface'.

Module A bestaat uit hardware, software en data en omvat 5 verschillende gedistribueerde componenten die samenwerken in een gesloten (LAN) of open netwerk (WAN) gebruik makend van vaste verbinding en/of draadloze verbinding (fig 2). Component 1 is de zogenaamde 'Computer'. De Computer bestaat uit een of meerdere gekoppelde fysieke systemen die data verwerken. De Computer 10 communiceert met Module B, via Component 4, een Input Output Device (fig 3). Component 2 is de zogenaamde 'Intelligentie', de Intelligentie omvat kennis over het curriculum, de omstandigheden zoals plaats (global) omgevingsvariabelen (objecten, maten, regels, obstakels, overige gebruikers van de omgeving, etc.), referentie 15 gedrag van de gebruiker, referentie gedrag van andere gebruikers en/of doelgroep, de communicatie via media zoals audio, beeld, tekst, motion, haptic feedback, vibratie en andere stimulators en geschikte methodieken voor informatie overdracht zoals virtual reality, ambient reality, augmented reality, vaardigheidstraining, inzichttraining, 20 proceduretraining etc. De intelligentie kan verspreid zijn over meerdere componenten die verbonden zijn in een open of gesloten netwerk via een vaste of draadloze verbinding. Een component kan bijvoorbeeld de kennis omvatten over het vervoersnetwerk waarover de gebruikers zich verplaatsen, via deze component wordt kennis verstrekt 25 over maten, vervoersregels, andere gebruikers op dit netwerk, mogelijke obstakels, gewenst gedrag, gedrag van de gebruiker uit het verleden etc. Een voorbeeld van het gebruik van een dergelijk systeem is routenavigatie. Echter routenavigatie is nu nog beperkt tot informatie verstrekking over verplaatsing van de gebruiker tussen 30 opgegeven locaties. Component 3 is 'Data Opslag'. Data Opslag omvat alle opgeslagen en geproduceerde informatie voor en afkomstig van; component 1, 2, 5 en 6.Module A consists of hardware, software and data and comprises 5 different distributed components that work together in a closed (LAN) or open network (WAN) using a fixed connection and / or wireless connection (Fig. 2). Component 1 is the so-called 'Computer'. The Computer consists of one or more linked physical systems that process data. The Computer 10 communicates with Module B, via Component 4, an Input Output Device (Figure 3). Component 2 is the so-called 'Intelligence', the Intelligence includes knowledge about the curriculum, the circumstances such as location (global) environment variables (objects, dimensions, rules, obstacles, other users of the environment, etc.), reference behavior of the user , reference behavior of other users and / or target group, communication via media such as audio, image, text, motion, haptic feedback, vibration and other stimulators and suitable methods for information transfer such as virtual reality, ambient reality, augmented reality, skills training, insight training , Procedure training etc. The intelligence can be spread over several components that are connected in an open or closed network via a fixed or wireless connection. A component may, for example, comprise the knowledge about the transport network on which the users are moving, this component provides knowledge about dimensions, transport rules, other users on this network, possible obstacles, desired behavior, behavior of the user from the past, etc. An example of using such a system is route navigation. However, route navigation is now limited to providing information about the user's movement between 30 specified locations. Component 3 is 'Data Storage'. Data Storage includes all stored and produced information for and originating from; component 1, 2, 5 and 6.

De componenten kunnen fysiek gescheiden worden. Onderling wisselen de componenten informatie uit via een open en of gesloten 35 netwerk, via een vast of draadloos netwerk.The components can be physically separated. The components mutually exchange information via an open and or closed network, via a fixed or wireless network.

De Module Interface (B) wordt gevorm door een of meerdere computers, machines, mechanieken of bouwwerken, zoals bijvoorbeeld een mobile computer, productielijn, auto, ruimte of kamer. De Interface, 3 communiceert via component 4 (input output device) (£ig 3) real-time met Module A. De Interface is ten behoeve van de registratie van Gebruiker C en omgevingsinformatie uitgerust met één of meerdere registratiecomponenten (5), zoals elektronische meters, sensoren, 5 spraakherkenning, (camera)beeldherkenning, scanners, radar, gsm, gprs en gps etc. Voor de communicatie (feedback) met Gebruiker C is Module B uitgerust met één of meerdere communicatiecomponenten (6) voor het overbrengen van beeld, tactiele informatie (zoals trilling), geur en audio.The Module Interface (B) is formed by one or more computers, machines, mechanics or structures, such as a mobile computer, production line, car, room or room. The Interface 3 communicates in real-time with Module A via component 4 (input output device) (£ 3). The Interface is equipped with one or more registration components (5), such as electronic meters, sensors, speech recognition, (camera) image recognition, scanners, radar, gsm, gprs and gps etc. For communication (feedback) with User C, Module B is equipped with one or more communication components (6) for transferring images, tactile information (such as vibration), odor and audio.

1010

Het apparaat geeft Gebruiker C automatisch informatie zoals instructies en of adviezen(f) via component 6. Hiervoor registreert het apparaat de Gebruiker C en zijn omgevingsfactoren (zoals regels, obstakels, verkeersinformatie, weer, gesteldheid van het oppervlak 15 etc) (g) met component 5. Het gedrag van gebruiker en zijn omgevingsfactoren C wordt gedigitaliseerd. De digitale registratie informatie wordt doorgegeven aan Component 4. Component 4 geeft de registratie informatie (data) door (b)aan Module A via een open en of gesloten netwerk. Component 1 activeert de Intelligentie en geeft de 20 registratie data door (e) . Component 2 verwerkt de data op basis van kennis afkomstig uit Component 3 (h) . Nieuwe kennis wordt vastgelegd in de Data Opslag (h) . De Intelligentie bepaalt op basis van de registratie data en kennis of de gebruiker informatie nodig heeft om hem te informeren en zijn gedrag al dan niet te beïnvloeden. Als dit 25 het geval is dan stuurt de Intelligentie via component 1 communicatie data (f) naar Module B (c) . Via component 4 wordt de communicatie data doorgegeven aan component 6 (i) . Component 6 geeft de communicatie data door aan de Gebruiker C (f) . De digitale data wordt omgezet in voor de gebruiker waarneembare en hanteerbare informatie. Gebruiker C 3 0 gebruikt de communicatie data om zich te informeren en/of zijn gedrag te toetsen en eventueel te veranderen. Vervolgens herhaalt het proces zich.The device automatically provides User C with information such as instructions and / or advice (f) via component 6. For this purpose, the device registers User C and its environmental factors (such as rules, obstacles, traffic information, weather conditions, etc.) (g) with component 5. The behavior of user and his environmental factors C is digitized. The digital registration information is passed on to Component 4. Component 4 passes on the registration information (data) to (b) Module A via an open and or closed network. Component 1 activates the Intelligence and passes the registration data on (e). Component 2 processes the data based on knowledge from Component 3 (h). New knowledge is recorded in the Data Storage (h). The intelligence determines on the basis of the registration data and knowledge whether the user needs information to inform him or not and to influence his behavior. If this is the case, the Intelligence sends communication data (f) to Module B (c) via component 1. The communication data is passed on to component 6 (i) via component 4. Component 6 passes on the communication data to the User C (f). The digital data is converted into user-aware and manageable information. User C 3 0 uses the communication data to inform himself and / or to check his behavior and possibly to change it. The process then repeats itself.

Toepassing van het apparaat zijn divers. Het apparaat kan 35 gebruikt worden voor het aanleren van procedures en het automatisch assisteren van de gebruiker bij de dagelijkse uitvoering van handelingen zoals procedures. Bijvoorbeeld de toepassing voor het aanleren van rijvaardigheden in een simulator en het begeleiden van de 4 rijder tijdens het rijden op de weg. In het eerste geval is de Interface van Module B een rij simulator en in het tweede geval een auto. In de rij simulator maakt Module λ gebruik van onder andere curricula, regels en/of gedragsnormen uit eerder gedrag om de 5 gebruiker van informatie te voorzien. In de rijsimulator zijn de omgevingsfactoren niet relevant. De kennis bepaalt zelf de variabelen en kan ieder moment omschakelen op andere informatie als dat nodig is. Bijvoorbeeld door de omgeving aan te passen aan het gedrag van de gebruiker of aan het gewenst gedrag. De omgeving kan in dat geval 10 andere gebruikers betreffen, maar ook objecten, regels etc. De kennis component werkt in dit geval als regisseur. Tijdens het rijden in de auto maakt Module A gebruik van informatie vergelijkbaar met een routenavigatiesysteem uitgebreid met omgevingsinformatie over regels, gesteldheid van het weer, gesteldheid van het wegdek, andere 15 gebruikers etc. In dit voorbeeld is de gebruiker de regisseur en ondersteunt het apparaat de gebruiker in het uitvoeren van zijn taak. Uniek is dat het apparaat dit doet door gebruik te maken van gedistribueerde kennisApplication of the device are diverse. The device can be used to teach procedures and automatically assist the user in the daily execution of operations such as procedures. For example, the application for learning driving skills in a simulator and guiding the 4 rider while driving on the road. In the first case the Interface of Module B is a row simulator and in the second case a car. In the row simulator, Module λ makes use of curricula, rules and / or behavioral norms from previous behavior to provide the user with information. The environmental factors are not relevant in the driving simulator. The knowledge determines the variables itself and can switch to other information at any time if necessary. For example, by adapting the environment to the behavior of the user or to the desired behavior. In that case, the environment can concern 10 other users, but also objects, rules, etc. In this case, the knowledge component works as a director. While driving in the car, Module A uses information similar to a route navigation system extended with environmental information about rules, weather conditions, road conditions, other users, etc. In this example, the user is the director and the device supports the user in performing his task. Unique is that the device does this by using distributed knowledge

Een andere toepassing is een apparaat voor het begeleiden van 20 ouderen zodat ze langer zelfstandig thuis kunnen wonen. Het apparaat controleert of de oudere de procedures goed uit voert en geeft als het nodig is adviezen en of instructie. Bij ouderen vindt er namelijk versnelde slijtage plaats in het correct uitvoeren van procedures. De kamers van het huis maken in dit geval deel uit van Module B.Another application is a device for guiding 20 elderly people so that they can live independently longer at home. The device checks whether the elderly person performs the procedures properly and gives advice and / or instruction if necessary. In the elderly, accelerated wear and tear occurs in the correct execution of procedures. The rooms of the house are in this case part of Module B.

25 Nog een toepassing is het gebruik van het apparaat voor amusement. In dit geval wordt het apparaat zodanig ingericht dat de instructie een bijdrage levert aan de beleving van de bezoeker. Het apparaat kan tevens toegepast worden voor het toetsen 1032877Another application is the use of the device for entertainment. In this case, the device is arranged in such a way that the instruction contributes to the visitor's experience. The device can also be used for keying 1032877

Claims

1 The patent concerns an apparatus for automatic information gathering, assessment and departure of targeted information.

2 The device is used to assist people, animals and devices in carrying out actions or not.

5. The device collects relevant information about the current behavior of the user, known behavior of the user, known behavior of other users, desired behavior, environmental factors (such as objects, dimensions, other users, obstacles, changes to compared to already known situation, 10 rules, weather conditions, condition of the surface, energy consumption etc.)

4 The information from claim 3 is digitized and stored by the device.

The newly stored information from claim 4 is compared by the device 15 with previously stored information. This previously stored information includes; desired behavior, curricula, user behavior, behavior of other users, objects, dimensions, rules, obstacles, changes, weather conditions, surface condition, physical laws, etc.

20. The device determines on the basis of the comparison from claim 5 whether targeted information should be sent to the user from claim 2

7 If targeted information is desired, the device communicates this information to the user.

8 The process from claim 1 is repeated continuously and preferably, but not necessarily, real-time.

9 The device forms a whole that consists of 2 integrated modules that are subdivided into components. The Virtual Assistant module comprises the components Computer, Intelligence and Data storage. . The Interface module includes the Input-output, Registration 30 and Communication components.

The modules and their components from claim 9 are connected to each other through an open or closed network and can be used physically and geographically separately.

11 The network from claim 10 can consist of fixed connections and / or wireless connection. 1032877

12 The components from claim 9 can consist of 1 or more physical parts that work together

13 The Intelligence component from claim 9 includes knowledge about, among other things; desired behavior, curricula, user behavior, behavior of 5 other users, objects, dimensions, rules, obstacles, changes, weather conditions, surface condition, physical laws, communication via media such as audio, image, text, motion, haptic feedback, vibration and other stimulators and suitable methods for transferring information such as virtual reality, ambient reality, augmented reality, skill training, insight training, procedure training etc.

14 The Data storage component comprises all and / or parts of registered information from claim 3 and all and / or parts of the information produced from claim 7. 14 The Interface component from claim 9 consists of one or more computers, machines, mechanics or structures, such as a mobile computer, production line, car, room or room.

For the purpose of the registration from claim 3, the Interface from claim 9 is equipped with one or more registration components such as electronic meters, sensors, speech recognition, (camera) image recognition, scanners, radar, gsm, gprs and gps etc.

16 The Communication component from claim 9 equipped with one or more communication components for transferring image, text, tactile information (such as vibration), odor, audio and other sensory information.

17 The device is not limited to the provision of information for a specific application. The device can be used generically for arbitrary situations in which people, animals and devices need information in order to adjust behavior or not.

18 Applications of the device include education, training, assessment, support for daily operations, operation of devices, operation of software, entertainment, entertainment, games, games, entertainment, safety, enforcement, etc. 35 19 The device provides information users from claim 2 in physical and / or virtual worlds.

20 The intelligence from claim 9 component can direct the information from claim 3 concerning the virtual world from claim 20 with the aim of optimizing the targeted information from claims 6 and 7 such as changing the behavior of other users, changing objects and sizes, changing weather conditions and changing the condition of the surface. 5 1032877