FR2958010A1 - INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS - Google Patents
INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS Download PDFInfo
- Publication number
- FR2958010A1 FR2958010A1 FR1052143A FR1052143A FR2958010A1 FR 2958010 A1 FR2958010 A1 FR 2958010A1 FR 1052143 A FR1052143 A FR 1052143A FR 1052143 A FR1052143 A FR 1052143A FR 2958010 A1 FR2958010 A1 FR 2958010A1
- Authority
- FR
- France
- Prior art keywords
- facade
- sensor
- light source
- interactive
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 70
- 238000000034 method Methods 0.000 claims abstract description 34
- 230000001105 regulatory effect Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 12
- 238000005070 sampling Methods 0.000 claims description 12
- 238000005286 illumination Methods 0.000 claims description 8
- 239000011159 matrix material Substances 0.000 claims description 8
- 230000003247 decreasing effect Effects 0.000 claims description 5
- 230000001276 controlling effect Effects 0.000 claims 2
- 235000013305 food Nutrition 0.000 abstract description 7
- 238000013461 design Methods 0.000 abstract description 3
- 230000006978 adaptation Effects 0.000 abstract description 2
- 238000009826 distribution Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 230000007246 mechanism Effects 0.000 description 5
- 230000003993 interaction Effects 0.000 description 4
- 229920006395 saturated elastomer Polymers 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 235000013361 beverage Nutrition 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 235000020965 cold beverage Nutrition 0.000 description 2
- 235000012171 hot beverage Nutrition 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000533293 Sesbania emerus Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 235000021539 instant coffee Nutrition 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000008267 milk Substances 0.000 description 1
- 235000013336 milk Nutrition 0.000 description 1
- 210000004080 milk Anatomy 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0428—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by sensing at the edges of the touch surface the interruption of optical paths, e.g. an illumination plane, parallel to the touch surface which may be virtual
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Image Input (AREA)
- Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
Abstract
L'invention concerne un procédé pour asservir la puissance d'une source lumineuse d'un dispositif comportant une façade interactive sur la base d'images capturées par ladite façade. L'invention concerne la conception et l'adaptation d'un dispositif tel qu'un distributeur de denrées ou vitrine interactive mettant en T_P0011_L0007œuvre ledit procédé.The invention relates to a method for controlling the power of a light source of a device comprising an interactive facade on the basis of images captured by said facade. The invention relates to the design and adaptation of a device such as a food dispenser or interactive showcase implementing said method.
Description
Dispositif interactif adaptable aux conditions de luminosité ambiante L'invention concerne tout dispositif comportant une façade interactive ou tactile permettant à un utilisateur d'interagir directement sur ladite façade pour obtenir un service. L'invention concerne plus précisément, mais de manière non limitative, les distributeurs automatiques de denrées (snacking en terminologie anglo-saxonne), de boissons chaudes ou froides. Elle concerne également les panneaux ou vitrines interactives permettant de délivrer des informations de localisation, de prix etc. The invention relates to any device comprising an interactive or tactile facade allowing a user to interact directly on said facade to obtain a service. The invention relates more specifically, but in a non-limiting manner, vending machines food (snacking in English terminology), hot or cold beverages. It also concerns interactive panels or windows for delivering location, price and other information.
La distribution automatique est un canal privilégié pour l'industrie agroalimentaire. Elle permet notamment des marges substantielles. Pour maximiser l'attractivité de tels distributeurs, des constructeurs ont choisi d'équiper la façade principale desdits distributeurs d'un écran tactile, parfois même de taille conséquente. L'objectif est ainsi de permettre une utilisation ludique du distributeur et de délivrer des informations additionnelles sur les produits. Un second objectif vise à faciliter l'adaptation des distributeurs aux produits délivrés, à l'évolution des prix etc. Toutefois, cette solution se révèle être onéreuse de par le coût d'un écran tactile. Les constructeurs ou exploitants de tels distributeurs ayant opté pour cette solution doivent également faire face à la fragilité de ce type d'écrans. Automatic distribution is a privileged channel for the food industry. In particular, it allows substantial margins. To maximize the attractiveness of such distributors, manufacturers have chosen to equip the main facade of said distributors with a touch screen, sometimes even large. The objective is to allow a playful use of the distributor and to deliver additional information on the products. A second objective aims at facilitating the adaptation of the distributors to the products delivered, the evolution of the prices etc. However, this solution proves to be expensive because of the cost of a touch screen. Manufacturers or operators of such distributors who have opted for this solution must also deal with the fragility of this type of screens.
En effet, un écran peut être rapidement rayé ou brisé suivant l'utilisation qui en est faite. Un distributeur se retrouve alors hors service, occasionnant des coûts de maintenance élevés. Pour des applications éloignées de la distribution agroalimentaire, des façades interactives ont été créées mettant en oeuvre la technique de la stéréovision notamment. Cette technique consiste à prévoir autour d'une paroi généralement translucide, des capteurs, un cadre éclairé ou rétro-éclairé pour détecter un doigt par exemple, ou plus généralement un pointeur, à proximité de ladite paroi translucide. A l'aide de méthodes connues, telles que la triangulation par exemple, il est possible de connaître précisément la position du pointeur sur la paroi. Des actions peuvent être préprogrammées pour qu'une position particulière dudit pointeur déclenche un service généralement d'information. O n t r o u v e principalement des applications dans le domaine des vitrines ou des totems interactifs. Indeed, a screen can be quickly scratched or broken according to the use that is made of it. A distributor is then out of service, causing high maintenance costs. For applications remote from the agri-food distribution, interactive facades have been created using the technique of stereovision in particular. This technique consists in providing, around a generally translucent wall, sensors, an illuminated or backlit frame for detecting a finger for example, or more generally a pointer, near said translucent wall. Using known methods, such as triangulation for example, it is possible to know precisely the position of the pointer on the wall. Actions may be preprogrammed for a particular position of said pointer to trigger a generally informative service. Mainly applications in the field of showcases or interactive totems.
A ce jour, ce type de façade interactive n'a pas été appliqué au domaine de la distribution. Quand bien même cette technique permettrait de résoudre le problème de défaut de robustesse soulevé par l'utilisation d'écrans tactile, l'intégration d'une façade interactive dans un distributeur automatique de boissons par exemple, engendre d'autres difficultés. Tout d'abord, des tels dispositifs sont disposés dans des environnements variés : intérieur ou extérieur, espaces lumineux ou sombres, etc. Les conditions de luminosité ambiante, dues à une exposition directe aux rayons du soleil, à un éclairage plus ou moins soutenu, ont des conséquences particulièrement négatives pour un tel dispositif - tel qu'un distributeur automatique de denrées par exemple. To date, this type of interactive facade has not been applied to the field of distribution. Even if this technique would solve the problem of lack of robustness raised by the use of touch screens, the integration of an interactive facade in a beverage vending machine, for example, causes other difficulties. First, such devices are arranged in varied environments: indoor or outdoor, bright or dark spaces, etc. The ambient light conditions, due to direct exposure to sunlight, to more or less sustained lighting, have particularly negative consequences for such a device - such as a food vending machine for example.
En effet, si ce dernier est exposé en plein soleil, quand bien même le distributeur dispose d'une source lumineuse interne permettant d'éclairer les contenus offerts à la vente, il pourra être très difficile de percevoir certains articles ou informations affichées au travers de la façade. Un utilisateur pourra hésiter à faire un achat. Il pourra également faire une erreur de sélection à cause de ses capacités visuelles limitées. Inversement, si un distributeur similaire est disposé au sein d'une pièce très peu éclairée, une source lumineuse trop soutenue pourra être perçue comme agressive et dissuasive pour un acheteur. La puissance de la source lumineuse de certains distributeurs est donc réglée « en usine » sur une puissance moyenne susceptible de convenir à des conditions moyennes ou nominales de luminosité ambiante. L'utilisation de ces derniers est donc toute relative dans des conditions de luminosité plus extrêmes au détriment du chiffre d'affaire de l'exploitant. Par ailleurs, la luminosité à laquelle une façade interactive est exposée, peut engendrer un disfonctionnement du mécanisme de détection. En effet, le ou les capteurs d'une façade interactive peuvent se retrouver saturés en présence d'un éclairage particulièrement intense provoqué par un ensoleillement trop important par exemple. En outre, la présence d'ombres dues à des objets ou à une personne s'approchant d'une façade peut altérer grandement les capacités de détection de la façade. Pour lutter contre ce désagrément, les façades interactives de totems ou vitrines interactives connues comportent un éclairage dédié. Cet éclairage se présente généralement sous la forme de diodes électroluminescentes situées sur le pourtour du cadre de la façade, notamment à proximité du ou des capteurs. Pour tenter de lutter contre les phénomènes d'ensoleillement direct, la plupart des façades interactives utilisent des capteurs sensibles uniquement au proche infrarouge. Ainsi la bande spectrale située en dehors du proche infrarouge est filtrée. Les inconvénients induits par ce type de façade sont toutefois nombreux. Tout d'abord, la bande spectrale est appauvrie au regard de celle délivrée par un capteur travaillant dans le domaine du visible. Les capacités de détections sont donc moindres. En outre, les coûts sont fortement augmentés : les capteurs sont beaucoup plus onéreux que des capteurs standards et les sources lumineuses dédiés à l'éclairage du cadre, telles que des diodes infrarouges sont également plus onéreuses que des diodes émettant dans le visible. Indeed, if it is exposed in full sun, even though the distributor has an internal light source to illuminate the content offered for sale, it may be very difficult to collect certain items or information posted through the facade. A user may be hesitant to make a purchase. He may also make a selection error because of his limited visual abilities. Conversely, if a similar distributor is placed in a very dimly lit room, a too strong light source may be perceived as aggressive and dissuasive for a buyer. The power of the light source of certain distributors is thus set "at the factory" to an average power that may be suitable for average or nominal conditions of ambient light. The use of these is therefore relative in more extreme light conditions at the expense of the operator's turnover. Moreover, the brightness to which an interactive facade is exposed, can cause a malfunction of the detection mechanism. Indeed, the sensor or sensors of an interactive facade may be saturated in the presence of particularly intense lighting caused by excessive sunlight, for example. In addition, the presence of shadows due to objects or a person approaching a facade can greatly alter the detection capabilities of the facade. To combat this inconvenience, the interactive façades of totems or known interactive windows have a dedicated lighting. This lighting is generally in the form of light-emitting diodes located around the frame of the facade, particularly near the sensor or sensors. In an attempt to combat the phenomenon of direct sunlight, most interactive façades use sensors sensitive only to the near infrared. Thus the spectral band located outside the near infrared is filtered. The disadvantages of this type of façade are however numerous. First, the spectral band is depleted compared to that delivered by a sensor working in the visible field. Detection capabilities are therefore lower. In addition, the costs are greatly increased: the sensors are much more expensive than standard sensors and the light sources dedicated to the illumination of the frame, such as infrared diodes are also more expensive than diodes emitting in the visible.
L'invention permet de répondre à l'ensemble des inconvénients soulevés par les solutions connues. Parmi les nombreux avantages apportés par l'invention, nous pouvons mentionner que l'invention permet : - d'utiliser des façades interactives travaillant dans le visible, donc plus précises et peu coûteuses, y compris dans le domaine de la distribution automatique de denrées ; - de diminuer voire de supprimer les sources lumineuses dédiées à l'éclairement du cadre des façades interactives ; - d'optimiser la capacité de détection desdites façades y compris dans des conditions de 15 luminosité ambiante extrêmes ; - maximiser l'attractivité des dispositifs en régulant la source lumineuse dédiée à l'éclairage de contenus, quelles que soient lesdites conditions de luminosité ambiante, etc. 20 A cette fin, il est prévu tout d'abord un dispositif comportant : - une façade interactive sous la forme d'une paroi ceinturée d'un cadre, ledit cadre comportant au 25 moins un capteur d'image matriciel pour fournir une image dudit cadre et permettre la détection d'un pointeur à proximité de la paroi ; - une source lumineuse pour éclairer ladite façade et/ou un contenu visible au travers de celle-ci. 30 Selon l'invention, le capteur de la façade d'un tel dispositif exploite une partie de l'éclairage délivré par la source lumineuse pour permettre la détection d'un pointeur. En outre, ledit dispositif comporte des moyens pour réguler la puissance de ladite source lumineuse sur 35 la base d'une image délivrée par ledit capteur. The invention makes it possible to meet all the disadvantages raised by the known solutions. Among the many advantages provided by the invention, we can mention that the invention allows: - to use interactive facades working in the visible, so more precise and inexpensive, including in the field of automatic food distribution; - Reduce or even eliminate the light sources dedicated to the illumination of the interactive facades; optimizing the detection capacity of said facades, including under extreme ambient light conditions; - Maximize the attractiveness of the devices by regulating the light source dedicated to lighting content, regardless of said ambient light conditions, etc. For this purpose, firstly there is provided a device comprising: an interactive facade in the form of a wall surrounded by a frame, said frame including at least one matrix image sensor for providing an image of said frame; frame and allow the detection of a pointer near the wall; a light source for illuminating said facade and / or a visible content therethrough. According to the invention, the sensor of the facade of such a device exploits a part of the illumination delivered by the light source to enable the detection of a pointer. In addition, said device comprises means for regulating the power of said light source on the basis of an image delivered by said sensor.
Selon un mode de réalisation préféré, les moyens pour réguler d'un tel dispositif peuvent être aptes à réguler l'exposition du capteur. L'invention prévoit en outre que lesdits moyens pour réguler puissent traduire tout ou partie de l'image délivrée par un capteur sous la forme d'un histogramme en niveau de gris pour estimer les conditions ambiantes d'éclairage. L'invention prévoit par ailleurs, pour résoudre les 10 inconvénients connus, un procédé pour adapter un dispositif comportant : - une façade interactive sous la forme d'une paroi ceinturée d'un cadre, ledit cadre comportant au moins un capteur d'image matriciel pour fournir 15 une image dudit cadre et permettre la détection d'un pointeur à proximité de la paroi ; - une source lumineuse pour éclairer ladite façade et/ou un contenu visible au travers de ladite façade. 20 Un tel procédé comporte une étape pour doter ledit dispositif de moyens pour réguler la puissance de ladite source lumineuse à partir d'une image délivrée par le capteur de la façade interactive. Selon un mode de réalisation avantageux, le procédé 25 peut comporter une étape pour doter le dispositif de moyens pour diriger une partie de l'éclairage délivré par la source lumineuse vers le cadre de la façade interactive. Selon un troisième objet, l'invention prévoit un 30 procédé pour réguler la puissance d'une source lumineuse d'un dispositif conforme à l'invention. Ce procédé étant mis en oeuvre par les moyens pour réguler dudit dispositif comporte : - une étape pour estimer l'intensité lumineuse 35 délivrée par la source lumineuse sur la base d'une image délivrée par un capteur de la façade interactive ; - une étape pour : i. augmenter la puissance de la source lumineuse tant que ladite intensité lumineuse estimée est inférieure à une valeur optimale prédéterminée ; ii. diminuer la puissance de ladite source lumineuse tant que ladite intensité lumineuse estimée est supérieure à ladite valeur optimale prédéterminée. Selon un mode de réalisation préféré, un tel procédé peut comporter une étape pour estimer, conjointement à l'estimation de l'intensité lumineuse délivrée, une 15 capacité à détecter un pointeur sur la base d'une image délivrée par un capteur de la façade interactive. According to a preferred embodiment, the means for regulating such a device may be able to regulate the exposure of the sensor. The invention further provides that said means for regulating may translate all or part of the image outputted by a sensor in the form of a gray level histogram to estimate ambient lighting conditions. The invention furthermore provides, to solve the known drawbacks, a method for adapting a device comprising: an interactive facade in the form of a wall surrounded by a frame, said frame comprising at least one matrix image sensor to provide an image of said frame and allow detection of a pointer near the wall; a light source for illuminating said facade and / or a visible content through said facade. Such a method comprises a step for providing said device with means for regulating the power of said light source from an image delivered by the sensor of the interactive facade. According to an advantageous embodiment, the method 25 may include a step for providing the device with means for directing part of the illumination delivered by the light source towards the frame of the interactive facade. According to a third object, the invention provides a method for regulating the power of a light source of a device according to the invention. This method being implemented by the means for regulating said device comprises: a step for estimating the light intensity delivered by the light source on the basis of an image delivered by a sensor of the interactive facade; - a step for: i. increasing the power of the light source as long as said estimated light intensity is less than a predetermined optimum value; ii. decreasing the power of said light source as said estimated light intensity is greater than said predetermined optimum value. According to a preferred embodiment, such a method may comprise a step for estimating, together with the estimate of the light intensity delivered, an ability to detect a pointer on the basis of an image delivered by a sensor of the facade. interactive.
D'autres caractéristiques et avantages apparaîtront plus clairement à la lecture de la description qui suit 20 et à l'examen des figures qui l'accompagnent parmi lesquelles : - la figure 1 présente une façade interactive selon l'état de la technique ; - la figure 2 présente deux exemples d'images 25 obtenues au moyen d'un capteur d'image matriciel selon l'état de la technique ; - la figure 3 décrit un système fonctionnel connu permettant, à partir d'une façade interactive, de détecter un pointeur à proximité de celle-ci ; 30 - les figures 4, 5 et 6 présentent respectivement trois types de dispositif adapté pour héberger une façade interactive conformément à l'invention ; - les figures 7a à 7d présentent chacune la traduction d'une image obtenue par un capteur 35 d'image matriciel, sous la forme d'un histogramme conformément à l'invention ; 8 permet d'illustrer une étape conforme à l'invention ; présente un schéma fonctionnel d'un d'un procédé pour réguler une source lumineuse d'un dispositif interactif conforme à l'invention. Other characteristics and advantages will appear more clearly on reading the following description 20 and on examining the figures which accompany it, among which: FIG. 1 presents an interactive facade according to the state of the art; FIG. 2 shows two examples of images obtained by means of a matrix image sensor according to the state of the art; FIG. 3 describes a known functional system making it possible, from an interactive facade, to detect a pointer close to it; FIGS. 4, 5 and 6 respectively show three types of device adapted to house an interactive facade in accordance with the invention; FIGS. 7a to 7d each show the translation of an image obtained by a matrix image sensor in the form of a histogram according to the invention; 8 illustrates a step according to the invention; presents a block diagram of one of a method for regulating a light source of an interactive device according to the invention.
La figure 1 permet de présenter une façade 10 interactive 10 utilisée dans un totem interactif par exemple. On pourrait envisager d'intégrer une telle façade dans un dispositif sous la forme d'un distributeur automatique de boissons par exemple. La façade comporte une paroi 14, généralement translucide, ceinturée d'un 15 cadre 15. Sur la partie supérieure 11 du cadre sont disposés 3 capteurs d'image matriciels 12a, 12b et 12c. Chacun fournit une image en deux dimensions d'une région du cadre 15, dite région d'intérêt. La figure 2 permet, à titre d'exemple, d'illustrer deux images respectivement 20 polygonale 15a et rectangle 15b capturées à l'aide de capteurs 12a et 12b dont les champs de vision respectifs 12v et 12w ne permettent pas à eux seuls d'embrasser l'intégralité de la paroi 14 de la façade. Pour éclairer le cadre et permettre la capture d'une 25 image de bonne qualité, en liaison avec la figure 1, une façade connue 10 comporte une ou plusieurs source(s) lumineuse(s) dédiée(s) à cet usage. Ainsi, à titre d'exemple, quatre diodes électroluminescentes 13a, 13b, 13c et 13d sont placées à proximité immédiate des 30 capteurs d'image. Généralement, des diodes identiques sont également disposées sur tout le pourtour du cadre, notamment si la surface de la façade est importante. Pour les raisons explicitées précédemment, les capteurs des façades interactives sont sensibles principalement dans 35 le proche infrarouge pour réduire la sensibilité aux variations de la luminosité ambiante. Dans ce cas, les - la figure dispositif - la figure 10 décrit des variantes de réalisation - la figure d'étalonnage 9 interactif conforme à l'invention diodes émettent selon ces mêmes longueurs d'ondes. La disposition des capteurs 12a, 12b et 12c permet de rendre tactile la paroi 14. Ainsi, dès qu'un pointeur, tel qu'une main 20, s'approche de la paroi, celui-ci est capturé par un ou plusieurs capteurs d'image de la façade 10. FIG. 1 makes it possible to present an interactive frontage 10 used in an interactive totem for example. One could consider integrating such a facade in a device in the form of a vending machine drinks for example. The facade comprises a wall 14, generally translucent, surrounded by a frame 15. On the upper part 11 of the frame are arranged 3 matrix image sensors 12a, 12b and 12c. Each provides a two-dimensional image of a region of the frame 15, called region of interest. FIG. 2 allows, by way of example, to illustrate two respectively polygonal 15a and rectangle 15b images captured using sensors 12a and 12b whose respective fields of view 12v and 12w do not alone make it possible to embrace the entire wall 14 of the facade. To illuminate the frame and allow the capture of an image of good quality, in connection with FIG. 1, a known facade 10 comprises one or more light source (s) dedicated to this use. Thus, for example, four light-emitting diodes 13a, 13b, 13c and 13d are placed in close proximity to the image sensors. Generally, identical diodes are also arranged all around the frame, especially if the surface of the facade is important. For the reasons explained above, interactive facade sensors are sensitive primarily in the near infrared to reduce sensitivity to variations in ambient brightness. In this case, the - Figure device - Figure 10 describes alternative embodiments - Figure 9 interactive interactive according to the invention diodes emit according to these same wavelengths. The arrangement of the sensors 12a, 12b and 12c makes it possible to make the wall 14 touch. Thus, as soon as a pointer, such as a hand 20, approaches the wall, the latter is captured by one or more sensors. picture of the facade 10.
La figure 3 permet d'illustrer un schéma fonctionnel d'un dispositif comportant une façade interactive. Ainsi une unité de traitement 30 exploite un ensemble 21 de points en deux dimensions u et v résultant d'images 15a, 15b et 15c prises respectivement par les capteurs 12a, 12b et 12c. A partir d'informations 23 délivrées durant une étape d'étalonnage, et de l'ensemble 21, les moyens 30 mettent en oeuvre une fonction de triangulation pour déterminer la position en trois dimensions x, y et z d'un pointeur à proximité de la paroi d'une façade. Pour mettre en oeuvre une fonction de triangulation, il est nécessaire que deux capteurs au minimum puissent capturer ledit pointeur. Selon les techniques de l'art antérieur, un éclairement intense et non homogène de la paroi lié à un ensoleillement excessif, par exemple, peut diminuer fortement la capacité de détection et de positionnement d'un pointeur. En effet, l'ombre portée par un pointeur ou par tout objet à proximité de la paroi peut entrainer une détection intempestive. FIG. 3 illustrates a functional diagram of a device comprising an interactive facade. Thus a processing unit 30 exploits a set 21 of two-dimensional points u and v resulting from images 15a, 15b and 15c respectively taken by the sensors 12a, 12b and 12c. From information 23 delivered during a calibration step, and from the set 21, the means 30 implement a triangulation function to determine the three-dimensional position x, y and z of a pointer in the vicinity of the wall of a facade. To implement a triangulation function, it is necessary that at least two sensors can capture said pointer. According to the techniques of the prior art, an intense and inhomogeneous illumination of the wall related to excessive sunlight, for example, can greatly reduce the detection and positioning capability of a pointer. Indeed, the shadow carried by a pointer or by any object close to the wall can cause an untimely detection.
Les figures 4 à 6 permettent de décrire trois exemples de dispositifs susceptibles d'héberger une 30 façade interactive. Selon la figure 4, un dispositif la, distributeur de denrées (snacking), comporte une façade interactive 10 au travers de laquelle on devine des rayonnages 6 permettant d'héberger sandwiches et/ou autres sucreries. Un 35 monnayeur 3 permet de recevoir les pièces de monnaies d'un acheteur. Un réceptacle 4 est prévu pour restituer l'excédent de monnaie. Une zone de récupération 5 d'un article acheté permet audit acheteur de percevoir l'article attendu. Pour mettre en valeur les articles et susciter l'attrait du client, une source lumineuse 2 est prévue pour éclairer le contenu du dispositif. Une étape de paramétrage a permis de définir des zones L1 à L16 au niveau de la paroi de la façade 10. Ainsi lorsqu'une main s'approche de la paroi, un mécanisme de triangulation - tel que présenté en liaison avec la figure 3 - est mis en oeuvre par une unité de traitement (non représentée en figure 4) du dispositif 1a. Il permet de déterminer la position du pointeur par rapport auxdites zones L1 à L16. Au moyen d'une association préalable desdites zones L1 à L16 et à des actions prédéfinies, le dispositif déclenche la distribution d'un article dont le rayonnage ou présentoir a été « pointé » par un client. Figures 4 to 6 describe three examples of devices likely to host an interactive facade. According to Figure 4, a device la, distributor of food (snacking), has an interactive facade 10 through which we guess racking 6 for accommodating sandwiches and / or other sweets. A 35 coin mechanism 3 can receive the coins of a buyer. A receptacle 4 is provided to restore the excess of money. A salvage zone 5 of a purchased item allows the buyer to collect the expected item. To highlight the items and appeal to the customer, a light source 2 is provided to illuminate the contents of the device. A parameterization step made it possible to define zones L1 to L16 at the level of the wall of the facade 10. Thus, when a hand approaches the wall, a triangulation mechanism - as shown in connection with FIG. is implemented by a processing unit (not shown in Figure 4) of the device 1a. It makes it possible to determine the position of the pointer with respect to said zones L1 to L16. By means of a prior association of said zones L1 to L16 and with predefined actions, the device triggers the distribution of an item whose rack or display has been "pointed" by a customer.
La figure 5 permet de présenter une variante de dispositif comportant une façade interactive. Il s'agit d'un distributeur automatique 1b de boissons chaudes ou froides. La surface de la façade interactive 10 peut être de dimensions plus réduites que celles de la façade du distributeur 1a décrit précédemment. La zone d'interaction délimitée par la façade interactive 10 du distributeur 1b, peut être personnalisée par exemple avec des stickers. Des zones L1 à L16 peuvent être prédéfinies. Chacune peut être dédiée à une indication de produit (café instantané, café en grain, etc.) ou de préparation (ajout de lait, sucre, etc.). Lorsque la main 20 d'un client pointe une zone prédéfinie de la façade interactive, celle-ci capture une image et le dispositif 1b détermine la position du doigt du client. L'espace de récupération 5 permet de distribuer la boisson ainsi préparée, après paiement via le monnayeur 3 associé au réceptacle 4 pour le surplus de monnaie. Pour rendre attractif la zone d'interaction, une source lumineuse 2 est prévue pour éclairer la zone d'interaction. La figure 6 présente un dispositif du type « vitrine interactive » 1c dont le but consiste à délivrer des informations : positionnement géographique, plan de métro, jukebox etc. Au même titre que les dispositifs la et lb, le dispositif 1c peut comporter des moyens pour effectuer un paiement (monnayeur 3 et réceptacle pour monnaie 4). Il comporte en outre une façade interactive, généralement de grande taille, pouvant couvrir intégralement un écran plat 7 sur lequel s'affichent des informations. La face active 7a de l'écran 7 (par opposition à sa face arrière 7b) fait face à la paroi translucide de la façade interactive 10. Une source lumineuse 2 diffuse de la lumière sur le cadre de la façade pour rétro-éclairer et ainsi mettre en valeur cette dernière. Un utilisateur peut pointer 20 une zone de ladite façade et commander l'affichage d'une information sur l'écran 7. Il peut encore, ou variante, recueillir un produit, tel qu'un support numérique par exemple, via un réceptacle de distribution 5. Nous pourrions également imaginer que le dispositif 1c est un distributeur de produits alimentaires au même titre que le dispositif la. Selon cette variante, les produits ne sont pas directement visibles sur leur présentoir. Une information visuelle (photo(s), vidéo(s), composition, etc.) et/ou publicitaire est présentée aux acheteurs potentiels. FIG. 5 makes it possible to present an alternative device comprising an interactive facade. This is a vending machine 1b of hot or cold drinks. The surface of the interactive facade 10 may be of smaller dimensions than those of the facade of the dispenser 1a described above. The interaction zone delimited by the interactive frontage 10 of the dispenser 1b can be customized, for example with stickers. L1 to L16 areas may be predefined. Each can be dedicated to a product indication (instant coffee, coffee beans, etc.) or preparation (adding milk, sugar, etc.). When the hand of a client points to a predefined area of the interactive facade, the latter captures an image and the device 1b determines the position of the customer's finger. The recovery space 5 makes it possible to dispense the beverage thus prepared, after payment via the coin mechanism 3 associated with the receptacle 4 for the surplus of money. To make the interaction zone attractive, a light source 2 is provided to illuminate the interaction zone. FIG. 6 presents a device of the "interactive showcase" type 1c whose purpose is to deliver information: geographical positioning, subway map, jukebox, etc. As well as the devices 1a and 1b, the device 1c can comprise means for making a payment (coin mechanism 3 and coin receptacle 4). It also includes an interactive facade, generally large, which can cover a full flat screen 7 on which information is displayed. The active face 7a of the screen 7 (as opposed to its rear face 7b) faces the translucent wall of the interactive facade 10. A light source 2 diffuses light on the frame of the facade to backlight and thus highlight the latter. A user can point to an area of said facade and control the display of information on the screen 7. It can still, or alternatively, collect a product, such as a digital medium for example, via a distribution receptacle. 5. We could also imagine that the device 1c is a food distributor in the same way as the device la. According to this variant, the products are not directly visible on their display. Visual information (photo (s), video (s), composition, etc.) and / or advertising is presented to potential buyers.
Quel que soit le dispositif considéré, celui-ci peut-être implanté dans un environnement où la luminosité peut être variable ou extrême au regard de conditions normales et moyennes pour lesquelles le fabriquant et/ou l'exploitant dudit dispositif a/ont basé le paramétrage.35 L'invention vise à concevoir ou adapter des dispositifs comportant une façade interactive pour supprimer les inconvénients liés notamment à l'environnement. Dans le cas d'un dispositif conçu selon l'invention, celle-ci permet de diminuer en outre les coûts de fabrication (suppression de sources de lumière sur la façade, utilisation de capteurs sensibles dans le visible, etc.). Whatever the device considered, it may be implanted in an environment where the brightness may be variable or extreme under normal and average conditions for which the manufacturer and / or the operator of said device has / have based the parameterization The invention aims to design or adapt devices comprising an interactive facade to eliminate the disadvantages related in particular to the environment. In the case of a device designed according to the invention, it also reduces manufacturing costs (removal of light sources on the facade, use of sensitive sensors in the visible, etc.).
La figure 9 permet d'illustrer un schéma fonctionnel d'un dispositif conforme à l'invention. Un tel dispositif - pouvant être similaire aux dispositifs la, lb ou 1c décrits précédemment - comporte une façade interactive dont un capteur d'image matriciel 12 est représenté. Ce capteur délivre une ou plusieurs images relatives à une région d'intérêt 15 (partie du cadre ceinturant la paroi de la façade). Le dispositif comporte en outre une source lumineuse 2. Cette dernière est utilisée, comme pour les dispositifs la, lb ou 1c, pour éclairer le contenu du dispositif et/ou la zone d'interaction. L'invention prévoit qu'une partie de la lumière délivrée par ladite source 2 soit utilisée pour détecter un pointeur. Ainsi, selon la configuration du dispositif, il peut être nécessaire de doter ce dernier de moyens (réflecteur(s) par exemple) pour orienter ladite partie de la lumière vers le cadre de la façade. Selon l'invention, la façade interactive - telle qu'illustrée en figure 1 - peut être dépourvue de sources lumineuses dédiées (diodes 13a à 13d, par exemple). En effet selon l'invention, la source 2 peut suffire à elle seule à éclairer ou à rétro-éclairer le cadre de la façade. En outre, selon l'invention, le capteur 12 de la façade peut travailler dans le visible - contrairement à la plupart des capteurs travaillant dans le proche infrarouge. Ainsi, l'invention permet de diminuer très fortement les coûts inhérents à la façade interactive utilisée. Un dispositif conforme à l'invention comporte en outre des moyens 33 pour réguler la puissance de la source lumineuse. Lesdits moyens 33 peuvent consister en une unité de traitement 30, chargée de détecter un pointeur et de déclencher une action, telle que décrite en liaison avec la figure 3. Cette dernière est toutefois adaptée pour en outre réguler la puissance lumineuse. Pour commander lesdits moyens 33, le dispositif (ou son unité de traitement) comporte en outre des moyens 31 pour analyser une image en deux dimension délivrée par le capteur 12. Cette image peut être similaire aux images 15a et 15b présentées en liaison avec la figure 2. Les moyens 31 peuvent analyser l'intégralité d'une image ou une portion Ai de celle-ci. Ainsi la figure 2 permet d'illustrer plusieurs exemples de portions Al à A6. Qu'une image soit considérée dans son ensemble ou en partie, l'invention prévoit que l'analyse effectuée par lesdits moyens 31 puisse consister à traduire tout ou partie d'une image sous la forme d'un histogramme en niveau de gris. Le gris est connu pour sa sensibilité aux changements des conditions de luminosité ambiante. Il constitue donc un choix particulièrement pertinent pour mettre en oeuvre l'invention. Toutefois, celle-ci ne serait être limitée par le choix de cette teinte. FIG. 9 illustrates a block diagram of a device according to the invention. Such a device - which may be similar to the devices 1a, 1b or 1c described above - has an interactive facade of which a matrix image sensor 12 is shown. This sensor delivers one or more images relating to a region of interest (part of the frame surrounding the wall of the facade). The device further comprises a light source 2. The latter is used, as for the devices 1a, 1b or 1c, to illuminate the contents of the device and / or the interaction zone. The invention provides that part of the light delivered by said source 2 is used to detect a pointer. Thus, depending on the configuration of the device, it may be necessary to provide the latter with means (reflector (s) for example) to direct said portion of the light to the frame of the facade. According to the invention, the interactive facade - as illustrated in Figure 1 - may be devoid of dedicated light sources (diodes 13a to 13d, for example). Indeed according to the invention, the source 2 may be sufficient alone to illuminate or backlight the frame of the facade. In addition, according to the invention, the sensor 12 of the facade can work in the visible - unlike most sensors working in the near infrared. Thus, the invention makes it possible to greatly reduce the costs inherent to the interactive facade used. A device according to the invention further comprises means 33 for regulating the power of the light source. Said means 33 may consist of a processing unit 30, responsible for detecting a pointer and for triggering an action, as described with reference to FIG. 3. The latter is however adapted to further regulate the light power. To control said means 33, the device (or its processing unit) further comprises means 31 for analyzing a two-dimensional image delivered by the sensor 12. This image may be similar to the images 15a and 15b presented in connection with FIG. 2. The means 31 may analyze the entirety of an image or a portion Ai thereof. Thus, FIG. 2 illustrates several examples of portions A1 to A6. Whether an image is considered in its entirety or in part, the invention provides that the analysis performed by said means 31 may consist of translating all or part of an image in the form of a histogram in gray level. Gray is known for its sensitivity to changes in ambient light conditions. It is therefore a particularly relevant choice to implement the invention. However, this one would not be limited by the choice of this hue.
La figure 7a permet d'illustrer un exemple de traduction sous la forme d'un histogramme 16 d'une image capturée. Un tel histogramme peut être défini comme une fonction discrète qui associe à chaque valeur d'intensité, un nombre p de pixels prenant ladite valeur. FIG. 7a illustrates an example of translation in the form of a histogram 16 of a captured image. Such a histogram can be defined as a discrete function that associates with each intensity value, a number p of pixels taking said value.
On peut grouper plusieurs valeurs d'intensité en une seule classe pour mieux appréhender une distribution des intensités d'une image. Ainsi la figure 7a présente un histogramme pour lequel 256 valeurs d'intensités sont représentées sur un axe des abscisses. En ordonnée, apparait le nombre p de pixels par valeur d'intensité. La figure 7a permet également d'illustrer la possibilité de grouper les valeurs d'intensité en cinq classes z0 à z4 respectivement de 0 à 50, 51 à 101, 102 à 152, 153 à 203, 204 à 255. Several intensity values can be grouped into a single class to better understand a distribution of the intensities of an image. Thus, FIG. 7a shows a histogram for which 256 intensity values are represented on an abscissa axis. On the ordinate, the number p of pixels per intensity value appears. FIG. 7a also makes it possible to illustrate the possibility of grouping the intensity values into five classes z0 to z4 respectively from 0 to 50, 51 to 101, 102 to 152, 153 to 203, 204 to 255.
Différentes mesures sont applicables sur un tel histogramme. L'invention prévoit selon un premier mode de réalisation de calculer la moyenne d'échantillonnage µ (Mean Sample Value - MSV selon une terminologie anglo-saxonne). Cette valeur permet d'estimer la capacité, pour une exposition donnée d'un capteur 12, de pouvoir détecter un pointeur à proximité de la paroi de la façade interactive. Pour une zone zi, les moyens 31 calculent la somme xi= E P(J) ' J étant la valeur d'intensité dans la classe zi JEZi considérée. La moyenne d'échantillonnage µ est ensuite 4 E (i +l)xi calculée par p.= a 0 4 E xi i=0 Different measurements are applicable on such a histogram. The invention provides according to a first embodiment to calculate the sample mean μ (Mean Sample Value - MSV in English terminology). This value makes it possible to estimate the capacity, for a given exposure of a sensor 12, to be able to detect a pointer near the wall of the interactive facade. For a zone zi, the means 31 calculate the sum xi = E P (J) where J is the intensity value in the class zi JEZi considered. The sampling mean μ is then 4 E (i + 1) xi calculated by p = 0 E xi i = 0
En variante, l'invention prévoit qu'une telle moyenne ne se calcule pas directement sur une image 15a ou 15b telle que décrite en figure 2. Selon ce mode de réalisation l'invention prévoit de traduire sous la forme d'un histogramme chaque portion Ak (Al à A6, par exemple, en liaison avec la figure 2). Alternatively, the invention provides that such an average is not calculated directly on an image 15a or 15b as described in Figure 2. According to this embodiment the invention provides to translate in the form of a histogram each portion Ak (Al to A6, for example, in connection with Figure 2).
Les moyens 31 calculent alors pour chaque portion d'image Ak, une somme xk= E pu) puis une moyenne MSV µk JEZi telle que µk=a=04 La moyenne d'échantillonnage k E xi i=0 basée sur une image de n portions Ao à An_1 est alors l n-1 k égale à µ =ù l . n k=0 4 E (i + 1)xk Selon l'invention, il est possible de borner les valeurs de xk. A titre d'exemple, p peut ainsi varier entre 1 à 5. Ainsi une valeur de p . - proche de 5 représente une image surexposée pour lequel le capteur 12 est saturé (figure 7d); - proche de 1 représente une image sous-exposée (voire totalement sombre - figure 7b). The means 31 then calculate for each image portion Ak, a sum xk = E pu) and then an average MSV μk JEZi such that μk = a = 04 The sampling mean k E xi i = 0 based on an image of n Portions Ao to An_1 is then l n-1 k equal to μ = ù l. n k = 0 4 E (i + 1) xk According to the invention, it is possible to limit the values of xk. For example, p may thus vary between 1 to 5. Thus a value of p. close to 5 represents an overexposed image for which the sensor 12 is saturated (FIG. 7d); - close to 1 represents an underexposed image (or totally dark - Figure 7b).
Les figures 7b, 7c et 7b illustrent respectivement la traduction sous la forme d'un histogramme en niveau de gris d'une image sous-exposée, normale ou surexposée. Pour qu'un capteur puisse délivrer une image à partir de laquelle un pointeur peur être détecté voire positionné, celui-ci ne doit pas être saturé. La luminosité doit être par ailleurs suffisante. Nous pouvons donc définir, au sens de l'invention, un intervalle de valeurs [yb,ye] pour lequel la détection est possible. Yb représente ainsi la borne inférieure dudit intervalle et µe, la borne supérieure. L'image, donc l'histogramme et enfin la valeur u ou encore l'intervalle de valeurs [yb,ye] dépendent du paramètre d'exposition du capteur ayant délivré ladite image. Nous nommerons par la suite « exposition » ledit paramètre. Nous considérons que, selon un premier mode de réalisation de l'invention, l'exposition du capteur est définie à une valeur moyenne. Un dispositif conforme à l'invention comportant des moyens 30, 31 et 32 aptes à réguler la puissance de la source lumineuse 2 peut donc estimer la capacité à détecter un pointeur, par exemple à l'aide du calcul de la moyenne d'échantillonnage MSV. L'invention ne serait être limitée à ce seul exemple de calcul. Toute autre méthode, permettant une telle estimation, entre dans la cadre de la présente invention. Figures 7b, 7c and 7b respectively illustrate the translation in the form of a gray scale histogram of an underexposed, normal or overexposed image. In order for a sensor to deliver an image from which a pointer can be detected or positioned, it must not be saturated. The brightness must be otherwise sufficient. We can therefore define, within the meaning of the invention, an interval of values [yb, ye] for which detection is possible. Yb thus represents the lower bound of said interval and μe the upper bound. The image, therefore the histogram and finally the value u or the range of values [yb, ye] depend on the exposure parameter of the sensor that delivered said image. We will later name "exposure" to that parameter. We consider that, according to a first embodiment of the invention, the exposure of the sensor is set to a mean value. A device according to the invention comprising means 30, 31 and 32 able to regulate the power of the light source 2 can therefore estimate the ability to detect a pointer, for example using the calculation of the MSV sampling mean . The invention would not be limited to this single example of calculation. Any other method, allowing such an estimate, is within the scope of the present invention.
Pour optimiser la capacité du dispositif à détecter un pointeur à proximité d'une façade interactive quelle que soit la luminosité ambiante, les moyens 31 peuvent commander des moyens 33 pour réguler la puissance de la source lumineuse du dispositif - prévue pour éclairer le contenu de ce dernier - pour respectivement augmenter ou diminuer ladite puissance selon que la valeur calculée µ devient proche de ub ou de µe. To optimize the ability of the device to detect a pointer near an interactive facade regardless of the ambient brightness, the means 31 may control means 33 for regulating the power of the light source of the device - intended to illuminate the contents of this device. last - to respectively increase or decrease said power depending on whether the calculated value μ becomes close to ub or μe.
Un deuxième objectif de l'invention consiste à exploiter une image capturée, depuis la façade interactive, à des fins de détection pour estimer un niveau d'éclairage du contenu du dispositif et ainsi pouvoir réguler ladite source lumineuse pour optimiser la visibilité des articles et/ou informations disponibles au travers de la façade interactive. Cet objectif reste compatible et complémentaire au maintien de la capacité à détecter (ou à distinguer un pointeur du cadre). L'invention prévoit ainsi d'estimer l'intensité lumineuse délivrée par la source lumineuse du dispositif à partir d'image(s) délivrée(s) par un capteur d'image d'une façade interactive. Selon un premier mode de réalisation, l'unité de traitement 30 d'un dispositif conforme à l'invention, peut calculer 31 un moment central absolu 8 d'un histogramme en niveau de gris, tel que l'histogramme 16 présenté en figure 7a. Pour cela, les moyens 31 peuvent 1 t-1 calculer la moyenne de l'histogramme p= t_1 t 1 J i=o j=o étant le nombre d'intensités possibles (t=256 sur la 30 figure 7a). Le moment central absolu 8 s'obtient dès lors par 1 t-1 8= t 1 Jù p .p(J) j=o En variante, l'invention prévoit qu'un tel moment central absolu ne se calcule pas directement sur une image 15a ou 15b - telle que décrite en figure 2. Selon ce mode de réalisation, l'invention prévoit de traduire sous la forme d'un histogramme chaque portion Ak (Al à A6, par exemple, en liaison avec la figure 2). A second objective of the invention consists in exploiting a captured image, from the interactive facade, for detection purposes in order to estimate a lighting level of the content of the device and thus be able to regulate said light source in order to optimize the visibility of the articles and / or information available through the interactive facade. This objective remains compatible and complementary to maintaining the ability to detect (or to distinguish a pointer from the frame). The invention thus provides for estimating the light intensity delivered by the light source of the device from image (s) delivered (s) by an image sensor of an interactive facade. According to a first embodiment, the processing unit 30 of a device according to the invention can calculate 31 an absolute central moment 8 of a gray level histogram, such as the histogram 16 presented in FIG. . For this purpose, the means 31 can calculate the average of the histogram p = t = 1 = where j = 0 being the number of possible intensities (t = 256 in FIG. 7a). The absolute central moment 8 is then obtained by 1 t-1 8 = t 1 Jù p .p (J) j = o Alternatively, the invention provides that such an absolute central moment is not calculated directly on a image 15a or 15b - as depicted in FIG. 2. According to this embodiment, the invention provides for translating each portion Ak (Al to A6, for example, in connection with FIG. 2) into the form of a histogram.
Les moyens 31 calculent alors pour chaque portion k 1 t-1 d'image Ak, p = t 1 IL190) puis le moment central absolu I j t=o JùPk1=0 j=0 Le moment central absolu, basé sur une image de n ln-1 k portions Ao à An_1 est alors égal à .5=ù1.5 . n k=0 La valeur 8 peut varier de 0 à Smax. 8 proche de 0 représente une région capturée totalement sous-exposée voire complètement sombre. Inversement, 8 proche de Ô. représente une région capturée totalement surexposée, pour laquelle le capteur ayant délivré l'image doit être totalement saturé. The means 31 then calculate for each portion k 1 t-1 of image Ak, p = t 1 IL190) then the absolute central moment I jt = 0 JuPk1 = 0 j = 0 The absolute central moment, based on an image of n ln-1 k portions Ao to An_1 is then equal to .5 = ù1.5. n k = 0 The value 8 can vary from 0 to Smax. 8 close to 0 represents a captured region that is totally underexposed or even completely dark. Conversely, 8 close to O. represents a totally overexposed captured region, for which the sensor having delivered the image must be fully saturated.
Le moment central absolu d'un histogramme résultant d'une image capturée est ainsi représentatif de l'éclairage du distributeur mettant en valeur son contenu. The absolute central moment of a histogram resulting from a captured image is thus representative of the lighting of the distributor highlighting its content.
Traduire le regard humain pour déterminer une plage de valeurs pour laquelle une personne distingue clairement le contenu d'un dispositif au travers d'une façade interactive relève du subjectif. Translating the human eye to determine a range of values for which a person clearly distinguishes the content of a device through an interactive facade is subjective.
Aussi l'invention prévoit une étape d'étalonnage durant laquelle, on positionne un tel dispositif dans des conditions moyennes de luminosité ambiante, pour lesquelles - et pour une exposition d'un capteur donnée, on détermine un intervalle de valeurs [sb'se] • 8b et 8e désignent respectivement le moment central absolu en deçà j=o k k 1 t1 k Ô k que 8= t 1 J-P p(J) ou au delà duquel on ne distingue plus aisément et agréablement le contenu du dispositif. Selon l'invention, il est possible de définir une valeur optimale Bop telle que Bop = Se 2Sb , pour laquelle l'éclairage délivré par la source lumineuse du dispositif ajouté à l'éclairage ambiant permet une parfaite visibilité du contenu au travers de la façade interactive. L'image capturée, l'histogramme en résultant, la valeur 8 ou encore l'intervalle de valeurs [sb,se] et donc Bop dépendent du paramètre d'exposition du capteur. Nous considérons que selon un premier mode de réalisation de l'invention, l'exposition du capteur est initialisée à une valeur moyenne. Also the invention provides a calibration step during which, such a device is positioned under average ambient light conditions, for which - and for an exposure of a given sensor, an interval of values [sb'se] is determined. • 8b and 8e respectively denote the absolute central moment below j = okk 1 t1 k Ô k that 8 = t 1 JP p (J) or beyond which one no longer easily and agreeably distinguish the contents of the device. According to the invention, it is possible to define an optimum value Bop such that Bop = Se 2Sb, for which the illumination delivered by the light source of the device added to the ambient lighting allows a perfect visibility of the content through the facade interactive. The captured image, the resulting histogram, the value 8 or the range of values [sb, se] and thus Bop depend on the exposure parameter of the sensor. We consider that according to a first embodiment of the invention, the exposure of the sensor is initialized to an average value.
Selon une variante de réalisation, l'invention prévoit que l'on puisse réguler l'exposition d'un capteur. Ainsi en liaison avec la figure 9, des moyens 32 sont prévus pour modifier ce paramètre. L'étape d'étalonnage consiste dès lors à déterminer, pour une valeur d'exposition Ei, les valeurs LÔ;,41, Sop voire pb,pe. La figure 8 permet d'illustrer un exemple de résultats obtenus à l'issue d'une étape d'étalonnage. La figure 8 présente les valeurs de LÔ;,41 et de «1, pour une exposition Ei comprise entre une valeur minimale E1 et une valeur maximale Em. Trois courbes sont donc décrites par ladite figure 8. On peut donc remarquer que, pour une valeur d'exposition Ei donnée, le contenu est suffisamment éclairé tant que la valeur 5' reste comprise entre la valeur 8b et 8e. En outre, nous pouvons remarquer que les moyens 31 du dispositif peuvent estimer que les conditions d'éclairage, notamment dues à une luminosité ambiante fluctuante, deviennent inférieures aux conditions d'éclairage optimales associées à la valeur 8ôpt si 8b <8' <8ôp . Inversement, lesdits moyens 31 peuvent estimer que lesdites conditions d'éclairage deviennent plus intenses que les conditions d'éclairage optimales si 8ôp <8Z <8e . L'invention prévoit ainsi que les moyens 31, via les moyens 33, puissent réguler la puissance de la source lumineuse selon l'estimation de la variation de luminosité ambiante. Ainsi un dispositif conforme à l'invention peut automatiquement : - augmenter la puissance de la source lumineuse si ladite intensité lumineuse estimée est inférieure à la valeur optimale ; - diminuer la puissance de ladite source lumineuse si ladite intensité lumineuse estimée est supérieure à ladite valeur optimale. According to an alternative embodiment, the invention provides that it is possible to regulate the exposure of a sensor. Thus, in connection with FIG. 9, means 32 are provided for modifying this parameter. The calibration step therefore consists in determining, for an exposure value Ei, the values L0, 41, Sop or even pb, e.g. FIG. 8 illustrates an example of results obtained after a calibration step. FIG. 8 presents the values of L0, 41 and of "1, for an exposure Ei between a minimum value E1 and a maximum value Em. Three curves are thus described by said FIG. 8. It can thus be noted that, for a given exposure value Ei, the content is sufficiently illuminated as long as the value 5 'remains between the value 8b and 8e. In addition, we can notice that the means 31 of the device can estimate that the lighting conditions, in particular due to a fluctuating ambient brightness, become less than the optimal lighting conditions associated with the value 8δpt if 8b <8 '<8δp. Conversely, said means 31 can estimate that said lighting conditions become more intense than the optimum lighting conditions if 8p <8Z <8e. The invention thus provides that the means 31, via the means 33, can regulate the power of the light source according to the estimate of the change in ambient brightness. Thus a device according to the invention can automatically: - increase the power of the light source if said estimated light intensity is less than the optimum value; - Decrease the power of said light source if said estimated light intensity is greater than said optimum value.
Selon une variante de réalisation, les moyens 31 peuvent en outre réguler automatiquement l'exposition d'un capteur de la façade interactive. Pour cela, ils exploitent l'estimation de la capacité à détecter un pointeur, définie par exemple par la valeur p. Un dispositif conforme à l'invention peut ainsi automatiquement augmenter ou diminuer l'exposition Ei du capteur si la moyenne d'échantillonnage pl n'est pas comprise dans l'intervalle [pbi,peil prédéterminé. Pour cela, les moyens 31 peuvent exploiter la valeur du moment central absolu 8' calculé. Si ce dernier est inférieur à la valeur prédéterminée Bop, c'est le signe d'une baisse de luminosité ambiante. En revanche, si 30 ledit moment central absolu 8Z calculé est supérieur à la valeur prédéterminée Bop , cela met en évidence un accroissement de luminosité ambiante. Il parait dès lors pertinent d'augmenter l'exposition du capteur dans le premier cas et de diminuer celle-ci dans le second. According to an alternative embodiment, the means 31 may further automatically regulate the exposure of a sensor of the interactive facade. For this, they exploit the estimation of the ability to detect a pointer, defined for example by the value p. A device according to the invention can thus automatically increase or decrease the exposure Ei of the sensor if the sampling mean p1 is not in the range [pbi, predetermined peel. For this, the means 31 can exploit the value of the absolute central moment 8 'calculated. If the latter is lower than the predetermined value Bop, it is a sign of a drop in ambient brightness. On the other hand, if said calculated absolute central moment 8Z is greater than the predetermined value Bop, this shows an increase in ambient brightness. It therefore seems appropriate to increase the exposure of the sensor in the first case and reduce it in the second.
L'invention permet ainsi d'asservir la puissance de la source lumineuse voire de l'exposition d'un capteur aux conditions de luminosité ambiante. Grâce à l'invention, les capacités d'un dispositif à détecter un pointeur et à permettre l'observation distincte d'un contenu au travers d'une façade interactive sont maximisées. L'invention prévoit que les valeurs - telles que 8b, «, «pt, 4, ou µe - obtenues durant l'étalonnage d'un dispositif interactif puissent être mémorisées par des moyens de stockage couplés aux moyens 31 afin que ces derniers puissent exploiter lesdites valeurs pour réguler la puissance de la source lumineuse voire de l'exposition d'un capteur aux conditions de luminosité ambiante. The invention thus makes it possible to control the power of the light source or even the exposure of a sensor to ambient light conditions. Thanks to the invention, the capabilities of a device to detect a pointer and to allow the distinct observation of a content through an interactive facade are maximized. The invention provides that the values - such as 8b, "," pt, 4, or μe - obtained during the calibration of an interactive device can be stored by storage means coupled to the means 31 so that they can operate said values for regulating the power of the light source or even the exposure of a sensor to ambient light conditions.
Selon un mode de réalisation, l'invention prévoit que des moyens d'alerte 35 puissent être activés par les moyens 31 pour réguler la source lumineuse. Ainsi, ladite activation peut être commandée si u atteint les valeurs 4 et/ou µe, synonyme d'une perte de capacité à détecter correctement un pointeur. L'activation peut être commandée en variante, si 8 atteint les valeurs 8g et/ou 8e, synonyme d'un éclairage du contenu inapproprié. According to one embodiment, the invention provides that alert means 35 may be activated by means 31 for regulating the light source. Thus, said activation can be controlled if u reaches the values 4 and / or μe, synonymous with a loss of ability to correctly detect a pointer. The activation can be alternatively ordered, if 8 reaches the values 8g and / or 8e, synonymous with a lighting of the inappropriate content.
Tout autre seuil pourrait être utilisé pour déclencher lesdits moyens d'alerte 35. Any other threshold could be used to trigger said alert means 35.
L'invention concerne également un dispositif comportant une façade interactive comprenant une pluralité de capteurs. Dans ce cas, selon un mode de réalisation préféré, la puissance de la source lumineuse du dispositif est régulée sur la base d'images délivrées par un seul capteur. Celui-ci dispose généralement d'un champ de vision central au regard de la façade. De la même manière, l'exposition de tous les capteurs peut être asservie sur la base desdites images délivrées par ledit capteur sélectionné. En variante, l'exposition desdits capteurs peut être régulée indépendamment des uns des autres. The invention also relates to a device comprising an interactive facade comprising a plurality of sensors. In this case, according to a preferred embodiment, the power of the light source of the device is regulated on the basis of images delivered by a single sensor. This one usually has a central field of vision with regard to the facade. In the same way, the exposure of all the sensors can be enslaved on the basis of said images delivered by said selected sensor. Alternatively, the exposure of said sensors can be regulated independently of each other.
La figure 10 permet de décrire différents modes de réalisation d'un procédé pour réguler une s o u r c e lumineuse d'un dispositif conforme à l'invention. Un tel procédé est mis en oeuvre par l'unité de traitement dudit dispositif. Un tel procédé débute en 100. Il comporte une première étape 101 consistant à analyser une image délivrée par un capteur d'image de la façade interactive. Il en résulte, par exemple, une traduction de ladite image sous la forme d'un histogramme en niveau de gris. Suit une étape 102 pour estimer l'intensité lumineuse délivrée par la source lumineuse - ou encore la capacité à permettre une observation agréable et distincte du contenu. Cette étape peut consister dans le calcul d'un moment central absolu 8 dudit histogramme. Un procédé conforme à l'invention comporte ainsi une étape pour : - augmenter, en 105, la puissance de la source lumineuse tant que, en 103, ladite intensité lumineuse estimée est inférieure à une valeur optimale prédéterminée ; - diminuer, en 107, la puissance de ladite source lumineuse tant que, en 103, ladite intensité lumineuse estimée est supérieure à ladite valeur optimale prédéterminée. L'invention prévoit que l'on puisse augmenter ladite puissance tant que, en 104, une valeur maximale Pmax de la puissance n'est pas atteinte. Réciproquement, il peut être prévu que l'on puisse diminuer ladite puissance tant que, en 106, une valeur minimale Pmin de la puissance n'est pas atteinte. Selon un tel procédé, la puissance de la source lumineuse est maintenue constante, si les conditions de luminosité ambiante sont proches des conditions de luminosité ayant servi à étalonner (pour une valeur d'exposition des capteurs donnée) le dispositif. Selon une variante de réalisation, un tel procédé pour réguler la puissance de la source lumineuse d'un dispositif conforme à l'invention permet de réguler le paramètre d'exposition Ei du ou des capteur (s) de la façade interactive. Ainsi, un tel procédé comporte une étape 201 pour estimer une capacité à détecter un pointeur. Cette étape peut consister à calculer une moyenne d'échantillonnage u d'un histogramme résultant d'une image délivrée par un capteur de la façade interactive. Selon ce mode de réalisation, le procédé comporte une étape pour : - augmenter, en 203, l'exposition du capteur tant que, en 202, la moyenne d'échantillonnage u n'est pas comprise dans un intervalle [µb,µe], les valeurs Pb et µe étant prédéterminées pour l'exposition courante du capteur ; - ou diminuer, en 205, l'exposition du capteur tant que, en 204, la moyenne d'échantillonnage u n'est pas comprise dans ledit intervalle [µb' FIG. 10 makes it possible to describe different embodiments of a method for regulating a light source of a device according to the invention. Such a method is implemented by the processing unit of said device. Such a method starts at 100. It comprises a first step 101 of analyzing an image delivered by an image sensor of the interactive facade. This results, for example, in translating said image into a gray-scale histogram. A step 102 is then followed to estimate the light intensity delivered by the light source - or the ability to provide a pleasant and distinct observation of the content. This step may consist in calculating an absolute central moment 8 of said histogram. A method according to the invention thus comprises a step of: - increasing, at 105, the power of the light source as, at 103, said estimated light intensity is less than a predetermined optimum value; - Decrease, in 107, the power of said light source as, at 103, said estimated light intensity is greater than said predetermined optimum value. The invention provides that one can increase said power as, at 104, a maximum value Pmax of the power is not reached. Conversely, it can be expected that one can reduce said power as, in 106, a minimum value Pmin of the power is not reached. According to such a method, the power of the light source is kept constant, if the ambient light conditions are close to the brightness conditions used to calibrate (for a given sensor exposure value) the device. According to an alternative embodiment, such a method for regulating the power of the light source of a device according to the invention makes it possible to regulate the exposure parameter Ei of the sensor (s) of the interactive facade. Thus, such a method comprises a step 201 for estimating an ability to detect a pointer. This step may consist in calculating a sampling mean u of a histogram resulting from an image delivered by a sensor of the interactive facade. According to this embodiment, the method comprises a step for: increasing, at 203, the exposure of the sensor as long as, at 202, the sampling mean u is not in a range [μb, μe], the values Pb and μe being predetermined for the current exposure of the sensor; - or decrease, in 205, the exposure of the sensor as, in 204, the sampling mean u is not included in said interval [μb '
Selon un mode de réalisation préférée, l'exposition 30 du capteur est augmentée si les conditions de luminosité ambiante sont estimées décroissantes au regard des conditions nominales (par exemple, si le moment central absolu 8 calculé est inférieur à la valeur prédéterminée 8op). Ladite exposition est en revanche diminuée si les 35 conditions de luminosité ambiante sont estimées plus 25 According to a preferred embodiment, the exposure of the sensor is increased if the ambient light conditions are estimated to decrease with respect to the nominal conditions (for example, if the absolute central moment 8 calculated is less than the predetermined value 8op). Said exposure, on the other hand, is decreased if the ambient light conditions are estimated at 25
22 intenses au regard des conditions nominales (par exemple, si ledit moment central absolu 8 calculé est supérieur à la valeur prédéterminée 8op). 22 under the nominal conditions (for example, if said calculated absolute central moment 8 is greater than the predetermined value 8op).
Tout autre mode de réalisation visant à asservir la puissance de la source lumineuse voire de l'exposition des capteurs pourraient être envisagées pour concevoir un dispositif conforme à l'invention. Il suffit pour cela que la régulation soit effectuée à partir d'estimations 10 fondées sur la base d'images capturées à l'aide de la façade interactive. Any other embodiment to enslave the power of the light source or even the exposure of the sensors could be considered to design a device according to the invention. All that is needed is for the regulation to be based on estimates based on images captured using the interactive facade.
Claims (17)
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1052143A FR2958010B1 (en) | 2010-03-25 | 2010-03-25 | INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS |
| EP11712998A EP2550583A2 (en) | 2010-03-25 | 2011-03-14 | Interactive device that can adapt to ambient light conditions |
| PCT/FR2011/050504 WO2011117505A2 (en) | 2010-03-25 | 2011-03-14 | Interactive device that can adapt to ambient light conditions |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1052143A FR2958010B1 (en) | 2010-03-25 | 2010-03-25 | INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR2958010A1 true FR2958010A1 (en) | 2011-09-30 |
| FR2958010B1 FR2958010B1 (en) | 2017-11-10 |
Family
ID=43016691
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR1052143A Expired - Fee Related FR2958010B1 (en) | 2010-03-25 | 2010-03-25 | INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS |
Country Status (3)
| Country | Link |
|---|---|
| EP (1) | EP2550583A2 (en) |
| FR (1) | FR2958010B1 (en) |
| WO (1) | WO2011117505A2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI526888B (en) * | 2011-12-20 | 2016-03-21 | 友達光電股份有限公司 | Vending machine and operating system and operating method thereof |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5483261A (en) * | 1992-02-14 | 1996-01-09 | Itu Research, Inc. | Graphical input controller and method with rear screen image detection |
| US20050277071A1 (en) * | 2004-06-14 | 2005-12-15 | Microsoft Corporation | Method for controlling an intensity of an infrared source used to detect objects adjacent to an interactive display surface |
| WO2006027423A1 (en) * | 2004-08-09 | 2006-03-16 | Simag Developpement | Input device comprising an optical sensor and a filter means |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100468303C (en) * | 2003-02-14 | 2009-03-11 | 奈克斯特控股公司 | Touch screen signal processing |
-
2010
- 2010-03-25 FR FR1052143A patent/FR2958010B1/en not_active Expired - Fee Related
-
2011
- 2011-03-14 WO PCT/FR2011/050504 patent/WO2011117505A2/en active Application Filing
- 2011-03-14 EP EP11712998A patent/EP2550583A2/en not_active Withdrawn
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5483261A (en) * | 1992-02-14 | 1996-01-09 | Itu Research, Inc. | Graphical input controller and method with rear screen image detection |
| US20050277071A1 (en) * | 2004-06-14 | 2005-12-15 | Microsoft Corporation | Method for controlling an intensity of an infrared source used to detect objects adjacent to an interactive display surface |
| WO2006027423A1 (en) * | 2004-08-09 | 2006-03-16 | Simag Developpement | Input device comprising an optical sensor and a filter means |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2011117505A3 (en) | 2012-12-20 |
| EP2550583A2 (en) | 2013-01-30 |
| WO2011117505A2 (en) | 2011-09-29 |
| FR2958010B1 (en) | 2017-11-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3529785B1 (en) | System for identifying or assisting the identification of a product or set of products | |
| FR2977028A1 (en) | COCKPIT FOR AIRCRAFT WITH VISUAL DISPLAYS | |
| FR2889606A1 (en) | DISPLAY OF DIGITAL PHOTOGRAPHIC IMAGES | |
| EP3720115B1 (en) | Method for imaging with pulsed light | |
| WO2017009544A1 (en) | Range-based control of the transmission of a variable transmission lens | |
| FR2958010A1 (en) | INTERACTIVE DEVICE ADAPTABLE TO AMBIENT LUMINOSITY CONDITIONS | |
| FR3054425A1 (en) | DISPLAY WITH INTELLIGENT ELECTRONIC SHELVES | |
| EP2668556A2 (en) | Touch and gesture control device, and related gesture-interpretation method | |
| EP3659127A1 (en) | Installation and method for managing product data | |
| EP3973343B1 (en) | Vision apparatus providing night vision and direct vision of a surrounding scene | |
| WO2021204772A1 (en) | Method and device for document imaging | |
| FR3008601A1 (en) | REFRIGERATED FURNITURE FOR PRESENTATION OF FOODSTUFFS | |
| FR3107377A1 (en) | INSTALLATION TO PRESENT PRODUCTS FOR SALE, WITH ARTIFICIAL VISION SYSTEM | |
| EP2684112A2 (en) | Robust image acquisition and processing system for an interactive front panel, and associated interactive front panel and device | |
| FR3005521A1 (en) | INTERACTIVE DISPLAY FOR ARTICLE | |
| FR3143809A1 (en) | System and method for acquiring a plurality of images and associated identification system and method | |
| EP1709562A1 (en) | Video screen display device and method | |
| WO2023152246A1 (en) | Vending machine for contactless sale of consumables | |
| FR3141266A1 (en) | Management system for traceability. | |
| EP2294951B1 (en) | Letterbox device with a device for detecting mail and detection method implemented | |
| WO2018109044A1 (en) | Device for detecting an object of interest and method implementing this device | |
| EP2602659A1 (en) | Illuminated supporting device and assembly for photographing an object or a person | |
| WO2009103617A1 (en) | Method for selecting audio and/or visual documents having the strongest impact on consumers, and related server | |
| FR3136878A1 (en) | Object transport package incorporating two delivery information display screens | |
| FR2995430A1 (en) | Interactive dressing room, has lighting device controlled by set of computer resources, and interaction object allowed to interact with set of computer resources in real-time in cabin via depth camera and display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PLFP | Fee payment |
Year of fee payment: 7 |
|
| PLFP | Fee payment |
Year of fee payment: 8 |
|
| PLFP | Fee payment |
Year of fee payment: 9 |
|
| PLFP | Fee payment |
Year of fee payment: 11 |
|
| CA | Change of address |
Effective date: 20201029 |
|
| PLFP | Fee payment |
Year of fee payment: 12 |
|
| PLFP | Fee payment |
Year of fee payment: 13 |
|
| ST | Notification of lapse |
Effective date: 20231105 |