EP1100050A1 - Système et procédé de comptage de passagers pour bus - Google Patents

Système et procédé de comptage de passagers pour bus Download PDF

Info

Publication number
EP1100050A1
EP1100050A1 EP00403122A EP00403122A EP1100050A1 EP 1100050 A1 EP1100050 A1 EP 1100050A1 EP 00403122 A EP00403122 A EP 00403122A EP 00403122 A EP00403122 A EP 00403122A EP 1100050 A1 EP1100050 A1 EP 1100050A1
Authority
EP
European Patent Office
Prior art keywords
vehicle
passengers
image
vision
counting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP00403122A
Other languages
German (de)
English (en)
Other versions
EP1100050B1 (fr
Inventor
Hoang Giang Nguyen
Patrick Paletto
Jean Michel Fortier
Alain Tranchant
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Renault Trucks SAS
Original Assignee
Renault SAS
Renault Vehicules Industriels SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Renault SAS, Renault Vehicules Industriels SA filed Critical Renault SAS
Publication of EP1100050A1 publication Critical patent/EP1100050A1/fr
Application granted granted Critical
Publication of EP1100050B1 publication Critical patent/EP1100050B1/fr
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit

Definitions

  • the present invention relates to a system and method counting, as well as detection, of passengers for bus, coach or any group transport vehicle.
  • Knowledge of instantaneous vehicle weight can be used to brake and steering control.
  • any passenger vehicle like coaches, buses, school buses by example, it is necessary to detect obstacles presenting at the doors and likely to interfere with the operation of the closing mechanisms doors.
  • the first belt counting mode uses five electrical contacts, distributed under the surface of the carpets, which react according to the weight of the person walking on the carpet. This solution is unreliable because some children may not be taken because of their low weight.
  • the second infrared barrier counting mode typically uses 2 to 4 infrared cells, which are attached to the edge of the doors and at the top of the doors. This mode is also unreliable because, depending on the albedo of people, cells may not detect people who do not reflect any signal back. Failure to detect people is due to the absorption of infrared by the tissues of their clothes. In the case of counting by ultrasonic barriers, the emitted beam can be dispersed for the physical fitness of people because ultrasound is specular.
  • the infrared pyrometry counting mode is used more particularly in banks. It is based on the same principle as barrier counting infrared but the wavelengths used in pyrometry are 3 to 5 microns and 8 to 12 microns, while the wavelengths used in the infrared barriers are 0.7 to 0.9 microns.
  • the fourth counting mode uses a camera which aims vertically at a checkerboard mark placed on the ground.
  • the counting is carried out using an integrated circuit which includes image processing with neural networks.
  • This fourth mode described in particular in the patent French FR 2 739 208 from FAIVELY TRANSPORT, allows distinguish the direction of movement of people.
  • the passenger detection function at bus door level it can be provided by example by pneumatic pressure sensors or by piezoelectric sensors fitted to the edges of the doors associated with means for measuring the current of electric motors for closing the doors.
  • An electrical signal is sent to the dashboard of the vehicle to authorize the driver to start.
  • a obstacle like a passenger's arm or foot remaining in the door may not be detected and get stuck while the driver starts his vehicle.
  • the invention aims to solve these two problems by offering a counting and detection system by camera coupled to presence detection means to confirm and remove the doubt.
  • the counting system comprises a device for acquiring images from one or more several digital matrix cameras, CCD type - Charge Coupled Device -, or CMOS - Complementary Oxide Semiconductor -, or APS-CMOS - Active Pixel Sensor CMOS -, miniature format, located in the mechanical structure of the bus type vehicle, at the level from each passenger access door either front of vehicle for passenger entry flow and back for the output stream. Means adequate lighting can be combined with cameras, in order to illuminate the scene happening in the vicinity of each door.
  • the images from the cameras are processed by a on-board electronic computer, with microprocessor all-or-nothing input / output circuit for alert the driver of the vehicle.
  • This calculator is intended to detect moving regions such as of travelers walking past the camera.
  • This detection is improved and confirmed by at least a presence detector, thermal infrared type or radar (wavelength between three and five microns, or eight and twelve microns).
  • the schematic section of the vehicle 1 in FIG. 1 is a cross section at a door 2.
  • a CCD camera 3 is placed inside the bus, under the ceiling light 4 above the opening area of the door.
  • a second camera 30 can be placed outside the bus 1 so that their two fields of vision 5 and 50 are complementary and cover the entire area opening door 2 allowing access to passengers.
  • vision providing image processing for the purpose to detect moving regions.
  • the regions are segmented with respect to the fixed background represented by the bus steps seen from above, or the doors side views.
  • a presence detector 8 of the type thermal infrared or radio frequency (radar or laser), is associated with the cameras and placed next to one of the two cameras. Its detection field 9 is narrow, with a diameter on the ground close to 20 cm for example, and headed towards the border between the interior and outside the bus at the access door to passengers.
  • Detection thermal confirms a segmentation detection before the actual count.
  • the system according to the invention therefore comprises two devices as described above, a first installed at the entrance door 2 of the passengers and a second at exit 20, the calculator carrying out instant counting of the number passengers inside the vehicle. Of more, the calculator can estimate the total weight of the vehicle payload at all times.
  • the method of counting the passengers actually present in the vehicle comprises, as shown in the functional diagram of FIG. 3, a first step e 1 of image acquisition at each door d 'access.
  • the processing of these digital video signals consists of a second step e 2 of segmenting the regions of each image, followed by a third step e 3 of detecting image segments qualified as "candidates", by a known morphological method for example .
  • a fourth processing step e 4 compares each candidate segment with a probable size criterion C T to determine the segments qualified as "candidates for human presence" during a fifth step e 5 . If the presence detector confirms the presence of “hot body” in some of these latter segments, during a step e 6 , a seventh step e 7 delivers a selection of image segments qualified as “candidates for human presence , suitable for counting ".
  • the computer can count the passengers present on the bus, by subtracting from the number of incoming passengers, estimated from a device placed above the front door, the number of outgoing passengers, estimated from another device placed above the exit door.
  • the computer can also estimate the total weight of the vehicle's payload.
  • the vision computer 7 is connected by a link series to the central electronic control unit 12 of the vehicle, to which it communicates the number of passengers as well as the estimate of the total instantaneous load of the vehicle in order to optimize the parameters of braking and / or gearbox by piloting actuators 13.
  • the detection of a passenger trapped in an access door is also carried out by the electronic computer 7 which compares, during a step e 9 , the image I f originating from the interior camera, or interior and exterior cameras when the device has two, after closing the door with a reference image I r taken just before closing. The method then determines an image qualified as "candidate", in step e 10 . Then, the computer performs a step e 11 of confirming the presence of a "hot body” in some of these "candidate” images by the infrared presence detector.
  • the vision computer 7 sends a signal, during a step e 12 of triggering an alert to an interface, for example an indicator light 10 placed in the driver's field of vision. It also sends, during an additional step e 13 , the image of the access door after closing on a display screen 11 placed in the driver's field of vision, on the dashboard for example. The driver can thus verify for himself the presence of an obstacle trapped in the door. Finally, it sends its confirmation signal to the central computer 12 of the vehicle which then controls the opening of the door where a person is detected trapped, by controlling the door motor 14, during a step e 14 .
  • the interest of the system lies in particular in multiple use of surveillance cameras passive access areas of the vehicle, especially for counting, detecting passengers or objects stuck in the doors, or even for the direct monitoring of entry and exit doors.
  • This system will reduce the cost of purchasing components, improve the mounting process and increase the intrinsic performance of vehicles public transport thanks to excellent accuracy passenger counting.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)

Abstract

L'invention concerne un système de comptage et de détection de passagers dans un véhicule de transport en commun, comportant au moins un dispositif d'acquisition d'images, des moyens de visualisation de ces images par le conducteur et un calculateur électronique embarqué pilotant notamment des actionneurs de freinage, de boîte de vitesses et de fermeture des portes du véhicule, tel qu'il comporte : au niveau de chaque porte d'accès (2), une ou plusieurs caméras (3) numériques, miniatures, dont le champ de vision (5) englobe toute la zone d'accès, associées à un détecteur de présence (8), dont le champ de détection est dirigé vers la frontière entre l'intérieur et l'extérieur du véhicule ; un calculateur électronique (7) embarqué, de vision, assurant le traitement des images, destiné à détecter des régions en mouvement et à les faire correspondre aux personnes physiques détectées. Elle concerne également un procédé de comptage et de détection de passagers. <IMAGE>

Description

La présente invention concerne un système et un procédé de comptage, ainsi que de détection, de passagers pour bus, car ou tout véhicule de transport de groupes.
Dans le domaine du transport de groupes, la connaissance du nombre de passagers entrant et sortant du véhicule, notamment en différents endroits du bus loin des yeux du conducteur, est importante pour le contrôle dynamique du véhicule. La connaissance du poids à charge instantané du véhicule peut servir au contrôle du freinage et de la direction du véhicule. De plus, pour tout véhicule de transport de personnes, comme les autocars, les autobus, les cars scolaires par exemple, il est nécessaire de détecter des obstacles se présentant au niveau des portes et susceptibles de gêner le fonctionnement des mécanismes de fermeture des portes.
Concernant le comptage des passagers d'un véhicule de transport en commun, il existe quatre modes de comptage actuels :
  • le comptage par tapis à contacts électriques ;
  • le comptage actif de proximité par barrières infrarouges ou ultrasons ;
  • le comptage passif de proximité par pyrométrie infrarouge ;
  • le comptage par caméra et traitement d'images.
Le premier mode de comptage par tapis utilise cinq contacts électriques, répartis sous la surface du tapis, qui réagissent en fonction du poids de la personne qui marche sur le tapis. Cette solution est peu fiable car certains enfants peuvent n'être pas pris en compte à cause de leur faible poids.
Le deuxième mode de comptage par barrières infrarouges utilise généralement 2 à 4 cellules infrarouges, qui sont fixées au bord des portières et en haut de celles-ci. Ce mode est également peu fiable car, dépendant de l'albédo des personnes, les cellules peuvent ne pas détecter des personnes qui ne réfléchissent aucun signal en retour. La non détection des personnes est due à l'absorption de l'infrarouge par les tissus de leurs vêtements. Dans le cas d'un comptage par barrières à ultrasons, le faisceau émis peut être dispersé pour la forme physique des personnes, car les ultrasons sont spéculaires.
Le mode de comptage par pyrométrie infrarouge est utilisé plus particulièrement dans les banques. Il est basé sur le même principe que le comptage par barrières infrarouges, mais les longueurs d'onde utilisées en pyrométrie sont de 3 à 5 microns et de 8 à 12 microns, alors que les longueurs d'onde utilisées dans les barrières infrarouges sont de 0,7 à 0,9 microns.
Pour ces deux premiers modes, il n'est pas possible de différencier à l'aide d'un seul capteur, les personnes entrant dans le véhicule de celles qui en sortent. De plus, la précision de comptage est supérieure à 6 %. Or, l'objectif actuel des organismes de transports publics, tels que la Régie Autonome des Transports Parisiens, est d'atteindre une précision de 1 à 2 %, c'est-à-dire de détecter 98 personnes sur 100 qui passent.
Le quatrième mode de comptage utilise une caméra qui vise verticalement un repère en damier placé au sol. Le comptage s'effectue à l'aide d'un circuit intégré qui inclut le traitement d'image avec réseaux de neurones. Ce quatrième mode, décrit notamment dans le brevet français FR 2 739 208 de FAIVELY TRANSPORT, permet de distinguer le sens de circulation des personnes.
Concernant la fonction de détection de passagers au niveau des portes du bus, elle peut être assurée par exemple par des capteurs de pression pneumatique ou par des capteurs piézo-électriques équipant les bords des portes associés à des moyens de mesure du courant des moteurs électriques assurant la fermeture des portes.
Un signal électrique est envoyé au tableau de bord du véhicule pour autoriser le démarrage par le conducteur. Cependant, en raison de l'imprécision de mesure de la différence de pression entre les deux bords pneumatiques de chaque porte, ou de celle du courant électrique des moteurs entraínant les portes, un obstacle comme un bras ou un pied d'un passager subsistant dans la porte peut ne pas être détecté et rester coincé alors que le conducteur fait démarrer son véhicule. On ne peut détecter que des objets solides non déformables coincés dans les portes, car les obstacles déformables de petite taille comme une main ou un bras d'enfant ne s'opposent pas assez fortement aux forces mécaniques des portières et le courant consommé dans les moteurs de commande des portes ne dépasse pas un seuil fixé préalablement.
L'invention vise à résoudre ces deux problèmes en proposant un système de comptage et de détection par caméra couplée à des moyens de détection de présence pour confirmer et lever le doute.
Pour cela, un premier objet de l'invention est un système de comptage et de détection de passagers dans un véhicule de transport en commun, comportant au moins un dispositif d'acquisition d'images, des moyens de visualisation de ces images par le conducteur et un calculateur électronique embarqué pilotant notamment des actionneurs de freinage, de boíte de vitesses et de fermeture des portes du véhicule, caractérisé en ce qu'il comporte :
  • un dispositif d'acquisition d'images à partir d'une ou plusieurs caméras numériques, de format miniature implantées dans la structure mécanique du véhicule, au niveau de chaque porte d'accès pour les passagers et dont le champ de vision englobe toute la zone d'accès ;
  • un détecteur de présence associé au dispositif d'acquisition d'images de chaque porte d'accès du véhicule, dont le champ de détection est dirigé vers la frontière entre l'intérieur et l'extérieur du véhicule ;
  • un calculateur électronique embarqué, dit de vision, assurant le traitement des images issues de chaque dispositif d'acquisition, destiné à détecter des régions en mouvement et à les faire correspondre aux personnes physiques détectées.
Un second objet de l'invention est un procédé de comptage des passagers mis en oeuvre par un tel système, comportant les étapes suivantes :
  • e1 : acquisition d'images au niveau de chaque porte d'accès du véhicule ;
  • e2 : segmentation des régions de chaque image ;
  • e3 : détection de segments d'images qualifiés de "candidats" ;
  • e4 : comparaison de chaque segment "candidat" à un critère de taille probable (CT) ;
  • e5 : détermination de segments d'images de "candidats à une présence humaine" ;
  • e6 : confirmation de la présence de "corps chaud" dans certains de ces derniers segments d'images ;
  • e7 : sélection de segments d'images qualifiés de "candidats à une présence humaine aptes au comptage" ;
  • e8 : comptage du nombre de passagers présents dans le véhicule, par soustraction au nombre de passagers entrants du nombre de passagers sortants.
D'autres caractéristiques et avantages de l'invention apparaítront à la lecture de la description d'un exemple de réalisation, illustrée par les figures suivantes qui sont :
  • la figure 1 : une coupe schématique d'un véhicule au niveau d'une porte, équipée d'au moins une caméra et d'un détecteur de présence ;
  • la figure 2 : un schéma fonctionnel d'un système de comptage selon l'invention, dans un véhicule ;
  • les figures 3 et 4 : deux diagrammes fonctionnels du traitement d'image selon le procédé de comptage de l'invention.
Les différents éléments portant les mêmes références sur les différentes figures remplissent les mêmes fonctions en vue des mêmes résultats.
Le système de comptage selon l'invention comprend un dispositif d'acquisition d'images à partir d'une ou plusieurs caméras numériques matricielles, de type CCD - Charge Coupled Device -, ou CMOS - Complementary Oxyde Semiconductor -, ou APS-CMOS - Active Pixel Sensor CMOS -, de format miniature, implantées dans la structure mécanique du véhicule de type bus, au niveau de chaque porte d'accès pour les passagers soit à l'avant du véhicule pour le flux d'entrée des passagers et à l'arrière pour le flux de sortie. Des moyens d'éclairage adéquat peuvent être associés aux caméras, afin d'éclairer la scène se passant au voisinage de chaque porte.
Les images issues des caméras sont traitées par un calculateur électronique embarqué, à microprocesseur muni d'un circuit d'entrée/sortie tout ou rien pour alerter le conducteur du véhicule. Ce calculateur est destiné à détecter des régions en mouvement telles que des voyageurs passant devant la caméra.
Cette détection est améliorée et confirmée par au moins un détecteur de présence, de type infrarouge thermique ou radar (de longueur d'onde comprise entre trois et cinq microns, ou huit et douze microns).
La coupe schématique du véhicule 1 sur la figure 1 est une coupe transversale au niveau d'une porte 2. Une caméra CCD 3 est placée à l'intérieur du bus, sous le plafonnier 4 au-dessus de la zone d'ouverture de la porte. Son champ de vision 5, de diamètre au sol voisin de 1,5 mètres par exemple, représenté en pointillés, englobe toute la zone d'accès du bus, soit les marches d'accès 6.
Une seconde caméra 30 peut être placée à l'extérieur du bus 1 de telle sorte que leurs deux champs de vision 5 et 50 soient complémentaires et couvrent toute la zone d'ouverture de la porte 2 permettant l'accès des passagers.
Comme le montre le schéma fonctionnel de la page 2, elles sont reliées à un calculateur électronique 7 dit de vision assurant le traitement d'images dans le but de détecter des régions en mouvement. Les régions sont segmentées par rapport au fond fixe que représentent les marches du bus vues de dessus, ou les portières vues latéralement.
Pour rendre plus fiable l'identification des personnes et de leurs paquets par exemple, pour chaque porte d'accès du bus, un détecteur de présence 8, du type infrarouge thermique ou radiofréquence (radar ou laser), est associé aux caméras et placé à côté de l'une des deux caméras. Son champ de détection 9 est étroit, de diamètre au sol voisin de 20 cm par exemple, et dirigé vers la frontière entre l'intérieur et l'extérieur du bus au niveau de la porte d'accès des passagers.
Il est relié au calculateur 7 de vision dans le but de configurer la correspondance entre les régions segmentées par le traitement d'images et la présence de personnes physiques qu'il a détectée. La détection thermique confirme une détection par segmentation d'image, avant le comptage proprement dit.
Le système selon l'invention comporte donc deux dispositifs tels que décrits auparavant, un premier installé au niveau de la porte d'entrée 2 des passagers et un deuxième au niveau de celle de sortie 20, le calculateur effectuant le comptage instantané du nombre de passagers présents à l'intérieur du véhicule. De plus, le calculateur peut estimer le poids total de la charge utile du véhicule, à tout moment.
Le procédé de comptage des passagers réellement présents dans le véhicule, mis en oeuvre par le calculateur 7, comprend, comme le montre le diagramme fonctionnel de la figure 3, une première étape e1 d'acquisition d'images au niveau de chaque porte d'accès. Le traitement de ces signaux vidéo numériques consiste en une deuxième étape e2 de segmentation des régions de chaque image, suivie d'une troisième étape e3 de détection de segments d'image qualifiés de "candidats", par une méthode morphologique connue par exemple. Une quatrième étape e4 de traitement compare chaque segment candidat à un critère de taille probable CT pour déterminer les segments qualifiés de "candidats à une présence humaine" lors d'une cinquième étape e5. Si le détecteur de présence confirme la présence de "corps chaud" dans certains de ces derniers segments, au cours d'une étape e6, une septième étape e7 délivre une sélection de segments d'image qualifiés de "candidats à une présence humaine, aptes au comptage".
Enfin, à la huitième étape e8, le calculateur peut effectuer le comptage des passagers présents dans le bus, en soustrayant au nombre de passagers entrants, estimé à partir d'un dispositif placé au-dessus de la porte d'entrée, le nombre de passagers sortants, estimé à partir d'un autre dispositif placé au-dessus de la porte de sortie. Le calculateur peut également estimer le poids total de la charge utile du véhicule.
Le calculateur 7 de vision est connecté par une liaison série au calculateur central électronique 12 du véhicule, à qui il communique le nombre de passagers ainsi que l'estimation de la charge totale instantanée du véhicule dans le but d'optimiser les paramètres de freinage et/ou de boíte de vitesses par pilotage des actionneurs 13.
Comme le montre le diagramme fonctionnel de la figure 4, la détection d'un passager coincé dans une porte d'accès est réalisée également par le calculateur électronique 7 qui compare, lors d'une étape e9, l'image If issue de la caméra intérieure, ou des caméras intérieure et extérieure quand le dispositif en comporte deux, après la fermeture de la porte avec une image de référence Ir prise juste avant la fermeture. Le procédé détermine ensuite une image qualifiée de "candidate", à l'étape e10. Puis, le calculateur effectue une étape e11 de confirmation de présence d'un "corps chaud" dans certaines de ces images "candidates" par le détecteur de présence infrarouge.
Dans un tel cas, le calculateur de vision 7 envoie un signal, au cours d'une étape e12 de déclenchement d'une alerte à un interface, par exemple un voyant lumineux 10 placé dans le champ de vision du conducteur. Il envoie également, lors d'une étape supplémentaire e13, l'image de la porte d'accès après fermeture sur un écran 11 de visualisation placé dans le champ de visualisation du conducteur, sur la planche de bord par exemple. Le conducteur peut ainsi vérifier lui-même la présence d'un obstacle coincé dans la porte. Enfin, il envoie son signal de confirmation au calculateur central 12 du véhicule qui commande alors l'ouverture de la porte où une personne est détectée coincée, en pilotant le moteur de porte 14, lors d'une étape e14.
L'intérêt du système réside en particulier dans l'utilisation multiple des caméras de surveillance passive des zones d'accès du véhicule, notamment pour le comptage, la détection des passagers ou des objets coincés dans les portes, ou bien encore pour la surveillance directe des portes d'entrée et de sortie.
Ce système permettra de réduire le coût d'achat des composants, d'améliorer le procédé de montage et d'accroítre les performances intrinsèques des véhicules de transport en commun grâce à une excellente précision du comptage des passagers.

Claims (13)

  1. Système de comptage et de détection de passagers dans un véhicule de transport en commun, comportant au moins un dispositif d'acquisition d'images, des moyens de visualisation de ces images par le conducteur et un calculateur électronique embarqué pilotant notamment des actionneurs de freinage, de boíte de vitesses et de fermeture des portes du véhicule, caractérisé en ce qu'il comporte :
    un dispositif d'acquisition d'images à partir d'une ou plusieurs caméras (3) numériques, de format miniature implantées dans la structure mécanique du véhicule, au niveau de chaque porte d'accès (2) pour les passagers et dont le champ de vision (5) englobe toute la zone d'accès ;
    un détecteur de présence (8) associé au dispositif d'acquisition d'images de chaque porte d'accès du véhicule, dont le champ de détection est dirigé vers la frontière entre l'intérieur et l'extérieur du véhicule ;
    un calculateur électronique (7) embarqué, dit de vision, assurant le traitement des images issues de chaque dispositif d'acquisition, destiné à détecter des régions en mouvement et à les faire correspondre aux personnes physiques détectées.
  2. Système selon la revendication 1, caractérisé en ce que chaque dispositif d'acquisition d'images, au niveau de chaque porte d'accès du véhicule, comprend deux caméras (3, 30) dont l'une (3) est placée à l'intérieur du véhicule et l'autre (30) est placée à l'extérieur de telle sorte que leurs deux champs de vision (5, 50) soient complémentaires et couvrent toute la zone d'ouverture de la porte.
  3. Système selon l'une des revendications 1 ou 2, caractérisé en ce que des moyens d'éclairage sont associés au dispositif d'acquisition d'images, destinés à éclairer la scène au niveau de chaque porte d'accès.
  4. Système selon la revendication 1, caractérisé en ce que le détecteur de présence (8) est de type infrarouge thermique.
  5. Système selon la revendication 1, caractérisé en ce que le détecteur de présence (8) est de type radiofréquence, radar ou laser.
  6. Système selon la revendication 1, caractérisé en ce que le calculateur électronique (7) de vision comprend un circuit d'entrée-sortie tout ou rien relié à un interface d'alerte au conducteur.
  7. Système selon la revendication 6, caractérisé en ce que l'interface d'alerte est un voyant lumineux (10) placé dans le champ de vision du conducteur du véhicule.
  8. Système selon la revendication 1, caractérisé en ce que le calculateur électronique (7) de vision est relié, par une liaison série, au calculateur central électronique (12) du véhicule auquel il communique le nombre de passagers présents dans le véhicule et l'estimation de la charge totale instantanée pour le pilotage des actionneurs de freinage et de boíte de vitesses.
  9. Procédé de comptage des passagers mis en oeuvre par un système selon l'une des revendications 1 à 5, caractérisé en ce qu'il comporte les étapes suivantes :
    e1 : acquisition d'images au niveau de chaque porte d'accès du véhicule ;
    e2 : segmentation des régions de chaque image ;
    e3 : détection de segments d'images qualifiés de "candidats" ;
    e4 : comparaison de chaque segment "candidat" à un critère de taille probable (CT) ;
    e5 : détermination de segments d'images de "candidats à une présence humaine" ;
    e6 : confirmation de la présence de "corps chaud" dans certains de ces derniers segments d'images ;
    e7 : sélection de segments d'images qualifiés de "candidats à une présence humaine aptes au comptage" ;
    e8 : comptage du nombre de passagers présents dans le véhicule, par soustraction au nombre de passagers entrants du nombre de passagers sortants.
  10. Procédé de détection de passagers coincés dans une porte d'accès d'un véhicule, par un système selon l'une des revendications 1 à 5, caractérisé en ce qu'il comporte les étapes suivantes :
    e9 : comparaison de l'image (If), acquise au niveau de chaque porte d'accès du véhicule, après la fermeture desdites portes avec une image de référence (Ir) prise juste avant cette fermeture ;
    e10 : détermination d'images qualifiées de "candidates" ;
    e11 : confirmation de la présence de "corps chaud" dans ces images "candidates".
  11. Procédé de détection selon la revendication 10 par un système selon l'une des revendications 1 à 7, caractérisé en ce qu'il comporte une étape supplémentaire (e12). de déclenchement d'une alerte à un interface, tel qu'un voyant lumineux (10).
  12. Procédé de détection selon la revendication 10, caractérisé en ce qu'il comporte une étape supplémentaire (e13) d'envoi de l'image de la porte d'accès après fermeture sur un écran de visualisation (11) placé dans le champ de vision du conducteur.
  13. Procédé de détection selon la revendication 10, caractérisé en ce que l'étape d'envoi du signal de confirmation, issu de l'étape (e11), au calculateur central (12) du véhicule, commande alors l'ouverture de la porte en pilotant son moteur (14), lors d'une étape supplémentaire (e14).
EP00403122A 1999-11-09 2000-11-09 Système et procédé de comptage de passagers pour bus Expired - Lifetime EP1100050B1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR9914040 1999-11-09
FR9914040A FR2800895B1 (fr) 1999-11-09 1999-11-09 Systeme et procede de comptage de passagers pour bus

Publications (2)

Publication Number Publication Date
EP1100050A1 true EP1100050A1 (fr) 2001-05-16
EP1100050B1 EP1100050B1 (fr) 2011-08-17

Family

ID=9551888

Family Applications (1)

Application Number Title Priority Date Filing Date
EP00403122A Expired - Lifetime EP1100050B1 (fr) 1999-11-09 2000-11-09 Système et procédé de comptage de passagers pour bus

Country Status (3)

Country Link
EP (1) EP1100050B1 (fr)
AT (1) ATE521052T1 (fr)
FR (1) FR2800895B1 (fr)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004008182A1 (fr) * 2002-07-12 2004-01-22 Pathminder Inc. Dispositif de detection de presence humaine
DE102004007387A1 (de) * 2004-02-11 2005-09-08 Siemens Ag Verfahren zur Zählung von in einem Raum anwesenden Nutzern
AT413919B (de) * 2002-07-31 2006-07-15 Siemens Ag Oesterreich Verfahren und anlage zur steuerung von beförderungsmitteln, insbesondere personenbeförderungsmitteln
NL1028095C2 (nl) * 2005-01-21 2006-07-24 Menno Cornelis De Vree Inrichting voor het tellen van personen die in of op een voertuig hebben gezeten ten tijde van een ongeval terwijl deze personen zich niet meer in of op het betreffende voertuig bevinden.
EP1854388A1 (fr) * 2006-05-09 2007-11-14 Paloma Industries, Ltd. Dispositif de chauffage-cuisson de liquides
FR2914462A1 (fr) * 2007-03-29 2008-10-03 Dgm Technologies Sarl Procede de determination du nombre d'objets presents dans une zone surfacique donnee par thermographie infrarouge.
WO2010130964A1 (fr) * 2009-05-14 2010-11-18 INRETS - Institut National de Recherche sur les Transports et leur Sécurité Systeme de comptage de personnes
EP2801956A1 (fr) * 2013-05-10 2014-11-12 Giken Trastem Co., Ltd. Dispositif de comptage de passagers
CN104537733A (zh) * 2014-11-21 2015-04-22 王敏 一种适于山间路口的智能控制系统
WO2015057144A1 (fr) * 2013-10-16 2015-04-23 Scania Cv Ab Procédé et système pour gérer l'arrêt d'un véhicule à moteur
EP2924663A1 (fr) * 2014-03-26 2015-09-30 Airbus Operations GmbH Détermination du nombre de tête automatique embarquée sur un moyen de transport
IT201700014880A1 (it) * 2017-02-10 2018-08-10 Iveco France Sas Sistema di monitoraggio degli accessi di un veicolo stradale
EP3360722A1 (fr) * 2017-02-10 2018-08-15 Iveco France S.A.S. Système de prédiction de l'autonomie restante d'un véhicule électrique
WO2018156096A1 (fr) * 2017-02-21 2018-08-30 Khazin Marat Borisovich Procédé et système de comptage automatique de passagers dans des transports en commun
EP3473521A1 (fr) * 2017-10-20 2019-04-24 MAGNA STEYR Fahrzeugtechnik AG & Co KG Véhicule pour transport de passagers
US10487565B2 (en) 2016-10-03 2019-11-26 Sensotech Inc. Time of flight (TOF) based detecting system for an automatic door
RU2785198C1 (ru) * 2022-05-18 2022-12-05 Акционерное общество "Штрих-М" Счетчик подсчета пассажиров на базе стереозрения

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8885047B2 (en) 2008-07-16 2014-11-11 Verint Systems Inc. System and method for capturing, storing, analyzing and displaying data relating to the movements of objects
CN108764017B (zh) * 2018-04-03 2020-01-07 广州通达汽车电气股份有限公司 公交客流统计方法、装置及系统
DE102021115280A1 (de) * 2021-06-14 2022-12-15 Agtatec Ag Automatische Türanordnung mit Sensorvorrichtung und Verfahren zum Betreiben einer solchen automatischen Türanordnung

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0031710A1 (fr) * 1979-12-31 1981-07-08 Westinghouse Electric Corporation Système et procédé de commande de décélération pour un véhicule de transit
US5176082A (en) * 1991-04-18 1993-01-05 Chun Joong H Subway passenger loading control system
US5313060A (en) * 1990-12-14 1994-05-17 Iris Gmbh I.G. Infrared & Intelligent Sensors Multi-sensor doubled row direction sensitive counting and switching device
US5465115A (en) * 1993-05-14 1995-11-07 Rct Systems, Inc. Video traffic monitor for retail establishments and the like
FR2739208A1 (fr) 1995-09-22 1997-03-28 Faiveley Transport Procede de detection de la presence d'un element sur une portion de voie
EP0847030A2 (fr) * 1996-12-04 1998-06-10 Istituto Trentino Di Cultura Procédé et dispositif pour détecter et compter automatiquement des corps passant par une ouverture

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0031710A1 (fr) * 1979-12-31 1981-07-08 Westinghouse Electric Corporation Système et procédé de commande de décélération pour un véhicule de transit
US5313060A (en) * 1990-12-14 1994-05-17 Iris Gmbh I.G. Infrared & Intelligent Sensors Multi-sensor doubled row direction sensitive counting and switching device
US5176082A (en) * 1991-04-18 1993-01-05 Chun Joong H Subway passenger loading control system
US5465115A (en) * 1993-05-14 1995-11-07 Rct Systems, Inc. Video traffic monitor for retail establishments and the like
FR2739208A1 (fr) 1995-09-22 1997-03-28 Faiveley Transport Procede de detection de la presence d'un element sur une portion de voie
EP0847030A2 (fr) * 1996-12-04 1998-06-10 Istituto Trentino Di Cultura Procédé et dispositif pour détecter et compter automatiquement des corps passant par une ouverture

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
DEPARIS J P ET AL: "A DEVICE FOR COUNTING PASSENGERS MAKING USE OF TWO ACTIVE LINEAR CAMERAS: COMPARISON OF ALGORITHMS", IEEE INTERNATIONAL CONFERENCE ON SYSTEMS, MAN AND CYBERNETICS. CYBERNETICS,US,NEW YORK, IEEE, 1996, pages 1629 - 1634, XP000736362, ISBN: 0-7803-3281-4 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004008182A1 (fr) * 2002-07-12 2004-01-22 Pathminder Inc. Dispositif de detection de presence humaine
AT413919B (de) * 2002-07-31 2006-07-15 Siemens Ag Oesterreich Verfahren und anlage zur steuerung von beförderungsmitteln, insbesondere personenbeförderungsmitteln
DE102004007387A1 (de) * 2004-02-11 2005-09-08 Siemens Ag Verfahren zur Zählung von in einem Raum anwesenden Nutzern
NL1028095C2 (nl) * 2005-01-21 2006-07-24 Menno Cornelis De Vree Inrichting voor het tellen van personen die in of op een voertuig hebben gezeten ten tijde van een ongeval terwijl deze personen zich niet meer in of op het betreffende voertuig bevinden.
US7783175B2 (en) 2006-05-09 2010-08-24 Paloma Industries, Limited Liquid heat-cooking device
EP1854388A1 (fr) * 2006-05-09 2007-11-14 Paloma Industries, Ltd. Dispositif de chauffage-cuisson de liquides
WO2008142238A2 (fr) * 2007-03-29 2008-11-27 Dgm Technologies Procede de determination du nombre d'objets presents dans une zone surfacique donnee par thermographie infrarouge
WO2008142238A3 (fr) * 2007-03-29 2009-02-19 Dgm Technologies Procede de determination du nombre d'objets presents dans une zone surfacique donnee par thermographie infrarouge
FR2914462A1 (fr) * 2007-03-29 2008-10-03 Dgm Technologies Sarl Procede de determination du nombre d'objets presents dans une zone surfacique donnee par thermographie infrarouge.
WO2010130964A1 (fr) * 2009-05-14 2010-11-18 INRETS - Institut National de Recherche sur les Transports et leur Sécurité Systeme de comptage de personnes
FR2945652A1 (fr) * 2009-05-14 2010-11-19 Inrets Inst Nat De Rech Sur Le Systeme de comptage de personnes.
US9569902B2 (en) 2013-05-10 2017-02-14 Giken Tratem Co., Ltd Passenger counter
EP2801956A1 (fr) * 2013-05-10 2014-11-12 Giken Trastem Co., Ltd. Dispositif de comptage de passagers
WO2015057144A1 (fr) * 2013-10-16 2015-04-23 Scania Cv Ab Procédé et système pour gérer l'arrêt d'un véhicule à moteur
EP2924663A1 (fr) * 2014-03-26 2015-09-30 Airbus Operations GmbH Détermination du nombre de tête automatique embarquée sur un moyen de transport
CN104537733A (zh) * 2014-11-21 2015-04-22 王敏 一种适于山间路口的智能控制系统
US10487565B2 (en) 2016-10-03 2019-11-26 Sensotech Inc. Time of flight (TOF) based detecting system for an automatic door
IT201700014880A1 (it) * 2017-02-10 2018-08-10 Iveco France Sas Sistema di monitoraggio degli accessi di un veicolo stradale
EP3360730A1 (fr) * 2017-02-10 2018-08-15 Iveco France S.A.S. Système de surveillance pour les portes d'un véhicule
EP3360722A1 (fr) * 2017-02-10 2018-08-15 Iveco France S.A.S. Système de prédiction de l'autonomie restante d'un véhicule électrique
WO2018156096A1 (fr) * 2017-02-21 2018-08-30 Khazin Marat Borisovich Procédé et système de comptage automatique de passagers dans des transports en commun
EP3473521A1 (fr) * 2017-10-20 2019-04-24 MAGNA STEYR Fahrzeugtechnik AG & Co KG Véhicule pour transport de passagers
US10689897B2 (en) 2017-10-20 2020-06-23 Magna Steyr Fahrzeugtechnik Ag & Co Kg Passenger transport vehicle
RU2785198C1 (ru) * 2022-05-18 2022-12-05 Акционерное общество "Штрих-М" Счетчик подсчета пассажиров на базе стереозрения
RU2789708C1 (ru) * 2022-05-18 2023-02-07 Акционерное общество "Штрих-М" Счетчик подсчета пассажиров

Also Published As

Publication number Publication date
FR2800895A1 (fr) 2001-05-11
EP1100050B1 (fr) 2011-08-17
ATE521052T1 (de) 2011-09-15
FR2800895B1 (fr) 2001-12-28

Similar Documents

Publication Publication Date Title
EP1100050B1 (fr) Système et procédé de comptage de passagers pour bus
US20150256767A1 (en) Digital camera
JP2002083287A (ja) バックグランド干渉の除去により最適化された人間の存在検出
CN110300673A (zh) 车辆外围监视装置
WO2018158163A1 (fr) Dispositf de détermination de l&#39;état d&#39;attention d&#39;un conducteur de véhicule, système embarqué comprenant un tel dispositif, et procédé associé
EP3640070A1 (fr) Procédé et appareil de détection de déficience dans un véhicule comportant une vérification du conducteur
EP3705913B1 (fr) Appareil d&#39;imagerie lidar pour véhicule à moteur
EP3428677B1 (fr) Système et procédé de vision pour véhicule
FR2969098A1 (fr) Procede et dispositif d&#39;assistance du conducteur d&#39;un vehicule
FR3100178A1 (fr) Système de rétrovision numérique avec anticipation d’ouverture de porte
CN111319578A (zh) 车辆及其控制方法
FR2865826A1 (fr) Systeme de reconnaissance d&#39;image humaine
EP3113980B1 (fr) Dispositif et procédé de rétro-vision à affichage électronique pour véhicule
WO2018189232A1 (fr) Dispositif de signalisation lumineuse d&#39;un changement de voie pour véhicule automobile
JP4144448B2 (ja) 車両後方表示装置
EP3632388A1 (fr) Dispositif électronique de pilotage d&#39;une rampe d&#39;accès à une porte de véhicule, véhicule, procédé de pilotage et programme d&#39;ordinateur associés
FR3078035A1 (fr) Systeme de detection d&#39;environnement de vehicule
JP2004136871A (ja) 多機能光学検知を備えた自動車
EP2936281B1 (fr) Module d&#39;interface
JP2003046843A (ja) 撮像装置及び車両における人体検知システム
US20130093891A1 (en) Vehicle occupant detectors
FR3048110A1 (fr) Procede et dispositif de detection d&#39;un objet oublie dans l&#39;habitacle d&#39;un vehicule
FR3099104A1 (fr) Dispositif d’observation de rétroviseur extérieur de véhicule
FR3031081A1 (fr) Procede et dispositif de commande pour porte d&#39;aeronef, et porte d&#39;aeronef l&#39;incorporant
WO2019158287A1 (fr) Méthode de surveillance d&#39;un environnement de véhicule automobile en stationnement comprenant une caméra asynchrone

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

AX Request for extension of the european patent

Free format text: AL;LT;LV;MK;RO;SI

AKX Designation fees paid

Free format text: AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

17P Request for examination filed

Effective date: 20011203

17Q First examination report despatched

Effective date: 20091022

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: RENAULT TRUCKS

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 60046338

Country of ref document: DE

Effective date: 20111013

REG Reference to a national code

Ref country code: NL

Ref legal event code: VDEP

Effective date: 20110817

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20111219

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 521052

Country of ref document: AT

Kind code of ref document: T

Effective date: 20110817

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20111118

REG Reference to a national code

Ref country code: IE

Ref legal event code: FD4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

BERE Be: lapsed

Owner name: RENAULT TRUCKS

Effective date: 20111130

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20111130

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

26N No opposition filed

Effective date: 20120521

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20111130

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20111130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20111130

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 60046338

Country of ref document: DE

Effective date: 20120521

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20111128

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20111109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20110817

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20131106

Year of fee payment: 14

Ref country code: GB

Payment date: 20131106

Year of fee payment: 14

Ref country code: FR

Payment date: 20131108

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20131114

Year of fee payment: 14

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 60046338

Country of ref document: DE

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20141109

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20150731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20150602

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20141109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20141201

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20141109