FR3086484A1 - Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera - Google Patents
Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera Download PDFInfo
- Publication number
- FR3086484A1 FR3086484A1 FR1858567A FR1858567A FR3086484A1 FR 3086484 A1 FR3086484 A1 FR 3086484A1 FR 1858567 A FR1858567 A FR 1858567A FR 1858567 A FR1858567 A FR 1858567A FR 3086484 A1 FR3086484 A1 FR 3086484A1
- Authority
- FR
- France
- Prior art keywords
- vehicle
- resolution
- intermediate image
- images
- transmission link
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000005540 biological transmission Effects 0.000 claims abstract description 39
- 230000009466 transformation Effects 0.000 claims abstract description 7
- 230000003190 augmentative effect Effects 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 description 5
- 230000015556 catabolic process Effects 0.000 description 5
- 238000006731 degradation reaction Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 230000006378 damage Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
- G06T3/047—Fisheye or wide-angle transformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Abstract
Un procédé assiste la conduite d'un véhicule (V1) comprenant une caméra (CO) acquérant des images brutes, grand angle et ayant une première résolution, dans son environnement, et un écran (EA) affichant des images. Ce procédé comprend : - une première étape dans laquelle on effectue dans la caméra (CO) sur chaque image brute un premier traitement comprenant au moins une correction de distorsion, afin d'obtenir une première image intermédiaire, puis on génère une seconde image intermédiaire ayant la seconde résolution d'une liaison de transmission (LT) à partir de chaque première image intermédiaire afin de la transmettre via cette dernière (LT), et - une seconde étape dans laquelle on effectue en aval de la liaison de transmission (LT) sur chaque seconde image intermédiaire un second traitement comprenant au moins une transformation dans un format d'affichage de l'écran (EA), afin d'obtenir une image traitée prête à être affichée par ce dernier (EA).
Description
PROCÉDÉ ET SYSTÈME D’ASSISTANCE À LA CONDUITE D’UN VÉHICULE PAR AFFICHAGE D’IMAGES ACQUISES ET PARTIELLEMENT TRAITÉES PAR LA CAMÉRA
L’invention concerne les véhicules, éventuellement de type automobile, et plus précisément l’assistance à la conduite de tels véhicules.
Certains véhicules, généralement de type automobile, comprennent un dispositif d’assistance aidant leur conducteur par affichage sur un écran, généralement celui d’un combiné central, d’images « panoramiques » de leur environnement définies à partie d’images brutes acquises par au moins une caméra grand angle (arrière, avant ou latérale).
On entend ici par « image panoramique », une image d’une zone peu éloignée du véhicule et à large champ.
Parfois, ce type de dispositif d’assistance (éventuellement de type ADAS (« Advanced Driver Assistance System »)) fournit des images panoramiques auxquelles sont adjointes des informations de réalité augmentée, comme par exemple la matérialisation du véhicule et/ou de sa future trajectoire estimée.
Les images brutes acquises par une caméra ont généralement une première résolution élevée, strictement supérieure à la seconde résolution de la liaison de transmission, à laquelle est couplée cette caméra et qui sert à les transmettre au dispositif d’assistance. Par exemple, la caméra peut avoir une première résolution de type 1200x800, et la liaison de transmission peut être analogique et présenter une seconde résolution de type 720x480 (standard NTSC) ou 720x576 (standard PAL). Dans cette situation la caméra est contrainte de changer la résolution de chaque image brute acquise pour qu’elle puisse être transmise par la liaison de transmission, ce qui induit une dégradation de la qualité des images brutes, laquelle est accentuée lorsque la liaison de transmission ne comprend qu’une simple paire de câbles électriques torsadée et non blindée.
Par ailleurs, les images brutes acquises étant panoramiques (ou grand angle), elles présentent une importante distorsion qui est corrigée par un traitement géométrique effectué par un processeur du dispositif d’assistance, afin de permettre au conducteur du véhicule d’avoir une meilleure perception des distances. Cette correction de la distorsion étant généralement fondée sur des interpolations linéaires, elle induit dans les images un flou qui est d’autant plus important que la seconde résolution avec laquelle elles ont été transmises est basse. La gêne occasionnée par ce flou pouvant être supérieure à celle occasionnée par la distorsion, il arrive que certains dispositifs d’assistance soient configurés de manière à ne réaliser qu’une correction de distorsion légère, voire aucune correction de distorsion.
La situation est encore aggravée lorsque les images dont la correction de distorsion a été réalisée font ensuite l’objet dans le processeur du dispositif d’assistance d’un recadrage destiné à supprimer au moins une portion que l’on ne veut pas voir affichée sur l’écran (comme par exemple la calandre ou une plaque d’immatriculation ou un pare-chocs (ou bouclier)). En effet, ce recadrage induit une destruction de pixels dans chaque image corrigée (en distorsion), et donc une nouvelle dégradation de la qualité du fait que la (seconde) résolution est inchangée.
Par ailleurs, lorsque l’écran d’affichage présente une troisième résolution strictement supérieure à la seconde résolution, ce qui est souvent le cas des écrans haute définition (par exemple de type 1920x720), le processeur du dispositif d’assistance est contraint de changer le format (ou la résolution) de chaque image corrigée et recadrée afin qu’il corresponde à celui (ou celle) de l’écran, ce qui amplifie la dégradation déjà importante de la qualité.
L’invention a notamment pour but d’améliorer la situation.
Elle propose notamment à cet effet un procédé d’assistance permettant d’assister la conduite d’un véhicule comprenant au moins une caméra acquérant des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie de son environnement, et au moins un écran affichant des images traitées issues des images brutes acquises et transmises via une liaison de transmission offrant une seconde résolution (éventuellement inférieure à cette première résolution).
Ce procédé d’assistance se caractérise par le fait qu’il comprend :
- une première étape dans laquelle on effectue dans la/chaque caméra sur chaque image brute acquise un premier traitement comprenant au moins une correction de distorsion, afin d’obtenir une première image intermédiaire, puis on génère une seconde image intermédiaire ayant la seconde résolution à partir de chaque première image intermédiaire obtenue afin de la transmettre via la liaison de transmission, et
- une seconde étape dans laquelle on effectue en aval de la liaison de transmission, sur chaque seconde image intermédiaire générée, un second traitement comprenant au moins une transformation dans un format d’affichage de l’écran, afin d’obtenir une image traitée prête à être affichée par ce dernier.
Au moins la correction de la distorsion étant désormais effectuée sur les images brutes avant tout autre traitement géométrique et avant leur transmission via la liaison de transmission, on minimise ainsi la dégradation de qualité et notamment le flou introduit.
Le procédé d’assistance selon l’invention peut comporter d’autres caractéristiques qui peuvent être prises séparément ou en combinaison, et notamment :
- dans sa première étape le premier traitement peut aussi comprendre un recadrage prédéfini destiné à supprimer dans chaque image brute acquise au moins une portion ne devant pas être affichée sur l’écran ;
> dans sa première étape chaque portion peut comprendre une souspartie du véhicule choisie parmi une calandre, une plaque d’immatriculation, un pare-chocs, et un bouclier ;
- dans sa première étape le premier traitement peut aussi comprendre une opération de dématriçage et/ou une correction automatique de balance des blancs et/ou une correction automatique d’exposition et/ou une correction automatique de gamme dynamique ;
- dans sa seconde étape le second traitement peut aussi comprendre un ajout d’information(s) en réalité augmentée ;
> dans sa seconde étape certaines au moins des informations ajoutées peuvent définir des liaisons de guidage pour aider un conducteur du véhicule à garer ce dernier sur une place de stationnement détectée dans chaque seconde image intermédiaire reçue via la liaison de transmission.
L’invention propose également un produit programme d’ordinateur comprenant un jeu d’instructions qui, lorsqu’il est exécuté par des moyens de traitement, est propre à mettre en œuvre un procédé d’assistance du type de celui présenté ci-avant pour assister à la conduite d’un véhicule comprenant au moins une caméra acquérant des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie de son environnement, et au moins un écran affichant des images traitées issues des images brutes acquises et transmises via une liaison de transmission offrant une seconde résolution (éventuellement inférieure à cette première résolution).
L’invention propose également un système d’assistance, d’une part, destiné à assister la conduite d’un véhicule comprenant au moins un écran affichant des images, et, d’autre part, comprenant au moins une caméra destinée à être solidarisée fixement au véhicule afin d’acquérir des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie d’un environnement de ce véhicule, et à être couplée à une liaison de transmission du véhicule offrant une seconde résolution (éventuellement inférieure à cette première résolution).
Ce système d’assistance se caractérise par le fait :
- que sa/chaque caméra comprend au moins un premier processeur effectuant sur chaque image brute acquise un premier traitement comprenant au moins une correction de distorsion, afin d’obtenir une première image intermédiaire, puis générant une seconde image intermédiaire ayant la seconde résolution à partir de chaque première image intermédiaire obtenue pour qu’elle soit transmise par la liaison de transmission, et
- qu’il comprend au moins un second processeur destiné à être installé dans le véhicule et à recevoir chaque seconde image intermédiaire générée afin d’effectuer sur cette dernière un second traitement comprenant au moins une transformation dans un format d’affichage de l’écran, pour obtenir une image traitée prête à être affichée par ce dernier.
L’invention propose également un véhicule, éventuellement de type automobile, et comprenant, d’une part, au moins un écran affichant des images, et, d’autre part, un système d’assistance du type de celui présenté ci-avant et couplé à au moins une liaison de transmission.
D’autres caractéristiques et avantages de l’invention apparaîtront à l’examen de la description détaillée ci-après, et des dessins annexés, sur lesquels :
- la figure 1 illustre schématiquement et fonctionnellement un parking comprenant quatre places de stationnement sur l’une desquelles le conducteur d’un véhicule est en train de garer ce dernier, assisté par un exemple de réalisation d’un système d’assistance selon l’invention embarqué, et
- la figure 2 illustre schématiquement un exemple d’algorithme mettant en œuvre un procédé d’assistance selon l’invention.
L’invention a notamment pour but de proposer un procédé d’assistance, et un système d’assistance SA associé, destinés à permettre d’assister la conduite d’un véhicule V1 par affichage d’images d’environnement traitées.
Dans ce qui suit, on considère, à titre d’exemple non limitatif, que le véhicule V1 est de type automobile. Il s’agit, par exemple et comme illustré, d’une voiture. Mais l’invention n’est pas limitée à ce type de véhicule. Elle concerne en effet tout type de véhicule pouvant se déplacer, éventuellement sur des surfaces de roulage, sous le contrôle d’un conducteur ou d’un pilote automatique (ou dispositif d’assistance à la conduite). Ainsi, elle concerne les véhicules terrestres, les bateaux et les aéronefs.
On a schématiquement représenté sur la figure 1 un parking PK comprenant quatre places de stationnement Zk (k = 1 à 4) desservies par une surface de roulage SR sur laquelle circule un véhicule V1 équipé d’un exemple de réalisation d’un système d’assistance SA selon l’invention et d’un écran d’affichage EA chargé d’afficher des images (et notamment des images traitées it, générées par le système d’assistance SA).
Le conducteur du véhicule V1 est ici en train de garer ce dernier (V1) sur la troisième place de stationnement Z3 (k = 3), assisté par le système d’assistance SA embarqué. Par ailleurs, les deuxième Z2 (k = 2) et quatrième Z4 (k = 4) places de stationnement sont occupées respectivement par deux autres véhicules V2.
On notera que dans l’exemple illustré non limitativement sur la figure 1, le véhicule V1 ne comprend qu’un seul écran d’affichage EA, qui fait ici partie du combiné central CC installé de façon permanente dans ou sur la planche de bord. Mais le véhicule V1 peut comprendre plusieurs écrans d’affichage installés de façon permanente ou temporaire. Ainsi, il peut comprendre un écran d’affichage dans son tableau de bord (fixe) et/ou une partie de son pare-brise peut servir d’écran d’affichage pour un dispositif d’affichage de type dit « tête haute » et/ou il peut transporter de façon temporaire un téléphone mobile intelligent (ou « smartphone ») ou une tablette électronique comportant un écran d’affichage, par exemple.
Comme évoqué précédemment, l’invention propose notamment un procédé d’assistance destiné à permettre d’assister la conduite du véhicule V1 par affichage d’images traitées it sur l’un au moins de ses écrans embarqués. Ce procédé comprend des première 10-40 et seconde 50-60 étapes qui peuvent être mises en œuvre au moins partiellement par un système d’assistance SA selon l’invention, installé dans le véhicule V1 et comprenant, comme illustré sur la figure 1, au moins une caméra CO, comportant un premier processeur P1, et un second processeur P2.
La (chaque) caméra CO est chargée d’acquérir des images brutes ib numériques, de type grand angle (et donc panoramiques) et ayant une première résolution, dans une partie au moins de l’environnement du véhicule V1. Par exemple, cette première résolution peut être de type 1200x800.
On notera que dans l’exemple illustré non limitativement sur la figure 1, le système d’assistance SA ne comprend qu’une seule caméra CO, ici installée dans la partie arrière du véhicule V1, par exemple dans la partie supérieure de la lunette arrière (mais cela pourrait aussi être dans le parechocs (ou bouclier) arrière). Par conséquent, cette caméra CO est chargée d’acquérir des images brutes ib derrière le véhicule V1 et sur une partie de ses deux côtés latéraux. Mais cette caméra pourrait être installée dans la partie avant du véhicule V1, par exemple dans la partie supérieure du pare-brise du véhicule V1 (éventuellement dans son rétroviseur intérieur central) ou dans la calandre ou le pare-chocs (ou bouclier) avant du véhicule V1, ou bien sur le toit (ou pavillon) du véhicule V1. Par ailleurs, selon les besoins applicatifs le système d’assistance SA peut comprendre plusieurs (au moins deux) caméras CO, et notamment une première caméra chargée d’acquérir des images brutes ib devant le véhicule V1 et sur une partie de ses deux côtés latéraux, et une seconde caméra chargée d’acquérir des images brutes ib derrière le véhicule V1 et sur une autre partie de ses deux côtés latéraux. Il peut aussi comprendre, éventuellement, deux caméras latérales.
La (chaque) caméra CO transmet les images ii2 qui sont générées par son premier processeur P1 (et sur lesquelles on reviendra plus loin) via une liaison de transmission LT offrant une seconde résolution qui est éventuellement inférieure à la première résolution. Par exemple, la liaison de transmission LT peut être analogique et présenter une seconde résolution de type 720x480 (standard NTSC) ou 720x576 (standard PAL). Cette liaison de transmission LT est par ailleurs couplée au second processeur P2, directement ou indirectement (éventuellement via un réseau de communication embarqué dans le véhicule V1 (éventuellement de type multiplexé et éventuellement via une interface multiplexée de type mipi CSI)).
On notera que le second processeur P2 pourrait faire partie d’un calculateur assurant éventuellement au moins une autre fonction au sein du véhicule V1.
La première étape 10-40 du procédé d’assistance, selon l’invention, peut être déclenchée sur ordre du conducteur du véhicule V1 ou bien lorsqu’une fonction utilisant les images traitées est activée, par exemple du fait d’un franchissement d’un seuil de vitesse par le véhicule V1 et/ou d’un passage de la marche arrière et/ou d’un ordre explicite du conducteur au travers d’un organe de contrôle.
Comme on le verra plus loin, cette fonction peut être une assistance aux manœuvres de stationnement, par exemple.
Dans la première étape 10-40 du procédé d’assistance on (le premier processeur P1) effectue dans la caméra CO qu’il équipe, sur chaque image brute ib acquise, un premier traitement comprenant au moins une correction de distorsion, afin d’obtenir une première image intermédiaire ii1.
Puis, cette première étape 10-40 se poursuit par la génération (par le premier processeur P1) d’une seconde image intermédiaire ii2, ayant la seconde résolution (de la liaison de transmission LT couplée à sa caméra CO), à partir de chaque première image intermédiaire ii1 obtenue afin de la transmettre via cette liaison de transmission LT à destination du second processeur P2.
Dans la seconde étape 50-60 du procédé d’assistance on (le second processeur P2) effectue, en aval de la liaison de transmission LT, sur chaque seconde image intermédiaire ii2 générée par un (le) premier processeur P1, un second traitement comprenant au moins une transformation dans un format d’affichage d’un écran EA du véhicule V1, afin d’obtenir une image traitée it qui est prête à être affichée par ce dernier (EA).
Par exemple, ce format peut être une haute définition de type 1920x720.
Désormais, au moins la correction de la distorsion est effectuée sur les images brutes ib (et donc possiblement de haute résolution) avant tout autre traitement géométrique et avant leur transmission via la liaison de transmission, ce qui minimise la dégradation de qualité et notamment le flou introduit. De plus, lorsque l’écran d’affichage présente une troisième résolution qui est supérieure à la seconde résolution (de la transmission), le changement de format (ou de résolution) final a une influence minimale sur la qualité de l’image traitée it du fait qu’elle est réalisée sur une seconde image intermédiaire ii2 dont la dégradation de la qualité a été minimisée.
Lorsque l’on ne veut pas voir affichée sur l’écran EA au moins une portion de chaque image brute acquise, le premier traitement, effectué par le premier processeur P1 dans la première étape 10-40, peut aussi comprendre un recadrage prédéfini destiné à supprimer cette portion dans chaque image brute ib acquise. Ce recadrage peut, par exemple, être effectué après la correction de la distorsion, et dans ce cas chaque image brute ib est corrigée en distorsion et recadrée avant d’être transformée localement en seconde image intermédiaire ii2. Mais le recadrage peut être fait à d’autres instants.
Cet autre traitement géométrique de recadrage induit certes une destruction de pixels dans chaque image corrigée en distorsion, mais cela ne nuit pas à la qualité lorsqu’ensuite la transmission se fait sur une seconde résolution qui est inférieure à la première résolution et donc impose que chaque image transmise ii2 soit définie par un nombre de pixels inférieur à celui de l’image brute ib dont elle est issue. En fait cela ne nuit pas à la qualité tant que l’on reste supérieur à la seconde résolution. On a ainsi le double bénéfice d’un traitement géométrique qualitatif tout en utilisant une liaison de transmission LT économique.
Par exemple, dans la première étape 10-40 chaque portion supprimée peut comprendre une sous-partie du véhicule V1 qui est choisie parmi une calandre, une plaque d’immatriculation (avant ou arrière), un parechocs (avant ou arrière), et un bouclier (avant ou arrière).
On notera que dans la première étape 10-40 le premier traitement peut aussi comprendre, éventuellement, au moins un traitement non géométrique choisi parmi une opération de dématriçage, une correction automatique de balance des blancs, une correction automatique d’exposition, et une correction automatique de gamme dynamique (par exemple de type HDR (« High Dynamic Range »)). Il est rappelé que la gamme dynamique (ou plage dynamique) est le rapport entre les plus grande et plus petite intensités lumineuses que la caméra CO peut acquérir à l’instant considéré.
On notera également que dans la seconde étape 50-60 le second traitement effectué par le second processeur P2 peut aussi comprendre un ajout d’information(s) en réalité augmentée. Cela est notamment utile lorsque le système d’assistance SA assure une fonction de conseil, ou de guide, ou plus généralement de fourniture d’informations.
Par exemple, dans la seconde étape 50-60 certaines au moins de ces informations, ajoutées par le second processeur P2 à chaque seconde image intermédiaire ii2 reçue via la liaison de transmission LT, peuvent définir des liaisons de guidage pour aider le conducteur du véhicule V1 à garer ce dernier (V1) sur une place de stationnement Zk (ici la troisième Z3) détectée (dans cette seconde image intermédiaire ii2). Par exemple, ces liaisons de guidage peuvent matérialiser la trajectoire idéale que l’on doit faire suivre au véhicule V1 pour le garer ici sur la troisième place de stationnement Z3. On comprendra que dans cet exemple non limitatif, le système d’assistance SA assure une fonction d’aide aux manœuvres de stationnement contrôlées par le conducteur. Mais d’autres informations de réalité augmentée peuvent être ajoutées avant l’affichage, notamment lorsque le système d’assistance SA assure une autre fonction que celle précitée, comme par exemple la détection d’obstacles par ultrasons.
On a schématiquement illustré sur la figure 2 un exemple d’algorithme mettant en œuvre le procédé d’assistance décrit ci-avant.
Dans une première sous-étape 10 de la première étape on (la caméra CO) acquiert une image brute ib de l’environnement du véhicule V1.
Dans une deuxième sous-étape 20 de la première étape on (le premier processeur P1) effectue dans la caméra CO qu’il équipe, sur l’image brute ib qui vient d’être acquise, un premier traitement comprenant au moins la correction de distorsion (et possiblement un recadrage), afin d’obtenir une première image intermédiaire ii1.
Dans une troisième sous-étape 30 de la première étape on (le premier processeur P1) génère une seconde image intermédiaire ii2, ayant la seconde résolution (de la liaison de transmission LT couplée à sa caméra CO), à partir de la première image intermédiaire ii1 qu’il vient d’obtenir.
Dans une quatrième sous-étape 40 de la première étape on (le premier processeur P1) déclenche la transmission de cette seconde image intermédiaire ii2, par sa caméra CO et via sa liaison de transmission LT, à destination du second processeur P2.
Dans une cinquième sous-étape 50 de la seconde étape on (le second processeur P2) effectue sur cette seconde image intermédiaire ii2, transmise par la caméra CO, un second traitement comprenant au moins une transformation dans le format d’affichage de l’écran EA du véhicule V1 (ainsi qu’un éventuel ajout d’information(s) en réalité augmentée), afin d’obtenir une image traitée it.
Dans une sixième sous-étape 60 de la seconde étape on (le second processeur P2) transmet à l’écran EA l’image traitée it (qu’il vient de générer) afin qu’il procède à son affichage.
On notera également que l’invention propose aussi un produit programme d’ordinateur comprenant un jeu d’instructions qui, lorsqu’il est exécuté par des moyens de traitement de type circuits électroniques (ou hardware), comme par exemple au moins les processeurs P1 et P2, est propre à mettre en œuvre le procédé d’assistance décrit ci-avant pour assister à la conduite du véhicule V1 par affichage d’images traitées, par exemple lors de manœuvres de stationnement contrôlées par son conducteur.
On notera également que sur la figure 1 tous les moyens de traitement et de calcul du système d’assistance SA sont très schématiquement illustrés par les seuls premier P1 et second P2 processeurs. Mais ces moyens de traitement et de calcul peuvent comprendre des circuits imprimés (ou intégrés), éventuellement reliés par des connections filaires ou non filaires, et faisant partie d’un ou plusieurs processeurs. On entend par circuit imprimé (ou intégré) tout type de dispositif apte à effectuer au moins une opération électrique ou électronique. Par ailleurs, chacun des premier P1 et second P2 processeurs peut, par exemple, être un processeur de signal numérique (ou DSP (« Digital Signal Processor »)), associé à une mémoire vive stockant des instructions pour la mise en œuvre de routine(s) ou programme(s) informatique(s), et éventuellement à une mémoire de masse pour le stockage de données destinées à être conservées pendant et après ses traitements et calculs. De plus, chacun des premier P1 et second P2 processeurs reçoit des données (images brutes ib ou secondes images intermédiaires ii2) qu’il utilise dans des traitements et calculs, après les avoir éventuellement mises en forme et/ou démodulées et/ou amplifiées, de façon connue en soi. En outre, chacun des premier P1 et second P2 processeurs peut être associé à une interface d’entrée pour recevoir des images et/ou à une interface de sortie pour délivrer le résultat de ses traitements et calculs. On entend donc ici par processeur (P1 ou P2) une combinaison de circuits électroniques (ou « hardware ») et de modules logiciels (ou informatiques ou encore « software »).
Une ou plusieurs sous-étapes de l’une au moins des étapes du procédé d’assistance peuvent être effectuées par des composants différents. Ainsi, le procédé d’assistance peut-être mis en œuvre par une pluralité de processeurs, mémoire vive, mémoire de masse, interface d’entrée, interface de sortie et/ou processeur de signal numérique, éventuellement répartis dans des équipements différents embarqués de façon permanente dans le véhicule V1. Dans ces situations, le système d’assistance SA peut-être décentralisé, au sein d’un réseau local (plusieurs processeurs reliés entre eux par exemple) ou d’un réseau étendu.
L’invention offre une amélioration notable de la qualité d’image avec correction(s) géométrique(s), et permet au conducteur d’avoir une meilleure perception des distances et de son environnement.
Claims (10)
- REVENDICATIONS1. Procédé d’assistance à la conduite d’un véhicule (V1) comprenant au moins une caméra (CO) acquérant des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie de son environnement, et au moins un écran (EA) affichant des images traitées issues desdites images brutes acquises et transmises via une liaison de transmission (LT) offrant une seconde résolution, caractérisé en ce qu’il comprend i) une première étape (10-40) dans laquelle on effectue dans ladite caméra (CO), sur chaque image brute acquise, un premier traitement comprenant au moins une correction de distorsion, afin d’obtenir une première image intermédiaire, puis on génère une seconde image intermédiaire ayant ladite seconde résolution à partir de chaque première image intermédiaire obtenue afin de la transmettre via ladite liaison de transmission (LT), et ii) une seconde étape (50-60) dans laquelle on effectue en aval de ladite liaison de transmission (LT), sur chaque seconde image intermédiaire générée, un second traitement comprenant au moins une transformation dans un format d’affichage dudit écran (EA), afin d’obtenir une image traitée prête à être affichée par ce dernier (EA).
- 2. Procédé selon la revendication 1, caractérisé en ce que dans ladite première étape (10-40) ledit premier traitement comprend aussi un recadrage prédéfini destiné à supprimer dans chaque image brute acquise au moins une portion ne devant pas être affichée sur ledit écran (EA).
- 3. Procédé selon la revendication 2, caractérisé en ce que dans ladite première étape (10-40) chaque portion comprend une sous-partie dudit véhicule (V1) choisie parmi une calandre, une plaque d’immatriculation, un pare-chocs, et un bouclier.
- 4. Procédé selon l’une des revendications 1 à 3, caractérisé en ce que dans ladite première étape (10-40) ledit premier traitement comprend aussi une opération de dématriçage et/ou une correction automatique de balance des blancs et/ou une correction automatique d’exposition et/ou une correction automatique de gamme dynamique.
- 5. Procédé selon l’une des revendications 1 à 4, caractérisé en ce que dans ladite seconde étape (50-60) ledit second traitement comprend aussi un ajout d’information(s) en réalité augmentée.
- 6. Procédé selon la revendication 5, caractérisé en ce que dans ladite seconde étape (50-60) certaines au moins desdites informations ajoutées définissent des liaisons de guidage pour aider un conducteur dudit véhicule (V1) à garer ce dernier (V1) sur une place de stationnement détectée dans chaque seconde image intermédiaire reçue via ladite liaison de transmission (LT).
- 7. Produit programme d’ordinateur comprenant un jeu d’instructions qui, lorsqu’il est exécuté par des moyens de traitement, est propre à mettre en œuvre le procédé d’assistance selon l’une des revendications précédentes pour assister à la conduite d’un véhicule (V1) comprenant au moins une caméra (CO) acquérant des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie de son environnement, et au moins un écran (EA) affichant des images traitées issues desdites images brutes acquises et transmises via une liaison de transmission (LT) offrant une seconde résolution.
- 8. Système d’assistance (SA) pour assister la conduite d’un véhicule (V1) comprenant au moins un écran (EA) affichant des images, ledit système (SA) comprenant au moins une caméra (CO) destinée à être solidarisée fixement audit véhicule (V1) afin d’acquérir des images brutes, de type grand angle et ayant une première résolution, dans au moins une partie d’un environnement dudit véhicule (V1), et à être couplée à une liaison de transmission (LT) dudit véhicule (V1) offrant une seconde résolution, caractérisé en ce que ladite caméra (CO) comprend au moins un premier processeur (P1) effectuant sur chaque image brute acquise un premier traitement comprenant au moins une correction de distorsion, afin d’obtenir une première image intermédiaire, puis générant une seconde image intermédiaire ayant ladite seconde résolution à partir de chaque première image intermédiaire obtenue pour qu’elle soit transmise par ladite liaison de transmission (LT), et en ce qu’il comprend au moins un second processeur (P2) destiné à être installé dans ledit véhicule (V1) et à recevoir chaque seconde image intermédiaire générée afin d’effectuer sur cette dernière un second traitement comprenant au moins une transformation dans un format d’affichage dudit écran (EA), pour obtenir une image traitée prête à être affichée par ce dernier (EA).
- 9. Véhicule (V1) comprenant au moins un écran (EA) affichant des5 images, caractérisé en ce qu’il comprend en outre un système d’assistance (SA) selon la revendication 8, couplé à au moins une liaison de transmission (LT).
- 10. Véhicule selon la revendication 9, caractérisé en ce qu’il est de type automobile.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1858567A FR3086484B1 (fr) | 2018-09-21 | 2018-09-21 | Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1858567A FR3086484B1 (fr) | 2018-09-21 | 2018-09-21 | Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR3086484A1 true FR3086484A1 (fr) | 2020-03-27 |
| FR3086484B1 FR3086484B1 (fr) | 2021-09-03 |
Family
ID=65243747
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR1858567A Active FR3086484B1 (fr) | 2018-09-21 | 2018-09-21 | Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera |
Country Status (1)
| Country | Link |
|---|---|
| FR (1) | FR3086484B1 (fr) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8264524B1 (en) * | 2008-09-17 | 2012-09-11 | Grandeye Limited | System for streaming multiple regions deriving from a wide-angle camera |
| US8427538B2 (en) * | 2004-04-30 | 2013-04-23 | Oncam Grandeye | Multiple view and multiple object processing in wide-angle video camera |
| US20150242994A1 (en) * | 2010-01-28 | 2015-08-27 | Pathway Innovations And Technologies, Inc. | Method and system for accelerating video preview digital camera |
| US20160368417A1 (en) * | 2015-06-17 | 2016-12-22 | Geo Semiconductor Inc. | Vehicle vision system |
-
2018
- 2018-09-21 FR FR1858567A patent/FR3086484B1/fr active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8427538B2 (en) * | 2004-04-30 | 2013-04-23 | Oncam Grandeye | Multiple view and multiple object processing in wide-angle video camera |
| US8264524B1 (en) * | 2008-09-17 | 2012-09-11 | Grandeye Limited | System for streaming multiple regions deriving from a wide-angle camera |
| US20150242994A1 (en) * | 2010-01-28 | 2015-08-27 | Pathway Innovations And Technologies, Inc. | Method and system for accelerating video preview digital camera |
| US20160368417A1 (en) * | 2015-06-17 | 2016-12-22 | Geo Semiconductor Inc. | Vehicle vision system |
| US10040394B2 (en) * | 2015-06-17 | 2018-08-07 | Geo Semiconductor Inc. | Vehicle vision system |
Also Published As
| Publication number | Publication date |
|---|---|
| FR3086484B1 (fr) | 2021-09-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20180048801A1 (en) | Real-time hdr video for vehicle control | |
| FR3025351A1 (fr) | Unite de commande electronique et systeme video dans un vehicule | |
| JP7024782B2 (ja) | 画像処理装置と画像処理方法および撮像装置 | |
| JP2009081664A (ja) | 車両用周辺監視装置および映像表示方法 | |
| EP2133237B1 (fr) | Procédé d'affichage d'aide au parking | |
| JP6816769B2 (ja) | 画像処理装置と画像処理方法 | |
| CN109479093B (zh) | 图像处理装置和图像处理方法 | |
| CN110798655A (zh) | 消除移动载具a柱盲区的行车图像系统及其图像处理方法 | |
| JP2020162013A (ja) | 画像処理装置、撮像装置、移動体及び画像処理方法 | |
| US20230258850A1 (en) | Color filter array patterns for enhancing a low-light sensitivity while preserving a color accuracy in image signal processing applications | |
| FR3067999A1 (fr) | Procede d'aide a la conduite d'un vehicule automobile | |
| FR3086484A1 (fr) | Procede et systeme d’assistance a la conduite d’un vehicule par affichage d’images acquises et partiellement traitees par la camera | |
| EP3627467B1 (fr) | Procédé et dispositif de détection de l état d'un capot avant d'un véhicule automobile par comparaison de champs de vision | |
| US10821900B2 (en) | Image processing device | |
| FR3120030A1 (fr) | Procédé et dispositif de rétro-vision numérique utilisé par un véhicule pour remplacer des rétroviseurs extérieurs du véhicule | |
| FR3071651B1 (fr) | Procede d'affichage d'une vue etendue d'un environnement d'un vehicule automobile, et vehicule automobile associe | |
| FR3085335A1 (fr) | Procede d’assistance de l’utilisation d’un vehicule automobile a hayon arriere lors d’un stationnement | |
| FR3053293A1 (fr) | Systeme d'aide a la conduite pour un vehicule, vehicule ferroviaire et procede d'utilisation associes | |
| FR3098276A1 (fr) | Assistance d’un véhicule suivi en cas d’éblouissement par un véhicule suiveur détecté par analyse d’images | |
| EP3830741B1 (fr) | Assistance à la conduite pour le controle d'un vehicule automobile comprenant des étappes parallèles de traitement des images transformées. | |
| FR3087986A1 (fr) | Dispositif d’affichage avec superposition d’image autostereoscopique sur une image reelle | |
| FR3126363A1 (fr) | Procédé et dispositif de contrôle d’un système de rétrovision numérique d’un véhicule | |
| FR3103666A1 (fr) | Génération d’images formatées à transmettre, issues d’images acquises par un véhicule | |
| FR3093968A1 (fr) | Système de rétrovision pour véhicule comprenant une pluralité d’appareils de prise de vue et un calculateur | |
| FR3126583A1 (fr) | Procédé et dispositif de contrôle d’un système de rétrovision numérique d’un véhicule |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PLFP | Fee payment |
Year of fee payment: 2 |
|
| PLSC | Publication of the preliminary search report |
Effective date: 20200327 |
|
| PLFP | Fee payment |
Year of fee payment: 3 |
|
| PLFP | Fee payment |
Year of fee payment: 4 |
|
| PLFP | Fee payment |
Year of fee payment: 5 |
|
| PLFP | Fee payment |
Year of fee payment: 6 |
|
| CD | Change of name or company name |
Owner name: STELLANTIS AUTO SAS, FR Effective date: 20240423 |