WO2012093209A1 - Procédé et dispositif d'aide à la prise de vue d'une photo numérique au moyen d'un objectif grand angle - Google Patents

Procédé et dispositif d'aide à la prise de vue d'une photo numérique au moyen d'un objectif grand angle Download PDF

Info

Publication number
WO2012093209A1
WO2012093209A1 PCT/FR2011/052250 FR2011052250W WO2012093209A1 WO 2012093209 A1 WO2012093209 A1 WO 2012093209A1 FR 2011052250 W FR2011052250 W FR 2011052250W WO 2012093209 A1 WO2012093209 A1 WO 2012093209A1
Authority
WO
WIPO (PCT)
Prior art keywords
digital
panoramic
image
intermediate image
obtaining
Prior art date
Application number
PCT/FR2011/052250
Other languages
English (en)
Inventor
David Poullier
Original Assignee
Pixeet
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pixeet filed Critical Pixeet
Priority to EP11773792.4A priority Critical patent/EP2661731A1/fr
Publication of WO2012093209A1 publication Critical patent/WO2012093209A1/fr

Links

Classifications

    • G06T3/047—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules

Definitions

  • the invention relates to the field of digital photography, in particular that of digital photography with large-angle lenses.
  • one solution is to assemble together several digital photos, as is also the case in the field of low-angle digital cameras.
  • the difficulty lies in the assembly of the different digital photos obtained, as it is necessary to try to obtain perfect transitions between these photos to obtain a panoramic image of good quality.
  • the solutions implementing this principle therefore require the transfer of the digital photos taken to a remote computer equipped with software capable of performing these operations, such as a key point positioning software (for example example of type "auto pano sift c"), a processing software (for example of the "hugin” type) or a fusion software (for example of the "enblend” type).
  • a key point positioning software for example example of type "auto pano sift c”
  • a processing software for example of the "hugin” type
  • fusion software for example of the "enblend” type
  • Another solution may be to try to optimize the digital photos as soon as they are taken into view, by means of a tripod adapted to such an operation, in order to optimize beforehand the assembly of these photos with each other and thus to obtain a good quality panoramic image.
  • the object of the present invention is to remedy the aforementioned drawbacks of the existing solutions and to propose a method for producing panoramic images from cameras equipped with a wide-angle lens, which is both accessible to users and does not require not to access a remote processing unit.
  • the present invention proposes a method of assisting the shooting of a digital photograph from an initial digital photograph obtained by means of a wide-angle lens associated with a digital camera device.
  • method comprising obtaining a first intermediate image from the initial digital image by means of a projection mathematical function, obtaining a second intermediate image from the first intermediate image, by applying the function mathematical inverse of the projection mathematical function on at least a part of the first intermediate image and the simultaneous display, on a screen of the digital device, of the second intermediate image and an image visualized by the digital camera device to facilitate the shooting of the digital photo.
  • the initial digital photograph has a substantially spherical shape and the mathematical projection function is an equidistant cylindrical projection function transforming the initial digital photograph into a first intermediate image of rectangular shape.
  • the present invention also provides a method for obtaining a panoramic picture from the assembly of a series of digital photos obtained by means of a wide angle lens associated with a digital device, each of the digital photos of the series, with the exception of the first digital picture in this series, being obtained by using the above-mentioned shooting assisting method applied to the previous digital picture in this series.
  • the panoramic photo covers an angle of view of at least 360 ° and the number of digital photos in the series is a function of the angle of view of the wide angle lens associated with the digital device. , in order to minimize the number of shots necessary to obtain such a completely panoramic photo (ie covering 360 °) according to the type of lens used.
  • the panoramic photograph is obtained from the assembly of a series of two digital photos and the wide angle lens associated with the digital device has a shooting angle strictly greater than 180 °, This allows you to take a picture completely panoramic with a minimum of shots.
  • the panoramic image is obtained from the assembly of a series of three digital photos and the wide angle lens associated with the device.
  • digital camera has a shooting angle strictly greater than 120 °.
  • the panoramic image is obtained from the assembly of a series of four digital photos and the wide angle lens associated with the digital device has a shooting angle strictly greater than 90. °, which makes it possible to obtain a completely panoramic photo by means of intuitive shots.
  • a second additional intermediate image is displayed together with the second intermediate image (obtained from the penultimate digital photograph of the series of digital photos, this second additional intermediate image being obtained by application of the inverse mathematical function of the mathematical projection function on a part of a first additional intermediate image obtained by means of a mathematical projection function applied to the first digital photo of the digital photo series. Shooting the latest digital photo from a series of digital photos, to obtain a completely panoramic photo with a fitting fit between the last and the first photo in the series.
  • the method comprises, after obtaining a series comprising at least three digital photos successively taken by means of the method of assisting the shooting above, an additional step of display simultaneous of the second intermediate image obtained from the digital photo preceding a digital photo to be corrected in said series on one side of the screen of the digital device and the second intermediate image obtained from the digital photo following the digital photo to be corrected in said series on the opposite side of the screen of the digital device, in order to facilitate the shooting of a new digital picture intended to replace the digital picture to be corrected.
  • the present invention further provides a method for obtaining a three-dimensional panoramic digital picture, comprising obtaining a first panoramic digital picture from the assembly of a first series of digital photos obtained by means of a wide angle lens associated with a first digital device by implementing the steps of the method for obtaining a panoramic picture above, obtaining a second panoramic digital picture from the assembly of a second series of digital photos obtained by means of a wide-angle lens associated with a second digital device, arranged at a predefined distance from the first digital device, by implementing the steps of the method for obtaining a panoramic photograph and before, and the combination of the first panoramic digital photo and the second panoramic digital photo in order to obtain the panoramic digital photo in three dim ensions.
  • the association step comprises obtaining a first homologous image by means of the extraction of a first color component of the image. 'a of the two panoramic digital photos, obtaining a second homologous image by extracting a second color component, different from the first component, from the other of the two digital panoramic photos and superimposing the two images counterparts to obtain the anaglyph image corresponding to the three-dimensional digital photo.
  • the present invention also proposes a computer program comprising code instructions for the implementation of one of the above methods, when this program is executed by the processing unit of a digital device capable of being associated. to a wide angle lens.
  • a program must be considered as a product within the framework of the protection sought by the present patent application.
  • the present invention also proposes a digital device capable of facilitating the shooting of a new digital photograph from an initial digital photograph, the digital device comprising a photographic sensor capable of being associated with a wide-angle lens in order to capture the initial digital photograph and the new digital photograph, a screen adapted to display an image displayed by the digital sensor and a processing unit arranged to obtain a first intermediate image from an initial digital photograph captured by the photographic sensor associated with a wide-angle lens by means of a digital projection function and to obtain a second intermediate image from the first intermediate image by applying the inverse mathematical function to the projection function on at least a part of the first intermediate image, screen being arranged in addition to display the second intermediate image simultaneously with the image viewed by the digital sensor to facilitate capture of the new digital photo.
  • a digital device capable of facilitating the shooting of a new digital photograph from an initial digital photograph
  • the digital device comprising a photographic sensor capable of being associated with a wide-angle lens in order to capture the initial digital photograph and the new digital photograph, a screen adapted to display an image displayed by the
  • the processing unit is further arranged to assemble said digital photos to obtain a panoramic image.
  • the device includes a wide angle lens physically associated with the digital sensor.
  • FIG. 1 illustrates the steps of a method of assisting the shooting of a new digital photograph from an initial digital photograph, by means of a wide-angle lens associated with a digital recording device. view, according to the present invention, as well as a method for obtaining a digital photograph using such a method of assisting shooting;
  • FIG. 2 illustrates the steps of a method of shooting a three-dimensional panoramic digital photograph according to the present invention
  • FIG. 3A illustrates the various intermediate images obtained from an initial digital photograph P; when applying the steps of the method of assisting shooting according to an embodiment of the present invention
  • FIG. 3B illustrates the various intermediate images obtained from an initial digital photograph P; when applying the steps of the method of assisting shooting according to another embodiment of the present invention
  • FIG. 4 schematically describes a digital device capable of facilitating the shooting of a new digital photograph from an initial digital photograph according to the present invention.
  • FIG. 1 in which are illustrated the steps of a method of assisting the shooting of a new digital photograph from an initial digital photograph, by means of a lens wide angle associated with a digital shooting device, according to the present invention.
  • wide-angle lens is used here to mean a lens having a short focal length to allow a wide framing of close-up objects that can not be moved away from one another, allowing a landscape to be photographed as a whole in the form of a panorama or a room inside a building.
  • a wide-angle lens can be interpreted as a lens with a wider viewing angle than the natural perception of the human eye.
  • a focal length of less than 35 mm will be considered as a wide-angle lens. The more this focal length decreases, and the more the lens responds to this definition of wide-angle lens.
  • the method for assisting shooting includes a first step 11 of capturing an initial digital photograph P; by means of the associated wide angle lens, or even integrated, with the digital camera device.
  • the method comprises a step 13 of obtaining a first intermediate image Im ; from this initial digital photo P; by means of a mathematical projection function.
  • a mathematical projection function is used, which thus makes it possible to correct the deformation induced on the whole of the digital photograph P; by the use of a wide angle lens.
  • Such a mathematical function of projection is a mathematical function taking as input data that can typically match the coordinates of a pixel in the captured digital photo P, and outputting data that can typically match the coordinates of a pixel in an output image where the induced distortion on the entire digital picture P is corrected.
  • this mathematical projection function is an equidistant cylindrical projection function which transforms the digital photo P; in a first intermediate image Im ; rectangular shape.
  • Equidistant cylindrical projection otherwise known as equirectangular projection or geographic projection, is usually used in cartography and consists of considering the polar latitude and longitude coordinates of a sphere as Cartesian coordinates on a projection plane.
  • a first intermediate image of equirectangular type Im is then obtained ; from a digital photo P; of substantially spherical shape.
  • a second intermediate image ⁇ 3 ⁇ 4 'can then be obtained from the first intermediate image Im ; in a second transformation step, by application, on at least a part of the first image intermediate Im i; the inverse mathematical function of the mathematical projection function used to obtain the first intermediate image Im ; .
  • this second intermediate image Im; ' is obtained by means of a mathematical function inverse to that used to obtain the first intermediate image Im ; from the digital photo P i, the second intermediate image Im i ' will present a spherical shape similar to the digital photo P ;, and can therefore be used in superposition with an image displayed on the camera to facilitate the capture of the digital photo P; + i next by the user of the digital device.
  • this inverse mathematical function consists of transforming the first intermediate image of equirectangular type Im ; in a second intermediate image Im; ' spherical type.
  • the inverse mathematical function is applied to at least a part of the first intermediate image Im.
  • at least a part is meant here as well a part of the first intermediate image Im (for example a vertical segment situated on one of the edges of this image) that the first intermediate image Im as a whole, the part used can be quite an empty part of visual information (that is, black pixels).
  • this second intermediate image Im; ' is then displayed (display step 17) on the screen of the digital camera device, simultaneously with an Im image displayed by the camera, in order to be used for capturing a new digital photograph P; + i.
  • these images can be displayed next to each other, or advantageously in a superimposed manner (for example the right edge of the second intermediate image Im 'being superimposed with the left edge of the Im image displayed by the camera, or vice versa) to guide the user in shooting.
  • the user of the camera can then move the camera to overlay the second intermediate image Im; with the image Im in order to capture a new digital photo P; + i which is substantially aligned with the initial digital photograph P ;.
  • This facilitates the capture of digital photos properly aligned with each other by means of a wide-angle lens, and thus improves their alignment upstream of the shooting, without necessarily having to resort to complex digital processing after this shooting.
  • FIG. 1 furthermore describes the steps of a method for obtaining a panoramic photograph from the assembly of a series of digital photos ⁇ Pi ⁇ i ⁇ i ⁇ N, obtained by means of a lens at wide angle associated with a digital shooting device.
  • This method of obtaining a panoramic picture P is remarkable in that, for each of the digital photos P; from the series of digital photos ⁇ Pi ⁇ i ⁇ i ⁇ N, with the exception of the first digital picture Pi of the series, the digital picture P; is obtained by using the above-mentioned shooting assisting method applied to the previous digital picture P i in this series.
  • each of the digital photos P; (for i ranging from 2 to N) is captured using a second intermediate digital image ⁇ 3 ⁇ 4_ ⁇ ', itself obtained using a first intermediate digital image ⁇ 3 ⁇ 4_ ⁇ , obtained itself from the previous digital photo Pu.
  • Such an assembly step 23 may consist of adding the digital photos with each other, in the direction corresponding to the order of shooting, possibly removing the common part of two successive photos P; and P i + i at the junction of these two photos.
  • the final assembly corresponds to the assembly of equirectangular images obtained between each shot.
  • the panoramic image P is thus obtained here by assembling a plurality of N digital photos ⁇ ,. ,., ⁇ ;, ..., P N taken successively by means of a digital camera using a wide-angle lens, where N is an integer at least greater than or equal to two.
  • a progressive assembly of the digital photos taken successively can also be performed at each shot (ie for example after each step 1 1 of capture), in order to obtain an intermediate panoramic picture P '; corresponding to the assembly of digital photos Pi to P ; .
  • a series of intermediate panoramic photo ⁇ ,,. ,., ⁇ '; P ' N each corresponding to the assembly of the last digital picture P; captured with the previous intermediate panoramic photo P '; _i can then be displayed to the user so that he can view the progress of his shooting of the panoramic photo and eventually stop the process if he considers that digital photos are not good enough taken to enable a sufficiently good quality panoramic picture to be obtained, or if it is content with pictures Pi to P ; already taken to create a panoramic photo with a coverage angle of less than 360 °.
  • a 360 ° panoramic photograph P is constructed from N photos Pi to P N taken successively according to the method described above, a second additional intermediate image Imi "is displayed together with the second intermediate image.
  • This second additional intermediate image Imi is obtained by applying the inverse mathematical function of the projection mathematical function to a part of a first additional intermediate image obtained by means of a mathematical projection function applied to the first digital image Pi of the series of digital photos or any other digital photo P already made, covering the current shooting space
  • the user uses both P penultimate picture taken as the first picture taken to capture the last picture, which ensures the alignment of the last picture taken with the first photo taken using the above method, and therefore the panoramic photo P 360 ° is perfectly aligned at the joint between the first and last photo.
  • the method comprises an additional step of simultaneous display, in addition to the image I m displayed by the digital recording device, of the second intermediate image ⁇ 3 ⁇ 4_ ⁇ "obtained from the digital photo Pu preceding the digital photo P to be corrected in this series on one side of the screen of the digital shooting device and the second intermediate image Im i + i "obtained from the digital photograph P; + i according to the digital photo P; to be corrected in this series on the opposite side of the digital camera screen.
  • FIG. 2 illustrates the steps of a method of shooting a panoramic digital photograph in three dimensions according to the present invention.
  • this method of shooting a three-dimensional digital photograph uses the method of assisting the shooting described above, but applied to two different digital devices DISP A and DISP B , separated by a distance d predefined and both associated respectively with a wide angle lens OBJ A and OBJ B.
  • This method comprises, on the one hand, a step 110 of obtaining a first panoramic digital photograph P A from the assembly of a first series of N digital photos ⁇ ⁇ , ⁇ to P A , N (where N> 2), this first panoramic digital photo P A being obtained by means of a wide-angle lens OBJ A associated with a first digital device DISP A , by implementing the steps of the method of obtaining a panoramic photo described above.
  • the first panoramic digital photo P A is obtained by assembling N digital photos ⁇ ⁇ , ⁇ to P A. , N j or:
  • This method comprises, on the other hand, a step 120 of obtaining a second panoramic digital photograph P B from the assembly of a second series of N digital photos ⁇ ⁇ , ⁇ to P B , N (always where N> 2), this second panoramic digital photo P B being obtained, by means of a wide-angle lens OBJ B associated with a second digital device DISP B , by implementing the steps of the method of obtaining a panoramic photo described above.
  • the second panoramic digital picture P B is obtained by assembling N digital pictures P B , i to P BN , where:
  • the distance d between the two devices DISP A and DISP B is predefined so that the combination of the panoramic photos can give rise to a stereoscopic effect resulting in a three-dimensional photo.
  • These two steps 110 and 120 are advantageously performed simultaneously, the first photo ⁇ ⁇ , ⁇ of the first series being taken simultaneously with the first photo P B , i of the second series, and so on, in order to optimize as much as possible. 3D effect obtained between the two series of digital photos.
  • the process then continues with a step 130 of associating the first panoramic digital photograph P A with the second panoramic digital photograph P B in order to obtain a digital photograph in three P3D dimensions.
  • Such an association step 130 can be performed remotely, on a remote processing unit.
  • the three-dimensional digital picture P3D corresponds to an anaglyph image constituted from the superposition of two homologous images IH R and IH B v respectively extracted from the two panoramic digital photos P A and
  • the association step 130 then comprises a first step of extracting, from one of the two panoramic digital photos P A and P B , a first color component in order to obtain a first homologous image IH R including only this first color component of this digital photo.
  • this color component may be red, in which case the first homologous image IH R consists solely of pixels belonging to this red component.
  • the association step 130 further comprises a second step of extracting, from the other of the two panoramic digital photos P A and P B , a second color component different from the first color component in order to obtain a second homologous image IH BV comprising only this second color component of this other digital photo.
  • this color component may correspond to the blue and green colors, in which case the second homologous image IH BV consists solely of pixels belonging to these green and blue components.
  • the two homologous images IH R and IH BV are then recombined, for example by superposition, in order to obtain an anaglyph image in which the three components are present, the first component of a point being, however, shifted by the second component of this same point because of the distance between the two cameras used to capture the two panoramic digital photos P A and P B.
  • This anaglyph image then corresponds to the three-dimensional P3D digital photo.
  • the shift between the red component, on the one hand, and the green and blue components, on the other hand, of the same point can also be designated under the terms parallax or disparity and generates a depth effect proportional to the distance between these respective components.
  • the relief is then obtained by placing a filter of one of these two complementary colors on one eye and a filter of the other color on the other eye.
  • each eye only perceives the elements of the image visible through the filter of the same color (if the background of the image is black) or the complementary color (if the background of the image is white), which allows you to recreate a relief effect using the stereoscopic capabilities of the brain.
  • FIG. 3A illustrates the various intermediate images obtained from an initial digital photograph P; during the application of the steps of the method of assisting shooting according to an embodiment of the present invention.
  • the digital picture P taken with a wide-angle lens associated with or integrated with the digital device for shooting.
  • This digital photo P is here illustrated as having a substantially spherical shape and having a vertical axis.
  • a straight line distorted by the wide-angle shooting mode is shown on the left side of this digital picture P; while three parallel straight lines distorted by the wide-angle shooting mode are shown on the right-hand side. from this digital photo P ;.
  • a first intermediate image Im is obtained by applying a mathematical projection function to the digital photo P ;.
  • a mathematical projection function is applied, which results in an intermediate image Im ; of equirectangular type in which all the equidistant points of the center of the digital photo P; spherical type are found on the same vertical line.
  • This first intermediate image Im is then used to obtain a second intermediate image Im; ", by applying the inverse mathematical function to a part of this first intermediate image Im ; during a reverse transformation step 15.
  • the part of the first intermediate image Im ; used during the reverse transformation step 15 is the right part of the first intermediate image Im ; which corresponds to the part of the digital picture P; located to the right of the axis of this one.
  • this part of the first intermediate image ini is then shifted, during a shift step 14, to the left, which corresponds to creating a third intermediate image Im; "in which the part at the left end corresponds to the right part of the first intermediate image Im ; then complemented by black pixels.
  • this third intermediate image Im "obtained, the inverse function at the equidistant cylindrical projection may be applied to the third intermediate image Im;", which results in a second intermediate image Im; ' of spherical shape in which the portion to the left of the axis corresponds to the right portion of the first intermediate image Im ; and therefore to the part located to the right of the axis on the digital photo P;
  • This second intermediate image Im; ' can then be displayed on the screen of the digital device to facilitate shooting of the digital photo P; + i following, by superposition of the image displayed during this shooting with this second intermediate image Im; '.
  • Figure 3A is illustrated a case where the right half of the first intermediate image Im ; is used, after shifting to the left, to obtain the second intermediate image Im; ' used for the next shot.
  • FIG. 3B illustrates the various intermediate images obtained from an initial digital photograph P; during the application of the steps of the method according to another embodiment of the present invention.
  • the second intermediate image Im; ' then comprises a portion corresponding to the inverse projection of this band, shifted to the left in a third intermediate image Im 1 ", and supplemented by black pixels.
  • the portion undergoing projection and projection inversion is narrower in width than in the case of Figure 3A, the second intermediate image Im; may nevertheless be sufficient for the user to correctly overlay the viewed image of the digital photo P; + i next on the screen of his digital device.
  • this vertical band may advantageously correspond to a cutoff band between two successive digital photos.
  • the panoramic image that one wishes to obtain is a panoramic image of 360 °, that is to say covering entirely the horizon of the user, as well as the zenith and the nadir, as if he was spinning around himself.
  • panoramic images are particularly sought after, for example in the field of photography by agents Real estate, because they allow the visualization of the whole of a room of an apartment by means of a single photo.
  • the number N of digital photos depends on the angle of view of the wide-angle lens used to take the digital photos. The larger this angle, the smaller the number N of digital photos needed to cover a 360 ° field.
  • the 360 ° panoramic image is obtained from the assembly of only two digital photos Pi and P 2 taken by means of a present wide-angle lens. a shooting angle strictly higher 180 °.
  • the 360 ° panoramic image is obtained from three successive digital photos Pi, P 2 and P 3 taken by means of a wide-angle lens having a strictly greater angle of view. °.
  • the 360 ° panoramic image is obtained from four successive digital photos Pi, P 2 , P 3 and P 4 taken by means of a wide angle lens has a shooting angle. strictly superior 90 °.
  • This latter embodiment is advantageous in that it is particularly intuitive.
  • the user can easily obtain a 360 ° panoramic photo from only four photos taken substantially in four directions oriented at 90 ° relative to each other, such as positions according to the cardinal points, turning successively in different directions.
  • right angle positions which is easy in places having a square or rectangular shape as is usually the case for rooms located inside buildings.
  • Figure 4 schematically discloses a digital device DISP adapted to facilitate the shooting of a new digital photograph from an initial digital photograph according to the present invention.
  • this digital device DISP comprises a CAPT photographic sensor which is able to be associated with a wide-angle OBJ objective in order to capture digital photos at a wide angle.
  • a photographic sensor thus captures the initial digital photograph P; discussed above, which will be used during the method according to the present invention to facilitate the shooting of a new digital photo Pj + i.
  • This digital device DISP further comprises an SCN screen adapted to display an Im image displayed by the digital sensor.
  • This screen SCN can be an LCD type screen, for example.
  • This digital device DISP also comprises a processing unit PROC, which may take the form of a processor or a microprocessor, arranged to implement the steps of the method of assisting shooting described above.
  • a processing unit PROC which may take the form of a processor or a microprocessor, arranged to implement the steps of the method of assisting shooting described above.
  • this processing unit PROC is arranged to, firstly, obtain a first intermediate image Im ; from an initial digital photograph P;, captured by the photographic sensor when associated with a wide-angle lens OBJ, by means of a digital projection function, which may advantageously be the equidistant cylindrical projection function previously discussed. .
  • This processing unit PROC is arranged, moreover, to obtain a second intermediate image Im; ' from the first intermediate image Im ; by applying the inverse mathematical function to the projection function on a part of the first intermediate image.
  • the screen SCN is then arranged, in addition, to display the second intermediate image Im; ' obtained by the processing unit PROC simultaneously with the Im image displayed by the digital sensor, in order to facilitate the capture of the new digital photograph.
  • the processing is further arranged to assemble said digital photos to obtain this panoramic image.
  • the digital device DISP does not itself include the wide-angle lens OBJ for taking wide-angle digital photos. This may be the case for example if the digital device DISP is a mobile phone without a goal.
  • the objective lens OBJ may be temporarily associated with the device Digital DISP, for example by screwing the objective on a thread of the digital device aligned with the CAPT sensor or by using magnetic means such as a magnet to attach the lens to the digital device.
  • the digital device DISP comprises a wide angle objective OBJ physically associated with the digital sensor, that is to say permanently.
  • this digital device DISP can then be a digital camera.
  • the present invention furthermore aims at a computer program comprising code instructions for implementing the method of assisting the shooting above and / or the method of obtaining a panoramic image above.
  • this program is executed by the processing unit of a digital device capable of being associated with a wide-angle lens, for example the processing unit of the digital device DISP when it is temporarily associated with, or even includes, it -even, a wide-angle objective OBJ.
  • Such programs can use any programming language, and be in the form of source code, object code, or intermediate code between source code and object code, such as in a partially compiled form, or in n ' any other desirable form.
  • the present invention also provides a data carrier readable by a data processor, and including code instructions of one of the programs mentioned above.
  • This information carrier can be any entity or device capable of storing the program.
  • the medium may comprise storage means, such as a ROM, for example a CD-ROM or a microelectronic circuit ROM, or a magnetic recording means, for example a diskette or a hard disk.
  • This information carrier may also include FLASH type memory, for storing the program and recording information received by a client module, and RAM type memory for the backup of temporary data such as server lists and themes. associates.
  • this information medium may be a transmissible medium such as an electrical or optical signal, which may be conveyed via an electrical or optical cable, by radio or by other means.
  • the programs according to the invention may in particular be downloaded on an Internet-type network.
  • the present invention is advantageously an application for indoor photo shooting, for example for use by real estate agents wishing to upload such photos to attract potential customers.
  • the present invention can also serve as a perfect complement to a 3D mapping system similar to those currently proposed by Google, MAppy and other companies.
  • the present invention may also advantageously find an application, in a non-exhaustive manner, in the field of tourism (guides, stays, hotels, restaurants, ...), insurance, expertise in real estate diagnosis, or any other activity requiring taking pictures to maintain a situation or precise configuration of a place at a time t.

Abstract

L'invention concerne un procédé d'aide à la prise de vue d'une nouvelle photo numérique (Pi+1) à partir d'une photo numérique initiale (Ρi) obtenue au moyen d'un objectif grand angle (OBJ) associé au capteur numérique (CAPT) d'un dispositif numérique (DISP), comprenant la transformation (13), dans le dispositif numérique, de la photo numérique initiale (Ρi) en une première image intermédiaire (Im;) au moyen d'une fonction mathématique de projection, la transformation (15), dans le dispositif numérique, de la première image intermédiaire (Im;) en une deuxième image intermédiaire (Imi') par application de la fonction mathématique inverse de la fonction mathématique de projection sur au moins une partie de la première image intermédiaire (Im;) et l'affichage (17) simultané, sur un écran du dispositif numérique, de la deuxième image intermédiaire (Imi') et d'une image (Im) visualisée par le capteur numérique afin de faciliter la prise de vue de la nouvelle photo numérique (Ρi+1).

Description

Procédé et dispositif d'aide à la prise de vue d'une photo numérique
au moyen d'un objectif grand angle
L'invention concerne le domaine de la photographie numérique, en particulier celui de la photographie numérique avec des objectifs grands angles.
Il existe maintenant de nombreux dispositifs numériques munis ou pouvant être associés à des objectifs grands angles, afin de combiner les avantages de la photographie numérique avec la qualité d'image apportée par de tels objectifs.
Pour certaines applications photographiques, il est souhaitable d'utiliser de tels dispositifs pour obtenir des images panoramiques offrant une plus grande largeur qu'une simple photo numérique.
Afin d'obtenir de telles images panoramiques, une solution consiste à assembler ensemble plusieurs photos numériques, à l'image de ce qui existe aussi dans le domaine des appareils photo numériques à faible angle.
La difficulté réside alors au niveau de l'assemblage des différentes photos numériques obtenues, dans la mesure où il faut essayer d'obtenir des transitions parfaites entre ces photos pour obtenir une image panoramique de bonne qualité.
Afin d'obtenir un assemblage de qualité à partir des photos numériques, il est possible d'effectuer un certain nombre d'opérations consistant en des projections d'image et des traitements algorithmiques à partir de photos numériques prises grossièrement l'une à côté de l'autre.
Ces différentes opérations nécessitant des ressources de calcul importantes, les solutions mettant en œuvre ce principe nécessitent donc le transfert des photos numériques prises vers un ordinateur distant muni de logiciels aptes à effectuer ces opérations, comme par exemple un logiciel de positionnement par point clef (par exemple de type « auto pano sift c »), un logiciel de traitement (par exemple de type « hugin ») ou un logiciel de fusion (par exemple de type « enblend »). Cet ordinateur pourra ainsi effectuer ces opérations de traitement pour obtenir l'image panoramique avant de la renvoyer à l'utilisateur.
De telles solutions ne sont pas optimales en termes de temps de calcul nécessaire, ne permettent pas d'offrir un processus en temps réel et nécessite l'accès à un ordinateur tiers ce qui peut entraîner des problèmes en termes de confidentialité des données.
Une autre solution peut consister à essayer d'optimiser les photos numériques dès leur prise en vue, au moyen d'un trépied adapté à une telle opération, afin d'optimiser en amont l'assemblage de ces photos entre elles et d'obtenir ainsi une image panoramique de bonne qualité.
Ce type de solution nécessite cependant l'achat d'un matériel coûteux et se trouve réservé à l'usage de photographes professionnels capables de manipuler un tel matériel.
Il n'existe donc à l'heure actuelle aucune solution permettant de réaliser des images panoramiques à partir d'appareils munis d'un objectif grand angle, qui soit à la fois accessible à des utilisateurs novices et ne nécessite pas d'accéder à un ordinateur tiers.
La présente invention a pour objet de remédier aux inconvénients précités des solutions existantes et de proposer une méthode pour réaliser des images panoramiques à partir d'appareils munis d'un objectif grand angle, qui soit à la fois accessible à des utilisateurs notices et ne nécessite pas d'accéder à une unité de traitement distante.
La présente invention propose à cet effet un procédé d'aide à la prise de vue d'une photo numérique à partir d'une photo numérique initiale obtenue au moyen d'un objectif grand angle associé à un dispositif numérique de prise de vue, le procédé comprenant l'obtention d'une première image intermédiaire à partir de la photo numérique initiale au moyen d'une fonction mathématique de projection, l'obtention d'une deuxième image intermédiaire à partir de la première image intermédiaire, par application de la fonction mathématique inverse de la fonction mathématique de projection sur au moins une partie de la première image intermédiaire et l'affichage simultané, sur un écran du dispositif numérique, de la deuxième image intermédiaire et d'une image visualisée par le dispositif numérique de prise de vue afin de faciliter la prise de vue de la photo numérique.
Selon un mode de réalisation, la photo numérique initiale a une forme sensiblement sphérique et la fonction mathématique de projection est une fonction de projection cylindrique équidistante transformant la photo numérique initiale en une première image intermédiaire de forme rectangulaire.
La présente invention propose également un procédé d'obtention d'une photo panoramique à partir de l'assemblage d'une série de photos numériques obtenues au moyen d'un objectif à grand angle associé à un dispositif numérique, chacune des photos numériques de la série, à l'exception de la première photo numérique de cette série, étant obtenue en utilisant le procédé d'aide à la prise de vue ci-avant appliqué à la photo numérique précédente dans cette série.
Dans un mode de réalisation, la photo panoramique couvre un angle de vue d'au moins 360° et le nombre de photos numériques de la série est fonction de l'angle de prise de vue de l'objectif à grand angle associé au dispositif numérique, afin de minimiser au mieux le nombre de prises de vues nécessaires pour obtenir une telle photo complètement panoramique (i.e. couvrant 360°) en fonction du type d'objectif employé.
Dans un mode de réalisation particulièrement avantageux, la photo panoramique est obtenue à partir de l'assemblage d'une série de deux photos numériques et l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur 180°, ce qui permet de prendre une photo complètement panoramique avec un minimum de prises de vue.
Dans un autre mode de réalisation, l'image panoramique est obtenue à partir de l'assemblage d'une série de trois photos numériques et l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur à 120°.
Dans un autre mode de réalisation avantageux, l'image panoramique est obtenue à partir de l'assemblage d'une série de quatre photos numériques et l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur à 90°, ce qui permet l'obtention d'une photo complètement panoramique au moyen de prises de vue intuitives.
Dans un mode de réalisation avantageux, une deuxième image intermédiaire supplémentaire est affichée conjointement avec la deuxième image intermédiaire (obtenue à partir de l'avant- dernière photo numérique de la série de photos numériques, cette deuxième image intermédiaire supplémentaire étant obtenue par application de la fonction mathématique inverse de la fonction mathématique de projection sur une partie d'une première image intermédiaire supplémentaire obtenue au moyen d'une fonction mathématique de projection appliquée à la première photo numérique de la série de photos numériques. Ceci permet d'optimiser au mieux la prise de vue de la dernière photo numérique d'une série de photos numériques, afin d'en obtenir une photo complètement panoramique avec un raccordement ajusté entre la dernière et la première photo de la série.
Dans un autre mode de réalisation avantageux, le procédé comprend, après l'obtention d'une série comprenant au moins trois photos numériques successivement prises au moyen du procédé d'aide à la prise de vue ci-avant, une étape supplémentaire d'affichage simultané de la deuxième image intermédiaire obtenue à partir de la photo numérique précédant une photo numérique à corriger dans ladite série d'un côté de l'écran du dispositif numérique et de la deuxième image intermédiaire obtenue à partir de la photo numérique suivant la photo numérique à corriger dans ladite série du côté opposé de l'écran du dispositif numérique, afin de faciliter la prise de vue d'une nouvelle photo numérique destinée à remplacer la photo numérique à corriger.
La présente invention propose en outre un procédé d'obtention d'une photo numérique panoramique en trois dimensions, comprenant l'obtention d'une première photo numérique panoramique à partir de l'assemblage d'une première série de photos numériques obtenues au moyen d'un objectif à grand angle associé à un premier dispositif numérique en mettant en œuvre les étapes du procédé d'obtention d'une photo panoramique ci-avant, l'obtention d'une deuxième photo numérique panoramique à partir de l'assemblage d'une deuxième série de photos numériques obtenues au moyen d'un objectif à grand angle associé à un deuxième dispositif numérique, disposé à une distance prédéfinie du premier dispositif numérique, en mettant en œuvre les étapes du procédé d'obtention d'une photo panoramique ci-avant, et l'association de la première photo numérique panoramique et de la deuxième photo numérique panoramique afin d'obtenir la photo numérique panoramique en trois dimensions.
Selon un mode de réalisation avantageux dans lequel la photo numérique en trois dimensions correspond à une image anaglyphe, l'étape d'association comprend l'obtention d'une première image homologue au moyen de l'extraction d'une première composante de couleur d'une des deux photos numériques panoramiques, l'obtention d'une deuxième image homologue au moyen de l'extraction d'une deuxième composante de couleur, différente de la première composante, de l'autre des deux photos numériques panoramiques et la superposition des deux images homologues afin d'obtenir l'image anaglyphe correspondant à la photo numérique en trois dimensions.
La présente invention propose par ailleurs un programme d'ordinateur comportant des instructions de code pour la mise en œuvre d'un des procédés ci-avant, lorsque ce programme est exécuté par l'unité de traitement d'un dispositif numérique apte à être associé à un objectif grand angle. Un tel programme doit être considéré comme un produit dans le cadre de la protection qui est recherchée par la présente demande de brevet.
La présente invention propose également un dispositif numérique apte à faciliter la prise de vue d'une nouvelle photo numérique à partir d'une photo numérique initiale, le dispositif numérique comprenant un capteur photographique apte à être associé avec un objectif à grand angle afin de capturer la photo numérique initiale et la nouvelle photo numérique, un écran apte à afficher une image visualisée par le capteur numérique et une unité de traitement arrangée pour obtenir une première image intermédiaire à partir d'une photo numérique initiale capturée par le capteur photographique associé avec un objectif grand angle au moyen d'une fonction numérique de projection et pour obtenir une deuxième image intermédiaire à partir de la première image intermédiaire en appliquant la fonction mathématique inverse à la fonction de projection sur au moins une partie de la première image intermédiaire, l'écran étant arrangé en outre pour afficher la deuxième image intermédiaire simultanément avec l'image visualisée par le capteur numérique afin de faciliter la capture de la nouvelle photo numérique.
Dans un mode de réalisation avantageux, l'unité de traitement est arrangée en outre pour assembler lesdites photos numériques afin d'obtenir une image panoramique.
Selon un mode de réalisation, le dispositif comprend un objectif grand angle associé physiquement avec le capteur numérique.
D'autres caractéristiques et avantages de l'invention apparaîtront à l'examen de la description détaillée ci-après, et des dessins annexés sur lesquels :
- la figure 1 illustre les étapes d'un procédé d'aide à la prise de vue d'une nouvelle photo numérique à partir d'une photo numérique initiale, au moyen d'un objectif grand angle associé à un dispositif numérique de prise de vue, selon la présente invention, ainsi qu'un procédé d'obtention d'une photo numérique utilisant un tel procédé d'aide à la prise de vue ;
- la figure 2 illustre les étapes d'un procédé de prise de vue d'une photo numérique panoramique en trois dimensions selon la présente invention ; - la figure 3A illustre les différentes images intermédiaires obtenues à partir d'une photo numérique initiale P; lors de l'application des étapes du procédé d'aide à la prise de vue selon un mode de réalisation de la présente invention ;
- la figure 3B illustre les différentes images intermédiaires obtenues à partir d'une photo numérique initiale P; lors de l'application des étapes du procédé d'aide à la prise de vue selon un autre mode de réalisation de la présente invention ;
- la figure 3C illustre les différentes images intermédiaires obtenues à partir d'une photo numérique initiale P; lors de l'application des étapes du procédé d'aide à la prise de vue lorsqu'un objectif grand angle dont l'angle de prise de vue a = 180° + β est employé ; et
- la figure 4 décrit schématiquement un dispositif numérique apte à faciliter la prise de vue d'une nouvelle photo numérique à partir d'une photo numérique initiale selon la présente invention.
On se réfère tout d'abord à la figure 1 sur laquelle sont illustrées les étapes d'un procédé d'aide à la prise de vue d'une nouvelle photo numérique à partir d'une photo numérique initiale, au moyen d'un objectif grand angle associé à un dispositif numérique de prise de vue, selon la présente invention.
On entend ici par « objectif grand angle » un objectif présentant une courte focale afin de permettre un cadrage large d'objets rapprochés dont on ne peut pas s'éloigner, ce qui permet de photographier un paysage dans son ensemble sous la forme d'un panorama ou une pièce à l'intérieur d'un bâtiment. En ce sens, un objectif grand angle peut être interprété comme étant un objectif présentant un angle de vision plus large que la perception naturelle de l'œil humain.
En particulier, pour un capteur numérique correspondant à un format d'image 24x36 mm, un objectif de focale inférieure à 35 mm sera considéré comme étant un objectif grand angle. Plus cette focale diminue, et plus l'objectif répond à cette définition d'objectif grand angle.
Le procédé d'aide à la prise de vue comprend une première étape 11 de capture d'une photo numérique initiale P; au moyen de l'objectif grand angle associé, ou même intégré, au dispositif numérique de prise de vue.
Une fois la photo numérique P; capturée, le procédé comprend une étape 13 d'obtention d'une première image intermédiaire Im; à partir de cette photo numérique initiale P; au moyen d'une fonction mathématique de projection.
En effet, dans la mesure où la photo numérique P; est obtenue au moyen d'un objectif grand angle déformant le contenu de l'image capturée, ces bords ne sont pas utilisables en l'état pour aider à la capture de la photo numérique suivante P;+i par superposition, comme cela peut être le cas d'une photo numérique non déformée.
Ici, pour obtenir la première image intermédiaire Im;, on utilise une fonction mathématique de projection, laquelle permet ainsi de corriger la déformation induite sur l'ensemble de la photo numérique P; par l'utilisation d'un objectif grand angle. Une telle fonction mathématique de projection est une fonction mathématique prenant en entrée des données pouvant typiquement correspondre aux coordonnées d'un pixel dans la photo numérique P capturée, et fournissant en sortie des données pouvant typiquement correspondre aux coordonnées d'un pixel dans une image de sortie où la déformation induite sur l'ensemble de la photo numérique P est corrigée.
Ainsi, dans un mode de réalisation avantageux où la photo numérique P; présente une forme sensiblement sphérique, ce qui est le cas par exemple quand un objectif de type fisheye est employé, cette fonction mathématique de projection est une fonction de projection cylindrique équidistante qui transforme la photo numérique P; en une première image intermédiaire Im; de forme rectangulaire.
La projection cylindrique équidistante, autrement appelée projection équirectangulaire ou projection géographique, est habituellement utilisée en cartographie et consiste à considérer les coordonnées polaires de latitude et longitude d'une sphère comme des coordonnées cartésiennes sur un plan de projection.
D'un point de vue mathématique, cela signifie qu'un pixel de coordonnées angulaires (θ,φ) dans la photo numérique P; devient un pixel de coordonnées cartésiennes (x,y) dans la première image intermédiaire Im;, avec χ=(θ- θο) et y=cp. On obtient alors une première image intermédiaire de type équirectangulaire Im; à partir d'une photo numérique P; de forme sensiblement sphérique.
Cette transformation peut être réalisée par exemple au moyen des étapes de calcul suivantes :
1) Calculer la variable r = ^(x2 + y2 ;
2) Calculer la variable Θ s =—— si Θ≠ 0
3) Calculer la variable s de telle sorte que
s = - si Q = 0
d
4) Calculer les variables v[0] = cos(9) et v[l] = s*x ;
5) Calculer les coordonnées x'= <i * a tan2 (v[0], v[l]) et y' = d * a tan
Figure imgf000008_0001
Une fois la première image intermédiaire Im; construite, une deuxième image intermédiaire Ιη¾' peut alors être obtenue à partir de la première image intermédiaire Im;, lors d'une deuxième étape 15 de transformation, par application, sur au moins une partie de la première image intermédiaire Imi; de la fonction mathématique inverse de la fonction mathématique de projection utilisée pour obtenir la première image intermédiaire Im;.
Dans la mesure où cette deuxième image intermédiaire Im;' est obtenue au moyen d'une fonction mathématique inverse à celle utilisée pour obtenir la première image intermédiaire Im; à partir de la photo numérique P;, la deuxième image intermédiaire Im;' présentera une forme sphérique similaire à la photo numérique P;, et pourra donc être utilisée en superposition avec une image affichée sur le dispositif de prise de vue pour faciliter la capture de la photo numérique P;+i suivante par l'utilisateur du dispositif numérique.
Ainsi, pour reprendre le mode de réalisation avantageux où une fonction mathématique de projection cylindrique équidistante a été utilisée pour obtenir une première image intermédiaire Im;, cette fonction mathématique inverse consiste à transformer la première image intermédiaire de type équirectangulaire Im; en une deuxième image intermédiaire Im;' de type sphérique.
Cette transformation peut être réalisée par exemple au moyen des étapes de calcul suivantes :
1) Calculer la variable φ
2) Calculer la variable Θ
3) Si θ<0, les valeurs suiva
4) Si θ>π, les valeurs suiva
Figure imgf000009_0001
5) Calculer la variable s = sin (Θ) ;
6) Calculer les variables v[0] = s*sin((p), v[l] = cos(9) et
7) Allouer d * a tan2 (r, s * cos((p))→ Θ ;
Θ * v[0] Θ * v[l]
8) Calculer les coordonnées x'= et y'=
Lors de cette deuxième transformation, la fonction mathématique inverse est appliquée sur au moins une partie de la première image intermédiaire Im. Par le terme « au moins une partie », on entend ici aussi bien une partie de la première image intermédiaire Im (par exemple un segment vertical situé sur un des bords de cette image) que la première image intermédiaire Im dans son ensemble, la partie utilisée pouvant tout à fait être une partie vide d'informations visuelles (c'est-à- dire constituée des pixels noirs). Une fois la deuxième image intermédiaire Im;', celle-ci présente une forme sensiblement similaire à la photo numérique initiale P; et peut donc être utilisée en superposition avec une image affichée sur le dispositif de prise de vue pour faciliter la capture d'une nouvelle photo numérique P;+i par l'utilisateur du dispositif numérique de prise de vue.
Pour ce faire, cette deuxième image intermédiaire Im;' est alors affichée (étape 17 d'affichage) sur l'écran du dispositif numérique de prise de vue, simultanément avec une image Im visualisée par le dispositif de prise de vue, afin de servir à la capture d'une nouvelle photo numérique P;+i.
En particulier, lors de cette affichage simultané de la deuxième image intermédiaire Im;' et de l'image Im visualisée par le dispositif de prise de vue, ces images peuvent être affichées à côté l'une de l'autre, voire avantageusement de manière superposée (par exemple le bord droit de la deuxième image intermédiaire Im;' étant superposé avec le bord gauche de l'image Im visualisée par le dispositif de prise de vue, ou inversement) afin de guider l'utilisateur dans sa prise de vue.
L'utilisateur du dispositif de prise de vue peut alors déplacer le dispositif de prise de vue afin de superposer la deuxième image intermédiaire Im;' avec l'image Im afin de capturer une nouvelle photo numérique P;+i qui soit sensiblement alignée avec la photo numérique initiale P;. Ceci facilite la capture de photos numérique correctement alignées entre elles au moyen d'un objectif grand angle, et donc améliore leur alignement en amont de la prise de vue, sans avoir nécessairement besoin de recourir à des traitements numériques complexes après cette prise de vue.
La figure 1 décrit en outre les étapes d'un procédé d'obtention d'une photo panoramique à partir de l'assemblage d'une série de photos numériques {Pi} i<i<N, obtenues au moyen d'un objectif à grand angle associé à un dispositif numérique de prise de vue.
Ce procédé d'obtention d'une photo panoramique P est remarquable en ce que, pour chacune des photos numériques P; de la série de photos numériques {Pi} i<i<N, à l'exception de la première photo numérique Pi de la série, la photo numérique P; est obtenue en utilisant le procédé d'aide à la prise de vue ci-avant appliqué à la photo numérique précédente P;_i dans cette série.
Ceci se traduit, sur la figure 1 , en ce que les étapes 11 à 17 du procédé d'aide à la prise de vue sont répétées pour les N-l photos numériques successives Pi à PN_i de la série de photos {Pi} i<i<N , ce qui est représenté par un boucle d'itération 21 consistant à incrémenter l'indice i de 1 à N sur la figure 1.
En d'autres termes, chacune des photos numériques P; (pour i allant de 2 à N) est capturée à l'aide d'une deuxième image numérique intermédiaire Ιπ¾_ι', elle-même obtenue à l'aide d'une première image numérique intermédiaire Ιπ¾_ι, obtenue elle-même à partir de la photo numérique précédente Pu.
Dans ce procédé d'obtention d'une photo panoramique P, une fois la dernière photo numérique PN de la série capturée lors d'une dernière étape 1 1 de capture, l'ensemble des photos numériques Pi à PN nécessaire à l'obtention de la photo panoramique P ont été prises et le procédé se poursuit alors par une étape 23 d'assemblage des N photos numériques Pi;, .. .,P; ,.. .,PN afin d'obtenir la photo panoramique P.
Une telle étape 23 d'assemblage peut consister à additionner les photos numériques les unes avec les autres, dans le sens correspondant à l'ordre de prise de vue, en retirant éventuellement la partie commune de deux photos successives P; et Pi+i se trouvant à la jonction de ces deux photos.
L'assemblage final correspond à l'assemblage des images equirectangulaire obtenus entre chaque prise de vue. Pour ne pas avoir de coupure ou de différences de luminosité entre ces images, il est préférable de fusionner les parties communes des images successives P;, P;+i en utilisant un filtre bas niveau type pyramide Laplacienne, comme expliqué sur le lien : http://www.cs.utah.edu/~arul/report/nodel2.html.
L'image panoramique P est donc obtenue ici par assemblage d'une pluralité de N photos numériques Ρι, . , .,Ρ;,..., PN prises successivement au moyen d'un dispositif numérique de prise de vue utilisant un objectif grand angle, où N est un entier au moins supérieur ou égal à deux.
Dans un mode de réalisation avantageux, un assemblage progressif des photos numériques prises successivement peut aussi être effectué à chaque prise de vue (i.e. par exemple après chaque étape 1 1 de capture), afin d'obtenir une photo panoramique intermédiaire P'; correspondant à l'assemblage des photos numériques Pi à P;.
Une série de photo panoramique intermédiaire ΡΊ,, . , .,Ρ'; P'N correspondant chacune à l'assemblage de la dernière photo numérique P; capturée avec la photo panoramique intermédiaire précédente P'; _i peut alors être affichée à l'attention de l'utilisateur afin qu'il puisse visualiser la progression de sa prise de vue de la photo panoramique et éventuellement arrêter de suite le processus si jamais il considère que les photos numériques ne sont pas suffisamment bien prises pour permettre l'obtention d'une photo panoramique de qualité suffisamment correcte, ou s'il se contente des photos Pi à P; déjà prises pour créer une photo panoramique avec un angle de couverture inférieur à 360°.
Dans un mode de réalisation avantageux où une photo panoramique P à 360° est construite à partir de N photos Pi à PN prises successivement selon le procédé décrit ci-avant, une deuxième image intermédiaire supplémentaire Imi" est affichée conjointement avec la deuxième image intermédiaire ImN_i' obtenue à partir de l'avant- dernière photo numérique PN-i de la série de photos numériques.
Cette deuxième image intermédiaire supplémentaire Imi" est obtenue par application de la fonction mathématique inverse de la fonction mathématique de projection sur une partie d'une première image intermédiaire supplémentaire obtenue au moyen d'une fonction mathématique de projection appliquée à la première photo numérique Pi de la série de photos numériques ou à toute autre photo numérique P; déjà réalisée, couvrant l'espace de prise de vue en cours Ainsi, lors de l'étape 17 d'affichage suivant la capture de l'avant- dernière photo numérique PN-I, sont affichées sur l'écran du dispositif de prise de vue :
- une image Im visualisée par le dispositif de prise de vue et servant à la capture de la dernière photo numérique PN ;
- d'un côté de cette image Im, la deuxième image intermédiaire ImN_i' construite à partir de l'avant- dernière photo capturée PN-i ; et
- de l'autre côté de cette image Im, une deuxième image intermédiaire supplémentaire Imi" construite à partir de la première photo capturée Pi.
Dans ce mode de réalisation avantageux, l'utilisateur se sert alors aussi bien de P avant- dernière photo prise que de la première photo prise pour capturer la dernière photo, ce qui permet de s'assurer l'alignement de la dernière photo prise avec la première photo prise au moyen du procédé ci-avant, et donc que la photo panoramique P à 360° est parfaitement alignée au niveau de la jointure entre la première et la dernière photo.
Dans un autre mode de réalisation avantageux, une fois qu'une série d'au moins trois photos Pj_i, P;, P;+i ont été successivement obtenues au moyen du procédé d'aide à la prise de vue décrit ci-avant, l'utilisateur peut se rendre compte en voyant la photo panoramique P résultante que la photo P; a été mal prise et se trouve mal alignée avec les photos Pu et Pi+i prises directement avant et après cette photo P; à corriger.
Dans ce cas, le procédé comprend une étape supplémentaire d'affichage simultané, outre de l'image Im visualisée par le dispositif numérique de prise de, de la deuxième image intermédiaire Ιη¾_ι " obtenue à partir de la photo numérique Pu précédant la photo numérique P; à corriger dans cette série d'un côté de l'écran du dispositif numérique de prise de vue et de la deuxième image intermédiaire Imi+i " obtenue à partir de la photo numérique P;+i suivant la photo numérique P; à corriger dans cette série du côté opposé de l'écran du dispositif numérique de prise de vue.
Ceci permet de faciliter la prise de vue d'une nouvelle photo numérique P;' destinée à remplacer la photo numérique à corriger P;, en permettant à l'utilisateur d'aligner l'image Im visualisée aussi bien sur la photo précédente Pu, grâce à l'image intermédiaire Ιη¾_ι" affichée d'un côté de l'écran du dispositif, que sur la photo suivante P;+i, grâce à l'image intermédiaire Imi+i " affichée du côté opposé de cet écran.
Une fois cette nouvelle photo numérique P;' prise à l'aide des deux images intermédiaires Im;_i " et Imi+i ", il est alors possible de remplacer la photo numérique P; à corriger par cette nouvelle photo numérique P;' afin de corriger la photo numérique panoramique résultante qui correspond alors à l'assemblage des photos Pi, .. ., Pu, P;', Pi+i, .. ., PN.
Dans ce mode de réalisation, il convient alors de mémoriser toutes les deuxièmes images intermédiaires Im;" successivement obtenues, afin de pouvoir les réafficher ultérieurement pour permettre la correction d'une photo en particulier. Une telle opération ne se limite bien sûr pas à la correction d'une seule photo P; dans la photo panoramique résultante P, mais peut être effectuée autant de fois que nécessaire sur différentes photos composant cette photo panoramique résultante afin d'améliorer progressivement l'alignement des photos P; entre elles et donc la qualité finale de la photo panoramique P.
On se réfère maintenant à la figure 2 sur laquelle sont illustrées les étapes d'un procédé de prise de vue d'une photo numérique panoramique en trois dimensions selon la présente invention.
En particulier, ce procédé de prise de vue d'une photo numérique en trois dimensions utilise le procédé d'aide à la prise de vue décrit précédemment, mais appliqué à deux dispositifs numériques distincts DISPA et DISPB, séparés d'une distance d prédéfinie et tous deux associés respectivement à un objectif grand angle OBJA et OBJB.
Ce procédé comprend, d'une part, une étape 110 d'obtention d'une première photo numérique panoramique PA à partir de l'assemblage d'une première série de N photos numériques ΡΑ,Ι à PA,N (où N>2), cette première photo numérique panoramique PA étant obtenue, au moyen d'un objectif à grand angle OBJA associé à un premier dispositif numérique DISPA, par la mise en œuvre des étapes du procédé d'obtention d'une photo panoramique décrites ci-avant.
En d'autres termes, la première photo numérique panoramique PA est obtenue par l'assemblage de N photos numériques ΡΑ,Ι à PA. ,Nj ou :
- la photo numérique ΡΑ,Ι est prise en premier ;
- les photos numériques suivantes PA,2 à PA,N sont prises successivement en mettant en œuvre les étapes l'obtention du procédé d'obtention d'une photo panoramique telles que décrites en relation avec la figure 1.
Ce procédé comprend, d'autre part, une étape 120 d'obtention d'une deuxième photo numérique panoramique PB à partir de l'assemblage d'une deuxième série de N photos numériques ΡΒ,Ι à PB,N (toujours où N>2), cette deuxième photo numérique panoramique PB étant obtenue, au moyen d'un objectif à grand angle OBJB associé à un deuxième dispositif numérique DISPB, par la mise en œuvre des étapes du procédé d'obtention d'une photo panoramique décrites ci-avant.
En d'autres termes, et similairement à ce qui est réalisée pour obtenir la première photo numérique panoramique, la deuxième photo numérique panoramique PB est obtenue par l'assemblage de N photos numériques PB, i à PB N, où :
- la photo numérique PB,i est prise en premier ;
- les photos numériques suivantes PB;2 à PB N sont prises successivement en mettant en œuvre les étapes l'obtention du procédé d'obtention d'une photo panoramique selon la présente invention, telles que décrites en relation avec la figure 1.
La distance d entre les deux dispositifs DISPA et DISPB est prédéfinie de sorte à ce que l'association des photos panoramiques puisse donner lieu à un effet stéréoscopique aboutissant à une photo en trois dimensions. Ces deux étapes 110 et 120 sont avantageusement réalisées simultanément, la première photo ΡΑ,Ι de la première série étant prise simultanément avec la première photo PB,i de la deuxième série, et ainsi de suite, afin d'optimiser au maximum l'effet 3D obtenu entre les deux séries de photos numériques.
Une fois les deux photos panoramiques PA et PB obtenues, le procédé se poursuit alors par une étape 130 d'association de la première photo numérique panoramique PA avec la deuxième photo numérique panoramique PB afin d'obtenir une photo numérique en trois dimensions P3D.
Une telle étape 130 d'association peut être réalisée à distance, sur une unité de traitement distante.
Dans un mode de réalisation particulier, la photo numérique en trois dimensions P3D correspond à une image anaglyphe constitué à partir de la superposition de deux images homologues IHR et IHBv extraites respectivement des deux photos numériques panoramiques PA et
L'étape 130 d'association comprend alors une première étape d'extraction, à partir de l'une des deux photos numériques panoramiques PA et PB, d'une première composante de couleur afin d'obtenir une première image homologue IHR ne comprenant que cette première composante de couleur de cette photo numérique. A titre d'exemple, cette composante de couleur peut être le rouge, auquel cas la première image homologue IHR est constituée uniquement de pixels appartenant à cette composante rouge.
L'étape 130 d'association comprend en outre une deuxième étape d'extraction, à partir de l'autre des deux photos numériques panoramiques PA et PB, d'une deuxième composante de couleur différente de la première composante de couleur afin d'obtenir une deuxième image homologue IHBV ne comprenant que cette deuxième composante de couleur de cette autre photo numérique. Pour reprendre l'exemple précédent, cette composante de couleur peut correspondre aux couleurs bleue et verte, auquel cas la deuxième image homologue IHBV est constituée uniquement de pixels appartenant à ces composantes verte et bleue.
Une fois extraites, les deux images homologues IHR et IHBV sont alors recombinées, par exemple par superposition, afin d'obtenir une image anaglyphe dans lequel les trois composantes sont présentes, la première composante d'un point étant cependant décalée par à la deuxième composante de ce même point du fait de la distance entre les deux dispositifs de prise de vue ayant servi à capturer les deux photos numériques panoramiques PA et PB. Cette image anaglyphe correspond alors à la photo numérique en trois dimensions P3D.
En effet, dans cette image anaglyphe, le décalage entre la composante rouge, d'une part, et les composantes verte et bleue, d'autre part, d'un même point peut également être désigné sous les termes de parallaxe ou de disparité et engendre un effet de profondeur proportionnel à la distance entre ces composantes respectives.
En particulier, si la composante rouge est décalée à droite de la composante bleue d'un même point dans l'image anaglyphe, ce point semblera plus éloigné dans la photo numérique en trois dimensions P3D tandis que, si la composante rouge est décalée à gauche de la composante bleue d'un même point dans l'image anaglyphe, ce point semblera plus proche dans la photo numérique en trois dimensions P3D.
Avec une telle image anaglyphe, la restitution du relief est alors obtenue en plaçant un filtre de l'une de ces deux couleurs complémentaires sur un œil et un filtre de l'autre couleur sur l'autre œil. Ainsi, chaque œil ne perçoit que les éléments de l'image visibles à travers le filtre de la même couleur (si le fond de l'image est noir) ou de la couleur complémentaire (si le fond de l'image est blanc), ce qui permet de recréer un effet de relief en utilisant les capacités stéréoscopiques du cerveau.
La figure 3A illustre les différentes images intermédiaires obtenues à partir d'une photo numérique initiale P; lors de l'application des étapes du procédé d'aide à la prise de vue selon un mode de réalisation de la présente invention.
A l'extrémité gauche de la figure 3A se trouve la photo numérique P; prise avec un objectif grand angle associé ou intégré au dispositif numérique servant à la prise de vue. Cette photo numérique P; est ici illustrée comme étant de forme sensiblement sphérique et présentant un axe vertical.
Une ligne droite déformée par le mode de prise de vue en grand angle est représentée dans la partie gauche de cette photo numérique P;, tandis que trois lignes droites parallèles déformées par le mode de prise de vue en grand angle sont représentées dans la partie droite de cette photo numérique P;.
Suite à l'étape 13 de transformation, une première image intermédiaire Im; est obtenue par application d'une fonction mathématique de projection à la photo numérique P;. Dans le cas illustré à la figure 3A, une fonction mathématique de projection cylindrique équidistante est appliquée, ce qui aboutit à une image intermédiaire Im; de type équirectangulaire dans laquelle tous les points équidistants du centre de la photo numérique P; de type sphérique se retrouvent sur une même droite verticale.
Cette première image intermédiaire Im; sert ensuite à obtenir une deuxième image intermédiaire Im;", par application de la fonction mathématique inverse à une partie de cette première image intermédiaire Im; lors d'une étape 15 de transformation inverse.
Dans le cas présent, la partie de la première image intermédiaire Im; utilisée lors de l'étape 15 de transformation inverse est la partie droite de la première image intermédiaire Im;, laquelle correspond à la partie de la photo numérique P; située à droite de l'axe de celle-ci.
Afin de bien s'assurer que la déformation sphérique appliquée à cette partie d'image corresponde bien à la déformation sphérique affectant la photo numérique P;+i suivante lorsqu'elle sera affichée sur l'écran du dispositif numérique, cette partie de la première image intermédiaire Ini; est alors décalée, lors d'une étape 14 de décalage, vers la gauche, ce qui correspond à créer une troisième image intermédiaire Im;" dans laquelle la partie située à l'extrémité gauche correspond à la partie droite de la première image intermédiaire Im;, complété ensuite par des pixels noirs.
Une fois cette troisième image intermédiaire Im;" obtenue, la fonction inverse à la projection cylindrique équidistante peut être appliquée à cette troisième image intermédiaire Im;", ce qui aboutit à une deuxième image intermédiaire Im;' de forme sphérique dans laquelle la partie située à gauche de l'axe correspond à la partie droite de la première image intermédiaire Im; et donc à la partie située à droite de l'axe sur la photo numérique P;.
Cette deuxième image intermédiaire Im;' peut alors être affichée sur l'écran du dispositif numérique afin de faciliter la prise de vue de la photo numérique P;+i suivante, par superposition de l'image visualisée lors de cette prise de vue avec cette deuxième image intermédiaire Im;'.
Sur la figure 3 A est illustré un cas où la moitié droite de la première image intermédiaire Im; est utilisée, après décalage vers la gauche, pour obtenir la deuxième image intermédiaire Im;' servant à la prise de vue suivante.
La présente invention ne se limite bien sûr pas à ce seul cas, comme illustré sur la figure 3B suivante.
La figure 3B illustre les différentes images intermédiaires obtenues à partir d'une photo numérique initiale P; lors de l'application des étapes du procédé selon un autre mode de réalisation de la présente invention.
Dans ce deuxième exemple, au lieu d'utiliser la moitié droite de la première image intermédiaire Im; pour obtenir la deuxième image intermédiaire Im;', une partie plus restreinte, correspondant à une bande verticale de la première image intermédiaire Im; est utilisée.
Dans ce mode de réalisation, la deuxième image intermédiaire Im;' comprend alors une partie correspondant à la projection inverse de cette bande, décalée vers la gauche dans une troisième image intermédiaire Im;", et complétée par des pixels noirs.
Dans cet autre mode de réalisation, bien que la partie subissant la projection et l'inversion de projection soit plus restreinte en largeur que dans le cas de la figure 3 A, la deuxième image intermédiaire Im;' peut néanmoins suffire à l'utilisateur pour y superposer correctement l'image visualisée de la photo numérique P;+i suivante sur l'écran de son dispositif numérique.
En outre, cette bande verticale peut avantageusement correspondre à une bande de coupure entre deux photos numériques successives.
Dans un mode particulier de réalisation, l'image panoramique que l'on souhaite obtenir est une image panoramique de 360°, c'est-à-dire couvrant entièrement l'horizon de l'utilisateur, ainsi que le zénith et le nadir, comme s'il tournait sur lui-même d'un tour. De telles images sont particulièrement recherchées, par exemple dans le domaine de la photographie par des agents immobiliers, car elles permettent la visualisation de l'ensemble d'une pièce d'un appartement au moyen d'une seule photo.
Dans un tel mode particulier de réalisation, le nombre N de photos numériques dépend de l'angle de prise de vue de l'objectif grand angle utilisée pour prendre les photos numériques. Plus cette angle est important, et plus petit sera le nombre N de photos numériques nécessaires pour couvrir un champ de 360 °.
Ainsi, dans un premier mode de réalisation nécessitant un minimum de photos numériques, l'image panoramique à 360° est obtenue à partir de l'assemblage de seulement deux photos numériques Pi et P2 prises au moyen d'un objectif à grand angle présente un angle de prise de vue strictement supérieur 180°.
Ainsi, si l'angle de champ d'un tel objectif grand angle vaut a = 180° + β, il convient alors d'utiliser une partie ε de la première image intermédiaire Imi (obtenue à partir de la première photo Pi) qui soit située en dehors de la zone [-90° ; 90°] de cette image, afin de pouvoir obtenir une deuxième image intermédiaire Im;' pouvant se superposer sur l'écran du dispositif numérique avec la photo numérique P2 suivante, ce qui est illustré sur la figure 3C.
Dans un deuxième mode de réalisation, l'image panoramique à 360° est obtenue à partir de trois photos numériques Pi, P2 et P3 successives prises au moyen d'un objectif à grand angle présente un angle de prise de vue strictement supérieur 120°.
Ainsi, si l'angle de champ d'un tel objectif grand angle vaut a = 120° + β, il convient alors d'utiliser une partie ε de la première image intermédiaire Imi (obtenue à partir de la première photo Pi) qui soit située en dehors de la zone [-60° ; 60°] de cette image, afin de pouvoir obtenir une deuxième image intermédiaire Im;' pouvant se superposer sur l'écran du dispositif numérique avec la photo numérique P2 suivante. Il en va de même pour la première image intermédiaire Im2 obtenue à partir de la deuxième photo P2.
Dans un troisième mode de réalisation, l'image panoramique à 360° est obtenue à partir de quatre photos numériques Pi, P2, P3 et P4 successives prises au moyen d'un objectif à grand angle présente un angle de prise de vue strictement supérieur 90°.
Ainsi, si l'angle de champ d'un tel objectif grand angle vaut a = 90° + β, il convient alors d'utiliser une partie ε de la première image intermédiaire Imi (obtenue à partir de la première photo Pi) qui soit située en dehors de la zone [-45° ; 45°] de cette image, afin de pouvoir obtenir une deuxième image intermédiaire Im;' pouvant se superposer sur l'écran du dispositif numérique avec la photo numérique P2 suivante. Il en va de même pour les premières images intermédiaires Im2 et Im3 obtenus respectivement à partir des deuxième et troisième photos P2 et P3.
Ce dernier mode de réalisation est avantageux en ce sens qu'il est particulièrement intuitif. L'utilisateur peut facilement obtenir une photo panoramique à 360° à partir seulement de quatre clichés pris sensiblement selon quatre directions orientées à 90° les unes par rapport aux autres, telles que des positions selon les points cardinaux, en se tournant successivement dans des positions à angle droit, ce qui est aisé dans des lieux présentant une forme carrée ou rectangulaire comme c'est le cas habituellement pour des pièces situées à l'intérieur de bâtiments.
On se réfère maintenant à la figure 4, laquelle décrit schématiquement un dispositif numérique DISP apte à faciliter la prise de vue d'une nouvelle photo numérique à partir d'une photo numérique initiale selon la présente invention.
En particulier, ce dispositif numérique DISP comprend un capteur photographique CAPT qui est apte à être associé avec un objectif OBJ à grand angle afin de capturer des photos numériques à grand angle. Un tel capteur photographique capture ainsi la photo numérique initiale P; discutée précédemment, laquelle va être utilisé au cours du procédé selon la présente invention pour faciliter la prise de vue d'une nouvelle photo numérique Pj+i.
Ce dispositif numérique DISP comprend en outre un écran SCN apte à afficher une image Im visualisée par le capteur numérique. Cet écran SCN peut être un écran de type LCD, par exemple.
Ce dispositif numérique DISP comprend également une unité de traitement PROC, qui peut prendre la forme d'un processeur ou d'un micro-processeur, arrangée pour mettre en œuvre les étapes du procédé d'aide à la prise de vue décrit précédemment.
En particulier, cette unité de traitement PROC est arrangée pour, d'une part, obtenir une première image intermédiaire Im; à partir d'une photo numérique initiale P;, capturée par le capteur photographique lorsqu'il est associé avec un objectif grand angle OBJ, au moyen d'une fonction numérique de projection, qui peut être avantageusement la fonction de projection cylindrique équidistante discutée précédemment.
Cette unité de traitement PROC est arrangée, par ailleurs, pour obtenir une deuxième image intermédiaire Im;' à partir de la première image intermédiaire Im; en appliquant la fonction mathématique inverse à la fonction de projection sur une partie de la première image intermédiaire.
L'écran SCN est alors arrangé, en outre, pour afficher la deuxième image intermédiaire Im;' obtenue par l'unité de traitement PROC simultanément avec l'image Im visualisée par le capteur numérique, afin de faciliter la capture de la nouvelle photo numérique.
Dans un mode de réalisation avantageux où le dispositif numérique est lui-même capable de générer une image panoramique à partir d'une série de photos numériques successives prises en utilisant le procédé d'aide à la prise de vue décrit précédemment, l'unité de traitement (PROC) est arrangée, en outre, pour assembler lesdites photos numériques afin d'obtenir cette image panoramique.
Dans un mode de réalisation, le dispositif numérique DISP ne comprend pas lui-même l'objectif grand angle OBJ servant à prendre des photos numériques grand angle. Cela peut être le cas par exemple si le dispositif numérique DISP est un téléphone mobile sans objectif.
Dans ce cas, l'objectif grand angle OBJ peut être associé temporairement au dispositif numérique DISP, par exemple par vissage de l'objectif sur un pas de vis du dispositif numérique aligné avec le capteur CAPT ou en utilisant des moyens magnétiques comme un aimant pour attacher l'objectif au dispositif numérique.
Dans un autre mode de réalisation, le dispositif numérique DISP comprend un objectif grand angle OBJ associé physiquement avec le capteur numérique, c'est-à-dire de façon permanente. Dans ce mode de réalisation, ce dispositif numérique DISP peut alors être un appareil photo numérique.
La présente invention vise en outre un programme d'ordinateur comportant des instructions de code pour la mise en œuvre du procédé d'aide à la prise de vue ci-avant et/ou du procédé d'obtention d'une image panoramique ci-avant, lorsque ce programme est exécuté par l'unité de traitement d'un dispositif numérique apte à être associé à un objectif grand angle, par exemple l'unité de traitement du dispositif numérique DISP lorsqu'il est associé temporairement avec, ou même comprend lui-même, un objectif grand angle OBJ.
De tels programmes peuvent utiliser n'importe quel langage de programmation, et être sous la forme d'un code source, code objet, ou de code intermédiaire entre code source et code objet, tel que dans une forme partiellement compilée, ou dans n'importe quelle autre forme souhaitable.
La présente invention vise aussi un support d'informations lisible par un processeur de données, et comportant des instructions de code d'un des programmes mentionnés ci-dessus.
Ce support d'informations peut être n'importe quelle entité ou dispositif capable de stocker le programme. Par exemple, le support peut comporter un moyen de stockage, tel qu'une ROM, par exemple un CD-ROM ou une ROM de circuit microélectronique, ou encore un moyen d'enregistrement magnétique, par exemple une disquette ou un disque dur. Ce support d'informations peut également comporter de la mémoire type FLASH, pour le stockage du programme et l'enregistrement des informations réceptionnées par un module client, et de la mémoire de type RAM pour la sauvegarde des données temporaires telles les listes serveurs et thèmes associés.
D'autre part, ce support d'informations peut être un support transmissible tel qu'un signal électrique ou optique, qui peut être acheminé via un câble électrique ou optique, par radio ou par d'autres moyens. Les programmes selon l'invention peuvent être en particulier téléchargés sur un réseau de type Internet.
Bien entendu, l'invention n'est pas limitée aux exemples de réalisation ci-dessus décrits et représentés, à partir desquels on pourra prévoir d'autres modes et d'autres formes de réalisation, sans pour autant sortir du cadre de l'invention.
En particulier, les différents modes de réalisation présentés ci-avant peuvent être combinés entre eux et ne sont pas exclusifs les uns des autres. En outre, dans la description ci-avant, l'utilisation d'une fonction mathématique de projection de type fonction de projection cylindrique équidistante a été décrite dans le cas spécifique où la photo numérique P; présente une forme sensiblement sphérique. Cependant la présente invention ne se limite pas à ce seul exemple, et d'autres fonction mathématiques de projection, par exemple de type projection en perspective ou projection cylindrique non nécessairement cylindrique, peuvent être employées en fonction de la nature de la déformation affectant la photo numérique P capturée.
La présente invention trouve avantageusement une application à la prise de photo panoramiques en intérieur, par exemple à usage d'agents immobiliers désireux de mettre en ligne de telles photos afin d'attirer des clients potentiels.
La présente invention peut également servir de complément parfait à un système de cartographie 3D similaire à ceux actuellement proposés par Google, MAppy et d'autres compagnies.
La présente invention peut trouve également avantageusement une application, de manière non exhaustive, dans le domaine du tourisme (guides, séjours, hôtels, restaurants, ...), de l'assurance, de l'expertise en diagnostic immobilier, ou de toute autre activité nécessitant de prendre des photos pour conserver une situation ou configuration précise d'un lieu à un instant t.

Claims

Revendications
1. Procédé d'aide à la prise de vue d'une photo numérique (Ρ;+ι) à partir d'une photo numérique initiale (Ρ;) obtenue au moyen d'un objectif grand angle (OBJ) associé à un dispositif numérique (DISP) de prise de vue, le procédé comprenant :
l'obtention (13) d'une première image intermédiaire (Im;) à partir de la photo numérique initiale (Ρ;) au moyen d'une fonction mathématique de projection ;
l'obtention (15) d'une deuxième image intermédiaire (Ιη¾') à partir de la première image intermédiaire (Im;), par application de la fonction mathématique inverse de la fonction mathématique de projection sur au moins une partie de la première image intermédiaire (Im;) ; et l'affichage (17) simultané, sur un écran du dispositif numérique, de la deuxième image intermédiaire (Ιη¾') et d'une image (Im) visualisée par le dispositif numérique de prise de vue afin de faciliter la prise de vue de la photo numérique (Ρ;+ι).
2. Procédé d'aide à la prise de vue selon la revendication 1, caractérisé en ce que la photo numérique initiale (Ρ;) a une forme sensiblement sphérique et la fonction mathématique de projection est une fonction de projection cylindrique équidistante transformant la photo numérique initiale en une première image intermédiaire (Im;) de forme rectangulaire.
3. Procédé d'obtention d'une photo panoramique (P) à partir de l'assemblage (23) d'une série de photos numériques (P;,P;+i) obtenues au moyen d'un objectif à grand angle (OBJ) associé à un dispositif numérique (DISP), caractérisé en ce que chacune des photos numériques de la série, à l'exception de la première photo numérique de la série, est obtenue en utilisant le procédé d'aide à la prise de vue selon l'une des revendications 1 ou 2 appliqué à la photo numérique précédente dans la série.
4. Procédé d'obtention d'une photo panoramique selon la revendication 3, caractérisé en ce que la photo panoramique (P) couvre un angle de vue d'au moins 360° et en ce que le nombre de photos numériques de la série est fonction de l'angle de prise de vue de l'objectif à grand angle associé au dispositif numérique.
5. Procédé d'obtention d'une photo panoramique selon la revendication 4, caractérisé en ce que la photo panoramique (P) est obtenue à partir de l'assemblage d'une série de deux photos numériques et en ce que l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur 180°.
6. Procédé d'obtention d'une photo panoramique selon la revendication 4, caractérisé en ce que l'image panoramique est obtenue à partir de l'assemblage d'une série de trois photos numériques et en ce que l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur à 120°.
7. Procédé d'obtention d'une photo panoramique selon la revendication 4, caractérisé en ce que l'image panoramique est obtenue à partir de l'assemblage d'une série de quatre photos numériques et en ce que l'objectif à grand angle associé au dispositif numérique présente un angle de prise de vue strictement supérieur à 90°.
8. Procédé d'obtention d'une photo panoramique (P) selon l'une des revendications 4 à 7, caractérisé en ce qu'une deuxième image intermédiaire supplémentaire (Imi") est affichée conjointement avec la deuxième image intermédiaire (ImN_i') obtenue à partir de l'avant-dernière photo numérique (PN-I) de la série de photos numériques,
ladite deuxième image intermédiaire supplémentaire (Imi ") étant obtenue par application de la fonction mathématique inverse de la fonction mathématique de projection sur une partie d'une première image intermédiaire supplémentaire obtenue au moyen d'une fonction mathématique de projection appliquée à la première photo numérique (Pi) de la série de photos numériques.
9. Procédé d'obtention d'une photo panoramique (P) selon l'une des revendications 3 à 8, caractérisé par au moins une étape supplémentaire d'affichage simultané, après l'obtention d'une série comprenant au moins trois photos numériques (Ρ;_ι,Ρ;,Ρ;+ι), de la deuxième image intermédiaire (Ιη¾_ι") obtenue à partir de la photo numérique (Pu) précédant une photo numérique (Ρ;) à corriger dans ladite série d'un côté de l'écran (SCN) du dispositif numérique et de la deuxième image intermédiaire (Imi+i") obtenue à partir de la photo numérique (Ρ;+ι) suivant la photo numérique (Ρ;) à corriger dans ladite série du côté opposé de l'écran (SCN) du dispositif numérique, afin de faciliter la prise de vue d'une nouvelle photo numérique (Ρ;') destinée à remplacer la photo numérique à corriger (P;).
10. Procédé d'obtention d'une photo numérique panoramique en trois dimensions (P3D), caractérisé en ce qu'il comprend :
l'obtention (1 10) d'une première photo numérique panoramique (PA) à partir de l'assemblage d'une première série de photos numériques (ΡΑ,Ι ; ΡΑ,Ν) obtenues au moyen d'un objectif à grand angle (OBJA) associé à un premier dispositif numérique (DISPA) en mettant en œuvre les étapes du procédé d'obtention d'une photo panoramique selon l'une des revendications 3 à 9 ;
l'obtention (120) d'une deuxième photo numérique panoramique (PB) à partir de l'assemblage d'une deuxième série de photos numériques (PB,i ; ΡΒ,Ν) obtenues au moyen d'un objectif à grand angle (OBJB) associé à un deuxième dispositif numérique (DISPB), disposé à une distance prédéfinie du premier dispositif numérique (DISPA), en mettant en œuvre les étapes du procédé d'obtention d'une photo panoramique selon l'une des revendications 3 à 9 ; et
l'association (130) de la première photo numérique panoramique (PA) et de la deuxième photo numérique panoramique (PB) afin d'obtenir la photo numérique panoramique en trois dimensions (P3D).
11. Procédé d'obtention d'une photo numérique panoramique en trois dimensions selon la revendication 10, dans lequel la photo numérique en trois dimensions (P3D) correspond à une image anaglyphe, caractérisé en ce que l'étape d'association comprend :
l'obtention d'une première image homologue (IHR) au moyen de l'extraction d'une première composante de couleur d'une des deux photos numériques panoramiques (ΡΑ,ΡΒ) ;
l'obtention d'une deuxième image homologue (IHBv) au moyen de l'extraction d'une deuxième composante de couleur, différente de la première composante, de l'autre des deux photos numériques panoramiques (ΡΑ,ΡΒ) ;
la superposition des deux images homologues (IHR,IHBV) afin d'obtenir l'image anaglyphe correspondant à la photo numérique en trois dimensions (P3D).
12. Programme d'ordinateur comportant des instructions de code pour la mise en œuvre du procédé selon l'une des revendications 1 à 11 lorsque ce programme est exécuté par l'unité de traitement (PROC) d'un dispositif numérique (DISP) apte à être associé à un objectif grand angle (OBJ).
13. Dispositif numérique apte à faciliter la prise de vue d'une nouvelle photo numérique (Ρ;+ι) à partir d'une photo numérique initiale (P;), le dispositif numérique comprenant:
un capteur photographique (CAPT) apte à être associé avec un objectif à grand angle afin de capturer la photo numérique initiale (Ρ;) et la nouvelle photo numérique (Ρ;+ι) ;
un écran (SCN) apte à afficher une image (Im) visualisée par le capteur numérique ;
une unité de traitement (PROC) arrangée pour obtenir une première image intermédiaire (Im;) à partir d'une photo numérique initiale (Ρ;) capturée par le capteur photographique associé avec un objectif grand angle au moyen d'une fonction numérique de projection et pour obtenir une deuxième image intermédiaire (Im;') à partir de la première image intermédiaire (Im;) en appliquant la fonction mathématique inverse à la fonction de projection sur au moins une partie de la première image intermédiaire ;
l'écran (SCN) étant arrangé en outre pour afficher la deuxième image intermédiaire (Im;') simultanément avec l'image (Im) visualisée par le capteur numérique afin de faciliter la capture de la nouvelle photo numérique (Ρ;+ι).
14. Dispositif numérique selon la revendication 13, caractérisé en ce que l'unité de traitement est arrangée pour assembler lesdites photos numériques afin d'obtenir une image panoramique.
15. Dispositif numérique selon l'une des revendications 13 ou 14, caractérisé en ce qu'il comprend un objectif (OBJ) grand angle associé physiquement avec le capteur numérique.
PCT/FR2011/052250 2011-01-07 2011-09-27 Procédé et dispositif d'aide à la prise de vue d'une photo numérique au moyen d'un objectif grand angle WO2012093209A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP11773792.4A EP2661731A1 (fr) 2011-01-07 2011-09-27 Procédé et dispositif d'aide à la prise de vue d'une photo numérique au moyen d'un objectif grand angle

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1150128 2011-01-07
FR1150128A FR2970346B1 (fr) 2011-01-07 2011-01-07 Procede et dispositif d'aide a la prise d'une vue d'une photo numerique au moyen d'un objectif grand angle

Publications (1)

Publication Number Publication Date
WO2012093209A1 true WO2012093209A1 (fr) 2012-07-12

Family

ID=43920257

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR2011/052250 WO2012093209A1 (fr) 2011-01-07 2011-09-27 Procédé et dispositif d'aide à la prise de vue d'une photo numérique au moyen d'un objectif grand angle

Country Status (3)

Country Link
EP (1) EP2661731A1 (fr)
FR (1) FR2970346B1 (fr)
WO (1) WO2012093209A1 (fr)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020015049A1 (en) * 1995-11-02 2002-02-07 Golin Stuart J. Seaming polygonal projections from subhemispherical imagery
US20100033553A1 (en) * 2008-08-08 2010-02-11 Zoran Corporation In-camera panorama image stitching assistance

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020015049A1 (en) * 1995-11-02 2002-02-07 Golin Stuart J. Seaming polygonal projections from subhemispherical imagery
US20100033553A1 (en) * 2008-08-08 2010-02-11 Zoran Corporation In-camera panorama image stitching assistance

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
BAUDISCH P ET AL: "PANORAMIC VIEWFINDER: PROVIDING A REAL-TIME PREVIEW TO HELP USERS AVOID FLAWS IN PANORAMIC PICTURES", PROCEEDINGS OF THE 17TH AUSTRALIA CONFERENCE ON COMPUTER-HUMAN INTERACTION: CITIZENS ONLINE: CONSIDERATIONS FOR TODAY AND THE FUTURE, CANBERRA, AUSTRALIA, NOVEMBER 23 - 25, 2005,, vol. 122, 25 November 2005 (2005-11-25), pages 1 - 10, XP008101793, ISBN: 978-1-59593-222-8, [retrieved on 20051125] *

Also Published As

Publication number Publication date
FR2970346A1 (fr) 2012-07-13
EP2661731A1 (fr) 2013-11-13
FR2970346B1 (fr) 2013-02-15

Similar Documents

Publication Publication Date Title
CN104365092B (zh) 用于图像融合的方法和设备
Georgiev et al. Lytro camera technology: theory, algorithms, performance analysis
Birklbauer et al. Panorama light‐field imaging
US9426451B2 (en) Cooperative photography
EP3005296B1 (fr) Fusion de plusieurs flux vidéo
JP2014502818A (ja) 画像処理のための一次像および二次像画像取込装置およびその方法
WO2003007236A2 (fr) Procede et systeme pour produire la frequence des mises a jour de moyens
CN106296589B (zh) 全景图像的处理方法及装置
WO2014167085A1 (fr) Fusion de plusieurs flux video
FR2984057A1 (fr) Systeme de tournage de film video
WO2014076402A1 (fr) Procede et dispositif de capture et de construction d&#39;un flux d&#39;images panoramiques ou stereoscopiques
FR2587480A1 (fr) Procede de restitution stereoscopique de scenes-images avec un deplacement relatif entre le capteur de prise de vues et la scene enregistree
EP1047264B1 (fr) Procédé et dispositif de traitement et de restitution d&#39;images, à rééchantillonnage
FR2925705A1 (fr) Dispositif d&#39;aide a la capture d&#39;images
WO2014199085A1 (fr) Systemes de reperage de la position de la camera de tournage pour le tournage de films video
EP1615427B1 (fr) Procédé d&#39;obtention d&#39;une succession d&#39;images sous la forme d&#39;un effet tournant
WO2012093209A1 (fr) Procédé et dispositif d&#39;aide à la prise de vue d&#39;une photo numérique au moyen d&#39;un objectif grand angle
WO2017092261A1 (fr) Module d&#39;appareil photographique, terminal mobile, et procédé et appareil de prise d&#39;image associés
FR3057430A1 (fr) Dispositif d&#39;immersion dans une representation d&#39;un environnement resultant d&#39;un ensemble d&#39;images
Nielsen et al. Real-time spherical videos from a fast rotating camera
Fliegel et al. Open source database of images DEIMOS: high dynamic range images
FR3051054A1 (fr) Dispositif pour reproduire une scene panoramique a 360° en stereoscopie par l&#39;utilisation d&#39;une camera 360° en rotation autour d&#39;un axe fixe
FR2964203A1 (fr) Acquisition d&#39;image par synthese progressive
WO2022023669A1 (fr) Procede pour traiter des images a contraste eleve, notamment des images prises dans l&#39;espace, et systeme d&#39;affichage mettant en oeuvre ce procede
FR2867343A1 (fr) Procede et appareil de prise de vue pour la production d&#39;epreuves dynamiques

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11773792

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2011773792

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE