EP3028006B1 - System zum ermitteln eines ortsbrustbildes - Google Patents
System zum ermitteln eines ortsbrustbildes Download PDFInfo
- Publication number
- EP3028006B1 EP3028006B1 EP14744032.5A EP14744032A EP3028006B1 EP 3028006 B1 EP3028006 B1 EP 3028006B1 EP 14744032 A EP14744032 A EP 14744032A EP 3028006 B1 EP3028006 B1 EP 3028006B1
- Authority
- EP
- European Patent Office
- Prior art keywords
- image
- sections
- working face
- drill head
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- E—FIXED CONSTRUCTIONS
- E21—EARTH OR ROCK DRILLING; MINING
- E21B—EARTH OR ROCK DRILLING; OBTAINING OIL, GAS, WATER, SOLUBLE OR MELTABLE MATERIALS OR A SLURRY OF MINERALS FROM WELLS
- E21B47/00—Survey of boreholes or wells
- E21B47/002—Survey of boreholes or wells by visual inspection
-
- E—FIXED CONSTRUCTIONS
- E21—EARTH OR ROCK DRILLING; MINING
- E21B—EARTH OR ROCK DRILLING; OBTAINING OIL, GAS, WATER, SOLUBLE OR MELTABLE MATERIALS OR A SLURRY OF MINERALS FROM WELLS
- E21B44/00—Automatic control systems specially adapted for drilling operations, i.e. self-operating systems which function to carry out or modify a drilling operation without intervention of a human operator, e.g. computer-controlled drilling systems; Systems specially adapted for monitoring a plurality of drilling variables or conditions
-
- E—FIXED CONSTRUCTIONS
- E21—EARTH OR ROCK DRILLING; MINING
- E21C—MINING OR QUARRYING
- E21C39/00—Devices for testing in situ the hardness or other properties of minerals, e.g. for giving information as to the selection of suitable mining tools
-
- E—FIXED CONSTRUCTIONS
- E21—EARTH OR ROCK DRILLING; MINING
- E21D—SHAFTS; TUNNELS; GALLERIES; LARGE UNDERGROUND CHAMBERS
- E21D9/00—Tunnels or galleries, with or without linings; Methods or apparatus for making thereof; Layout of tunnels or galleries
Definitions
- the invention relates to an arrangement for determining an image of at least a region of a mountain face worked by a tunnel boring machine, a tunnel boring machine and a method for determining an image of at least a region of a mountain face processed by a tunnel boring machine.
- a tunnel boring machine is a machine that is used to build tunnels.
- Components of a tunnel boring machine are a dismantling plate with feed and tensioning devices, devices for the installation of support and removal measures, devices for material removal, a supply unit (electricity, compressed air, ventilation, water), and transport devices for excavated material, support materials and removal materials.
- a drilling head on the front of a tunnel boring machine is equipped with removal tools for loosening a rock.
- geological documentation of the face is essential in tunnel construction. Such documentation is only possible to a very limited extent in mechanical drives, as in the case of a tunnel boring machine, because the boring head of the tunnel boring machine is mechanically in the way and visual assessments are therefore only possible to a very limited extent.
- geologists and geotechnicians look through small openings at the face and create photos and / or sketches. In some cases, the drill head is pulled back a little so that larger parts of the face can be photographed, but from extremely unfavorable angles. Withdrawing the drill head also involves a great deal of effort.
- JP H11-36785 A discloses a photographic processing system for a drilling image of a tunnel boring machine.
- a drill head of a tunnel boring machine has slot-shaped openings.
- Cameras are attached to the drill head. These cameras rotate with the drill head to scan the local burst. This results in a continuous circular image of the working face. Furthermore, this data is processed by means of an analysis computer so that the images can be post-processed.
- an arrangement for determining an image of at least a region of a working face machined by a tunnel boring machine ie that boundary surface of a rock that lies opposite this in the direction of advance of a tunnel boring machine and on which a propulsion effected by the tunnel boring machine takes place or has taken place
- the arrangement comprising a rotatable or rotatable drill head for the tunnel boring machine for removing rock material from the face, an image recording device which is attached to the drill head for recording image data of at least a portion of the face, and an image processing device which (in particular during the rotation of the drill head) processed image data of several sections of the working face by means of the image recording device and reconstructed therefrom a coherent image of at least the area of the working face b between.
- the image recording device has a plurality of image recording units, in particular video cameras and / or photo cameras, attached to the drilling head, which are designed to record image data from sections of the working face.
- the plurality of image recording units are attached to the drilling head in such a way that the sections of the working face imaged by these image recording units at least partially overlap, forming overlapping sections.
- the image recording units are set up to record the sections when the drill head is rotated.
- the image processing device is for processing the image data of the at least overlapping overlapping sections in this way set up that a three-dimensional relief image of at least a part of the overlapping overlap sections is reconstructed as the image using an assignment of the overlapping overlap sections, whereby by means of a contrast analysis of the overlap sections corresponding partial sections of the working face on the different sections are determined and assigned to one another.
- an arrangement for determining an image of at least a region of a working face machined by a tunnel boring machine ie that boundary surface of a rock that lies opposite this in the direction of advance of a tunnel boring machine and on which a propulsion effected by the tunnel boring machine takes place or has taken place ) of a mountain range
- the arrangement comprising a rotatable or rotatable drilling head for the tunnel boring machine for removing rock material from the face, an image recording device which is attached to the drilling head for recording image data of at least a section of the working face, and an image processing device which ( in particular during the rotation of the drill head) processed image data of several sections of the working face recorded by means of the image recording device, and reconstructed therefrom a coherent image of at least the area of the working face uiert or generated.
- the image recording device has only one image recording unit attached to the drilling head, in particular a video camera or a photo camera, which is designed to record image data from sections of the working face.
- the image recording unit is attached to the drill head in such a way that the sections of the working face imaged by this image recording unit overlap at least partially, forming overlapping sections, the image recording unit being set up to record the sections when the drill head is rotated.
- the image processing device is set up to process the image data of the at least overlapping overlap sections such that the image is a three-dimensional relief image of at least one Part of the overlapping overlapping sections is reconstructed using an assignment of the overlapping overlapping sections, wherein by means of a contrast analysis of the overlapping sections, corresponding partial sections of the working face on the different sections are determined and assigned to one another.
- a tunnel boring machine is also provided for removing rock material from a face of a mountain, the tunnel boring machine having an arrangement with the features described above.
- a method for determining an image of at least a region of a face of a mountain range processed by a tunnel boring machine is also provided, with the method rotating a drilling head of a tunnel boring machine for removing rock material of the face, image data of a respective section of the face using a image recording device attached to the drill head are recorded (in particular while the drill head is rotating, the drill head preferably not being advanced during the recording, that is to say the recording is not carried out during the drilling operation), and those recorded (in particular during the rotation of the drill head) by means of the image recording device
- Image data from several sections of the working face are processed, whereby an image of at least the area of the working face is reconstructed or generated.
- the image recording device has a plurality of image recording units, in particular video cameras and / or photo cameras, attached to the drilling head, which are designed to record image data from sections of the working face.
- the plurality of image recording units are attached to the drilling head in such a way that the sections of the working face imaged by these image recording units at least partially overlap, forming overlapping sections.
- the image recording units are set up to record the sections when the drill head is rotated.
- the image processing device is for processing the image data of the at least overlapping overlapping sections in this way set up that a three-dimensional relief image of at least a part of the overlapping overlap sections is reconstructed as the image using an assignment of the overlapping overlap sections, whereby by means of a contrast analysis of the overlap sections corresponding partial sections of the working face on the different sections are determined and assigned to one another.
- a method for determining an image of at least a region of a face of a mountain range processed by a tunnel boring machine is also provided, with the method rotating a drilling head of a tunnel boring machine for removing rock material of the face, image data of a respective section of the face using a image recording device attached to the drill head are recorded (in particular while the drill head is rotating, the drill head preferably not being advanced during the recording, that is to say the recording is not carried out during the drilling operation), and those recorded (in particular during the rotation of the drill head) by means of the image recording device
- Image data from several sections of the working face are processed, whereby an image of at least the area of the working face is reconstructed or generated.
- the image recording device has only one image recording unit attached to the drill head, in particular a video camera or a photo camera, which is designed to record image data from sections of the working face.
- the image recording unit is attached to the drill head in such a way that the sections of the working face imaged by this image recording unit overlap at least partially, forming overlapping sections, the image recording unit being set up to record the sections when the drill head is rotated.
- the image processing device is set up to process the image data of the at least overlapping overlapping sections in such a way that a three-dimensional relief image of at least part of the overlapping overlapping sections is reconstructed as the image using an assignment of the overlapping overlapping sections, corresponding by means of a contrast analysis of the overlap sections Sections of the working face are determined on the different sections and assigned to each other.
- automated photographic and / or video-based face-to-face documentation takes place during tunnel boring machine driving.
- complete images or circular rings of the working face are generated.
- a camera or another image recording device is mounted on a drill head, for example placed in openings in the drill head, and image data (for example a video or images in rapid sequence) are recorded, preferably while the drill head is rotating.
- image data for example a video or images in rapid sequence
- the individual image data (for example video frames or photos) are then combined to form an overall image using methods of digital image processing in particular.
- the quality of the images produced has proven to be very good, so that they can meet the high quality requirements for geological documentation.
- the image data (and, if appropriate, their evaluation) can be recorded in maintenance shifts or during brief interruptions in the drilling operation. This does not result in long interruptions in drilling operations.
- image data of different spatial sections of the working face can be recorded by one or more image recording units of the image recording device, specifically at a specific angular position or at several different angular positions of the drill head.
- the drill head is at rest during the acquisition of the image data and, for example, several image acquisition units at different positions of the drill head take up image data from different sections of the working face when the drill head is at rest.
- the drill head can rotate during the acquisition of the image data, so that one and the same image acquisition unit records image data of different local sections of the working face at different times during the rotation and thus at different angular positions of the drill head.
- the drilling head can have at least one opening, in particular a through opening (between an end of the drilling head on the side of the tunnel boring machine and an end of the drilling head on the side of the face).
- the image recording device can be attached to the drill head for recording the image data through the through opening.
- the image recording device in the opening or openings can be protected against the harsh mechanical conditions in one to boring tunnel are protected.
- integrating the image recording device into openings in the drill head means that the drill head is not mechanically in the way of recording image data of the working face.
- the at least one opening can be selected from a group consisting of a manhole, a recess for a removal tool, a clearing slot and a recess specially configured for receiving the image recording device.
- a manhole is understood to be an entry through the drill head in which people rarely have to stay, for example for repair or maintenance purposes. Round, oval or rectangular cross-sections with a clear width of, for example, 400 mm to 600 mm are possible, so that an average person can climb through it without great difficulty.
- An image recording unit can be mounted in such a manhole (for example, removable) and can be used to receive the image recording unit when the manhole is not otherwise required.
- Rotating discs with cutting edges can be used as removal tools, which themselves are set in rotation when the drill head is turned and can then remove material from the working face.
- Such removal tools can be mounted in the recesses provided for this purpose with holders on the drill head.
- an image recording unit can also be recorded in such a recess, temporarily or permanently.
- a conveying system of a tunnel boring machine for conveying away excavated material contains clearing slots arranged in the drilling head, through which, using clearers, the loosened drilling material arrives from the face behind the drilling head and is then transported, for example, via conveyor belts.
- Such clearing slots can also be used to at least partially accommodate the image recording device.
- special can also separate openings provided for this purpose are formed in the drill head.
- the at least one recess can be designed to at least partially record the image recording device. If all or part of the image recording device is accommodated in the receiving opening, it can be protected against undesired influences from the harsh environment during the drilling of a tunnel boring machine in a borehole in a damage-proof manner.
- the image recording device can be selected from a group consisting of at least one video camera for recording video data from at least a section of the working face, and from at least one photo camera for taking photos of at least a section of the working face.
- a video camera With a video camera, a continuous video recording of sections of the working face while the drill head is rotating can be recorded. As a result, a broad database is available for reconstructing the face image.
- a photo camera several individual images of sections of the working face can be taken while the drill head is rotating. The recording of several individual images allows the amount of data to be transmitted to be reduced.
- the image recording device can have a plurality of image recording units, each of which is attached for recording image data of a respective section of the working face.
- the individual image acquisition units can be video and / or photo cameras, which can be mounted on different radii of the drill head, so that during the rotation of the drill head, each of the image acquisition units can, for example, record an annular section of the working face. Assembling the ring images into a circular image of the working face is then possible if the mounting positions of the individual image recording units are known.
- the image recording device can be set up to record image data of the working face during a predetermined angular rotation of the drilling head (in particular during a complete rotation of the drilling head) and to provide the image processing device with this image data for reconstructing the image of at least the area of the working face. For example, after rotating the drill head by 180 °, by 360 ° (or by more than 360 ° if redundancy is required to further reduce errors), the image acquisition can be temporarily stopped and a corresponding data record of image data to the image processing unit for the reconstruction of the person of interest Area of the working face to be transmitted.
- the image recording device can have a plurality of image recording units, in particular video cameras and / or photo cameras, attached to the drilling head, which are designed for the simultaneous recording of different image data from different sections of the working face. If several image acquisition units are used, an area of the face that is in principle unlimited in size can be represented in the form of an image even with small distances between a front of the drilling head and the working face.
- the image recording device together with the image processing device, assembles the individual partial images corresponding to the sections of the working face recorded by the individual image recording units to form an overall image corresponding to the area of the working face of interest.
- the plurality of image recording units can be attached to the drill head in such a way that the different sections of the working face imaged by these image recording units at least partially overlap with one another.
- the overlapping areas allow the image processing device to correctly assemble the individual images into an overall image.
- the provision of Overlapping areas to compensate for differences in brightness between individual partial images, as can be caused, for example, by differently illuminating different sections of the working face. Color artifacts such as discontinuous color changes at a seam between two image sections on the composite image can thereby be avoided or at least suppressed.
- the image processing device can be set up to reconstruct a circular ring or a circular area as the area of the working face.
- a single image acquisition unit for example a single video camera or photo camera
- a coherent circular ring can be visually displayed as the imaged area of the working face when the drill head is rotated.
- Such a circular ring can already be sufficiently meaningful for the geological documentation of the working face.
- several photo and / or video cameras can also record individual, preferably overlapping, circular rings, which can then be assembled by the image processing device to form a complete circular area.
- the arrangement can have a light source or light source attached to the drill head for illuminating the section of the working face imaged by the image recording device. Since it is dark in a borehole, it can be advantageous to illuminate sections of the working face to be recorded in order to obtain a meaningful picture of the working face.
- a photo camera with a flash source can be used. If the light source and the associated image recording unit or image recording device are rigidly coupled to one another, the lighting expenditure can be kept very low, since when the drilling head rotates, the light source rotates with the image recording device or image recording unit and thereby automatically and selectively always illuminates the just recorded surface section of the working face ,
- the arrangement can have a mounting bracket set up for receiving the image recording device, and in particular the light source, and for mounting on the drill head.
- a mounting bracket can clearly create a mechanical adapter between an arbitrarily shaped image recording unit or image recording device on the one hand and an already available or specially designed recess as a receiving space in the drill head.
- the arrangement can have an inclination sensor which is set up to detect a current inclination angle (in particular the image recording device or one or more specific image recording units thereof) and can be attached, for example, to the mounting bracket or alternatively directly to the image recording device or a respective image recording unit can.
- the inclination sensor can thus detect a positioning of the mounting bracket (and thus also the image recording unit recorded by it) or directly of the image recording device itself and report it to the image processing device.
- Such inclination information provides additional insights into the manner in which an image of an area of the working face is to be interpreted, evaluated or processed.
- the inclination sensor and the image processing device can be coupled in such a way that the image processing device processes the image data assigned to the sections to reconstruct the image, taking into account the inclination angle detected by the inclination sensor. This avoids artifacts that result from incorrect evaluation of image data if the image recording device assumes an incorrect current orientation of the image recording device or the image recording units relative to the working face.
- the mounting bracket can be set up for clamping fastening and / or for magnetic fastening to the drilling head.
- These mounting methods enable the image recording device to be mounted or removed quickly on or from the drill head.
- these mounting methods allow the image recording device to be reliably attached to the drill head even under the mechanical loads that occur as a result of the rotation of the drill head and the removal of material by the drill head during operation of the tunnel boring machine.
- the image recording device is also used during the actual drilling operation, i.e. During the removal of material from the rock on which the drill head remains mounted, mechanical loads of this type can act on the image recording device, which, however, can be mounted in a protected manner on the drill head by means of the mounting bracket.
- the processing can preferably be carried out by means of an image processing device on the tunnel boring machine or at a post-processing location that is spatially distant from the tunnel boring machine.
- the tunnel boring machine in particular inside the borehole, i.e. at the site of the tunnel drilling, the post-processing is carried out.
- the images can be evaluated at a postprocessing point, for example in an office.
- the processing of the image data can be carried out in such a way that a three-dimensional relief image of at least the area of the working face is reconstructed as the image.
- the image processing device can be set up to process the image data in such a way that the image reconstructs a three-dimensional relief image of at least the area of the working face becomes.
- the image recording device can be set up to record sufficient image information for the reconstruction of relief images.
- the image evaluation device can be set up accordingly to derive the relief image from such image data. A geologist can then derive further technical information from the spatial information of a relief.
- parameters for example position and orientation information, properties of the image recording unit (s) of the image recording device configured as a stereo system (for example several image recording units for in particular, simultaneous recording of several images or a single image recording unit which rotates when the drill head is rotated and takes pictures to be linked to one another in time).
- the image processing device can be set up to process image data of different sections of the working face in such a way that by means of a contrast analysis (ie determining contrast information for image data of the sections and a comparison of the contrast information intended for different image data, in order to find mutually corresponding areas of the working face on different areas , but to identify partially overlapping sections, for example), corresponding subsections of the working face are determined on the different sections and assigned to one another.
- a contrast analysis ie determining contrast information for image data of the sections and a comparison of the contrast information intended for different image data, in order to find mutually corresponding areas of the working face on different areas , but to identify partially overlapping sections, for example
- corresponding subsections of the working face are determined on the different sections and assigned to one another.
- a sequence of light and dark areas can be examined in image data assigned to a respective section and areas of the same or corresponding contrasts or contrast ratios can be assigned to identical areas of the working face in overlapping sections.
- spatial image information can be derived from individual images
- the image recording device can have a plurality of image recording units (for example a plurality of cameras) which are designed to record image data from sections of the working face which at least overlap, in particular identical, at different times.
- the image processing device can be set up to process the image data of the sections which at least overlap at any time in such a way that a three-dimensional relief image of at least part of the overlapping sections is reconstructed as the image.
- a plurality of image recording units (for example a plurality of cameras at different positions of the drill head) record images of different sections of the working face, in particular simultaneously assigned to their respective positions and orientations.
- the image recording units are arranged in such a way that the spatial areas you have recorded contain a common sub-volume, the individual images, which also correspond to different viewing directions, can be assembled or pieced together to obtain three-dimensional information.
- the overlap areas recorded from different directions contain mutually complementary steric information.
- the image recording device can have one, in particular only one, image recording unit, which is designed during the rotation of the drilling head for the temporally successive recording of image data of at least overlapping sections of the working face.
- the image processing device can be set up to process the image data of the at least overlapping sections such that a three-dimensional relief image of at least part of the overlapping sections is reconstructed as the image.
- a single image recording unit can be sufficient to create a compact arrangement (alternatively, several image recording units are also possible according to the configuration described).
- Such an image recording unit can be due to rotate their fixed assembly on the drill head with the drill head so that it continuously scans different surface areas of the working face in terms of imaging technology.
- immediately successive recorded images can contain an overlapping area of the working face, which in turn enables the acquisition of three-dimensional image information and a correct composition of the individual images.
- the image recording device can have one, in particular only one, image recording unit, which is designed during the rotation of the drilling head for the temporally successive recording of image data of sections of the working face.
- the arrangement may further comprise a pattern generation device for generating a respective pattern of electromagnetic radiation (for example visible light, ultraviolet, infrared, etc.) on at least part of the sections during the acquisition of the image data.
- the image processing device can be set up to process the image data of the sections using the pattern or patterns as association information in such a way that a three-dimensional relief image of at least part of the sections is reconstructed as the image.
- the patterns of electromagnetic radiation imprinted on the individual images can thus enable or facilitate the assignment of the individual images to one another. In order to distinguish visible patterns from site-face image information, a picture with and once a picture without pattern generation can be taken.
- the pattern generating device can be used to generate the pattern in a wavelength range outside visible light (for example in the infrared range, in the ultraviolet range, etc.) or in a wavelength range outside a sensitivity range of the image recording unit (s).
- the arrangement can furthermore have a sensor device for detecting the pattern in the wavelength range outside visible light.
- the pattern cannot be seen on the images of the image recording device, which can be recorded, for example, in the optically visible area, and thus does not interfere with the artifact-free generation of image information.
- a sensor device that is sensitive in the wavelength range outside of visible light (for example, an infrared camera if the patterns are generated in the IR range), on the other hand, can detect the patterns so that they can be included in the evaluation.
- the use of profile scanners is also possible here. If the relative orientation between the sensor device, the pattern generation device and the image recording device is known, the patterns which are assigned to the individual images can be used to correctly assemble the images by deriving three-dimensional image information.
- the pattern generation device can be set up to generate a pattern that can be detected by the image recording device, in particular laser illumination, and can be positioned relative to the image recording device in a previously known manner.
- the image processing device can be set up to process the image data of the sections using the patterns and the known positioning as association information in such a way that a three-dimensional relief image of at least part of the sections is reconstructed as the image.
- the generated patterns it is therefore possible for the generated patterns to lie in the visible range or in a wavelength range detectable by the image recording device, in particular by means of a laser.
- the pattern information can in turn be used to generate a three-dimensional relief of the working face in order to connect the individual images accordingly and / or to obtain 3D information.
- a (particularly rectilinear) laser line can be used as a pattern, which is then converted from a non-planar surface of the working face into a laser line that can be perceived in a modified manner (in particular non-rectilinear).
- the arrangement can have a transit time measuring device for electromagnetic radiation.
- the image processing device can be set up to process the image data of the sections using the runtime information such that a three-dimensional relief image of at least part of the sections is reconstructed as the image.
- the radiation is used (e.g. by time-of-flight measurement methods) to determine the distance or distance differences of the source from the part of the face in question and, consequently, to obtain 3D information.
- the arrangement can also have a device for acoustic transit time measurement (for example an echo sounder).
- a device for acoustic transit time measurement for example an echo sounder.
- Figure 1 shows essential parts of a tunnel boring machine 180 with an arrangement 120 for determining an image of a region of a face face 122 of a rock 102 processed by the tunnel boring machine 180 according to an exemplary embodiment of the invention.
- the tunnel boring machine 180 is in a position for dismantling the rock 102 in which a borehole 182 has already been drilled into the rock 102.
- the drilling is carried out in such a way that the borehole 182 according to FIG Figure 1 is gradually expanded towards the right.
- the tunnel boring machine 180 moves along an in Figure 1 direction marked with reference numeral 190.
- the tunnel boring machine 180 has, in addition to the components shown, a multiplicity of further components which, for reasons of clarity in FIG Figure 1 are not shown.
- FIG 1 is a drill head 150 with a variety of (shown here by way of example and only seven for reasons of clarity, in reality however, for example 50 to 100) to recognize removal tools 100.
- the drilling head 150 has a drilling body 152 which can be rotated and translated in relation to the rock 102, on the front side of which or the face 122 facing the plurality of removal tools 100 are attached. These are distributed over the circular end face of the drill body 152, which is in the cross-sectional view of FIG Figure 1 cannot be seen (see the top view in Figure 5 ).
- Each of the removal tools 100 can have a rotatable disc mounted in a holder with a circumferentially sharp cutting edge.
- the disks of the removal tools 100 When the drill body 152 rotates, the disks of the removal tools 100 also rotate and, with their sharp cutting edge, remove material from the rock 102 on the face 122.
- other removal tools 100 instead of disks, other removal tools 100 can be used, for example peeling knives or gravers.
- a drive motor 157 of the tunnel boring machine 180 drives the drilling head 150 via a schematically illustrated drive shaft 159, so that it rotates about an axis of the drive shaft 159 (see reference number 161) and also moves ever deeper along the direction 190 in the direction of the rock 102 while removing the same inside moves.
- the arrangement 120 for determining the image of the face 122 processed by the tunnel boring machine 180 is described in more detail below.
- the rotatably mounted drill head 150 is part of the arrangement 120 and serves to remove material from the face 122.
- recesses 128 (which are designed as through openings in the exemplary embodiment shown) of the drill head 150, a plurality of cameras are mounted as image recording units, which together form an image recording device 124 form.
- Each of the cameras takes an image (in particular a 360 ° panorama) corresponding to an annular section of the face face 122 while the drilling head 150 is rotating, which also leads to the cameras being rotated.
- the cameras themselves are held stationary relative to the drill head 150, ie do not require a separate drive.
- the image data recorded by the cameras during a complete 360 ° rotation of the drilling head 150 are fed to an image processing device 126 (for example a processor, in particular a microprocessor or a CPU, central processing unit).
- the image processing device 126 processes the image data of the different cameras of the image recording device 100 together, ie composes the individual images of the individual cameras or the recorded (partial) ring images in such a way that a common image is constructed from the surface of the face 122.
- Image processing methods can be used here.
- the constructed image of the face 122 is then fed to a display device 155, for example an LCD display of a laptop or desktop computer. A geologist can then conveniently analyze the characteristic of the face 122 by viewing the current image of the face 122 on the display device 155.
- the image is thus reconstructed at the location of the tunnel boring machine 180.
- FIG. 2 schematically shown, several cameras can be implemented as image recording device 124 integrated in the drill head 150.
- the image processing device 126 is also integrated in the drill head 150 and, in the exemplary embodiment shown, transmits the reconstructed image data wirelessly to an in Figure 2 Display device 155, not shown, for displaying the image of the face 122.
- the geological and geotechnical documentation of the face 122 when driving with tunnel boring machines 180 is an essential basis for reliable and safe operation of the tunnel boring machine 180. This takes place, for example, once a day in maintenance shifts.
- Arrangements 120 according to the invention are significantly more advantageous than conventional approaches for determining geological data of a face 122, as will be described in more detail below:
- the view of the face 122 is only possible to a very limited extent due to the disturbing drill head 150 of the tunnel boring machine 180. This is schematically in Figure 3 shown.
- the view of the face 122 by geologists and geotechnicians is thus conventionally through manholes, clearing slots or to the side of excavation tools 100.
- it is only possible to view small parts of the face 122 as for example in FIG Figure 3 shown. In this photo a circular area with a diameter of about 60 cm can be seen, while the entire face 122 has a diameter of almost 10 m.
- geological face documentation for tunnel boring machine drives is traditionally associated with great uncertainties or with a lot of effort.
- the difficulty overcome with the image recording device 124 integrated in and / or on the rotating drilling head 150 is that the working face 122 for operating personnel is almost completely covered by the drilling head 150 of the tunnel boring machine 180, can conventionally only be viewed through small openings, but through the provision according to the invention the image recording device 124 and the image processing device 126 connected downstream with regard to the signal flow for assembling partial images of the working face 122 can now be used without problems to create an image of a larger area of the working face 122.
- Figure 5 shows a top view of components of an arrangement 120 according to an exemplary embodiment of the invention, in which cameras as image recording device 124 on the drilling head 150 of a tunnel boring machine in a manhole (see designation (a)), a clearing slot (see designation (b)) and instead of a removal tool 100 (see description (c)).
- a complete photo of the 122 face or of circular rings of the 122 face can be taken.
- a photo or video camera (or a plurality of photo or video cameras) is placed as an image recording device 124 in one or more openings in the drill head 150, for example a rake opening, manhole, instead of removal tools 100 or on recesses specially created for the image recording device 124.
- the drill head 150 is then slowly rotated either clockwise or counterclockwise (see reference number 161), and photos are taken at short intervals at the same time or a video is taken at the same time, for example until the drill head 150 has completely rotated once.
- the number of cameras that is needed to get one Obtaining a complete picture of the entire face 122 (or a region of interest of the face 122) depends on the angle of the objective and whether and, if so, how far the drill head 150 is retracted (for example, completely against the face 122 or a predetermined distance withdrawn from, for example, 1.5m).
- Figure 6 shows an arrangement of four cameras as image recording device 124 for almost completely covering a working face 122 according to an exemplary embodiment of the invention.
- the camera arrangement shown allows four ring-shaped images 600 including small overlaps 602 to be recorded.
- the areas of overlaps 602 can in particular be used to compose the individual images without artefacts.
- Figure 7 shows an arrangement of a camera as image recording device 124, a light source 700 (here in the form of an LED array) and a magnet holder 702 for placement on a drill head 150 of a tunnel boring machine 180 according to an exemplary embodiment of the invention.
- the image recording device 124 can be fastened in different ways.
- a simple and user-friendly variant is to provide the camera including the light source 700 with the magnet holder 702 for joint placement on the drill head 150.
- Figure 8 shows a mounting bracket 702 for a camera as an image recording device 124, light sources 700 and inclination sensors 800 for an arrangement 120 for generating an image of a working face 122 according to an exemplary embodiment of the invention.
- FIG. 8 shows such a mounting bracket 702, which can be attached in maintenance layers in a manhole.
- strong light sources 700 not shown
- Inclinometer / inclination sensors 800 placed, which enable automated alignment of the later photos and / or videos.
- a preferred embodiment consists of correspondingly integrating the image recording device 124 from the outset in the design into the drill head 150.
- Figure 9 shows images or video frames 900 that overlap and, according to an exemplary embodiment of the invention, are combined to form an overall image by means of digital image processing.
- Figure 9 shows schematically the overlapping pictures, which are put together in the following.
- Figure 10 shows a section 1000 of a circular ring as an image of an area of a working face 122 which, according to an exemplary embodiment, was composed of several individual video frames.
- the assembly into an overall picture can be done using various methods (for example pixel or texture oriented).
- a cross-correlation method in the frequency domain correlation of the Fourier-transformed images
- Figure 10 shows the section 1000 of a circular ring, which is the result of a plurality of individual video frames put together. Small-scale geological features are clearly visible. With further processing steps, a spatial relief of the face 122 can also be created.
- Figure 11 shows contour lines 1102 over a 3D-reconstructed part of a working face 122 (determined with an arrangement 120 according to FIG Figure 13 ).
- Figure 12 shows two successively obtained recordings 1202, 1204 with overlap, which contain SIFT interest points (scale-invariant feature transform, i.e. scale-invariant feature transformation) marked with symbols (ring / cross) and their assignment over both images (determined with an arrangement 120 according to FIG Figure 14 ).
- SIFT interest points scale-invariant feature transform, i.e. scale-invariant feature transformation
- Figure 13 shows a drilling head 150 of a tunnel boring machine 180 adjacent to a working face 122 according to an exemplary embodiment of the invention, in which three-dimensional images of the working face 122 are generated by means of two image acquisition units.
- Figure 13 shows a side view of the drill head 150 in a simplified representation.
- the image recording device 124 has two image recording units which are designed to record image data from sections 600 of the face 122 which overlap at different times.
- An overlap area of the overlapping sections 600 is identified by reference number 601.
- the image processing device 126 is set up to process the image data of the sections 600 that at least overlap at any time in such a way that a three-dimensional relief image of at least a part of the overlapping sections 600 is reconstructed as the image (see Figure 11 ).
- the image recording device 124 used for the 3D reconstruction can use a stereo system, with which images are recorded synchronously by means of the two image recording units of the (at least partially) the same area of the face 122 during a rotation of the tunnel boring machine 180.
- the image recording device 124 is fixedly connected to the rotating drill head 150 during the recording.
- the images can be created with uniform illumination using artificial light generated by light sources (not shown) from openings in the drill head 150 to the face 122.
- the images obtained at the same time are rectified, for example, using an inner and outer camera orientation known from a calibration Images determined. Both contain specific information for the image acquisition units, such as their focal length, position of the main image point, translation vector and rotation between the image acquisition units.
- the position of corresponding image contents can be determined by means of stereo matchers via the contrast of existing image contents, and compare the lines of the left image with the same lines of the right image from the stereo system for similar image contents. Similarities can be calculated, for example, using calculation methods such as SAD (Sum of Absolute Difference), where minima of the differences between pixel values lead to image assignment.
- SAD Sud of Absolute Difference
- a dense three-dimensional colored point cloud from at least parts of the face 122 can be generated. This allows the differentiation of different lithologies occurring in the face 122 to determine their area and proportion.
- the three-dimensional reconstructed point cloud enables the face image to be supplemented with isohypses.
- FIG. 1100 Figure 11 An example is shown in Figure 1100 Figure 11 , A display with a color assignment of heights is also possible.
- Figure 14 shows a drilling head 150 of a tunnel boring machine 180 adjacent to a face 122 (see Figure 1 ) according to an exemplary embodiment of the invention.
- the face face 122 can be used by means of a co-rotating image recording unit as the image recording device 124 for recording data of overlapping sections 600, 600 '(see Figure 1 ) three-dimensional images of the face 122 are generated.
- Reference numeral 600 denotes a section which is recorded when the co-rotating image recording unit is in a first position.
- FIG. 14 shows a top view of the drill head 150 in a simplified representation (for example, the removal tools 100 attached to the drill head 150 are not shown).
- the image recording device 124, 124 ' has a single image recording unit which, during the rotation of the drilling head 150, is designed to record image data of sections 600, 600' of the working face 122 one after the other in time.
- the image recording unit is shown with solid lines.
- the image recording unit is shown with dashed lines.
- the image processing device 126 (not shown, see Figure 1 ) is set up for processing the image data of the overlapping sections 600, 600 'recorded at different times in such a way that a three-dimensional relief image of at least part of the overlapping sections 600, 600' is reconstructed as the image.
- a camera unit is provided as the image recording device 124, 124 'for 3D reconstruction, images obtained one after the other being used for 3D reconstruction.
- the time interval between the respective recordings during the rotary movement of the drilling head 150 of the tunnel boring machine 180 causes a translation and rotation of the image acquisition unit. This causes the image sequence to partially overlap.
- points of interest / features can be extracted using methods such as FAST, SIFT, SURF (Speeded Up Robust Features, "accelerated, robust features”) as well as other methods of image processing, which are assigned to one another by means of suitable automatic matching algorithms and thus for a 3D Reconstruction can be triangulated can.
- a representation of successfully matched SIFT interest points for two successive recordings is shown in Figure 1200 Figure 12 ,
- Figure 15 shows one to a face 122 (see Figure 1 ) adjacent drill head 150 of a tunnel boring machine 180 (see Figure 1 ) according to an exemplary embodiment of the invention.
- a face 122 see Figure 1
- a pattern generation device shown in a first position with reference number 1500 and in a second position with reference number 1500 '.
- Figure 15 again shows a top view of the drill head 150 in a simplified representation.
- the image recording device (again identified at a first position by reference symbol 124 and at a second position by reference symbol 124 ') has an image recording unit which, during the rotation of the drilling head 150, for recording image data of sections 600, 600' in chronological succession. (please refer Figure 14 ) the face 122 is formed.
- the arrangement 120 also has the pattern generation device 1500, 1500 'for generating a respective pattern of electromagnetic radiation on at least a portion of the sections 600, 600' during the acquisition of the image data.
- the image recording unit and the pattern generation device 1500, 1500 'rigidly coupled therewith are shown with solid lines.
- the image processing device 126 (see Figure 1 ) is set up for processing the image data of the sections 600, 600 'in such a way using the pattern or the patterns as association information that a three-dimensional relief image of at least part of the sections 600, 600' is reconstructed as the image.
- an image recording device 124 for 3D reconstruction can be used for the purpose Independent of the visual contrast of the face 122 use a strip projector.
- An associated pattern generating device 1500, 1500 ' is formed from a stripe projector, which has a predefined regular or randomly generated areal pattern (in the same or different electromagnetic frequency ranges as the visible light, whereby a separate sensor device for pattern detection and not shown in the figure can be provided ) throws. These patterns can be captured using a calibrated stereo system. These images can be processed for 3D reconstruction using image assignment methods.
- the pattern generation device 1500, 1500 ' can be set up to generate a pattern which can be detected by the image recording device 124, 124', in particular laser illumination, and can be positioned relative to the image recording device 124, 124 'in a previously known manner (not shown).
- the image processing device 126 can then be set up to process the image data of the sections 600, 600 'in such a way, using the patterns and the known positioning as association information, that a three-dimensional relief image of at least part of the sections 600, 600' is reconstructed as the image.
- the image recording device 124, 124 ' can thus be equipped with a light section method for 3D reconstruction, which uses a laser line as a signal.
- the image recording device 124, 124 ' is then composed, for example, of laser lighting and a camera. Both are aligned at a certain angle to each other and the laser line can be detected as a height profile in the camera image.
- the frequency of the profile recording can be matched to the rotation of the tunnel boring machine 180 in such a way that 3D reconstruction is possible by means of a dense point cloud.
- the combination with the visual recording of the face 122 takes place via a calibration step, which brings visual information and the results of the height profile recording to congruence.
- a similar image capture device 124, 124 ' accordinging to yet another
- the exemplary embodiment of the invention can be a profile scanner that replaces laser lighting and the associated camera.
- Techniques such as spectroscopy using handheld devices can be used for analysis purposes in order to achieve an assignment using quartz or mafic indices based on the different emissivity, for example in LWIR (long wavelength infrared).
Landscapes
- Engineering & Computer Science (AREA)
- Mining & Mineral Resources (AREA)
- Life Sciences & Earth Sciences (AREA)
- Geology (AREA)
- Physics & Mathematics (AREA)
- General Life Sciences & Earth Sciences (AREA)
- Geochemistry & Mineralogy (AREA)
- Environmental & Geological Engineering (AREA)
- Fluid Mechanics (AREA)
- Geophysics (AREA)
- Earth Drilling (AREA)
- Image Processing (AREA)
Description
- Die Erfindung betrifft eine Anordnung zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust eines Gebirges, eine Tunnelbohrmaschine und ein Verfahren zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust eines Gebirges.
- Eine Tunnelbohrmaschine ist eine Maschine, die zum Bau von Tunneln eingesetzt wird. Bauteile einer Tunnelbohrmaschine sind ein Abbauschild mit Vorschub- und Verspanneinrichtungen, Einrichtungen für den Einbau von Stütz- und Ausbaumaßnahmen, Einrichtungen zum Materialabtransport, eine Versorgungseinheit (Strom, Druckluft, Bewetterung, Wasser), und Transporteinrichtungen für Ausbruchsmaterial, Stützmittel und Ausbaumaterialien. Ein frontseitiger Bohrkopf einer Tunnelbohrmaschine ist mit Abbauwerkzeugen zum Lösen eines Gebirges versehen.
- Die geologische Dokumentation der Ortsbrust ist wesentlich im Tunnelbau. Bei maschinellen Vortrieben, wie im Falle einer Tunnelbohrmaschine, ist eine solche Dokumentation nur sehr eingeschränkt möglich, weil der Bohrkopf der Tunnelbohrmaschine mechanisch im Weg ist und so visuelle Begutachtungen nur äußerst eingeschränkt möglich sind.
Herkömmlich blicken Geologen bzw. Geotechniker durch kleine Öffnungen auf die Ortsbrust und erzeugen davon Fotos und/oder Skizzen. Vereinzelt wird der Bohrkopf ein Stück weit zurückgezogen, sodass man größere Teile der Ortsbrust abfotografieren kann, allerdings aus äußerst ungünstigen Winkeln. Mit dem Zurückziehen des Bohrkopfes ist zudem ein hoher Aufwand verbunden. -
offenbart ein fotografisches Bearbeitungssystem für eine Bohr-Abbildung einer Tunnelbohrmaschine. Ein Bohrkopf einer Tunnelbohrmaschine weist schlitzförmige Öffnungen auf. An dem Bohrkopf sind Kameras angebracht. Diese Kameras rotieren mit dem Bohrkopf zum Scannen der Ortsburst. Daraus resultiert eine kontinuierliche kreisförmige Abbildung der Ortsbrust. Weiterhin werden diese Daten mittels eines Analysecomputers bearbeitet, so dass die Bilder nachbearbeitet werden können.JP H11-36785 A - Es ist eine Aufgabe der vorliegenden Erfindung, im Zusammenhang mit einer Tunnelbohrmaschine in einfacher und fehlerrobuster Weise großflächige Bilddaten einer Ortsbrust zu gewinnen.
- Diese Aufgabe wird durch die Gegenstände mit den Merkmalen gemäß den unabhängigen Ansprüchen gelöst. Weitere Ausführungsbeispiele sind in den abhängigen Ansprüchen gezeigt.
- Gemäß der vorliegenden Erfindung ist eine Anordnung zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust (d.h. diejenige Begrenzungsfläche eines Gebirges, die in Vortriebsrichtung einer Tunnelbohrmaschine dieser gegenüber liegt, und an der ein mit der Tunnelbohrmaschine bewirkter Vortrieb stattfindet oder stattgefunden hat) eines Gebirges geschaffen, wobei die Anordnung einen rotierfähigen bzw. drehfähigen Bohrkopf für die Tunnelbohrmaschine zum Abtragen von Gesteinsmaterial der Ortsbrust, eine Bildaufnahmeeinrichtung, die zum Aufnehmen von Bilddaten zumindest eines Abschnitts der Ortsbrust an dem Bohrkopf angebracht ist, und eine Bildverarbeitungseinrichtung aufweist, die (insbesondere während des Rotierens des Bohrkopfes) mittels der Bildaufnahmeeinrichtung aufgenommene Bilddaten von mehreren Abschnitten der Ortsbrust verarbeitet und daraus ein zusammenhängendes Bild zumindest des Bereiches der Ortsbrust rekonstruiert bzw. erzeugt. Die Bildaufnahmeeinrichtung weist eine Mehrzahl von an dem Bohrkopf angebrachten Bildaufnahmeeinheiten, insbesondere Videokameras und/oder Fotokameras, auf, die zum Aufnehmen von Bilddaten von Abschnitten der Ortsbrust ausgebildet sind. Die Mehrzahl von Bildaufnahmeeinheiten ist derart an dem Bohrkopf angebracht, dass die von diesen Bildaufnahmeeinheiten abgebildeten Abschnitte der Ortsbrust unter Ausbildung von Überlappungsabschnitten zumindest teilweise überlappen. Die Bildaufnahmeeinheiten sind eingerichtet, die Abschnitte bei einer Drehung des Bohrkopfes aufzunehmen. Die Bildverarbeitungseinrichtung ist zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte, wobei mittels einer Kontrastanalyse der Überlappungsabschnitte entsprechende Teilabschnitte der Ortsbrust auf den unterschiedlichen Abschnitten ermittelt und einander zugeordnet werden.
- Gemäß der vorliegenden Erfindung ist ferner eine Anordnung zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust (d.h. diejenige Begrenzungsfläche eines Gebirges, die in Vortriebsrichtung einer Tunnelbohrmaschine dieser gegenüber liegt, und an der ein mit der Tunnelbohrmaschine bewirkter Vortrieb stattfindet oder stattgefunden hat) eines Gebirges geschaffen, wobei die Anordnung einen rotierfähigen bzw. drehfähigen Bohrkopf für die Tunnelbohrmaschine zum Abtragen von Gesteinsmaterial der Ortsbrust, eine Bildaufnahmeeinrichtung, die zum Aufnehmen von Bilddaten zumindest eines Abschnitts der Ortsbrust an dem Bohrkopf angebracht ist, und eine Bildverarbeitungseinrichtung aufweist, die (insbesondere während des Rotierens des Bohrkopfes) mittels der Bildaufnahmeeinrichtung aufgenommene Bilddaten von mehreren Abschnitten der Ortsbrust verarbeitet und daraus ein zusammenhängendes Bild zumindest des Bereiches der Ortsbrust rekonstruiert bzw. erzeugt. Gemäß der Anordnung weist die Bildaufnahmeeinrichtung nur eine an dem Bohrkopf angebrachte Bildaufnahmeeinheit, insbesondere eine Videokamera oder eine Fotokamera, auf, die zum Aufnehmen von Bilddaten von Abschnitten der Ortsbrust ausgebildet ist. Die Bildaufnahmeeinheit ist derart an dem Bohrkopf angebracht, dass die von dieser Bildaufnahmeeinheit abgebildeten Abschnitte der Ortsbrust unter Ausbildung von Überlappungsabschnitten zumindest teilweise überlappen, wobei die Bildaufnahmeeinheit eingerichtet ist, die Abschnitte bei einer Drehung des Bohrkopfes aufzunehmen. Die Bildverarbeitungseinrichtung ist zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte, wobei mittels einer Kontrastanalyse der Überlappungsabschnitte entsprechende Teilabschnitte der Ortsbrust auf den unterschiedlichen Abschnitten ermittelt und einander zugeordnet werden.
- Gemäß der vorliegenden Erfindung ist ferner eine Tunnelbohrmaschine zum Abtragen von Gesteinsmaterial einer Ortsbrust eines Gebirges bereitgestellt, wobei die Tunnelbohrmaschine eine Anordnung mit den oben beschriebenen Merkmalen aufweist.
- Gemäß der vorliegenden Erfindung ist ferner ein Verfahren zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust eines Gebirges bereitgestellt, wobei bei dem Verfahren ein Bohrkopf einer Tunnelbohrmaschine zum Abtragen von Gesteinsmaterial der Ortsbrust rotiert wird, Bilddaten eines jeweiligen Abschnitts der Ortsbrust mittels einer an dem Bohrkopf angebrachten Bildaufnahmeeinrichtung aufgenommen werden (insbesondere während der Bohrkopf rotiert, wobei der Bohrkopf vorzugsweise während der Aufnahme nicht vorgeschoben wird, d.h. die Aufnahme nicht während des Bohrbetriebs durchgeführt wird), und die (insbesondere während des Rotierens des Bohrkopfes) mittels der Bildaufnahmeeinrichtung aufgenommenen Bilddaten von mehreren Abschnitten der Ortsbrust verarbeitet werden, wodurch ein Bild zumindest des Bereiches der Ortsbrust rekonstruiert bzw. generiert wird. Die Bildaufnahmeeinrichtung weist eine Mehrzahl von an dem Bohrkopf angebrachten Bildaufnahmeeinheiten, insbesondere Videokameras und/oder Fotokameras, auf, die zum Aufnehmen von Bilddaten von Abschnitten der Ortsbrust ausgebildet sind. Die Mehrzahl von Bildaufnahmeeinheiten ist derart an dem Bohrkopf angebracht, dass die von diesen Bildaufnahmeeinheiten abgebildeten Abschnitte der Ortsbrust unter Ausbildung von Überlappungsabschnitten zumindest teilweise überlappen. Die Bildaufnahmeeinheiten sind eingerichtet, die Abschnitte bei einer Drehung des Bohrkopfes aufzunehmen. Die Bildverarbeitungseinrichtung ist zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte, wobei mittels einer Kontrastanalyse der Überlappungsabschnitte entsprechende Teilabschnitte der Ortsbrust auf den unterschiedlichen Abschnitten ermittelt und einander zugeordnet werden.
- Gemäß der vorliegenden Erfindung ist ferner ein Verfahren zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine bearbeiteten Ortsbrust eines Gebirges bereitgestellt, wobei bei dem Verfahren ein Bohrkopf einer Tunnelbohrmaschine zum Abtragen von Gesteinsmaterial der Ortsbrust rotiert wird, Bilddaten eines jeweiligen Abschnitts der Ortsbrust mittels einer an dem Bohrkopf angebrachten Bildaufnahmeeinrichtung aufgenommen werden (insbesondere während der Bohrkopf rotiert, wobei der Bohrkopf vorzugsweise während der Aufnahme nicht vorgeschoben wird, d.h. die Aufnahme nicht während des Bohrbetriebs durchgeführt wird), und die (insbesondere während des Rotierens des Bohrkopfes) mittels der Bildaufnahmeeinrichtung aufgenommenen Bilddaten von mehreren Abschnitten der Ortsbrust verarbeitet werden, wodurch ein Bild zumindest des Bereiches der Ortsbrust rekonstruiert bzw. generiert wird. Gemäß dem Verfahren weist die Bildaufnahmeeinrichtung nur eine an dem Bohrkopf angebrachte Bildaufnahmeeinheit, insbesondere eine Videokamera oder eine Fotokamera, auf, die zum Aufnehmen von Bilddaten von Abschnitten der Ortsbrust ausgebildet ist. Die Bildaufnahmeeinheit ist derart an dem Bohrkopf angebracht, dass die von dieser Bildaufnahmeeinheit abgebildeten Abschnitte der Ortsbrust unter Ausbildung von Überlappungsabschnitten zumindest teilweise überlappen, wobei die Bildaufnahmeeinheit eingerichtet ist, die Abschnitte bei einer Drehung des Bohrkopfes aufzunehmen. Die Bildverarbeitungseinrichtung ist zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte, wobei mittels einer Kontrastanalyse der Überlappungsabschnitte entsprechende Teilabschnitte der Ortsbrust auf den unterschiedlichen Abschnitten ermittelt und einander zugeordnet werden.
- Gemäß einem Ausführungsbeispiel erfolgt eine automatisierte fotographische und/oder videobasierte Ortsbrustdokumentation bei einem Tunnelbohrmaschinen-Vortrieb. Hierfür werden erfindungsgemäß zum Beispiel vollständige Abbildungen bzw. Kreisringe der Ortsbrust erzeugt. Dazu wird eine Kamera oder eine andere Bildaufnahmeeinrichtung an einem Bohrkopf montiert, zum Beispiel in Öffnungen des Bohrkopfes platziert, und es werden Bilddaten (zum Beispiel ein Video bzw. Bilder in rascher Reihenfolge) aufgenommen, vorzugsweise während sich der Bohrkopf dreht. Anschließend werden die einzelnen Bilddaten (zum Beispiel Videoframes oder Fotos) mittels Methoden der insbesondere digitalen Bildverarbeitung zu einem Gesamtbild zusammengefügt. Die Qualität der erzeugten Bilder hat sich als sehr gut erwiesen, sodass sie den hohen Qualitätsansprüchen für die geologische Dokumentation gerecht werden können. Dadurch ist es möglich, mit sehr geringem Zeitbedarf (zum Beispiel innerhalb von ca. 10 Minuten) Bilddaten zu erzeugen, aus denen in weiterer Folge ein vollständiges, unverzerrtes Ortsbrustbild abgeleitet werden kann. Die gesamte Ortsbrust kann oder große bzw. gewünschte Teile der Ortsbrust können vollständig dokumentiert werden. Das Verfahren ist sehr schnell und praxistauglich. Beispielsweise kann eine Kamera als Bildaufnahmeeinrichtung in Wartungsschichten manuell im Bohrkopf platziert werden. Alternativ ist auch eine dauerhafte bzw. feste Implementierung der Bildaufnahmeeinrichtung (zum Beispiel von Kameras) in einen Bohrkopf möglich und sehr effizient.
- Im Weiteren werden zusätzliche exemplarische Ausführungsbeispiele der Anordnung, der Tunnelbohrmaschine und des Verfahrens beschrieben.
- Zudem kann eine regelmäßige oder kontinuierliche optische Analyse der Ortsbrust Zusatzinformationen bereitstellen, die für eine Verbesserung oder Optimierung der Steuerung der Tunnelbohrmaschine dienlich sind.
- Gemäß einem Ausführungsbeispiel kann die Aufnahme der Bilddaten (und gegebenenfalls deren Auswertung) in Wartungsschichten oder während kurzen Unterbrechungen des Bohrbetriebs durchgeführt werden. Lange Unterbrechungen des Bohrbetriebs treten dadurch allerdings nicht auf.
- Gemäß einem Ausführungsbeispiel können Bilddaten unterschiedlicher räumlicher Abschnitte der Ortsbrust von einer oder mehreren Bildaufnahmeeinheiten der Bildaufnahmeeinrichtung aufgenommen werden, und zwar bei einer bestimmten Winkelstellung oder bei mehreren unterschiedlichen Winkelstellungen des Bohrkopfes. Dies bedeutet, dass in einer Alternative der Bohrkopf während des Aufnehmens der Bilddaten ruht und zum Beispiel mehrere Bildaufnahmeeinheiten an unterschiedlichen Positionen des Bohrkopfes bei ruhendem Bohrkopf von verschiedenen Abschnitten der Ortsbrust Bilddaten aufnehmen. Ferner kann der Bohrkopf während des Aufnehmens der Bilddaten rotieren, so dass ein und dieselbe Bildaufnahmeeinheit zu unterschiedlichen Zeitpunkten während des Rotierens und damit bei unterschiedlichen Winkelstellungen des Bohrkopfes Bilddaten unterschiedlicher örtlicher Abschnitte der Ortsbrust aufnimmt.
- Gemäß einem Ausführungsbeispiel kann der Bohrkopf mindestens eine Öffnung, insbesondere eine Durchgangsöffnung (zwischen einem tunnelbohrmaschinenseitigen Ende und einem ortsbrustseitigen Ende des Bohrkopfes) aufweisen. Die Bildaufnahmeeinrichtung kann zum Aufnehmen der Bilddaten durch die Durchgangsöffnung hindurch an dem Bohrkopf angebracht sein. Indem eine oder mehrere Öffnungen an bzw. in dem Bohrkopf dazu verwendet werden, eine oder mehrere Bildaufnahmeeinheiten der Bildaufnahmeeinrichtung dauerhaft oder vorübergehend zu befestigen bzw. sogar in ihrem Inneren aufzunehmen, kann die Bildaufnahmeeinrichtung in der oder den Öffnungen geschützt vor den rauen mechanischen Bedingungen in einem zu bohrenden Tunnel geschützt werden. Gleichzeitig führt das Integrieren der Bildaufnahmeeinrichtung in Öffnungen des Bohrkopfes dazu, dass der Bohrkopf der Aufnahme von Bilddaten der Ortsbrust mechanisch nicht im Wege steht.
- Gemäß einem Ausführungsbeispiel kann die mindestens eine Öffnung ausgewählt sein aus einer Gruppe, die besteht aus einem Mannloch, einer Ausnehmung für ein Abbauwerkzeug, einem Räumerschlitz und einer speziell für die Aufnahme der Bildaufnahmeeinrichtung konfigurierten Ausnehmung. Als Mannloch wird ein Einstieg durch den Bohrkopf verstanden, in dem sich Menschen nur sehr selten aufhalten müssen, zum Beispiel zu Reparatur- oder Wartungszwecken. Möglich sind runde, ovale oder rechteckige Querschnitte mit einer lichten Weite von zum Beispiel 400 mm bis 600 mm, so dass ein durchschnittlich gebauter Mensch ohne große Schwierigkeiten hindurchsteigen kann. Eine Bildaufnahmeeinheit kann in einem solchen Mannloch (zum Beispiel abnehmbar) montiert werden und zum Aufnehmen der Bildaufnahmeeinheit dienen, wenn das Mannloch nicht anderweitig benötigt wird. Als Abbauwerkzeuge können drehfähig gelagerte Disken mit Schneidkanten eingesetzt werden, welche beim Drehen des Bohrkopfes selbst in Rotation versetzt werden und dann Material von der Ortsbrust abtragen können. Solche Abbauwerkzeuge können in dafür vorgesehene Ausnehmungen mit Halterungen am Bohrkopf montiert werden. Anstelle eines Abbauwerkzeugs kann auch eine Bildaufnahmeeinheit in einer solchen Ausnehmung aufgenommen werden, vorübergehend oder dauerhaft. Ein Abfördersystem einer Tunnelbohrmaschine zum Abfördern von abgetragenem Ausbruchmaterial enthält im Bohrkopf angeordnete Räumerschlitze, durch welche unter Einsatz von Räumern das gelöste Bohrgut von der Ortsbrust hinter den Bohrkopf gelangt und dann zum Beispiel über Förderbänder abtransportiert wird. Auch solche Räumerschlitze können zum zumindest teilweisen Unterbringen der Bildaufnahmeeinrichtung eingesetzt werden. Um die Funktion des Bohrkopfes durch das Vorsehen der Bildaufnahmeeinrichtung überhaupt nicht einzuschränken, können auch speziell dafür vorgesehene separate Öffnungen (zum Beispiel Ausnehmungen oder Durchlässe) in dem Bohrkopf gebildet werden.
- Gemäß einem Ausführungsbeispiel kann die mindestens eine Ausnehmung zum zumindest teilweisen Aufnehmen der Bildaufnahmeeinrichtung ausgebildet sein. Wenn die Bildaufnahmeeinrichtung ganz oder teilweise in der Aufnahmeöffnung untergebracht ist, kann sie beschädigungssicher vor unerwünschten Einflüssen der rauen Umgebung während des Bohrens einer Tunnelbohrmaschine in einem Bohrloch geschützt sein.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung ausgewählt sein aus einer Gruppe, die besteht aus mindestens einer Videokamera zum Aufnehmen von Videodaten von mindestens einem Abschnitt der Ortsbrust, und aus mindestens einer Fotokamera zum Aufnehmen von Fotos mindestens eines Abschnittes der Ortsbrust. Mit einer Videokamera kann eine durchgehende Videoaufnahme von Abschnitten der Ortsbrust während des Rotierens des Bohrkopfes aufgenommen werden. Dadurch steht eine breite Datenbasis zum Rekonstruieren des Bildes der Ortsbrust zur Verfügung. Mit einer Fotokamera können mehrere Einzelbilder von Abschnitten der Ortsbrust während des Rotierens des Bohrkopfes aufgenommen werden. Die Aufnahme mehrerer Einzelbilder erlaubt die Reduktion der zu übermittelnden Datenmenge.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eine Mehrzahl von Bildaufnahmeeinheiten aufweisen, von denen jede zum Aufnehmen von Bilddaten eines jeweiligen Abschnitts der Ortsbrust angebracht ist. Zum Beispiel können die einzelnen Bildaufnahmeeinheiten Video- und/oder Fotokameras sein, die an unterschiedlichen Radien des Bohrkopfes montiert sein können, so dass während des Rotierens des Bohrkopfs jede der Bildaufnahmeeinheiten zum Beispiel einen kreisringförmigen Abschnitt der Ortsbrust aufnehmen kann. Das Zusammensetzen der Ringbilder zu einem Kreisbild der Ortsbrust ist dann bei Kenntnis der Montagepositionen der einzelnen Bildaufnahmeeinheiten möglich.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eingerichtet sein, Bilddaten der Ortsbrust während einer vorbestimmten Winkeldrehung des Bohrkopfes (insbesondere während einer vollständigen Umdrehung des Bohrkopfes) aufzunehmen und der Bildverarbeitungseinrichtung diese Bilddaten zum Rekonstruieren des Bildes zumindest des Bereiches der Ortsbrust bereitzustellen. Zum Beispiel kann nach einer Drehung des Bohrkopfes um 180°, um 360° (oder um mehr als 360°, wenn zur weiteren Fehlerreduktion eine Redundanz gewünscht wird) die Bildaufnahme vorübergehend beendet werden und ein entsprechender Datensatz von Bilddaten an die Bildverarbeitungseinheit zur Rekonstruktion des interessierenden Bereiches der Ortsbrust übermittelt werden.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eine Mehrzahl von an dem Bohrkopf angebrachten Bildaufnahmeeinheiten, insbesondere Videokameras und/oder Fotokameras, aufweisen, die zum gleichzeitigen Aufnehmen von unterschiedlichen Bilddaten von unterschiedlichen Abschnitten der Ortsbrust ausgebildet sind. Wenn mehrere Bildaufnahmeeinheiten eingesetzt werden, kann selbst bei geringen Abständen zwischen einer Vorderseite des Bohrkopfes und der Ortsbrust ein im Prinzip unbegrenzt großer Bereich der Ortsbrust in Form eines Bildes dargestellt werden. Hierfür setzt die Bildaufnahmeeinrichtung zusammen mit der Bildverarbeitungseinrichtung die einzelnen Teilbilder entsprechend den von den einzelnen Bildaufnahmeeinheiten aufgenommenen Abschnitten der Ortsbrust zu einem Gesamtbild entsprechend dem Bereich der Ortsbrust von Interesse zusammen.
- Gemäß einem Ausführungsbeispiel kann die Mehrzahl von Bildaufnahmeeinheiten derart an dem Bohrkopf angebracht sein, dass die von diesen Bildaufnahmeeinheiten abgebildeten unterschiedlichen Abschnitte der Ortsbrust zumindest teilweise miteinander überlappen. Die Überlappungsbereiche erlauben der Bildverarbeitungseinrichtung eine fehlerfreie Zusammensetzung der Einzelbilder zu einem Gesamtbild. Auch erlaubt das Vorsehen von Überlappungsbereichen den Ausgleich von Helligkeitsunterschieden zwischen einzelnen Teilbildern, wie sie zum Beispiel durch eine unterschiedlich starke Beleuchtung verschiedener Abschnitte der Ortsbrust hervorgerufen werden können. Farbartefakte wie zum Beispiel diskontinuierliche Farbänderungen an einer Nahtstelle zweier Bildabschnitte auf dem zusammengesetzten Bild können dadurch vermieden oder zumindest unterdrückt werden.
- Gemäß einem Ausführungsbeispiel kann die Bildverarbeitungseinrichtung eingerichtet sein, als den Bereich der Ortsbrust einen Kreisring oder eine Kreisfläche zu rekonstruieren. Zum Beispiel kann bereits mit einer einzigen Bildaufnahmeeinheit, zum Beispiel einer einzigen Videokamera oder Fotokamera, bei einer Drehung des Bohrkopfes ein zusammenhängender Kreisring als abgebildeter Bereich der Ortsbrust visuell dargestellt werden. Ein solcher Kreisring kann für die geologische Dokumentation der Ortsbrust bereits ausreichend aussagekräftig sein. Alternativ können auch mehrere Foto- und/oder Videokameras einzelne, vorzugsweise überlappende, Kreisringe aufnehmen, die dann von der Bildverarbeitungseinrichtung zu einer vollständigen Kreisfläche zusammengesetzt werden können.
- Gemäß einem Ausführungsbeispiel kann die Anordnung eine an dem Bohrkopf angebrachte Leuchtquelle bzw. Lichtquelle zum Beleuchten des von der Bildaufnahmeeinrichtung abgebildeten Abschnitts der Ortsbrust aufweisen. Da es in einem Bohrloch dunkel ist, kann das abschnittsweise Beleuchten von aufzunehmenden Abschnitten der Ortsbrust vorteilhaft sein, um ein aussagekräftiges Bild der Ortsbrust zu erhalten. Alternativ hierzu kann auch eine Fotokamera mit einer Blitzlichtquelle eingesetzt werden. Wenn die Leuchtquelle und die zugehörige Bildaufnahmeeinheit bzw. Bildaufnahmeeinrichtung miteinander starr gekoppelt werden, kann der Beleuchtungsaufwand sehr gering gehalten werden, da bei Rotieren des Bohrkopfes die Leuchtquelle sich mit der Bildaufnahmeeinrichtung bzw. Bildaufnahmeeinheit mitdreht und dadurch automatisch selektiv stets den gerade aufgenommenen Flächenabschnitt der Ortsbrust beleuchtet.
- Gemäß einem Ausführungsbeispiel kann die Anordnung eine zum Aufnehmen der Bildaufnahmeeinrichtung, und insbesondere der Leuchtquelle, und zur Montage an dem Bohrkopf eingerichtete Montagehalterung aufweisen. Durch eine solche Montagehalterung kann anschaulich ein mechanischer Adapter zwischen einer beliebig geformten Bildaufnahmeeinheit bzw. Bildaufnahmeeinrichtung einerseits und einem bereits zur Verfügung stehenden oder speziell ausgebildete Ausnehmung als Aufnahmeraum in dem Bohrkopf geschaffen werden.
- Gemäß einem Ausführungsbeispiel kann die Anordnung einen Neigungssensor aufweisen, der zum Detektieren eines aktuellen Neigungswinkels (insbesondere der Bildaufnahmeeinrichtung bzw. einer oder mehrerer bestimmter Bildaufnahmeeinheiten davon) eingerichtet ist und zum Beispiel an der Montagehalterung oder alternativ direkt an der Bildaufnahmeeinrichtung bzw. einer jeweiligen Bildaufnahmeeinheit angebracht sein kann. Der Neigungssensor kann somit eine Positionierung der Montagehalterung (und damit auch der davon aufgenommenen Bildaufnahmeeinheit) oder direkt der Bildaufnahmeeinrichtung selbst erfassen und an die Bildverarbeitungseinrichtung weitermelden. Solche Neigungsinformation liefert zusätzliche Erkenntnisse über die Art und Weise, wie ein Abbild eines Bereiches der Ortsbrust zu interpretieren bzw. auszuwerten oder zu verarbeiten ist.
- Insbesondere können der Neigungssensor und die Bildverarbeitungseinrichtung derart gekoppelt sein, dass die Bildverarbeitungseinrichtung zum Rekonstruieren des Bildes die den Abschnitten zugeordneten Bilddaten unter Berücksichtigung des von dem Neigungssensor detektierten Neigungswinkels verarbeitet. Dadurch sind Artefakte vermieden, die durch eine Fehlauswertung von Bilddaten resultieren, wenn die Bildaufnahmeeinrichtung von einer unzutreffenden gegenwärtigen Orientierung der Bildaufnahmeeinrichtung beziehungsweise der Bildaufnahmeeinheiten relativ zur Ortsbrust ausgeht.
- Gemäß einem Ausführungsbeispiel kann die Montagehalterung zum Klemmbefestigen und/oder zum magnetischen Befestigen an dem Bohrkopf eingerichtet sein. Durch diese Montagemethoden ist ein schnelles Montieren bzw. Demontieren der Bildaufnahmeeinrichtung am bzw. vom Bohrkopf ermöglicht. Gleichzeitig erlauben diese Montagemethoden eine zuverlässige Befestigung der Bildaufnahmeeinrichtung am Bohrkopf selbst unter den mechanischen Belastungen, wie sie durch die Rotation des Bohrkopfes und den Materialabtrag durch den Bohrkopf während des Betriebs der Tunnelbohrmaschine auftreten. In einem Ausführungsbeispiel, bei dem die Bildaufnahmeeinrichtung auch während des eigentlichen Bohrbetriebs, d.h. während des Abtragens von Material des Gebirges, an dem Bohrkopf montiert bleibt, können derartige mechanische Belastungen auf die Bildaufnahmeeinrichtung einwirken, die mittels der Montagehalterung an dem Bohrkopf aber geschützt montiert sein kann.
- Gemäß einem Ausführungsbeispiel kann das Verarbeiten vorzugsweise durch Unterstützung mittels einer Bildverarbeitungseinrichtung an der Tunnelbohrmaschine oder an einer Nachbearbeitungsstelle, die von der Tunnelbohrmaschine räumlich entfernt ist, durchgeführt werden. Gemäß einer Variante kann somit an der Tunnelbohrmaschine, insbesondere im Inneren des Bohrlochs, d.h. am Ort der Tunnelbohrung, die Nachbearbeitung durchgeführt werden. Dies hat den Vorteil, dass ein Geologe bereits vor Ort Rückschlüsse aus dem Ortsbrustbild ziehen kann und die Steuerung der Tunnelbohrmaschine basierend auf dem ermittelten Bild der Ortsbrust vornehmen kann. Gemäß der anderen Variante kann an einer Nachbearbeitungsstelle, zum Beispiel in einem Büro, die Auswertung der Bilder durchgeführt werden.
- Gemäß einem Ausführungsbeispiel kann das Verarbeiten der Bilddaten derart durchgeführt werden, dass als das Bild ein dreidimensionales Reliefbild zumindest des Bereiches der Ortsbrust rekonstruiert wird. Dementsprechend kann bei der Anordnung die Bildverarbeitungseinrichtung zum derartigen Verarbeiten der Bilddaten eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest des Bereiches der Ortsbrust rekonstruiert wird. Entsprechend kann die Bildaufnahmeeinrichtung eingerichtet sein, zum Rekonstruieren von Reliefbildern ausreichende Bildinformation aufzunehmen. Die Bildauswerteeinrichtung kann entsprechend eingerichtet sein, aus solchen Bilddaten das Reliefbild abzuleiten. Aus den räumlichen Informationen eines Reliefs kann ein Geologe dann weitergehende technische Information ableiten.
- Gemäß einem Ausführungsbeispiel kann die Erzeugung eines dreidimensionalen Reliefbildes unter Verwendung einer Zuordnung von (insbesondere überlappenden) Bildern und der Kenntnis von Parametern (zum Beispiel Positions- und Orientierungsinformationen, Eigenschaften der Bildaufnahmeeinheit(en)) der als Stereosystem konfigurierten Bildaufnahmeeinrichtung (zum Beispiel mehrere Bildaufnahmeeinheiten zum insbesondere gleichzeitigen Aufnehmen von mehreren Bildern oder eine einzige Bildaufnahmeeinheit, die sich mit dem Drehen des Bohrkopfes dreht und dabei zeitlich hintereinander miteinander zu verknüpfende Bilder aufnimmt) erfolgen.
- Gemäß einem Ausführungsbeispiel kann die Bildverarbeitungseinrichtung zum derartigen Verarbeiten von Bilddaten unterschiedlicher Abschnitte der Ortsbrust eingerichtet sein, dass mittels einer Kontrastanalyse (d.h. einer Bestimmung von Kontrastinformation für Bilddaten der Abschnitte und einem Vergleich der für unterschiedliche Bilddaten bestimmten Kontrastinformationen, um einander entsprechende Bereiche der Ortsbrust auf unterschiedlichen, aber zum Beispiel teilweise überlappenden Abschnitten zu identifizieren) einander entsprechende Teilabschnitte der Ortsbrust auf den unterschiedlichen Abschnitten ermittelt und einander zugeordnet werden. Anders ausgedrückt kann eine Abfolge von hellen und dunklen Bereichen in einem jeweiligen Abschnitt zugeordneten Bilddaten untersucht werden und Bereiche gleicher oder entsprechender Kontraste oder Kontrastverhältnisse identischen Bereichen der Ortsbrust in überlappenden Abschnitten zugeordnet werden. So kann aus einzelnen Bildern aus unterschiedlichen Perspektiven räumliche Bildinformation abgeleitet werden.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eine Mehrzahl von Bildaufnahmeeinheiten (zum Beispiel mehrere Kameras) aufweisen, die zum Aufnehmen von Bilddaten von zu unterschiedlichen Zeitpunkten jeweils zumindest überlappenden, insbesondere identischen, Abschnitten der Ortsbrust ausgebildet sind. Die Bildverarbeitungseinrichtung kann zum derartigen Verarbeiten der Bilddaten der zu jedem Zeitpunkt zumindest überlappenden Abschnitte eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Abschnitte rekonstruiert wird. Gemäß einer solchen Ausgestaltung nehmen mehrere Bildaufnahmeeinheiten (zum Beispiel mehrere Kameras an unterschiedlichen Positionen des Bohrkopfes) insbesondere simultan ihren jeweiligen Positionen und Orientierungen zugeordnete Bilder von unterschiedlichen Abschnitten der Ortsbrust auf. Wenn die Bildaufnahmeeinheiten so angeordnet sind, dass die von Ihnen erfassten Raumbereiche ein gemeinsames Subvolumen beinhalten, können die einzelnen Bilder, die auch unterschiedlichen Blickrichtungen entsprechen, unter Gewinnung von dreidimensionaler Information zusammengesetzt bzw. zusammengestückelt werden. Insbesondere die aus unterschiedlichen Richtungen aufgenommenen Überlappungsbereiche beinhalten einander ergänzende sterische Information.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eine, insbesondere nur eine, Bildaufnahmeeinheit aufweisen, die während des Rotierens des Bohrkopfes zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von zumindest überlappenden Abschnitten der Ortsbrust ausgebildet ist. Die Bildverarbeitungseinrichtung kann zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Abschnitte eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Abschnitte rekonstruiert wird. Gemäß dieser Ausgestaltung kann eine einzige Bildaufnahmeeinheit ausreichend sein, um eine kompakte Anordnung zu schaffen (auch gemäß der beschriebenen Ausgestaltung sind alternativ auch mehrere Bildaufnahmeeinheiten möglich). Eine solche Bildaufnahmeeinheit kann aufgrund ihrer festen Montage an dem Bohrkopf mit dem Bohrkopf mitdrehen, so dass sie bildtechnisch fortlaufend unterschiedliche Oberflächenbereiche der Ortsbrust abtastet. Werden die Bilder in ausreichend kurzen zeitlichen (und folglich räumlichen) Abständen aufgenommen, so können unmittelbar aufeinanderfolgende aufgenommene Bilder einen überlappenden Bereich der Ortsbrust enthalten, was wiederum die Gewinnung von dreidimensionaler Bildinformation und eine korrekte Zusammensetzung der Einzelbilder ermöglicht. Durch Zuordnung von Ortsbrustbereichen auf Bildern, die durch ein und dieselbe Bildaufnahmeeinheit erzeugt worden sind, können im Gegensatz zu Bildern von unterschiedlichen Bildaufnahmeeinheiten (mit etwas anderen physikalischen Eigenschaften) ggf. auftretende Artefakte vermieden werden.
- Gemäß einem Ausführungsbeispiel kann die Bildaufnahmeeinrichtung eine, insbesondere nur eine, Bildaufnahmeeinheit aufweisen, die während des Rotierens des Bohrkopfes zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von Abschnitten der Ortsbrust ausgebildet ist. Die Anordnung kann ferner eine Mustererzeugungseinrichtung zum Erzeugen eines jeweiligen Musters von elektromagnetischer Strahlung (zum Beispiel sichtbares Licht, Ultraviolett, Infrarot, etc.) auf zumindest einem Teil der Abschnitte während des Aufnehmens der Bilddaten aufweisen. Die Bildverarbeitungseinrichtung kann zum derartigen Verarbeiten der Bilddaten der Abschnitte unter Verwendung des Musters oder der Muster als Zuordnungsinformation eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte rekonstruiert wird. Die den Einzelbildern aufgeprägten Muster elektromagnetischer Strahlung können also die Zuordnung der Einzelbilder zueinander ermöglichen oder erleichtern. Zur Unterscheidung sichtbarer Muster von Ortsbrustbildinformationen kann einmal eine Aufnahme mit und einmal eine Aufnahme ohne Mustererzeugung gemacht werden.
- Gemäß einem Ausführungsbeispiel kann die Mustererzeugungseinrichtung zum Erzeugen des Musters in einem Wellenlängenbereich außerhalb sichtbaren Lichts (zum Beispiel im Infrarotbereich, im Ultraviolettbereich, etc.) bzw. in einem Wellenlängenbereich außerhalb eines Empfindlichkeitsbereiches der Bildaufnahmeeinheit(en) eingerichtet sein. Die Anordnung kann ferner eine Sensoreinrichtung zum Erfassen des Musters in dem Wellenlängenbereich außerhalb sichtbaren Lichts aufweisen. Gemäß dieser Ausgestaltung ist das Muster auf den Bildern der Bildaufnahmeeinrichtung, die zum Beispiel im optisch sichtbaren Bereich aufgenommen werden können, nicht zu sehen und stört somit die artefaktfreie Erzeugung von Bildinformationen nicht. Eine in dem Wellenlängenbereich außerhalb des sichtbaren Lichts sensitive Sensoreinrichtung (zum Beispiel eine Infrarotkamera, wenn die Muster im IR-Bereich erzeugt werden) hingegen kann die Muster erfassen, so dass diese in die Auswertung einfließen können. Hier ist auch der Einsatz von Profilscannern möglich. Ist die relative Orientierung zwischen Sensoreinrichtung, Musterzeugungseinrichtung und Bildaufnahmeeinrichtung bekannt, so können die Muster, die den einzelnen Bildern zugeordnet sind, zum korrekten Zusammensetzen der Bilder unter Ableitung dreidimensionaler Bildinformation herangezogen werden.
- Gemäß einem anderen Ausführungsbeispiel kann die Mustererzeugungseinrichtung zum Erzeugen eines mittels der Bildaufnahmeeinrichtung erfassbaren Musters, insbesondere einer Laserbeleuchtung, eingerichtet sein und relativ zu der Bildaufnahmeeinrichtung in vorbekannter Weise positioniert sein. Die Bildverarbeitungseinrichtung kann zum derartigen Verarbeiten der Bilddaten der Abschnitte unter Verwendung der Muster und der vorbekannten Positionierung als Zuordnungsinformation eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte rekonstruiert wird. Gemäß dieser Ausgestaltung ist es also möglich, dass die erzeugten Muster im sichtbaren Bereich bzw. in einem von der Bildaufnahmeeinrichtung detektierbaren Wellenlängenbereich liegen, insbesondere mittels eines Lasers erzeugt werden. Bei bekannter Orientierung eines solchen Lasers relativ zur Bildaufnahmeeinrichtung kann wiederum die Musterinformation zum Generieren eines dreidimensionalen Reliefs der Ortsbrust verwendet werden, um die Einzelbilder entsprechend miteinander zu verbinden und/oder um 3D-Information zu gewinnen. Zum Beispiel kann als Muster eine (insbesondere geradlinig verlaufende) Laserlinie verwendet werden, die dann von einer nichtplanaren Oberfläche der Ortsbrust in eine auf den Bilder modifiziert wahrnehmbare (insbesondere nichtgeradlinig verlaufende) Laserlinie umgewandelt wird.
- Gemäß einem anderen Ausführungsbeispiel kann die Anordnung eine Laufzeitmesseinrichtung für elektromagnetische Strahlung aufweisen. Die Bildverarbeitungseinrichtung kann zum derartigen Verarbeiten der Bilddaten der Abschnitte unter Verwendung der Laufzeitinformation eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte rekonstruiert wird. Dabei dient die Strahlung (z.B. durch Time-of-Flight-Messmethoden) zur Ermittlung der Entfernung oder Entfernungsdifferenzen der Quelle vom betrachteten Teil der Ortsbrust und infolge zur Gewinnung von 3D-Informationen.
- Gemäß einem weiteren Ausführungsbeispiel kann die Anordnung auch eine Einrichtung zur akustischen Laufzeitmessung (zum Beispiel ein Echolot) aufweisen.
- Im Folgenden werden exemplarische Ausführungsbeispiele der vorliegenden Erfindung mit Verweis auf die folgenden Abbildungen detailliert beschrieben.
-
Figur 1 zeigt wesentliche Teile einer Tunnelbohrmaschine mit einer Anordnung zum Ermitteln eines Bildes einer von der Tunnelbohrmaschine bearbeiteten Ortsbrust gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. -
Figur 2 zeigt einen, an eine Ortsbrust angrenzenden Bohrkopf einer Tunnelbohrmaschine gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. -
Figur 3 zeigt einen kleinen Abschnitt einer Ortsbrust, der durch ein Mannloch eines Bohrkopfes hindurch fotografiert ist. -
Figur 4 zeigt ein Ortsbrustfoto, das nach Zurückziehen eines Bohrkopfes aufgenommen ist. -
Figur 5 zeigt eine Draufsicht einer Anordnung gemäß einem exemplarischen Ausführungsbeispiel der Erfindung, bei der Kameras am Bohrkopf einer Tunnelbohrmaschine in einem Mannloch, einem Räumerschlitz und anstelle eines Abbauwerkzeugs platziert sind. -
Figur 6 zeigt eine Anordnung von vier Kameras zur gemeinsam annähernd vollständigen Aufnahme einer Ortsbrust gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. -
Figur 7 zeigt eine Anordnung aus einer Kamera, einer Leuchtquelle und einem Magnethalter zum Montieren an einem Bohrkopf einer Tunnelbohrmaschine gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. -
Figur 8 zeigt eine Montagehalterung für eine Kamera, Leuchtquellen und Neigungssensoren für eine Anordnung zum Erzeugen eines Bildes einer Ortsbrust gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. -
Figur 9 zeigt Bilder bzw. Videoframes, die sich überschneiden, und gemäß einem exemplarischen Ausführungsbeispiel der Erfindung mittels digitaler Bildverarbeitung zu einem Gesamtbild zusammengefügt werden. -
Figur 10 zeigt einen Ausschnitt eines Kreisrings als Bild eines Bereiches einer Ortsbrust, der gemäß einem exemplarischen Ausführungsbeispiel aus mehreren einzelnen Videoframes zusammengesetzt wurde. -
Figur 11 zeigt gemäß einem exemplarischen Ausführungsbeispiel ermittelte Höhenschichtenlinien über einem 3D-rekonstruierten Teil einer Ortsbrust. -
Figur 12 zeigt zwei gemäß einem exemplarischen Ausführungsbeispiel nacheinander gewonnene Bilder mit Überlappung, die mit Symbolen (Ring/Kreuz) markierte SIFT-Interestpoints und deren Zuordnung über beide Bilder enthalten. -
Figur 13 zeigt einen, an eine Ortsbrust angrenzenden Bohrkopf einer Tunnelbohrmaschine gemäß einem exemplarischen Ausführungsbeispiel der Erfindung in einer Seitenansicht, bei dem mittels mehrerer Bildaufnahmeeinheiten dreidimensionale Bilder der Ortsbrust erzeugt werden. -
Figur 14 zeigt einen, an eine Ortsbrust angrenzenden Bohrkopf einer Tunnelbohrmaschine gemäß einem exemplarischen Ausführungsbeispiel der Erfindung in einer Draufsicht, bei dem mittels einer mitrotierenden Bildaufnahmeeinheit zum Aufnehmen von Daten überlappender Abschnitte der Ortsbrust dreidimensionale Bilder der Ortsbrust erzeugt werden. -
Figur 15 zeigt einen, an eine Ortsbrust angrenzenden Bohrkopf einer Tunnelbohrmaschine gemäß einem exemplarischen Ausführungsbeispiel der Erfindung in einer Draufsicht, bei dem mittels einer mitrotierenden Bildaufnahmeeinheit und einer Mustererzeugungseinrichtung dreidimensionale Bilder der Ortsbrust erzeugt werden. - Gleiche oder ähnliche Komponenten in unterschiedlichen Abbildungen sind mit gleichen Bezugsziffern versehen.
-
Figur 1 zeigt wesentliche Teile einer Tunnelbohrmaschine 180 mit einer Anordnung 120 zum Ermitteln eines Bildes eines Bereiches einer von der Tunnelbohrmaschine 180 bearbeiteten Ortsbrust 122 eines Gebirges 102 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. - In
Figur 1 ist die Tunnelbohrmaschine 180 zum Abbauen des Gebirges 102 in einer Lage, in dem in das Gebirge 102 bereits ein Bohrloch 182 eingebracht worden ist. Das Bohren erfolgt derart, dass das Bohrloch 182 gemäßFigur 1 nach rechts hin sukzessive erweitert wird. Anders ausgedrückt bewegt sich die Tunnelbohrmaschine 180 entlang einer inFigur 1 mit Bezugszeichen 190 gekennzeichneten Richtung. Dem Fachmann ist bekannt, dass die Tunnelbohrmaschine 180 über die gezeigten Komponenten hinaus eine Vielzahl von weiteren Komponenten aufweist, die aus Gründen der Anschaulichkeit inFigur 1 nicht gezeigt sind. - In
Figur 1 ist aber ein Bohrkopf 150 mit einer Vielzahl von (hier exemplarisch und der Übersichtlichkeit wegen nur sieben gezeigt, in Realität jedoch zum Beispiel 50 bis 100) Abbauwerkzeugen 100 zu erkennen. Genauer ausgedrückt, weist der Bohrkopf 150 einen rotatorisch und translatorisch gegenüber dem Gebirge 102 bewegbaren Bohrkörper 152 auf, an dessen vorderseitiger oder der Ortsbrust 122 zugewandter Stirnseite die Vielzahl von Abbauwerkzeugen 100 angebracht ist. Diese sind über die kreisförmige Stirnfläche des Bohrkörpers 152 hinweg verteilt, was in der Querschnittsansicht vonFigur 1 nicht zu erkennen ist (siehe die Draufsicht inFigur 5 ). Jedes der Abbauwerkzeuge 100 kann eine in einer Halterung gelagerte drehfähige Diske mit einer umfänglich scharfen Schneidkante aufweisen. Bei einer Drehung des Bohrkörpers 152 drehen die Disken der Abbauwerkzeuge 100 mit und tragen mit ihrer scharfen Schneidkante Material des Gebirges 102 an der Ortsbrust 122 ab. Allerdings ist anzumerken, dass gemäß anderen Ausführungsbeispielen der Erfindung statt Disken andere Abbauwerkzeuge 100 eingesetzt werden können, zum Beispiel Schälmesser oder Stichel. - Ein Antriebsmotor 157 der Tunnelbohrmaschine 180 treibt über eine schematisch dargestellte Antriebswelle 159 den Bohrkopf 150 an, so dass dieser um eine Achse der Antriebswelle 159 rotiert (siehe Bezugszeichen 161) und sich außerdem entlang der Richtung 190 immer tiefer in Richtung des Gebirges 102 unter Abtragung desselben hineinbewegt.
- Im Weiteren wird die Anordnung 120 zum Ermitteln des Bildes der von der Tunnelbohrmaschine 180 bearbeiteten Ortsbrust 122 näher beschrieben.
- Der rotierfähig gelagerte Bohrkopf 150 ist Teil der Anordnung 120 und dient dem Abtragen von Material an der Ortsbrust 122. In Ausnehmungen 128 (die in dem gezeigten Ausführungsbeispiel als Durchgangsöffnungen ausgebildet sind) des Bohrkopfes 150 sind mehrere Kameras als Bildaufnahmeeinheiten montiert, die gemeinsam eine Bildaufnahmeeinrichtung 124 bilden. Jede der Kameras nimmt während des Drehens des Bohrkopfes 150, das auch zum Mitdrehen der Kameras führt, ein Bild (insbesondere ein 360° Panorama) entsprechend einem ringförmigen Abschnitt der stirnflächigen Ortsbrust 122 auf. Die Kameras selbst werden dabei relativ zu dem Bohrkopf 150 ortsfest gehalten, d.h. benötigen keinen separaten Antrieb. Die von den Kameras während einer vollständigen 360° Drehung des Bohrkopfes 150 aufgenommenen Bilddaten werden einer Bildverarbeitungseinrichtung 126 (zum Beispiel einem Prozessor, insbesondere ein Mikroprozessor oder eine CPU, Central Processing Unit) zugeführt. Die Bildverarbeitungseinrichtung 126 verarbeitet die Bilddaten der unterschiedlichen Kameras der Bildaufnahmeeinrichtung 100 gemeinsam, d.h. setzt die Einzelbilder der einzelnen Kameras bzw. die aufgenommenen (Teil-)Ringbilder so zusammen, dass dadurch ein gemeinsames Bild von der Oberfläche der Ortsbrust 122 konstruiert wird. Hierbei können Methoden der Bildverarbeitung eingesetzt werden. Das konstruierte Bild der Ortsbrust 122 wird dann einer Anzeigevorrichtung 155, zum Beispiel einer LCD Anzeige eines Laptop- oder Desktop-Computers, zugeführt. Ein Geologe kann dann bequem die Charakteristik der Ortsbrust 122 analysieren, indem er das aktuelle Bild der Ortsbrust 122 an der Anzeigevorrichtung 155 betrachtet.
- Bei dem beschriebenen Ausführungsbeispiel wird das Bild somit am Ort der Tunnelbohrmaschine 180 rekonstruiert. Alternativ ist es aber auch möglich, die Bilder nicht vollautomatisiert zusammenzusetzen bzw. auszuwerten, sondern erst später in einem Büro.
- Gemäß einem exemplarischen Ausführungsbeispiel der Erfindung können, wie in
Figur 2 schematisch gezeigt, mehrere Kameras als Bildaufnahmeeinrichtung 124 integriert in den Bohrkopf 150 implementiert werden. In der gezeigten Ausführungsform ist auch die Bildverarbeitungseinrichtung 126 im Bohrkopf 150 integriert und übermittelt die rekonstruierten Bilddaten im gezeigten Ausführungsbeispiel drahtlos an eine inFigur 2 nicht gezeigte Anzeigeeinrichtung 155 zum Anzeigen des Bildes der Ortsbrust 122. Die geologische und geotechnische Dokumentation der Ortsbrust 122 bei Vortrieben mit Tunnelbohrmaschinen 180 ist eine wesentliche Grundlage für einen zuverlässigen und sicheren Betrieb der Tunnelbohrmaschine 180. Diese findet zum Beispiel einmal täglich in Wartungsschichten statt. - Erfindungsgemäße Anordnungen 120 sind gegenüber herkömmlichen Ansätzen zum Ermitteln geologischer Daten einer Ortsbrust 122 deutlich vorteilhafter, wie im Weiteren näher beschrieben wird:
Bei herkömmlichen Ansätzen ist der Blick auf die Ortsbrust 122 aufgrund des störenden Bohrkopfes 150 der Tunnelbohrmaschinen 180 nur sehr eingeschränkt möglich. Schematisch ist dies inFigur 3 dargestellt. Es besteht herkömmlich dann nur die Möglichkeit, durch Mannlöcher (sieheFigur 3 ) oder durch Räumerschlitze des Bohrkopfes 150 einen kleinen Teil der Ortsbrust 122 einzusehen, wobei de facto nie die Möglichkeit besteht, ein großflächiges oder gar vollständiges Bild der Ortsbrust 122 zu erhalten. Der Blick auf die Ortsbrust 122 durch Geologen und Geotechniker erfolgt also herkömmlich durch Mannlöcher, Räumerschlitze oder seitlich von Abbauwerkzeugen 100. Dabei ist es aber nur möglich, kleine Teile der Ortsbrust 122 einzusehen, wie zum Beispiel inFigur 3 dargestellt. In diesem Foto ist eine Kreisfläche mit einem Durchmesser von etwa 60 cm einsehbar, während die gesamte Ortsbrust 122 einen Durchmesser von knapp 10 m hat. - Wenn der Bohrkopf 150 ein Stück zurückgezogen wird, um eine bessere Dokumentation zu erlauben, ergibt sich zwar die Chance, Fotos zu machen, die einen größeren Teil der Ortsbrust abdecken, allerdings nur aus äußerst ungünstigen Winkelpositionen. Ein solches Foto ist beispielsweise in
Figur 4 zu sehen. Aufgrund des steilen Winkels ist es nur schwer möglich, geologische Merkmale im unteren Bereich der Ortsbrust 122 zu erkennen. Außerdem ist das Zurückfahren des Bohrkopfes 150 mit Unannehmlichkeiten verbunden, insbesondere mit einer Unterbrechung des Bohrbetriebs. - Somit ist die geologische Ortsbrustdokumentation bei Tunnelbohrmaschinen-Vortrieben herkömmlich mit großen Unsicherheiten bzw. mit einem großen Aufwand behaftet.
- Um diesen Zustand zu verbessern, ist erfindungsgemäß eine Methode geschaffen, die es erlaubt, einen großen Teil oder sogar die gesamte Ortsbrust 122 zu fotografieren bzw. zu filmen und in weiterer Folge zu einem gesamtheitlichen Bild bzw. Foto weiterzuverarbeiten. Eine solche Methode ermöglicht es somit, die Ortsbrust 122 bei Tunnelbohrmaschinen-Vortrieben grafisch darzustellen. Die mit der in und/oder am drehenden Bohrkopf 150 integrierten Bildaufnahmeeinrichtung 124 überwundene Schwierigkeit besteht darin, dass die Ortsbrust 122 für Bedienpersonal beinahe vollständig vom Bohrkopf 150 der Tunnelbohrmaschine 180 verdeckt ist, herkömmlich nur durch kleine Öffnungen eingesehen werden kann, aber durch das erfindungsgemäße Vorsehen der Bildaufnahmeeinrichtung 124 sowie der hinsichtlich des Signalflusses nachgeschalteten Bildverarbeitungseinrichtung 126 zum Zusammensetzen von Teilbildern der Ortsbrust 122 nun problemlos zum Erstellen eines Bildes eines größeren Bereiches der Ortsbrust 122 eingesetzt werden kann.
-
Figur 5 zeigt eine Draufsicht von Komponenten einer Anordnung 120 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung, bei der Kameras als Bildaufnahmeeinrichtung 124 am Bohrkopf 150 einer Tunnelbohrmaschine in einem Mannloch (siehe Bezeichnung (a)), einem Räumerschlitz (siehe Bezeichnung (b)) und anstelle eines Abbauwerkzeugs 100 (siehe Bezeichnung (c)) platziert sind. - Mit der Anordnung 120 gemäß
Figur 5 kann ein vollständiges Foto der Ortsbrust 122 oder von Kreisringen der Ortsbrust 122 erstellt werden. Dazu wird eine Foto- oder Videokamera (oder werden mehrere Foto- oder Videokameras) als Bildaufnahmeeinrichtung 124 in eine oder in mehreren Öffnungen im Bohrkopf 150 platziert, zum Beispiel Räumeröffnung, Mannloch, anstelle von Abbauwerkzeugen 100 oder an eigens für die Bildaufnahmeeinrichtung 124 geschaffenen Ausnehmungen. - Anschließend wird der Bohrkopf 150 langsam wahlweise im Uhrzeigersinn oder entgegen dem Uhrzeigersinn gedreht (siehe Bezugszeichen 161), und es werden gleichzeitig Fotos in kurzen Abständen aufgenommen oder es wird gleichzeitig ein Video gemacht, zum Beispiel bis der Bohrkopf 150 sich einmal vollständig gedreht hat. Die Anzahl der Kameras, die benötigt wird, um ein vollständiges Bild der gesamten Ortsbrust 122 (oder eines interessierenden Bereiches der Ortsbrust 122) zu erhalten, ist abhängig vom Winkel des Objektivs und davon, ob und gegebenenfalls wie weit der Bohrkopf 150 zurückgezogen wird (zum Beispiel vollständig an der Ortsbrust 122 anliegend oder eine vorbestimmte Distanz von zum Beispiel 1.5m zurückgezogen).
-
Figur 6 zeigt eine Anordnung von vier Kameras als Bildaufnahmeeinrichtung 124 zur annähernd vollständigen Abdeckung einer Ortsbrust 122 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. Die inFigur 6 gezeigte Kameraanordnung erlaubt die Aufnahme von vier ringförmigen Bildern 600 inklusive kleiner Überschneidungen 602. Die Bereiche von Überschneidungen 602 können insbesondere verwendet werden, um die Einzelbilder artefaktfrei zusammenzusetzen. -
Figur 7 zeigt eine Anordnung aus einer Kamera als Bildaufnahmeeinrichtung 124, einer Leuchtquelle 700 (hier in Form eines LED-Arrays ausgebildet) und eines Magnethalters 702 zum Platzieren an einem Bohrkopf 150 einer Tunnelbohrmaschine 180 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. Die Befestigung der Bildaufnahmeeinrichtung 124 kann auf unterschiedliche Art und Weise erfolgen. Eine einfache und benutzerfreundliche Variante ist das Vorsehen der Kamera inklusive Leuchtquelle 700 mit dem Magnethalter 702 zum gemeinsamen Platzieren am Bohrkopf 150. -
Figur 8 zeigt eine Montagehalterung 702 für eine Kamera als Bildaufnahmeeinrichtung 124, Leuchtquellen 700 und Neigungssensoren 800 für eine Anordnung 120 zum Erzeugen eines Bildes einer Ortsbrust 122 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. - Um eine genau definierte Positionierung der Bildaufnahmeeinrichtung 124 zu ermöglichen, können funktionell erweiterte Montagehalterungen 702 verwendet werden.
Figur 8 zeigt eine solche Montagehalterung 702, die in Wartungsschichten in einem Mannloch befestigt werden kann. Neben der Kamera als Bildaufnahmeeinrichtung 124 werden darin starke Leuchtquellen 700 (nicht gezeigt) sowie weitere Sensoren, zum Beispiel die Inklinometer/Neigungssensoren 800, platziert, die eine automatisierte Ausrichtung der späteren Fotos und/oder Videos ermöglichen. Abgesehen davon ist es möglich, die Aufnahme mit globalen Maschinendaten wie zum Beispiel dem aktuellen Bohrkopfwinkel zu synchronisieren. Eine bevorzugte Ausführungsform besteht darin, die Bildaufnahmeeinrichtung 124 bereits von vornherein bei der Konstruktion in den Bohrkopf 150 entsprechend zu integrieren. -
Figur 9 zeigt Bilder oder Videoframes 900, die sich überschneiden, und gemäß einem exemplarischen Ausführungsbeispiel der Erfindung mittels digitaler Bildverarbeitung zu einem Gesamtbild zusammengefügt werden. - Nachdem die Fotos und/oder Videos aufgenommen wurden, werden sie mittels automatisierter digitaler Bildverarbeitung zu einer Gesamtaufnahme zusammengefügt.
Figur 9 zeigt schematisch die sich überschneidenden Bilder, welche in weiterer Folge zusammengesetzt werden. -
Figur 10 zeigt einen Ausschnitt 1000 eines Kreisrings als Bild eines Bereiches einer Ortsbrust 122, der gemäß einem exemplarischen Ausführungsbeispiel aus mehreren einzelnen Videoframes zusammengesetzt wurde. - Das Zusammensetzen zu einem Gesamtbild kann mittels verschiedener Verfahren (zum Beispiel pixel- oder texturorientiert) erfolgen. Im gegenständlichen Fall wurde ein Kreuzkorrelationsverfahren im Frequenzraum (Korrelation der Fourier-transformierten Bilder) verwendet.
Figur 10 zeigt den Ausschnitt 1000 eines Kreisrings, welcher das Ergebnis mehrerer zusammengesetzter einzelner Videoframes ist. Kleinräumige geologische Merkmale sind deutlich zu erkennen. Mit weiteren Bearbeitungsschritten kann auch ein räumliches Relief der Ortsbrust 122 erzeugt werden. - Im Weiteren werden Systeme zur dreidimensionalen Rekonstruktion der Ortsbrust 122 im Detail beschrieben.
-
Figur 11 zeigt Höhenschichtenlinien 1102 über einen 3D-rekonstruierten Teil einer Ortsbrust 122 (ermittelt mit einer Anordnung 120 gemäßFigur 13 ). -
Figur 12 zeigt zwei nacheinander gewonnene Aufnahmen 1202, 1204 mit Überlappung, die mit Symbolen (Ring/Kreuz) markierte SIFT-Interestpoints (Scale-invariant feature transform, d.h. skaleninvariante Merkmalstransformation) und deren Zuordnung über beide Bilder enthalten (ermittelt mit einer Anordnung 120 gemäßFigur 14 ). -
Figur 13 zeigt einen, an eine Ortsbrust 122 angrenzenden Bohrkopf 150 einer Tunnelbohrmaschine 180 gemäß einem exemplarischen Ausführungsbeispiel der Erfindung, bei dem mittels zweier Bildaufnahmeeinheiten dreidimensionale Bilder der Ortsbrust 122 erzeugt werden.Figur 13 zeigt eine Seitenansicht des Bohrkopfes 150 in vereinfachter Darstellung. - Bei der Anordnung 120 weist die Bildaufnahmeeinrichtung 124 zwei Bildaufnahmeeinheiten auf, die zum Aufnehmen von Bilddaten von zu unterschiedlichen Zeitpunkten jeweils überlappenden Abschnitten 600 der Ortsbrust 122 ausgebildet sind. Ein Überlappungsbereich der überlappenden Abschnitte 600 ist mit Bezugszeichen 601 gekennzeichnet. Die Bildverarbeitungseinrichtung 126 ist zum derartigen Verarbeiten der Bilddaten der zu jedem Zeitpunkt zumindest überlappenden Abschnitte 600 eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Abschnitte 600 rekonstruiert wird (siehe
Figur 11 ). - Gemäß dem Ausführungsbeispiel von
Figur 13 kann die für die 3D-Rekonstruktion eingesetzte Bildaufnahmeeinrichtung 124 sich eines Stereosystems bedienen, womit synchron Bilder mittels der beiden Bildaufnahmeeinheiten des (zumindest teils) gleichen Bereiches der Ortsbrust 122 während einer Drehung der Tunnelbohrmaschine 180 aufgenommen werden. Die Bildaufnahmeeinrichtung 124 ist während der Aufnahme fix mit dem rotierenden Bohrkopf 150 verbunden. Die Bilder können unter gleichmäßiger Ausleuchtung mit von Lichtquellen (nicht gezeigt) erzeugtem künstlichem Licht aus Öffnungen des Bohrkopfes 150 zur Ortsbrust 122 erstellt werden. Aus den gleichzeitig gewonnenen Bildern werden beispielsweise anhand einer aus einer Kalibrierung bekannten inneren und äußeren Kameraorientierung rektifizierte Bilder bestimmt. Beide enthalten für die Bildaufnahmeeinheiten spezifische Angaben wie deren Brennweite, Lage des Bildhauptpunktes, Translationsvektor und Rotation zwischen den Bildaufnahmeeinheiten. Über den Kontrast vorhandener Bildinhalte lässt sich die Lage einander entsprechender Bildinhalte mittels Stereomatchern feststellen, die Zeilen des linken Bildes mit den gleichen Zeilen des rechten Bildes aus dem Stereosystem auf ähnliche Bildinhalte vergleichen. Ähnlichkeiten können zum Beispiel mit Berechnungsverfahren wie SAD (Sum of Absolute Difference) berechnet werden, wo Minima der Differenzen zwischen Pixelwerten zur Bildzuordnung führen. Unter Verwendung dieser Bildzuordnung und den Parametern des Stereosystems kann eine dichte dreidimensionale farbige Punktwolke von zumindest Teilen der Ortsbrust 122 generiert werden. Diese erlaubt die Unterscheidung verschiedener, in der Ortsbrust 122 vorkommender Lithologien zu deren flächen- und anteilsmäßiger Ermittlung. Die dreidimensionale rekonstruierte Punktwolke ermöglicht die Ergänzung des Ortsbrustbildes mit Isohypsen. Ein Beispiel zeigt Bild 1100 gemäßFigur 11 . Ebenso ist eine Darstellung mit einer farblichen Zuweisung von Höhen möglich. Zur Ermittlung der Position der rekonstruierten Punktwolke im Laufe der Drehbewegung der Tunnelbohrmaschine 180 ist es vorteilhaft, den Radius der Kreisbahn und des Neigungswinkels zu kennen, zu dessen Bestimmung ein Neigungssensor (nicht gezeigt inFigur 13 , siehe zum BeispielFigur 8 ) zur Hilfe genommen werden kann. -
Figur 14 zeigt einen, an eine Ortsbrust 122 angrenzenden Bohrkopf 150 einer Tunnelbohrmaschine 180 (sieheFigur 1 ) gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. Bei dem Bohrkopf 150 können mittels einer mitrotierenden Bildaufnahmeeinheit als Bildaufnahmeeinrichtung 124 zum Aufnehmen von Daten überlappender Abschnitte 600, 600' der Ortsbrust 122 (sieheFigur 1 ) dreidimensionale Bilder der Ortsbrust 122 erzeugt werden. Bezugszeichen 600 bezeichnet einen Abschnitt, der aufgenommen wird, wenn sich die mitrotierende Bildaufnahmeeinheit an einer ersten Position befindet. In entsprechender Weise bezeichnet Bezugszeichen 600' einen anderen Abschnitt, der aufgenommen wird, wenn sich die mitrotierende Bildaufnahmeeinheit zu einem späteren Zeitpunkt an einer zweiten Position befindet. An dieser zweiten Position ist die Bildaufnahmeeinrichtung mit Bezugszeichen 124' gekennzeichnet. Ein Überlappungsbereich der überlappenden Abschnitte 600, 600' ist wiederum mit Bezugszeichen 601 gekennzeichnet.Figur 14 zeigt eine Draufsicht des Bohrkopfes 150 in vereinfachter Darstellung (zum Beispiel sind die an dem Bohrkopf 150 angebrachten Abbauwerkzeuge 100 nicht dargestellt). - Bei der Anordnung 120 weist die Bildaufnahmeeinrichtung 124, 124' eine einzige Bildaufnahmeeinheit auf, die während des Rotierens des Bohrkopfes 150 zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von Abschnitten 600, 600' der Ortsbrust 122 ausgebildet ist. Zu einem ersten Zeitpunkt ist die Bildaufnahmeeinheit mit durchgezogenen Linien gezeigt. Zu einem späteren zweiten Zeitpunkt ist die Bildaufnahmeeinheit mit gestrichelten Linien gezeigt. Die Bildverarbeitungseinrichtung 126 (nicht gezeigt, siehe
Figur 1 ) ist zum derartigen Verarbeiten der zu unterschiedlichen Zeitpunkten aufgenommenen Bilddaten der überlappenden Abschnitte 600, 600' eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Abschnitte 600, 600' rekonstruiert wird. - Gemäß dem Ausführungsbeispiel von
Figur 14 ist als Bildaufnahmeeinrichtung 124, 124' zur 3D-Rekonstruktion eine Kameraeinheit vorgesehen, wobei zeitlich nacheinander gewonnene Bilder zur 3D-Rekonstruktion verwendet werden. Der zeitliche Abstand zwischen den jeweiligen Aufnahmen während der Drehbewegung des Bohrkopfes 150 der Tunnelbohrmaschine 180 (sieheFigur 1 ) bewirkt eine Translation und Rotation der Bildaufnahmeeinheit. Dies bewirkt eine teilweise Überlappung der Bildabfolge. In dieser Überlappung können Interestpoints/Merkmale mit Verfahren wie FAST, SIFT, SURF (Speeded Up Robust Features, "Beschleunigte, robuste Merkmale") sowie anderen Methoden der Bildverarbeitung extrahiert werden, die mittels geeigneter automatischer Matchingalgorithmen einander zugeordnet werden und somit für eine 3D-Rekonstruktion trianguliert werden können. Eine Darstellung erfolgreich gematchter SIFT-Interestpoints für zwei nacheinander gewonnene Aufnahmen zeigt Bild 1200 gemäßFigur 12 . -
Figur 15 zeigt einen, an eine Ortsbrust 122 (sieheFigur 1 ) angrenzenden Bohrkopf 150 einer Tunnelbohrmaschine 180 (sieheFigur 1 ) gemäß einem exemplarischen Ausführungsbeispiel der Erfindung. Bei dem Bohrkopf 150 können mittels einer mitrotierenden Bildaufnahmeeinheit und einer Mustererzeugungseinrichtung (an einer ersten Position mit Bezugszeichen 1500 und an einer zweiten Position mit Bezugszeichen 1500' dargestellt) dreidimensionale Bilder der Ortsbrust 122 erzeugt werden.Figur 15 zeigt wiederum eine Draufsicht des Bohrkopfes 150 in vereinfachter Darstellung. - Bei der Anordnung 120 weist die Bildaufnahmeeinrichtung (wiederum an einer ersten Position mit Bezugszeichen 124 und an einer zweiten Position mit Bezugszeichen 124' gekennzeichnet) eine Bildaufnahmeeinheit auf, die während des Rotierens des Bohrkopfes 150 zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von Abschnitten 600, 600' (siehe
Figur 14 ) der Ortsbrust 122 ausgebildet ist. Die Anordnung 120 weist ferner die Mustererzeugungseinrichtung 1500, 1500' zum Erzeugen eines jeweiligen Musters von elektromagnetischer Strahlung auf zumindest einem Teil der Abschnitte 600, 600' während des Aufnehmens der Bilddaten auf. Zu einem ersten Zeitpunkt sind die Bildaufnahmeeinheit und die damit starr gekoppelte Mustererzeugungseinrichtung 1500, 1500' mit durchgezogenen Linien gezeigt. Zu einem späteren zweiten Zeitpunkt sind die Bildaufnahmeeinheit und die Mustererzeugungseinrichtung 1500, 1500' mit gestrichelten Linien gezeigt. - Die Bildverarbeitungseinrichtung 126 (siehe
Figur 1 ) ist zum derartigen Verarbeiten der Bilddaten der Abschnitte 600, 600' unter Verwendung des Musters oder der Muster als Zuordnungsinformation eingerichtet, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte 600, 600' rekonstruiert wird. - Das in
Figur 15 gezeigte Ausführungsbeispiel einer Bildaufnahmeeinrichtung 124 zur 3D-Rekonstruktion kann zwecks Unabhängigkeit vom visuellen Kontrast der Ortsbrust 122 sich eines Streifenprojektors bedienen. Eine zugehörige Mustererzeugungseinrichtung 1500, 1500' ist aus einem Streifenprojektor gebildet, der ein vordefiniertes regelmäßiges oder zufällig generiertes flächenhaftes Muster (in den gleichen oder anderen elektromagnetischen Frequenzbereichen als dem sichtbaren Licht, wobei eine zur Musterdetektion separate und in der Figur nicht gezeigte Sensoreinrichtung vorgesehen sein kann) wirft. Diese Muster können mit einem kalibrierten Stereosystem erfasst werden. Diese Aufnahmen können zur 3D-Rekonstruktion mit Bildzuordnungsverfahren bearbeitet werden. - Alternativ zu
Figur 15 kann die Mustererzeugungseinrichtung 1500, 1500' zum Erzeugen eines mittels der Bildaufnahmeeinrichtung 124, 124' erfassbaren Musters, insbesondere einer Laserbeleuchtung, eingerichtet sein und relativ zu der Bildaufnahmeeinrichtung 124, 124' in vorbekannter Weise positioniert sein (nicht gezeigt). Die Bildverarbeitungseinrichtung 126 kann dann zum derartigen Verarbeiten der Bilddaten der Abschnitte 600, 600' unter Verwendung der Muster und der vorbekannten Positionierung als Zuordnungsinformation eingerichtet sein, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte 600, 600' rekonstruiert wird. - Die Bildaufnahmeeinrichtung 124, 124' kann somit mit einem Lichtschnittverfahren zur 3D-Rekonstruktion bestückt werden, das sich einer Laserlinie als Signal bedient. Die Bildaufnahmeeinrichtung 124, 124' setzt sich dann zum Beispiel aus einer Laserbeleuchtung und einer Kamera zusammen. Beide sind in einem bestimmen Winkel zueinander ausgerichtet und in der Aufnahme der Kamera lässt sich die Laserlinie als Höhenprofil detektieren. Die Frequenz der Profilaufnahme kann in der Form auf die Rotation der Tunnelbohrmaschine 180 so abgestimmt sein, dass eine 3D-Rekonstruktion mittels einer dichten Punktwolke möglich ist. Die Kombination mit der visuellen Aufnahme der Ortsbrust 122 erfolgt über einen Kalibrierungsschritt, der visuelle Information und die Ergebnisse der Höhenprofilaufnahme zur Deckung bringt. Eine ähnliche Bildaufnahmeeinrichtung 124, 124' gemäß noch einem anderen Ausführungsbeispiel der Erfindung kann ein Profilscanner sein, der Laserbeleuchtung und die zugehörige Kamera ersetzt.
- Die Bildaufnahmeeinrichtung 124, 124' kann mit Sensorik (nicht gezeigt) zur Erfassung von Wellenlängen außerhalb des sichtbaren Lichts bestückt werden. Techniken wie die Spektroskopie unter Verwendung von Handheld-Geräten können analysetechnisch zur Nutzung kommen, um eine Zuordnung mittels Quarz- oder mafischer Indices anhand der unterschiedlichen Emissivität beispielsweise im LWIR (long wavelength infrared) zu erreichen.
- Ergänzend ist darauf hinzuweisen, dass "aufweisend" keine anderen Elemente oder Schritte ausschließt und "eine" oder "ein" keine Vielzahl ausschließt. Ferner sei darauf hingewiesen, dass Merkmale oder Schritte, die mit Verweis auf eines der obigen Ausführungsbeispiele beschrieben worden sind, auch in Kombination mit anderen Merkmalen oder Schritten anderer oben beschriebener Ausführungsbeispiele verwendet werden können. Bezugszeichen in den Ansprüchen sind nicht als Einschränkung anzusehen.
Claims (15)
- Anordnung (120) zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine (180) bearbeiteten Ortsbrust (122) eines Gebirges (102), wobei die Anordnung (120) aufweist:einen rotierfähigen Bohrkopf (150) für die Tunnelbohrmaschine (180) zum Abtragen von Material, insbesondere Gesteinsmaterial, der Ortsbrust (122);eine Bildaufnahmeeinrichtung (124), die zum Aufnehmen von Bilddaten zumindest eines Abschnitts (600) der Ortsbrust (122) an dem Bohrkopf (150) angebracht ist; undeine Bildverarbeitungseinrichtung (126), die zum Verarbeiten von Bilddaten von mehreren Abschnitten (600) der Ortsbrust (122), die mittels der Bildaufnahmeeinrichtung (124) insbesondere während des Rotierens des Bohrkopfes (150) aufgenommen werden, und zum Rekonstruieren des Bildes zumindest des Bereiches der Ortsbrust (122) aus den Bilddaten der mehreren Abschnitte (600) der Ortsbrust (122) ausgebildet ist,wobei die Bildaufnahmeeinrichtung (124) eine Mehrzahl von an dem Bohrkopf (150) angebrachten Bildaufnahmeeinheiten, insbesondere Videokameras und/oder Fotokameras, aufweist, die zum Aufnehmen von Bilddaten von Abschnitten (600) der Ortsbrust (122) ausgebildet sind,wobei die Mehrzahl von Bildaufnahmeeinheiten derart an dem Bohrkopf (150) angebracht ist, dass die von diesen Bildaufnahmeeinheiten abgebildeten Abschnitte (600) der Ortsbrust (122) unter Ausbildung von Überlappungsabschnitten (601, 602) zumindest teilweise überlappenwobei die Bildaufnahmeeinheiten eingerichtet sind, die Abschnitte (600) bei einer Drehung des Bohrkopfes (150) aufzunehmen, undwobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte (601, 602) eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte (601, 602) rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte (601, 602),wobei mittels einer Kontrastanalyse der Überlappungsabschnitte (601, 602) entsprechende Teilabschnitte der Ortsbrust (122) auf den unterschiedlichen Abschnitten (600) ermittelt und einander zugeordnet werden.
- Anordnung (120) zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine (180) bearbeiteten Ortsbrust (122) eines Gebirges (102), wobei die Anordnung (120) aufweist:einen rotierfähigen Bohrkopf (150) für die Tunnelbohrmaschine (180) zum Abtragen von Material, insbesondere Gesteinsmaterial, der Ortsbrust (122);eine Bildaufnahmeeinrichtung (124), die zum Aufnehmen von Bilddaten zumindest eines Abschnitts (600) der Ortsbrust (122) an dem Bohrkopf (150) angebracht ist; undeine Bildverarbeitungseinrichtung (126), die zum Verarbeiten von Bilddaten von mehreren Abschnitten (600) der Ortsbrust (122), die mittels der Bildaufnahmeeinrichtung (124) insbesondere während des Rotierens des Bohrkopfes (150) aufgenommen werden, und zum Rekonstruieren des Bildes zumindest des Bereiches der Ortsbrust (122) aus den Bilddaten der mehreren Abschnitte (600) der Ortsbrust (122) ausgebildet ist,wobei die Bildaufnahmeeinrichtung (124) nur eine an dem Bohrkopf (150) angebrachte Bildaufnahmeeinheit, insbesondere eine Videokamera oder eine Fotokamera, aufweist, die zum Aufnehmen von Bilddaten von Abschnitten (600) der Ortsbrust (122) ausgebildet ist,wobei die Bildaufnahmeeinheit derart an dem Bohrkopf (150) angebracht ist, dass die von dieser Bildaufnahmeeinheit abgebildeten Abschnitte (600) der Ortsbrust (122) unter Ausbildung von Überlappungsabschnitten (601, 602) zumindest teilweise überlappenwobei die Bildaufnahmeeinheit eingerichtet ist, die Abschnitte (600) bei einer Drehung des Bohrkopfes (150) aufzunehmen, undwobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte (601, 602) eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte (601, 602) rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte (601, 602),wobei mittels einer Kontrastanalyse der Überlappungsabschnitte (601, 602) entsprechende Teilabschnitte der Ortsbrust (122) auf den unterschiedlichen Abschnitten (600) ermittelt und einander zugeordnet werden.
- Anordnung (120) gemäß Anspruch 1 oder 2, wobei der Bohrkopf (150) mindestens eine Öffnung (128), insbesondere eine Durchgangsöffnung, aufweist, und wobei die Bildaufnahmeeinrichtung (124) zum Aufnehmen der Bilddaten durch die Öffnung (128) an dem Bohrkopf (150) angebracht ist, wobei insbesondere die mindestens eine Öffnung (128) ausgewählt ist aus einer Gruppe, die besteht aus einem Mannloch zum Zugangsgewähren einer Bedienperson, einer Ausnehmung oder Aufnahme für ein Abbauwerkzeug (100) zum Abbauen von Material des Gebirges (102), einem Räumerschlitz zum Abräumen von abgebautem Material des Gebirges (102) und einer speziell für die Aufnahme der Bildaufnahmeeinrichtung (124) konfigurierten Ausnehmung oder Öffnung (128) wobei insbesondere die mindestens eine Ausnehmung oder Öffnung (128) als Aufnahmeöffnung zum zumindest teilweisen Aufnehmen der Bildaufnahmeeinrichtung (124) ausgebildet ist.
- Anordnung (120) gemäß einem der Ansprüche 1 bis 3, aufweisend zumindest eines der folgenden Merkmale:
die Bildaufnahmeeinrichtung (124) ist ausgewählt aus einer Gruppe, die besteht aus mindestens einer Videokamera zum Aufnehmen von Videodaten mindestens eines Abschnittes der Ortsbrust (122), und aus mindestens einer Fotokamera zum Aufnehmen von Fotos mindestens eines Abschnittes der Ortsbrust (122),
die Bildaufnahmeeinrichtung (124) ist eingerichtet, Bilddaten der Ortsbrust (122) während einer vorbestimmten Winkeldrehung des Bohrkopfes (150), insbesondere während einer vollständigen Umdrehung des Bohrkopfes (150), aufzunehmen und der Bildverarbeitungseinrichtung (126) diese Bilddaten zum Rekonstruieren des Bildes zumindest des Bereiches der Ortsbrust (122) bereitzustellen,
die Bildverarbeitungseinrichtung (126) ist eingerichtet, als den Bereich der Ortsbrust (122) einen Kreisring oder eine Kreisfläche zu rekonstruieren,
die Anordnung weist (120) mindestens eine an dem Bohrkopf (150) angebrachte Leuchtquelle (700) zum Beleuchten eines von der Bildaufnahmeeinrichtung (124) jeweils abgebildeten Abschnitts (600) der Ortsbrust (122) auf,
die Anordnung (120) weist eine zum Aufnehmen der Bildaufnahmeeinrichtung (124), und insbesondere der Leuchtquelle (700), und zur Montage an dem Bohrkopf (150) eingerichtete Montagehalterung (702) auf, wobei die Anordnung (120) insbesondere mindestens einen Neigungssensor (800), der zum Detektieren eines Neigungswinkels an der Montagehalterung (702) angebracht ist, aufweist, wobei insbesondere der mindestens eine Neigungssensor (800) und die Bildverarbeitungseinrichtung (126) derart gekoppelt sind, dass die Bildverarbeitungseinrichtung (126) die den Abschnitten (600) zugeordneten Bilddaten zum Rekonstruieren des Bildes unter Berücksichtigung des von dem Neigungssensor (800) detektierten Neigungswinkels verarbeitet,
wobei insbesondere die Montagehalterung (702) zum Klemmbefestigen und/oder zum magnetischen Befestigen an dem Bohrkopf (150) eingerichtet ist. - Anordnung (120) gemäß einem der Ansprüche 1 bis 4, wobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest des Bereiches der Ortsbrust (122) rekonstruiert wird, und wobei insbesondere die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten von Bilddaten zumindest teilweise unterschiedlicher Abschnitte (600) der Ortsbrust (122) eingerichtet ist.
- Anordnung (120) gemäß Anspruch 1,
wobei die Mehrzahl von Bildaufnahmeeinheiten zum Aufnehmen von Bilddaten von zu unterschiedlichen Zeitpunkten jeweils zumindest überlappenden, insbesondere identischen, Abschnitten (600) der Ortsbrust (122) ausgebildet sind;
wobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der zu jedem Zeitpunkt zumindest überlappenden Abschnitte (600) eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Abschnitte (600) rekonstruiert wird. - Anordnung (120) gemäß einem der Ansprüche 1 bis 5,
wobei die Bildaufnahmeeinheit während des Rotierens des Bohrkopfes (150) zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von zumindest überlappenden Abschnitten (600, 600') der Ortsbrust (122) ausgebildet ist. - Anordnung (120) gemäß einem der Ansprüche 1 bis 5,
wobei die Bildaufnahmeeinheit während des Rotierens des Bohrkopfes (150) zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von Abschnitten (600, 600') der Ortsbrust (122) ausgebildet ist;
wobei die Anordnung (120) ferner eine Mustererzeugungseinrichtung (1500, 1500') zum Erzeugen eines jeweiligen Musters von elektromagnetischer Strahlung auf zumindest einem Teil der Abschnitte (600, 600') während des Aufnehmens der Bilddaten aufweist;
wobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der Abschnitte (600, 600') unter Verwendung des Musters oder der Muster als Zuordnungsinformation eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte (600, 600') rekonstruiert wird. - Anordnung (120) gemäß Anspruch 8,
wobei die Mustererzeugungseinrichtung (1500, 1500') zum Erzeugen des Musters in einem Wellenlängenbereich außerhalb sichtbaren Lichts eingerichtet ist;
wobei die Anordnung (120) ferner eine Sensoreinrichtung zum Erfassen des Musters in dem Wellenlängenbereich außerhalb sichtbaren Lichts aufweist. - Anordnung (120) gemäß Anspruch 8,
wobei die Mustererzeugungseinrichtung (1500, 1500') zum Erzeugen eines mittels der Bildaufnahmeeinrichtung (124, 124') erfassbaren Musters, insbesondere einer Laserbeleuchtung, eingerichtet ist und relativ zu der Bildaufnahmeeinrichtung (124, 124') in vorbekannter Weise positioniert ist;
wobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der Abschnitte (600, 600') unter Verwendung des Musters oder der Muster und der vorbekannten Positionierung als Zuordnungsinformation eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte (600, 600') rekonstruiert wird. - Anordnung (120) gemäß einem der Ansprüche 1 bis 5,
wobei die Bildaufnahmeeinheit während des Rotierens des Bohrkopfes (150) zum zeitlich aufeinanderfolgenden Aufnehmen von Bilddaten von Abschnitten (600, 600') der Ortsbrust (122) ausgebildet ist;
wobei die Anordnung (120) ferner eine Abstandserfassungseinrichtung zur Erfassung von für den Abstand zwischen einem Bezugspunkt des Bohrkopfes (150) und Koordinatenpunkten des den Bilddaten zugehörigen jeweiligen Abschnittes (600, 600') indikativen Abstandsdaten aufweist;
wobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der Abschnitte (600, 600') unter Verwendung der Abstandsdaten und zusätzlich einer vorbekannten Positionierung zwischen der Abstandserfassungseinrichtung und den Koordinatenpunkten als Zuordnungsinformation eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der Abschnitte (600, 600') rekonstruiert wird. - Anordnung (120) gemäß Anspruch 11, wobei die Abstandserfassungseinrichtung gewählt wird aus einem Element der Gruppe, die besteht aus einer Lichtlaufzeitmesseinrichtung, insbesondere gemäß einem timeof-flight Verfahren, einer RADAR-Einrichtung und einer akustischen Laufzeitmesseinrichtung, insbesondere Echolot.
- Tunnelbohrmaschine (180) zum Abtragen von Gesteinsmaterial einer Ortsbrust (122) eines Gebirges (102), wobei die Tunnelbohrmaschine (180) eine Anordnung (120) gemäß einem der Ansprüche 1 bis 12 aufweist.
- Verfahren zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine (180) bearbeiteten Ortsbrust (122) eines Gebirges (102), wobei das Verfahren aufweist:Rotieren eines Bohrkopfes (150) einer Tunnelbohrmaschine (180) zum Abtragen von Gesteinsmaterial der Ortsbrust (122);Aufnehmen von Bilddaten von jeweiligen Abschnitten (600) der Ortsbrust (122) mittels einer an dem Bohrkopf (150) angebrachten Bildaufnahmeeinrichtung (124), insbesondere während der Bohrkopf (150) rotiert;Verarbeiten von insbesondere während des Rotierens des Bohrkopfes (150) mittels der Bildaufnahmeeinrichtung (124) aufgenommenen Bilddaten von mehreren Abschnitten (600) der Ortsbrust (122), wodurch aus den Bilddaten der mehreren Abschnitte (600) ein Bild zumindest des Bereiches der Ortsbrust (122) rekonstruiert wird,wobei die Bildaufnahmeeinrichtung (124) eine Mehrzahl von an dem Bohrkopf (150) angebrachten Bildaufnahmeeinheiten, insbesondere Videokameras und/oder Fotokameras, aufweist, die zum Aufnehmen von Bilddaten von Abschnitten (600) der Ortsbrust (122) ausgebildet sind,wobei die Mehrzahl von Bildaufnahmeeinheiten derart an dem Bohrkopf (150) angebracht ist, dass die von diesen Bildaufnahmeeinheiten abgebildeten Abschnitte (600) der Ortsbrust (122) unter Ausbildung von Überlappungsabschnitten (601, 602) zumindest teilweise überlappen, undwobei die Bildaufnahmeeinheiten eingerichtet sind, die Abschnitte (600) bei einer Drehung des Bohrkopfes (150) aufzunehmen, undwobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte (601, 602) eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte (601, 602) rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte (601, 602),wobei mittels einer Kontrastanalyse der Überlappungsabschnitte (601, 602) entsprechende Teilabschnitte der Ortsbrust (122) auf den unterschiedlichen Abschnitten (600) ermittelt und einander zugeordnet werden.
- Verfahren zum Ermitteln eines Bildes zumindest eines Bereiches einer von einer Tunnelbohrmaschine (180) bearbeiteten Ortsbrust (122) eines Gebirges (102), wobei das Verfahren aufweist:Rotieren eines Bohrkopfes (150) einer Tunnelbohrmaschine (180) zum Abtragen von Gesteinsmaterial der Ortsbrust (122);Aufnehmen von Bilddaten von jeweiligen Abschnitten (600) der Ortsbrust (122) mittels einer an dem Bohrkopf (150) angebrachten Bildaufnahmeeinrichtung (124), insbesondere während der Bohrkopf (150) rotiert;Verarbeiten von insbesondere während des Rotierens des Bohrkopfes (150) mittels der Bildaufnahmeeinrichtung (124) aufgenommenen Bilddaten von mehreren Abschnitten (600) der Ortsbrust (122), wodurch aus den Bilddaten der mehreren Abschnitte (600) ein Bild zumindest des Bereiches der Ortsbrust (122) rekonstruiert wird,wobei die Bildaufnahmeeinrichtung (124) nur eine an dem Bohrkopf (150) angebrachte Bildaufnahmeeinheit, insbesondere eine Videokamera oder eine Fotokamera, aufweist, die zum Aufnehmen von Bilddaten von Abschnitten (600) der Ortsbrust (122) ausgebildet ist,wobei die Bildaufnahmeeinheit derart an dem Bohrkopf (150) angebracht ist, dass die von dieser Bildaufnahmeeinheit abgebildeten Abschnitte (600) der Ortsbrust (122) unter Ausbildung von Überlappungsabschnitten (601, 602) zumindest teilweise überlappen, undwobei die Bildaufnahmeeinheit eingerichtet ist, die Abschnitte (600) bei einer Drehung des Bohrkopfes (150) aufzunehmen, undwobei die Bildverarbeitungseinrichtung (126) zum derartigen Verarbeiten der Bilddaten der zumindest überlappenden Überlappungsabschnitte (601, 602) eingerichtet ist, dass als das Bild ein dreidimensionales Reliefbild zumindest eines Teils der überlappenden Überlappungsabschnitte (601, 602) rekonstruiert wird unter Verwendung einer Zuordnung der überlappenden Überlappungsabschnitte (601, 602),wobei mittels einer Kontrastanalyse der Überlappungsabschnitte (601, 602) entsprechende Teilabschnitte der Ortsbrust (122) auf den unterschiedlichen Abschnitten (600) ermittelt und einander zugeordnet werden.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| ATGM50107/2013U AT14252U1 (de) | 2013-07-30 | 2013-07-30 | System zum Ermitteln eines Ortsbrustbilds |
| PCT/EP2014/065652 WO2015014655A2 (de) | 2013-07-30 | 2014-07-21 | System zum ermitteln eines ortsbrustbildes |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| EP3028006A2 EP3028006A2 (de) | 2016-06-08 |
| EP3028006B1 true EP3028006B1 (de) | 2019-12-18 |
Family
ID=52432495
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| EP14744032.5A Active EP3028006B1 (de) | 2013-07-30 | 2014-07-21 | System zum ermitteln eines ortsbrustbildes |
Country Status (3)
| Country | Link |
|---|---|
| EP (1) | EP3028006B1 (de) |
| AT (1) | AT14252U1 (de) |
| WO (1) | WO2015014655A2 (de) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE202022106442U1 (de) | 2022-11-17 | 2024-02-20 | Herrenknecht Aktiengesellschaft | Tunnelbohrmaschine |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108729919B (zh) * | 2018-06-07 | 2019-07-05 | 深圳市市政设计研究院有限公司 | 一种填石地层弧形变截面隧道浅埋暗挖施工方法 |
| CN109139023B (zh) * | 2018-09-25 | 2019-12-17 | 清华大学 | 基于tbm管片拼装机的围岩观测系统 |
| CN111272753B (zh) * | 2019-09-06 | 2021-04-13 | 山东大学 | 基于图像识别与分析的隧道内围岩石英含量预测系统与方法 |
| CN114607464A (zh) * | 2022-03-14 | 2022-06-10 | 新疆额尔齐斯河流域开发工程建设管理局 | 隧道掌子面岩体质量评价系统和方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5657073A (en) * | 1995-06-01 | 1997-08-12 | Panoramic Viewing Systems, Inc. | Seamless multi-camera panoramic imaging with distortion correction and selectable field of view |
| JPH1136785A (ja) | 1997-07-17 | 1999-02-09 | Kajima Corp | Tbm切羽画像撮影処理システム |
| US7215364B2 (en) * | 2002-04-10 | 2007-05-08 | Panx Imaging, Inc. | Digital imaging system using overlapping images to formulate a seamless composite image and implemented using either a digital imaging sensor array |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE4119180A1 (de) * | 1991-06-11 | 1992-12-17 | Merkel Peter Dr | Verfahren und vorrichtung zur vermessung und dokumentation der geometrie, struktur- und materialbeschaffenheit von dreidimensionalen objekten, wie fassaden und raeume sowie deren waende, einrichtungen und installationen |
| US6009359A (en) * | 1996-09-18 | 1999-12-28 | National Research Council Of Canada | Mobile system for indoor 3-D mapping and creating virtual environments |
| DE202012102496U1 (de) * | 2012-07-05 | 2012-09-13 | Montanuniversität Leoben | Fehlerrobuste Sensorik zum Ermitteln einer räumlichen Beziehung zwischen Anlagenkomponenten unter rauen Bedingungen |
-
2013
- 2013-07-30 AT ATGM50107/2013U patent/AT14252U1/de not_active IP Right Cessation
-
2014
- 2014-07-21 WO PCT/EP2014/065652 patent/WO2015014655A2/de not_active Ceased
- 2014-07-21 EP EP14744032.5A patent/EP3028006B1/de active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5657073A (en) * | 1995-06-01 | 1997-08-12 | Panoramic Viewing Systems, Inc. | Seamless multi-camera panoramic imaging with distortion correction and selectable field of view |
| JPH1136785A (ja) | 1997-07-17 | 1999-02-09 | Kajima Corp | Tbm切羽画像撮影処理システム |
| US7215364B2 (en) * | 2002-04-10 | 2007-05-08 | Panx Imaging, Inc. | Digital imaging system using overlapping images to formulate a seamless composite image and implemented using either a digital imaging sensor array |
Non-Patent Citations (8)
| Title |
|---|
| ANDREAS GAICH ET AL.: "Determining Structural Rock Mass Parameters Using a Computer Vision System", FELSBAU, vol. 21, no. 2, April 2003 (2003-04-01), XP055766028 |
| ANDREAS GAICH ET AL.: "Stereoscopic Imaging and Geological Exaluation for Geotechnical Modelling at the Tunnel Site", FELSBAU, vol. 17, no. 1, 1999, pages 15 - 21, XP055766035 |
| BESL ET AL.: "Active, optical Range Imaging Sensors", MACHINE VISION AND APPLICATIONS, vol. 1, 1988, pages 127 - 152, XP000196923, DOI: 10.1007/BF01212277 |
| IRSCHARA A. ET AL.: "Efficient structure from motion with weak position and orientation priors", COMPUTER VISION AND PATTERN RECOGNITION WORKSHOPS (CVPRW), 2011 IEEE, 20 June 2011 (2011-06-20), pages 21 - 28, XP031926529 |
| MARKUS PÖTSCH ET AL.: "Geotechnical Data Collection and Analysis in Jointed Rock", FELSBAU, vol. 25, no. 5, 2007, pages 66 - 73, XP055766044 |
| RICHARD SZELINSKI: "Computer Vision - Algorithms and Applications", 2011, SPRINGER, ISBN: 978-1-84882-934-3 |
| RONCHELLA ET AL.: "A NOVEL IMAGE ACQUISITION AND PROCESSING PROCEDURE FOR FAST TUNNEL DSM PRODUCTION", ISPRS - INTERNATIONAL ARCHIVES OF THE PHOTOGRAMMETRY, REMOTE SENSING AND SPATIAL INFORMATION SCIENCES, vol. XXXIX-B5, 2012, pages 297 - 302, XP055766049 |
| UMESH R. DHOND ET AL.: "Structure from Stereo - A Review", IEEE TRANSACTIONS ON SYSTEMS, MAN AND CYBEMETICS, vol. 19, no. 6, 1 November 1989 (1989-11-01), pages 1489 - 1510, XP000127015 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE202022106442U1 (de) | 2022-11-17 | 2024-02-20 | Herrenknecht Aktiengesellschaft | Tunnelbohrmaschine |
| WO2024104640A1 (de) | 2022-11-17 | 2024-05-23 | Herrenknecht Aktiengesellschaft | Tunnelbohrmaschine |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2015014655A2 (de) | 2015-02-05 |
| AT14252U1 (de) | 2015-07-15 |
| WO2015014655A3 (de) | 2015-10-01 |
| EP3028006A2 (de) | 2016-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3028006B1 (de) | System zum ermitteln eines ortsbrustbildes | |
| DE112010004767B4 (de) | Punktwolkedaten-Verarbeitungsvorrichtung, Punktwolkedaten-Verarbeitungsverfahren und Punktwolkedaten-Verarbeitungsprogramm | |
| DE102012112322B4 (de) | Verfahren zum optischen Abtasten und Vermessen einer Umgebung | |
| DE102014104712B4 (de) | Registrierung einer in Cluster zerfallenden Szene mit visualisierten Clustern | |
| EP2850388B1 (de) | Registrierverfahren und -vorrichtung für ein positionserfassungssystem | |
| DE102018124640A1 (de) | Verfahren und Vorrichtungen zur Aufnahme von Tomogrammen und Strukturen unter Verwendung unbemannter Luftfahrzeuge | |
| DE102007053993B4 (de) | Verfahren und Vorrichtung zur Werkzeugvermessung | |
| DE102012112321A1 (de) | Vorrichtung zum optischen Abtasten und Vermessen einer Umgebung | |
| DE102018004782B4 (de) | Verfahren und Vorrichtung zum Erfassen einer Umgebung, sowie Fahrzeug mit einer solchen Vorrichtung | |
| EP3136711A1 (de) | Verfahren zur erzeugung und auswertung eines bilds | |
| EP2690459A2 (de) | Vorrichtung und Verfahren zum Identifizieren und Dokumentieren mindestens eines ein Strahlungsfeld durchfahrendes Objektes | |
| DE202015102791U1 (de) | System zur Erfassung von Bilddaten einer Oberfläche eines Objekts und Kamerasystem zur Verwendung in einem solchen System | |
| DE112012004055T5 (de) | Bildaufnahmevorrichtung | |
| DE102007047499A1 (de) | Verfahren und Vorrichtung zur Erfassung von Informationen eines Werkzeugs | |
| EP1805481A1 (de) | System und verfahren zum vermessen eines körpers und zum überwachen von dessen oberfläche | |
| EP3772723A1 (de) | Verfahren und system zur drehzahlbestimmung mittels videokamera | |
| DE102013103343A1 (de) | Verfahren zum Erstellen von optischen Aufnahmen sowie System zur Erstellung von optischen Aufnahmen | |
| DE102015215810A1 (de) | Bildverarbeitungsvorrichtung, Bildverarbeitungsverfahren und Bildverarbeitungsprogramm | |
| EP3236440B1 (de) | Vorrichtung, system und verfahren zur markierungsfreien hangüberwachung und/oder bauüberwachung | |
| DE102007038785A1 (de) | Verfahren und Vorrichtung zum Bestimmen von Geometriedaten eines Messobjekts | |
| DE102013217347A1 (de) | Benutzeroberfläche zur parametereinstellung für kantenmessungs- videowerkzeuge | |
| DE102017100885B4 (de) | Verfahren und vorrichtung zum erzeugen und projizieren eines 3d-thermogramms samt daten zu den aufnahmebedingungen | |
| EP4410685B1 (de) | Kanalinspektionssystem | |
| Gaich et al. | 3D images for digital tunnel face documentation at TBM headings–Application at Koralmtunnel lot KAT2/3D‐Bilder zur digitalen Ortsbrustdokumentation bei TBM‐Vortrieben–Anwendung beim Koralmtunnel Baulos KAT2 | |
| DE102010029627B4 (de) | Vorrichtung und Verfahren zur Bestimmung der Struktur einer spiegelnden Oberfläche eines Objekts |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
| 17P | Request for examination filed |
Effective date: 20160129 |
|
| AK | Designated contracting states |
Kind code of ref document: A2 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
| AX | Request for extension of the european patent |
Extension state: BA ME |
|
| DAX | Request for extension of the european patent (deleted) | ||
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: EXAMINATION IS IN PROGRESS |
|
| 17Q | First examination report despatched |
Effective date: 20170609 |
|
| GRAP | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOSNIGR1 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: GRANT OF PATENT IS INTENDED |
|
| INTG | Intention to grant announced |
Effective date: 20190607 |
|
| GRAS | Grant fee paid |
Free format text: ORIGINAL CODE: EPIDOSNIGR3 |
|
| GRAJ | Information related to disapproval of communication of intention to grant by the applicant or resumption of examination proceedings by the epo deleted |
Free format text: ORIGINAL CODE: EPIDOSDIGR1 |
|
| GRAL | Information related to payment of fee for publishing/printing deleted |
Free format text: ORIGINAL CODE: EPIDOSDIGR3 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: EXAMINATION IS IN PROGRESS |
|
| GRAR | Information related to intention to grant a patent recorded |
Free format text: ORIGINAL CODE: EPIDOSNIGR71 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: GRANT OF PATENT IS INTENDED |
|
| GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE PATENT HAS BEEN GRANTED |
|
| INTC | Intention to grant announced (deleted) | ||
| AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
| INTG | Intention to grant announced |
Effective date: 20191111 |
|
| REG | Reference to a national code |
Ref country code: CH Ref legal event code: EP |
|
| REG | Reference to a national code |
Ref country code: DE Ref legal event code: R096 Ref document number: 502014013288 Country of ref document: DE |
|
| REG | Reference to a national code |
Ref country code: IE Ref legal event code: FG4D Free format text: LANGUAGE OF EP DOCUMENT: GERMAN |
|
| REG | Reference to a national code |
Ref country code: AT Ref legal event code: REF Ref document number: 1215089 Country of ref document: AT Kind code of ref document: T Effective date: 20200115 |
|
| REG | Reference to a national code |
Ref country code: NL Ref legal event code: MP Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FI Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: SE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: LT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: BG Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20200318 Ref country code: GR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20200319 Ref country code: LV Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| REG | Reference to a national code |
Ref country code: LT Ref legal event code: MG4D Ref country code: NO Ref legal event code: T2 Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: HR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: RS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: AL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: EE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: NL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: PT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20200513 Ref country code: CZ Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: RO Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20200418 Ref country code: SK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: SM Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| REG | Reference to a national code |
Ref country code: DE Ref legal event code: R026 Ref document number: 502014013288 Country of ref document: DE |
|
| PLBI | Opposition filed |
Free format text: ORIGINAL CODE: 0009260 |
|
| PLAX | Notice of opposition and request to file observation + time limit sent |
Free format text: ORIGINAL CODE: EPIDOSNOBS2 |
|
| 26 | Opposition filed |
Opponent name: 3GSM GMBH Effective date: 20200910 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: DK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: SI Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PLBB | Reply of patent proprietor to notice(s) of opposition received |
Free format text: ORIGINAL CODE: EPIDOSNOBS3 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: MC Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: PL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| GBPC | Gb: european patent ceased through non-payment of renewal fee |
Effective date: 20200721 |
|
| REG | Reference to a national code |
Ref country code: BE Ref legal event code: MM Effective date: 20200731 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: GB Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20200721 Ref country code: LU Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20200721 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: BE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20200731 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20200721 |
|
| REG | Reference to a national code |
Ref country code: DE Ref legal event code: R100 Ref document number: 502014013288 Country of ref document: DE |
|
| PLCK | Communication despatched that opposition was rejected |
Free format text: ORIGINAL CODE: EPIDOSNREJ1 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: TR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: MT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 Ref country code: CY Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| PLBN | Opposition rejected |
Free format text: ORIGINAL CODE: 0009273 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: OPPOSITION REJECTED |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: MK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20191218 |
|
| 27O | Opposition rejected |
Effective date: 20220215 |
|
| P01 | Opt-out of the competence of the unified patent court (upc) registered |
Effective date: 20230517 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: DE Payment date: 20240703 Year of fee payment: 11 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: NO Payment date: 20250731 Year of fee payment: 12 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20250729 Year of fee payment: 12 Ref country code: AT Payment date: 20250723 Year of fee payment: 12 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: CH Payment date: 20250806 Year of fee payment: 12 |