EP3134834A1 - Method for the automated creation of a data set characterizing a technical drawing - Google Patents

Method for the automated creation of a data set characterizing a technical drawing

Info

Publication number
EP3134834A1
EP3134834A1 EP15720291.2A EP15720291A EP3134834A1 EP 3134834 A1 EP3134834 A1 EP 3134834A1 EP 15720291 A EP15720291 A EP 15720291A EP 3134834 A1 EP3134834 A1 EP 3134834A1
Authority
EP
European Patent Office
Prior art keywords
symbol
data
connection
connection point
symbols
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
EP15720291.2A
Other languages
German (de)
French (fr)
Inventor
Harald Held
Hermann Georg Mayer
Efrossini TSOUCHNIKA
Klaus Wendelberger
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP3134834A1 publication Critical patent/EP3134834A1/en
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00—Computer-aided design [CAD]
    • G06F30/10—Geometric CAD
    • G06F30/18—Network design, e.g. design based on topological or interconnect aspects of utility systems, piping, heating ventilation air conditioning [HVAC] or cabling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/42—Document-oriented image-based pattern recognition based on the type of document
    • G06V30/422—Technical drawings; Geographical maps
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00—Details relating to CAD techniques
    • G06F2111/12—Symbolic schematics

Definitions

  • the invention relates to a method for the automated production of a technical drawing with symbols and the symbols connecting lines characterizing data set from the drawing, comprising the steps performed in a computer system:
  • symbol candidates from all lines can now be filtered (eg by means of rules or search for rectangles, see, for example, BY Yu, A. Samal, SC Seth: A System for Recognizing a Large Class of Engineering Drawings IEEE Trans on PAMI 19: 8, 868-890 (1997) and S. Adam, JM
  • the symbol candidates are then classified, ie assigned to symbol types stored in the library.
  • symbol types stored in the library.
  • graphical identifying each symbol are bolBibliothek symmetry to each type of icon data sets behind ⁇ .
  • recognition and interpretation are essentially complete.
  • another manual post-processing which serves to correct errors in the classification, ie the assignment of symbol types to the respective nodes.
  • a disadvantage of the known methods is that while the problem of computer-internal representation of the documents is resolved, cross-document relationships and meta-information remain unconsidered.
  • WO 2013/092654 AI it comes to the detection and replacement of certain substructures.
  • step d) Depositing a number of connection points with each connection point the associated connection point data to a number of types of symbols in the symbol library, and step e) assigning each of exactly one connection ⁇ point of a number of endpoints, at least on the basis of the terminal data and the Leave each associated connection point to the respective end point in the record includes.
  • the invention is based on the consideration that the problem of digitally detecting existing documents which describe certain processes and relationships in diagram form is indeed already solved with known approaches, but with the methods described in the prior art semantic, actually available and interpretable information is disregarded. In particular, the connections or their arrangement between the individual symbols are indeed recorded, but their semantic meaning is not. Therefore, especially when classifying and tracking
  • connection points are defined for each symbol, for which, for example, identifying connection point data is stored.
  • the assignment of the connections found or their end points to the symbols is then further specified in the following: Namely, the end points are not only assigned to the respective node but to a specific connection point of the respective node or symbol.
  • it can also be determined from the data record which connections carry which information or meaning by depositing corresponding information in the connection point data in the symbol library.
  • the data set thus also receives semantic information that can be used in the subsequent further processing.
  • the connection point data and connection points provide further information that can be used in determining the correct symbol type to a symbol and thus improve the accuracy of detection.
  • connection point data comprise a connection point type.
  • a connection point type could be stored which only allows a directed connection.
  • Another type of connection point is, for example, a negation.
  • connection point types are conceivable in this case, ie a connection point meh ⁇ rere types are assigned. It is furthermore advantageously stored for each terminal type, with which port ⁇ point types of the respective terminal type common end points te can form a compound.
  • connection type "input” to be deposited that an output has to be assigned at a Ver ⁇ bond, whose one endpoint being associated with the other endpoint.
  • This Informa ⁇ functions can also be used in the detection of symbol types, thereby allowing an better and more accurate assignment.
  • ID Case ⁇ onseigenschaften are still stored in the symbol library. This serves to assign the respective end points of the connections found in the classification of the nodes to the correct connection points.
  • the terminal type can also rela basis of a text within a definable rectangle ⁇ tiv be identified to the terminal position.
  • connection point data comprise information indicating whether the respective connection point must be assigned to an end point.
  • This information may also be in the detection of symbol types, that is, in the classification of node verwen- det be by namely selected from the library icon type is then and only then assigned to a node if the selected by said information terminal ⁇ point is found and also connected.
  • Said step e), namely, assigning the terminal ⁇ points of the icons to the end points of the compounds is advantageously carried out starting from a compound serially by tracing another, subsequent to the nodes of an end point of the connecting links. That is, the classification takes place successively along the connecting lines, which are continuously followed up. This makes it possible to specify relevant characteristics of the termination points for certain applications.
  • the symbol data comprises in this case advantageously an in ⁇ formation which indicates whether on the relevant symbol puffge- rising compounds are to be tracked. This also limits the detection and classification of the nodes when certain areas of the technical drawing are not relevant to the desired application.
  • the symbol data comprise a second representation of the symbol type, wherein the second representation comprises a plurality of nodes each having associated symbol types and connections to the plurality of endpoints assigned to the plurality of nodes.
  • a symbol type can be characterized as Assembled symbol, meaning it is ei ⁇ sionally composed of several also previously defined elemental symbols and connections among these elemental nodes, so thus forms a sub-graph that corresponds to the-called second representation.
  • connection ⁇ points correspond to the connection points of the parent, assembled symbol. If in the classification When a symbol is encountered that is marked as an assembled symbol, it can be immediately replaced with its elementary symbols and links, if desired. Also, at this point, all other symbol and terminal point properties are considered, such as: B. the already described end of the follow-up of connections to a correspondingly marked icon, etc.
  • the terminal data also include information indicating whether the respective An ⁇ connection point must be assigned for the use of the respective second representation of an endpoint. That is, the replacement of an assembled symbol by the corresponding subgraph is tied to the condition that one or more particular connection points must be connected. This allows an automatic error message to the user if this is not the case.
  • connection point data comprise information indicating whether the respective connection point can be duplicated. From ⁇ pending namely it can occur on the particular application, that a plurality of connecting lines converge at a connection point of a symbol.
  • the appropriate port can be duplicated, that is, it is deposited an identical connection point in the logical image in the data at the respective node, that is, the existing connection point duplicated and each of the connection ⁇ points an end point of each of the convergent links is in each case assigned , If this information is deposited, if such a duplication is allowed, there is also the possibility of an automatic error message to the user again, if the mark is not set and such a situation is found.
  • the described step c), namely the identification of the connections for this purpose advantageously includes identifying outgoing of a symbol, open lines in the technical drawing, wherein the open end point of the representing compound in the record is assigned a connector and stored in the record, the connection repre- to ei ⁇ nem connector of a second technical drawing advantage.
  • Connectors are identified by certain predefined properties stored in the symbol library. If a connector is found in this way, it is included as a node in the overall graph in the dataset. Found text information is assigned to the connector.
  • connection between matching connectors are automatically closed (depending on the application) (in the graph, this means that the connector node is removed and a corresponding connection, ie edge, is inserted in the graph, with the endpoints of the new connection corresponding to the respective endpoints of the connector correspond to connectors connected to the connector). It is important here that certain text information can be passed through the graph to all connection points for which the information is relevant (eg signal names in over certain blocks and pages).
  • some of the connecting points ⁇ stored terminal data enable (duplicability, necessity of connection with replacement by substructure) in the library, the recognition of errors both in the assignment and in the technical drawing itself.
  • the satisfiability of the conditions stored in the symbol data and / or connection point data is advantageously checked, and an error is recognized if it can not be satisfied.
  • either the classification of the recognized symbols with the correct symbol types can be improved, for. B. by the user is prompted for manual control, or it can - if a classification Toggle handle pre-determined criteria sufficient reliabil ⁇ stechnik was determined - even an error in the technical drawings are automatically detected in this way.
  • a computer program product that can be loaded directly into the internal storage of a computer rather includes vorteilhaf ⁇ ingly software code sections with which the method described is carried out, when the computer program product is run on the computer.
  • a computer system advantageously comprises a scanner and an internal memory in which such a computer program product is loaded.
  • the method also enables improved automatic error detection: senseless connections can be found through the directed edges of the graph stored in the data record and the knowledge of which connection point types are connected (eg connection between two incoming connection points). Whether errors of this kind have been caused by an incorrect recognition or result from already faulty documents does not matter. In any case, a manual intervention is advisable. The corresponding user can be notified so hereby stating the be ⁇ turbanten symbols of the document and also the connection points involved.
  • Th defined in the symbol library connection point Eigenschaf- can be checked during the classification and processing of documents and, if necessary, can be traded ent ⁇ speaking.
  • Examples of the type described in the introduction to application WO 2013/092654 in the AI are to check whether a connection point must be connected and whether a multi-connected terminal must be duplicated automatic ⁇ table. In the event of an error, a corresponding message with exact specification of document, symbol and connection point can be redirected to the user. Text information associated with connectors can be automatically routed through the resulting graph, even across multiple pages. This capability can be used in the application described in WO 2013/092654 AI. be used to pass signal names and other information to remote connection points.
  • FIG. 1 shows a schematic flowchart of a method for the automated creation of a technical drawing with symbols and the symbols connecting lines characterizing data set
  • FIG 9 is an input mask of the Symbol Library for Hinterle ⁇ supply the symbol data and connection point data. Identical parts are provided in all figures with the same employersszei ⁇ chen.
  • 1 shows a schematic flow diagram of a method 1 for the automated creation of a technical drawing with symbols and the symbols connecting lines characterizing record. This is based on a technical drawing.
  • a technical drawing is generally a document which shows in graphical and written form all the information necessary for the production and description of the required functions and properties of an individual part, an assembly or a complete product and serves as part of the technical product documentation. As a rule, especially in more complex systems such as entire factories many hundred and a thousand pages will be present on such technical drawings. These are characterized in that they consist of symbols that z. B. represent individual components of the system, and Li ⁇ lines between the symbols that represent active compounds, eg. B. a power or data transmission.
  • All the steps of the method shown in FIG. 1 are carried out in a computer system, which is not shown in greater detail, and which is correspondingly suitable for carrying out the steps.
  • a ⁇ Com puter program is loaded, which combines software code portions environmentally that cause the computer system to perform the method.
  • step a) the technical drawing is first ge ⁇ scanned. This includes all pages of the technical drawing, ie several pages of technical drawings are recorded digitally.
  • the scanned image files are vectorized, ie in the raster image generated in each case are identified in the vectorization into simple geometric objects. This can be done with the expert and known in the prior art variants, for. B. areas can be the same or similar brightness or color, also known as posterization, ermit ⁇ telt on edge detection.
  • the result is ultimately coordinate data graphi- primitives in the technical drawing, ie lines, open or closed curves, points etc.
  • step b) From the vector graphics are subsequently identified in step b) the symbols in the technical drawing, ie de ⁇ ren number and location.
  • the symbols in the technical drawing ie de ⁇ ren number and location.
  • nodes representing each symbol are now deposited. This creates a sub-record for each symbol on the respective page
  • step c) which can be carried out with step b) at the same time, at least two symbols connecting Li ⁇ nien be identified in the engineering drawing, and the line representing JE stays awhile compounds are stored in the data ⁇ set.
  • Each connection is assigned at least two endpoints and assigned to each endpoint of one of the nodes representing the symbols connected by the respective line.
  • FIG. 2 shows a schematic, abs gas tract simplified picture of a technical drawing in the upper part 2. This comprises an image represented as a circle symbol sl, at the bottom of a square as shown symbol s2, and two in the right area as a triangle or parallelogram crossed represented symbols s3 and s4.
  • the symbol sl has a terminal marked "OUT” on its lower side
  • the symbol s2 has a terminal marked "IN” on its upper side.
  • the connections are connected by the line 11.
  • Symbol s2 has on its right side a further, marked "OUT" terminal. 12 Starting from this terminal performs a line to a port on the left side of the symbol s3, and a further line 13 to an on ⁇ connection left on the Page of symbol s4
  • the symbol s2 has on its left side another unmarked port that is not connected.
  • the object of the method is essentially to automatically extract the textually described properties of the technical drawing 2, as well as possibly further contextual information from the technical drawing 2 itself.
  • FIG. 3 shows the data set 4 as it exists after the steps a), b) and c).
  • Deposited are the four recognized symbols sl, s2, s3 and s4, together with their in enveloping surfaces, d. H. so-called bounding boxes deposited, vectorized present
  • the data record contains information that the three lines 11, 12 and 13 were recognized and in each case connect the symbols sl-s2, s2-s3 or s2-s4. In fact, this corresponds
  • a symbol library 8 is provided, which is shown schematically in detail in FIG.
  • the symbol library 8 is specific to a particular technical drawing 2 or specifically for a particular technical system, which is ⁇ written by the technical drawing 2 created. It contains symbol types stl, st2, etc. for each symbol that may appear in a particular system, represented in a technical drawing. For these symbol types stl, st2 etc. Sym ⁇ boldaten 10 are deposited, such. Example, a graphical representation of the symbol for comparison with the graphics information 6 from the scanned, vectorized representation of the symbols. With From this information, it is already possible to further identify the nodes of the already mentioned undirected graph in the data record 4.
  • connection points al, a2, a3, etc. are defined for each symbol type stl, st2, etc.
  • the ⁇ be indicated that is stored for each type of symbol stl, st2, etc., as many terminals al, a2, a3, etc. it has.
  • connection point data 12 are stored, which contain additional information on the respective connection point al, a2, a3, etc..
  • connection point data 12 information about the identification of the respective connection point al, a2, a3, etc. is stored in the connection point data 12.
  • symbol type st2 has three connection points st2-al, st2-a2 and st2-a3.
  • st2-al is arranged centrally at the top of the boun- ding box. Or else st2-al is always characterized by a certain text at a certain distance and direction from its position, such as: B. the text shown in FIG 1 "IN” or "OUT".
  • a connection point types can be stored for each connection point al, a2, a3, such. For example, "incoming”, “outgoing”, “negation”, “only connection with arrow”, etc.
  • information is stored in the symbol library as to which connection point types may be connected by a connection, eg. For example, a connection type "incoming” must always be connected to a connection point "outgoing” via a line.
  • connection point data 12 can also be deposited, whether a connection point al, a2, a3 may be duplicated, if there are several connections to it, or if this indicates an error. This can also be linked to other conditions.
  • a connection point, a 2 may a3 be as marked ⁇ going round that he must necessarily be connected, recognized starting certain of it substructures ⁇ the will, or the importance it has in one of the recognized documents to be generated format.
  • connection point data 12 stored specifically for connection points a1, a2, a3, step e) can now be carried out with reference to FIG.
  • a symbol type stl, st2 etc. from the symbol library is 8 per ⁇ wells assigned to each node in the graph and the respective information is stored in the data record.
  • the connection point data 12 and icon data 10 to be evaluated to the effect that each detected connection point al, a2, a3, etc. to each symbol sl, s2, s3, s4 having a respectively assigned symbol type stl, st2 etc. each associated with an end point of a Verbin ⁇ dung is if he is connected. This is done by successively tracking the connections between the symbols sl, s2, s3, s4.
  • the resulting data set is by way of example is provided in FIG 5 ⁇ .
  • the symbols s1, s2, s3, s4 are listed, but with a large number of further information.
  • each connection point a1, a2, a3, etc. taken from the symbol library is also identified for each symbol type st1, st2, st3, st4 in the symbols s1, s2, s3, s4 and an endpoint associated with a line 11, 12, 13.
  • 8-al as st2 in the symbol library is "incoming” and characterized st2-a2 as a "starting" and this information is stored in wide ⁇ ren data 14 in the data set. 4
  • the resulting graph thus also receives a direction.
  • connection point st2-a2 it will be duplicated can, which is also the case in the technical drawing 2, since with this connection two lines 12, 13 connect.
  • data set 4 is stored, that for the terminal s2 symbol st2-al with line 11, the first duplicate of Anschlus ⁇ ses st2-al with line 12, the second duplicate of the terminal-al st2 with line 13 and the connection st2 -a3 is free.
  • ⁇ additionally to any other, from the symbol data 10 and data terminal 12 are in the data 14 extracted ones of information stored, which may be used in further processing.
  • certain parameters in the evaluation in step d) and e) can be specified, such. B. that certain connection points al, a2, a3, etc. should be ignored if only a section of the technical drawing 2 is to be detected for a particular application.
  • the symbol data 10 can also be stored in the symbol data 10 that connections beyond certain symbols st1, st2 etc. are no longer pursued.
  • the symbol data 10 will be significantly expanded in the illustrated embodiment of the method 1.
  • a decomposition into subsymbol types may be deposited.
  • An example of this would be an aggregate in a circuit diagram, which in turn consists of several interconnected components.
  • the substructure can be stored in the symbol data 10.
  • FIG 6 shows the Sym ⁇ boltyp st2 with its three terminals al, a2 and a3 in the left image part and in the right part a second representation position 16 of the symbol type st2 in the form of its substructure, consisting of the three types of symbols st5, st6 and st7.
  • the Sym ⁇ boltypen st5, st6 and st7 each have three terminals al, a2, a3, and are interconnected by the lines 14, 15, 16 connected. Open only the connection point st 6 al, which is the connection point st2-al in the parent
  • connection point st7-a2 which corresponds to the An ⁇ termination point st2-a2 in the parent structure
  • connection point st5-a3 which corresponds to the connection ⁇ point st2-a3 in the parent structure.
  • the substructure is stored in the symbol library 8 in the same way as described for the main structure in the symbol data 10, as shown in FIG. That is, there are, firstly, all symbol types st5, st6, st7 the substructure stored, as well as all connection points al, a2, a3 each Sym ⁇ boltyps st5, st6, st7 the substructure.
  • the connection points a1, a2, a3 already connected within the substructure by connections 14, 15, 16 are likewise identified and deposited, as explained above.
  • This deposit in the symbol library 8 makes it possible, during the compilation of the data set 4 to corresponding ⁇ Before setting or automatically such symbol types, is deposited for a second representation 16 to replace structure through the sub. Criteria for this may also be stored in the connection point data 12, for example that such a replacement by the second representation 16 takes place only when a specific connection point a1, a2, a3 of the superordinate symbol type is connected in the scanned original.
  • Another advantage of the method 1 described so far is that it tracks connections over several pages can be. This is done in real technical drawings, for example by textual descriptions (example: an "A / 02" designation should indicate that a connection to the "A" indicator on page 02 should be closed).
  • step c) open lines emanating from a symbol are also identified in the technical drawing. 8 shows such a situation.
  • the side "01" In the left half is a detail of a first technical drawing 2, which is shown, the side "01".
  • ⁇ voltage 2 which is shown, the side "02".
  • Page "01" comprises a symbol s5 with a connected line 17.
  • an identification "A / 02" is deposited.
  • the corresponding end point of the line 17 is thus associated with a connector class, the connector class and the image data of the marking ⁇ be deposited. This is done in the context of step c) and is not shown separately.
  • the system allows automated detection of errors in the technical drawings 2.
  • a connection point must be connected and whether a multipoint connection point may be automatically duplicated.
  • it is checked whether the rules regarding the connection are adhered to, ie it is checked whether. For example, two are connected as "incoming" labeled connection points incorrectly each other. In the event of a fault message, specifying of document icon and the connection point to the user is thereby ⁇ give out which performs a manual inspection and correction.
  • FIG 9 shows ei ⁇ NEN part of another concretelysbei ⁇ game for use in the I & C system developed by the applicant T3000 for power plants.
  • the Siemens Power and Process Automation T3000 control system (SPPA-T3000) is designed to perform all power plant automation tasks: turbine control, boiler control including boiler protection, auxiliary and ancillary equipment, and the integration of systems from other suppliers, such as gasification plants in the context of IGCC (Integrated Gasification Combined Cycle) applications.
  • SPPA-T3000 Siemens Power and Process Automation T3000 control system
  • FIG. 9 specifically shows an input mask 18 of the symbol library 8 for storing the symbol data 10 and connection point data 12. This is displayed in a known graphical user interface on a computer system to deposit symbol types in the symbol library 8.
  • the input mask 18 shows in the lower area first the
  • Graphic information 6 ie a concrete image of the symbol ⁇ type together with its connection points and their location, which are used as described for the assignment of symbol types to symbols.
  • the input mask shows 18 options for entering symbol data 10.
  • the list shown allows the entry of a name for the symbol type as well as the automatic assignment to a so-called AFI (automation function instance), which defines a specific function block in the SPPA.
  • AFI automatic function instance
  • T3000 represents. Furthermore, certain identification ⁇ markers can be stored and an automatic ERSET ⁇ it, shall be caused by a substructure ( "Explode macro").
  • connection point data which takes the form of a table.
  • buttons for adding or removing connection points each corresponding to one row of the table.
  • the type of identification stored In the example of FIG. 9 all of the connection points are identified by their position z. B. can be defined by clicking on the lower screen.
  • connection point data 14 additional data

Abstract

The invention relates to a method (1) for the automated creation of a data set (4), which characterizes a technical drawing (2) having symbols (S1...s6) and lines (l1...l8) connecting the symbols (s1...s6), from the drawing (2), comprising the following steps performed in a computer system: a) scanning the technical drawing (2), b) identifying the symbols (s1...s6) in the technical drawing (2) and storing nodes representing the respective symbols (s1...s6) in the data set (4), c) identifying lines (l1...l8) each connecting at least two symbols (s1...s6) in the technical drawing (2) and storing connections representing the respective lines (l1...l8) in the data set (4), wherein at least two end points are associated with each connection and one of the nodes that represent the symbols (s1...s6) connected by the particular line (l1...l8) is associated with each end point, d) providing a symbol library (8) having a plurality of symbol types (st1...st7) and symbol data (10) associated with each symbol type (st1...st7), e) associating exactly one symbol type (st1...st7) from the symbol library (8) with each node at least on the basis of the symbol data (10) and storing the associated symbol types (st1...st7) for the respective nodes in the data set (4), should make it possible to automatically extract semantic information and relationships from vectorized data of a technical drawing such that said semantic information and relationships are available for further processing. For this purpose, step d) comprises storing a number of connection points (a1...a3) having connection-point data (12) associated with each connection point (a1...a3) for a number of the symbol types (st1...st7) in the symbol library (8), and step e) comprises associating exactly one connection point (a1...a3) with each of a number of end points at least on the basis of the connection-point data (12) and storing the respective associated connection points (a1...a3) for the end points in the data set (4).

Description

Beschreibung description
Verfahren zur automatisierten Erstellung eines eine technische Zeichnung charakterisierenden Datensatzes Method for the automated creation of a data record characterizing a technical drawing
Die Erfindung betrifft ein Verfahren zur automatisierten Erstellung eines eine technische Zeichnung mit Symbolen und die Symbole verbindenden Linien charakterisierenden Datensatzes aus der Zeichnung, umfassend die in einem Computersystem durchgeführten Verfahrensschritte: The invention relates to a method for the automated production of a technical drawing with symbols and the symbols connecting lines characterizing data set from the drawing, comprising the steps performed in a computer system:
a) Scannen der technischen Zeichnung, a) scanning the technical drawing,
b) Identifizieren der Symbole in der technischen Zeichnung und Hinterlegen von das jeweilige Symbol repräsentierenden Knoten im Datensatz, b) identifying the symbols in the technical drawing and depositing nodes representing the respective symbol in the data record,
c) Identifizieren von jeweils mindestens zwei Symbole verbin¬ denden Linien in der technischen Zeichnung und Hinterlegen von die jeweilige Linie repräsentierenden Verbindungen im Datensatz, wobei jeder Verbindung mindestens zwei Endpunkte zu¬ geordnet werden und jedem Endpunkt einer der Knoten zugeord- net wird, die die durch die jeweilige Linie verbundenen Sym¬ bole repräsentieren, c) identifying at least two symbols verbin ¬ Denden lines in the technical drawing and deposit of each line representing the connections in the data set, wherein each compound are rated at least two endpoints ¬ and each endpoint one of the nodes is assigned net, the represent by the respective line connected Sym ¬ bole,
d) Bereitstellen einer Symbolbibliothek mit einer Mehrzahl von Symboltypen und jedem Symboltyp zugeordneten Symboldaten, e) Zuordnen jeweils genau eines Symboltyps aus der Symbolbib- liothek zu jedem Knoten zumindest auf Basis der Symboldaten und Hinterlegen des jeweils zugeordneten Symboltyps zu dem jeweiligen Knoten im Datensatz. d) providing a symbol library with a plurality of symbol types and symbol data associated with each symbol type, e) assigning exactly one symbol type from the symbol library to each node based at least on the symbol data and storing the respective assigned symbol type to the respective node in the data record.
Die Beschreibung von komplexen Zusammenhängen und Abläufen in technischen Anlagen und Geräten lässt sich in vielen Fällen und Anwendungen durch technische Zeichnungen oder Diagramme darstellen. Solche Zeichnungen findet man u. a. in Funktionsplänen zur Beschreibung und Erzeugung von Automatisierungsfunktionen vor wie sie z. B. in der WO 2013/092654 AI be- schrieben sind. Typische Eigenschaften solcher Zeichnungen sind, dass es gewisse Symbole gibt, die untereinander durch Linien verknüpft sind. Aufgrund des Umfangs der zu verarbeitenden Dokumente und der Fehleranfälligkeit bei manueller Bearbeitung sind durch ein automatisches, digitalisiertes Verfahren bei der Verarbeitung der Zeichnungen erhebliche Zeit- und Kostenersparnisse zu er- warten. Das Scannen und Vektorisieren von Diagrammen in hinreichend guter Qualität, inklusive Texterkennung (OCR) , ist heute problemlos möglich. Hierzu werden die Diagramme ge¬ scannt, so dass sie als Rastergrafiken vorliegen, und in Vektorinformationen und Text mit modernen Software-Tools trans- feriert. The description of complex relationships and processes in technical systems and devices can in many cases and applications be represented by technical drawings or diagrams. Such drawings can be found, inter alia, in function diagrams for the description and generation of automation functions before as z. B. in WO 2013/092654 AI described. Typical features of such drawings are that there are certain symbols that are linked together by lines. Due to the size of the documents to be processed and the error-prone nature of manual processing, an automatic, digitized process in the processing of the drawings can be expected to save considerable time and money. The scanning and vectorizing of diagrams in sufficiently good quality, including text recognition (OCR), is today easily possible. For this, the charts are scanned ge ¬ so that they exist as raster graphics, and feriert trans- into vector information and text with modern software tools.
Von diesen Vektorinformationen ausgehend können nun - nach optionaler Vorverarbeitung - Symbolkandidaten aus allen Linien gefiltert werden (z. B. anhand von Regeln bzw. Suche nach Rechtecken, siehe z. B. Y. Yu, A. Samal, S.C. Seth: A System for Recognizing a Large Class of Engineering Drawings . IEEE Trans on PAMI19:8, 868-890 (1997) und S. Adam, J.M. Starting from this vector information, after optional preprocessing, symbol candidates from all lines can now be filtered (eg by means of rules or search for rectangles, see, for example, BY Yu, A. Samal, SC Seth: A System for Recognizing a Large Class of Engineering Drawings IEEE Trans on PAMI 19: 8, 868-890 (1997) and S. Adam, JM
Ogier, C. Cariou, R. Mullot, J. Labiche, J. Gardes: Symbol and character recognition: application to engineering drawings. IJDAR 3, 89-101 (2000)) sowie Verbindungslinien zwischen den Symbolkandidaten identifiziert werden. Abschließend erhält man auf diese Weise eine Darstellung als Graph (im ma¬ thematischen Sinne) , der die Symbole und deren Verbindungen untereinander beschreibt, und zwar für jede verarbeitete Sei¬ te. Dieser Graph, dessen Knoten die Symbole beschreibt, bil¬ det einen Datensatz, der zur Weiterverarbeitung verwendet werden kann. Die Linien zwischen den Symbolen werden im Datensatz als Verbindungen mit Endpunkten abgelegt, wobei die Endpunkte den jeweiligen Knoten zugeordnet werden, die durch die Linie verbunden werden. Ogier, C. Cariou, R. Mullot, J. Labiche, J. Gardes: Symbol and character recognition: application to engineering drawings. IJDAR 3, 89-101 (2000)) as well as connecting lines between the symbol candidates. Finally, one obtains in this way a representation as a graph (in ma ¬ thematic sense), which describes the symbols and their connections to each other, namely for each processed Be ¬ te. This graph whose nodes describes the symbols, bil ¬ det a record that can be used for further processing. The lines between the symbols are placed in the dataset as connections to endpoints, with the endpoints assigned to the respective nodes connected by the line.
Anhand einer vorab erstellten Symbolbibliothek werden dann die Symbolkandidaten klassifiziert, d. h. in der Bibliothek hinterlegten Symboltypen zugeordnet. Hierzu sind in der Sym- bolbibliothek zu jedem Typ entsprechende Symboldaten, insbesondere graphische Erkennungsmerkmale jedes Symbols hinter¬ legt. An dieser Stelle sind die Erkennung und Interpretation im Wesentlichen abgeschlossen. Darüber hinaus ist bekannt, noch eine manuelle Nachbearbeitung durchzuführen, die der Korrektur von Fehlern bei der Klassifizierung, d. h. der Zuordnung von Symboltypen zu den jeweiligen Knoten dient. Nachteilig bei den bekannten Verfahren ist jedoch, dass zwar das Problem der rechnerinternen Darstellung der Dokumente gelöst wird, dokumentenübergreifende Zusammenhänge und Meta-In- formationen jedoch unberücksichtigt bleiben. Insbesondere in der in der WO 2013/092654 AI beschriebenen Anwendung geht es um die Erkennung und Ersetzung von gewissen Teilstrukturen.On the basis of a previously created symbol library, the symbol candidates are then classified, ie assigned to symbol types stored in the library. For this purpose, in particular graphical identifying each symbol are bolbibliothek symmetry to each type of icon data sets behind ¬. At this point, recognition and interpretation are essentially complete. In addition, it is known to carry out another manual post-processing, which serves to correct errors in the classification, ie the assignment of symbol types to the respective nodes. A disadvantage of the known methods, however, is that while the problem of computer-internal representation of the documents is resolved, cross-document relationships and meta-information remain unconsidered. In particular, in the application described in WO 2013/092654 AI it comes to the detection and replacement of certain substructures.
Dies erfordert nicht nur die bloße Erkennung von Symbolen und Verbindungen zwecks Digitalisierung, sondern auch deren semantische Interpretation. Falls solche Informationen in einer bestimmten Anwendung erforderlich sind, müssen diese also bisher manuell eingegeben werden, was sowohl sehr zeitaufwän- dig als auch fehleranfällig ist. This requires not only the mere recognition of symbols and compounds for digitization, but also their semantic interpretation. If such information is required in a particular application, so far, they must be entered manually, which is both time-consuming and prone to error.
Es ist daher Aufgabe der Erfindung, ein Verfahren der eingangs genannten Art anzugeben, mit dem automatisch semanti- sehe Informationen und Zusammenhänge aus vektorisierten Daten einer technischen Zeichnung extrahiert werden können und somit zur weiteren Verarbeitung zur Verfügung stehen. It is therefore an object of the invention to provide a method of the type mentioned, with the automatically semantic information and coherences can be extracted from vectorized data of a technical drawing and thus are available for further processing.
Diese Aufgabe wird erfindungsgemäß dadurch gelöst, dass This object is achieved in that
Schritt d) das Hinterlegen einer Anzahl von Anschlusspunkten mit jedem Anschlusspunkt zugeordneten Anschlusspunktdaten zu einer Anzahl der Symboltypen in der Symbolbibliothek umfasst, und Schritt e) das Zuordnen jeweils genau eines Anschluss¬ punkts zu einer Anzahl der Endpunkte zumindest auf Basis der Anschlusspunktdaten und das Hinterlegen des jeweils zugeordneten Anschlusspunkts zu dem jeweiligen Endpunkt im Datensatz umfasst . Comprises step d) Depositing a number of connection points with each connection point the associated connection point data to a number of types of symbols in the symbol library, and step e) assigning each of exactly one connection ¬ point of a number of endpoints, at least on the basis of the terminal data and the Leave each associated connection point to the respective end point in the record includes.
Die Erfindung geht dabei von der Überlegung aus, dass das Problem, vorliegende Dokumente, die in Diagrammform bestimmte Abläufe und Zusammenhänge beschreiben, digital zu erfassen, zwar bereits mit bekannten Ansätzen gelöst wird, allerdings mit den im Stand der Technik beschriebenen Verfahren viele semantische, eigentlich verfügbare und interpretierbare In¬ formationen unberücksichtigt bleiben. Insbesondere werden die Verbindungen bzw. deren Anordnung zwischen den einzelnen Symbolen zwar erfasst, deren semantische Bedeutung jedoch nicht. Daher sollte gerade beim Klassifizieren und Verfolgen vonThe invention is based on the consideration that the problem of digitally detecting existing documents which describe certain processes and relationships in diagram form is indeed already solved with known approaches, but with the methods described in the prior art semantic, actually available and interpretable information is disregarded. In particular, the connections or their arrangement between the individual symbols are indeed recorded, but their semantic meaning is not. Therefore, especially when classifying and tracking
Verbindungen angesetzt werden. Insbesondere kann dies dadurch erreicht werden, dass bereits bei der Erstellung der Symbol¬ bibliothek Zusatzinformationen angegeben werden, d. h. nicht nur die Information, um welches Symbol es sich handelt und wie es zu erkennen ist, sondern auch weitere Informationen, die die möglichen Anschlusspunkte der Symbole bzw. der Bau¬ teile, Verfahrensschritte o.a., die durch das Symbol reprä¬ sentiert werden, betreffen. Für jedes Symbol werden daher Anschlusspunkte definiert, zu denen beispielsweise identifizie- rende Anschlusspunktdaten hinterlegt werden. Die Zuordnung der gefundenen Verbindungen bzw. deren Endpunkten zu den Symbolen wird im Folgenden dann weiter spezifiziert: Die Endpunkte werden nämlich nicht nur dem jeweiligen Knoten zugeordnet, sondern einem bestimmten Anschlusspunkt des jeweili- gen Knotens oder Symbols. Dadurch kann mit Hinterlegung entsprechender Informationen in den Anschlusspunktdaten in der Symbolbibliothek auch aus dem Datensatz ermittelt werden, welche Verbindungen welche Information oder Bedeutung tragen. Der Datensatz erhält somit auch semantische Informationen, die bei der folgenden weiteren Verarbeitung verwendet werden können. Weiterhin bilden die Anschlusspunktdaten und Anschlusspunkte weitere Informationen, die bei der Ermittlung des korrekten Symboltyps zu einem Symbol verwendet werden können und so die Genauigkeit der Erkennung verbessern. Connections are recognized. In particular, this can be achieved that the symbol ¬ library Additional information is provided when creating, not just the information to what the symbol is and how it can be recognized, but also other information that the possible connection points of the symbols or the construction ¬ parts, method steps oa, which are represented by the symbol reprä ¬ sent concern. Therefore, connection points are defined for each symbol, for which, for example, identifying connection point data is stored. The assignment of the connections found or their end points to the symbols is then further specified in the following: Namely, the end points are not only assigned to the respective node but to a specific connection point of the respective node or symbol. As a result, it can also be determined from the data record which connections carry which information or meaning by depositing corresponding information in the connection point data in the symbol library. The data set thus also receives semantic information that can be used in the subsequent further processing. Further, the connection point data and connection points provide further information that can be used in determining the correct symbol type to a symbol and thus improve the accuracy of detection.
In vorteilhafter Ausgestaltung umfassen die Anschlusspunktdaten einen Anschlusspunkttyp. Je nach Anwendung kann man hier z. B. kennzeichnen, ob ein Anschlusspunkt ein Eingang oder ein Ausgang ist, d. h. eine eingehende oder ausgehende Verbindung erlaubt. Allgemeiner könnte auch ein Anschlusspunkttyp hinterlegt sein, der nur eine gerichtete Verbindung erlaubt. Ein weiterer Anschlusspunkttyp ist beispielsweise eine Negation. Auch Kombinationen von Anschlusspunkttypen sind hierbei denkbar, d. h. einem Anschlusspunkt werden meh¬ rere Typen zugewiesen. Dabei ist weiterhin vorteilhafterweise zu jedem Anschlusspunkttyp hinterlegt, mit welchen Anschluss¬ punkttypen der jeweilige Anschlusspunkttyp gemeinsam Endpunk- te einer Verbindung bilden kann. Beispielsweise könnte beim Anschlusstyp „Eingang" hinterlegt sein, dass bei einer Ver¬ bindung, deren einem Endpunkt er zugeordnet wird, der andere Endpunkt einem Ausgang zugeordnet werden muss. Diese Informa¬ tionen können bei der Erkennung der Symboltypen ebenfalls verwendet werden und ermöglichen so eine bessere und genauere Zuordnung . In an advantageous embodiment, the connection point data comprise a connection point type. Depending on the application you can here z. B. indicate whether a connection point is an input or an output, ie an incoming or outgoing connection allowed. More generally, a connection point type could be stored which only allows a directed connection. Another type of connection point is, for example, a negation. Also combinations of connection point types are conceivable in this case, ie a connection point meh ¬ rere types are assigned. It is furthermore advantageously stored for each terminal type, with which port ¬ point types of the respective terminal type common end points te can form a compound. For example, when connection type "input" to be deposited that an output has to be assigned at a Ver ¬ bond, whose one endpoint being associated with the other endpoint. This Informa ¬ functions can also be used in the detection of symbol types, thereby allowing an better and more accurate assignment.
Zu jedem der verschiedenen Anschlusspunkttypen sind in der Symbolbibliothek weiterhin vorteilhafterweise Identifikati¬ onseigenschaften hinterlegt. Dies dient dazu, die jeweiligen Endpunkte der gefundenen Verbindungen bei der Klassifizierung der Knoten den richtigen Anschlusspunkten zuzuordnen. Hierfür wird für jeden Anschlusspunkttyp, bedarfsweise auch spezi¬ fisch zu jedem Symboltyp in der Bibliothek, mindestens eine Eigenschaft definiert, anhand derer er identifiziert werden kann. Abhängig von der Anwendung kann dies beispielsweise die Identifikation anhand der Position des jeweiligen Anschlusses im Verhältnis zu einem Referenzpunkt der Symbolabbildung sein, so z. B. relativ zur linken oberen Ecke der entsprechenden Hüllfläche (Bounding-Box) des Symbols. Alternativ oder auch zusätzlich kann der Anschlusspunkttyp auch anhand eines Textes innerhalb eines zu definierenden Rechtecks rela¬ tiv zur Anschlusspunktposition identifiziert werden. In weiterer vorteilhafter Ausgestaltung des Verfahrens umfassen die Anschlusspunktdaten eine Information, die angibt, ob der jeweilige Anschlusspunkt einem Endpunkt zugeordnet sein muss. Diese Information kann ebenfalls bei der Erkennung der Symboltypen, d. h. bei der Klassifizierung der Knoten verwen- det werden, indem nämlich der aus der Bibliothek ausgewählte Symboltyp dann und nur dann einem Knoten zugewiesen wird, wenn der durch die genannte Information markierte Anschluss¬ punkt gefunden wird und auch verbunden ist. Der genannte Schritt e) , nämlich das Zuordnen der Anschluss¬ punkte der Symbole zu den Endpunkten der Verbindungen erfolgt vorteilhafterweise ausgehend von einer Verbindung seriell durch Verfolgen weiterer, an den Knoten eines Endpunkts der Verbindung anschließender Verbindungen. Das heißt, die Klassifizierung erfolgt sukzessive entlang der Verbindungslinien, die kontinuierlich weiterverfolgt werden. Dies ermöglicht es, für bestimmte Anwendungsfälle relevante Eigenschaften der An- Schlusspunkte vorzugeben. Dadurch können z. B. nur Verbindungen an Anschlusspunkten mit diesen relevanten Eigenschaften berücksichtigt, d. h. weiterverfolgt werden. Dadurch erhält man nach einem Durchgang einen Graph, der nur die gewünschten Strukturen enthalt und somit unter Umständen deutlich kleiner ist als der Gesamtgraph. Dadurch wird eine Weiterverarbeitung der extrahierten Informationen erheblich effizienter. For each of the various terminal types advantageously ID Case ¬ onseigenschaften are still stored in the symbol library. This serves to assign the respective end points of the connections found in the classification of the nodes to the correct connection points. For this purpose, it is necessary also defined specific ¬ fish for each symbol type in the library, at least one property, the basis of which it can be identified for each terminal type. Depending on the application, this may be, for example, the identification based on the position of the respective terminal in relation to a reference point of the symbol image, such. B. relative to the upper left corner of the corresponding envelope surface (bounding box) of the symbol. Alternatively or additionally, the terminal type can also rela basis of a text within a definable rectangle ¬ tiv be identified to the terminal position. In a further advantageous embodiment of the method, the connection point data comprise information indicating whether the respective connection point must be assigned to an end point. This information may also be in the detection of symbol types, that is, in the classification of node verwen- det be by namely selected from the library icon type is then and only then assigned to a node if the selected by said information terminal ¬ point is found and also connected. Said step e), namely, assigning the terminal ¬ points of the icons to the end points of the compounds is advantageously carried out starting from a compound serially by tracing another, subsequent to the nodes of an end point of the connecting links. That is, the classification takes place successively along the connecting lines, which are continuously followed up. This makes it possible to specify relevant characteristics of the termination points for certain applications. As a result, z. For example, only connections to connection points with these relevant properties are taken into account, that is, followed up. As a result, after a pass, one obtains a graph which contains only the desired structures and thus may be significantly smaller than the overall graph. This makes further processing of the extracted information considerably more efficient.
Die Symboldaten umfassen hierbei vorteilhafterweise eine In¬ formation, die angibt, ob über das jeweilige Symbol hinausge- hende Verbindungen verfolgt werden sollen. Hierdurch können ebenfalls der Erkennung und Klassifizierung der Knoten Grenzen gesetzt werden, wenn bestimmte Bereiche der technischen Zeichnung für die gewünschte Anwendung nicht relevant sind. In weiterer alternativer oder zusätzlicher Ausgestaltung des Verfahrens umfassen die Symboldaten eine zweite Darstellung des Symboltyps umfassen, wobei die zweite Darstellung eine Mehrzahl von Knoten mit jeweils zugeordneten Symboltypen und Verbindungen mit der Mehrzahl von Knoten zugeordneten End- punkten umfasst. Mit anderen Worten: Ein Symboltyp kann als assembliertes Symbol gekennzeichnet sein, d. h. es ist ei¬ gentlich aus mehreren ebenfalls zuvor definierten Elementarsymbolen und Verbindungen unter diesen Elementarknoten zusammengesetzt, bildet somit also einen Subgraph, der der genann- ten zweite Darstellung entspricht. Die nach außen gerichte¬ ten, nicht innerhalb des Subgraphen verbundenen Anschluss¬ punkte entsprechen dabei den Anschlusspunkten des übergeordneten, assemblierten Symbols. Wenn bei der Klassifizierung auf ein Symbol gestoßen wird, das als assembliertes Symbol markiert ist, kann es sofort durch seine Elementarsymbole und Verbindungen ersetzt werden, falls dies gewünscht ist. Auch werden an dieser Stelle sämtliche anderen Symbol- und An- schlusspunkt-Eigenschaften berücksichtigt, wie z. B. das bereits beschriebene Ende der Weiterverfolgung von Verbindungen an einem entsprechend markierten Symbol, etc. The symbol data comprises in this case advantageously an in ¬ formation which indicates whether on the relevant symbol hinausge- rising compounds are to be tracked. This also limits the detection and classification of the nodes when certain areas of the technical drawing are not relevant to the desired application. In a further alternative or additional refinement of the method, the symbol data comprise a second representation of the symbol type, wherein the second representation comprises a plurality of nodes each having associated symbol types and connections to the plurality of endpoints assigned to the plurality of nodes. In other words, a symbol type can be characterized as Assembled symbol, meaning it is ei ¬ sionally composed of several also previously defined elemental symbols and connections among these elemental nodes, so thus forms a sub-graph that corresponds to the-called second representation. The outside courts ¬ th, unaffiliated within the sub-graphs connection ¬ points correspond to the connection points of the parent, assembled symbol. If in the classification When a symbol is encountered that is marked as an assembled symbol, it can be immediately replaced with its elementary symbols and links, if desired. Also, at this point, all other symbol and terminal point properties are considered, such as: B. the already described end of the follow-up of connections to a correspondingly marked icon, etc.
Vorteilhafterweise umfassen hierbei die Anschlusspunktdaten auch eine Information, die angibt, ob der jeweilige An¬ schlusspunkt für die Verwendung der jeweiligen zweiten Darstellung einem Endpunkt zugeordnet sein muss. Das heißt, die Ersetzung eines assemblierten Symbols durch den entsprechenden Subgraphen wird an die Bedingung geknüpft, dass ein oder mehrere bestimmte Anschlusspunkte verbunden sein müssen. Dies ermöglicht eine automatische Fehlermeldung an den Nutzer, wenn dies nicht der Fall sein sollte. Advantageously, in this case the terminal data also include information indicating whether the respective An ¬ connection point must be assigned for the use of the respective second representation of an endpoint. That is, the replacement of an assembled symbol by the corresponding subgraph is tied to the condition that one or more particular connection points must be connected. This allows an automatic error message to the user if this is not the case.
In weiterer vorteilhafter Ausgestaltung des Verfahrens umfas- sen die Anschlusspunktdaten eine Information, die angibt, ob der jeweilige Anschlusspunkt vervielfältigt werden kann. Ab¬ hängig von der jeweiligen Anwendung kann es nämlich vorkommen, dass mehrere verbindende Linien an einem Anschlusspunkt eines Symbols zusammenlaufen. Um dies logisch abzubilden, kann der entsprechende Port dupliziert werden, d. h. es wird in der logischen Abbildung im Datensatz bei dem jeweiligen Knoten ein identischer Anschlusspunkt hinterlegt, d. h. der vorhandene Anschlusspunkt dupliziert und jedem der Anschluss¬ punkte wird jeweils ein Endpunkt jeder der zusammenlaufenden Verbindungen zugewiesen. Wird hierbei eine Information hinterlegt, ob eine solche Vervielfältigung erlaubt ist, besteht hier auch wieder die Möglichkeit einer automatischen Fehlermeldung an den Nutzer, falls die Markierung nicht gesetzt ist und eine solche Situation gefunden wird. In a further advantageous embodiment of the method, the connection point data comprise information indicating whether the respective connection point can be duplicated. From ¬ pending namely it can occur on the particular application, that a plurality of connecting lines converge at a connection point of a symbol. To reflect this logic, the appropriate port can be duplicated, that is, it is deposited an identical connection point in the logical image in the data at the respective node, that is, the existing connection point duplicated and each of the connection ¬ points an end point of each of the convergent links is in each case assigned , If this information is deposited, if such a duplication is allowed, there is also the possibility of an automatic error message to the user again, if the mark is not set and such a situation is found.
Das bislang beschriebene Verfahren ermöglicht es auch, Ver¬ bindungen mit offenen Enden zu verfolgen und abzubilden. Damit sind solche Verbindungen in der technischen Zeichnung ge- meint, die mindestens ein Ende haben, das nicht an ein Symbol anschließt. Solche Verbindung treten in der Regel auf, falls Verknüpfungen z. B. über mehrere Seiten technischer Zeichnungen hergestellt werden sollen. Dies wird beispielsweise durch textuelle Beschreibungen gekennzeichnet (Beispiel: Eine Kenn¬ zeichnung „A/02" soll angeben, dass eine Verbindung zum Kennzeichen „A" auf Seite 02 geschlossen werden soll) . Der beschriebene Schritt c) , nämlich das Identifizieren der Verbindungen umfasst hierzu vorteilhafterweise das Identifizieren von von einem Symbol ausgehenden, offenen Linien in der technischen Zeichnung, wobei dem offenen Endpunkt der repräsentierenden Verbindung im Datensatz ein Konnektor zugeordnet und im Datensatz hinterlegt wird, der eine Verbindung zu ei¬ nem Konnektor einer zweiten technischen Zeichnung repräsen- tiert. Konnektoren werden anhand bestimmter vorgegebener und in der Symbolbibliothek hinterlegter Eigenschaften identifiziert. Wird ein Konnektor auf diese Art gefunden, wird er als Knoten in den Gesamtgraph im Datensatz aufgenommen. Gefundene Textinformationen werden dem Konnektor zugeordnet. The process described so far makes it possible to pursue Ver ¬ compounds with open ends and map. Thus, such compounds are described in the technical drawing. means that have at least one end that does not follow a symbol. Such connection usually occur if links z. B. over several pages of technical drawings to be produced. This is indicated for example by a textual description (example: A characteristic drawing ¬ "A / 02" is intended to indicate that a connection to the flag "A" on page 02 is to be closed). The described step c), namely the identification of the connections for this purpose advantageously includes identifying outgoing of a symbol, open lines in the technical drawing, wherein the open end point of the representing compound in the record is assigned a connector and stored in the record, the connection repre- to ei ¬ nem connector of a second technical drawing advantage. Connectors are identified by certain predefined properties stored in the symbol library. If a connector is found in this way, it is included as a node in the overall graph in the dataset. Found text information is assigned to the connector.
Der durch das Verfahren erzeugte Datensatz wird vorteilhaf¬ terweise mit dem die zweite, auf einer anderen Seite befind¬ liche technische Zeichnung repräsentierenden Datensatz anhand der Verbindung der Konnektoren vereinigt. Mit anderen Worten: Verbindungen zwischen passenden Konnektoren werden (je nach Anwendung) automatisch geschlossen (im Graph bedeutet das, dass der Konnektorknoten entfernt wird und eine entsprechende Verbindung, d. h. Kante in den Graphen eingefügt wird, wobei die Endpunkte der neuen Verbindung den jeweiligen Endpunkten der am Konnektor verbundenen Verbindungen entsprechen) . Wichtig ist hierbei, dass gewisse Text-Informationen durch den Graphen an alle Anschlusspunkte weitergegeben werden können, für die die Informationen relevant sind (z. B. Signalnamen in über bestimmte Bausteine und Seiten hinweg) . The data set produced by the process is combined with the vorteilhaf ¬ ingly the second befind ¬ Liche on another side of technical drawing representing the data set on the basis of connection of the connectors. In other words, connections between matching connectors are automatically closed (depending on the application) (in the graph, this means that the connector node is removed and a corresponding connection, ie edge, is inserted in the graph, with the endpoints of the new connection corresponding to the respective endpoints of the connector correspond to connectors connected to the connector). It is important here that certain text information can be passed through the graph to all connection points for which the information is relevant (eg signal names in over certain blocks and pages).
Wie bereits beschrieben, ermöglichen einige der Anschluss¬ punkte hinterlegten Anschlusspunktdaten (Duplizierbarkeit , Notwendigkeit der Verbindung bei Ersetzung durch Substruktur) in der Bibliothek die Erkennung von Fehlern sowohl in der Zuordnung als auch in der technischen Zeichnung selbst. Generell wird vorteilhafterweise die Erfüllbarkeit von in den Symboldaten und/oder Anschlusspunktdaten hinterlegten Bedin- gungen geprüft und bei Nichterfüllbarkeit ein Fehler erkannt. Hierbei kann bedarfsweise entweder die Klassifizierung der erkannten Symbole mit den korrekten Symboltypen verbessert werden, z. B. indem der Benutzer zur manuellen Kontrolle aufgefordert wird, oder es kann - wenn eine Klassifizierung an- hand vorab festgelegter Kriterien eine hinreichende Zuverläs¬ sigkeit ermittelt wurde - auf diese Weise auch ein Fehler in der technischen Zeichnung selbst erkannt werden. As described above, some of the connecting points ¬ stored terminal data enable (duplicability, necessity of connection with replacement by substructure) in the library, the recognition of errors both in the assignment and in the technical drawing itself. In general, the satisfiability of the conditions stored in the symbol data and / or connection point data is advantageously checked, and an error is recognized if it can not be satisfied. In this case, if necessary, either the classification of the recognized symbols with the correct symbol types can be improved, for. B. by the user is prompted for manual control, or it can - if a classification Toggle handle pre-determined criteria sufficient reliabil ¬ sigkeit was determined - even an error in the technical drawings are automatically detected in this way.
Ein Computerprogrammprodukt, das direkt in den internen Spei- eher eines Computers geladen werden kann umfasst vorteilhaf¬ terweise Softwarecodeabschnitte, mit denen das beschriebene Verfahren durchgeführt wird, wenn das Computerprogrammprodukt auf dem Computer läuft. Ein Computersystem, umfasst vorteilhafterweise einen Scanner sowie einen internen Speicher, in den ein derartiges Computerprogrammprodukt geladen ist. A computer program product that can be loaded directly into the internal storage of a computer rather includes vorteilhaf ¬ ingly software code sections with which the method described is carried out, when the computer program product is run on the computer. A computer system advantageously comprises a scanner and an internal memory in which such a computer program product is loaded.
Die mit der Erfindung erzielten Vorteile bestehen insbesonde- re darin, dass durch die Bestimmung und Zuordnung nicht nur von Symbolen und Linien einer technischen Zeichnung, sondern durch die Vorabdefinition von Anschlusspunkten in den Bibliothekssymbolen und Zuordnung der Anschlusspunkte zu einzelnen Verbindungen deutlich mehr semantische, interpretierbare In- formationen berücksichtigt werden, die die Erkennungsgenauig¬ keit und auch die Einsatzmöglichkeiten des erzeugten Datensatzes erheblich verbessern. Nicht nur bloße Verbindungen, sondern auch deren Richtungen können hierbei erkannt werden, und zwar unabhängig davon, wie es in vorliegenden Dokumenten gehandhabt wird (wird allein aus den Anschlusspunkten und den entsprechenden Anschlusspunkt-Eigenschaften des zugeordneten Bibliothekssymbols bestimmt) . Das Verfahren ermöglicht es da¬ bei auch, Verbindungen über verschiedene Seiten hinweg anhand erkannter Konnektoren weiterzuverfolgen und bedarfsweise zu schließen . The advantages achieved with the invention consist in particular in the fact that by determining and assigning not only symbols and lines of a technical drawing, but by the pre-definition of connection points in the library symbols and assignment of the connection points to individual connections significantly more semantic, interpretable In - are considered formations that significantly improve Erkennungsgenauig ¬ ness and the possible uses of the data set generated. Not only mere links but also their directions can be recognized here, regardless of how they are handled in present documents (determined solely from the attachment points and the corresponding attachment point properties of the associated library symbol). The method also makes it possible to compare connections across different pages follow recognized connectors and close as needed.
Während der Klassifizierung kann je nach in der Symbolbiblio- thek definierten Eigenschaften entsprechend reagiert und gehandelt werden: Ende der Weiterverfolgung an bestimmten Symbolen, Ersetzen von assemblierten Symbolen durch zuvor definierte Elementarsymbole und automatisches Duplizieren von mehrfach verbundenen Ports. During classification, depending on the properties defined in the symbol library, you can react and act accordingly: end the follow-up on certain symbols, replace assembled symbols with previously defined elementary symbols, and automatically duplicate multiple-connected ports.
Das Verfahren ermöglicht auch eine verbesserte automatische Fehlererkennung: Durch die gerichteten Kanten des im Datensatz hinterlegten Graphen und das Wissen, welche Anschlusspunkttypen verbunden sind, können unsinnige Verbindungen ge- funden werden (z. B. Verbindung zwischen zwei eingehenden Anschlusspunkten) . Ob Fehler dieser Art durch eine fehlerhafte Erkennung entstanden sind oder von bereits fehlerhaften Dokumenten herrühren, spielt dabei keine Rolle. In jedem Fall ist ein manueller Eingriff anzuraten. Der entsprechende Nutzer kann also hiermit benachrichtigt werden, unter Angabe der be¬ teiligten Symbole, des Dokuments und auch der beteiligten Anschlusspunkte . The method also enables improved automatic error detection: senseless connections can be found through the directed edges of the graph stored in the data record and the knowledge of which connection point types are connected (eg connection between two incoming connection points). Whether errors of this kind have been caused by an incorrect recognition or result from already faulty documents does not matter. In any case, a manual intervention is advisable. The corresponding user can be notified so hereby stating the be ¬ teiligten symbols of the document and also the connection points involved.
In der Symbolbibliothek definierte Anschlusspunkt-Eigenschaf- ten können während der Klassifizierung und der Verarbeitung der Dokumente überprüft und, falls erforderlich, kann ent¬ sprechend gehandelt werden. Beispiele dafür aus der in der Einleitung beschriebenen Anwendung in der WO 2013/092654 AI sind die Überprüfung, ob ein Anschlusspunkt verbunden sein muss und ob ein mehrfach verbundener Anschlusspunkt automa¬ tisch dupliziert werden darf. Im Fehlerfall kann wieder eine entsprechende Meldung mit genauer Angabe von Dokument, Symbol und Anschlusspunkt an den Nutzer geleitet werden. Textinformationen, die mit Konnektoren assoziiert sind, können automatisch durch den entstehenden Graph weitergeleitet werden, auch über mehrere Seiten hinweg. Diese Fähigkeit kann bei der in WO 2013/092654 AI beschriebenen Anwendung dazu be- nutzt werden, Signalnamen und weitere Informationen an entfernt liegende Anschlusspunkte weiterzugeben. Th defined in the symbol library connection point Eigenschaf- can be checked during the classification and processing of documents and, if necessary, can be traded ent ¬ speaking. Examples of the type described in the introduction to application WO 2013/092654 in the AI are to check whether a connection point must be connected and whether a multi-connected terminal must be duplicated automatic ¬ table. In the event of an error, a corresponding message with exact specification of document, symbol and connection point can be redirected to the user. Text information associated with connectors can be automatically routed through the resulting graph, even across multiple pages. This capability can be used in the application described in WO 2013/092654 AI. be used to pass signal names and other information to remote connection points.
Ausführungsbeispiele der Erfindung werden anhand einer Zeich- nung näher erläutert. Darin zeigen: Embodiments of the invention will be explained in more detail with reference to a drawing. Show:
FIG 1 ein schematisches Ablaufdiagramm eines Verfahrens zur automatisierten Erstellung eines eine technische Zeichnung mit Symbolen und die Symbole verbindenden Linien charakterisierenden Datensatzes, 1 shows a schematic flowchart of a method for the automated creation of a technical drawing with symbols and the symbols connecting lines characterizing data set,
FIG 2 schematisch eine technische Zeichnung, 2 shows schematically a technical drawing,
FIG 3 eine schematische Repräsentation der technischen 3 shows a schematic representation of the technical
Zeichnung in einem Teil des Datensatzes,  Drawing in a part of the dataset,
FIG 4 eine schematische Darstellung einer Symbolbibliothek, 4 shows a schematic representation of a symbol library,
FIG 5 eine weiter verfeinerte schematische Repräsentation der technischen Zeichnung in einem Teil des Datensatzes, 5 shows a further refined schematic representation of the technical drawing in a part of the data record,
FIG 6 eine Darstellung eines Symboltyps zusammen mit seiner 6 shows a representation of a symbol type together with his
Substruktur,  substructure
FIG 7 eine Darstellung der Substruktur in der Symbolbibliothek, 7 shows a representation of the substructure in the symbol library,
FIG 8 eine Darstellung eines Teils zweier technischer 8 shows a representation of a part of two technical
Zeichnungen mit offenen Verbindungen, und  Drawings with open connections, and
FIG 9 eine Eingabemaske der Symbolbibliothek zur Hinterle¬ gung der Symboldaten und Anschlusspunktdaten. Gleiche Teile sind in allen Figuren mit denselben Bezugszei¬ chen versehen. FIG 1 zeigt ein schematisches Ablaufdiagramm eines Verfahrens 1 zur automatisierten Erstellung eines eine technische Zeichnung mit Symbolen und die Symbole verbindenden Linien charakterisierenden Datensatzes. Grundlage bildet hierbei demnach eine technische Zeichnung. Eine technische Zeichnung ist all¬ gemein ein Dokument, das in grafischer und schriftlicher Form alle notwendigen Informationen für die Herstellung und zur Beschreibung der geforderten Funktionen und Eigenschaften eines Einzelteils, einer Baugruppe oder eines kompletten Pro- dukts zeigt und als Teil der technischen Produktdokumentation dient. In der Regel werden gerade bei komplexeren Systemen wie ganzen Fabrikanlagen viele hundert und tausend Seiten an derartigen technischen Zeichnungen vorliegen. Diese sind dadurch gekennzeichnet, dass sie aus Symbolen bestehen, die z. B. einzelne Bauteile der Anlage repräsentieren, sowie Li¬ nien zwischen den Symbolen, die Wirkverbindungen repräsentieren, z. B. eine Strom- oder Datenübertragung. FIG 9 is an input mask of the Symbol Library for Hinterle ¬ supply the symbol data and connection point data. Identical parts are provided in all figures with the same Bezugszei ¬ chen. 1 shows a schematic flow diagram of a method 1 for the automated creation of a technical drawing with symbols and the symbols connecting lines characterizing record. This is based on a technical drawing. A technical drawing is generally a document which shows in graphical and written form all the information necessary for the production and description of the required functions and properties of an individual part, an assembly or a complete product and serves as part of the technical product documentation. As a rule, especially in more complex systems such as entire factories many hundred and a thousand pages will be present on such technical drawings. These are characterized in that they consist of symbols that z. B. represent individual components of the system, and Li ¬ lines between the symbols that represent active compounds, eg. B. a power or data transmission.
Alle Schritte des in FIG 1 gezeigten Verfahrens werden in ei- nem nicht näher dargestellten Computersystem ausgeführt, dass zur Durchführung der Schritte entsprechend ertüchtigt ist. Insbesondere ist in den Speicher des Computersystems ein Com¬ puterprogramm geladen, welches Softwarecodeabschnitte um- fasst, die das Computersystem zum Ausführen des Verfahrens veranlassen. All the steps of the method shown in FIG. 1 are carried out in a computer system, which is not shown in greater detail, and which is correspondingly suitable for carrying out the steps. In particular, in the memory of the computer system a ¬ Com puter program is loaded, which combines software code portions environmentally that cause the computer system to perform the method.
In Schritt a) wird zunächst die technischen Zeichnung ge¬ scannt. Dies umfasst alle Seiten der technischen Zeichnung, d. h. mehrere Seiten von technischen Zeichnungen werden digi- tal erfasst. Zur weiteren Verarbeitung werden die gescannten Bilddateien vektorisiert , d. h. im jeweils erzeugten Rasterbild werden bei der Vektorisierung in einfache geometrische Objekte identifiziert. Dies kann mit dem Fachmann bekannten und im Stand der Technik üblichen Varianten erfolgen, z. B. können über Kantendetektion Bereiche gleicher oder ähnlicher Helligkeit oder Farbe, auch als Posterisation bekannt, ermit¬ telt werden. Ergebnis sind letztlich Koordinatendaten graphi- scher Primitive in der technischen Zeichnung, d. h. Linien, offene oder geschlossene Kurven, Punkte etc. In step a) the technical drawing is first ge ¬ scanned. This includes all pages of the technical drawing, ie several pages of technical drawings are recorded digitally. For further processing, the scanned image files are vectorized, ie in the raster image generated in each case are identified in the vectorization into simple geometric objects. This can be done with the expert and known in the prior art variants, for. B. areas can be the same or similar brightness or color, also known as posterization, ermit ¬ telt on edge detection. The result is ultimately coordinate data graphi- primitives in the technical drawing, ie lines, open or closed curves, points etc.
Aus der Vektorgrafik werden im Anschluss in Schritt b) die Symbole in der technischen Zeichnung identifiziert, d. h. de¬ ren Anzahl und Lage. In dem zu erzeugenden Datensatz, der die technische Zeichnung repräsentieren soll, werden nunmehr für jedes Symbol repräsentierende Knoten hinterlegt. Es entsteht somit ein Unterdatensatz für jedes Symbol auf der jeweiligen Seite From the vector graphics are subsequently identified in step b) the symbols in the technical drawing, ie de ¬ ren number and location. In the dataset to be generated, which is to represent the technical drawing, nodes representing each symbol are now deposited. This creates a sub-record for each symbol on the respective page
In Schritt c) , der auch gleichzeitig mit Schritt b) erfolgen kann, werden jeweils mindestens zwei Symbole verbindende Li¬ nien in der technischen Zeichnung identifiziert und die je- weilige Linie repräsentierende Verbindungen werden im Daten¬ satz hinterlegt. Dabei werden jeder Verbindung mindestens zwei Endpunkte zugeordnet und jedem Endpunkt einer der Knoten zugeordnet, die die durch die jeweilige Linie verbundenen Symbole repräsentieren. In step c), which can be carried out with step b) at the same time, at least two symbols connecting Li ¬ nien be identified in the engineering drawing, and the line representing JE stays awhile compounds are stored in the data ¬ set. Each connection is assigned at least two endpoints and assigned to each endpoint of one of the nodes representing the symbols connected by the respective line.
Die Schritte a) , b) und c) werden zunächst anhand der FIG 2 und FIG 3 erläutert. Die FIG 2 zeigt ein schematisches , abs¬ trakt vereinfachtes Bild einer technischen Zeichnung 2. Diese umfasst im oberen Bereich ein als Kreis dargestelltes Symbol sl, im unteren Bereich ein als Quadrat dargestelltes Symbol s2, sowie zwei im rechten Bereich als Dreieck bzw. gekreuztes Parallelogramm dargestellte Symbole s3 und s4. The steps a), b) and c) will first be explained with reference to FIG. 2 and FIG. The 2 shows a schematic, abs gas tract simplified picture of a technical drawing in the upper part 2. This comprises an image represented as a circle symbol sl, at the bottom of a square as shown symbol s2, and two in the right area as a triangle or parallelogram crossed represented symbols s3 and s4.
Das Symbol sl weist an seiner unteren Seite einen mit „OUT" gekennzeichneten Anschluss auf, das Symbol s2 weist an seiner oberen Seite einen mit „IN" gekennzeichneten Anschluss auf. Die Anschlüsse sind durch die Linie 11 verbunden. Symbol s2 weist an seiner rechten Seite einen weiteren, mit „OUT" gekennzeichneten Anschluss auf. Ausgehend von diesem Anschluss führt eine Linie 12 zu einem Anschluss an der linken Seite des Symbols s3, sowie eine weitere Linie 13 zu einem An¬ schluss an der linken Seite des Symbols s4. Das Symbol s2 weist an seiner linken Seite einen weiteren, ungekennzeichneten Anschluss auf, der nicht verbunden ist. The symbol sl has a terminal marked "OUT" on its lower side, the symbol s2 has a terminal marked "IN" on its upper side. The connections are connected by the line 11. Symbol s2 has on its right side a further, marked "OUT" terminal. 12 Starting from this terminal performs a line to a port on the left side of the symbol s3, and a further line 13 to an on ¬ connection left on the Page of symbol s4 The symbol s2 has on its left side another unmarked port that is not connected.
Gegenstand des Verfahrens ist im Wesentlichen, die soeben textlich beschriebenen Eigenschaften der technischen Zeichnung 2, sowie ggf. weitere kontextuelle Informationen aus der technischen Zeichnung 2 selbst automatisiert zu extrahieren. The object of the method is essentially to automatically extract the textually described properties of the technical drawing 2, as well as possibly further contextual information from the technical drawing 2 itself.
FIG 3 zeigt den Datensatz 4, wie er nach den Schritten a) , b) und c) vorliegt. Hinterlegt sind die vier erkannten Symbole sl, s2, s3 und s4, zusammen mit ihren in Hüllflächen, d. h. sog. Bounding-Boxes hinterlegten, vektorisiert vorliegendenFIG. 3 shows the data set 4 as it exists after the steps a), b) and c). Deposited are the four recognized symbols sl, s2, s3 and s4, together with their in enveloping surfaces, d. H. so-called bounding boxes deposited, vectorized present
Grafikinformationen 6, d. h. ihrer graphischen Darstellung.Graphic information 6, d. H. their graphic representation.
Weiterhin enthält der Datensatz Informationen, dass die drei Linien 11, 12 und 13 erkannt wurden und jeweils die Symbole sl-s2, s2-s3 bzw. s2-s4 verbinden. Faktisch entspricht dieseFurthermore, the data record contains information that the three lines 11, 12 and 13 were recognized and in each case connect the symbols sl-s2, s2-s3 or s2-s4. In fact, this corresponds
Information im mathematischen Sinne einem ungerichteten Information in the mathematical sense of an undirected
Graph . Die bis hierhin extrahierte Information entspricht aber kei¬ neswegs der vollständigen, aus der technischen Zeichnung 2 extrahierbaren Information und eignet sich nur bedingt zur weiteren Verwendung. Daher werden, wieder bezugnehmend auf FIG 1, weitere Schritte d) und e) durchgeführt, in denen die Verbindungen verfolgt und die Symbole klassifiziert werden. Graph. But thus far extracted information corresponds kei ¬ neswegs complete, extractable from the technical drawing 2 information and is of limited use for further use. Therefore, referring again to FIG. 1, further steps d) and e) are performed, in which the connections are tracked and the symbols are classified.
In Schritt d) wird eine Symbolbibliothek 8 bereitgestellt, die ausschnittsweise in FIG 4 schematisch dargestellt ist. Die Symbolbibliothek 8 ist spezifisch für eine bestimmte technische Zeichnung 2 bzw. spezifisch für eine bestimmte technische Anlage, die durch die technische Zeichnung 2 be¬ schrieben wird, erstellt. Sie enthält Symboltypen stl, st2 etc. für jedes möglicherweise in einer der jeweiligen Anlage vorkommenden, in einer technischen Zeichnung dargestellten Symbol. Zu diesen Symboltypen stl, st2 etc. sind jeweils Sym¬ boldaten 10 hinterlegt, wie z. B. eine graphische Darstellung des Symbols zum Vergleich mit den Grafikinformationen 6 aus der gescannten, vektorisierten Darstellung der Symbole. Mit diesen Informationen ist es bereits möglich, die Knoten des bereits erwähnten ungerichteten Graphen im Datensatz 4 näher zu identifizieren. Das Verfahren soll jedoch hierbei noch fehlersicherer sein, noch mehr Informationen aus der technischen Zeichnung 2 erfassen und dabei ggf. auch Fehler in der technischen Zeichnung 2 selbst erkennen. Hierzu ist die Symbolbibliothek 8 um eine Vielzahl von Informationen erweitert. Zunächst sind für jeden Symboltyp stl, st2 etc. Anschlusspunkte al, a2, a3 etc. definiert. Das be¬ deutet, dass für jeden Symboltyp stl, st2 etc. hinterlegt ist, wie viele Anschlusspunkte al, a2, a3 etc. er aufweist. Zu jedem der Anschlusspunkte al, a2, a3 etc. sind Anschluss¬ punktdaten 12 hinterlegt, die weitere Informationen zum jeweiligen Anschlusspunkt al, a2, a3 etc. enthalten. In step d), a symbol library 8 is provided, which is shown schematically in detail in FIG. The symbol library 8 is specific to a particular technical drawing 2 or specifically for a particular technical system, which is ¬ written by the technical drawing 2 created. It contains symbol types stl, st2, etc. for each symbol that may appear in a particular system, represented in a technical drawing. For these symbol types stl, st2 etc. Sym ¬ boldaten 10 are deposited, such. Example, a graphical representation of the symbol for comparison with the graphics information 6 from the scanned, vectorized representation of the symbols. With From this information, it is already possible to further identify the nodes of the already mentioned undirected graph in the data record 4. However, the method should still be fail-safe, even more information from the technical drawing 2 capture and possibly even recognize errors in the technical drawing 2 itself. For this purpose, the symbol library 8 has been expanded by a large amount of information. First, connection points al, a2, a3, etc. are defined for each symbol type stl, st2, etc. The ¬ be indicated that is stored for each type of symbol stl, st2, etc., as many terminals al, a2, a3, etc. it has. To each of the terminals al, a2, a3, etc. ¬ connection point data 12 are stored, which contain additional information on the respective connection point al, a2, a3, etc..
Zunächst sind in den Anschlusspunktdaten 12 Informationen zur Identifikation des jeweiligen Anschlusspunktes al, a2, a3 etc. hinterlegt. Beispielsweise könnte hinterlegt sein, dass Symboltyp st2 drei Anschlusspunkte st2-al, st2-a2 und st2-a3 aufweist. st2-al ist dabei mittig am oberen Rand der Boun- ding-Box angeordnet. Oder aber st2-al ist stets durch einen bestimmten Text in einem bestimmten Abstand und einer bestimmten Richtung ausgehend von seiner Position gekennzeichnet, wie z. B. dem in der FIG 1 dargestellten Text „IN" oder „OUT". Weiterhin kann zu jedem Anschlusspunkt al, a2, a3 ein Anschlusspunkttypen hinterlegt sein, so z. B. „eingehend", „ausgehend", „Negation", „nur Verbindung mit Pfeil" etc. Zu den Anschlusspunkttypen sind in der Symbolbibliothek Informationen hinterlegt, welche Anschlusspunkttypen durch eine Verbindung verbunden werden dürfen, z. B. muss ein Anschlusstyp „eingehend" stets über eine Linie mit einem Anschlusspunkt „ausgehend" verbunden werden. First, information about the identification of the respective connection point al, a2, a3, etc. is stored in the connection point data 12. For example, it could be deposited that symbol type st2 has three connection points st2-al, st2-a2 and st2-a3. st2-al is arranged centrally at the top of the boun- ding box. Or else st2-al is always characterized by a certain text at a certain distance and direction from its position, such as: B. the text shown in FIG 1 "IN" or "OUT". Furthermore, a connection point types can be stored for each connection point al, a2, a3, such. For example, "incoming", "outgoing", "negation", "only connection with arrow", etc. For the connection point types, information is stored in the symbol library as to which connection point types may be connected by a connection, eg. For example, a connection type "incoming" must always be connected to a connection point "outgoing" via a line.
In den Anschlusspunktdaten 12 kann weiterhin hinterlegt sein, ob ein Anschlusspunkt al, a2, a3 vervielfältigt werden darf, wenn mehrere Verbindungen zu ihm existieren, oder ob dies auf einen Fehler hinweist. Dies kann auch an weitere Bedingungen geknüpft werden. Ein Anschlusspunkt al, a2, a3 kann auch da¬ hingehend markiert werden, dass er unbedingt verbunden sein muss, von ihm ausgehend bestimmte Teilstrukturen erkannt wer¬ den sollen, oder welche Bedeutung er in einem aus den erkannten Dokumenten zu generierenden Format hat. In the connection point data 12 can also be deposited, whether a connection point al, a2, a3 may be duplicated, if there are several connections to it, or if this indicates an error. This can also be linked to other conditions. A connection point, a 2, may a3 be as marked ¬ going round that he must necessarily be connected, recognized starting certain of it substructures ¬ the will, or the importance it has in one of the recognized documents to be generated format.
Durch die spezifisch zu Anschlusspunkten al, a2, a3 hinter- legten Anschlusspunktdaten 12 kann nun mit Bezugnahme auf FIG 1 der Schritt e) durchgeführt werden. Hierbei wird je¬ weils ein Symboltyp stl, st2 etc. aus der Symbolbibliothek 8 zu jedem Knoten im Graph zugeordnet und die jeweiligen Informationen werden im Datensatz 4 hinterlegt. Weiterhin werden die Anschlusspunktdaten 12 und Symboldaten 10 dahingehend ausgewertet, dass jeder erkannte Anschlusspunkt al, a2, a3 etc. zu jedem Symbol sl, s2, s3, s4 mit jeweils zugeordnetem Symboltyp stl, st2 etc. jeweils einem Endpunkt einer Verbin¬ dung zugeordnet wird, sofern er verbunden ist. Dies erfolgt durch sukzessive Verfolgung der Verbindungen zwischen den Symbolen sl, s2, s3, s4. By means of the connection point data 12 stored specifically for connection points a1, a2, a3, step e) can now be carried out with reference to FIG. Here, a symbol type stl, st2 etc. from the symbol library is 8 per ¬ weils assigned to each node in the graph and the respective information is stored in the data record. 4 Further, the connection point data 12 and icon data 10 to be evaluated to the effect that each detected connection point al, a2, a3, etc. to each symbol sl, s2, s3, s4 having a respectively assigned symbol type stl, st2 etc. each associated with an end point of a Verbin ¬ dung is if he is connected. This is done by successively tracking the connections between the symbols sl, s2, s3, s4.
Der entstehende Datensatz ist beispielhaft in der FIG 5 dar¬ gestellt. Hier sind wiederum die Symbole sl, s2, s3, s4 auf- gelistet, jedoch mit einer Vielzahl weiterer Informationen. Neben der Zuordnung zu den jeweiligen Symboltypen stl, st2, st3, st4 ist auch jeder aus der Symbolbibliothek entnommene Anschlusspunkt al, a2, a3 etc. zu jedem Symboltyp stl, st2, st3, st4 bei den Symbolen sl, s2, s3, s4 identifiziert und einem Endpunkt einer Linie 11, 12, 13 zugeordnet. Beispiel¬ haft wird dies für das Symbol s2 erläutert: Es ist dem Sym¬ boltyp st2 zugeordnet, der laut Symbolbibliothek 8 drei An¬ schlüsse st2-al, st2-a2 und st2-a3 aufweist. Hierbei ist in der Symbolbibliothek 8 st2-al als „eingehend" und st2-a2 als „ausgehend" gekennzeichnet, wobei diese Information in weite¬ ren Daten 14 im Datensatz 4 hinterlegt ist. Der entstehende Graph erhält damit auch eine Richtung. Weiterhin ist für Anschlusspunkt st2-a2 hinterlegt, dass er dupliziert werden kann, was in der technischen Zeichnung 2 auch der Fall ist, da mit diesem Anschluss zwei Linien 12, 13 verbinden. The resulting data set is by way of example is provided in FIG 5 ¬. Here again the symbols s1, s2, s3, s4 are listed, but with a large number of further information. In addition to the assignment to the respective symbol types stl, st2, st3, st4, each connection point a1, a2, a3, etc. taken from the symbol library is also identified for each symbol type st1, st2, st3, st4 in the symbols s1, s2, s3, s4 and an endpoint associated with a line 11, 12, 13. Example ¬ way this is explained for the symbol S2: It is associated with the Sym ¬ boltyp st2 having 8 to three-¬ connections st2 al noisy symbol library, st2-a2 and a3 ST2. In this case, 8-al as st2, in the symbol library is "incoming" and characterized st2-a2 as a "starting" and this information is stored in wide ¬ ren data 14 in the data set. 4 The resulting graph thus also receives a direction. Furthermore, it is specified for connection point st2-a2 that it will be duplicated can, which is also the case in the technical drawing 2, since with this connection two lines 12, 13 connect.
In Datensatz 4 ist hinterlegt, dass für Symbol s2 der An- schluss st2-al mit Linie 11, das erste Duplikat des Anschlus¬ ses st2-al mit Linie 12, das zweite Duplikat des Anschlusses st2-al mit Linie 13 und der Anschluss st2-a3 frei ist. Zu¬ sätzlich sind in den Daten 14 beliebige weitere, aus den Symboldaten 10 und Anschlusspunktdaten 12 extrahierte Informati- onen hinterlegt, die bei der weiteren Verarbeitung verwendet werden können. Auch können bestimmte Parameter bei der Auswertung in Schritt d) und e) vorgegeben werden, so z. B. dass bestimmte Anschlusspunkte al, a2, a3 etc. ignoriert werden sollen, wenn nur ein Ausschnitt der technischen Zeichnung 2 für einen bestimmten Anwendungszweck erfasst werden soll.In data set 4 is stored, that for the terminal s2 symbol st2-al with line 11, the first duplicate of Anschlus ¬ ses st2-al with line 12, the second duplicate of the terminal-al st2 with line 13 and the connection st2 -a3 is free. ¬ additionally to any other, from the symbol data 10 and data terminal 12 are in the data 14 extracted ones of information stored, which may be used in further processing. Also, certain parameters in the evaluation in step d) and e) can be specified, such. B. that certain connection points al, a2, a3, etc. should be ignored if only a section of the technical drawing 2 is to be detected for a particular application.
Hierbei kann auch in den Symboldaten 10 hinterlegt sein, dass Verbindungen über bestimmte Symbole stl, st2 etc. hinaus nicht weiter verfolgt werden. Generell werden auch die Symboldaten 10 werden in der dargestellten Ausführungsform des Verfahrens 1 erheblich erweitert. Beispielsweise kann für bestimmte Symboltypen stl, st2 etc., wo dies erforderlich oder gewünscht ist, eine Zerlegung in Subsymboltypen hinterlegt sein. Ein Beispiel wäre hierfür ein Aggregat in einem Schaltplan, welches wiederum aus mehreren untereinander verbundenen Bauteilen besteht. Für manche Anwendungen mag es genügen, nur das Aggregat selbst mit sei¬ nen Anschlusspunkten darzustellen, für andere Anwendungen ist aber auch die innere Struktur des Aggregats relevant. Hierfür kann die Substruktur in den Symboldaten 10 hinterlegt sein. In this case, it can also be stored in the symbol data 10 that connections beyond certain symbols st1, st2 etc. are no longer pursued. In general, the symbol data 10 will be significantly expanded in the illustrated embodiment of the method 1. For example, for certain symbol types stl, st2, etc., where necessary or desired, a decomposition into subsymbol types may be deposited. An example of this would be an aggregate in a circuit diagram, which in turn consists of several interconnected components. For some applications it may suffice to show only the unit itself with is ¬ nen connection points, but for other applications, the internal structure of the unit is relevant. For this purpose, the substructure can be stored in the symbol data 10.
Dies ist in den FIG 6 und 7 dargestellt. FIG 6 zeigt den Sym¬ boltyp st2 mit seinen drei Anschlusspunkten al, a2 und a3 im linken Bildteil, sowie im rechten Bildteil eine zweite Dar- Stellung 16 des Symboltyps st2 in Form seiner Substruktur, bestehend aus den drei Symboltypen st5, st6 und st7. Die Sym¬ boltypen st5, st6 und st7 weisen je drei Anschlusspunkte al, a2, a3 auf und sind untereinander durch die Linien 14, 15, 16 verbunden. Offen bleiben hierbei nur der Anschlusspunkt st 6- al, der dem Anschlusspunkt st2-al in der übergeordneten This is shown in FIGS. 6 and 7. FIG 6 shows the Sym ¬ boltyp st2 with its three terminals al, a2 and a3 in the left image part and in the right part a second representation position 16 of the symbol type st2 in the form of its substructure, consisting of the three types of symbols st5, st6 and st7. The Sym ¬ boltypen st5, st6 and st7 each have three terminals al, a2, a3, and are interconnected by the lines 14, 15, 16 connected. Open only the connection point st 6 al, which is the connection point st2-al in the parent
Struktur entspricht, der Anschlusspunkt st7-a2, der dem An¬ schlusspunkt st2-a2 in der übergeordneten Struktur ent- spricht, und der Anschlusspunkt st5-a3, der dem Anschluss¬ punkt st2-a3 in der übergeordneten Struktur entspricht. Damit ist sowohl die Substruktur bekannt, als auch die Entsprechung der äußeren Anschlusspunkte al, a2, a3 des übergeordneten Symboltyps st2 zu den äußeren Anschlusspunkten der Substruk- tur. Structure corresponds to the connection point st7-a2, which corresponds to the An ¬ termination point st2-a2 in the parent structure, and the connection point st5-a3, which corresponds to the connection ¬ point st2-a3 in the parent structure. Thus, both the substructure is known and the correspondence of the outer connection points a1, a2, a3 of the superordinate symbol type st2 to the outer connection points of the substructure.
Die Substruktur ist in gleicher Form wie für die Hauptstruktur beschrieben in den Symboldaten 10 in der Symbolbibliothek 8 abgelegt, wie dies in FIG 7 dargestellt ist. Das heißt, es sind zum einen alle Symboltypen st5, st6, st7 der Substruktur abgelegt, als auch alle Anschlusspunkte al, a2, a3 jedes Sym¬ boltyps st5, st6, st7 der Substruktur. Die innerhalb der Sub¬ struktur durch Verbindungen 14, 15, 16 bereits verbundenen Anschlusspunkte al, a2, a3 sind ebenfalls identifiziert und hinterlegt, wie oben erläutert. Weiterhin ist in den An¬ schlusspunktdaten 12 zu jedem Anschlusspunkt al, a2, a3 des Symboltyps st2 wie oben erläutert hinterlegt, welche An¬ schlusspunkte al, a2, a3 welches Symboltyps st5, st6, s7 der Substruktur diesen entsprechen. The substructure is stored in the symbol library 8 in the same way as described for the main structure in the symbol data 10, as shown in FIG. That is, there are, firstly, all symbol types st5, st6, st7 the substructure stored, as well as all connection points al, a2, a3 each Sym ¬ boltyps st5, st6, st7 the substructure. The connection points a1, a2, a3 already connected within the substructure by connections 14, 15, 16 are likewise identified and deposited, as explained above. Further, in the on ¬ connection point data 12 to each terminal of al, a2, a3 of the symbol type st2 as discussed above stored which correspond to ¬ connection points al, a2, a3 which symbol type st5, st6, s7 of the substructure thereof.
Diese Hinterlegung in der Symbolbibliothek 8 ermöglicht es, bei der Erstellung des Datensatzes 4 auf entsprechende Vor¬ einstellung hin oder automatisch solche Symboltypen, für die eine zweite Darstellung 16 hinterlegt ist, durch die Sub- struktur zu ersetzen. Auch können in den Anschlusspunktdaten 12 Kriterien hierzu hinterlegt sein, beispielsweise dass eine solche Ersetzung durch die zweite Darstellung 16 nur dann erfolgt, wenn ein bestimmter Anschlusspunkt al, a2, a3 des übergeordneten Symboltyps in der gescannten Vorlage verbunden ist. This deposit in the symbol library 8 makes it possible, during the compilation of the data set 4 to corresponding ¬ Before setting or automatically such symbol types, is deposited for a second representation 16 to replace structure through the sub. Criteria for this may also be stored in the connection point data 12, for example that such a replacement by the second representation 16 takes place only when a specific connection point a1, a2, a3 of the superordinate symbol type is connected in the scanned original.
Ein weiterer Vorteil des bislang beschriebenen Verfahrens 1 ist es auch, dass Verbindungen über mehrere Seiten verfolgt werden können. Dies geschieht in realen technischen Zeichnungen beispielsweise durch textuelle Beschreibungen (Beispiel: eine Kennzeichnung „A/02" soll angeben, dass eine Verbindung zum Kennzeichen „A"" auf Seite 02 geschlossen werden soll) . Another advantage of the method 1 described so far is that it tracks connections over several pages can be. This is done in real technical drawings, for example by textual descriptions (example: an "A / 02" designation should indicate that a connection to the "A" indicator on page 02 should be closed).
Hierzu werden im oben erläuterten Schritt c) auch von einem Symbol ausgehende, offene Linien in der technischen Zeichnung identifiziert. FIG 8 zeigt eine derartige Situation. In der linken Bildhälfte ist ausschnittsweise eine erste technische Zeichnung 2, nämlich die Seite „01" gezeigt. In der rechten Bildhälfte ist ausschnittweise eine zweite technische Zeich¬ nung 2, nämlich die Seite „02" gezeigt. Seite „01" umfasst ein Symbol s5 mit einer verbundenen Linie 17. Am offenen Ende der Linie 17 ist eine Kennzeichnung „A/02" hinterlegt. Der entsprechende Endpunkt der Linie 17 wird somit einem Konnek- tor Kl zugeordnet, und mit dem Konnektor Kl werden die Bild¬ daten der Kennzeichnung hinterlegt. Dies erfolgt im Rahmen des Schritts c) und ist nicht gesondert dargestellt. Gleiches erfolgt für die Seite „02". Diese umfasst ein Symbol s6 mit einer verbundenen Linie 18. Am offenen Ende der Linie 18 ist eine Kennzeichnung „A/01" hinterlegt. Ebenso wie bei Seite „01" wird der entsprechende Endpunkt der Linie 18 einem Konnektor K2 zugeordnet, und mit dem Konnektor K2 werden die Bilddaten der Kennzeichnung hinterlegt. For this purpose, in the step c) explained above, open lines emanating from a symbol are also identified in the technical drawing. 8 shows such a situation. In the left half is a detail of a first technical drawing 2, which is shown, the side "01". In the right half is a second partial technical drawing ¬ voltage 2, which is shown, the side "02". Page "01" comprises a symbol s5 with a connected line 17. At the open end of the line 17, an identification "A / 02" is deposited. The corresponding end point of the line 17 is thus associated with a connector class, the connector class and the image data of the marking ¬ be deposited. This is done in the context of step c) and is not shown separately. The same is done for the page "02." This includes a symbol s6 with a connected line 18. At the open end of the line 18, an identification "A / 01" is deposited. As with page "01" the corresponding end point of the line 18 is assigned to a connector K2, and with the connector K2, the image data of the label are deposited.
Sind beide Zeichnungen eingescannt und erfasst, können nun die Konnektoren Kl, K2 zugeordnet werden. Die Kennzeichnungen sollen in den technischen Zeichnungen 2 einander zugeordnet werden, was nun auch im digitalen Abbild des Datensatzes 4 automatisiert erfolgen kann: Die Kennzeichnungen werden hierbei automatisiert erkannt, so dass die Konnektoren Kl und K2 einander zugeordnet werden können. Mit der Zuordnung Kl zu K2 können die Linien 17, 18 zu einer Linie verbunden werden und die jeweils anderen Endpunkte der Linien 17, 18 bilden dieIf both drawings are scanned and recorded, the connectors Kl, K2 can now be assigned. The markings should be assigned to each other in the technical drawings 2, which can now be done automatically in the digital image of the record 4: The labels are automatically detected here, so that the connectors Kl and K2 can be assigned to each other. With the assignment Kl to K2, the lines 17, 18 can be connected to a line and the respective other end points of the lines 17, 18 form the
Endpunkte der neu entstandenen Linie bzw. deren Zuordnungen. Damit entsteht ein Datensatz 4, der beide Zeichnungen 2 umfasst . Die beschriebene Verfolgung der offenen Verbindungen kann effizient als Stack (Stapelstruktur) implementiert werden. Bei der Vektorisierung bzw. Texterkennung wird hierbei eine Art Inhaltsverzeichnis erstellt, aus dem hervorgeht, welche (ein- deutigen) Kennzeichen zu welcher Seite gehören. Dadurch kann beim Verfolgen von Konnektoren direkt die passende Seite geöffnet und untersucht werden. Im Fall, dass ein Kennzeichen nicht bzw. falsch erkannt wird, werden hierbei natürlich trotzdem alle Seiten untersucht. Endpoints of the newly created line or their assignments. This creates a data record 4, which includes both drawings 2. The described tracking of open connections can be efficiently implemented as a stack. In the case of vectorization or text recognition, a kind of table of contents is produced which shows which (unambiguous) labels belong to which page. As a result, the right page can be opened and examined directly while following connectors. In the case that a license plate is not recognized or wrongly recognized, all pages will of course be examined.
Weiterhin ermöglicht das System eine automatisierte Erkennung von Fehlern in den technischen Zeichnungen 2. Während des beschriebenen Verfahrens 1 wird stets bei der Zuordnung überprüft, ob ein Anschlusspunkt verbunden sein muss und ob ein mehrfach verbundener Anschlusspunkt automatisch dupliziert werden darf. Weiterhin wird überprüft, ob die Regeln bezüglich der Verbindung eingehalten werden, d. h. es wird geprüft ob. z. B. zwei als „eingehend" markierte Anschlusspunkte fälschlicherweise miteinander verbunden sind. Im Fehlerfall wird hierbei eine entsprechende Meldung mit genauer Angabe von Dokument, Symbol und Anschlusspunkt an den Nutzer ausge¬ geben, der eine manuelle Kontrolle und Korrektur durchführt. Furthermore, the system allows automated detection of errors in the technical drawings 2. During the described method 1 is always checked during the assignment, whether a connection point must be connected and whether a multipoint connection point may be automatically duplicated. Furthermore, it is checked whether the rules regarding the connection are adhered to, ie it is checked whether. For example, two are connected as "incoming" labeled connection points incorrectly each other. In the event of a fault message, specifying of document icon and the connection point to the user is thereby ¬ give out which performs a manual inspection and correction.
Das Verfahren 1 wurde bislang anhand einer vereinfachten schematischen Ausführungsbeispiels erläutert. FIG 9 zeigt ei¬ nen Bestandteil eines weiteren, konkreten Ausführungsbei¬ spiels zur Anwendung in dem durch die Anmelderin entwickelten Leittechniksystem T3000 für Kraftwerke. Die Leittechnik „Siemens Power and Process Automation T3000" (SPPA-T3000) wurde konzipiert, um alle Aufgaben der Kraftwerksautomatisierung zu erfüllen: Turbinenregelung, Kesselregelung einschließlich Kesselschutz, Hilfs- und Nebenanlagen sowie die Integration von Systemen anderer Lieferanten, wie z. B. Vergasungsanlagen im Rahmen von IGCC- ( Integrated Gasification Combined Cycle-) Anwendungen. The method 1 has been explained so far with reference to a simplified schematic embodiment. FIG 9 shows ei ¬ NEN part of another concrete Ausführungsbei ¬ game for use in the I & C system developed by the applicant T3000 for power plants. The Siemens Power and Process Automation T3000 control system (SPPA-T3000) is designed to perform all power plant automation tasks: turbine control, boiler control including boiler protection, auxiliary and ancillary equipment, and the integration of systems from other suppliers, such as gasification plants in the context of IGCC (Integrated Gasification Combined Cycle) applications.
FIG 9 zeigt konkret eine Eingabemaske 18 der Symbolbibliothek 8 zur Hinterlegung der Symboldaten 10 und Anschlusspunktdaten 12. Diese wird in einer bekannten graphischen Benutzeroberfläche auf einem Computersystem angezeigt, um Symboltypen in der Symbolbibliothek 8 zu hinterlegen. Die Eingabemaske 18 zeigt im unteren Bereich zunächst dieFIG. 9 specifically shows an input mask 18 of the symbol library 8 for storing the symbol data 10 and connection point data 12. This is displayed in a known graphical user interface on a computer system to deposit symbol types in the symbol library 8. The input mask 18 shows in the lower area first the
Grafikinformationen 6, d. h. ein konkretes Abbild des Symbol¬ typs zusammen mit seinen Anschlusspunkten und deren Lage, die wie beschrieben zur Zuordnung der Symboltypen zu Symbolen verwendet werden. Graphic information 6, ie a concrete image of the symbol ¬ type together with its connection points and their location, which are used as described for the assignment of symbol types to symbols.
Im oberen Bereich zeigt die Eingabemaske 18 Möglichkeiten zur Eingabe von Symboldaten 10. Die gezeigte Liste ermöglicht die Eingabe eines Namens für den Symboltyp sowie die automatische Zuordnung zu einer so genannten AFI (automation function in- stance) , die einen bestimmten Funktionsblock in der SPPA-In the upper area, the input mask shows 18 options for entering symbol data 10. The list shown allows the entry of a name for the symbol type as well as the automatic assignment to a so-called AFI (automation function instance), which defines a specific function block in the SPPA.
T3000 darstellt. Weiterhin können bestimmte Identifizierungs¬ markierungen hinterlegt werden sowie eine automatische Erset¬ zung durch eine Substruktur veranlasst werden („Explode macro") . T3000 represents. Furthermore, certain identification ¬ markers can be stored and an automatic ERSET ¬ it, shall be caused by a substructure ( "Explode macro").
Im mittleren Bereich sind schließlich Möglichkeiten zur Hinterlegung von Anschlusspunktdaten gegeben, was in Form einer Tabelle erfolgt. Es existieren Schaltflächen zur Hinzufügung oder Entfernung von Anschlusspunkten, die jeweils einer Zeile der Tabelle entsprechen. In den Spalten sind die verschiede¬ nen Arten von Anschlusspunktdaten hinterlegt, zunächst ein Anschlusspunktname sowie ein Anschlusspunkttyp (hier: „IN" = „eingehend" oder „OUT" = „ausgehend". Weiterhin ist die Art der Identifikation hinterlegt. Im Beispiel der FIG 9 werden sämtliche Anschlusspunkte anhand ihrer Position identifiziert, die z. B. durch Anklicken im unteren Bild definiert werden kann. Weiterhin sind bestimmte Erfor¬ dernisse durch anhakbare Felder hinterlegbar, nämlich das Er- fordernis einer gerichteten Verbindung, das Erfordernis des Anschlusses an sich, sowie die Möglichkeit der datenseitigen Duplizierung. Schließlich können bestimmte Informationen zur Identifizierung innerhalb des Systems SPPA-T3000 hinterlegt sein, sowie weitere Identifizierungsmarkierungen. Finally, in the middle area, there are options for storing connection point data, which takes the form of a table. There are buttons for adding or removing connection points, each corresponding to one row of the table. In the columns covering different ¬ NEN types of connection point data are stored, first, a terminal name, and a connection point type (here:. "IN" = "incoming" or "OUT" = "starting" Further, the type of identification stored In the example of FIG. 9 all of the connection points are identified by their position z. B. can be defined by clicking on the lower screen. Further, certain obstacles Erfor ¬ by anhakbare storable fields, namely the requirement of a directed link, the requirement of the terminal itself, as well as the possibility of data-side duplication Identification within the SPPA-T3000 system, as well as other identification markings.
Durch die gezeigte Eingabemaske 18 ist vergleichsweise ein- fach die Erstellung einer Symbolbibliothek 8 für die Anwendung in der SPPA-T3000 möglich, wodurch das oben beschriebene Verfahren 1 bei der automatisierten Erfassung von technischen Zeichnungen 2 schnell angewendet werden kann. By means of the input mask 18 shown, it is relatively easy to create a symbol library 8 for use in the SPPA-T3000, as a result of which the method 1 described above can be applied quickly in the automated acquisition of technical drawings 2.
Bezugs zeichenliste Reference sign list
1 Verfahren 1 procedure
2 technische Zeichnung 4 Datensatz  2 technical drawing 4 data set
6 Grafikinformationen 6 graphic information
8 Symbolbibliothek8 symbol library
10 Symboldaten 10 symbol data
12 Anschlusspunktdaten 14 weitere Daten  12 connection point data 14 additional data
16 zweite Darstellung 16 second illustration
18 Eingabemaske a) , b) , c) 18 input mask a), b), c)
d) , e) Schritt d), e) step
CL I ci.3 Anschlusspunkt 11, 12, 13  CL I ci.3 Connection point 11, 12, 13
14, 15, 16 14, 15, 16
17, 18 Linie 17, 18 line
sl, s2, s3 sl, s2, s3
s4, s5, s6 Symbol s4, s5, s6 icon
stl, st2 stl, st2
st3, st4 st3, st4
st5, st6 st5, st6
st7 Symboltyp st7 symbol type

Claims

Patentansprüche claims
1. Verfahren (1) zur automatisierten Erstellung eines eine technische Zeichnung (2) mit Symbolen (sl...s6) und die Sym- bole (sl...s6) verbindenden Linien (11...18) charakterisie¬ renden Datensatzes (4) aus der Zeichnung (2), umfassend die in einem Computersystem durchgeführten Verfahrensschritte: a) Scannen der technischen Zeichnung (2), 1. Method (1) for the automated creation of a technical drawing (2) with symbols (sl ... s6) and the symbols (sl ... s6) connecting lines (11 ... 18) characterizing ¬ record (4) of the drawing (2), comprising the steps performed in a computer system: a) scanning the technical drawing (2),
b) Identifizieren der Symbole (sl...s6) in der technischen Zeichnung (2) und Hinterlegen von das jeweilige Symbol b) Identifying the symbols (sl ... s6) in the technical drawing (2) and storing the respective symbol
(sl...s6) repräsentierenden Knoten im Datensatz (4),  (sl ... s6) representing nodes in the data record (4),
c) Identifizieren von jeweils mindestens zwei Symbole c) identifying at least two symbols each
(sl...s6) verbindenden Linien (11...18) in der technischen Zeichnung (2) und Hinterlegen von die jeweilige Linie (sl ... s6) connecting lines (11 ... 18) in the technical drawing (2) and deposit of the respective line
(11...18) repräsentierenden Verbindungen im Datensatz (4), wobei jeder Verbindung mindestens zwei Endpunkte zugeordnet werden und jedem Endpunkt einer der Knoten zugeordnet wird, die die durch die jeweilige Linie (11...18) verbundenen Sym¬ bole (sl...s6) repräsentieren, (11 ... 18) representing the compounds in the record (4), each connecting at least two endpoints and each endpoint associated with one of the nodes is assigned to the Sym ¬ bole (connected by the respective line (11 ... 18) sl ... s6),
d) Bereitstellen einer Symbolbibliothek (8) mit einer Mehrzahl von Symboltypen (stl...st7) und jedem Symboltyp d) providing a symbol library (8) with a plurality of symbol types (stl ... st7) and each symbol type
(stl...st7) zugeordneten Symboldaten (10), (stl ... st7) associated symbol data (10),
e) Zuordnen jeweils genau eines Symboltyps (stl...st7) aus der Symbolbibliothek (8) zu jedem Knoten zumindest auf Basis der Symboldaten (10) und Hinterlegen des jeweils zugeordneten Symboltyps (stl...st7) zu dem jeweiligen Knoten im Datensatz (4) , e) assigning exactly one symbol type (stl ... st7) from the symbol library (8) to each node based at least on the symbol data (10) and storing the respectively assigned symbol type (stl ... st7) to the respective node in the data record (4),
dadurch gekennzeichnet, dass characterized in that
Schritt d) das Hinterlegen einer Anzahl von Anschlusspunkten (al...a3) mit jedem Anschlusspunkt (al...a3) zugeordneten An¬ schlusspunktdaten (12) zu einer Anzahl der Symboltypen Step d) the storage of a number of connection points (al ... a3) with each connection point (al ... a3) associated with ¬ terminal point data (12) to a number of symbol types
(stl...st7) in der Symbolbibliothek (8) umfasst, und (stl ... st7) in the symbol library (8), and
Schritt e) das Zuordnen jeweils genau eines Anschlusspunkts (al...a3) zu einer Anzahl der Endpunkte zumindest auf Basis der Anschlusspunktdaten (12) und das Hinterlegen des jeweils zugeordneten Anschlusspunkts (al...a3) zu dem jeweiligen End¬ punkt im Datensatz (4) umfasst. Step e) assigning each of exactly one connection point (al ... a3) to a number of endpoints (at least on the basis of the terminal data (12) and depositing the respectively associated connection point al ... a3) to the respective end ¬ point in Record (4) includes.
2. Verfahren (1) nach Anspruch 1, bei dem die Anschlusspunktdaten (12) einen Anschlusspunkttyp umfassen, wobei zu jedem Anschlusspunkttyp hinterlegt ist, mit welchen An¬ schlusspunkttypen der jeweilige Anschlusspunkttyp gemeinsam Endpunkte einer Verbindung bilden kann. 2. The method (1) according to claim 1, wherein the connection point data (12) comprise a connection point type, being deposited for each connection point type, with which An ¬ terminal point types of the respective connection point type together form endpoints of a connection.
3. Verfahren (1) nach Anspruch 2, bei dem zu jedem Anschlusspunkttyp Identifikationseigenschaften hinterlegt sind. 3. Method (1) according to claim 2, in which identification characteristics are stored for each connection point type.
4. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem die Anschlusspunktdaten (12) eine Information umfassen, die angibt, ob der jeweilige Anschlusspunkt (al...a3) einem Endpunkt zugeordnet sein muss. 4. The method (1) according to any one of the preceding claims, wherein the connection point data (12) comprise information indicating whether the respective connection point (al ... a3) must be assigned to an end point.
5. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem Schritt e) ausgehend von einer Verbindung seriell durch Verfolgen weiterer, an den Knoten eines Endpunkts der Verbindung anschließender Verbindungen erfolgt. 5. The method (1) according to any one of the preceding claims, wherein the step e) takes place serially starting from a connection by following further, subsequent to the nodes of an end point of the connection compounds.
6. Verfahren (1) nach Anspruch 5, bei dem die Symboldaten (10) eine Information umfassen, die angibt, ob über das je¬ weilige Symbol (sl...s6) hinausgehende Verbindungen verfolgt werden sollen. 6. The method (1) according to claim 5, wherein the symbol data (10) comprise an information indicating whether the above each ¬ stays awhile symbol (sl ... s6) beyond compounds are to be tracked.
7. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem die Symboldaten (10) eine zweite Darstellung (16) des Symboltyps (stl...st7) umfassen, wobei die zweite Darstellung (16) eine Mehrzahl von Knoten mit jeweils zugeordneten Symboltypen (stl...st7) und Verbindungen mit der Mehrzahl von Knoten zugeordneten Endpunkten umfasst. 7. Method (1) according to one of the preceding claims, in which the symbol data (10) comprise a second representation (16) of the symbol type (stl ... st7), the second representation (16) having a plurality of nodes, each associated with Symbol types (stl ... st7) and connections to the plurality of nodes associated with endpoints.
8. Verfahren (1) nach Anspruch 7, bei dem die Anschlusspunktdaten (12) eine Information umfassen, die angibt, ob der jeweilige Anschlusspunkt (al...a3) für die Verwendung der je- weiligen zweiten Darstellung (16) einem Endpunkt zugeordnet sein muss . 8. The method (1) according to claim 7, wherein the connection point data (12) comprise information indicating whether the respective connection point (al ... a3) for the use of the respective second representation (16) associated with an end point have to be .
9. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem die Anschlusspunktdaten eine Information umfassen, die angibt, ob der jeweilige Anschlusspunkt vervielfältigt werden kann. A method (1) according to any one of the preceding claims, wherein the connection point data comprises information indicating whether the respective connection point can be duplicated.
10. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem Schritt c) das Identifizieren von von einem Symbol (sl...s6) ausgehenden, offenen Linien (11...18) in der technischen Zeichnung (2) umfasst, wobei dem offenen Endpunkt der repräsentierenden Verbindung ein Konnektor zugeordnet und im Datensatz (4) hinterlegt wird, der eine Verbindung zu einem Konnektor einer zweiten technischen Zeichnung (2) repräsentiert . 10. The method according to claim 1, wherein step c) comprises identifying open lines (11. wherein a connector is assigned to the open end point of the representing connection and stored in the data set (4), which represents a connection to a connector of a second technical drawing (2).
11. Verfahren (1) nach Anspruch 10, bei dem der Datensatz (4) mit dem die zweite technische Zeichnung (2) repräsentierenden Datensatz anhand der Verbindung der Konnektoren vereinigt wird . 11. The method (1) according to claim 10, wherein the data record (4) is combined with the second technical drawing (2) representing the record on the basis of the connection of the connectors.
12. Verfahren (1) nach einem der vorhergehenden Ansprüche, bei dem die Erfüllbarkeit von in den Symboldaten (10) und/o¬ der Anschlusspunktdaten (12) hinterlegten Bedingungen geprüft und bei Nichterfüllbarkeit ein Fehler erkannt wird. 12. The method (1) according to any one of the preceding claims, wherein the satisfiability of in the symbol data (10) and / or ¬ the connection point data (12) deposited conditions checked and failure to meet an error is detected.
13. Computerprogrammprodukt, das direkt in den internen Spei¬ cher eines Computers geladen werden kann und Softwarecode¬ abschnitte umfasst, mit denen das Verfahren (1) gemäß einem der vorhergehenden Ansprüche durchgeführt wird, wenn das Com¬ puterprogrammprodukt auf dem Computer läuft. 13. A computer program product that can be loaded directly into the internal SpeI ¬ cher a computer and software code ¬ portions comprises, is with which the method (1) performed in accordance with one of the preceding claims when the Com ¬ computer program product runs on the computer.
14. Computersystem, umfassend einen Scanner sowie einen internen Speicher, in den das Computerprogrammprodukt nach Anspruch 13 geladen ist. A computer system comprising a scanner and an internal memory in which the computer program product of claim 13 is loaded.
EP15720291.2A 2014-04-25 2015-04-21 Method for the automated creation of a data set characterizing a technical drawing Ceased EP3134834A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102014207874.1A DE102014207874A1 (en) 2014-04-25 2014-04-25 Method for the automated creation of a data record characterizing a technical drawing
PCT/EP2015/058560 WO2015162112A1 (en) 2014-04-25 2015-04-21 Method for the automated creation of a data set characterizing a technical drawing

Publications (1)

Publication Number Publication Date
EP3134834A1 true EP3134834A1 (en) 2017-03-01

Family

ID=53051802

Family Applications (1)

Application Number Title Priority Date Filing Date
EP15720291.2A Ceased EP3134834A1 (en) 2014-04-25 2015-04-21 Method for the automated creation of a data set characterizing a technical drawing

Country Status (5)

Country Link
US (1) US20170169291A1 (en)
EP (1) EP3134834A1 (en)
CN (1) CN106663133A (en)
DE (1) DE102014207874A1 (en)
WO (1) WO2015162112A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014207870A1 (en) * 2014-04-25 2015-10-29 Siemens Aktiengesellschaft Method for the automated creation of a data record characterizing two technical drawings
US11270105B2 (en) * 2019-09-24 2022-03-08 International Business Machines Corporation Extracting and analyzing information from engineering drawings
DE102021108281A1 (en) * 2021-03-31 2022-10-06 EPLAN GmbH & Co. KG Method and device for the automatic analysis of a circuit diagram
US20230067997A1 (en) * 2021-09-01 2023-03-02 The Boeing Company Method and apparatus for efficiently extracting and representing information from technical diagrams

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5251268A (en) * 1991-08-09 1993-10-05 Electric Power Research Institute, Inc. Integrated method and apparatus for character and symbol recognition
US6314194B1 (en) * 1995-07-26 2001-11-06 The United States Of America As Represented By The Secretary Of The Army Method for generating computer aided design programming circuit designs from scanned images of the design
US6606731B1 (en) * 1999-08-05 2003-08-12 The Boeing Company Intelligent wiring diagram system
US7246328B2 (en) * 2001-03-29 2007-07-17 The Boeing Company Method, computer program product, and system for performing automated linking between sheets of a drawing set
US7212936B2 (en) * 2004-01-09 2007-05-01 The Boeing Company Method, system and computer program product for automated discovery and presentation of the direction of flow through components represented in a drawing set
US8214789B2 (en) * 2006-10-02 2012-07-03 The Boeing Company Method and system for keyboard managing and navigating among drawing objects
DK176834B1 (en) * 2008-03-07 2009-11-23 Jala Aps Procedure for scanning
US20110209081A1 (en) * 2010-02-23 2011-08-25 Honeywell International Inc. Methods and systems for constructing multi-dimensional data models for distribution networks
WO2013092654A1 (en) 2011-12-23 2013-06-27 Siemens Aktiengesellschaft Automated project design of a control technology for a technical system

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None *
See also references of WO2015162112A1 *

Also Published As

Publication number Publication date
DE102014207874A1 (en) 2015-10-29
US20170169291A1 (en) 2017-06-15
CN106663133A (en) 2017-05-10
WO2015162112A1 (en) 2015-10-29

Similar Documents

Publication Publication Date Title
DE60008264T2 (en) DATA EXCHANGE BETWEEN CAD SYSTEMS
DE60318471T2 (en) EXTRACTION OF KNOWLEDGE THROUGH AN OBJECT-BASED SEMANTIC NETWORK
DE10149693A1 (en) Objects in a computer system
EP1238364A2 (en) Method for processing data structures
WO2015162112A1 (en) Method for the automated creation of a data set characterizing a technical drawing
DE112021000371T5 (en) DIGITAL IMAGE EDITING
WO1997015877A2 (en) Computer-aided work and information system and associated module
EP3123367A1 (en) Method for automatically establishing a data record characterizing two technical drawings
EP1092210B1 (en) Device and method for constructing a virtual installation model
DE112020003171T5 (en) Method and device for linking targets
DE60008201T2 (en) Translation of data with electronic images
EP0206214B1 (en) Method for a uniform symbolic description of document patterns in the form of data structures in an automated apparatus
DE19908204A1 (en) Fractal n-th order network for handling complex structures
EP3119035B1 (en) Method for the inspection of network facilities and network
DE102015209715A1 (en) Method and system for the computer-aided transfer of an architectural concept of a technical system into an architectural specification
DE102016006232A1 (en) Method and system for aligning a virtual model with a real object
DE10206658A1 (en) Method for checking an integrated electrical circuit
DE4437744A1 (en) Method for locating and representing circuit elements of an electronic circuit for the functional test of the circuit
EP4121897B1 (en) Method and systems for providing synthetic labelled training data sets and use of same
DE102018001662A1 (en) Aggregated statistical values for locally distributed and Internet-connected systems
WO1995014281A1 (en) Method of automatically modelling part of an overall process by means of a computer
EP2093663A1 (en) Engineering system for developing a project and method
DE102022128961A1 (en) USING A SYNTHETIC DATASET TO TRAIN ROBOTIC DEPALLETIZING
EP1252001B1 (en) Method for computer assisted processing of a structure comprising a first element and a second element belonging together
DE202023105419U1 (en) A web information extraction system

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20161125

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIEMENS AKTIENGESELLSCHAFT

17Q First examination report despatched

Effective date: 20171110

REG Reference to a national code

Ref country code: DE

Ref legal event code: R003

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN REFUSED

18R Application refused

Effective date: 20180723