WO2023132341A1 - 図面検索装置、図面データベース構築装置、図面検索システム、図面検索方法、及び記録媒体 - Google Patents
図面検索装置、図面データベース構築装置、図面検索システム、図面検索方法、及び記録媒体 Download PDFInfo
- Publication number
- WO2023132341A1 WO2023132341A1 PCT/JP2023/000063 JP2023000063W WO2023132341A1 WO 2023132341 A1 WO2023132341 A1 WO 2023132341A1 JP 2023000063 W JP2023000063 W JP 2023000063W WO 2023132341 A1 WO2023132341 A1 WO 2023132341A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- attribute
- drawing data
- target
- attribute value
- title block
- Prior art date
Links
- 238000010276 construction Methods 0.000 title claims description 86
- 238000000034 method Methods 0.000 title claims description 21
- 238000012545 processing Methods 0.000 claims abstract description 49
- 238000012937 correction Methods 0.000 claims description 38
- 230000008569 process Effects 0.000 claims description 13
- 238000010586 diagram Methods 0.000 description 16
- 239000000463 material Substances 0.000 description 4
- 238000011960 computer-aided design Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000012015 optical character recognition Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 229920001342 Bakelite® Polymers 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000004637 bakelite Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/535—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
Definitions
- the present invention relates to a drawing retrieval device, a drawing database construction device, a drawing retrieval system, a drawing retrieval method, and a recording medium.
- Patent Document 1 a drawing management server that enables full-text search of drawings only for title areas.
- the drawing management server acquires the position coordinates of the title item consisting of a predetermined character string among the character strings registered in the drawing search index, and determines the title area.
- the drawing management server registers the positional coordinates of the title item as title data, and acquires the positional coordinates of the title area from the title data in response to a drawing search request from the user terminal.
- the drawing management server uses the search keyword included in the drawing search request to search the drawing search index, acquires the relevant search keyword and its position coordinates, and uses these search results to find the search keyword in the title area. Search for included drawings.
- a design device is known (for example, Patent Document 2).
- This computer-aided design device captures at least the drawing name, drawing number, and version number information displayed in a specific area on the screen. Then, the computer-aided design device classifies and accumulates each piece of fetched information for each product.
- a computer-aided design device reads out information related to one product from the stored information and outputs it in a predetermined format to a screen or hard copy.
- a drawing design system that automatically extracts attribute information from CAD drawing data and automatically registers the attribute information in a parts list (for example, Patent Document 3).
- This drawing design system searches for specific elements of the CAD system that exist in the CAD drawings of the parts of the equipment, and extracts the information of the parts composed of the specific elements from the CAD drawings as attribute information.
- the bill of materials system checks the consistency of the attribute information against the bill of materials. Then, when the attribute information has consistency, the attribute information is registered in the parts table.
- This data processing device determines the file type from the extension of the file read from the document file, extracts the keyword from the range including the title block if the file type is drawing, and if it is a form, Keywords are extracted from item rows and item strings, and in the case of documents, keywords are extracted from character strings of a predetermined number of characters from the beginning of the document.
- the image data displayed on the display device is directly converted into character code format to create character code attribute file management data.
- a graphic processing method is known (for example, Patent Document 5).
- a drawing having a plurality of management items described in the title column of a screen input as image data is displayed, and the columns of the management items are specified with coordinates on the displayed drawing using a mouse device.
- the image data described in the column is converted into characters to create file management data with character code attributes.
- Patent Document 6 It also provides an efficient, fast way to manage drafting drawings in digital format, a system that automatically identifies, indexes, and stores drawings for easy and fast retrieval without the need to manually enter them into a database.
- the system analyzes data in digital form according to a series of algorithms by a central processing unit to identify each drafting drawing. Once the system has identified the drawing, the information in each text box of the drawing frame is processed according to a set of predetermined algorithms to identify and classify the information in the text box. This information is collated in a database according to specified criteria and its classification, allowing users to find and search for specific drawings.
- title columns are often provided in drawing data. Attribute values representing the attributes of the drawing often exist in this title block. For example, in the title column of the drawing data, there may be a description of "bakelite” which is an attribute value representing the attribute of "material”.
- Patent Documents 1 to 6 above do not consider the existence of various types of title blocks.
- the present invention identifies the combination of attributes and attribute values of target drawing data with higher accuracy than when the type of title block of target drawing data is not specified, and draw data similar to target drawing data.
- the purpose is to search for
- a first aspect of the present invention identifies the type of title block existing in target drawing data, and based on the identified title block type, The arrangement of a plurality of boxes is specified, character recognition processing is performed on each of the character strings present in each location in the title block present in the target drawing data, and the character recognition result and the specified above are obtained.
- a target attribute value representing an attribute value of the target drawing data represented by the character string in the box is specified based on the arrangement of the plurality of boxes, and a target attribute that is an attribute associated with the box in advance is specified. Then, based on the specified combination of the target attribute value and the target attribute, the drawing data, the attribute value of the drawing data, and the attribute corresponding to the attribute value are associated with each other. Drawing data having an attribute value similar to the attribute value is searched, and the search result is output.
- a type of title block existing in drawing data for constructing a database is specified, and a plurality of boxes existing in the title block are identified based on the specified title block type. is specified, character recognition processing is performed on each of the character strings present in each location in the title block present in the drawing data, and the character recognition result and the specified plurality of boxes
- the attribute value of the drawing data represented by the character string in the box is specified based on the layout, the attribute associated with the box in advance is specified, and the specified attribute value, the attribute, and the drawing are specified.
- a database is constructed by storing data and combinations in the database.
- FIG. 1 is a diagram showing an example of a schematic configuration of a drawing retrieval system according to this embodiment.
- FIG. 2 is a diagram showing an example of drawing data.
- FIG. 3 is a schematic block diagram of a computer functioning as each device of the drawing retrieval system.
- FIG. 4 is a diagram for explaining drawing database construction processing executed by the drawing search system of the present embodiment.
- FIG. 5 is a diagram for explaining the structure of the title block.
- FIG. 6 is a diagram showing an example of data stored in the title column database.
- FIG. 7 is a diagram showing an example of structure information of ruled lines forming a title column.
- FIG. 8A is a diagram showing an example of box attribute correspondence information.
- FIG. 8B is a diagram showing an example of box attribute correspondence information.
- FIG. 8C is a diagram showing an example of box attribute correspondence information.
- FIG. 8D is a diagram showing an example of information that is not stored in the drawing database.
- FIG. 9 is a diagram showing an example of data stored in a drawing database.
- FIG. 10 is a diagram showing an example of a screen displayed on the user terminal.
- FIG. 11 is a diagram for explaining the processing executed by the drawing search system of this embodiment.
- FIG. 12 is a diagram showing an example of correction rules and dictionary data.
- FIG. 1 is a block diagram showing the drawing search system 10 of this embodiment.
- the drawing retrieval system 10 of the present embodiment comprises an administrator terminal 12, a drawing database construction server 14, a drawing retrieval server 16, and a plurality of user terminals 18A, 18B, 18C. there is In the following, one user terminal will be referred to as a user terminal 18 unless a specific terminal is indicated.
- the administrator terminal 12, the drawing database construction server 14, the drawing search server 16, and the user terminal 18 are connected to each other via a network 19 such as the Internet so as to be able to communicate with each other.
- the drawing retrieval system 10 of this embodiment identifies the attribute value of the drawing data represented by the character string in the box existing in the title block based on the type of the title block existing in the drawing data, and the identified attribute value Drawing data having attribute values similar to .
- Fig. 2 shows an example of drawing data.
- the drawing data targeted by this embodiment is, for example, PDF (Portable Document Format) data generated by scanning a paper drawing.
- the drawing data of FIG. 2 shows a metal workpiece.
- Various information is described in the title column T of the drawing data of FIG.
- information T1 representing the material of the part to be metal-processed
- information T2 related to surface specifications of the metal-processed product
- drawing number T3 drawing number
- the drawing retrieval system 10 of this embodiment identifies the type of title block that exists in the drawing data, identifies the attribute value of the drawing data that exists in the title block based on the type of the title block, and identifies the Drawing data having an attribute value similar to the obtained attribute value is retrieved. As a result, it is possible to accurately search for drawing data similar to certain drawing data.
- the administrator terminal 12 is a terminal operated by an administrative user who manages the drawing search server 16 and the drawing database construction server 14 . Specifically, the administrative user exchanges information between the drawing search server 16 and the drawing database construction server 14 by operating the manager terminal 12 .
- the drawing database construction server 14 is a server for constructing a database in which a plurality of drawing data are stored.
- the drawing database construction server 14 includes, as shown in FIG. , a construction attribute identification unit 30 , a construction unit 32 , a title column database 22 , and a drawing database 34 .
- the title block database 22 stores multiple types of title block data.
- the title block database 22 functions as a title block library. Details of the title column database 22 will be described later.
- the drawing database 34 stores drawing data, attributes of the drawing data, and attribute values of the drawing data in association with each other. Details of the drawing database 34 will be described later.
- the drawing search server 16 is a server for searching for drawing data similar to target drawing data from a database storing a plurality of drawing data. As shown in FIG. 1, a reception unit 40, a title block database 42, a title block identification unit 44, an arrangement identification unit 46, a recognition unit 48, a correction rule storage unit 49, an attribute identification unit 50, A search unit 52 and a drawing database 54 are provided.
- the title block database 42 stores the same data as the title block database 22.
- the drawing database 54 stores data similar to that of the drawing database 34 .
- the user terminal 18 is a terminal operated by a user. Specifically, the user exchanges information with the drawing search server 16 by operating the user terminal 18 .
- the computer 70 includes a CPU 71 , a memory 72 as a temporary storage area, and a non-volatile storage section 73 .
- the computer 70 also includes an input/output interface (I/F) 74 to which an input/output device (not shown) is connected, and a read/write (R/W) unit 75 for controlling reading and writing of data to and from a recording medium.
- I/F input/output interface
- R/W read/write
- the computer 70 also has a network I/F 76 connected to a network such as the Internet.
- the CPU 71 , memory 72 , storage section 73 , input/output I/F 74 , R/W section 75 and network I/F 76 are connected to each other via a bus 77 .
- the storage unit 73 can be implemented by a Hard Disk Drive (HDD), Solid State Drive (SSD), flash memory, or the like.
- a program for causing the computer 70 to function is stored in the storage unit 73 as a recording medium.
- the CPU 71 reads out the program from the storage unit 73, develops it in the memory 72, and sequentially executes the processes of the program.
- the CPU 71 according to the embodiment is an example of at least one processing circuit that reads a program from the storage unit 73, develops it in the memory 72, and sequentially executes processes included in the program. Any processor other than the CPU 71 may be used as the at least one processing circuit.
- the at least one processing circuit in the drawing database construction server 14 executes the program read from the storage unit 73 and loaded into the memory 72, thereby creating the construction reception unit 20, the title column database 22, and the construction title column identification unit 24. , construction layout identification unit 26, construction recognition unit 28, construction attribute identification unit 30, construction unit 32, title column database 22, and drawing database 34.
- FIG. The at least one processing circuit in the drawing search server 16 executes the program read from the storage unit 73 and loaded into the memory 72 to obtain the receiving unit 40, the title column database 42, the title column specifying unit 44, the layout specifying unit 46 , a recognition unit 48 , a correction rule storage unit 49 , an attribute identification unit 50 , a search unit 52 and a drawing database 54 .
- the administrative user operates the administrator terminal 12 to input a plurality of drawing data for database construction to the drawing database construction server 14 . Then, the drawing database construction server 14 executes the processing routine shown in FIG.
- step S100 the construction reception unit 20 receives a plurality of drawing data for database construction.
- step S102 the construction title block specifying unit 24 sets one drawing data out of the plurality of drawing data received in step S100.
- step S104 the construction title block identifying unit 24 identifies the type of title block existing in the drawing data set in step S102.
- FIG. 5 shows an example of a title block.
- the structure of the title block TA and the structure of the title block TB shown in FIG. 5 are different.
- the drawing database construction server 14 of this embodiment uses the title block database 22 that stores information on a plurality of types of title blocks to identify the type of title block and to After specifying what kind of information is stored in , get the information of the character string stored in each box of the title block.
- the title column database 22 stores, for example, a table as shown in FIG. In the example shown in FIG. 6, the title block ID, the company name, the structure information of the ruled lines forming the title block used by the company, and the attributes and attribute values of each box in the title block is associated with box attribute association information indicating whether or not is stored.
- the structure information of the ruled lines forming the title block is, for example, data representing the structure TS of the title block as shown in FIG.
- the box-attribute correspondence information indicating what attributes and attribute values are stored in each box in the title column is, for example, information as shown in FIGS. 8A to 8C.
- the box-attribute correspondence information specifies in advance what attributes and attribute values are stored in each box in the title block.
- the box-attribute correspondence information is information such that the drawing number attribute is stored in the 1A box in the title block, and the actual drawing number attribute value is stored in the 1B box.
- the relative positional relationship between the structural information of the ruled lines and the box-attribute correspondence information indicating what kind of attributes and attribute values are stored in each box in the title block is linked in advance. I wish I could.
- the box attribute correspondence information as shown in FIG. Information may be such that two attribute values 2B-1 and 2B-2 are stored as attribute values.
- the attribute value of the model name may be stored in the location 2B-1
- the attribute value of the variation type of the model name may be stored in the location 2B-2.
- the title block may be expanded. In this case, as shown in FIG.
- the box attribute correspondence information has the attribute value of a part name drawn in the drawing at the 3X position above the 3A box in the title block. It is information that the attribute value of another part name drawn in the drawing is described in the portion 4X located above 4A in the title column.
- the area for reading text can be set without being constrained inside the title block, as shown in FIG. 8C. Therefore, for example, it is also possible to read text existing in an area outside the title block that has a predetermined relative positional relationship with the title block.
- step S104 the construction title block identification unit 24 determines which type of title block of the drawing data set in step S102 corresponds to which of the plurality of types of title blocks stored in the title block database 22. specify whether to
- the construction title block identification unit 24 overlaps the ruled lines of the title block of the drawing data set in step S102 with the ruled lines of each of the multiple types of title blocks stored in the title block database 22. to calculate the matching degree of ruled lines. Then, the construction title block identification unit 24 identifies that the title block type of the drawing data set in step S102 is the title block type with the highest degree of coincidence, based on the result of calculating the degree of coincidence.
- step S106 the construction layout specifying unit 26 specifies the layout of a plurality of boxes existing in the title block based on the title block type specified in step S104.
- step S108 the construction recognition unit 28 executes character recognition processing for each character string that exists in each location in the title column that exists in the drawing data set in step S102.
- the construction recognition unit 28 uses a known OCR (Optical Character Reader) to execute character recognition processing.
- OCR Optical Character Reader
- step S110 the construction attribute identification unit 30 determines the attribute of the drawing data represented by the character strings in the boxes based on the character recognition result obtained in step S108 and the layout of the plurality of boxes identified in step S106. Along with specifying the value, it specifies the attributes pre-associated with the box.
- the construction attribute specifying unit 30 refers to the box attribute correspondence information in the table shown in FIG. 6, and specifies the attribute values and attributes of the drawing data set in step S102.
- the construction attribute specifying unit 30 refers to the information shown in FIG. 6, and specifies the attribute "product name" of the title column of the drawing data set in step S102 and its attribute value "align guide”. .
- step S112 the construction attribute specifying unit 30 stores the combination of the drawing data set in step S102 and the attribute value specified in step S110 in the drawing database 34.
- the information stored in the general tolerance column V as shown in FIG. 8D is not stored in the drawing database 34 . This is because information such as that stored in the general tolerance column V is added to any title column, and is highly likely to be of no use in retrieving drawing data, which will be described later.
- the drawing database 34 stores, for example, a table as shown in FIG.
- drawing IDs, drawing data, and their attributes are associated with each other.
- the attribute "article name” is stored in association with the attribute value "alignment guide”.
- a separate table that associates the actually recognized character string "component name” with the attribute "product name” may be prepared in advance.
- step S114 the construction attribute specifying unit 30 determines whether or not the processing of steps S102 to S112 has been performed for all the drawing data received in step S100. When the processing of steps S102 to S112 has been executed for all the drawing data received in step S100, this processing routine ends. On the other hand, if there is drawing data for which the processes of steps S102 to S112 have not been executed, the process returns to step S102.
- the data stored in the drawing database 34 of the drawing database construction server 14 is also stored in the drawing database 54 of the drawing search server 16.
- the data stored in the title block database 22 of the drawing database construction server 14 is also stored in the title block database 42 of the drawing search server 16 .
- the user operates his/her own user terminal 18 to input the target drawing data to the drawing search server 16 .
- the display (not shown) of the user terminal 18 displays a screen as shown in FIG.
- Instruction data indicating that the data has been selected is sent to the drawing search server 16 .
- the drawing search server 16 executes the drawing search routine shown in FIG. 11 in response to receiving the target drawing data.
- step S200 the receiving unit 40 receives target drawing data.
- the title block identification unit 44 refers to the data stored in the title block database 42, and identifies the type of title block present in the target drawing data received in step S200. Specifically, the title block identifying unit 44 identifies the type of title block existing in the target drawing data by the same method as the construction title block identifying unit 24 .
- the layout specifying unit 46 refers to the data stored in the title block database 42, and determines the layout of the plurality of boxes existing in the title block based on the title block type specified in step S202. Identify. Specifically, the placement specifying unit 46 specifies the placement of a plurality of boxes existing in the title column by the same method as the construction placement specifying unit 26 .
- step S206 the recognition unit 48 executes character recognition processing for each character string present in each location in the title column present in the target drawing data.
- step S208 the attribute identification unit 50 corrects the character recognition result obtained in step S206 based on the correction rule or dictionary data stored in the correction rule storage unit 49, thereby correcting the character recognition result. Generate modified character recognition results.
- FIG. 12 shows an example of correction rules and dictionary data stored in the correction rule storage unit 49.
- FIG. 12 As shown in FIG. 12, a plurality of correction rules R are stored in the correction rule storage section 49.
- FIG. 12 shows an example of correction rules and dictionary data stored in the correction rule storage unit 49.
- correction rules are set in advance for each of the multiple boxes that exist within the title block.
- a correction rule is set in advance, such as "If "O” is detected in the attribute value box corresponding to the attribute "drawing number”, replace it with "0 (zero)””. It is Note that this correction rule may be set in advance for each user. For example, alphabets do not appear in the "drawing number” column of the title block used by a company, so if "O" is detected, "0 (zero)” Correction rules are set such as replacing with .
- the dictionary data D is data in which character strings representing incorrect character recognition results are associated with correct character strings representing attribute values of drawing data.
- incorrect character recognition results such as "SOS304" and "SuS304" are associated with the correct character string "SUS304" representing the attribute value of the drawing data.
- the attribute identification unit 50 performs character recognition on the character recognition result of the character string existing in the box based on the correction rule set in advance for the box. Correct the result.
- the attribute specifying unit 50 corrects the character recognition result based on the dictionary data in which the character string representing the incorrect character recognition result and the correct character string representing the attribute value of the drawing data are associated with each other as the correction rule.
- the modification generates a modified character recognition result in which the character recognition result is modified.
- step S210 the attribute specifying unit 50 determines the attributes of the target drawing data represented by the character strings in the boxes based on the modified character recognition result obtained in step S208 and the layout of the plurality of boxes specified in step S204.
- a target attribute value representing a value is specified, and a target attribute, which is an attribute associated with a box in advance, is specified.
- the attribute specifying unit 50 specifies the target attribute value and the target attribute by the same method as the construction attribute specifying unit 30 .
- step S212 the search unit 52 searches for drawing data having an attribute value similar to that of the target drawing data from the drawing database 34 based on the combination of the target attribute value and the target attribute specified in step S210. do.
- step S214 the search unit 52 outputs the search result of drawing data having attribute values similar to those of the target drawing data, and this processing routine ends.
- the search results output from the search unit 52 are transmitted to the user terminal 18.
- the user confirms the search results displayed on the display unit (not shown) of his/her own user terminal 18 .
- the drawing search server identifies the type of title block existing in the target drawing data, and based on the identified title block type, a plurality of title blocks existing in the title block. Identify the placement of boxes. Then, the drawing search server executes character recognition processing for each character string existing in each location in the title column existing in the target drawing data. The drawing search server identifies target attribute values representing the attribute values of the target drawing data represented by the character strings in the boxes based on the character recognition result and the arrangement of the plurality of identified boxes, and preliminarily corresponds to the boxes. Identify the target attribute that is the attached attribute.
- the drawing search server retrieves the target drawing data from the drawing database in which the drawing data, the attribute value of the drawing data, and the attribute corresponding to the attribute value are associated. Drawing data having an attribute value similar to the attribute value is searched, and the search result is output.
- the combination of the attribute and the attribute value of the target drawing data can be specified with high accuracy, and drawing data similar to the target drawing data can be searched with high accuracy, compared to the case where the type of title block is not specified.
- the drawing search server of this embodiment specifies the target attribute value of the target drawing data by correcting the character recognition result based on preset correction rules.
- correction rules are preset for each user.
- different correction rules are set in advance for each of a plurality of boxes existing in the title block, and the drawing search server, based on the correction rule set in advance for each of the plurality of boxes, selects the character Modify recognition results.
- the drawing search server as a correction rule, based on dictionary data in which a character string representing an erroneous character recognition result and a correct character string representing an attribute value of drawing data are associated with each other, determines the character recognition result. to fix.
- the character recognition result by OCR is corrected, so that the attribute value of the target drawing data can be specified with high accuracy.
- target drawing data can be searched based on a plurality of attribute values assigned to the drawing data.
- the drawing database construction server identifies the type of title block existing in the drawing data for building the database, and based on the identified title block type, a plurality of title blocks existing in the title block. Identify the placement of boxes.
- the drawing database construction server executes a character recognition process for each character string present in each location in the title column present in the drawing data. Then, the drawing database construction server identifies the attribute value of the drawing data represented by the character string in the box based on the character recognition result and the arrangement of the plurality of identified boxes, and identifies the attribute value of the drawing data represented by the character string in the box.
- a database is constructed by specifying the attributes that have been identified and storing combinations of the specified attribute values, attributes, and drawing data in the drawing database. As a result, it is possible to automatically construct a database for accurately retrieving drawing data similar to target drawing data.
- the drawing database construction server 14 identifies the attribute value and the attribute without generating the corrected character recognition result like the drawing search server 16.
- the present invention is limited to this. not to be Similarly to the drawing search server 16, the drawing database construction server 14 may use correction rules and dictionary data to generate corrected character recognition results and specify attribute values and attributes.
- the construction recognition unit 28 of the drawing database construction server 14 and the recognition unit 48 of the drawing search server 16 further perform character recognition processing on each character string existing in a location different from the title column to
- the attribute value or the target attribute value may be specified based on the character recognition result of the character string existing in a different location from the column.
- the attribute values S1, S2, S3, and S4 of the drawing data are also written in places different from the title box T.
- FIG. 1 the attribute values S1, S2, S3, and S4 of the drawing data are also written in places different from the title box T.
- the building recognition unit 28 of the drawing database building server 14 and the recognition unit 48 of the drawing search server 16 perform character recognition processing on character strings that exist in locations different from the title box T. , its attribute values and attributes may be specified. In this case, correction rules and dictionary data may be used.
- the construction recognition unit 28 of the drawing database construction server 14 and the recognition unit 48 of the drawing search server 16 if the attribute value or the target attribute value is not specified based on the character recognition result in the title block, the drawing data or Character recognition processing is executed for each character string that exists in a location different from the title block of the target drawing data, and the construction attribute identification unit 30 or the attribute identification unit 50 exists in a location different from the title block.
- the attribute value or the target attribute value and the attribute may be specified based on the character recognition result of the character string. In this case, correction rules and dictionary data may be used.
- the type of title block is identified based on the degree of matching between the ruled lines of various title blocks stored in the title block database 22 and the ruled lines of the title block of the drawing data or target drawing data.
- the type of title block may be specified based on a character string (for example, a company name that exists in the lower column of the company name column) in a specific location in the title block.
- processing to delete characters that are considered to be noise from the character recognition results may be added to the correction rule. For example, if the character recognition result contains noise characters or symbols such as ".” and "
- the server-side or client-side computer is implemented by a single computer.
- the software may be installed on multiple computers, and each of the multiple computers may include all or part of the components according to the embodiment. In this case, it may be a form of distributed computing in which each computer performs communication processing with each other.
- the information transmitted from the client computer may be processed by one or a plurality of computers as servers provided on the cloud.
- the server-side or client-side computer shown in the embodiments has one of each component, but may have a plurality of the same components.
- various computations executed by the computer in this embodiment can be executed in parallel using at least one processor or using multiple computers via a network.
- various operations may be distributed to a plurality of operation cores in the processor and executed in parallel.
- Various operations performed by the server-side computer may be performed by at least one processor and at least one storage device provided on a cloud capable of communicating with the client-side computer via a network.
- a title block identification unit that identifies the type of title block that exists in the target drawing data
- an arrangement identifying unit that identifies an arrangement of a plurality of boxes existing in the title block based on the type of the title block identified by the title block identifying unit
- a recognition unit that executes a character recognition process for each character string existing in each location in the title column existing in the target drawing data
- a target attribute value representing an attribute value of the target drawing data represented by the character string in the box is specified based on the result of character recognition by the recognition unit and the placement of the plurality of boxes specified by the placement specifying unit.
- an attribute identification unit that identifies a target attribute that is an attribute associated in advance with the box; Based on the combination of the target attribute value and the target attribute specified by the attribute specifying unit, the target a search unit that searches for drawing data having an attribute value similar to that of the drawing data and outputs a search result;
- Drawing retrieval device including.
- the attribute identification unit corrects the character recognition result by the recognition unit based on a preset correction rule to generate a corrected character recognition result in which the character recognition result is corrected, and the corrected character recognition result Identifying the attribute value of interest based on The drawing search device according to (1) above.
- the correction rule is preset for each user, The drawing search device according to (2) above.
- the attribute specifying unit causes the recognition unit to perform modify character recognition results, The drawing search device according to (2) or (3) above.
- the attribute identifying unit determines, as the correction rule, character strings by the recognition unit based on dictionary data in which character strings representing incorrect character recognition results and correct character strings representing attribute values of drawing data are associated with each other. modifying the recognition result to generate a modified character recognition result in which the character recognition result is modified; The drawing search device according to any one of (2) to (4) above.
- the recognition unit further performs character recognition processing on each character string existing in a different location from the title column of the target drawing data, Identifying the target attribute value based on a character recognition result of a character string existing in a location different from the title block; The drawing retrieval device according to any one of (1) to (5) above.
- the recognition unit performs perform character recognition processing,
- the attribute identification unit identifies the target attribute value based on a character recognition result of a character string existing in a location different from the title block.
- the drawing retrieval device according to any one of (1) to (6) above.
- a construction title block identification unit for identifying the type of title block existing in the drawing data for database construction; a construction layout identifying unit that identifies the layout of a plurality of boxes existing in the title block based on the type of the title block identified by the construction title block identifying unit; a construction recognition unit that executes a character recognition process for each character string present in each location in the title block that exists in the drawing data; identifying an attribute value of the drawing data represented by the character string in the box based on the result of character recognition by the recognition unit for construction and the layout of the plurality of boxes identified by the layout identification unit for construction; , a construction attribute identification unit that identifies an attribute pre-associated with the box; a construction unit that constructs a database by storing in the database a combination of the attribute value, the attribute, and the drawing data identified by the construction attribute identification unit;
- a drawing database construction device including (9) Identify the types of title blocks that exist in the target drawing data, Based on the identified title block type, identifying the arrangement of a plurality of boxes present
- a drawing retrieval apparatus including at least one processing circuitry configured to: (10) The processing circuit corrects the character recognition result based on preset correction rules to generate a corrected character recognition result in which the character recognition result is corrected, and based on the corrected character recognition result, identifying the attribute value of interest;
- the drawing search device according to (9) above.
- the correction rule is preset for each user,
- the drawing search device according to (10) above.
- different correction rules are set in advance for each of a plurality of boxes present in the title block; For each of the plurality of boxes, the processing circuit converts the character recognition result of the character string existing in the box based on the correction rule preset for the box.
- the drawing search device according to (10) or (11) above.
- the processing circuit corrects the character recognition result based on, as the correction rule, dictionary data in which character strings representing erroneous character recognition results are associated with correct character strings representing attribute values of drawing data. generating a modified character recognition result in which the character recognition result is modified by The drawing retrieval device according to any one of (10) to (12) above.
- the processing circuit further performs character recognition processing on each character string existing in a location different from the title block of the target drawing data, Identifying the target attribute value based on a character recognition result of a character string existing in a location different from the title block; The drawing retrieval device according to any one of (9) to (13) above.
- the processing circuit is If the target attribute value is not specified based on the result of character recognition in the title block, character recognition processing is performed for each character string existing in a location different from the title block of the target drawing data. death, Identifying the target attribute value based on a character recognition result of a character string existing in a location different from the title block; The drawing retrieval device according to any one of (9) to (14) above.
- drawing database construction apparatus including at least one processing circuitry configured to: (17) Identify the types of title blocks that exist in the target drawing data, Based on the identified title block type, identifying the arrangement of a plurality of boxes present in the title block; performing character recognition processing on each of the character strings present in each location in the title block present in the target drawing data; A target attribute value representing the attribute value of the target drawing data represented by the character string in the box is specified based on the character recognition result and the specified arrangement of the plurality of boxes, and the target attribute value is previously associated with the box.
- the attribute value of the target drawing data is retrieved from a database in which the drawing data, the attribute value of the drawing data, and the attribute corresponding to the attribute value are associated with each other. search for drawing data with attribute values similar to and output the search results; A drawing retrieval method in which the processing is performed by a computer.
- a drawing retrieval system including a plurality of user terminals and the drawing retrieval device according to any one of (1) to (7) above, any one of the plurality of user terminals transmits instruction data indicating that the target drawing data has been selected to the drawing search device;
- the drawing search device receives the instruction data transmitted from the user terminal, searches for drawing data having an attribute value similar to that of the target drawing data corresponding to the instruction data, and outputs the search result to the Send to the user terminal,
- the user terminal causes the display unit to display the search results, Drawing search system.
- a recording medium (computer program product), which is a program executed by a computer and recorded with the program according to (18) above.
- drawing search system 10
- administrator terminal 14
- drawing database construction server 16
- drawing search server 18
- user terminal 20
- construction reception unit 22
- title block database 24
- construction title block identification unit 26
- construction layout identification unit 28
- construction recognition unit 30
- construction Attribute identification unit 32
- Construction unit 34 drawing database 40
- reception unit 42
- title block database 44
- title block identification unit 46
- correction rule storage unit 50
- attribute identification unit 52 search unit 54 drawing database 70 computer 73 storage unit
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Library & Information Science (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Processing Or Creating Images (AREA)
Abstract
図面検索サーバ16は、対象図面データ内に存在する表題欄表題欄内に存在する複数のボックスの配置を特定する。図面検索サーバ16は、対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する。図面検索サーバ16は、文字認識結果と複数のボックスの配置とに基づいて、対象図面データの属性値を表す対象属性値を特定すると共に、ボックスに予め対応付けられた属性である対象属性を特定する。図面検索サーバ16は、対象属性値と対象属性との組み合わせに基づいて、図面データベース34から、対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する。
Description
本発明は、図面検索装置、図面データベース構築装置、図面検索システム、図面検索方法、及び記録媒体に関する。
従来、表題エリアだけを対象に図面の全文検索を可能とする図面管理サーバが知られている(例えば、特許文献1)。この図面管理サーバは、図面の登録時に、図面検索インデックスに登録された文字列のうち、予め決められた文字列からなる表題項目の位置座標を取得し、表題エリアを決定する。そして、図面管理サーバは、表題項目の位置座標を表題データとして登録しておき、利用者端末からの図面検索要求に応じて、表題データから表題エリアの位置座標を取得する。図面管理サーバは、図面検索要求に含まれる検索キーワードを用いて、図面検索インデックスを検索し、該当する検索キーワード及びその位置座標を取得し、これら検索結果を用いて、表題エリア内に検索キーワードが含まれる図面を検索する。
また、図面データから表題情報を電子的に取り込み、これをデータベース化することにより、総合版数リストの自動生成を可能とし、以てリアルタイム性の確保と信頼性の向上を共に達成するコンピュータ・エイデット・デザイン装置が知られている(例えば、特許文献2)。このコンピュータ・エイデット・デザイン装置は、画面上の特定領域に表示される少なくとも図面名称、図番及び版数の各情報を取り込む。そして、コンピュータ・エイデット・デザイン装置は、取り込まれた各情報を製品毎に分類して蓄積する。コンピュータ・エイデット・デザイン装置は、蓄積された情報から一つの製品に関連する情報を読み出し、所定のフォーマットで画面またはハードコピーに出力する。
また、CAD図面データから属性情報を自動的に抽出し、その属性情報を部品表へ自動的に登録処理する図面設計システムが知られている(例えば、特許文献3)。この図面設計システムは、機器の部品のCAD図面中に存在するCADシステムの特定要素の検索を行い、その特定要素で構成されたその部品の情報を、属性情報としてCAD図面から抽出する。部品表システムは、部品表に対する属性情報の整合性の検査を行う。そして、属性情報が整合性を有する場合、部品表に属性情報を登録する。
また、キーワード抽出・登録を含む事前のセットアップ作業を簡略化して、短期間でのマルチ・ドキュメント・システムの立ち上げを可能にするデータ処理装置が知られている(例えば、特許文献4)。このデータ処理装置は、ドキュメントファイルから読み出したファイルの拡張子からファイルの種類を判定し、ファイルの種類が図面の場合は、表題欄を含む範囲からキーワードを抽出し、帳票の場合は、帳票の項目行、項目列からキーワードを抽出し、文書の場合は、文書の先頭から所定文字数の文字列からキーワードを抽出する。
また、図面管理のための、図面の表題欄に記述される複数の管理項目を表示装置上に表示された画像データより、直接文字コード形式に変換して文字コードの属性ファイル管理データを作成する図形処理方法が知られている(例えば、特許文献5)。この図形処理方法は、画像データとして入力された画面の表題欄に記述される複数の管理項目を持つ図面を、表示した図面上の座標で前記管理項目の欄をマウス装置で指定して、その欄に記載されている画像データを、文字に変換して文字コードの属性のファイル管理データを作成する。
また、デジタル形式の製図図面を管理する効率的で、高速な方法を提供し、データベースに手動で入力する必要性なしに図面を自動的に識別し索引付けし容易かつ高速検索用に記憶するシステムが知られている(例えば、特許文献6)。このシステムは、デジタル形式のデータを一連のアルゴリズムに従って中央処理装置により解析して各製図図面を識別する。システムは、図面を識別すると、図面フレームの各々のテキストボックス中の情報が一連の所定のアルゴリズムに従って処理され、テキストボックス中の情報を識別し分類する。この情報は、指定の基準およびその分類に従ってデータベースで照合され、ユーザが特定の図面を発見し検索可能とする。
上記特許文献1~6に開示されているように、図面データ中には表題欄が設けられていることが多い。この表題欄には、図面の属性を表す属性値が存在することが多い。例えば、図面データ内の表題欄内には、「材質」の属性を表す属性値である「ベークライト」という表記が存在する場合がある。
しかし、図面データの表題欄は様々であり、属性とその属性に対応する属性値とを精度良く特定することができない場合がある。一般に表題欄の構造や記載情報は図面の作成業者によってさまざまであり、業界の統一標準が存在しない。そのため、図面には多種多様な表題欄のものが存在する。
上記特許文献1~6に開示されている技術では、様々な種類の表題欄が存在している点については考慮されていない。
例えば、特許文献6の段落[0011]には「ボックスの内容をさらに解析してボックスがボックスの題名と内容の説明のような2つの異なる型式の内容を含んでいるかどうかを調べる。このようなボックスを見出して、これが適切な図面ボックスであることが決定されると、ボックスの内容が構造化データベースに分類され記憶されて図面を検索可能とする。」との開示がある。しかし、表題欄の図面ボックスの種類は様々であるため、特許文献6の技術では、全てのボックスに関して「ボックスの題名と内容の説明のような2つの異なる型式の内容」を特定するのは難しい。
本発明は上記事実を考慮して、対象図面データの表題欄の種類を特定しない場合に比べ、対象図面データの属性と属性値との組み合わせを精度良く特定し、対象図面データと類似する図面データを精度良く検索することを目的とする。
上記の目的を達成するために本発明の第1態様は、対象図面データ内に存在する表題欄の種類を特定し、特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する。
また、本発明の第2態様は、データベース構築用の図面データ内に存在する表題欄の種類を特定し、特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定し、特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する。
以下、図面を参照して実施形態を詳細に説明する。
<図面検索システムのシステム構成>
図1は、本実施形態の図面検索システム10を示すブロック図である。図1に示されるように、本実施形態の図面検索システム10は、管理者端末12と、図面データベース構築サーバ14と、図面検索サーバ16と、複数のユーザ端末18A,18B,18Cとを備えている。なお、以下では、特定の端末を指し示す場合以外は、1つのユーザ端末をユーザ端末18と称する。管理者端末12と、図面データベース構築サーバ14と、図面検索サーバ16と、ユーザ端末18とは、例えばインターネット等のネットワーク19によって通信可能に接続されている。
本実施形態の図面検索システム10は、図面データ内に存在する表題欄の種類に基づいて表題欄内に存在するボックス内の文字列が表す図面データの属性値を特定し、特定された属性値と類似する属性値を有する図面データを検索する。
図2に、図面データの一例を示す。なお、本実施形態が対象とする図面データは、例えば、紙の図面をスキャンすることにより生成されたPDF(Portable Document Format)形式のデータである。図2の図面データには、金属加工品が図示されている。図2の図面データのうちの表題欄Tには、様々な情報が記載されている。例えば、図2に示される例では、金属加工対象の部品の材質を表す情報T1、金属加工品の表面仕様に関する情報T2、及び図面番号T3等が記載されている。これらの情報は、図面データを検索する際に有用な情報となる。
そこで、本実施形態の図面検索システム10は、図面データ内に存在する表題欄の種類を特定し、その表題欄の種類に基づいて表題欄内に存在する図面データの属性値を特定し、特定された属性値と類似する属性値を有する図面データを検索する。これにより、ある図面データと類似する図面データを精度良く検索することができる。
以下、具体的に説明する。
(管理者端末12)
管理者端末12は、図面検索サーバ16及び図面データベース構築サーバ14を管理する管理ユーザが操作する端末である。具体的には、管理ユーザは、管理者端末12を操作することにより、図面検索サーバ16及び図面データベース構築サーバ14との間において情報のやり取りをする。
管理者端末12は、図面検索サーバ16及び図面データベース構築サーバ14を管理する管理ユーザが操作する端末である。具体的には、管理ユーザは、管理者端末12を操作することにより、図面検索サーバ16及び図面データベース構築サーバ14との間において情報のやり取りをする。
(図面データベース構築サーバ14)
図面データベース構築サーバ14は、複数の図面データが格納されたデータベースを構築するためのサーバである。図面データベース構築サーバ14は、図1に示されるように、構築用受付部20と、表題欄データベース22と、構築用表題欄特定部24と、構築用配置特定部26と、構築用認識部28と、構築用属性特定部30と、構築部32と、表題欄データベース22と、図面データベース34とを備えている。
図面データベース構築サーバ14は、複数の図面データが格納されたデータベースを構築するためのサーバである。図面データベース構築サーバ14は、図1に示されるように、構築用受付部20と、表題欄データベース22と、構築用表題欄特定部24と、構築用配置特定部26と、構築用認識部28と、構築用属性特定部30と、構築部32と、表題欄データベース22と、図面データベース34とを備えている。
表題欄データベース22には、複数種類の表題欄のデータが格納されている。表題欄データベース22は、表題欄ライブラリとして機能する。表題欄データベース22の詳細については後述する。
図面データベース34には、図面データと当該図面データの属性と当該図面データの属性値とが対応付けられて格納されている。図面データベース34の詳細については後述する。
(図面検索サーバ16)
図面検索サーバ16は、複数の図面データが格納されたデータベースから対象図面データと類似する図面データを検索するためのサーバである。図1に示されるように、受付部40と、表題欄データベース42と、表題欄特定部44と、配置特定部46と、認識部48と、修正ルール記憶部49と、属性特定部50と、検索部52と、図面データベース54とを備えている。
図面検索サーバ16は、複数の図面データが格納されたデータベースから対象図面データと類似する図面データを検索するためのサーバである。図1に示されるように、受付部40と、表題欄データベース42と、表題欄特定部44と、配置特定部46と、認識部48と、修正ルール記憶部49と、属性特定部50と、検索部52と、図面データベース54とを備えている。
表題欄データベース42には、表題欄データベース22と同様のデータが格納されている。また、図面データベース54には、図面データベース34と同様のデータが格納されている。
(ユーザ端末18)
ユーザ端末18は、ユーザが操作する端末である。具体的には、ユーザは、ユーザ端末18を操作することにより、図面検索サーバ16との間において情報のやり取りをする。
ユーザ端末18は、ユーザが操作する端末である。具体的には、ユーザは、ユーザ端末18を操作することにより、図面検索サーバ16との間において情報のやり取りをする。
図面検索システム10の管理者端末12、図面データベース構築サーバ14、図面検索サーバ16、及びユーザ端末18の各々は、例えば、図3に示すコンピュータ70で実現することができる。コンピュータ70はCPU71、一時記憶領域としてのメモリ72、及び不揮発性の記憶部73を備える。また、コンピュータ70は、入出力装置等(図示省略)が接続される入出力interface(I/F)74、及び記録媒体に対するデータの読み込み及び書き込みを制御するread/write(R/W)部75を備える。また、コンピュータ70は、インターネット等のネットワークに接続されるネットワークI/F76を備える。CPU71、メモリ72、記憶部73、入出力I/F74、R/W部75、及びネットワークI/F76は、バス77を介して互いに接続される。
記憶部73は、Hard Disk Drive(HDD)、Solid State Drive(SSD)、フラッシュメモリ等によって実現できる。記録媒体としての記憶部73には、コンピュータ70を機能させるためのプログラムが記憶されている。CPU71は、プログラムを記憶部73から読み出してメモリ72に展開し、プログラムが有するプロセスを順次実行する。ここで、実施形態に係るCPU71は、プログラムを記憶部73から読み出してメモリ72に展開し、プログラムが有するプロセスを順次実行する少なくとも一つの処理回路の一例である。当該少なくとも一つの処理回路としては、CPU71に限らず、任意のプロセッサを用いてもよい。図面データベース構築サーバ14において当該少なくとも一つの処理回路は、記憶部73から読み出してメモリ72にロードしたプログラムを実行することにより、構築用受付部20、表題欄データベース22、構築用表題欄特定部24、構築用配置特定部26、構築用認識部28、構築用属性特定部30、構築部32、表題欄データベース22及び図面データベース34としての機能を実現する。図面検索サーバ16において当該少なくとも一つの処理回路は、記憶部73から読み出してメモリ72にロードしたプログラムを実行することにより、受付部40、表題欄データベース42、表題欄特定部44、配置特定部46、認識部48、修正ルール記憶部49、属性特定部50、検索部52及び図面データベース54としての機能を実現する。
<図面検索システム10の作用>
次に、本実施形態の図面検索システム10の作用について説明する。まず、管理ユーザが管理者端末12を操作して、複数の図面データが格納されたデータベースを構築する場面について説明する。
管理ユーザは、管理者端末12を操作して、データベース構築用の複数の図面データを図面データベース構築サーバ14へ入力する。すると、図面データベース構築サーバ14は、図4に示す処理ルーチンを実行する。
ステップS100において、構築用受付部20は、データベース構築用の複数の図面データを受け付ける。
ステップS102において、構築用表題欄特定部24は、ステップS100で受け付けた複数の図面データのうち1つの図面データを設定する。
ステップS104において、構築用表題欄特定部24は、ステップS102で設定された図面データ内に存在する表題欄の種類を特定する。
図5に、表題欄の一例を示す。図5に示されている表題欄TAの構造と表題欄TBの構造とは異なるものとなっている。ここで、図面データの表題欄から有用な情報を取り出すためには、その表題欄の種類を特定すると共に、その種類の表題欄内に存在する複数のボックスの各々にはどのような情報が格納されているのかを特定する必要がある。
そこで、本実施形態の図面データベース構築サーバ14は、複数種類の表題欄に関する情報が格納されている表題欄データベース22を用いて、表題欄の種類を特定すると共に、その種類の表題欄の各ボックスにどのような情報が格納されているのかを特定した上で、表題欄の各ボックスに格納されている文字列の情報を取得する。
表題欄データベース22には、例えば、図6に示されるようなテーブルが格納されている。図6に示される例では、表題欄IDと、会社名と、当該会社が利用している表題欄を構成している罫線の構造情報と、表題欄の各ボックスにどのような属性と属性値とが格納されているのか表すボックス属性対応付け情報とが対応付けられている。
表題欄を構成している罫線の構造情報は、例えば、図7に示されるような表題欄の構造TSを表すデータである。また、表題欄の各ボックスにどのような属性と属性値とが格納されているのか表すボックス属性対応付け情報としては、例えば、図8A~図8Cに示されるような情報である。図8A~図8Cに示されるように、ボックス属性対応付け情報は、表題欄の各ボックスにどのような属性と属性値とが格納されているのかが予め特定されている。例えば、ボックス属性対応付け情報は、表題欄の1Aのボックスには図面番号の属性が格納されており、1Bのボックスには実際の図面番号の属性値が格納されているといった情報である。なお、罫線の構造情報と、表題欄の各ボックスにどのような属性と属性値とが格納されているのか表すボックス属性対応付け情報とについては、その相対的な位置関係が予め紐付けられていれば良い。このため、例えば、ボックス属性対応付け情報は、図8Bに示されるように、表題欄の2Aのボックスには品名の属性が格納されており、表題欄の2Aの下のボックスには、品名の属性値として2B-1と2B-2の2つの属性値が格納されているといった情報であっても良い。この場合には、例えば、2B-1の箇所には機種名の属性値が格納され、2B-2の箇所には機種名のバリエーション種の属性値が格納されるようなこともある。また、例えば、1つの図面に複数の部品が描かれている場合、表題欄が拡張される場合がある。この場合には、ボックス属性対応付け情報は、例えば図8Cに示されるように、表題欄の3Aのボックスの上に位置する3Xの箇所には図面に描かれているある部品名の属性値が記載され、表題欄の4Aの上に位置する4Xの箇所には図面に描かれている別の部品名の属性値が記載されているといった情報となる。なお、図8Cに示されるように、本実施形態では、テキストを読み取るエリアは表題欄の内部に束縛されずに設定することができる。このため、例えば、表題欄との間の相対的な位置関係が所定関係である表題欄外のエリアに存在するテキストを読み取ることも可能である。
このため、ステップS104において、構築用表題欄特定部24は、ステップS102で設定された図面データの表題欄が、表題欄データベース22に格納されている複数種類の表題欄のうち何れの種類に該当するのかを特定する。
例えば、構築用表題欄特定部24は、ステップS102で設定された図面データの表題欄の罫線と、表題欄データベース22に格納されている複数種類の表題欄の各々についての罫線とを重ね合わせることにより、罫線の一致度合いを計算する。そして、構築用表題欄特定部24は、一致度の計算結果に基づいて、ステップS102で設定された図面データの表題欄の種類は、一致度が最も高い表題欄の種類であると特定する。
ステップS106において、構築用配置特定部26は、ステップS104で特定された表題欄の種類に基づいて、表題欄内に存在する複数のボックスの配置を特定する。
ステップS108において、構築用認識部28は、ステップS102で設定された図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する。例えば、構築用認識部28は、既知のOCR(Optical Character Reader)を用いて、文字認識処理を実行する。
ステップS110において、構築用属性特定部30は、ステップS108で得られた文字認識結果と、ステップS106で特定された複数のボックスの配置とに基づいて、ボックス内の文字列が表す図面データの属性値を特定すると共に、ボックスに予め対応付けられた属性を特定する。
上述したように、ボックス属性対応付け情報が、図6に示されるようなテーブルに格納されている。このため、構築用属性特定部30は、ステップS110において、図6に示されるようなテーブルのボックス属性対応付け情報を参照し、ステップS102で設定された図面データの属性値と属性とを特定する。例えば、構築用属性特定部30は、図6に示されるような情報を参照し、ステップS102で設定された図面データの表題欄の属性「品名」とその属性値「寄せガイド」とを特定する。
ステップS112において、構築用属性特定部30は、ステップS102で設定された図面データと、ステップS110で特定された属性値との組み合わせを、図面データベース34へ格納する。なお、例えば、図8Dに示されているような、一般公差の欄Vに格納されているような情報は、図面データベース34へは格納しない。一般公差の欄Vに格納されているような情報は、どのような表題欄にも付加されているため、後述する図面データの検索には役立たない可能性が高いためである。
図面データベース34には、例えば、図9に示されるようなテーブルが格納されている。図9に示される例では、図面IDと、図面データと、その属性とが対応付けられている。例えば、属性「品名」にはその属性値である「寄せガイド」が対応付けられて格納される。なお、実際に認識された文字列「部品名」と属性「品名」とを対応付けるテーブルが別途予め用意されていてもよい。
ステップS114において、構築用属性特定部30は、ステップS100で受け付けた全ての図面データについて、ステップS102~ステップS112の処理が実行されたか否かを判定する。ステップS100で受け付けた全ての図面データについて、ステップS102~ステップS112の処理が実行された場合には、本処理ルーチンが終了する。一方、ステップS102~ステップS112の処理が実行されていない図面データが存在する場合には、ステップS102へ戻る。
図4のデータベース構築処理ルーチンが実行されることにより、複数の図面データの各々についての属性と属性値との組み合わせが図面データベース34に格納されたことになる。
なお、図面データベース構築サーバ14の図面データベース34に格納されたデータは、図面検索サーバ16の図面データベース54へも格納される。また、図面データベース構築サーバ14の表題欄データベース22に格納されたデータは、図面検索サーバ16の表題欄データベース42へも格納される。
次に、ユーザが自身のユーザ端末18を操作して、対象図面データと類似する図面データを検索する場面について説明する。
ユーザは、自らのユーザ端末18を操作して、対象図面データを図面検索サーバ16へ入力する。例えば、ユーザ端末18のディスプレイ(図示省略)には、図10に示されるような画面が表示され、ユーザの操作に応じて対象図面データがドラッグアンドドロップされると、ユーザ端末18は、対象図面データが選択されたことを表す指示データを図面検索サーバ16へ送信する。図面検索サーバ16は、その対象図面データの受信に応答して、図11に示す図面検索ルーチンを実行する。
ステップS200において、受付部40は、対象図面データを受け付ける。
ステップS202において、表題欄特定部44は、表題欄データベース42に格納されたデータを参照し、ステップS200で受け付けた対象図面データ内に存在する表題欄の種類を特定する。具体的には、表題欄特定部44は、構築用表題欄特定部24と同様の手法によって、対象図面データ内に存在する表題欄の種類を特定する。
ステップS204において、配置特定部46は、表題欄データベース42に格納されたデータを参照し、上記ステップS202で特定された表題欄の種類に基づいて、表題欄内に存在する複数のボックスの配置を特定する。具体的には、配置特定部46は、構築用配置特定部26と同様の手法によって、表題欄内に存在する複数のボックスの配置を特定する。
ステップS206において、認識部48は、対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する。
ステップS208において、属性特定部50は、修正ルール記憶部49に格納された修正ルール又は辞書データに基づいて、ステップS206で得られた文字認識結果を修正することにより、文字認識結果が修正された修正文字認識結果を生成する。
図12に、修正ルール記憶部49に格納されている修正ルール及び辞書データの一例を示す。図12に示されるように、複数の修正ルールRが修正ルール記憶部49に格納されている。
例えば、表題欄内に存在する複数のボックスの各々に対し、異なる修正ルールが予め設定されている。例えば、文字認識結果において「属性「図面番号」に対応する属性値のボックスにおいて「O(オー)」が検出された場合には「0(ゼロ)」へと置換する」といった修正ルールが予め設定されている。なお、この修正ルールは、ユーザ毎に予め設定されていてもよい。例えば、ある会社が利用している表題欄の「図面番号」の欄には、アルファベットが出現することがないため、仮に「O(オー)」が検出された場合には「0(ゼロ)」へと置換するといった修正ルールが設定される。
また、図12に示されるように、辞書データDは、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられたデータである。例えば、図12に示されるように、「SOS304」「SuS304」といった誤った文字認識結果に対して、図面データの属性値を表す正解の文字列「SUS304」が対応付けられている。
このため、属性特定部50は、表題欄の複数のボックスの各々について、当該ボックスに存在する文字列の文字認識結果に対して、ボックスに対して予め設定された修正ルールに基づいて、文字認識結果を修正する。
また、属性特定部50は、修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、文字認識結果を修正することにより、文字認識結果が修正された修正文字認識結果を生成する。
ステップS210において、属性特定部50は、ステップS208で得られた修正文字認識結果と、ステップS204で特定された複数のボックスの配置とに基づいて、ボックス内の文字列が表す対象図面データの属性値を表す対象属性値を特定すると共に、ボックスに予め対応付けられた属性である対象属性を特定する。具体的には、属性特定部50は、構築用属性特定部30と同様の手法によって、対象属性値と対象属性とを特定する。
ステップS212において、検索部52は、ステップS210により特定された対象属性値と対象属性との組み合わせに基づいて、図面データベース34から、対象図面データの属性値と類似する属性値を有する図面データを検索する。
ステップS214において、検索部52は、対象図面データの属性値と類似する属性値を有する図面データの検索結果を出力することにより、本処理ルーチンが終了する。
なお、検索部52から出力された検索結果は、ユーザ端末18へ送信される。ユーザは、自身のユーザ端末18の表示部(図示省略)へ表示された検索結果を確認する。
以上説明したように、本実施形態に係る図面検索サーバは、対象図面データ内に存在する表題欄の種類を特定し、特定された表題欄の種類に基づいて、表題欄内に存在する複数のボックスの配置を特定する。そして、図面検索サーバは、対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する。図面検索サーバは、文字認識結果と、特定された複数のボックスの配置とに基づいて、ボックス内の文字列が表す対象図面データの属性値を表す対象属性値を特定すると共に、ボックスに予め対応付けられた属性である対象属性を特定する。図面検索サーバは、特定された対象属性値と対象属性との組み合わせに基づいて、図面データと図面データの属性値と属性値に対応する属性とが対応付けられた図面データベースから、対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する。これにより、表題欄の種類を特定しない場合に比べ、対象図面データの属性と属性値との組み合わせを精度良く特定し、対象図面データと類似する図面データを精度良く検索することができる。
さらに、本実施形態の図面検索サーバは、予め設定された修正ルールに基づいて、文字認識結果を修正することにより、対象図面データの対象属性値を特定する。例えば、修正ルールは、ユーザ毎に予め設定されている。また、例えば、表題欄内に存在する複数のボックスの各々に対し、異なる修正ルールが予め設定されており、図面検索サーバは、複数のボックスの各々について予め設定された修正ルールに基づいて、文字認識結果を修正する。また、例えば、図面検索サーバは、修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、文字認識結果を修正する。これにより、OCRによる文字認識結果が修正されるため、対象図面データの属性値を精度良く特定することができる。その結果、対象図面データと類似する図面データを精度良く検索することができる。また、図面データに付与される複数の属性値に基づいて目的とする図面データを検索することができる。
また、本実施形態に係る図面データベース構築サーバは、データベース構築用の図面データ内に存在する表題欄の種類を特定し、特定された表題欄の種類に基づいて、表題欄内に存在する複数のボックスの配置を特定する。図面データベース構築サーバは、図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する。そして、図面データベース構築サーバは、文字認識結果と、特定された複数のボックスの配置とに基づいて、ボックス内の文字列が表す前記図面データの属性値を特定すると共に、ボックスに予め対応付けられた属性を特定し、特定された属性値と属性と図面データとの組み合わせを図面データベースへ格納することにより、データベースを構築する。これにより、対象図面データと類似する図面データを精度良く検索するためのデータベースを自動的に構築することができる。
なお、本発明は、上述した実施形態に限定されるものではなく、この発明の要旨を逸脱しない範囲内で様々な変形や応用が可能である。
例えば、上記実施形態では、図面データベース構築サーバ14は、図面検索サーバ16のように修正文字認識結果を生成することなく、属性値と属性とを特定する場合を例に説明したが、これに限定されるものではない。図面データベース構築サーバ14も、図面検索サーバ16と同様に、修正ルール及び辞書データを利用して、修正文字認識結果を生成して属性値と属性とを特定するようにしてもよい。
また、上記実施形態では、表題欄の各ボックスに対して文字認識処理を実行する場合を例に説明したが、これに限定されるものではない。例えば、図面データベース構築サーバ14の構築用認識部28及び図面検索サーバ16の認識部48は、表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、属性値又は対象属性値を特定するようにしてもよい。図2に示される例では、表題欄Tとは異なる箇所にも図面データの属性値S1,S2,S3,S4が記載されている。このため、図面データベース構築サーバ14の構築用認識部28及び図面検索サーバ16の認識部48は、表題欄Tとは異なる箇所に存在している文字列に対して文字認識処理を実行することにより、その属性値と属性とを特定するようにしてもよい。なお、この際には、修正ルール及び辞書データを利用するようにしても良い。
さらに、図面データベース構築サーバ14の構築用認識部28及び図面検索サーバ16の認識部48は、表題欄内の文字認識結果に基づき属性値又は対象属性値が特定されなかった場合に、図面データ又は対象図面データの表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、構築用属性特定部30又は属性特定部50は、表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、属性値又は対象属性値と属性とを特定するようにしてもよい。なお、この際には、修正ルール及び辞書データを利用するようにしても良い。
また、上記実施形態では、表題欄データベース22に格納されている各種の表題欄の罫線と、図面データ又は対象図面データの表題欄の罫線との一致度合いに基づいて、表題欄の種類を特定する場合を例に説明したが、これに限定されるものではない。例えば、表題欄における特定箇所における文字列(例えば、会社名の欄の下欄に存在する会社名)に基づいて、表題欄の種類を特定するようにしてもよい。
また、文字認識結果からノイズと思われる文字を削除するようにする処理を修正ルールに加えてもよい。例えば、文字認識結果に「.」及び「|」等、ノイズである文字又は記号が含まれている場合には、それらを除去するようにしてもよい。
また、本願明細書中において、プログラムが予めインストールされている実施形態として説明したが、当該プログラムを、コンピュータ読み取り可能な記録媒体に格納して提供することも可能である。
上記実施形態では、サーバ側或いはクライアント側のコンピュータが1台のコンピュータによって実現されている場合を例示した。これに対し、ソフトウェアが複数台のコンピュータにインストールされて、当該複数台のコンピュータそれぞれが実施形態に係る構成要素の全て又は一部を備えるようにしてもよい。この場合、各コンピュータが互いに通信処理を実行する分散コンピューティングの形態であってもよい。また、クライアント側のコンピュータから送信された情報は、クラウド上に設けられたサーバ側としての1台又は複数台のコンピュータで処理される構成であってもよい。実施形態で示したサーバ側或いはクライアント側のコンピュータは、各構成要素を一つ備えているが、同じ構成要素を複数備えていてもよい。
また、本実施形態においてコンピュータが実行する各種演算は、少なくとも一つのプロセッサを用いて、又は、ネットワークを介した複数台のコンピュータを用いて、並列処理で実行することもできる。また、各種演算が、プロセッサ内に複数ある演算コアに振り分けられて、並列処理で実行されてもよい。また、サーバ側のコンピュータが実行する各種演算は、ネットワークを介してクライアント側のコンピュータと通信可能なクラウド上に設けられた少なくとも一つのプロセッサ及び少なくとも一つの記憶装置により実行されてもよい。
(付記)
以上の実施の形態の記載により、下記の技術が開示される。
(1)
対象図面データ内に存在する表題欄の種類を特定する表題欄特定部と、
前記表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する配置特定部と、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する認識部と、
前記認識部による文字認識結果と、前記配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定する属性特定部と、
前記属性特定部により特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する検索部と、
を含む図面検索装置。
(2)
前記属性特定部は、予め設定された修正ルールに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成し、前記修正文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)に記載の図面検索装置。
(3)
前記修正ルールは、ユーザ毎に予め設定されている、
上記(2)に記載の図面検索装置。
(4)
前記表題欄内に存在する複数のボックスの各々に対し、異なる前記修正ルールが予め設定されており、
前記属性特定部は、前記複数のボックスの各々について、前記ボックスに存在する文字列の前記文字認識結果に対して、前記ボックスに対して予め設定された前記修正ルールに基づいて、前記認識部による文字認識結果を修正する、
上記(2)又は上記(3)に記載の図面検索装置。
(5)
前記属性特定部は、前記修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成する、
上記(2)~上記(4)の何れかに記載の図面検索装置。
(6)
前記認識部は、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)~上記(5)の何れかに記載の図面検索装置。
(7)
前記認識部は、前記表題欄内の文字認識結果に基づき前記対象属性値が特定されなかった場合に、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、
前記属性特定部は、前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)~上記(6)の何れかに記載の図面検索装置。
(8)
データベース構築用の図面データ内に存在する表題欄の種類を特定する構築用表題欄特定部と、
前記構築用表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する構築用配置特定部と、
前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する構築用認識部と、
前記構築用認識部による文字認識結果と、前記構築用配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定する構築用属性特定部と、
前記構築用属性特定部により特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する構築部と、
を含む図面データベース構築装置。
(9)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
前記文字認識処理による文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
ように構成された少なくとも一つの処理回路(processing circuitry)を含む図面検索装置。
(10)
前記処理回路は、予め設定された修正ルールに基づいて、前記文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成し、前記修正文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)に記載の図面検索装置。
(11)
前記修正ルールは、ユーザ毎に予め設定されている、
上記(10)に記載の図面検索装置。
(12)
前記表題欄内に存在する複数のボックスの各々に対し、異なる前記修正ルールが予め設定されており、
前記処理回路は、前記複数のボックスの各々について、前記ボックスに存在する文字列の前記文字認識結果に対して、前記ボックスに対して予め設定された前記修正ルールに基づいて、前記文字認識結果を修正する、
上記(10)又は上記(11)に記載の図面検索装置。
(13)
前記処理回路は、前記修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、前記文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成する、
上記(10)~上記(12)の何れかに記載の図面検索装置。
(14)
前記処理回路は、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)~上記(13)の何れかに記載の図面検索装置。
(15)
前記処理回路は、
前記表題欄内の文字認識結果に基づき前記対象属性値が特定されなかった場合に、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)~上記(14)の何れかに記載の図面検索装置。
(16)
データベース構築用の図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
前記文字認識処理による文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定し、
特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する、
ように構成された少なくとも一つの処理回路(processing circuitry)を含む図面データベース構築装置。
(17)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータが実行する図面検索方法。
(18)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータに実行させるためのプログラム。
(19)
複数のユーザ端末と上記(1)~上記(7)の何れか1項に記載の図面検索装置とを含む図面検索システムであって、
複数のユーザ端末の何れか1つのユーザ端末は、前記対象図面データが選択されたことを表す指示データを前記図面検索装置へ送信し、
前記図面検索装置は、前記ユーザ端末から送信された前記指示データを受信し、前記指示データに対応する前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を前記ユーザ端末へ送信し、
前記ユーザ端末は、前記検索結果を表示部へ表示させる、
図面検索システム。
(20)
コンピュータにより実行されるプログラムであって、上記(18)に記載のプログラムが記録された記録媒体(computer program product)。
以上の実施の形態の記載により、下記の技術が開示される。
(1)
対象図面データ内に存在する表題欄の種類を特定する表題欄特定部と、
前記表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する配置特定部と、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する認識部と、
前記認識部による文字認識結果と、前記配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定する属性特定部と、
前記属性特定部により特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する検索部と、
を含む図面検索装置。
(2)
前記属性特定部は、予め設定された修正ルールに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成し、前記修正文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)に記載の図面検索装置。
(3)
前記修正ルールは、ユーザ毎に予め設定されている、
上記(2)に記載の図面検索装置。
(4)
前記表題欄内に存在する複数のボックスの各々に対し、異なる前記修正ルールが予め設定されており、
前記属性特定部は、前記複数のボックスの各々について、前記ボックスに存在する文字列の前記文字認識結果に対して、前記ボックスに対して予め設定された前記修正ルールに基づいて、前記認識部による文字認識結果を修正する、
上記(2)又は上記(3)に記載の図面検索装置。
(5)
前記属性特定部は、前記修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成する、
上記(2)~上記(4)の何れかに記載の図面検索装置。
(6)
前記認識部は、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)~上記(5)の何れかに記載の図面検索装置。
(7)
前記認識部は、前記表題欄内の文字認識結果に基づき前記対象属性値が特定されなかった場合に、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、
前記属性特定部は、前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(1)~上記(6)の何れかに記載の図面検索装置。
(8)
データベース構築用の図面データ内に存在する表題欄の種類を特定する構築用表題欄特定部と、
前記構築用表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する構築用配置特定部と、
前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する構築用認識部と、
前記構築用認識部による文字認識結果と、前記構築用配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定する構築用属性特定部と、
前記構築用属性特定部により特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する構築部と、
を含む図面データベース構築装置。
(9)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
前記文字認識処理による文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
ように構成された少なくとも一つの処理回路(processing circuitry)を含む図面検索装置。
(10)
前記処理回路は、予め設定された修正ルールに基づいて、前記文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成し、前記修正文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)に記載の図面検索装置。
(11)
前記修正ルールは、ユーザ毎に予め設定されている、
上記(10)に記載の図面検索装置。
(12)
前記表題欄内に存在する複数のボックスの各々に対し、異なる前記修正ルールが予め設定されており、
前記処理回路は、前記複数のボックスの各々について、前記ボックスに存在する文字列の前記文字認識結果に対して、前記ボックスに対して予め設定された前記修正ルールに基づいて、前記文字認識結果を修正する、
上記(10)又は上記(11)に記載の図面検索装置。
(13)
前記処理回路は、前記修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、前記文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成する、
上記(10)~上記(12)の何れかに記載の図面検索装置。
(14)
前記処理回路は、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)~上記(13)の何れかに記載の図面検索装置。
(15)
前記処理回路は、
前記表題欄内の文字認識結果に基づき前記対象属性値が特定されなかった場合に、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
上記(9)~上記(14)の何れかに記載の図面検索装置。
(16)
データベース構築用の図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
前記文字認識処理による文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定し、
特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する、
ように構成された少なくとも一つの処理回路(processing circuitry)を含む図面データベース構築装置。
(17)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータが実行する図面検索方法。
(18)
対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータに実行させるためのプログラム。
(19)
複数のユーザ端末と上記(1)~上記(7)の何れか1項に記載の図面検索装置とを含む図面検索システムであって、
複数のユーザ端末の何れか1つのユーザ端末は、前記対象図面データが選択されたことを表す指示データを前記図面検索装置へ送信し、
前記図面検索装置は、前記ユーザ端末から送信された前記指示データを受信し、前記指示データに対応する前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を前記ユーザ端末へ送信し、
前記ユーザ端末は、前記検索結果を表示部へ表示させる、
図面検索システム。
(20)
コンピュータにより実行されるプログラムであって、上記(18)に記載のプログラムが記録された記録媒体(computer program product)。
10 図面検索システム
12 管理者端末
14 図面データベース構築サーバ
16 図面検索サーバ
18 ユーザ端末
20 構築用受付部
22 表題欄データベース
24 構築用表題欄特定部
26 構築用配置特定部
28 構築用認識部
30 構築用属性特定部
32 構築部
34 図面データベース
40 受付部
42 表題欄データベース
44 表題欄特定部
46 配置特定部
48 認識部
49 修正ルール記憶部
50 属性特定部
52 検索部
54 図面データベース
70 コンピュータ
73 記憶部
12 管理者端末
14 図面データベース構築サーバ
16 図面検索サーバ
18 ユーザ端末
20 構築用受付部
22 表題欄データベース
24 構築用表題欄特定部
26 構築用配置特定部
28 構築用認識部
30 構築用属性特定部
32 構築部
34 図面データベース
40 受付部
42 表題欄データベース
44 表題欄特定部
46 配置特定部
48 認識部
49 修正ルール記憶部
50 属性特定部
52 検索部
54 図面データベース
70 コンピュータ
73 記憶部
Claims (11)
- 対象図面データ内に存在する表題欄の種類を特定する表題欄特定部と、
前記表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する配置特定部と、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する認識部と、
前記認識部による文字認識結果と、前記配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定する属性特定部と、
前記属性特定部により特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する検索部と、
を含む図面検索装置。 - 前記属性特定部は、予め設定された修正ルールに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成し、前記修正文字認識結果に基づいて、前記対象属性値を特定する、
請求項1に記載の図面検索装置。 - 前記修正ルールは、ユーザ毎に予め設定されている、
請求項2に記載の図面検索装置。 - 前記表題欄内に存在する複数のボックスの各々に対し、異なる前記修正ルールが予め設定されており、
前記属性特定部は、前記複数のボックスの各々について、前記ボックスに存在する文字列の前記文字認識結果に対して、前記ボックスに対して予め設定された前記修正ルールに基づいて、前記認識部による文字認識結果を修正する、
請求項2又は請求項3に記載の図面検索装置。 - 前記属性特定部は、前記修正ルールとして、誤った文字認識結果を表す文字列と、図面データの属性値を表す正解の文字列とが対応付けられた辞書データに基づいて、前記認識部による文字認識結果を修正することにより、前記文字認識結果が修正された修正文字認識結果を生成する、
請求項2~請求項4の何れか1項に記載の図面検索装置。 - 前記認識部は、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を更に実行し、
前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
請求項1~請求項5の何れか1項に記載の図面検索装置。 - 前記認識部は、前記表題欄内の文字認識結果に基づき前記対象属性値が特定されなかった場合に、前記対象図面データの前記表題欄内とは異なる箇所に存在する文字列の各々に対して文字認識処理を実行し、
前記属性特定部は、前記表題欄内とは異なる箇所に存在する文字列の文字認識結果に基づいて、前記対象属性値を特定する、
請求項1~請求項6の何れか1項に記載の図面検索装置。 - データベース構築用の図面データ内に存在する表題欄の種類を特定する構築用表題欄特定部と、
前記構築用表題欄特定部により特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定する構築用配置特定部と、
前記図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行する構築用認識部と、
前記構築用認識部による文字認識結果と、前記構築用配置特定部により特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記図面データの属性値を特定すると共に、前記ボックスに予め対応付けられた属性を特定する構築用属性特定部と、
前記構築用属性特定部により特定された前記属性値と前記属性と前記図面データとの組み合わせをデータベースへ格納することにより、データベースを構築する構築部と、
を含む図面データベース構築装置。 - 対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータが実行する図面検索方法。 - 対象図面データ内に存在する表題欄の種類を特定し、
特定された前記表題欄の種類に基づいて、前記表題欄内に存在する複数のボックスの配置を特定し、
前記対象図面データ内に存在する表題欄内の各箇所に存在する文字列の各々に対して、文字認識処理を実行し、
文字認識結果と、特定された前記複数のボックスの配置とに基づいて、前記ボックス内の文字列が表す前記対象図面データの属性値を表す対象属性値を特定すると共に、前記ボックスに予め対応付けられた属性である対象属性を特定し、
特定された前記対象属性値と前記対象属性との組み合わせに基づいて、図面データと図面データの属性値と前記属性値に対応する属性とが対応付けられたデータベースから、前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を出力する、
処理をコンピュータに実行させるためのプログラムが記録された記録媒体。 - 複数のユーザ端末と請求項1~請求項7の何れか1項に記載の図面検索装置とを含む図面検索システムであって、
複数のユーザ端末の何れか1つのユーザ端末は、前記対象図面データが選択されたことを表す指示データを前記図面検索装置へ送信し、
前記図面検索装置は、前記ユーザ端末から送信された前記指示データを受信し、前記指示データに対応する前記対象図面データの属性値と類似する属性値を有する図面データを検索し、検索結果を前記ユーザ端末へ送信し、
前記ユーザ端末は、前記検索結果を表示部へ表示させる、
図面検索システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US18/757,288 US20240346068A1 (en) | 2022-01-05 | 2024-06-27 | Drawing search device, drawing database construction device, drawing search system, drawing search method, and recording medium |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022000659A JP7377565B2 (ja) | 2022-01-05 | 2022-01-05 | 図面検索装置、図面データベース構築装置、図面検索システム、図面検索方法、及びプログラム |
JP2022-000659 | 2022-01-05 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US18/757,288 Continuation US20240346068A1 (en) | 2022-01-05 | 2024-06-27 | Drawing search device, drawing database construction device, drawing search system, drawing search method, and recording medium |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2023132341A1 true WO2023132341A1 (ja) | 2023-07-13 |
Family
ID=87073704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2023/000063 WO2023132341A1 (ja) | 2022-01-05 | 2023-01-05 | 図面検索装置、図面データベース構築装置、図面検索システム、図面検索方法、及び記録媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240346068A1 (ja) |
JP (1) | JP7377565B2 (ja) |
WO (1) | WO2023132341A1 (ja) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05174080A (ja) | 1991-12-25 | 1993-07-13 | Matsushita Electric Ind Co Ltd | 図形処理方法 |
JPH08161373A (ja) | 1994-12-05 | 1996-06-21 | Fujitsu Ltd | コンピュータ・エイデット・デザイン装置 |
JP2000194712A (ja) | 1998-12-25 | 2000-07-14 | Fujitsu Ltd | デ―タ処理装置及び記録媒体 |
JP2001282810A (ja) | 2000-02-15 | 2001-10-12 | Vhsoft Technologies Co Ltd | 製図図面管理用コンピュータ自動化システム |
JP2003296377A (ja) | 2002-03-29 | 2003-10-17 | Honda Motor Co Ltd | 電子パーツリストシステム及び電子パーツリストの作成方法 |
JP2014092836A (ja) | 2012-11-01 | 2014-05-19 | Mitsubishi Electric Corp | 図面管理サーバ及びこれを用いた図面管理システム |
JP2014182477A (ja) * | 2013-03-18 | 2014-09-29 | Fuji Xerox Co Ltd | プログラム及び帳票処理装置 |
JP2016071898A (ja) * | 2014-09-30 | 2016-05-09 | メディア株式会社 | 帳票認識装置、帳票認識システム、帳票認識システムのプログラム、帳票認識システムの制御方法、帳票認識システムプログラムを搭載した記録媒体 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5995659A (en) * | 1997-09-09 | 1999-11-30 | Siemens Corporate Research, Inc. | Method of searching and extracting text information from drawings |
JP4181310B2 (ja) * | 2001-03-07 | 2008-11-12 | 昌和 鈴木 | 数式認識装置および数式認識方法 |
US20140365281A1 (en) * | 2004-06-01 | 2014-12-11 | Daniel William Onischuk | Computerized voting system |
JP5326859B2 (ja) * | 2009-06-24 | 2013-10-30 | 富士ゼロックス株式会社 | 画像処理装置 |
JP5866728B2 (ja) * | 2011-10-14 | 2016-02-17 | サイバーアイ・エンタテインメント株式会社 | 画像認識システムを備えた知識情報処理サーバシステム |
JP2021039494A (ja) * | 2019-09-02 | 2021-03-11 | 富士ゼロックス株式会社 | 情報処理装置及びプログラム |
-
2022
- 2022-01-05 JP JP2022000659A patent/JP7377565B2/ja active Active
-
2023
- 2023-01-05 WO PCT/JP2023/000063 patent/WO2023132341A1/ja active Application Filing
-
2024
- 2024-06-27 US US18/757,288 patent/US20240346068A1/en active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05174080A (ja) | 1991-12-25 | 1993-07-13 | Matsushita Electric Ind Co Ltd | 図形処理方法 |
JPH08161373A (ja) | 1994-12-05 | 1996-06-21 | Fujitsu Ltd | コンピュータ・エイデット・デザイン装置 |
JP2000194712A (ja) | 1998-12-25 | 2000-07-14 | Fujitsu Ltd | デ―タ処理装置及び記録媒体 |
JP2001282810A (ja) | 2000-02-15 | 2001-10-12 | Vhsoft Technologies Co Ltd | 製図図面管理用コンピュータ自動化システム |
JP2003296377A (ja) | 2002-03-29 | 2003-10-17 | Honda Motor Co Ltd | 電子パーツリストシステム及び電子パーツリストの作成方法 |
JP2014092836A (ja) | 2012-11-01 | 2014-05-19 | Mitsubishi Electric Corp | 図面管理サーバ及びこれを用いた図面管理システム |
JP2014182477A (ja) * | 2013-03-18 | 2014-09-29 | Fuji Xerox Co Ltd | プログラム及び帳票処理装置 |
JP2016071898A (ja) * | 2014-09-30 | 2016-05-09 | メディア株式会社 | 帳票認識装置、帳票認識システム、帳票認識システムのプログラム、帳票認識システムの制御方法、帳票認識システムプログラムを搭載した記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP7377565B2 (ja) | 2023-11-10 |
JP2023100170A (ja) | 2023-07-18 |
US20240346068A1 (en) | 2024-10-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8140468B2 (en) | Systems and methods to extract data automatically from a composite electronic document | |
US7669148B2 (en) | System and methods for portable device for mixed media system | |
US7672543B2 (en) | Triggering applications based on a captured text in a mixed media environment | |
US7991778B2 (en) | Triggering actions with captured input in a mixed media environment | |
US7551780B2 (en) | System and method for using individualized mixed document | |
US7812986B2 (en) | System and methods for use of voice mail and email in a mixed media environment | |
US7702673B2 (en) | System and methods for creation and use of a mixed media environment | |
US9171202B2 (en) | Data organization and access for mixed media document system | |
US7920759B2 (en) | Triggering applications for distributed action execution and use of mixed media recognition as a control input | |
US8195659B2 (en) | Integration and use of mixed media documents | |
CN101297319B (zh) | 在电子文档中嵌入热点 | |
US20070171473A1 (en) | Information processing apparatus, Information processing method, and computer program product | |
US20070047818A1 (en) | Embedding Hot Spots in Imaged Documents | |
US20060262962A1 (en) | Method And System For Position-Based Image Matching In A Mixed Media Environment | |
US20070050712A1 (en) | Visibly-Perceptible Hot Spots in Documents | |
US20070047002A1 (en) | Embedding Hot Spots in Electronic Documents | |
JPH11250071A (ja) | 画像データベースの構築方法および画像データベース装置並びに画像情報記憶媒体 | |
JP2018205910A (ja) | 計算機、文書識別方法、及びシステム | |
WO2020056977A1 (zh) | 知识点推送方法、装置及计算机可读存储介质 | |
EP3621010A1 (en) | System and method for generating a proposal based on a request for proposal (rfp) | |
CN105637509A (zh) | 在图像内搜索和注释 | |
JP5424798B2 (ja) | メタデータ設定方法及びメタデータ設定システム、並びにプログラム | |
US10614125B1 (en) | Modeling and extracting elements in semi-structured documents | |
US20120046937A1 (en) | Semantic classification of variable data campaign information | |
US20180137106A1 (en) | Data transformation system and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 23737292 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2023737292 Country of ref document: EP |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2023737292 Country of ref document: EP Effective date: 20240805 |