WO2024252486A1 - 物体管理装置 - Google Patents

物体管理装置 Download PDF

Info

Publication number
WO2024252486A1
WO2024252486A1 PCT/JP2023/020855 JP2023020855W WO2024252486A1 WO 2024252486 A1 WO2024252486 A1 WO 2024252486A1 JP 2023020855 W JP2023020855 W JP 2023020855W WO 2024252486 A1 WO2024252486 A1 WO 2024252486A1
Authority
WO
WIPO (PCT)
Prior art keywords
registration
image
registered
character recognition
recognition result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2023/020855
Other languages
English (en)
French (fr)
Inventor
譲史 上村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2025525462A priority Critical patent/JPWO2024252486A1/ja
Priority to PCT/JP2023/020855 priority patent/WO2024252486A1/ja
Publication of WO2024252486A1 publication Critical patent/WO2024252486A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Definitions

  • This disclosure relates to an object management device, an object management method, an object management system, and a recording medium.
  • a device has been proposed that acquires an image of an object, performs image matching with each of a number of registered images that have been registered in advance as a match image, and detects the registered image that matches the match image (for example, Patent Document 1).
  • the objective of this disclosure is to provide an object management device that solves the problem of the large amount of computation time required to find a registered image that matches a match image, which requires multiple image matchings.
  • an object management device includes: A first acquisition means for acquiring a registration image obtained by capturing an image of a surface of an object to be registered on which handwritten characters are written; a first character recognition means for outputting a registered character recognition result obtained by performing character recognition on the handwritten character in the registered image; a registration means for generating registration data including the registration image or registration object information, which is a feature amount extracted from the registration image, and the registration character recognition result, as data for determining the identity of the object to be registered;
  • the device is configured to include:
  • the device is configured to include:
  • the object management method includes: The computer A registration image is obtained by photographing a surface of an object to be registered on which handwritten characters are written; outputting a registration character recognition result obtained by performing character recognition on the handwritten character in the registration image; generating registration data including the registration image or registration object information, which is a feature amount extracted from the registration image, and the registration character recognition result, as data for determining the identity of the object to be registered; It is structured as follows.
  • Another object management method in the present disclosure includes: The computer A matching image is obtained by photographing a surface of an object to be matched on which handwritten characters are written; outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; extracting registration data including a registration character recognition result similar to the comparison character recognition result from a plurality of stored registration data including a registration image related to an object to be registered or registration object information which is a feature amount extracted from the registration image and a registration character recognition result; determining whether the object to be matched and the object to be registered are identical to each other by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information in the extracted registered data; It is structured as follows.
  • the computer-readable recording medium in the present disclosure includes: On the computer, A process of acquiring a registration image by capturing an image of a surface of an object to be registered on which handwritten characters are written; a process of outputting a registered character recognition result obtained by performing character recognition on the handwritten character in the registered image; A process of generating registration data including the registration image or registration object information, which is a feature amount extracted from the registration image, and the registration character recognition result, as data for determining the identity of the object to be registered;
  • the recording medium is configured to record a program for causing the recording medium to perform the above steps.
  • Another computer-readable recording medium in the present disclosure is On the computer, A process of acquiring a match image by capturing an image of a surface of an object to be matched on which handwritten characters are written; a process of outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; A process of extracting registration data including a registration character recognition result similar to the comparison character recognition result from a plurality of stored registration data including a registration image related to an object to be registered or registration object information which is a feature amount extracted from the registration image and a registration character recognition result; a process of determining an identity between the object to be matched and the object to be registered by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information in the extracted registered data;
  • the recording medium is configured to record a program for causing the recording medium to perform the above steps.
  • the object management system includes: An acquisition means for acquiring a registration image obtained by capturing an image of a surface of an object to be registered on which handwritten characters are written; a character recognition means for outputting a registered character recognition result obtained by performing character recognition on the handwritten character in the registered image; a registration means for generating registration data in which the registration image or registration object information, which is a feature amount extracted from the registration image, is associated with the registration character recognition result as data for determining the identity of the object to be registered;
  • the device is configured to include:
  • Another object management system in the present disclosure includes: An acquisition means for acquiring a match image by capturing an image of a surface of an object to be matched on which handwritten characters are written; a character recognition means for outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; an extraction means for extracting registration data including a registration character recognition result similar to the comparison character recognition result from a plurality of stored registration data including a registration image related to an object to be registered or registration object information which is a feature amount extracted from the registration image, and a registration character recognition result; a determination means for determining the identity of the object to be matched and the object to be registered by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information in the extracted registered data;
  • the device is configured to include:
  • the present disclosure can reduce the number of registered images that must be matched with a match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • FIG. 1 is a block diagram of a first object management system according to the present disclosure.
  • FIG. 2 is a block diagram showing an example of a configuration of a first mobile terminal according to the present disclosure.
  • FIG. 2 is a block diagram showing an example of a configuration of a first server according to the present disclosure.
  • FIG. 2 is a diagram showing an example of the contents of a registration data DB of a first server according to the present disclosure.
  • 11 is a flowchart showing an example of a procedure of a registration operation of the first object management system according to the present disclosure.
  • FIG. 1 is a diagram showing an example of a registered image including handwritten characters in a first object management system according to the present disclosure
  • 10 is a flowchart illustrating an example of a procedure of a matching operation of the first object management system according to the present disclosure
  • FIG. 2 is a block diagram showing an example of a configuration of a second mobile terminal according to the present disclosure.
  • FIG. 2 is a block diagram showing an example of a configuration of a second server according to the present disclosure.
  • 10 is a flowchart illustrating an example of a procedure of a registration operation of a second object management system according to the present disclosure.
  • 10 is a flowchart illustrating an example of a procedure of a matching operation of a second object management system according to the present disclosure.
  • FIG. 1 is a block diagram of a first object management device according to the present disclosure.
  • FIG. 11 is a block diagram of a second object management device according to the present disclosure.
  • FIG. 13 is a block diagram of a third object management system according to the present disclosure.
  • FIG. 13 is a block diagram of a fourth object management system according to the present disclosure.
  • Handwritten characters will look different visually if the character string is different, and the same character string can look different visually if the writer or writing implement is different. Therefore, an image obtained by photographing the surface of an object on which handwritten characters are written can serve as an identifier for identifying the individual object. Furthermore, if the surface of an object on which handwritten characters are written has surface features such as patterns or unevenness due to the material, the surface features are not necessarily the same for each object, and the relative positional relationship between the surface features and the handwritten characters is not necessarily the same for each object, so the image of the surface of an object on which handwritten characters are written can differ even more for each individual object. However, if only the image is used as an individual identifier, a large number of image matches would be required to detect a registered image that matches the match image.
  • the object management system uses a combination of an image obtained by photographing the surface of an object on which handwritten characters are written and the results of character recognition of the handwritten characters as data for determining the identity of the object.
  • the object management system When registering, the object management system generates registration data in a registration data DB (database) for each object to be registered, the registration data including a registration image obtained by photographing the surface of the object to be registered on which handwritten characters are written, or registration object information which is feature values extracted from the registration image, and the registration character recognition results obtained by character recognition of the handwritten characters in the registration image.
  • a registration data DB database
  • the registration data including a registration image obtained by photographing the surface of the object to be registered on which handwritten characters are written, or registration object information which is feature values extracted from the registration image, and the registration character recognition results obtained by character recognition of the handwritten characters in the registration image.
  • the object management system matches matching data including a matching image obtained by photographing the surface of the object to be matched on which handwritten characters are written, or matching object information which is a feature amount extracted from the matching image, and matching character recognition results obtained by character recognition of the handwritten characters in the matching image, with multiple registration data stored in the registration data DB.
  • the object management system first extracts registration data including registered character recognition results similar to the matching character recognition results in the matching data from the multiple registration data stored in the registration data DB.
  • the object management system determines the identity of the object to be matched and the object to be registered by performing a matching process using the matching object information in the matching data and the registered object information in the extracted registration data.
  • the object management system can reduce the number of registered images that must be compared with the match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • an object management system 1 is a system for managing individual objects 5, such as products, merchandise, or parcels, for purposes such as source indication, quality control, or distribution management.
  • the object management system 1 includes a mobile terminal 2 and a server 3.
  • the mobile terminal 2 and the server 3 are connected to each other so that they can communicate with each other via a network 4 such as the Internet.
  • a network 4 such as the Internet.
  • the mobile terminal 2 is a mobile terminal such as a smartphone, tablet terminal, or communication terminal used for registering and matching the managed object 5.
  • the server 3 is an information processing device such as a personal computer that works in conjunction with the mobile terminal 2 and is used for registering and matching the managed object 5.
  • the mobile terminal 2 is composed of a camera 21, a communication interface (I/F) unit 22, an operation input unit 23, a screen display unit 24, a memory unit 25, and a calculation processing unit 26.
  • I/F communication interface
  • the camera 21 is an imaging device that captures the object 5 to be managed.
  • the camera 21 is, for example, a visible light and color camera equipped with a CCD (Charge-Coupled Device) image sensor or a CMOS (Complementary MOS) image sensor with a pixel capacity of several million pixels.
  • the communication I/F unit 22 is composed of a data communication circuit and is configured to wirelessly communicate data with an external device such as the server 3.
  • the operation input unit 23 is composed of devices such as a keyboard and a mouse, and is configured to detect the operation of the operator and output it to the calculation processing unit 26.
  • the screen display unit 24 is composed of devices such as an LCD (Liquid Crystal Display), and is configured to display various information on the screen in response to instructions from the calculation processing unit 26.
  • the storage unit 25 is made up of storage devices such as a hard disk and memory, and is configured to store processing information and programs 251 required for various processes in the arithmetic processing unit 26.
  • the programs 251 are programs that are loaded into the arithmetic processing unit 26 and executed to realize various processing units, and are loaded in advance from an external device or recording medium (not shown) via a data input/output function such as the communication I/F unit 22 and stored in the storage unit 25.
  • the main processing information stored in the storage unit 25 includes a registered image 252, auxiliary information 258, character recognition result 253, registered data 254, match image 255, character recognition result 256, and judgment result 257.
  • the registered image 252 is an image generated from an image captured by the camera 21 of the surface of the object to be registered on which handwritten characters are written.
  • the attached information 258 is any information related to the object to be registered.
  • the attached information 258 may be, for example, the management number of the object to be registered, the registration date and time, information indicating the contents of the object, etc.
  • the character recognition result 253 is text resulting from character recognition of the handwritten characters in the registered image 252, and is also called the registered character recognition result.
  • the registered data 254 is data in which the registered object information, which is the registered image 252 or a feature amount extracted from the registered image, the character recognition result 253, and the attached information 258 are associated with each other.
  • the registered data 254 is registered in the registered data DB 352 provided in the server 3 as data for determining the identity of the object to be registered.
  • the match image 255 is an image generated from an image captured by the camera 21 of the surface of the object to be matched, on which handwritten characters are written.
  • the character recognition result 256 is text resulting from character recognition of the handwritten characters in the match image 255, and is also called the match character recognition result.
  • the determination result 257 is data indicating whether the object to be matched identified by the match image 255 is identical to any of the registered objects registered in the registration data DB 352.
  • the calculation processing unit 26 has a processor such as a CPU (Central Processing Unit) and its peripheral circuits, and is configured to read and execute a program 251 from the storage unit 25, thereby implementing various processing functions through cooperation between the above hardware and the program 251.
  • the main processing functions implemented by the calculation processing unit 26 are a registration means 261 and a matching means 262.
  • the registration means 261 is configured to generate registration data 254 for determining the identity of an object to be registered, and to request the server 3 to register the data.
  • the registration means 261 includes an acquisition unit 2611, a character recognition unit 2612, and a registration unit 2113.
  • the acquisition unit 2611 is configured to acquire an image obtained by photographing the surface of the object to be registered on which handwritten characters are written using the camera 21, cut out a partial image of a predetermined size including the handwritten characters from the acquired image, and store it in the storage unit 25 as a registered image 252.
  • the acquisition unit 2611 is also configured to acquire auxiliary information 258 related to the object to be registered from the operator of the mobile terminal 2 via the operation input unit 23 etc., and store it in the storage unit 25.
  • the character recognition unit 2612 is configured to read the registered image 252 from the storage unit 25, perform character recognition on the handwritten characters in this image, and store the character recognition result 253 in the storage unit 25.
  • the character recognition unit 2612 may be realized, for example, by an OCR (Optical Character Reader) application program.
  • the registration unit 2113 is configured to read out the registered image 252, the character recognition result 253, and the auxiliary information 258 from the storage unit 25.
  • the registration unit 2113 is also configured to generate registered object information, which is the read registered image 252 or a feature extracted from the registered image.
  • the feature may be any feature that can be used to determine the identity of an individual.
  • the registration unit 2113 may extract the feature by subjecting the registered image 252 to a frequency transformation, a polar coordinate transformation or a log-polar coordinate transformation, and a frequency transformation in that order.
  • An image obtained by subjecting an image to a frequency transformation such as a Fourier transform is called a frequency spectrum image.
  • a feature obtained by subjecting the frequency spectrum image to a polar coordinate transformation or a log-polar coordinate transformation is called a Fourier-Mellin feature.
  • a feature obtained by subjecting the Fourier-Mellin feature to a frequency transformation such as a Fourier transform is called a Fourier-Mellin frequency spectrum image.
  • This Fourier-Mellin frequency spectrum image is invariant to the magnification, rotation, and translation of the captured image.
  • the features extracted from the registered image 252 will be referred to as registered features.
  • the registration unit 2113 is also configured to display the read character recognition result 253 on the screen display unit 24, and to prompt the operator of the mobile terminal 2 to confirm or correct it.
  • this refers to the character recognition result after confirmation or correction by the operator.
  • confirmation or correction of the character recognition result 253 by the operator is not essential, and may be omitted. However, if the content of the character string to be handwritten is determined by a higher-level system rather than by the operator's judgment, it is desirable to correct it to the correct content.
  • the registration unit 2113 is also configured to create registration data 254 including the registration image 252 or the registration object information, which is the registration feature amount extracted from the registration image, the character recognition result 253, and the auxiliary information 258, and to store the data in the storage unit 25.
  • the registration unit 2113 is also configured to read the registration data 254 from the storage unit 25, and to transmit a registration request including the registration data 254 to the server 3 via the communication I/F unit 22.
  • the matching means 262 is configured to determine whether the object to be matched is the same as the object to be registered registered in the registration data DB 352 of the server 3.
  • the matching means 262 includes an acquisition unit 2621, a character recognition unit 2622, an extraction unit 2623, and a determination unit 2624.
  • the acquisition unit 2621 is configured to acquire an image obtained by photographing the surface of the object 5 to be matched, on which handwritten characters are written, with the camera 21, cut out a partial image of a predetermined size that includes the handwritten characters from the image, and store the image in the memory unit 25 as a match image 255.
  • the character recognition unit 2622 is configured to read the match image 255 from the storage unit 25, perform character recognition on the handwritten characters in the match image, and store the character recognition result 256 in the storage unit 25.
  • the extraction unit 2623 is configured to extract registration data including a registration character recognition result similar to the character recognition result 256 from among the multiple registration data registered in the registration data DB 352 of the server 3. For example, the extraction unit 2623 first transmits a registration data acquisition request to the server 3 through the communication I/F unit 22. In response to this acquisition request, the server 3 transmits all registration data stored in the registration data DB 352 to the mobile terminal 2. The extraction unit 2623 extracts registration data including a registration character recognition result similar to the character recognition result 256 from among the registration data received by the mobile terminal 2.
  • the extraction unit 2623 calculates the distance between the character recognition results (Levenshtein distance, Jaro-Winkler distance, etc.) and determines that the two are similar if the distance is within a threshold value, and determines that they are not similar if not.
  • the extraction unit 2623 transmits the extracted registration data to the determination unit 2624.
  • the determination unit 2624 is configured to read the match image 255 from the storage unit 25, and generate match object information which is the match image or features extracted from the match image.
  • the features extracted are the same as the registered features.
  • the features extracted from the match image 255 are referred to as match features.
  • the determination unit 2624 is also configured to determine the identity of the object to be matched and the object to be registered by a matching process using the match object information and the registered object information included in the registered data transmitted from the extraction unit 2623.
  • the determination unit 2624 determines the identity of the object to be matched and the object to be registered, for example, by the following method. First, the determination unit 2624 calculates the cross power spectrum between the matching features and each registered feature. Next, the determination unit 2624 performs an inverse frequency transform on each cross power spectrum to calculate a correlation value map. Next, the determination unit 2624 calculates a matching score representing the similarity between the matching image and each registered image from each correlation value map. Next, the determination unit 2624 determines the identity of the objects based on these matching scores.
  • the determination unit 2624 determines that the object related to the matching image is identical to the object related to the registered data including the registered image with the maximum matching score. Furthermore, if the maximum value of the matching score is not equal to or greater than a threshold, the determination unit 2624 determines that an object identical to the object related to the matching image is not registered.
  • the determination unit 2624 extracts the above-mentioned matching features and registered features from the matching image and the registered image, respectively, and then determines the identity of the object to be matched and the object to be registered by a method similar to that described above.
  • the determination unit 2624 determines the identity of the object to be matched and the object to be registered by template matching using a comparison of the shading between the matching image and the registered image.
  • the determination unit 2624 determines that the object to be matched is identical to any of the registered objects, it is configured to create a determination result 257 including ancillary information included in the registration data of the registered object determined to be identical, and to store it in the storage unit 25.
  • the determination unit 2624 determines that the object to be matched is not identical to any of the registered objects, it is configured to create a determination result 257 indicating that no identical registered object exists, and to store it in the storage unit 25.
  • the determination unit 2624 is configured to read out the determination result 257 from the storage unit 25, display it on the screen of the screen display unit 24, and/or transmit it to an external terminal via the communication I/F unit 22.
  • an example of the server 3 is composed of a camera 31, a communication I/F unit 32, an operation input unit 33, a screen display unit 34, a memory unit 35, and a calculation processing unit 36.
  • Camera 31 may be a camera with the same specifications as camera 21 of mobile terminal 2.
  • Communication I/F unit 32 is composed of a data communication circuit, and is configured to wirelessly communicate data with external devices such as mobile terminal 2.
  • Operation input unit 33 is composed of devices such as a keyboard and mouse, and is configured to detect operator operations and output them to calculation processing unit 36.
  • Screen display unit 34 is composed of devices such as an LCD, and is configured to display various information on the screen in response to instructions from calculation processing unit 36.
  • the storage unit 35 is made up of storage devices such as a hard disk and memory, and is configured to store processing information and programs 351 required for various processes in the arithmetic processing unit 36.
  • the programs 351 are programs that are loaded into the arithmetic processing unit 36 and executed to realize various processing units, and are loaded in advance from an external device or recording medium (not shown) via a data input/output function such as the communication I/F unit 32 and stored in the storage unit 35.
  • the main processing information stored in the storage unit 35 is a registration data DB 352.
  • the registration data DB 352 is configured to store one or more pieces of registration data.
  • FIG. 4 is a diagram showing an example of the contents of the registration data DB 352.
  • the registration data DB 352 is composed of multiple entries, with one piece of registration data stored in each entry.
  • An entry that stores registration data is composed of a registration number column, a registration object information column, a character recognition result column, and an additional information column.
  • the registration object information column, character recognition result column, and additional information column of the same entry store registration object information (registered image or registered feature amount), character recognition results, and additional information related to a certain object to be registered.
  • the registration number column stores a sequential number or the like that uniquely identifies the registration data.
  • the calculation processing unit 36 has a processor such as a CPU and its peripheral circuits, and is configured to read and execute a program 351 from the storage unit 35, thereby implementing various processing functions through cooperation between the above hardware and the program 351.
  • the main processing function implemented by the calculation processing unit 36 is the DB management means 361.
  • the DB management means 361 When the DB management means 361 receives a registration request from the mobile terminal 2 via the communication I/F unit 32, it reserves one free entry in the registration data DB 352 and stores the newly assigned registration number, the registered object information in the registration data included in the received registration request, the character recognition result, and the ancillary information in the registration number column, the registered object information column, the character recognition result column, and the ancillary information column of the free entry.
  • the DB management means 361 when the DB management means 361 receives an acquisition request from the mobile device 2 via the communication I/F unit 32, it is configured to read the registration data registered in each entry of the registration data DB 352 and transmit it to the mobile device 2 via the communication I/F unit 32.
  • the operation of the object management system 1 is broadly divided into a registration operation and a matching operation.
  • the registration operation is an operation of registering registration data relating to an object to be registered in the registration data DB 352.
  • the matching operation is an operation of matching the matching data of the object to be matched with the registration data of the object to be registered stored in the registration data DB 352.
  • FIG. 5 is a flow chart showing an example of the procedure of the registration operation.
  • the operator of the mobile terminal 2 handwrites characters on any surface of the object 5 to be registered using any writing implement (step S1).
  • the type of characters to be handwritten, the number of characters, and the direction are arbitrary.
  • the type of characters may be Japanese hiragana, katakana, kanji, or numbers, or a foreign language other than Japanese (English, Chinese, Korean, French, Spanish, etc.).
  • the number of characters may be one or more.
  • the arrangement of characters may be vertical or horizontal.
  • the writing implement may be a fountain pen, mechanical pencil, ballpoint pen, felt tip pen, magic marker, highlighter, black pencil, colored pencil, etc.
  • the material of the surface of the object 5 may be any material, such as cardboard, metal, glass, wood, or plastic.
  • the color of the surface of the object 5 may be any color, and may be a single color, a mixture of multiple colors, or a pattern may be formed.
  • a label with handwritten characters may be attached to the surface of the object 5.
  • the operator of the mobile terminal 2 operates the mobile terminal 2 to capture an image of the surface of the object 5 to be registered, including the handwritten characters, from approximately directly in front with the camera 21 (step S2).
  • the acquisition unit 2611 of the mobile terminal 2 cuts out a partial image including the handwritten characters from the image captured by the camera 21, and stores it in the storage unit 25 as a registered image 252.
  • Figure 6 shows an example of a registered image 252.
  • the registered image in this example shows a handwritten eight-digit number.
  • the character recognition unit 2612 of the mobile terminal 2 performs character recognition on the handwritten characters in the registered image 252, and displays the character recognition result 253 on the screen display unit 24 while saving it in the memory unit 25 (step S3).
  • the character recognition result 253 is "20220424”.
  • the operator of the mobile terminal 2 checks the displayed character recognition result and inputs OK if there is no problem, or the correct content if it is incorrect, from the operation input unit 23 (step S4).
  • the operator corrects it to "20220429”.
  • the character recognition unit 2612 rewrites the character recognition result 253 with the corrected content.
  • the operator of the mobile terminal 2 inputs the additional information from the operation input unit 23 (step S5).
  • the registration unit 2113 receives the input additional information 258 from the operation input unit 23 and stores it in the memory unit 25.
  • the registration unit 2113 generates registered object information which is the registered image 252 or a registered feature extracted from the image (step S6).
  • the registration unit 2113 creates registered data including the registered object information, the character recognition result 253, and the additional information 258 (step S7).
  • the registration unit 2113 transmits a registration request including the created registered data to the server 3 via the communication I/F unit 22 (step S8).
  • the DB management means 361 of the server 3 receives the registration data included in the registration request sent from the mobile terminal 2 (step S9). Next, the DB management means 361 adds a registration number to the registration data and stores it in the registration data DB 352 (step S10).
  • registration data relating to one registration target object has been registered in registration data DB 352.
  • An operator of the same mobile terminal 2 and operators of other mobile terminals 2 can register registration data relating to other registration target objects in registration data DB 352 in a similar manner as described above.
  • FIG. 7 is a flow chart showing an example of the procedure for the matching operation.
  • the operator of the portable terminal 2 operates the portable terminal 2 to capture an image of the surface of the object 5 to be matched, including handwritten characters, with the camera 111 (step S11).
  • the acquisition unit 2621 of the matching means 262 of the portable terminal 2 acquires the captured image from the camera 21, cuts out a partial image including the handwritten characters, and saves it in the memory unit 25 as a matching image 255. It is assumed that the saved matching image 255 is the same as the registered image shown in Figure 6.
  • the character recognition unit 2622 of the mobile device 2 performs character recognition on the handwritten characters in the match image 255, and stores the character recognition result 256 in the storage unit 25 (step S12).
  • the character recognition result 256 is "20220424.”
  • the extraction unit 2623 of the mobile device 2 acquires all of the registration data stored in the registration data DB 352 from the server 3 (step S13). Specifically, the extraction unit 2623 sends an acquisition request to the server 3 through the communication I/F unit 22.
  • the DB management means 361 of the server 3 receives this acquisition request through the communication I/F unit 32, it transmits a registration data group including all of the registration data stored in the registration data DB 352 to the mobile device 2 through the communication I/F unit 32.
  • the extraction unit 2623 of the mobile device 2 receives this through the communication I/F unit 22.
  • the extraction unit 2623 of the mobile device 2 extracts registration data including a registration character recognition result similar to the character recognition result 256 from the registration data group (step S14).
  • the extraction unit 2623 excludes registration data including a registration character recognition result that is not similar to the character recognition result 256 from the target of image matching at this point. For example, if the character recognition result 256 is "20220424", registration data including a similar registration character recognition result such as "20220429” is extracted, but registration data including a dissimilar registration character recognition result such as "14284485" or "78462179" is not extracted.
  • the registration data group extracted by the extraction unit 2623 is passed to the determination unit 2624.
  • the determination unit 2624 of the mobile device 2 generates matching object information, which is the matching image 255 or matching features extracted from the matching image (step S15).
  • the determination unit 2624 then performs a matching process using the registered object information and matching object information for each piece of registration data in the registration data group received from the extraction unit 2623 to determine the identity of the object to be matched and the object to be registered, and stores the determination result 257 in the storage unit 25 (step S16).
  • the determination unit 2624 displays the determination result 257 on the screen display unit 24 and/or outputs it to an external device via the communication I/F unit 22 (step S17).
  • the mobile terminal 2 registers, for each object to be registered, registration data including a registration image obtained by photographing the surface of the object to be registered on which handwritten characters are written, or registration object information which is a feature extracted from the registration image, a registration character recognition result obtained by character recognition of the handwritten characters in the registration image, and associated information in the registration data DB 352 of the server 3.
  • the mobile terminal 2 matches matching data which associates a matching image obtained by photographing the surface of the object to be matched on which handwritten characters are written, or matching object information which is a feature extracted from the matching image, with a matching character recognition result obtained by character recognition of the handwritten characters in the matching image, with a plurality of registration data stored in the registration data DB 352.
  • the mobile terminal 2 first extracts registration data including a registration character recognition result similar to the matching character recognition result in the matching data from the plurality of registration data stored in the registration data DB 352.
  • the calculation of the similarity between the matching character recognition result and the registration character recognition result is a text matching, and therefore can be calculated with a much smaller amount of calculation than image matching.
  • the portable terminal 2 performs a matching process using the matching object information in the matching data and the registered object information in the extracted registered data to determine whether the object to be matched is the same as the object to be registered. As a result, the portable terminal 2 can reduce the number of registered images that must be matched with the matching image, and can shorten the calculation time required to detect a registered image that matches the matching image.
  • the mobile terminal 2 handwrites a control number or the like on the surface of each cardboard box, photographs the surface including the handwritten characters with the mobile terminal 2 such as a smartphone, and registers the registration data for each cardboard box in the registration data DB 352.
  • the additional information for each registration data includes, for example, the type and number of equipment stored in each cardboard box and the storage date.
  • the operator can check the contents without opening the cardboard box by photographing the handwritten portion of the cardboard box whose contents he wants to check with the mobile terminal 2 and comparing it.
  • the sender signs the cardboard box by hand, photographs the surface including the handwritten characters with a mobile terminal 2 such as a smartphone, and registers the registration data related to the cardboard box in the registration data DB 352.
  • the sender also leaves the cardboard box at a predetermined location such as the front door of the house.
  • the sender also writes, for example, information about the delivery destination and the contents of the package in the additional information of the registration data.
  • the postal delivery company confirms the authenticity of the delivery and the delivery destination by photographing the handwritten portion of the cardboard box placed at the predetermined location with a mobile terminal 2 such as a smartphone and comparing it, and then delivers the item.
  • the object management system 1A differs from the first embodiment in that it includes a mobile terminal 2A instead of the mobile terminal 2 and a server 3A instead of the server 3, but is otherwise the same as the first embodiment.
  • mobile terminal 2A differs from mobile terminal 2 in that it has program 259 instead of program 251, and has registration means 263 and matching means 264 instead of registration means 261 and matching means 262.
  • Calculation processing unit 26 realizes registration means 263 and matching means 264 by reading and executing program 259.
  • the registration means 263 is configured to obtain an image of the surface of the object to be registered, on which handwritten characters are written, captured by the camera 21.
  • the registration means 263 is also configured to obtain additional information regarding the object to be registered from the operator of the mobile terminal 2A via the operation input unit 23.
  • the registration means 263 is also configured to transmit a registration request including the image and the additional information to the server 3A via the communication I/F unit 22.
  • the matching means 264 is configured to obtain an image of the surface of the object to be matched, on which handwritten characters are written, captured by the camera 21.
  • the matching means 264 is also configured to transmit a matching request including the image to the server 3A via the communication I/F unit 22.
  • the matching means 264 is also configured to receive a determination result, which is a response to the matching request, from the server 3A, and display it on the screen display unit 24 and/or output it to an external device via the communication I/F unit 22.
  • server 3A differs from server 3 in that it has registration image 353, auxiliary information 35A, character recognition result 354, match image 356, character recognition result 357, judgment result 358, and program 359 instead of program 351, and has registration means 362 and matching means 363 instead of DB management means 361, but is otherwise the same as server 3.
  • Processing unit 36 implements registration means 362 and matching means 363 by reading and executing program 359.
  • the registration means 362 is configured to generate registration data for determining the identity of the object to be registered and to register the data in the registration data DB 352.
  • the registration means 362 is configured to include an acquisition unit 3621, a character recognition unit 3622, and a registration unit 3623.
  • the acquisition unit 3621 is configured to acquire an image obtained by photographing the surface of the object to be registered on which handwritten characters are written, and associated information, from the mobile terminal 2A.
  • the acquisition unit 3621 is also configured to cut out a partial image of a predetermined size including the handwritten characters from the acquired image, and store it in the memory unit 35 as the registered image 353.
  • the acquisition unit 3621 is also configured to store the acquired associated information in the memory unit 35 as associated information 35A.
  • the character recognition unit 3622 is configured to read the registered image 353 from the memory unit 35, perform character recognition on the handwritten characters in the registered image 353, and store the character recognition result 354 in the memory unit 35.
  • the registration unit 3623 is configured to read out the registered image 353, the auxiliary information 35A, and the character recognition result 354 from the memory unit 35.
  • the registration unit 3623 is also configured to generate registered object information, which is the read registered image 353 or a registered feature extracted from the registered image.
  • the registered feature may be the same as in the first embodiment.
  • the registration unit 3623 is also configured to create registered data including the registered object information, the character recognition result 253, and the auxiliary information 35A, and register the data in the registered data DB 352.
  • the matching means 363 is configured to determine whether or not the matching data relating to the object to be matched received from the mobile terminal 2A is identical to any registered data registered in the registered data DB 352.
  • the matching means 363 is configured to include an acquisition unit 3631, a character recognition unit 3632, an extraction unit 3633, and a determination unit 3634.
  • the acquisition unit 3631 is configured to acquire from the mobile terminal 2A an image obtained by photographing the surface of the object to be matched, on which handwritten characters are written.
  • the acquisition unit 3621 is also configured to cut out a partial image of a predetermined size that includes the handwritten characters from the acquired image, and store it in the storage unit 35 as the match image 356.
  • the character recognition unit 3632 is configured to read the match image 356 from the memory unit 35, perform character recognition on the handwritten characters in the match image 356, and store the character recognition result 357 in the memory unit 35.
  • the extraction unit 3633 is configured to extract registration data that includes a registration character recognition result similar to the character recognition result 357 from among the multiple registration data registered in the registration data DB 352.
  • the extraction unit 3633 transmits the extracted registration data to the determination unit 3634.
  • the determination unit 3634 is configured to read the matching image 356 from the storage unit 35 and generate matching object information, which is the matching image 356 or a matching feature extracted from the matching image 356.
  • the matching feature may be the same as the registered feature.
  • the determination unit 3634 is also configured to determine the identity of the object to be matched and the object to be registered by a matching process using the matching object information and the registered object information included in the registered data transmitted from the extraction unit 3633.
  • the determination unit 3634 determines that the object to be matched is identical to any of the registered objects, it creates a determination result 358 including auxiliary information included in the registered data of the registered object determined to be identical, and stores it in the storage unit 35.
  • the determination unit 3634 determines that the object to be matched is not identical to any of the registered objects, it creates a determination result 358 indicating that no identical registered object exists, and stores it in the storage unit 35.
  • the determination unit 3634 is also configured to read the determination result 358 from the storage unit 35 and transmit it via the communication I/F unit 32 to the mobile terminal 2A that transmitted the image of the object to be matched.
  • FIG. 10 is a flow chart showing an example of the procedure for the registration operation.
  • the operator of the portable terminal 2A handwrites characters on any surface of the object 5 to be registered using any writing implement (step S21).
  • the operator operates the portable terminal 2A to photograph the surface of the object 5 to be registered, including the handwritten characters, from almost directly in front with the camera 21 (step S22).
  • the operator inputs additional information from the operation input unit 23 (step S23).
  • the registration means 263 of the portable terminal 2A sends a registration request including the image and additional information to the server 3A via the communication I/F unit 32 (step S24).
  • the acquisition unit 3621 of the registration means 362 of the server 3A receives the registration request sent from the mobile terminal 2A, and stores the registration image 353 generated from the image of the object to be registered contained therein and the associated information 35A in the memory unit 35 (step S25).
  • the character recognition unit 3622 performs character recognition on the handwritten characters in the registration image 353, and transmits the character recognition result 354 via the communication I/F unit 32 to be displayed on the screen display unit 24 of the mobile terminal 2A and also to be stored in the memory unit 35 (step S26).
  • the character recognition unit 3622 corrects the character recognition result as necessary through dialogue with the operator of the mobile terminal 2 (step S27).
  • the registration unit 3623 of the server 3A generates registered object information, which is the registered image 353 or registered features extracted from the registered image, creates registered data including the registered object information, the character recognition result 354, and the auxiliary information 35A, and stores the data in the registered data DB 352 (step S28).
  • registration data relating to one registration target object has been registered in registration data DB 352.
  • An operator of the same mobile terminal 2 and operators of other mobile terminals 2 can register registration data relating to other registration target objects in registration data DB 352 in a similar manner as described above.
  • FIG. 11 is a flow chart showing an example of the procedure for the matching operation.
  • the operator of the mobile terminal 2A operates the mobile terminal 2A to capture an image of the surface of the object 5 to be matched, including handwritten characters, preferably from directly in front, using the camera 21 (step S31).
  • the matching means 264 of the mobile terminal 2A acquires the captured image from the camera 21, and transmits a matching request including the image to the server 3A via the communication I/F unit 22 (step S32).
  • the acquisition unit 3631 of the matching means 363 of the server 3A receives the matching request from the mobile terminal 2A through the communication I/F unit 32, extracts a partial image including handwritten characters from the image contained therein, and stores it in the memory unit 35 as a matching image 356 (step S33).
  • the character recognition unit 3632 performs character recognition on the handwritten characters in the matching image 356, and stores the character recognition result 357 in the memory unit 35 (step S34).
  • the extraction unit 3633 extracts registration data including a registration character recognition result similar to the character recognition result 357 from the registration data group stored in the registration data DB 352 (step S35).
  • the registration data group extracted by the extraction unit 3633 is passed to the determination unit 3634.
  • the determination unit 3634 generates matching object information, which is the matching image 356 or matching features extracted from the matching image 356 (step S36).
  • the determination unit 3634 determines the identity of the matching target object and the registered target object by a matching process using the registered object information and the matching object information for each registered data in the registered data group received from the extraction unit 3633, and transmits the determination result 358 to the mobile device 2A via the communication I/F unit 32 (step S38).
  • the matching means 264 of the mobile terminal 2A receives the above judgment result 358 through the communication I/F unit 22 and displays it on the screen display unit 24 (step S39).
  • the server 3A acquires from the mobile terminal 2A an image of the surface of the object to be registered on which handwritten characters are written, and associated information, for each object to be registered, and registers in the registration data DB 352 registration data that associates the registration character recognition result obtained by character recognition of the handwritten characters in the registration image generated from the image with the registration object information, which is the registration feature extracted from the registration image, and the associated information.
  • the server 3A acquires from the mobile terminal 2A an image of the surface of the object to be matched on which handwritten characters are written, and extracts from the registration data DB 352 registration data that includes the registration character recognition result similar to the matching character recognition result obtained by character recognition of the handwritten characters in the matching image generated from the image.
  • the server 3A determines the identity of the object to be matched and the object to be registered by a matching process using the matching object information, which is the matching image or the matching feature extracted from the matching image, and the registration object information in the extracted registration data, and transmits the determination result to the mobile terminal 2A.
  • server 3A can reduce the number of registered images that must be compared with the match image, and can shorten the calculation time required to find a registered image that matches the match image.
  • the object management device 10 is configured as a mobile terminal or a server, and is composed of an acquisition means 11, a character recognition means 12, an extraction means 13, and a determination means 14.
  • the acquisition means 11 is configured to acquire a matching image obtained by capturing an image of the surface of an object to be matched on which handwritten characters are written.
  • the acquisition means 11 can be configured, for example, as the acquisition unit 2621 of the mobile terminal 2 or the acquisition unit 3631 of the server 3A, but is not limited thereto.
  • the character recognition means 12 is configured to output a comparison character recognition result obtained by character recognition of handwritten characters in the comparison image acquired by the acquisition means 11.
  • the character recognition means 12 can be configured, for example, by the character recognition unit 2622 of the mobile terminal 2 or the character recognition unit 3632 of the server 3A, but is not limited thereto.
  • the extraction means 13 is configured to extract registration data including a registration character recognition result similar to the comparison character recognition result output from the character recognition means 12 from a plurality of stored registration data including a registration image relating to an object to be registered or registration object information, which is a feature extracted from the registration image, and a registration character recognition result.
  • the extraction means 13 can be configured, for example, by the extraction unit 2623 of the mobile terminal 2 or the extraction unit 3633 of the server 3A, but is not limited thereto.
  • the determination means 14 is configured to determine the identity of the object to be matched and the object to be registered by a matching process using the match image acquired by the acquisition means 11 or the match object information, which is a feature extracted from the match image, and the registered object information in the extracted registered data.
  • the determination means 14 can be configured, for example, by the determination unit 2624 of the mobile terminal 2 or the determination unit 3634 of the server 3A, but is not limited thereto.
  • the object management device 10 configured in this manner operates as follows. First, the acquisition means 11 acquires a match image obtained by capturing an image of the surface of the object to be matched on which handwritten characters are written. Next, the character recognition means 12 outputs a match character recognition result obtained by character recognition of the handwritten characters in the match image acquired by the acquisition means 11. Next, the extraction means 13 extracts registration data including a registration character recognition result similar to the match character recognition result output from the character recognition means 12 from a plurality of stored registration data in which a registration image relating to the object to be registered or registration object information, which is a registration feature extracted from the registration image, is associated with the registration character recognition result.
  • the determination means 14 determines the identity of the object to be matched and the object to be registered by a matching process using the match image acquired by the acquisition means 11 or the match object information, which is a feature extracted from the match image, and the registration object information in the extracted registration data.
  • the object management device 10 configured and operating as described above can reduce the number of registered images that must be compared with the match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • the object management device 15 is configured as a mobile terminal or a server, and is composed of an acquisition means 16, a character recognition means 17, and a registration means 18.
  • the acquisition means 16 is configured to acquire a registration image obtained by capturing an image of the surface of the object to be registered on which handwritten characters are written.
  • the acquisition means 16 can be configured, for example, as the acquisition unit 2611 of the mobile terminal 2 or the acquisition unit 3621 of the server 3A, but is not limited thereto.
  • the character recognition means 17 is configured to output a registered character recognition result obtained by performing character recognition on handwritten characters in the registered image acquired by the acquisition means 16.
  • the character recognition means 17 can be configured, for example, by the character recognition unit 2612 of the mobile terminal 2 or the character recognition unit 3622 of the server 3A, but is not limited thereto.
  • the registration means 18 is configured to generate registration data that associates the registration image acquired by the acquisition means 16 or the registration object information, which is the registration feature amount extracted from the registration image, with the registration character recognition result output from the character recognition means 17, as data for determining the identity of the object to be registered.
  • the registration means 18 can be configured, for example, by the registration unit 2113 of the mobile terminal 2 or the registration unit 3623 of the server 3A, but is not limited thereto.
  • the object management device 15 configured in this manner operates as follows. First, the acquisition means 16 acquires a registration image obtained by capturing an image of the surface of the object to be registered on which handwritten characters are written. Next, the character recognition means 17 outputs a registration character recognition result obtained by character recognition of the handwritten characters in the registration image acquired by the acquisition means 16. Next, the registration means 18 generates registration data that associates the registration image acquired by the acquisition means 16 or registered object information, which is a registration feature extracted from the registration image, with the registration character recognition result output from the character recognition means 17, as data for determining the identity of the object to be registered.
  • the object management device 15 configured and operating as described above can reduce the number of registered images that must be compared with the match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • the object management system 10A is configured as a system including a mobile terminal and a server, and is composed of an acquisition means 11A, a character recognition means 12A, an extraction means 13A, and a determination means 14A.
  • the acquisition means 11A is configured to acquire a matching image obtained by capturing an image of the surface of an object to be matched on which handwritten characters are written.
  • the acquisition means 11A can be configured, for example, as the acquisition unit 2621 of the mobile terminal 2 or the acquisition unit 3631 of the server 3A, but is not limited thereto.
  • the character recognition means 12A is configured to output a comparison character recognition result obtained by character recognition of handwritten characters in the comparison image acquired by the acquisition means 11A.
  • the character recognition means 12A can be configured, for example, as the character recognition unit 2622 of the mobile terminal 2 or the character recognition unit 3632 of the server 3A, but is not limited thereto.
  • the extraction means 13A is configured to extract registration data including a registration character recognition result similar to the comparison character recognition result output from the character recognition means 12A from a plurality of stored registration data including a registration image relating to an object to be registered or registration object information, which is a feature extracted from the registration image, and a registration character recognition result.
  • the extraction means 13A can be configured, for example, by the extraction unit 2623 of the mobile terminal 2 or the extraction unit 3633 of the server 3A, but is not limited thereto.
  • the determination means 14A is configured to determine the identity of the object to be matched and the object to be registered by a matching process using the match image acquired by the acquisition means 11A or the match object information, which is a feature extracted from the match image, and the registered object information in the extracted registered data.
  • the determination means 14A can be configured, for example, by the determination unit 2624 of the mobile terminal 2 or the determination unit 3634 of the server 3A, but is not limited thereto.
  • the object management device 10A configured in this manner operates as follows. First, the acquisition means 11A acquires a match image obtained by capturing an image of the surface of the object to be matched, on which handwritten characters are written. Next, the character recognition means 12A outputs a match character recognition result obtained by character recognition of the handwritten characters in the match image acquired by the acquisition means 11A. Next, the extraction means 13A extracts registration data including a registration character recognition result similar to the match character recognition result output from the character recognition means 12A from a plurality of stored registration data in which a registration image relating to the object to be registered or registration object information, which is a registration feature extracted from the registration image, is associated with the registration character recognition result.
  • the determination means 14A determines the identity of the object to be matched and the object to be registered by a matching process using the match image acquired by the acquisition means 11A or the match object information, which is a feature extracted from the match image, and the registration object information in the extracted registration data.
  • the object management device 10A configured and operating as described above can reduce the number of registered images that must be compared with the match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • the object management system 15A is configured as a system including a mobile terminal and a server, and is composed of an acquisition means 16A, a character recognition means 17A, and a registration means 18A.
  • the acquisition means 16A is configured to acquire a registration image obtained by capturing an image of the surface of an object to be registered on which handwritten characters are written.
  • the acquisition means 16A can be configured, for example, as the acquisition unit 2611 of the mobile terminal 2 or the acquisition unit 3621 of the server 3A, but is not limited thereto.
  • the character recognition means 17A is configured to output a registered character recognition result obtained by performing character recognition on handwritten characters in a registered image acquired by the acquisition means 16A.
  • the character recognition means 17A can be configured, for example, as the character recognition unit 2612 of the mobile terminal 2 or the character recognition unit 3622 of the server 3A, but is not limited thereto.
  • the registration means 18A is configured to generate registration data that associates the registration image acquired by the acquisition means 16A or the registration object information, which is the registration feature amount extracted from the registration image, with the registration character recognition result output from the character recognition means 17A, as data for determining the identity of the object to be registered.
  • the registration means 18A can be configured, for example, as the registration unit 2113 of the mobile terminal 2 or the registration unit 3623 of the server 3A, but is not limited thereto.
  • the object management system 15A configured in this manner operates as follows. First, the acquisition means 16A acquires a registration image obtained by capturing an image of the surface of the object to be registered on which handwritten characters are written. Next, the character recognition means 17A outputs a registration character recognition result obtained by character recognition of the handwritten characters in the registration image acquired by the acquisition means 16A. Next, the registration means 18A generates registration data that associates the registration image acquired by the acquisition means 16A or the registration object information, which is the registration feature amount extracted from the registration image, with the registration character recognition result output from the character recognition means 17A, as data for determining the identity of the object to be registered.
  • the object management device 15A configured and operating as described above can reduce the number of registered images that must be compared with the match image, thereby shortening the calculation time required to find a registered image that matches the match image.
  • some of the processes executed by the mobile terminal 2 may be configured to be executed by the server 3.
  • some or all of the processes of steps S3, S4, S6, and S7 in FIG. 5 and steps S12, S13, S14, S15, S16, and S17 in FIG. 7 may be configured to be executed by the server 3.
  • the server 3A may be configured to execute some or all of the processing executed by the mobile terminal 2A.
  • the mobile terminal 2A may be configured to execute some or all of the processing of steps S26, S27, and S28 in FIG. 10 and steps S34, S35, S36, and S37 in FIG. 11.
  • the registered object information and registered character recognition results in the registration data related to the object to be registered were extracted and recognized from the same image capturing the object, but they may also be extracted and recognized from multiple different images capturing the object.
  • the image from which the registered object information is extracted does not necessarily have to be an image that contains all of the handwritten characters, and may be an image in which a specific portion of the handwritten characters (for example, the first one or two characters) is captured in high image quality (high resolution).
  • the image in which character recognition is performed may be an image captured in low image quality (low resolution) as long as it contains all of the handwritten characters.
  • the matching object information and matching character recognition results in the matching data relating to the object to be matched are extracted and recognized from the same image capturing the object, they may also be extracted and recognized from multiple different images capturing the object.
  • the image from which the matching object information is extracted does not necessarily have to be an image that contains all of the handwritten characters, and may be an image in which a specific portion of the handwritten characters (for example, the first one or two characters) is captured in high image quality (high resolution).
  • the image in which character recognition is performed may be an image captured in low image quality (low resolution) as long as it contains all of the handwritten characters.
  • a GPU Graphic Processing Unit
  • DSP Digital Signal Processor
  • MPU Micro Processing Unit
  • FPU Floating number Processing Unit
  • PPU Physical Processing Unit
  • TPU Transistor Processing Unit
  • quantum processor a microcontroller
  • This disclosure can be used in the general field of managing individual objects such as products, merchandise, or parcels for purposes such as origin identification, quality control, or distribution management.
  • An object management device comprising: [Appendix 2]
  • the first acquisition means further acquires auxiliary information related to the object to be registered,
  • the registration data further includes the auxiliary information.
  • the registration means further writes the registration data into a storage means.
  • the determination means further outputs the auxiliary information included in the enrollment data relating to the object to be enrolled that is determined to be identical to the object to be matched. 5.
  • An object management device comprising: [Appendix 7]
  • the registration data further includes auxiliary information,
  • the determination means further outputs the auxiliary information included in the enrollment data relating to the object to be enrolled that is determined to be identical to the object to
  • the object management device further comprising: [Appendix 9]
  • the computer A registration image is obtained by photographing a surface of an object to be registered on which handwritten characters are written; outputting a registration character recognition result obtained by performing character recognition on the handwritten character in the registration image; generating registration data in which the registration image or registration object information, which is a feature amount extracted from the registration image, is associated with the registration character recognition result as data for determining the identity of the object to be registered; Methods of object management.
  • the computer further comprises: Acquire auxiliary information related to the object to be registered and add it to the registration data. 10.
  • the computer further comprises: writing the registration data into a storage means; 11.
  • An object management method according to claim 10.
  • the computer further comprises: A matching image is obtained by photographing a surface of an object to be matched on which handwritten characters are written; outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; extracting enrollment data including a registration character recognition result similar to the collation character recognition result from a plurality of enrollment data; determining whether the object to be matched and the object to be registered are identical to each other by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information included in the extracted registered data; 12.
  • the object management method according to claim 11.
  • the computer further comprises: outputting the auxiliary information included in the registration data relating to the object to be registered that has been determined to be identical to the object to be matched; 13.
  • An object management method according to claim 12.
  • the computer A matching image is obtained by photographing a surface of an object to be matched on which handwritten characters are written; outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; extracting registration data including a registration character recognition result similar to the comparison character recognition result from a plurality of stored registration data including a registration image related to an object to be registered or registration object information which is a feature amount extracted from the registration image and a registration character recognition result; determining whether the object to be matched and the object to be registered are identical to each other by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information in the extracted registered data; Methods of object management.
  • the registration data further includes auxiliary information
  • the computer further comprises: outputting the auxiliary information included in the registration data relating to the object to be registered that has been determined to be identical to the object to be matched; 15.
  • the computer further comprises: A registration image is obtained by photographing a surface of an object to be registered on which handwritten characters are written; outputting a registration character recognition result obtained by performing character recognition on the handwritten character in the registration image; generating registration data in which the registration image or registered object information, which is a feature amount extracted from the registration image, is associated with the registration character recognition result as data for determining the identity of the object to be registered; 16.
  • Appendix 17 On the computer, A process of acquiring a registration image by capturing an image of a surface of an object to be registered on which handwritten characters are written; a process of outputting a registered character recognition result obtained by performing character recognition on the handwritten character in the registered image; generating registration data in which the registration image or registration object information, which is a feature amount extracted from the registration image, is associated with the registration character recognition result as data for determining the identity of the object to be registered; A computer-readable recording medium having a program recorded thereon for causing a computer to carry out the above.
  • the computer further comprises: A process of acquiring auxiliary information related to the object to be registered and adding it to the registration data; 18.
  • the computer further includes a process of storing the registration data in a storage means.
  • the computer further comprises: A process of acquiring a match image by capturing an image of a surface of an object to be matched on which handwritten characters are written; a process of outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; A process of extracting enrollment data including a registration character recognition result similar to the collation character recognition result from a plurality of stored enrollment data; a process of determining an identity between the object to be matched and the object to be registered by a matching process using the match image or matching object information, which is a feature amount extracted from the match image, and the registered object information included in the extracted registered data; 20.
  • the computer further comprises: A process of outputting the auxiliary information included in the registration data relating to the object to be registered that has been determined to be identical to the object to be matched; 21.
  • the registration data further includes auxiliary information
  • the computer further comprises: A process of outputting the auxiliary information included in the registration data relating to the object to be registered that has been determined to be identical to the object to be matched; 23.
  • the computer further comprises: A process of acquiring a registration image by capturing an image of a surface of an object to be registered on which handwritten characters are written; a process of outputting a registered character recognition result obtained by performing character recognition on the handwritten character in the registered image; generating registration data in which the registration image or registration object information, which is a feature amount extracted from the registration image, is associated with the registration character recognition result as data for determining the identity of the object to be registered; 24.
  • An object management system comprising: [Appendix 26] An acquisition means for acquiring a match image by capturing an image of a surface of an object to be matched on which handwritten characters are written; a character recognition means for outputting a collation character recognition result obtained by performing character recognition on the handwritten characters in the collation image; an extraction means for extracting registration data including a registration character recognition result similar to the comparison character recognition result from a plurality of stored registration data including a registration image related to an object to be registered or registration object information which is a feature amount extracted from

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Character Discrimination (AREA)

Abstract

物体管理装置は、手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する取得手段と、上記登録画像中の手書き文字を文字認識した登録文字認識結果を出力する文字認識手段と、上記登録画像又は上記登録画像から抽出された特徴量である登録物体情報と上記登録文字認識結果とを対応付けた登録データを上記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、を備える。

Description

物体管理装置
　本開示は、物体管理装置、物体管理方法、物体管理システム、および、記録媒体に関する。
　物体の画像を取得し、その画像を照合画像として事前に登録された複数の登録画像のそれぞれと画像照合を行い、照合画像に一致する登録画像を検出する装置が提案されている（例えば、特許文献１）。
ＷＯ２０２０／２５５３９４
　しかしながら、照合画像と事前に登録された登録画像のそれぞれとの画像照合を行って照合画像に一致する登録画像を検出するためには、多くの画像照合が必要になり、多大な計算時間が必要になる。
　本開示の目的は、照合画像に一致する登録画像を検出するまでに多くの画像照合が必要になり、多大な計算時間がかかる、という課題を解決する物体管理装置を提供することにある。
　本開示における物体管理装置は、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する第１の取得手段と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する第１の文字認識手段と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを含む登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
を備えるように構成されている。
　また、本開示における他の物体管理装置は、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する第１の取得手段と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する第１の文字認識手段と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
を備えるように構成されている。
　また、本開示における物体管理方法は、
　コンピュータが、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得し、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力し、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを含む登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する、
ように構成されている。
　また、本開示における他の物体管理方法は、
　コンピュータが、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得し、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力し、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出し、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する、
ように構成されている。
　また、本開示におけるコンピュータ読み取り可能な記録媒体は、
　コンピュータに、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する処理と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する処理と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを含む登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する処理と、
を行わせるためのプログラムを記録するように構成されている。
　また、本開示における他のコンピュータ読み取り可能な記録媒体は、
　コンピュータに、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する処理と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する処理と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する処理と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する処理と、
を行わせるためのプログラムを記録するように構成されている。
　また、本開示における物体管理システムは、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する取得手段と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する文字認識手段と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
を備えるように構成されている。
　また、本開示における他の物体管理システムは、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する取得手段と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する文字認識手段と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
を備えるように構成されている。
　本開示は、上述したような構成を有することにより、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
本開示に係る第１の物体管理システムのブロック図である。 本開示に係る第１の携帯端末の構成の一例を示すブロック図である。 本開示に係る第１のサーバの構成の一例を示すブロック図である。 本開示に係る第１のサーバの登録データＤＢの内容の一例を示す図である。 本開示に係る第１の物体管理システムの登録動作の手順の一例を示すフローチャートである。 本開示に係る第１の物体管理システムにおける手書き文字を含む登録画像の一例を示す図である。 本開示に係る第１物体管理システムの照合動作の手順の一例を示すフローチャートである。 本開示に係る第２の携帯端末の構成の一例を示すブロック図である。 本開示に係る第２のサーバの構成の一例を示すブロック図である。 本開示に係る第２の物体管理システムの登録動作の手順の一例を示すフローチャートである。 本開示に係る第２の物体管理システムの照合動作の手順の一例を示すフローチャートである。 本開示に係る第１の物体管理装置のブロック図である。 本開示に係る第２の物体管理装置のブロック図である。 本開示に係る第３の物体管理システムのブロック図である。 本開示に係る第４の物体管理システムのブロック図である。
［第１の実施形態］
　先ず、本開示の第１の実施形態に係る物体管理システムの概要について説明する。
　手書き文字は、書かれた文字列が相違すれば画像的に異なるものとなり、同じ文字列であっても筆者や筆記具が相違すれば画像的に異なるものとなり得る。そのため、手書き文字が記載された物体の面を撮影して得られた画像は、当該物体の個体を識別する識別子になり得る。さらに、手書き文字が記載された物体の面に、材質に起因する模様や凹凸などの表面特徴が存在する場合、物体毎に表面特徴が必ずしも同じでないことや、物体毎に表面特徴と手書き文字との相対的な位置関係が必ずしも同じでないことから、手書き文字が記載された物体の面の画像はより一層個体毎に相違するものとなり得る。しかしながら、画像だけを個体識別子にすると、照合画像に一致する登録画像を検出するためには、多くの画像照合が必要になる。
　そこで、本実施形態に係る物体管理システムは、物体の同一性を判定するためのデータとして、手書き文字が記載された物体の面を撮影して得られた画像と上記手書き文字を文字認識した結果との組み合わせを使用する。
　物体管理システムは、登録時には、登録対象の物体毎に、手書き文字が記載された登録対象の物体の面を撮影した登録画像又はその登録画像から抽出した特徴量である登録物体情報と当該登録画像中の手書き文字を文字認識した登録文字認識結果とを含む登録データを登録データＤＢ（データベース）に生成する。
　物体管理システムは、照合時には、手書き文字が記載された照合対象の物体の面を撮影した照合画像又はその照合画像から抽出した特徴量である照合物体情報とこの照合画像中の手書き文字を文字認識した照合文字認識結果とを含む照合データと、登録データＤＢに保存された複数の登録データとを照合する。その際、物体管理システムは、最初に、登録データＤＢに記憶された複数の登録データから、照合データ中の照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する。次に、物体管理システムは、照合データ中の照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定する。
　物体管理システムは、上記のように構成され、動作することにより、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
　以上が、本実施形態に係る物体管理システムの概要である。以下、本実施形態に係る物体管理システムの詳細について説明する。
　図１を参照すると、本開示の第１の実施形態に係る物体管理システム１は、出所表示、品質管理、または流通管理などのために、製品、商品、または宅配物などの物体５の個体を管理するシステムである。
　物体管理システム１は、携帯端末２とサーバ３とを含んで構成されている。携帯端末２とサーバ３とは、インターネットなどのネットワーク４を通じて相互に通信可能に接続されている。図１には携帯端末２が１台のみ図示されているが、携帯端末２は複数台存在してよい。
　携帯端末２は、管理対象の物体５の登録および照合に使用するスマートフォン、タブレット端末、通信端末などの携帯型の端末である。サーバ３は、携帯端末２と連携して管理対象の物体５の登録および照合に使用するパーソナルコンピュータ等の情報処理装置である。
　図２を参照すると、携帯端末２は、カメラ２１と、通信インターフェイス（Ｉ／Ｆ）部２２と、操作入力部２３と、画面表示部２４と、記憶部２５と、演算処理部２６とから構成されている。
　カメラ２１は、管理対象の物体５を撮影する撮像装置である。カメラ２１は、例えば、数百万画素程度の画素容量を有するＣＣＤ（Ｃｈａｒｇｅ－Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　ＭＯＳ）イメージセンサを備えた可視光かつカラーカメラである。通信Ｉ／Ｆ部２２は、データ通信回路から構成され、無線によってサーバ３などの外部装置との間でデータ通信を行うように構成されている。操作入力部２３は、キーボードやマウスなどの装置から構成され、オペレータの操作を検出して演算処理部２６に出力するように構成されている。画面表示部２４は、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）などの装置から構成され、演算処理部２６からの指示に応じて、各種情報を画面表示するように構成されている。
　記憶部２５は、ハードディスクやメモリなどの記憶装置からなり、演算処理部２６における各種処理に必要な処理情報およびプログラム２５１を記憶するように構成されている。プログラム２５１は、演算処理部２６に読み込まれて実行されることにより各種処理部を実現するプログラムであり、通信Ｉ／Ｆ部２２などのデータ入出力機能を介して図示しない外部装置や記録媒体から予め読み込まれて記憶部２５に保存される。記憶部２５に記憶される主な処理情報には、登録画像２５２、付属情報２５８、文字認識結果２５３、登録データ２５４、照合画像２５５、文字認識結果２５６、および、判定結果２５７がある。
　登録画像２５２は、手書き文字が記載された登録対象の物体の面をカメラ２１によって撮影した画像から生成された画像である。付属情報２５８は、登録対象の物体に係る任意の情報である。付属情報２５８は、例えば、登録対象の物体の管理番号、登録日時、物体の中身を示す情報などであってよい。文字認識結果２５３は、登録画像２５２中の手書き文字を文字認識した結果のテキストであり、登録文字認識結果とも呼ばれる。登録データ２５４は、登録画像２５２又は当該登録画像から抽出した特徴量である登録物体情報と文字認識結果２５３と付属情報２５８とを互いに対応付けたデータである。登録データ２５４は、登録対象の物体の同一性を判定するためのデータとして、サーバ３に設けられた登録データＤＢ３５２に登録される。
　照合画像２５５は、手書き文字が記載された照合対象の物体の面をカメラ２１によって撮影した画像から生成された画像である。文字認識結果２５６は、照合画像２５５中の手書き文字を文字認識した結果のテキストであり、照合文字認識結果とも呼ばれる。判定結果２５７は、照合画像２５５によって特定される照合対象の物体が、登録データＤＢ３５２に登録されている何れの登録対象物体と同一であるか否かを表すデータである。
　演算処理部２６は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などのプロセッサとその周辺回路を有し、記憶部２５からプログラム２５１を読み込んで実行することにより、上記ハードウェアとプログラム２５１とを協働させて各種処理部を実現するように構成されている。演算処理部２６で実現される主な処理部は、登録手段２６１および照合手段２６２である。
　登録手段２６１は、登録対象の物体の同一性を判定するための登録データ２５４を生成し、サーバ３にその登録を要求するように構成されている。登録手段２６１は、取得部２６１１と文字認識部２６１２と登録部２１１３とを含んで構成されている。
　取得部２６１１は、手書き文字が記載された登録対象の物体の面をカメラ２１で撮影して得られた画像を取得し、その取得した画像から手書き文字を含む所定サイズの部分画像を切り出し、それを登録画像２５２として記憶部２５に保存するように構成されている。また、取得部２６１１は、携帯端末２のオペレータから登録対象の物体に係る付属情報２５８を、操作入力部２３等を通じて取得し、記憶部２５に保存するように構成されている。
　文字認識部２６１２は、記憶部２５から登録画像２５２を読み出し、この画像中の手書き文字を文字認識し、その文字認識結果２５３を記憶部２５に保存するように構成されている。文字認識部２６１２は、例えば、ＯＣＲ（Ｏｐｔｉｃａｌ　Ｃｈａｒａｃｔｅｒ　Ｒｅａｄｅｒ）アプリケーションプログラムで実現してよい。
　登録部２１１３は、記憶部２５から登録画像２５２と文字認識結果２５３と付属情報２５８とを読み出すように構成されている。また、登録部２１１３は、読み出した登録画像２５２または当該登録画像から抽出した特徴量である登録物体情報を生成するように構成されている。上記特徴量は、個体の同一性の判定に利用できる特徴量であれば任意である。例えば、登録部２１１３は、登録画像２５２に対して、周波数変換、極座標変換あるいは対数極座標変換、および、周波数変換をその順に施して、特徴量を抽出してよい。画像に対してフーリエ変換等の周波数変換を施して得られる画像を、周波数スペクトル画像と呼ぶ。その周波数スペクトル画像に対して極座標変換あるいは対数極座標変換を施して得られる特徴量をフーリエ・メリン特徴と呼ぶ。そのフーリエ・メリン特徴に対してフーリエ変換等の周波数変換を施して得られる特徴量を、フーリエ・メリン周波数スペクトル画像と呼ぶ。このフーリエ・メリン周波数スペクトル画像は、撮影した画像の倍率、回転、および、平行移動に不変である。以下、登録画像２５２から抽出された特徴量を登録特徴量と記す。
　また、登録部２１１３は、上記読み出した文字認識結果２５３を画面表示部２４に表示し、携帯端末２のオペレータに確認ないし修正を促すように構成されている。以下、単に文字認識結果２５３と記載する場合、オペレータによる確認ないし修正後の文字認識結果を意味するものとする。なお、オペレータによる文字認識結果２５３の確認ないし修正は必須でなく、省略してもよい。但し、手書きすべき文字列の内容がオペレータの判断によるものではなく上位システムで決定されたものである場合、正確な内容に修正しておくことが望ましい。
　また、登録部２１１３は、登録画像２５２又は当該登録画像から抽出した登録特徴量である登録物体情報と文字認識結果２５３と付属情報２５８とを含む登録データ２５４を作成し、記憶部２５に保存するように構成されている。また、登録部２１１３は、記憶部２５から登録データ２５４を読み出し、その登録データ２５４を含む登録要求を通信Ｉ／Ｆ部２２を通じてサーバ３へ送信するように構成されている。
　照合手段２６２は、照合対象の物体がサーバ３の登録データＤＢ３５２に登録されている登録対象の物体と同一か否かを判定するように構成されている。照合手段２６２は、取得部２６２１と文字認識部２６２２と抽出部２６２３と判定部２６２４とを含んで構成されている。
　取得部２６２１は、手書き文字が記載された照合対象の物体５の面をカメラ２１で撮影して得られた画像を取得し、その画像から手書き文字を含む所定サイズの部分画像を切り出し、照合画像２５５として記憶部２５に保存するように構成されている。
　文字認識部２６２２は、記憶部２５から照合画像２５５を読み出し、この照合画像中の手書き文字を文字認識し、その文字認識結果２５６を記憶部２５に保存するように構成されている。
　抽出部２６２３は、サーバ３の登録データＤＢ３５２に登録された複数の登録データのうち、文字認識結果２５６に類似する登録文字認識結果を含む登録データを抽出するように構成されている。例えば、抽出部２６２３は、先ず、通信Ｉ／Ｆ部２２を通じてサーバ３に対して登録データの取得要求を送信する。サーバ３は、この取得要求に応じて登録データＤＢ３５２に保存された全ての登録データを携帯端末２へ送信する。抽出部２６２３は、携帯端末２で受信したこれらの登録データのうち、文字認識結果２５６に類似する登録文字認識結果を含む登録データを抽出する。例えば、抽出部２６２３では、文字認識結果どうしの類似は、両者間の距離（レーベンシュタイン距離、ジャロ・ウィンクラー距離など）を計算し、その距離が閾値以内であれば両者は類似すると判断し、そうでなければ類似しないと判断する。抽出部２６２３は、抽出した登録データを判定部２６２４へ伝達する。
　判定部２６２４は、記憶部２５から照合画像２５５を読み出し、その照合画像又はその照合画像から抽出した特徴量である照合物体情報を生成するように構成されている。抽出する特徴量は、登録特徴量と同じである。照合画像２５５から抽出された特徴量を照合特徴量と記す。また、判定部２６２４は、照合物体情報と抽出部２６２３から伝達された登録データに含まれる登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定するように構成されている。
　判定部２６２４は、照合物体情報および登録物体情報が照合特徴量および登録特徴量である場合、例えば、以下のような方法により、照合対象の物体と登録対象の物体の同一性を判定する。先ず、判定部２６２４は、照合特徴量と各登録特徴量間のクロスパワースペクトルを算出する。次に判定部２６２４は、各クロスパワースペクトルを逆周波数変換して相関値マップを算出する。次に判定部２６２４は、各相関値マップから、照合画像と各登録画像との間の類似度を表す照合スコアを算出する。次に判定部２６２４は、それらの照合スコアに基づいて物体の同一性を判定する。例えば、判定部２６２４は、照合スコアの最大値が閾値以上であれば、照合画像に係る物体は、当該最大値の照合スコアとなった登録画像を含む登録データに係る物体と同一であると判定する。また判定部２６２４は、照合スコアの最大値が閾値以上でなければ、照合画像に係る物体と同一個体の物体は登録されていないと判定する。
　また、判定部２６２４は、照合物体情報および登録物体情報が照合画像および登録画像である場合、例えば、照合画像および登録画像からそれぞれ上述した照合特徴量および登録特徴量を抽出した後、上記と同様の方法により、照合対象の物体と登録対象の物体の同一性を判定する。或いは、判定部２６２４は、照合画像と登録画像の濃淡比較を利用したテンプレートマッチングにより、照合対象の物体と登録対象の物体の同一性を判定する。
　また、判定部２６２４は、照合対象物体が、何れかの登録対象物体と同一であると判定した場合、同一であると判定した登録対象物体の登録データに含まれる付属情報を含む判定結果２５７を作成し、記憶部２５に保存するように構成されている。また判定部２６２４は、照合対象物体が、何れの登録対象物体とも同一でないと判定した場合、同一の登録対象物体が存在しない旨の判定結果２５７を作成し、記憶部２５に保存するように構成されている。また判定部２６２４は、記憶部２５から判定結果２５７を読み出し、画面表示部２４の画面に表示し、または／および、通信Ｉ／Ｆ部２２を通じて外部の端末へ送信するように構成されている。
　図３を参照すると、サーバ３の一例は、カメラ３１と、通信Ｉ／Ｆ部３２と、操作入力部３３と、画面表示部３４と、記憶部３５と、演算処理部３６とから構成されている。
　カメラ３１は、携帯端末２のカメラ２１と同じ仕様のカメラであってよい。通信Ｉ／Ｆ部３２は、データ通信回路から構成され、無線によって携帯端末２などの外部装置との間でデータ通信を行うように構成されている。操作入力部３３は、キーボードやマウスなどの装置から構成され、オペレータの操作を検出して演算処理部３６に出力するように構成されている。画面表示部３４は、ＬＣＤなどの装置から構成され、演算処理部３６からの指示に応じて、各種情報を画面表示するように構成されている。
　記憶部３５は、ハードディスクやメモリなどの記憶装置からなり、演算処理部３６における各種処理に必要な処理情報およびプログラム３５１を記憶するように構成されている。プログラム３５１は、演算処理部３６に読み込まれて実行されることにより各種処理部を実現するプログラムであり、通信Ｉ／Ｆ部３２などのデータ入出力機能を介して図示しない外部装置や記録媒体から予め読み込まれて記憶部３５に保存される。記憶部３５に記憶される主な処理情報には、登録データＤＢ３５２がある。
　登録データＤＢ３５２は、１以上の登録データを記憶するように構成されている。図４は、登録データＤＢ３５２の内容の一例を示す図である。この例の登録データＤＢ３５２は、複数のエントリから構成され、１つのエントリに１つの登録データを保存している。登録データを保存するエントリは、登録番号欄、登録物体情報欄、文字認識結果欄、および、付属情報欄から構成されている。同じエントリの登録物体情報欄、文字認識結果欄、および、付属情報欄には、或る１つの登録対象物体に係る登録物体情報（登録画像又は登録特徴量）、文字認識結果、および、付属情報が記憶される。登録番号欄には、登録データを一意に識別する連番などが記憶される。
　演算処理部３６は、ＣＰＵなどのプロセッサとその周辺回路を有し、記憶部３５からプログラム３５１を読み込んで実行することにより、上記ハードウェアとプログラム３５１とを協働させて各種処理部を実現するように構成されている。演算処理部３６で実現される主な処理部は、ＤＢ管理手段３６１である。
　ＤＢ管理手段３６１は、通信Ｉ／Ｆ部３２を通じて携帯端末２から登録要求を受信すると、登録データＤＢ３５２に１つの空きエントリを確保し、新たに採番した登録番号、受信した登録要求に含まれる登録データ中の登録物体情報、文字認識結果、および、付属情報を、空きエントリの登録番号欄、登録物体情報欄、文字認識結果欄、および、付属情報欄に保存するように構成されている。
　また、ＤＢ管理手段３６１は、通信Ｉ／Ｆ部３２を通じて携帯端末２から取得要求を受信すると、登録データＤＢ３５２の各エントリに登録されている登録データを読み出し、通信Ｉ／Ｆ部３２を通じて携帯端末２へ送信するように構成されている。
　続いて、本実施形態に係る物体管理システム１の動作を説明する。物体管理システム１の動作は、登録動作と照合動作とに大別される。登録動作は、登録対象物体に係る登録データを登録データＤＢ３５２に登録する動作である。照合動作は、照合対象物体の照合データと登録データＤＢ３５２に保存された登録対象物体の登録データとを照合する動作である。
　最初に登録動作を説明する。図５は、登録動作の手順の一例を示すフローチャートである。先ず携帯端末２のオペレータは、任意の筆記具を使用して登録対象の物体５の任意の面に文字を手書きする（ステップＳ１）。手書きする文字の文字種、文字数、向きは任意である。例えば、文字種は日本語のひらがな、かたかな、漢字、数字であってもよいし、日本語以外の外国語（英語、中国語、韓国語、フランス語、スペイン語など）であってもよい。また、文字数は１または２以上であってよい。文字の並びは、縦書きであってもよいし、横書きであってもよい。筆記具は、万年筆、シャープペンシル、ボールペン、サインペン、マジックインキ、蛍光ペン、黒鉛筆、色鉛筆などであってよい。また、物体５の面の材質は任意であり、段ボール、金属、ガラス、木材、プラスチックなどであってよい。また、物体５の面の色は任意であり、一色であってもよいし、多色が混在していてもよいし、模様などが形成されていてもよい。また、物体５の面に直接に文字を手書きする以外に、文字を手書きしたラベルを物体５の面に貼付するようにしてもよい。
　次に、携帯端末２のオペレータは、携帯端末２を操作して、手書き文字を含む登録対象の物体５の面をほぼ真正面からカメラ２１で撮影する（ステップＳ２）。このとき、携帯端末２の取得部２６１１は、カメラ２１で撮影して得られた画像から手書き文字を含む部分画像を切り出し、登録画像２５２として記憶部２５に保存する。図６は、登録画像２５２の一例を示す。この例の登録画像には、手書きされた８桁の数値が写っている。
　次に、携帯端末２の文字認識部２６１２は、登録画像２５２中の手書き文字を文字認識し、その文字認識結果２５３を画面表示部２４に表示すると共に記憶部２５に保存する（ステップＳ３）。ここでは、その文字認識結果２５３は、「２０２２０４２４」であったとする。次に、携帯端末２のオペレータは、表示された文字認識結果を確認し、問題なければＯＫを、間違っていれば正しい内容を、それぞれ操作入力部２３から入力する（ステップＳ４）。ここでは、オペレータは、「２０２２０４２９」に修正したとする。このとき、文字認識部２６１２は、修正された内容で文字認識結果２５３を書き換える。
　次に、携帯端末２のオペレータは、操作入力部２３から付属情報を入力する（ステップＳ５）。このとき、登録部２１１３は、入力された付属情報２５８を操作入力部２３から受け取り、記憶部２５に保存する。次に、登録部２１１３は、登録画像２５２又はその画像から抽出した登録特徴量である登録物体情報を生成する（ステップＳ６）。次に、登録部２１１３は、当該登録物体情報と文字認識結果２５３と付属情報２５８を含む登録データを作成する（ステップＳ７）。次に、登録部２１１３は、作成した登録データを含む登録要求を通信Ｉ／Ｆ部２２を通じてサーバ３へ送信する（ステップＳ８）。
　サーバ３のＤＢ管理手段３６１は、携帯端末２から送信された登録要求に含まれる登録データを受信する（ステップＳ９）。次に、ＤＢ管理手段３６１は、その登録データに登録番号を付加して登録データＤＢ３５２に保存する（ステップＳ１０）。
　以上で、１つの登録対象物体に係る登録データが登録データＤＢ３５２に登録されたことになる。同じ携帯端末２のオペレータ、および、他の携帯端末２のオペレータは、他の登録対象物体に係る登録データを上記と同様の方法で登録データＤＢ３５２に登録することができる。
　次に照合動作を説明する。図７は、照合動作の手順の一例を示すフローチャートである。先ず携帯端末２のオペレータは、携帯端末２を操作して、手書きされた文字を含む照合対象の物体５の面をカメラ１１１により撮影する（ステップＳ１１）。このとき、携帯端末２の照合手段２６２の取得部２６２１は、撮影された画像をカメラ２１から取得し、手書きされた文字を含む部分画像を切り出し、照合画像２５５として記憶部２５に保存する。このとき保存された照合画像２５５は、図６に示される登録画像と同じであったとする。
　次に携帯端末２の文字認識部２６２２は、照合画像２５５中の手書き文字を文字認識し、その文字認識結果２５６を記憶部２５に保存する（ステップＳ１２）。ここでは、その文字認識結果２５６は、「２０２２０４２４」であったとする。
　次に携帯端末２の抽出部２６２３は、サーバ３から登録データＤＢ３５２に保存された全ての登録データを取得する（ステップＳ１３）。具体的には、抽出部２６２３は、取得要求を通信Ｉ／Ｆ部２２を通じてサーバ３へ送信する。サーバ３のＤＢ管理手段３６１は、この取得要求を通信Ｉ／Ｆ部３２を通じて受信すると、登録データＤＢ３５２に保存された全ての登録データを含む登録データ群を通信I／Ｆ部３２を通じて携帯端末２へ送信する。携帯端末２の抽出部２６２３は、これを通信Ｉ／Ｆ部２２を通じて受信する。
　次に携帯端末２の抽出部２６２３は、登録データ群から、文字認識結果２５６に類似する登録文字認識結果を含む登録データを抽出する（ステップＳ１４）。抽出部２６２３は、文字認識結果２５６に類似しない登録文字認識結果を含む登録データは、この時点で、画像照合の対象から除外する。例えば、文字認識結果２５６が「２０２２０４２４」であった場合、それに類似する「２０２２０４２９」などの登録文字認識結果を含む登録データは抽出されるが、それに類似しない「１４２８４４８５」や「７８４６２１７９」などの登録文字認識結果を含む登録データは抽出されない。抽出部２６２３によって抽出された登録データ群は、判定部２６２４に渡される。
　次に携帯端末２の判定部２６２４は、照合画像２５５又はその照合画像から抽出した照合特徴量である照合物体情報を生成する（ステップＳ１５）。次に判定部２６２４は、抽出部２６２３から受け取った登録データ群中の登録データ毎の登録物体情報と照合物体情報とを用いた照合処理により、照合対象物体と登録対象物体の同一性を判定し、判定結果２５７を記憶部２５に保存する（ステップＳ１６）。次に、判定部２６２４は、判定結果２５７を画面表示部２４に表示し、または／および、通信Ｉ／Ｆ部２２を通じて外部装置へ出力する（ステップＳ１７）。
　以上説明したように、携帯端末２は、登録時には、登録対象の物体毎に、手書き文字が記載された登録対象の物体の面を撮影した登録画像又はその登録画像から抽出した特徴量である登録物体情報と上記登録画像中の手書き文字を文字認識した登録文字認識結果と付属情報とを含む登録データをサーバ３の登録データＤＢ３５２に登録する。また、携帯端末２は、照合時には、手書き文字が記載された照合対象の物体の面を撮影した照合画像又はその照合画像から抽出した特徴量である照合物体情報と上記照合画像中の手書き文字を文字認識した照合文字認識結果とを対応付けた照合データと、登録データＤＢ３５２に保存された複数の登録データとを照合する。その際、携帯端末２は、最初に、登録データＤＢ３５２に記憶された複数の登録データから、照合データ中の照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する。照合文字認識結果と登録文字認識結果との類似度計算は、テキスト照合であるため画像照合と比較して遥かに少ない計算量で計算可能である。次に、携帯端末２は、照合データ中の照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定する。その結果、携帯端末２は、照合画像と画像照合しなければならない登録画像の数を削減でき、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
　続いて、本実施形態に係る物体管理システム１の利用例について説明する。
＜備品管理＞
　備品を入れた複数の段ボール箱を倉庫などで保管する場合、携帯端末２のオペレータは、段ボール箱毎に、その表面に管理番号などを手書きし、その手書き文字を含む面をスマートフォン等の携帯端末２で撮影して、段ボール箱毎の登録データを登録データＤＢ３５２に登録する。このとき、各登録データの付属情報には、例えば各段ボール箱に格納した備品の種類や個数、格納日などを記載しておく。後日の備品確認時、オペレータは、内容物を確認したい段ボール箱の手書き文字部分を携帯端末２で撮影して照合することにより、段ボール箱を開けることなく格納物を確認することができる。
＜郵便の真贋判定＞
　送り主は、荷物を送る際に梱包の段ボール箱に手書きで署名（サイン）し、スマートフォン等の携帯端末２で手書き文字を含む面を撮影して、その段ボール箱に係る登録データを登録データＤＢ３５２に登録する。また、送り主は、当該段ボール箱を自宅の玄関先など所定の場所に置いておく。また、送り主は、登録データの付属情報には、例えば配送先の情報や荷物の中身などを記載しておく。郵便配達業者は、所定の場所に置かれた段ボール箱の手書き部分をスマートフォン等の携帯端末２で撮影して照合することにより、配達物の真贋と配送先などを確認し、配達する。
［第２の実施形態］
　本実施形態に係る物体管理システム１Ａは、携帯端末２の代わりに携帯端末２Ａを備え、サーバ３の代わりにサーバ３Ａを備える点で、第１の実施形態と相違し、それ以外は第１の実施形態と同じである。
　図８を参照すると、携帯端末２Ａは、携帯端末２と比較して、プログラム２５１の代わりにプログラム２５９を有し、登録手段２６１および照合手段２６２の代わりに登録手段２６３および照合手段２６４を有する点で相違する。演算処理部２６は、プログラム２５９を読み込んで実行することにより、登録手段２６３および照合手段２６４を実現する。
　登録手段２６３は、手書き文字が記載された登録対象の物体の面をカメラ２１で撮影した画像を取得するように構成されている。また、登録手段２６３は、登録対象の物体に関する付属情報を操作入力部２３経由で携帯端末２Ａのオペレータから取得するように構成されている。また登録手段２６３は、上記画像と上記付属情報とを含む登録要求を、通信Ｉ／Ｆ部２２を通じてサーバ３Ａへ送信するように構成されている。
　照合手段２６４は、手書き文字が記載された照合対象の物体の面をカメラ２１で撮影した画像を取得するように構成されている。また、照合手段２６４は、上記画像を含む照合要求を通信Ｉ／Ｆ部２２を通じてサーバ３Ａへ送信するように構成されている。また、照合手段２６４は、サーバ３Ａから照合要求の応答である判定結果を受信して画面表示部２４に表示し、または／および通信Ｉ／Ｆ部２２を通じて外部の装置へ出力するように構成されている。
　図９を参照すると、サーバ３Ａは、サーバ３と比較して、プログラム３５１の代わりに、登録画像３５３、付属情報３５Ａ、文字認識結果３５４、照合画像３５６、文字認識結果３５７、判定結果３５８、および、プログラム３５９を有し、ＤＢ管理手段３６１の代わりに、登録手段３６２および照合手段３６３を有する点で相違し、それ以外はサーバ３と同じである。演算処理部３６は、プログラム３５９を読み込んで実行することにより、登録手段３６２および照合手段３６３を実現する。
　登録手段３６２は、登録対象の物体の同一性を判定するための登録データを生成して登録データＤＢ３５２に登録するように構成されている。登録手段３６２は、取得部３６２１と文字認識部３６２２と登録部３６２３とを含んで構成されている。
　取得部３６２１は、手書き文字が記載された登録対象の物体の面を撮影して得られた画像と付属情報とを携帯端末２Ａから取得するように構成されている。また、取得部３６２１は、取得した画像から手書きされた文字を含む所定サイズの部分画像を切り出し、登録画像３５３として記憶部３５に保存するように構成されている。また、取得部３６２１は、取得した付属情報を、付属情報３５Ａとして記憶部３５に保存するように構成されている。
　文字認識部３６２２は、記憶部３５から登録画像３５３を読み出し、その登録画像３５３中の手書き文字を文字認識し、その文字認識結果３５４を記憶部３５に保存するように構成されている。
　登録部３６２３は、記憶部３５から登録画像３５３と付属情報３５Ａと文字認識結果３５４とを読み出すように構成されている。また、登録部３６２３は、この読み出した登録画像３５３又はその登録画像から抽出した登録特徴量である登録物体情報を生成するように構成されている。登録特徴量は、第１の実施形態と同じであってよい。また、登録部３６２３は、上記登録物体情報と文字認識結果２５３と付属情報３５Ａとを含む登録データを作成し、登録データＤＢ３５２に登録するように構成されている。
　照合手段３６３は、携帯端末２Ａから受信した照合対象物体に係る照合データが登録データＤＢ３５２に登録されている何れの登録データと同一か否かを判定するように構成されている。照合手段３６３は、取得部３６３１と文字認識部３６３２と抽出部３６３３と判定部３６３４とを含んで構成されている。
　取得部３６３１は、手書き文字が記載された照合対象の物体の面を撮影して得られた画像を携帯端末２Ａから取得するように構成されている。また、取得部３６２１は、取得した画像から手書き文字を含む所定サイズの部分画像を切り出し、照合画像３５６として記憶部３５に保存するように構成されている。
　文字認識部３６３２は、記憶部３５から照合画像３５６を読み出し、この照合画像３５６中の手書き文字を文字認識し、その文字認識結果３５７を記憶部３５に保存するように構成されている。
　抽出部３６３３は、登録データＤＢ３５２に登録された複数の登録データのうち、文字認識結果３５７に類似する登録文字認識結果を含む登録データを抽出するように構成されている。抽出部３６３３は、抽出した登録データを判定部３６３４へ伝達する。
　判定部３６３４は、記憶部３５から照合画像３５６を読み出し、この照合画像３５６又はその照合画像３５６から抽出した照合特徴量である照合物体情報を生成するように構成されている。照合特徴量は、登録特徴量と同じであってよい。また、判定部３６３４は、照合物体情報と抽出部３６３３から伝達された登録データに含まれる登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定するように構成されている。また、判定部３６３４は、照合対象物体が、何れかの登録対象物体と同一であると判定した場合、同一であると判定した登録対象物体の登録データに含まれる付属情報を含む判定結果３５８を作成し、記憶部３５に保存するように構成されている。また判定部３６３４は、照合対象物体が、何れの登録対象物体とも同一でないと判定した場合、同一の登録対象物体が存在しない旨の判定結果３５８を作成し、記憶部３５に保存するように構成されている。また判定部３６３４は、記憶部３５から判定結果３５８を読み出し、通信Ｉ／Ｆ部３２を通じて、照合対象物体の画像を送信してきた携帯端末２Ａへ送信するように構成されている。
　続いて、本実施形態に係る物体管理システム１Ａの動作を説明する。最初に登録動作を説明する。
　図１０は、登録動作の手順の一例を示すフローチャートである。先ず携帯端末２Ａのオペレータは、任意の筆記具を使用して登録対象の物体５の任意の面に文字を手書きする（ステップＳ２１）。次に、オペレータは、携帯端末２Ａを操作して、手書き文字を含む登録対象の物体５の面をほぼ真正面からカメラ２１で撮影する（ステップＳ２２）。次に、オペレータは、操作入力部２３から付属情報を入力する（ステップＳ２３）。次に、携帯端末２Ａの登録手段２６３は、上記画像と付属情報を含む登録要求を通信Ｉ／Ｆ部３２経由でサーバ３Ａへ送信する（ステップＳ２４）。
　サーバ３Ａの登録手段３６２の取得部３６２１は、携帯端末２Ａから送信された登録要求を受信し、それに含まれる登録対象物体の画像から生成した登録画像３５３および付属情報３５Ａを記憶部３５に保存する（ステップＳ２５）。次に、文字認識部３６２２は、登録画像３５３中の手書き文字を文字認識し、その文字認識結果３５４を通信Ｉ／Ｆ部３２を通じて送信して携帯端末２Ａの画面表示部２４に表示すると共に記憶部３５に保存する（ステップＳ２６）。次に、文字認識部３６２２は、携帯端末２のオペレータとの間の対話処理により文字認識結果を必要に応じて修正する（ステップＳ２７）。
　次に、サーバ３Ａの登録部３６２３は、登録画像３５３又はその登録画像から抽出した登録特徴量である登録物体情報を生成し、当該登録物体情報と文字認識結果３５４と付属情報３５Ａとを含む登録データを作成し、登録データＤＢ３５２に保存する（ステップＳ２８）。
　以上で、１つの登録対象物体に係る登録データが登録データＤＢ３５２に登録されたことになる。同じ携帯端末２のオペレータ、および、他の携帯端末２のオペレータは、他の登録対象物体に係る登録データを上記と同様の方法で登録データＤＢ３５２に登録することができる。
　次に照合動作を説明する。図１１は、照合動作の手順の一例を示すフローチャートである。先ず携帯端末２Ａのオペレータは、携帯端末２Ａを操作して、手書きされた文字を含む照合対象の物体５の面を好ましくは真正面からカメラ２１により撮影する（ステップＳ３１）。次に、携帯端末２Ａの照合手段２６４は、撮影された画像をカメラ２１から取得し、当該画像を含む照合要求を通信Ｉ／Ｆ部２２経由でサーバ３Ａへ送信する（ステップＳ３２）。
　サーバ３Ａの照合手段３６３の取得部３６３１は、照合要求を通信Ｉ／Ｆ部３２を通じて携帯端末２Ａから受信し、それに含まれる画像から手書きされた文字を含む部分画像を切り出し、照合画像３５６として記憶部３５に保存する（ステップＳ３３）。次に文字認識部３６３２は、照合画像３５６中の手書き文字を文字認識し、その文字認識結果３５７を記憶部３５に保存する（ステップＳ３４）。次に、抽出部３６３３は、登録データＤＢ３５２に保存された登録データ群から、文字認識結果３５７に類似する登録文字認識結果を含む登録データを抽出する（ステップＳ３５）。抽出部３６３３によって抽出された登録データ群は、判定部３６３４に渡される。
　次に、判定部３６３４は、照合画像３５６又は照合画像３５６から抽出した照合特徴量である照合物体情報を生成する（ステップＳ３６）。次に判定部３６３４は、抽出部３６３３から受け取った登録データ群中の登録データ毎の登録物体情報と照合物体情報とを用いた照合処理により、照合対象物体と登録対象物体の同一性を判定し、判定結果３５８を通信Ｉ／Ｆ部３２を通じて携帯端末２Ａへ送信する（ステップＳ３８）。
　携帯端末２Ａの照合手段２６４は、上記判定結果３５８を通信Ｉ／Ｆ部２２を通じて受信し、画面表示部２４に表示する（ステップＳ３９）。
　以上説明したように、サーバ３Ａは、登録時には、登録対象の物体毎に、手書き文字が記載された登録対象の物体の面を撮影した画像と付属情報とを携帯端末２Ａから取得し、その画像から生成した登録画像中の手書き文字を文字認識した登録文字認識結果と登録画像又は登録画像から抽出した登録特徴量である登録物体情報と付属情報とを対応付けた登録データを登録データＤＢ３５２に登録する。また、サーバ３Ａは、照合時には、手書き文字が記載された照合対象の物体の面を撮影した画像を携帯端末２Ａから取得し、その画像から生成した照合画像中の手書き文字を文字認識した照合文字認識結果に類似する登録文字認識結果を含む登録データを登録データＤＢ３５２から抽出する。次に、サーバ３Ａは、照合画像又は照合画像から抽出した照合特徴量である照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定し、その判定結果を携帯端末２Ａに送信する。その結果、サーバ３Ａは、照合画像と照合しなければならない登録画像の数を削減でき、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
［第３の実施の形態］
　次に本開示の第３の実施形態に係る物体管理装置について説明する。本実施形態では、本開示に係る画像照合機能を有する物体管理装置について説明する。
　図１２を参照すると、本実施形態に係る物体管理装置１０は、携帯端末またはサーバで構成され、取得手段１１と文字認識手段１２と抽出手段１３と判定手段１４とから構成されている。
　取得手段１１は、手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得するように構成されている。取得手段１１は、例えば、携帯端末２の取得部２６２１やサーバ３Ａの取得部３６３１で構成することができるが、それに限定されない。
　文字認識手段１２は、取得手段１１によって取得された照合画像中の手書き文字を文字認識した照合文字認識結果を出力するように構成されている。文字認識手段１２は、例えば、携帯端末２の文字認識部２６２２やサーバ３Ａの文字認識部３６３２で構成することができるが、それに限定されない。
　抽出手段１３は、登録対象の物体に係る登録画像または当該登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、文字認識手段１２から出力された照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出するように構成されている。抽出手段１３は、例えば、携帯端末２の抽出部２６２３やサーバ３Ａの抽出部３６３３で構成することができるが、それに限定されない。
　判定手段１４は、取得手段１１によって取得された照合画像又は当該照合画像から抽出した特徴量である照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定するように構成されている。判定手段１４は、例えば、携帯端末２の判定部２６２４やサーバ３Ａの判定部３６３４で構成することができるが、それに限定されない。
　このように構成された物体管理装置１０は、以下のように動作する。先ず、取得手段１１は、手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する。次に文字認識手段１２は、取得手段１１によって取得された照合画像中の手書き文字を文字認識した照合文字認識結果を出力する。次に抽出手段１３は、登録対象の物体に係る登録画像又はその登録画像から抽出された登録特徴量である登録物体情報と登録文字認識結果とを対応付けた記憶された複数の登録データから、文字認識手段１２から出力された照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する。次に判定手段１４は、取得手段１１によって取得された照合画像又は照合画像から抽出した特徴量である照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定する。
　以上のように構成され動作する物体管理装置１０によれば、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
［第４の実施の形態］
　次に本開示の第４の実施形態に係る物体管理装置について説明する。本実施形態では、本開示に係る画像登録機能を有する物体管理装置について説明する。
　図１３を参照すると、本実施形態に係る物体管理装置１５は、携帯端末またはサーバで構成され、取得手段１６と文字認識手段１７と登録手段１８とから構成されている。
　取得手段１６は、手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得するように構成されている。取得手段１６は、例えば、携帯端末２の取得部２６１１やサーバ３Ａの取得部３６２１で構成することができるが、それに限定されない。
　文字認識手段１７は、取得手段１６によって取得された登録画像中の手書き文字を文字認識した登録文字認識結果を出力するように構成されている。文字認識手段１７は、例えば、携帯端末２の文字認識部２６１２やサーバ３Ａの文字認識部３６２２で構成することができるが、それに限定されない。
　登録手段１８は、取得手段１６によって取得された登録画像又はその登録画像から抽出した登録特徴量である登録物体情報と文字認識手段１７から出力された登録文字認識結果とを対応付けた登録データを登録対象の物体の同一性を判定するためのデータとして生成するように構成されている。登録手段１８は、例えば、携帯端末２の登録部２１１３やサーバ３Ａの登録部３６２３で構成することができるが、それに限定されない。
　このように構成された物体管理装置１５は、以下のように動作する。先ず、取得手段１６は、手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する。次に文字認識手段１７は、取得手段１６によって取得された登録画像中の手書き文字を文字認識した登録文字認識結果を出力する。次に登録手段１８は、取得手段１６によって取得された登録画像又はその登録画像から抽出した登録特徴量である登録物体情報と文字認識手段１７から出力された登録文字認識結果とを対応付けた登録データを登録対象の物体の同一性を判定するためのデータとして生成する。
　以上のように構成され動作する物体管理装置１５によれば、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
［第５の実施の形態］
　次に本開示の第５の実施形態に係る物体管理システムについて説明する。本実施形態では、本開示に係る画像照合機能を有する物体管理システムについて説明する。
　図１４を参照すると、本実施形態に係る物体管理システム１０Ａは、携帯端末およびサーバを含むシステムで構成され、取得手段１１Ａと文字認識手段１２Ａと抽出手段１３Ａと判定手段１４Ａとから構成されている。
　取得手段１１Ａは、手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得するように構成されている。取得手段１１Ａは、例えば、携帯端末２の取得部２６２１又はサーバ３Ａの取得部３６３１で構成することができるが、それに限定されない。
　文字認識手段１２Ａは、取得手段１１Ａによって取得された照合画像中の手書き文字を文字認識した照合文字認識結果を出力するように構成されている。文字認識手段１２Ａは、例えば、携帯端末２の文字認識部２６２２又はサーバ３Ａの文字認識部３６３２で構成することができるが、それに限定されない。
　抽出手段１３Ａは、登録対象の物体に係る登録画像または当該登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、文字認識手段１２Ａから出力された照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出するように構成されている。抽出手段１３Ａは、例えば、携帯端末２の抽出部２６２３又はサーバ３Ａの抽出部３６３３で構成することができるが、それに限定されない。
　判定手段１４Ａは、取得手段１１Ａによって取得された照合画像又は当該照合画像から抽出した特徴量である照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定するように構成されている。判定手段１４Ａは、例えば、携帯端末２の判定部２６２４又はサーバ３Ａの判定部３６３４で構成することができるが、それに限定されない。
　このように構成された物体管理装置１０Ａは、以下のように動作する。先ず、取得手段１１Ａは、手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する。次に文字認識手段１２Ａは、取得手段１１Ａによって取得された照合画像中の手書き文字を文字認識した照合文字認識結果を出力する。次に抽出手段１３Ａは、登録対象の物体に係る登録画像又はその登録画像から抽出された登録特徴量である登録物体情報と登録文字認識結果とを対応付けた記憶された複数の登録データから、文字認識手段１２Ａから出力された照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する。次に判定手段１４Ａは、取得手段１１Ａによって取得された照合画像又は照合画像から抽出した特徴量である照合物体情報と上記抽出された登録データ中の登録物体情報とを用いた照合処理により、照合対象の物体と登録対象の物体との同一性を判定する。
　以上のように構成され動作する物体管理装置１０Ａによれば、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
［第６の実施の形態］
　次に本開示の第６の実施形態に係る物体管理システムについて説明する。本実施形態では、本開示に係る画像登録機能を有する物体管理システムについて説明する。
　図１５を参照すると、本実施形態に係る物体管理システム１５Ａは、携帯端末およびサーバを含むシステムで構成され、取得手段１６Ａと文字認識手段１７Ａと登録手段１８Ａとから構成されている。
　取得手段１６Ａは、手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得するように構成されている。取得手段１６Ａは、例えば、携帯端末２の取得部２６１１又はサーバ３Ａの取得部３６２１で構成することができるが、それに限定されない。
　文字認識手段１７Ａは、取得手段１６Ａによって取得された登録画像中の手書き文字を文字認識した登録文字認識結果を出力するように構成されている。文字認識手段１７Ａは、例えば、携帯端末２の文字認識部２６１２又はサーバ３Ａの文字認識部３６２２で構成することができるが、それに限定されない。
　登録手段１８Ａは、取得手段１６Ａによって取得された登録画像又はその登録画像から抽出した登録特徴量である登録物体情報と文字認識手段１７Ａから出力された登録文字認識結果とを対応付けた登録データを登録対象の物体の同一性を判定するためのデータとして生成するように構成されている。登録手段１８Ａは、例えば、携帯端末２の登録部２１１３又はサーバ３Ａの登録部３６２３で構成することができるが、それに限定されない。
　このように構成された物体管理システム１５Ａは、以下のように動作する。先ず、取得手段１６Ａは、手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する。次に文字認識手段１７Ａは、取得手段１６Ａによって取得された登録画像中の手書き文字を文字認識した登録文字認識結果を出力する。次に登録手段１８Ａは、取得手段１６Ａによって取得された登録画像又はその登録画像から抽出した登録特徴量である登録物体情報と文字認識手段１７Ａから出力された登録文字認識結果とを対応付けた登録データを登録対象の物体の同一性を判定するためのデータとして生成する。
　以上のように構成され動作する物体管理装置１５Ａによれば、照合画像と照合しなければならない登録画像の数を削減でき、その結果、照合画像に一致する登録画像を検出するための計算時間を短縮することができる。
［その他の実施形態］
　以上、上記各実施形態を参照して本開示を説明したが、本開示は、上述した実施形態に限定されるものではない。各実施形態は、適宜他の実施形態と組み合わせることができる。そして、本開示の構成や詳細には、本開示の範囲内で当業者が理解しうる様々な変更をすることができる。
　例えば、上記実施形態において、携帯端末２で実行した処理の一部をサーバ３で実行するように構成されていてよい。例えば、図５のステップＳ３、Ｓ４、Ｓ６、Ｓ７、図７のステップＳ１２、Ｓ１３、Ｓ１４、Ｓ１５、Ｓ１６、Ｓ１７の処理の一部および全部をサーバ３で実行するように構成してよい。
　また、上記実施形態において、サーバ３Ａで実行した処理の一部あるいは全部を携帯端末２Ａで実行するように構成されていてよい。例えば、図１０のステップＳ２６、Ｓ２７、Ｓ２８、図１１のステップＳ３４、Ｓ３５、Ｓ３６、Ｓ３７の処理の一部あるいは全部を携帯端末２Ａで実行するように構成してよい。
　また、上記実施形態では、登録対象の物体に係る登録データ中の登録物体情報と登録文字認識結果は、当該物体を撮影した同じ画像から抽出および認識されたものであったが、それらは当該物体を撮影した互いに相違する複数の画像からそれぞれ抽出および認識されたものであってもよい。その際、登録物体情報を抽出する画像は、手書き文字の全てが写っている画像である必要は必ずしもなく、手書き文字の所定の部分（例えば先頭の１文字あるいは２文字）を高画質（高解像度）で撮影した画像であってもよい。一方、文字認識する画像は、手書き文字の全てが写っている画像であれば、低画質（低解像度）で撮影した画像であってもよい。
　また、同様に、照合対象の物体に係る照合データ中の照合物体情報と照合文字認識結果は、当該物体を撮影した同じ画像から抽出および認識されたものであったが、それらは当該物体を撮影した互いに相違する複数の画像からそれぞれ抽出および認識されたものであってもよい。その際、照合物体情報を抽出する画像は、手書き文字の全てが写っている画像である必要は必ずしもなく、手書き文字の所定の部分（例えば先頭の１文字あるいは２文字）を高画質（高解像度）で撮影した画像であってもよい。一方、文字認識する画像は、手書き文字の全てが写っている画像であれば、低画質（低解像度）で撮影した画像であってもよい。
　また、上述したＣＰＵの代わりに、ＧＰＵ（Ｇｒａｐｈｉｃ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）、ＭＰＵ（Ｍｉｃｒｏ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＵ（Ｆｌｏａｔｉｎｇ　ｎｕｍｂｅｒ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＰＰＵ（（Ｐｈｙｓｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＴＰＵ（Ｔｅｎｓｏｒ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、量子プロセッサ、マイクロコントローラ、又は、これらの組み合わせなどを用いることができる。
　本開示は、出所表示、品質管理、または流通管理などのために、製品、商品、または宅配物などの物体の個体を管理する分野全般に利用できる。
　上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
［付記１］
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する第１の取得手段と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する第１の文字認識手段と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
を備える物体管理装置。
［付記２］
　前記第１の取得手段は、さらに、前記登録対象の物体に係る付属情報を取得し、
　前記登録データは、さらに、前記付属情報を含む、
付記１に記載の物体管理装置。
［付記３］
　前記登録手段は、さらに、前記登録データを記憶手段に書き込む、
付記２に記載の物体管理装置。
［付記４］
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する第２の取得手段と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する第２の文字認識手段と、
　記憶された複数の登録データから前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
　前記照合画像又は前記照合画像から抽出された特徴量である照合物体情報と前記抽出された前記登録データに含まれる前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、を更に備える、
付記３に記載の物体管理装置。
［付記５］
　前記判定手段は、さらに、前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する、
付記４に記載の物体管理装置。
［付記６］
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する第１の取得手段と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する第１の文字認識手段と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
を備える物体管理装置。
［付記７］
　前記登録データは、さらに付属情報を含み、
　前記判定手段は、さらに、前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する、
付記６に記載の物体管理装置。
［付記８］
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する第２の取得手段と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する第２の文字認識手段と、
　前記登録画像または前記登録画像から抽出した特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
をさらに備える付記６または７に記載の物体管理装置。
［付記９］
　コンピュータが、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得し、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力し、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する、
物体管理方法。
［付記１０］
　前記コンピュータが、さらに、
　前記登録対象の物体に係る付属情報を取得して、前記登録データに追加する、
付記９に記載の物体管理方法。
［付記１１］
　前記コンピュータが、さらに、
　前記登録データを記憶手段に書き込む、
付記１０に記載の物体管理方法。
［付記１２］
　前記コンピュータが、さらに、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得し、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力し、
　複数の登録データから前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出し、
　前記照合画像又は前記照合画像から抽出された特徴量である照合物体情報と前記抽出された前記登録データに含まれる前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する、
付記１１に記載の物体管理方法。
［付記１３］
　前記コンピュータが、さらに、
　前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する、
付記１２に記載の物体管理方法。
［付記１４］
　コンピュータが、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得し、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力し、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出し、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する、
物体管理方法。
［付記１５］
　前記登録データは、さらに付属情報を含み、
　前記コンピュータが、さらに、
　前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する、
付記１４に記載の物体管理方法。
［付記１６］
　前記コンピュータが、さらに、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得し、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力し、
　前記登録画像または前記登録画像から抽出した特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する、
付記１４または１５に記載の物体管理方法。
［付記１７］
　コンピュータに、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する処理と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する処理と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する処理と、
を行わせるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
［付記１８］
　前記コンピュータに、さらに、
　前記登録対象の物体に係る付属情報を取得して、前記登録データに追加する処理、
を行わせるためのプログラムを記録した付記１７に記載の記録媒体。
［付記１９］
　前記コンピュータに、さらに
　前記登録データを記憶手段に記憶する処理、
を行わせるためのプログラムを記録した付記１８に記載の記録媒体。
［付記２０］
　前記コンピュータに、さらに、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する処理と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する処理と、
　記憶された複数の登録データから前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する処理と、
　前記照合画像又は前記照合画像から抽出された特徴量である照合物体情報と前記抽出された前記登録データに含まれる前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する処理と、
を行わせるためのプログラムを記録した付記１９に記載の記録媒体。
［付記２１］
　前記コンピュータに、さらに、
　前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する処理、
を行わせるためのプログラムを記録した付記２０に記載の記録媒体。
［付記２２］
　コンピュータに、
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する処理と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する処理と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する処理と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する処理と、
を行わせるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
［付記２３］
　前記登録データは、さらに付属情報を含み、
　前記コンピュータに、さらに、
　前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する処理、
を行わせるためのプログラムを記録した付記２２に記載の記録媒体。
［付記２４］
　前記コンピュータに、さらに、
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する処理と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する処理と、
　前記登録画像または前記登録画像から抽出した特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する処理と、
を行わせるためのプログラムを記録した付記２２または２３に記載の記録媒体。
［付記２５］
　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する取得手段と、
　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する文字認識手段と、
　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
を備える物体管理システム。
［付記２６］
　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する取得手段と、
　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する文字認識手段と、
　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
を備える物体管理システム。
１　物体管理システム
２　携帯端末
２Ａ　携帯端末
４　ネットワーク
５　物体
１０　物体管理装置
１１　取得手段
１２　文字認識手段
１３　抽出手段
１４　判定手段
１５　物体管理装置
１６　取得手段
１７　文字認識手段
１８　登録手段
１０Ａ　物体管理装置
１１Ａ　取得手段
１２Ａ　文字認識手段
１３Ａ　抽出手段
１４Ａ　判定手段
１５Ａ　物体管理装置
１６Ａ　取得手段
１７Ａ　文字認識手段
１８Ａ　登録手段
２１　カメラ
２２　通信Ｉ／Ｆ部
２３　操作入力部
２４　画面表示部
２５　記憶部
２６　演算処理部
３１　カメラ
３２　通信Ｉ／Ｆ部
３３　操作入力部
３４　画面表示部
３５　記憶部
３６　演算処理部
２５１　プログラム
２５２　登録画像
２５３　文字認識結果
２５４　登録データ
２５５　照合画像
２５６　文字認識結果
２５７　判定結果
２５８　付属情報
２５９　プログラム
２５Ａ　付属情報
２６１　登録手段
２６２　照合手段
３５１　プログラム
３５２　登録データＤＢ
３５３　登録画像
３５４　文字認識結果
３５６　照合画像
３５７　文字認識結果
３５８　判定結果
３５９　プログラム
３５Ａ　付属情報
３６１　ＤＢ管理手段
３６２　登録手段
３６３　照合手段
２６１１　取得部
２６１２　文字認識部
２６１３　登録部
２６２１　取得部
２６２２　文字認識部
２６２３　抽出部
２６２４　判定部
３６２１　取得部
３６２２　文字認識部
３６２３　登録部
３６３１　取得部
３６３３　抽出部
３６３４　判定部

Claims (12)

  1. 　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する第１の取得手段と、
    　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する第１の文字認識手段と、
    　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
    を備える物体管理装置。
  2. 　前記第１の取得手段は、さらに、前記登録対象の物体に係る付属情報を取得し、
    　前記登録データは、さらに、前記付属情報を含む、
    請求項１に記載の物体管理装置。
  3. 　前記登録手段は、さらに、前記登録データを記憶手段に書き込む、
    請求項２に記載の物体管理装置。
  4. 　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する第２の取得手段と、
    　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する第２の文字認識手段と、
    　記憶された複数の登録データから前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
    　前記照合画像又は前記照合画像から抽出された特徴量である照合物体情報と前記抽出された前記登録データに含まれる前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、を更に備える、
    請求項３に記載の物体管理装置。
  5. 　前記判定手段は、さらに、前記照合対象の物体と同一であると判定した前記登録対象の物体に係る前記登録データに含まれる前記付属情報を出力する、
    請求項４に記載の物体管理装置。
  6. 　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する第１の取得手段と、
    　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する第１の文字認識手段と、
    　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
    　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
    を備える物体管理装置。
  7. 　コンピュータが、
    　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得し、
    　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力し、
    　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する、
    物体管理方法。
  8. 　コンピュータが、
    　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得し、
    　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力し、
    　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出し、
    　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する、
    物体管理方法。
  9. 　コンピュータに、
    　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する処理と、
    　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する処理と、
    　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する処理と、
    を行わせるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
  10. 　コンピュータに、
    　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する処理と、
    　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する処理と、
    　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する処理と、
    　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する処理と、
    を行わせるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
  11. 　手書き文字が記載された登録対象の物体の面を撮影した登録画像を取得する取得手段と、
    　前記登録画像中の前記手書き文字を文字認識した登録文字認識結果を出力する文字認識手段と、
    　前記登録画像又は前記登録画像から抽出された特徴量である登録物体情報と前記登録文字認識結果とを対応付けた登録データを前記登録対象の物体の同一性を判定するためのデータとして生成する登録手段と、
    を備える物体管理システム。
  12. 　手書き文字が記載された照合対象の物体の面を撮影した照合画像を取得する取得手段と、
    　前記照合画像中の前記手書き文字を文字認識した照合文字認識結果を出力する文字認識手段と、
    　登録対象の物体に係る登録画像または前記登録画像から抽出した特徴量である登録物体情報と登録文字認識結果とを含む記憶された複数の登録データから、前記照合文字認識結果に類似する登録文字認識結果を含む登録データを抽出する抽出手段と、
    　前記照合画像又は前記照合画像から抽出した特徴量である照合物体情報と前記抽出された登録データ中の前記登録物体情報とを用いた照合処理により、前記照合対象の物体と前記登録対象の物体との同一性を判定する判定手段と、
    を備える物体管理システム。
PCT/JP2023/020855 2023-06-05 2023-06-05 物体管理装置 Ceased WO2024252486A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2025525462A JPWO2024252486A1 (ja) 2023-06-05 2023-06-05
PCT/JP2023/020855 WO2024252486A1 (ja) 2023-06-05 2023-06-05 物体管理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2023/020855 WO2024252486A1 (ja) 2023-06-05 2023-06-05 物体管理装置

Publications (1)

Publication Number Publication Date
WO2024252486A1 true WO2024252486A1 (ja) 2024-12-12

Family

ID=93795296

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/020855 Ceased WO2024252486A1 (ja) 2023-06-05 2023-06-05 物体管理装置

Country Status (2)

Country Link
JP (1) JPWO2024252486A1 (ja)
WO (1) WO2024252486A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009184134A (ja) * 2008-02-04 2009-08-20 National Printing Bureau 不可視の識別情報入り印刷物とその印刷方法及びその印刷装置並びに該印刷物の真偽判定方法とその真偽判定装置
JP2017136845A (ja) * 2016-01-29 2017-08-10 昌栄印刷株式会社 有価証券印刷システム
WO2021166075A1 (ja) * 2020-02-18 2021-08-26 日本電気株式会社 配送管理サーバ

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009184134A (ja) * 2008-02-04 2009-08-20 National Printing Bureau 不可視の識別情報入り印刷物とその印刷方法及びその印刷装置並びに該印刷物の真偽判定方法とその真偽判定装置
JP2017136845A (ja) * 2016-01-29 2017-08-10 昌栄印刷株式会社 有価証券印刷システム
WO2021166075A1 (ja) * 2020-02-18 2021-08-26 日本電気株式会社 配送管理サーバ

Also Published As

Publication number Publication date
JPWO2024252486A1 (ja) 2024-12-12

Similar Documents

Publication Publication Date Title
US9785627B2 (en) Automated form fill-in via form retrieval
CN110210470B (zh) 商品信息图像识别系统
US20140233837A1 (en) Systems and methods for storing image properties for recreating an image
US20140036099A1 (en) Automated Scanning
CN112801099B (zh) 一种图像处理方法、装置、终端设备及介质
EP3786844B1 (en) Image processing system, image processing method, and program
US20210271857A1 (en) Method and apparatus for identity verification, electronic device, computer program, and storage medium
US20140233835A1 (en) Systems and methods for recreating an image using white space and check element capture
US20190384971A1 (en) System and method for optical character recognition
EP3796218B1 (en) Image processing system, image processing method, and program
US20210192200A1 (en) Image-processing device, image-processing method, and storage medium on which program is stored
CN112668580A (zh) 一种文本识别方法、文本识别装置及终端设备
US11482028B2 (en) Verification system, verification method, and information storage medium
CN104424472B (zh) 一种图像识别方法及用户终端
WO2024088291A1 (zh) 表单填充方法、装置、电子设备及介质
JP7197009B2 (ja) 物体管理システム
CN114359918A (zh) 提货单信息提取方法、装置及计算机设备
JP2008282094A (ja) 文字認識処理装置
JP5278093B2 (ja) 記事関連情報提供方法、装置、プログラム、記録媒体
JP4935459B2 (ja) 文字認識方法、文字認識プログラムおよび文字認識装置
CN111476090A (zh) 水印识别方法和装置
US20240362938A1 (en) Image processing system, image processing method, and program
US20250140010A1 (en) Image processing system, image processing method, and program
JP7037237B1 (ja) データ処理装置、データ処理方法及びプログラム
JP6850323B2 (ja) 情報処理装置、その制御方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23940593

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2025525462

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE