WO2018016494A1 - 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法 - Google Patents

在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法 Download PDF

Info

Publication number
WO2018016494A1
WO2018016494A1 PCT/JP2017/025985 JP2017025985W WO2018016494A1 WO 2018016494 A1 WO2018016494 A1 WO 2018016494A1 JP 2017025985 W JP2017025985 W JP 2017025985W WO 2018016494 A1 WO2018016494 A1 WO 2018016494A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
product
identification information
inventory
warehousing
Prior art date
Application number
PCT/JP2017/025985
Other languages
English (en)
French (fr)
Inventor
森　正人
Original Assignee
株式会社サンクレエ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社サンクレエ filed Critical 株式会社サンクレエ
Priority to US16/318,505 priority Critical patent/US11328250B2/en
Priority to JP2018528818A priority patent/JP7104948B2/ja
Publication of WO2018016494A1 publication Critical patent/WO2018016494A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G61/00—Use of pick-up or transfer devices or of manipulators for stacking or de-stacking articles not otherwise provided for
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/68—Food, e.g. fruit or vegetables

Definitions

  • the present invention relates to an inventory management server, an inventory management system, an inventory management program, and an inventory management method for managing inventory of products using photographs.
  • Japanese Patent Application Laid-Open No. 2000-242721 proposes an invention related to an ordering / dispensing management system that connects a web server center and a distribution system center to the Internet and manages the storage status and shipping status of goods (patent) Reference 1).
  • the web server center stores in advance information related to the inventory status of a product called a product master, and the product storage status is accessed by accessing the product master from a distribution system center or the like. It is possible to manage the shipping status.
  • Patent Document 1 has a problem that a product master must be created for each type of product. For this reason, for example, even if the product is the same, if the production area, product type, size, date of receipt, and expiration date are different, it is necessary to create a product master for each product, resulting in an enormous number of product masters. End up. Therefore, the work load and cost to be created, the subsequent management cost, etc. are very high, and cannot be easily introduced by small and medium-sized enterprises or individual business owners.
  • An object of the present invention is to provide an inventory management server, an inventory management system, an inventory management program, and an inventory management method that can be performed.
  • An inventory management server is an inventory management server for performing inventory management using product images in order to solve the problem of easily and inexpensively managing inventory without the need to create a product master.
  • the goods acquisition which acquires goods receipt data containing the goods basic picture which photoed goods to be stocked, the discernment information picture which photod identification information about the goods, the goods receipt quantity of the goods, and the goods receipt date A data acquisition unit; and an inventory data storage unit that stores the identification information image, the warehousing quantity and the warehousing date of the product as inventory data in association with the acquired product basic image.
  • a product image taken by taking a product to be delivered or a product similar to the product is described. Similar to determine an image similar to the outgoing product image by comparing the outgoing product image acquisition unit acquired from the user terminal, the acquired outgoing product image and the product basic image stored in the inventory data storage unit You may have an image discrimination
  • the identification information included in the identification information image is converted into text data by image analysis, and the identification information is converted into the product.
  • display control for causing the user terminal to display the inventory data in the inventory data storage unit as candidates for goods to be delivered And the number of taps or the number of clicks of the product basic image or the identification information image displayed on the user terminal is acquired as a delivery quantity, and the delivery quantity is associated with the product basic image as the inventory data.
  • the inventory data in the inventory data storage unit is displayed on the user terminal as candidates for outgoing products.
  • a display control unit for causing the user terminal to display a list display mode of all the product basic image and the identification information image, and the product basic image or the identification information image. Any one of them may be displayed on the user terminal, and each time a displayed image is tapped or swiped, a switching display mode for switching to another image may be provided.
  • a product basic image or an identification information image is transmitted to a user terminal in order to solve the problem of managing the time limit of a product using an image for identifying the product
  • the inventory data in the inventory data storage unit is used as a candidate for outgoing products.
  • the display control unit to be displayed on the user terminal, the output quantity of the product displayed on the user terminal and the sales unit price of the product are acquired from the user terminal, and the inventory data storage unit is associated with the product basic image. You may make it have a sales management part to memorize.
  • the identification information image of the product to be ordered and the order quantity of the product are You may make it have an order management part which acquires from the said user terminal, matches the said identification information image, and memorize
  • the warehousing data acquisition is performed in order to solve the problem of performing a warehousing process for each product or the like in one operation using an image obtained by photographing a plurality of types of products or a plurality of identification information.
  • the product basic image or the identification information image acquired by the department includes a plurality of types of products or a plurality of identification information
  • the product for each product type from the product basic image or the identification information image by image analysis You may make it have the goods goods image extraction part which extracts a basic image or the said identification information image.
  • the delivery product image acquisition unit acquires the in the case where a plurality of types of products are included in the outgoing product image, an outgoing product image extraction unit that extracts the outgoing product image for each product type from the outgoing product image by image analysis may be provided.
  • the inventory management system includes the inventory management server, and a user terminal that executes a warehousing process for warehousing goods into the inventory management server and a warehousing process for delivering goods from the inventory management server.
  • An inventory management program is an inventory management program for performing inventory management using an image of a product, and is a product basic image obtained by photographing a product to be received, and an identification information image obtained by photographing identification information relating to the product.
  • a warehousing data acquisition unit that acquires warehousing data including a warehousing quantity of the product and a warehousing date of the product from a user terminal, the identification information image associated with the acquired product basic image,
  • the computer is caused to function as an inventory data storage unit that stores the quantity and date of receipt as inventory data.
  • An inventory management method is an inventory management method for performing inventory management using an image of a product, and is a product basic image obtained by photographing a product to be received, and an identification information image obtained by photographing identification information relating to the product.
  • a stock data storing step for storing the stock quantity and the stock date as stock data.
  • FIG. 1 is a conceptual diagram showing an embodiment of an inventory management system according to the present invention. It is a block diagram which shows the inventory management system of this embodiment. It is an image figure of the inventory data memorize
  • FIG. 5 is a diagram illustrating frames from N ⁇ 2 frames to N + 2 frames in a product basic image or a leaving product image made up of moving images of “potato” and “carrot” in the present embodiment. It is a flowchart which shows the warehousing process in this embodiment. It is a figure which shows the warehousing process screen of the user terminal in this embodiment.
  • the inventory management system 1 of the present embodiment includes a user terminal 2, a contractor terminal 3, and an inventory that performs inventory management of products based on various data input by the user terminal 2. And a management server 4.
  • a user terminal 2 As shown in FIG. 1 and FIG. 2, the inventory management system 1 of the present embodiment includes a user terminal 2, a contractor terminal 3, and an inventory that performs inventory management of products based on various data input by the user terminal 2. And a management server 4.
  • a management server 4 a management server 4.
  • the user terminal 2 of this embodiment is an information terminal for accessing the inventory management server 4 via the Internet and performing a warehousing process, a warehousing process, an inventory confirmation process, a sales process, an ordering process, and the like.
  • a smartphone is exemplified.
  • the user terminal 2 according to the present embodiment includes a photographing unit 21, a display unit 22, and an input unit 23.
  • the photographing means 21 is for photographing a commodity basic image and identification information image used for commodity inventory management, an outgoing commodity image for searching for the commodity, and is configured by a digital camera function, for example.
  • the product basic image, the identification information image, and the outgoing product image photographed by the photographing unit 21 may be either a still image or a moving image.
  • the display unit 22 displays a basic product image, an identification information image, and the like when performing various processes related to inventory management, and is configured by a liquid crystal display or the like.
  • the display means 22 in the user terminal 2 is constituted by a touch panel type liquid crystal display and also serves as the input means 23.
  • the input means 23 is for operating the user terminal 2 and is constituted by a touch panel, a keyboard, a mouse, and the like.
  • the contractor terminal 3 is an information terminal for accessing the inventory management server 4 via the Internet and acquiring ordering information, and is exemplified by a desktop PC and a notebook PC.
  • the inventory management server 4 is for acquiring inventory data, delivery data, and ordering data input by the user terminal 2 to perform inventory management. As shown in FIG.
  • the storage unit 5 stores various data and the like, and the arithmetic processing unit 6 acquires various data from the storage unit 5 and the user terminal 2 and executes arithmetic processing.
  • the storage means 5 is composed of ROM, RAM, hard disk, flash memory, etc., and stores various data and functions as a working area when the arithmetic processing means 6 executes arithmetic operations.
  • the storage means 5 in the present embodiment mainly includes a program storage unit 51 for storing the inventory management program 4a, an inventory data storage unit 52 for storing product warehousing data, shipping data, and the like, and for ordering products. It has an order data storage unit 53 that stores order data, and a unit price storage unit 54 that stores a sales unit price and an order unit price.
  • the inventory management program 4a of this embodiment is installed in the program storage unit 51. Then, the arithmetic processing means 6 executes the inventory management program 4a and functions as each component described later, thereby causing a computer or the like to function as the inventory management server 4.
  • the usage form of the inventory management program 4a is not limited to the above configuration.
  • the inventory management program 4a may be stored in a computer-readable non-transitory recording medium such as a CD-ROM or USB memory, and read directly from the recording medium and executed.
  • the inventory data storage unit 52 mainly includes the goods basic image, the identification information image, the goods receipt quantity, the goods receipt date, the goods expiration date, and other identification information obtained by the goods receipt process, the goods output quantity obtained by the goods delivery process, and the like.
  • the delivery data having the unit sales price is stored as inventory data.
  • the inventory data storage unit 52 in the present embodiment includes a processing category, a slip number, a date, a basic product image, a first identification information image, a second identification information image, a quantity, a unit, a shelf life, a finish date.
  • Various data associated with the product basic image such as an entry, a sales unit price, a category, and a remark, are stored.
  • the processing classification is for classifying whether the data is input by the warehousing process or the warehousing process.
  • 0 is the warehousing data input by the warehousing process
  • 1 Are managed as the outgoing data input by the outgoing processing.
  • the order data storage unit 53 stores the product identification information image and the order quantity of the product related to the identification information image.
  • the order quantity, the order unit price, and other identification information are stored in association with the identification information image.
  • the unit price storage unit 54 stores the unit sales price and the order unit price.
  • the unit price storage unit 54 stores the unit sales price and the order unit price associated with the product in association with the product basic image, the product category, and the like.
  • the arithmetic processing means 6 in the inventory management server 4 is composed of a CPU (Central Processing Unit) and the like.
  • the computer as the server 4 includes a warehousing data acquisition unit 61, an outgoing product image acquisition unit 62, a similar image determination unit 63, a display control unit 64, an identification information text processing unit 65, a quantity management unit 66, a time limit management unit 67, and sales management.
  • the warehousing data acquisition unit 61 acquires the warehousing data of the goods to be received input by the user terminal 2 and stores the warehousing data in the inventory data storage unit 52 as inventory data.
  • the user terminal 2 acquires warehousing data including an identification information image obtained by photographing the identification information related to the product, the warehousing quantity of the product, the warehousing date of the product, and the like.
  • the product basic image and the identification information image acquired at this time may be either a still image or a moving image.
  • two images of the first identification information image and the second identification information image are acquired as the identification information image.
  • detailed data such as the supplier of the product and the category of the product input by the user terminal 2 are acquired together with basic warehousing data.
  • file name of the product basic image is not limited to an automatically assigned file name, and may be appropriately selected from arbitrary numbers, text data, or the like input at the user terminal 2.
  • the outgoing product image acquisition unit 62 is for acquiring an image used when searching for a product to be delivered from the inventory data stored in the inventory data storage unit 52 in the similar image determination unit 63 described below.
  • a delivery product image obtained by photographing a product to be delivered or a product similar to the product is acquired from the user terminal 2.
  • the outgoing product image may be a product photographed by the photographing means 21 of the user terminal 2 or an image similar to the product, or an image similar to a product retrieved using a browser connected to the Internet. There may be. Further, the outgoing product image may be either a still image or a moving image.
  • the display control unit 64 has a function of causing the user terminal 2 to display a predetermined screen in response to the access of the user terminal 2, and a login screen and a main screen are displayed on the user terminal 2 as shown in FIGS. Data to be displayed on the user terminal 2 is transmitted to the user terminal 2.
  • the display control unit 64 displays, for example, the inventory data related to the product basic image determined to be similar to the output product image by the similar image determination unit 63 on the user terminal 2 as the output product candidate.
  • the inventory data in the inventory data storage unit 52 is displayed on the user terminal 2 as needed.
  • the switching display mode is a mode in which each image stored in the inventory data is displayed in a large size for easy viewing. As shown in FIG. 7, either one of the product basic image or the identification information image is displayed on the user terminal 2. It is like that. At this time, as shown in FIG. 8, every time a displayed image is tapped or swiped, it is switched to another image.
  • the identification information text processing unit 65 is for inputting text data related to the identification information without using an input means such as a keyboard.
  • the identification information included in the identification information image is converted into text by image analysis using the AI function.
  • the data is converted into data, and the identification information is stored as the inventory data in the inventory data storage unit 52.
  • the date of the expiration date of the product included in the second identification information image is converted into text data by image analysis, and stored in the item of the expiration date in the inventory data storage unit 52.
  • the quantity management unit 66 mainly obtains the outgoing quantity input at the user terminal 2 and stores it in the inventory data storage part 52.
  • the outgoing quantity can be input by three input methods. It has become.
  • the second input method is a method of displaying a table in which numerical values are entered in advance and selecting an arbitrary numerical value from the table.
  • these three input methods can be arbitrarily selected.
  • the method of acquiring the delivery quantity is not limited to the method of obtaining the quantity input by the input unit 23 of the user terminal 2.
  • the quantity of goods included in the delivery product image is equal to the delivery quantity.
  • the outgoing product image extraction unit 71 may perform image analysis on the outgoing product image to obtain the outgoing quantity for each product type.
  • the quantity management unit 66 calculates the inventory quantity by subtracting the delivery quantity from the receipt quantity.
  • the inventory quantity is calculated when the inventory data is displayed on the user terminal 2.
  • timing for calculating the inventory quantity is not limited to displaying the inventory data on the user terminal 2, but may be calculated when the delivery quantity is acquired. Further, the calculated inventory quantity may be stored in the inventory data storage unit 52 as inventory data.
  • the time limit management unit 67 is for informing that the time limit of the product is approaching, and when the product basic image or the identification information image is transmitted to the user terminal 2 as inventory data, the predetermined time set for the product. When the expiration date of the item is approaching, it is displayed on the product basic image or the identification information image in the user terminal 2 in a superimposed manner.
  • the upper left corner of the product basic image or the identification information image is a predetermined number of days before the expiration date stored as the expiration date of the product, for example, a period from the expiration date to 7 days before the expiration date.
  • Yellow triangles are displayed at the positions indicated by broken lines at the corners, and red triangles are displayed at the same positions on the product basic image or the identification information image when the expiration date has passed.
  • the triangular display may be overlaid so as to hide the image, or may be overlaid.
  • the shape and color of the display superimposed on the screen when displaying the deadline is not particularly limited, so as not to hinder the visibility of the product included in the product basic image and the identification information included in the identification information image. You may select suitably from various shapes, colors, etc.
  • the sales management unit 68 is for making the inventory management server 4 available as a server for a point-of-sale information management (Point Of Sale: POS) system.
  • the sales management unit 68 acquires the output quantity of the product displayed on the user terminal 2 from the user terminal 2 or the output product image extraction unit 71, and calculates the sales unit price of the product from the user terminal 2 or the inventory management server. 4 unit price storage unit 54.
  • storage part 54 it acquires by image analysis or a text search about the goods basic image and category memorize
  • the sales management unit 68 stores the acquired delivery quantity and sales unit price in the inventory data storage unit 52 in association with the product basic image.
  • the unit sales price is input when the output quantity is input in the user terminal 2.
  • the input of the unit sales price is not limited to the input of the quantity to be shipped, and may be input by including it in the warehousing data at the time of warehousing.
  • the order management unit 69 is for performing an ordering process for placing an order for a product to be replenished when the number of products is reduced.
  • the order management unit 69 acquires the identification information image of the product to be ordered from the user terminal 2, and acquires the order quantity of the product from the user terminal 2 or the warehousing product image extraction unit 70. Further, the order management unit 69 in the present embodiment acquires the order unit price for the product by performing image analysis or text search on the product basic image and category stored in correspondence with the product ordered from the unit price storage unit 54. . Then, the order management unit 69 stores the acquired order quantity and the order unit price in the order data storage unit 53 as order data in association with the identification information image.
  • the identification information image taken at the user terminal 2 at the time of the ordering process, the order quantity input at the user terminal 2 and the order unit price obtained by image analysis and text search are acquired from the unit price storage unit 54. It has become.
  • the identification information image is not limited to the one photographed at the time of the ordering process, and may be an identification information image transmitted for display on the user terminal 2 by the display control means 64.
  • the warehousing product image extraction unit 70 performs image analysis to analyze the product basic image or the product information.
  • the product basic image or the identification information image for each product type is extracted from the identification information image.
  • the warehousing product image extraction unit 70 according to the present embodiment includes a plurality of types of products or a plurality of products in the product basic image or the identification information image acquired by the warehousing data acquisition unit 61 by image analysis based on an image recognition technique using an AI function. It is determined whether or not identification information is included, and when it is determined that a plurality of types of products or a plurality of identification information is included, the product basic image or the identification information image for each product type is determined by image analysis. It comes to extract.
  • the product basic image or the identification information image acquired by the warehousing data acquisition unit 61 may be either a still image or a moving image.
  • the warehousing product image extraction unit 70 includes a plurality of types of products (“potato” and “ Carrot ”) is extracted for each product type by image analysis using the AI function.
  • the product basic image acquired by the warehousing data acquisition unit 61 is a moving image
  • a plurality of types of products (“potato”) included in the moving image are analyzed by performing image analysis on the frame images constituting the moving image.
  • the N frame image indicating the Nth frame image includes “potato” and “carrot”
  • the N-2 frame image includes “potato” and the N + 2 frame image includes “carrot”
  • the N-2 frame image and the N + 2 frame image are subjected to image analysis for each product type. Products can be extracted.
  • the warehousing product image extraction unit 70 in the present embodiment can extract the quantity for each product type by image analysis. For example, when the still image or moving image shown in FIG. 10 or FIG. 11 is image-analyzed. Can extract that the quantity of “potato” is two and the quantity of “carrot” is one.
  • the identification information image When the identification information image acquired by the warehousing data acquisition unit 61 is a still image, a plurality of identification information included in the identification information image can be extracted by image analysis. Moreover, when the identification information image acquired by the warehousing data acquisition unit 61 is a moving image, the identification information can be extracted by performing image analysis for each frame image constituting the moving image.
  • the warehousing product image extraction unit 70 extracts the product basic image and the identification information image from one still image or one moving image. Can be extracted.
  • the warehousing product image extraction unit 70 in the present embodiment performs an extraction process after determining whether or not a product basic image or an identification information image includes a plurality of types of products or a plurality of identification information.
  • the present invention is not limited to this.
  • the user inputs whether or not a plurality of types of products or a plurality of pieces of identification information are included in each image via the user terminal 2 in advance.
  • the extraction process may be executed when input.
  • the outgoing product image extraction unit 71 when the outgoing product image acquired by the outgoing product image acquisition unit 62 includes a plurality of types of products, analyzes the outgoing product image for each product type from the outgoing product image by image analysis. To extract.
  • the outgoing product image extraction unit 71 in the present embodiment includes a plurality of types of products included in the outgoing product image acquired by the outgoing product image acquisition unit 62 through image analysis based on an image recognition technique using an AI function. When it is determined that a plurality of types of products are included, the outgoing product image for each product type is extracted by image analysis.
  • the outgoing product image acquired by the outgoing product image extraction unit 71 may be either a still image or a moving image, similar to the basic product image or the identification information image in the incoming product image extraction unit 70. Therefore, as shown in FIG. 10, when the outgoing product image acquired by the outgoing product image acquisition unit 62 is a still image, the outgoing product image extraction unit 71 selects a plurality of types of products (“potato” as included in the outgoing product image). "Carrot”) can be extracted for each product type by image analysis. In addition, as shown in FIG. 11, when the outgoing product image acquired by the outgoing product image acquisition unit 62 is a moving image, the frame images constituting the moving image are subjected to image analysis, so that a plurality of types of products (“potato” ”And“ carrot ”).
  • the outgoing product image extraction unit 71 in the present embodiment can extract the quantity for each product type by image analysis, similarly to the incoming product image extraction unit 70, and for example, as shown in FIG. 10 or FIG.
  • image analysis similarly to the incoming product image extraction unit 70, and for example, as shown in FIG. 10 or FIG.
  • it can be extracted that the number of “potatoes” is two and the number of “carrots” is one.
  • outgoing product image extraction unit 71 may execute the extraction process when it is input via the user terminal 2 that the outgoing product image includes multiple types of products.
  • the user terminal 2 accesses the inventory management server 4 to display the login screen shown in FIG. 4, and logs in by entering the login ID and password (S1). .
  • the display unit 22 displays a main screen on which one of the entry process, the exit process, the inventory confirmation process, the sales process, and the order process can be selected.
  • the warehousing process screen is displayed as shown in FIG. 13 (S2).
  • the product to be stored is photographed by the photographing means 21 (S3).
  • the photographing means 21 of the user terminal 2 is activated to photograph “potato” as a product.
  • a still image or a moving image including a plurality of types of products for example, “potato” and “carrot”.
  • the user terminal 2 captures identification information about the product (S4). Touching another camera-shaped icon different from that at the time of shooting the basic product image displayed on the warehousing process screen, the shooting means 21 is activated and shooting is performed.
  • a portion in which the production area, product type, and the like are described is photographed as a first identification information image as a still image or a moving image.
  • the camera unit 21 is activated by touching the third camera-shaped icon, and a portion where the expiration date of the product is written is taken as a second identification information image as a still image or a moving image.
  • the first identification information image and the second identification information image may be photographed as one still image
  • the first identification information image and the second identification information image may be photographed as one moving image.
  • the user terminal 2 uses the input means 23 to input the quantity of goods received (S5).
  • touching the triangular icon displayed next to the description of “quantity” on the warehousing process screen displays a number table as shown in FIG. select.
  • Touching the triangular icon displayed next to “Unit” displays a unit table such as “Kg”, “Piece”, “Box”, etc., from which a unit related to the quantity is selected. .
  • the warehousing quantity is input for each product type.
  • the input of the numerical value and the unit related to the warehousing quantity is not limited to the method of selecting from the table, and may be input using a keyboard or the like.
  • the user terminal 2 arbitrarily inputs other identification information (S6).
  • a supplier and a category for enabling search by an arbitrarily assigned category are input.
  • “potato” is selected as the category.
  • the user terminal 2 uses the product management basic image, the first identification information image, the second identification information image, the warehousing quantity, the warehousing date, the supplier and the category as the warehousing data. (S7).
  • the transmission process is performed by touching an area described as “registration” displayed on the warehousing process screen.
  • the inventory management program 4 a stored in the program storage unit 51 is executed by the arithmetic processing unit 6 when accessed from the user terminal 2.
  • the display control unit 64 transmits a login screen, a main screen, and a warehousing process screen to the user terminal 2 every time access from the user terminal 2, login, and warehousing process is selected. .
  • the warehousing data acquisition unit 61 acquires warehousing data from the user terminal 2 (S8: warehousing data acquisition step).
  • the product basic image, the first identification information image, the second identification information image, the warehousing quantity, the warehousing date, the supplier, and the category are acquired.
  • the warehousing product image extraction unit 70 determines whether or not the product basic image or the identification information image includes a plurality of types of products or a plurality of identification information by image analysis (S9). If the product basic image or the identification information image acquired by the warehousing data acquisition unit 61 is a still image, it is determined whether or not a plurality of types of products or a plurality of identification information are included in the still image. In addition, when the product basic image or the identification information image acquired by the warehousing data acquisition unit 61 is a moving image, a plurality of types of products or a plurality of identification information are included in the moving image by performing image analysis on arbitrary frame images constituting the moving image. Whether or not is included is determined.
  • the product basic image or the identification information image includes a plurality of types of products or a plurality of identification information (S9: YES)
  • the product basic image or the identification information image for each product type is extracted by image analysis.
  • S10 Warehousing product image extraction step. Then, although not shown in the flowchart of FIG. 12, in the subsequent steps S11 to S13, the processing of each step is executed for each extracted product basic image or each identification information image.
  • the process proceeds to the next step S11.
  • the goods receipt image image extraction part 70 carries out image analysis of the said goods basic image. The quantity for each product type is extracted, and the quantity is acquired as the quantity received for each product.
  • the identification information text processing unit 65 converts the identification information included in the identification information image into text data by image analysis (S11).
  • the expiration date is reflected as identification information in the second identification information image
  • the expiration date is converted into text data.
  • the extracted identification information images are converted into text data.
  • the warehousing data obtaining unit 61 sets a number automatically assigned by incrementing a predetermined number for each product as an arbitrary file name (S12).
  • “1001” is assigned, and the file names of the product basic image, the first identification information image, and the second identification information image are set to “1001_1”, “1001_2”, and “1001_3” respectively, along with other warehousing data.
  • It is stored in the inventory data storage unit 52 (S13: inventory data storage step).
  • the stock data storage unit 52 also stores the above-mentioned “1001” which is the file name of the product basic image as the expiration date and the slip number converted into text data by the identification information text processing unit 65.
  • the stock data storage unit 52 stores the extracted product types for each product type.
  • processing classification, slip number, date, product basic image, first identification information image, second identification information image, quantity, unit, expiration date, supplier and category Each data is stored in the item.
  • This warehousing process is performed for each product.
  • the warehousing process is performed continuously for each product, or the warehousing process is performed by photographing a product basic image including a plurality of types of products.
  • the user terminal 2 is logged off from the inventory management server 4 by moving to the main screen and selecting log off. With the logoff, the execution of the inventory management program 4a in the inventory management server 4 ends.
  • the delivery process Next, the delivery process will be described.
  • the user terminal 2 accesses the inventory management server 4 and logs in as in the entry process (S21). Then, by selecting the exit process on the main screen, as shown in FIG. 16, the process moves to the exit process screen (S22).
  • the user terminal 2 information for searching for a product to be issued is input.
  • a search is performed using the similar image determination unit 63 of the inventory management server 4
  • a product to be delivered or a product similar to the product is photographed with a still image or a moving image and acquired as a delivery product image (S23).
  • the shooting unit 21 of the user terminal 2 is activated by touching an icon imitating the shape of a camera on the shipping process screen, and the product to be shipped, in this embodiment, the image of “potato” is captured.
  • a still image or a moving image including a plurality of types of products for example, “potato” and “carrot”.
  • the potato to be photographed at this time only needs to be able to specify the goods received in the inventory management server 4.
  • the outgoing product image is not limited to the photographed image, and may be a still image or a moving image searched on the Internet.
  • the user terminal 2 transmits the acquired delivery product image to the inventory management server 4 (S24).
  • the outgoing product image is transmitted to the inventory management server 4 by selecting registration of the outgoing processing screen.
  • the inventory management program 4 a stored in the program storage unit 51 is executed by the arithmetic processing means 6 by being accessed from the user terminal 2, similarly to the warehousing process.
  • the outgoing product image acquisition unit 62 acquires the outgoing product image transmitted from the user terminal 2 (S25: outgoing product image acquisition step).
  • the outgoing product image extraction unit 71 determines whether or not multiple types of products are included in the outgoing product image by image analysis (S26).
  • the outgoing product image acquired by the outgoing product image acquisition unit 62 is a still image, it is determined whether or not a plurality of types of products are included in the still image.
  • the outgoing product image acquired by the outgoing product image acquisition unit 62 is a moving image, it is determined whether or not a plurality of types of products are included in the moving image by performing image analysis on each frame image.
  • the outgoing product image includes a plurality of types of products or a plurality of identification information (S26: YES)
  • the outgoing product image for each product type is extracted by image analysis (S27: outgoing product image extraction). Step).
  • the processing of each step is executed for each extracted outgoing product image.
  • the outgoing product image extraction unit 71 performs image analysis on the outgoing product image and extracts the quantity for each product type.
  • the quantity may be acquired as a delivery quantity for each product.
  • the similar image discriminating unit 63 compares the delivered product image with the product basic image stored in the inventory data storage unit 52 to discriminate whether or not they are similar (S28: similar image discriminating step).
  • the outgoing product image is an image of the outgoing product or a product similar to the outgoing product image
  • the stock data corresponding to the basic product image determined to be similar to the outgoing product image is It is highly possible that this is inventory data for the product to be sold.
  • the display control unit 64 transmits the inventory data corresponding to the basic product image determined to be similar to the outgoing product image to the user terminal 2 for display as the outgoing product candidate (S29). At this time, when a plurality of types of outgoing product images are extracted in the outgoing product image extraction unit 71, inventory data corresponding to the basic product image is transmitted for each extracted product type.
  • the user terminal 2 obtains inventory data of candidates for outgoing products (S30) and displays them on the display means 22 together with the product basic image or the identification information image (S31).
  • S30 inventory data of candidates for outgoing products
  • S31 product basic image or the identification information image
  • each stock data is displayed so that it can be listed.
  • the goods basic image and the identification information image are displayed with the warehousing date and the quantity of the goods overlaid.
  • a product for which a delivery process is performed is selected from the delivery product candidates displayed on the display unit 22.
  • the product basic image or the identification information image displayed on the display unit 22 is selected by long pressing. Then, as shown in FIG. 17, the product basic image or the identification information image of the selected inventory data is enlarged so that only the inventory data is displayed. At this time, by swiping the displayed image, it is possible to switch to another image as shown in FIG. 8 and to confirm the product by the identification information image or the like.
  • the user terminal 2 inputs the outgoing quantity of outgoing goods (S32).
  • the numerical value related to the quantity of the product is decremented according to the number of taps of the displayed product basic image or identification information image.
  • the quantity of the decremented product is displayed by being overlaid on the product basic image or the identification information image.
  • the outgoing quantity is transmitted to the inventory management server 4 (S33).
  • the transmission process is performed by touching an area described as “registration” displayed on the output quantity input screen, as in the case of transmission of warehousing data in the warehousing process.
  • the inventory management server 4 acquires the output quantity transmitted from the user terminal 2 (S34). In the case where the quantity of goods included in the outgoing product image matches the outgoing quantity, and the outgoing product image extraction unit 71 performs image analysis on the outgoing product image and acquires the outgoing quantity for each product type.
  • the steps (S32 to S34) relating to the input of the outgoing quantity by the user terminal 2 relating to the outgoing quantity and the acquisition of the outgoing quantity by the inventory management server 4 can be omitted.
  • the quantity management unit 66 acquires the number of taps as a delivery quantity, and stores the delivery quantity and delivery date in the inventory data storage unit 52 as inventory data in association with the product basic image (S35).
  • the inventory data storage unit 52 stores the data so as to be arranged in the warehousing data corresponding to the slip number stored as the file name of the product basic image.
  • the storage is appropriately stored so as to be continuous with the previous delivery data.
  • the user terminal 2 is logged off from the inventory management server 4 by moving to the main screen and selecting log off, and the execution of the inventory management program 4a in the inventory management server 4 is also terminated.
  • the inventory check process is a process of displaying the inventory data on the user terminal 2 so that the inventory quantity, the expiration date, etc. of the product can be confirmed mainly in order to determine the order in which the products are issued and the necessity of the ordering process. .
  • the user terminal 2 accesses the inventory management server 4 and logs in as in the warehousing process and the warehousing process (S41). Then, by selecting the inventory confirmation processing on the main screen, the screen moves to the inventory confirmation processing screen as shown in FIG. 21 (S42).
  • the user terminal 2 inputs information for searching for a product for which inventory check processing is performed (S43).
  • a category is input as identification information
  • a table of selectable categories is displayed by touching a triangular icon displayed beside the description of “category” on the inventory confirmation processing screen.
  • “potato” in the category may be selected.
  • identification information described above may be a leaving product image made up of a still image or a moving image as in the case of the leaving process, or may be other identification information such as a supplier and a receiving date.
  • the user terminal 2 transmits the input identification information to the inventory management server 4 (S44).
  • identification information is transmitted to the inventory management server 4 by selecting registration on the inventory confirmation processing screen.
  • the inventory management server 4 acquires product identification information (S45), and searches inventory data that matches the identification information from the inventory data (S46).
  • the identification information is an outgoing product image
  • inventory data may be searched by comparing the outgoing product image and the basic product image, as in the outgoing processing.
  • the outgoing product image for each product type is extracted from the outgoing product image by image analysis and then compared with the basic product image for each outgoing product image Then, inventory data may be searched.
  • the quantity management unit 66 calculates the inventory quantity of the retrieved inventory data (S47). Specifically, as shown in FIG. 18, the inventory data stored in the inventory data storage unit 52 is calculated by subtracting the outgoing quantity stored in the outgoing process from the incoming quantity stored in the incoming process.
  • the time limit management unit 67 determines whether or not the time limit of the retrieved inventory data has approached the set predetermined time limit, and if it is within the predetermined time limit, it is indicated on the product basic image and the identification information image. A message to that effect is superimposed (S48). In the present embodiment, when the stock confirmation processing date is 8 days or more before the product expiration date, the product basic image and the identification information image are not processed.
  • the yellow triangle is displayed on the upper left corner of the product basic image or the identification information image. Further, when the processing date has passed the expiration date, a red triangle display is superimposed on the upper left corner of the product basic image or the identification information image.
  • expiration date management such as the expiration date can be performed.
  • a list display mode is transmitted to the user terminal 2 as an initial display of inventory data (S49).
  • the display mode to be initially displayed can be arbitrarily set.
  • the user terminal 2 acquires the inventory data as a list display mode (S50) and displays it on the display means 22 (S51). Specifically, as shown in FIG. 6, the inventory quantity and the date of receipt calculated by the quantity management unit 66 are displayed side by side on the product basic image and the identification information image. In this list display mode, the same product, the basic product image of “potato” in this embodiment is displayed together with the identification information image, so that the difference between the products becomes obvious at a glance.
  • the inventory management server 4 acquires data with the icon tapped (S53). Then, the display control means 64 transmits the switching display mode to the user terminal 2 (S54).
  • the user terminal 2 acquires the switching display mode (S55) and displays it on the display means 22 (S56). Specifically, as shown in FIG. 7, either one of the product basic image or the identification information image is displayed. In addition, the stock quantity and the date of receipt are displayed as an overlay on the displayed image. At this time, since the images are displayed larger than in the list display mode, each image is easy to see. On the other hand, other images are not seen. Therefore, in the switching display mode, as shown in FIG. 8, the image displayed on the user terminal 2 is tapped or swipe (S57).
  • the inventory management server 4 acquires tapped or swipe data (S58).
  • the display control means 64 transmits the switching display mode switched to another image to the user terminal 2 every time it is tapped or swipe (S59).
  • the user terminal 2 acquires the switching display mode switched to another image (S60) and displays it on the display means 22 (S61). Accordingly, the images are switched as appropriate, and other images can be easily confirmed.
  • the inventory management server 4 acquires data in which the icon is tapped, and transmits the list display mode to the user terminal 2 by the display control means 64.
  • the display of the product basic image and the identification information image can be arbitrarily selected between the list display mode and the switching display mode so as to be easily confirmed.
  • the user terminal 2 After completion of the inventory confirmation process, the user terminal 2 is logged off from the inventory management server 4 by moving to the main screen and selecting log off, and the execution of the inventory management program 4a in the inventory management server 4 is also terminated.
  • the sales process is the same as the delivery process except that the sales process is selected until the delivery quantity is input from the access (S61 to S72). That is, as in S21 to S32 in FIG. 15, a still image or a moving image of the outgoing product image is taken by the user terminal 2, and the outgoing product image is transmitted to the inventory management server 4, thereby being included in the outgoing product image.
  • One or a plurality of outgoing merchandise candidates are transmitted to the user terminal 2, and the outgoing quantity is acquired by inputting the outgoing quantity for each of the outgoing merchandise candidates or image-analyzing the outgoing merchandise image.
  • the sales unit price is input (S71). Note that when the stock management server 4 obtains the outgoing quantity by performing image analysis on the outgoing merchandise image, transmission of the outgoing quantity from the user terminal 2 is not necessary. Further, when the sales management unit 68 obtains the sales unit price corresponding to the goods delivered from the unit price storage unit 54, the transmission of the sales unit price is not necessary.
  • the user terminal 2 transmits the sales unit price together with the quantity to be shipped to the inventory management server 4 (S72).
  • the outgoing product image extraction unit 71 of the inventory management server 4 acquires the outgoing quantity of the outgoing product image by image analysis
  • the sales management unit 68 acquires the sales unit price corresponding to the outgoing product from the unit price storage unit 54.
  • the user terminal 2 transmits the data indicating that the displayed goods candidate, the delivery quantity and the sales unit price are approved, or sends the delivery quantity and the sales unit price which are appropriately input and corrected.
  • the sales management unit 68 acquires the delivery quantity and the sales unit price transmitted from the user terminal 2 (S 73). Then, the acquired delivery quantity and sales unit price are stored in the inventory data storage unit 52 in association with the product basic image (S74).
  • the unit sales price can be managed together with the quantity to be shipped, and the user terminal 2 can be used as a POS register or the like.
  • the input of the output quantity by the user terminal 2 can be omitted, and if the unit sales price corresponding to the output product is stored in the unit price storage unit 54 in advance, the user terminal 2
  • the sales process can be performed simply by transmitting the outgoing product image and approving the acquired outgoing product candidate.
  • this ordering process mainly involves placing an order for a product at the user terminal 2, and other users confirming the ordering data using the contractor terminal 3 and shipping the product. .
  • the user terminal 2 accesses the inventory server and logs in (S81). Then, the ordering process on the main screen is selected (S82).
  • the user terminal 2 acquires an identification information image of the outgoing product (S83).
  • the photographing means 21 captures and acquires identification information related to the outgoing goods.
  • the identification information image may be either a still image or a moving image, as in the warehousing process.
  • the identification information image may include a plurality of identification information. Further, the acquisition of the identification information image is not limited to that by the photographing unit 21, and may be acquired from the identification information image of the inventory data transmitted from the inventory management server 4.
  • the order quantity input method may be based on the number of taps or the number of clicks, as in the case of the entry quantity, or may be an input method using a table or a numerical value input method using a keyboard or the like. Alternatively, a method may be used in which a product basic image obtained by photographing products with a quantity that matches the order quantity is transmitted and the order quantity is acquired by image analysis in the inventory management server 4. In the present embodiment, the user terminal 2 transmits the identification information image and the input order quantity to the inventory management server 4 (S85).
  • the order management unit 69 acquires the identification information image, the order quantity, and the order unit price (S86).
  • the order management unit 69 obtains the order unit price from the unit price storage unit 54.
  • the warehousing product image extraction unit 70 extracts an identification information image for each identification information included in the identification information image. May be.
  • the acquired order quantity and order unit price are stored in the order data storage unit 53 as order data in association with the identification information image (S87).
  • the contractor terminal 3 accesses the inventory management server 4 to confirm the order data. If there is ordering data, products for the ordered quantity are shipped based on the ordering data. At this time, since the order information includes an identification information image, it is possible to confirm the production area, product type, size, and the like of the product without confirming detailed identification information data.
  • the contractor terminal 3 can access the inventory management server 4 after the shipment to check the warehousing data, and can confirm whether or not the shipped product has been received. Thereby, it is possible to quickly cope with the case where the warehousing of the product is delayed due to a problem during delivery of the product.
  • the product master is unnecessary, and the cost for system construction and management can be kept low.
  • Stock management can be performed easily and easily by intuitive operations such as photographing a product image or tapping or swiping an image with a smartphone or a tablet PC without requiring a troublesome PC operation.
  • the product and the identification information such as the production area, product type, and size of the product are managed mainly as an image, the labor required for the input operation can be greatly reduced. 4). Since the products to be processed can be searched by image search, the inventory data can be easily searched without having to remember the inventory number necessary for the search. 5.
  • Data that needs to be managed as text data such as the expiration date can be converted into text data by analyzing the identification information included in the identification information image. 6).
  • By displaying the expiration date information such as the expiration date on the image it is possible to intuitively determine from which product the same type of product should be used without accessing the expiration date information. . 7). Since sales processing and ordering processing are performed using images, it is possible to suppress mistaking of products for each processing. 8).
  • By using an image including a plurality of types of products and an image including a plurality of pieces of identification information it is possible to perform a warehousing process or a shipping process relating to a plurality of types of products and a plurality of pieces of identification information in one operation.
  • inventory management server inventory management system
  • inventory management program and inventory management method according to the present invention are not limited to the above-described embodiments, and can be changed as appropriate.
  • the products that can be managed are not limited to food, and can be applied to other products that require inventory management, such as machine parts.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Quality & Reliability (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Development Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】　商品の画像とともに商品を識別する画像を利用することにより手軽で安価に入庫処理や出庫処理等の在庫管理を行うことができる、在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法を提供する。 【解決手段】　商品の画像を用いて在庫管理を行うための在庫管理サーバ４であって、入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得部６１と、取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶部５２とを有する。

Description

在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法
　本発明は、写真を用いて商品の在庫管理を行うための在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法に関するものである。
　近年、スマートフォンやタブレット型ＰＣ等の携帯情報端末が普及されるのに伴って、特に中小企業や個人事業主において前記タブレット型ＰＣ等の携帯情報端末を活用した在庫管理に対するニーズが高まっている。そこで、このような携帯情報端末と在庫管理サーバとをインターネットで接続し、在庫管理を行う発明が提案されている。
　例えば、特開２０００－２４２７２１号公報では、ウェブサーバーセンターと、物流システムセンターとをインターネットに接続し、商品の保管状況や出荷状況を管理する受発注委託管理システムに関する発明が提案されている（特許文献１）。この特許文献１によれば、前記ウェブサーバーセンターには、商品マスタと呼ばれる商品の在庫状況に関する情報を予め記憶させておき、物流システムセンター等から当該商品マスタにアクセスすることにより、商品の保管状況や出荷状況を管理することができるとされている。
特開２０００－２４２７２１号公報
　しかしながら、特許文献１に記載された発明においては、商品マスタを商品の種類毎に作成しなければならないという問題がある。このため、例えば、同じ商品であっても、産地、品種、サイズ、入庫日および賞味期限が異なる場合、それぞれの商品に対して商品マスタを作成する必要があり、商品マスタの数が膨大になってしまう。したがって、作成する作業負担やコスト、その後の管理コスト等が非常に高額となり、中小企業や個人事業主が容易に導入することができない。
　また、商品の入庫や出庫のたびに商品マスタの備考として産地、品種、サイズ、入庫日および賞味期限を入力する方法も考えられるが、日々商品が入れ替わる食品業界等においては、入庫や出庫のたびに入力するのは非常に面倒であり現実的でなく、普及には至っていない。
　本発明は、以上のような問題点を解決するためになされたものであって、商品の画像とともに商品を識別する画像を利用することにより手軽で安価に入庫処理や出庫処理等の在庫管理を行うことができる、在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法を提供することを目的としている。
　本発明に係る在庫管理サーバは、商品マスタを作成する必要をなくして手軽で安価に在庫管理するという課題を解決するために、商品の画像を用いて在庫管理を行うための在庫管理サーバであって、入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得部と、取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶部とを有する。
　また、本発明の一態様として、出庫商品の候補の検索に商品を識別する画像を利用するという課題を解決するために、出庫する商品または当該商品に類似する商品を撮影した出庫商品画像を前記ユーザ端末から取得する出庫商品画像取得部と、取得した前記出庫商品画像と前記在庫データ記憶部に記憶されている前記商品基本画像とを比較して前記出庫商品画像と類似する画像を判別する類似画像判別部と、前記出庫商品画像と類似すると判別された前記商品基本画像に対応する前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部とを有していてもよい。
　さらに、本発明の一態様として、商品の識別情報を画像から取得するという課題を解決するために、前記識別情報画像に含まれる前記識別情報を画像解析によりテキストデータ化し、当該識別情報を前記商品基本画像に対応付けて前記在庫データ記憶部内の前記在庫データとして記憶させる識別情報テキスト処理部を有するようにしてもよい。
　また、本発明の一態様として、出庫する商品の数量を手軽に入力するという課題を解決するために、前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部と、前記ユーザ端末において表示された前記商品基本画像または前記識別情報画像のタップ数またはクリック数を出庫数量として取得し、前記商品基本画像に対応付けて前記出庫数量を前記在庫データとして前記在庫データ記憶部に記憶させる数量管理部とを有するようにしてもよい。
　さらに、本発明の一態様として、商品を識別する画像を含む商品の一覧を見やすく切り替えるという課題を解決するために、前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部を有しており、前記表示制御部は、前記商品基本画像および前記識別情報画像の全てを前記ユーザ端末に一覧表示させる一覧表示モードと、前記商品基本画像または前記識別情報画像のいずれか一つを前記ユーザ端末に表示させるとともに、表示されている画像をタップまたはスワイプするたびに他の画像に切り替え表示する切替表示モードとを有するようにしてもよい。
　また、本発明の一態様として、商品を識別する画像を利用して商品の期限管理を行うという課題を解決するために、商品基本画像または識別情報画像をユーザ端末に送信する際、当該商品に設定されている所定の期限が近づいた場合に前記ユーザ端末における前記商品基本画像または前記識別情報画像に重ねてその旨を表示させる期限管理部を有するようにしてもよい。
　さらに、本発明の一態様として、商品を識別する画像を利用して手軽に商品の売上管理を行うという課題を解決するために、前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部と、前記ユーザ端末に表示させた前記商品の出庫数量および当該商品の売上単価を当該ユーザ端末から取得し、前記商品基本画像に対応付けて前記在庫データ記憶部に記憶させる売上管理部とを有するようにしてもよい。
　また、本発明の一態様として、商品を識別する画像を利用して手軽に商品の発注処理を行うという課題を解決するために、発注する商品の前記識別情報画像と当該商品の発注数量とを前記ユーザ端末から取得し、前記識別情報画像に対応付けて前記発注数量を発注データとして発注データ記憶部に記憶させる発注管理部を有するようにしてもよい。
　さらに、本発明の一態様として、複数種の商品または複数の識別情報を撮影した画像を利用して一作業で前記各商品等の入庫処理を行うという課題を解決するために、前記入庫データ取得部が取得した前記商品基本画像または前記識別情報画像に複数種の商品または複数の識別情報が含まれている場合に、画像解析により前記商品基本画像または前記識別情報画像から商品種ごとの前記商品基本画像または前記識別情報画像を抽出する入庫商品画像抽出部を有するようにしてもよい。
　また、本発明の一態様として、複数種の商品を撮影した画像を利用して一作業で前記各商品の出庫処理を行うという課題を解決するために、前記出庫商品画像取得部が取得した前記出庫商品画像に複数種の商品が含まれている場合に、画像解析により前記出庫商品画像から商品種ごとの前記出庫商品画像を抽出する出庫商品画像抽出部を有するようにしてもよい。
　本発明に係る在庫管理システムは、前記在庫管理サーバと、この在庫管理サーバに商品を入庫する入庫処理および前記在庫管理サーバから商品を出庫する出庫処理を実行するユーザ端末とを有する。
　本発明に係る在庫管理プログラムは、商品の画像を用いて在庫管理を行うための在庫管理プログラムであって、入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得部と、取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶部としてコンピュータを機能させる。
　本発明に係る在庫管理方法は、商品の画像を用いて在庫管理を行うための在庫管理方法であって、入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得ステップと、取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶ステップとを有する。
　本発明によれば、商品の画像とともに商品を識別する画像を利用することにより手軽で安価に入庫処理や出庫処理等の在庫管理を行うことができる。
本発明に係る在庫管理システムの一実施形態を示す概念図である。 本実施形態の在庫管理システムを示すブロック図である。 本実施形態における在庫データ記憶部に記憶された在庫データのイメージ図である。 本実施形態におけるユーザ端末のログイン画面を示す図である。 本実施形態におけるユーザ端末のメイン画面を示す図である。 本実施形態におけるユーザ端末の一覧表示モードの画面を示す図である。 本実施形態におけるユーザ端末の切替表示モードの画面を示す図である。 本実施形態におけるユーザ端末の切替表示モードの切替操作を示す模式図である。 本実施形態におけるユーザ端末の出庫数量の入力においてテーブルを用いて入力する画面を示す模式図である。 本実施形態において「じゃがいも」と「にんじん」を撮影した静止画からなる商品基本画像または出庫商品画像を示す図である。 本実施形態において「じゃがいも」と「にんじん」を撮影した動画からなる商品基本画像または出庫商品画像のうちＮ－２フレームからＮ＋２フレームまでの各フレームを示す図である。 本実施形態における入庫処理を示すフローチャートである。 本実施形態におけるユーザ端末の入庫処理画面を示す図である。 本実施形態における入庫処理後の在庫データ記憶部に記憶された在庫データのイメージ図である。 本実施形態における入庫処理を示すフローチャートである。 本実施形態におけるユーザ端末の出庫処理画面を示す図である。 本実施形態におけるユーザ端末の出庫数量入力画面を示す図である。 本実施形態における出庫処理後の在庫データ記憶部に記憶された在庫データのイメージ図である。 本実施形態における在庫確認処理の処理開始から在庫データの検索までを示すフローチャートである。 本実施形態における在庫確認処理の検索された在庫データの表示から処理終了までを示すフローチャートである。 本実施形態におけるユーザ端末の在庫確認処理画面を示す図である。 本実施形態における売上処理を示すフローチャートである。 本実施形態における発注処理を示すフローチャートである。
　以下、本発明に係る在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法の一実施形態について図面を用いて説明する。
　本実施形態の在庫管理システム１は、図１および図２に示すように、ユーザ端末２と、受注者端末３と、当該ユーザ端末２により入力される各種データに基づき商品の在庫管理を行う在庫管理サーバ４とを有する。以下、各構成について詳細に説明する。
　本実施形態のユーザ端末２は、インターネットを介して在庫管理サーバ４にアクセスし、入庫処理、出庫処理、在庫確認処理、売上処理、発注処理等を行うための情報端末であり、タブレット型ＰＣやスマートフォンが例示される。本実施形態のユーザ端末２では、図２に示すように、撮影手段２１と、表示手段２２と、入力手段２３とを有する。
　撮影手段２１は、商品の在庫管理に用いられる商品基本画像や識別情報画像、当該商品を検索するための出庫商品画像等を撮影するためのものであり、例えばデジタルカメラ機能によって構成される。この撮影手段２１により撮影される前記商品基本画像、前記識別情報画像および前記出庫商品画像は、静止画および動画のいずれであってもよい。
　表示手段２２は、在庫管理にかかる各種処理を行う際に、基本商品画像や識別情報画像等を表示させるものであり、液晶ディスプレイ等によって構成されている。ユーザ端末２における表示手段２２は、タッチパネル式の液晶ディスプレイによって構成されており、入力手段２３を兼ねている。
　入力手段２３は、ユーザ端末２を操作するためのものであり、タッチパネル、キーボード、マウス等によって構成される。
　受注者端末３は、インターネットを介して在庫管理サーバ４にアクセスし、発注情報を取得するための情報端末であり、デスクトップ型ＰＣやノート型ＰＣが例示される。
　在庫管理サーバ４は、ユーザ端末２によって入力された入庫データ、出庫データおよび発注データを取得して在庫管理を行うためのものであり、図２に示すように、主に、在庫管理プログラム４ａや各種データ等を記憶する記憶手段５と、この記憶手段５およびユーザ端末２から各種データを取得して演算処理を実行する演算処理手段６とから構成される。
　記憶手段５は、ＲＯＭ、ＲＡＭ、ハードディスク、フラッシュメモリ等によって構成されており、各種のデータを記憶するとともに、演算処理手段６が演算を実行する際のワーキングエリアとして機能するものである。本実施形態におけるにおける記憶手段５は、主に、在庫管理プログラム４ａを記憶するプログラム記憶部５１と、商品の入庫データおよび出庫データ等を記憶する在庫データ記憶部５２と、商品を発注するための発注データを記憶する発注データ記憶部５３と、売上単価および発注単価を記憶する単価記憶部５４とを有する。
　プログラム記憶部５１には、本実施形態の在庫管理プログラム４ａがインストールされている。そして、演算処理手段６が、前記在庫管理プログラム４ａを実行し、後述する各構成部として機能させることにより、コンピュータ等を在庫管理サーバ４として機能させるようになっている。
　なお、在庫管理プログラム４ａの利用形態は、上記構成に限られるものではない。例えば、ＣＤ－ＲＯＭやＵＳＢメモリ等のように、コンピュータで読み取り可能な非一時的な記録媒体に在庫管理プログラム４ａを記憶させておき、この記録媒体から直接読み出して実行してもよい。また、外部サーバ等からクラウドコンピューティング方式やＡＳＰ（application service provider）方式等で利用してもよい。
　在庫データ記憶部５２は、主に、入庫処理により取得した商品基本画像、識別情報画像、入庫数量、入庫日、商品期限およびその他識別情報を有する入庫データと、出庫処理等により取得した出庫数量および売上単価を有する出庫データとを在庫データとして記憶するものである。本実施形態における在庫データ記憶部５２は、図３に示すように、処理区分、伝票番号、日付、商品基本画像、第一識別情報画像、第二識別情報画像、数量、単位、賞味期限、仕入先、売上単価、カテゴリー、備考等からなる、前記商品基本画像に対応づけた各種データが記憶されるようになっている。
　ここで処理区分とは、入庫処理または出庫処理のいずれの処理により入力されたデータであるかを区分するためのものであり、本実施形態では、０が入庫処理により入力された入庫データ、１が出庫処理により入力された出庫データとしてそれぞれ管理されている。
　発注データ記憶部５３は、商品の識別情報画像およびこの識別情報画像にかかる商品の発注数量を記憶するものである。本実施形態では、図２に示すように、識別情報画像に対応付けて発注数量、発注単価およびその他識別情報等が記憶されるようになっている。
　単価記憶部５４は、売上単価および発注単価を記憶するものであり、本実施形態では、商品基本画像や商品カテゴリー等に対応付けてその商品にかかる売上単価および発注単価を記憶している。
　次に、演算処理手段６について説明する。在庫管理サーバ４における演算処理手段６は、ＣＰＵ（Central Processing Unit）等から構成されており、記憶手段５にインストールされた在庫管理プログラム４ａを実行させることにより、図２に示すように、在庫管理サーバ４としてのコンピュータを、入庫データ取得部６１、出庫商品画像取得部６２、類似画像判別部６３、表示制御部６４、識別情報テキスト処理部６５、数量管理部６６、期限管理部６７、売上管理部６８、発注管理部６９、入庫商品画像抽出部７０および出庫商品画像抽出部７１として機能させるようになっている。
　入庫データ取得部６１は、ユーザ端末２によって入力された入庫する商品の入庫データを取得して在庫データとして在庫データ記憶部５２に記憶させるものであり、入庫する前記商品を撮影した商品基本画像、前記商品に関する識別情報を撮影した識別情報画像、前記商品の入庫数量および前記商品の入庫日等を有する入庫データをユーザ端末２から取得するようになっている。このとき取得する商品基本画像および識別情報画像は、静止画および動画のいずれであってもよい。本実施形態では、識別情報画像として、第一識別情報画像および第二識別情報画像の２枚の画像を取得する。また、本実施形態では、基本的な入庫データとともに、前記ユーザ端末２によって入力された前記商品の仕入先および前記商品のカテゴリー等の詳細なデータも取得するようになっている。
　なお、識別情報画像の枚数は特に限定されるものではなく、識別できるのであれば必要な枚数から適宜選択してもよい。また、前記商品基本画像は、１枚の静止画または１つの動画に複数種の商品が含まれていてもよく、同様に、前記識別情報画像は１枚の静止画または１つの動画に複数の識別情報が含まれていてもよい。さらに、入庫データは、上述の各種データに限定されるものではなく、例えば、商品の注意書等の文章からなるテキストデータや商品の特徴を音声入力した音声データ等から適宜選択してもよい。また、入庫数量の取得方法は、ユーザ端末２の入力手段２３により入力された数量を取得する方法に限定されるものではなく、例えば、商品基本画像に含まれる商品の数量と入庫数量とが一致している場合には、後述するように、入庫商品画像抽出部７０によって前記商品基本画像を画像解析し、商品種ごとの入庫数量を取得してもよい。
　また、入庫データ取得部６１は、取得した商品基本画像を任意のファイル名で在庫データ記憶部５２に記憶させるため、入庫データを取得する毎にインクリメントする番号を自動的に割り当て、図１４に示すように、当該番号の末尾に「_1」を合わせたものを前記商品基本画像のファイル名として記憶させるようになっている。また、第一識別情報画像および第二識別情報画像は、前記商品基本画像に対応付けるため、それぞれ前記番号の末尾に「_2」、「_3」を合わせたものをファイル名として記憶させるようになっている。また、前記番号は在庫データにおける伝票番号として在庫データ記憶部５２に記憶させるようになっている。
　なお、商品基本画像のファイル名は、自動的に割り当てられるものに限定されるものではなく、ユーザ端末２において入力された任意の数字やテキストデータ等から適宜選択してもよい。
　出庫商品画像取得部６２は、つぎに説明する類似画像判別部６３において在庫データ記憶部５２に記憶された在庫データから出庫する商品を検索する際に用いられる画像を取得するためのものであり、出庫する商品または当該商品に類似する商品を撮影した出庫商品画像をユーザ端末２から取得するようになっている。このとき前記出庫商品画像は、ユーザ端末２の撮影手段２１によって撮影された商品やその商品に類似する画像でもよく、インターネットに接続してブラウザ等を用いて検索された商品に類似する画像等であってもよい。また、前記出庫商品画像は、静止画および動画のいずれであってもよい。
　類似画像判別部６３は、人工知能（Artificial Intelligence：ＡＩ）機能を用いた画像解析により画像同士が類似しているか否かを判別するものであり、取得した前記出庫商品画像と前記在庫データ記憶部５２に記憶されている前記商品基本画像とを比較して前記出庫商品画像と類似する画像を判別するようになっている。また、比較する出庫商品画像および商品基本画像は、互いに静止画および動画のいずれであってもよい。
　表示制御部６４は、ユーザ端末２のアクセスに応じて前記ユーザ端末２に所定の画面を表示させる機能を備えており、図４および図５に示すように、ログイン画面やメイン画面をユーザ端末２に表示させるためのデータを前記ユーザ端末２に送信するようになっている。
　また、表示制御部６４は、例えば、類似画像判別部６３によって出庫商品画像と類似する画像と判別された商品基本画像に係る在庫データを出庫商品の候補としてユーザ端末２に表示させるなど、各処理の必要に応じて在庫データ記憶部５２内の在庫データをユーザ端末２に表示させるようになっている。
　さらに、表示制御部６４は、ユーザ端末２に表示させた在庫データを一覧として表示させる際に、一覧表示モードと切替表示モードとを任意に切り替えることができるようになっている。
　一覧表示モードは、在庫データに記憶された複数の画像を画面内に一覧表示させることにより他の在庫データとの比較を容易にするモードであり、図６に示すように、前記商品基本画像および前記識別情報画像を前記ユーザ端末２に一覧表示させるようになっている。
　切替表示モードは、在庫データに記憶された各画像を大きく表示して見やすくするモードであり、図７に示すように、商品基本画像または識別情報画像のいずれか一つをユーザ端末２に表示させるようになっている。このとき、図８に示すように、表示されている画像をタップまたはスワイプするたびに他の画像に切り替え表示するようになっている。
　なお、その他の処理において、表示制御部６４により、ユーザ端末２の表示手段２２に表示させる画面については後述する各処理の説明のときに合わせて説明する。
　識別情報テキスト処理部６５は、識別情報にかかるテキストデータをキーボード等の入力手段を用いずに入力するためのものであり、ＡＩ機能を用いて識別情報画像に含まれる識別情報を画像解析によりテキストデータ化し、当該識別情報を前記在庫データ記憶部５２内の前記在庫データとして記憶するようになっている。本実施形態では、第二識別情報画像に含まれる商品の賞味期限にかかる年月日を画像解析によりテキストデータ化し、在庫データ記憶部５２の賞味期限の項目に記憶させるようになっている。
　数量管理部６６は、主に、ユーザ端末２において入力された出庫数量を取得して在庫データ記憶部５２に記憶させるものであり、本実施形態では、３つの入力方法により出庫数量を入力できるようになっている。
　１つ目の入力方法は、商品を識別する画像を用いて手軽に入力する方法であり、出庫処理において表示制御部６４によりユーザ端末２に表示された商品基本画像または識別情報画像のタップ数またはクリック数を出庫数量として取得するようになっている。
　２つ目の入力方法は、図９に示すように、予め数値が記入されたテーブルを表示させ、当該テーブルの中から任意の数値を選択させる方法である。
　３つ目の入力方法は、図示しないが、キーボード等を利用して数値を入力する方法である。
　本実施形態では、これらの３つの入力方法を任意に選択することができるようになっている。
　なお、出庫数量の取得方法は、ユーザ端末２の入力手段２３により入力された数量を取得する方法に限定されるものではなく、例えば、出庫商品画像に含まれる商品の数量と出庫数量とが一致している場合には、後述するように、出庫商品画像抽出部７１によって前記出庫商品画像を画像解析し、商品種ごとの出庫数量を取得してもよい。
　また、数量管理部６６は、入庫数量から出庫数量を差し引いて在庫数量を算出するようになっている。本実施形態では、在庫データをユーザ端末２に表示させる際に在庫数量を算出するようになっている。
　なお、在庫数量を算出させるタイミングは、ユーザ端末２に在庫データを表示させる際に限定されるものではなく、出庫数量を取得したときに算出してもよい。また、算出した在庫数量は、在庫データとして在庫データ記憶部５２に記憶させてもよい。
　期限管理部６７は、商品の期限が近づいていることを報知するためのものであり、在庫データとして商品基本画像または識別情報画像をユーザ端末２に送信する際、当該商品に設定されている所定の期限が近づいた場合に前記ユーザ端末２における商品基本画像上または識別情報画像上に重ねてその旨を表示させるようになっている。
　具体的には、図６から図８に示すように、商品の期限として記憶された賞味期限から所定の日数前、例えば賞味期限当日～７日前の期間においては商品基本画像または識別情報画像の左上隅に破線で示した位置に黄色い三角形の表示を重ね、前記賞味期限を過ぎたときには商品基本画像または識別情報画像の同じ位置に赤い三角形の表示を重ねるようになっている。このとき、三角形の表示は、画像を隠すように重ねてもよく、オーバーレイさせてもよい。
　なお、期限を表示させる際に画面上に重ねられる表示の形状や色は、特に限定されるものではなく、商品基本画像に含まれる商品や識別情報画像に含まれる識別情報の視認を妨げないような形状や色等から適宜選択してもよい。
　売上管理部６８は、在庫管理サーバ４を販売時点情報管理（Point Of Sale：ＰＯＳ）システム用のサーバとして利用可能とするためのものである。前記売上管理部６８は、前記ユーザ端末２に表示させた前記商品の出庫数量を当該ユーザ端末２または出庫商品画像抽出部７１から取得し、当該商品の売上単価を当該ユーザ端末２または在庫管理サーバ４の単価記憶部５４から取得する。単価記憶部５４から取得する場合は、出庫商品に対応して記憶された商品基本画像やカテゴリーを画像解析やテキスト検索することによって取得する。そして、前記売上管理部６８は、取得した前記出庫数量および売上単価を前記商品基本画像に対応付けて前記在庫データ記憶部５２に記憶させるようになっている。本実施形態では、ユーザ端末２における出庫数量の入力時に売上単価を入力するようになっている。
　なお、売上単価の入力は、出庫数量の入力時に限定されるものではなく、入庫時に入庫データに含めて入力してもよい。
　発注管理部６９は、商品が少なくなった場合の商品補充のために商品を発注する発注処理を行うためのものである。前記発注管理部６９は、発注する商品の前記識別情報画像を前記ユーザ端末２から取得し、当該商品の発注数量を前記ユーザ端末２または入庫商品画像抽出部７０から取得する。また、本実施形態における発注管理部６９は、単価記憶部５４から発注する商品に対応して記憶された商品基本画像やカテゴリーを画像解析やテキスト検索することによって前記商品にかかる発注単価を取得する。そして、前記発注管理部６９は、取得した前記発注数量および前記発注単価を前記識別情報画像に対応付けて発注データとして発注データ記憶部５３に記憶させるようになっている。本実施形態では、発注処理の際にユーザ端末２において撮影された識別情報画像、ユーザ端末２において入力された発注数量および単価記憶部５４から画像解析やテキスト検索された発注単価を取得するようになっている。
　なお、識別情報画像は、発注処理の際に撮影されたものに限定されるものではなく、表示制御手段６４によりユーザ端末２で表示させるために送信された識別情報画像であってもよい。
　入庫商品画像抽出部７０は、入庫データ取得部６１が取得した商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれている場合に、画像解析により前記商品基本画像または前記識別情報画像から商品種ごとの前記商品基本画像または前記識別情報画像を抽出するものである。本実施形態における入庫商品画像抽出部７０は、ＡＩ機能を用いた画像認識技術などに基づく画像解析により、入庫データ取得部６１が取得した商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれているか否かを判別し、複数種の商品または複数の識別情報が含まれていると判別した場合に、画像解析により商品種ごとの前記商品基本画像または前記識別情報画像を抽出するようになっている。
　また、入庫商品画像抽出部７０において、入庫データ取得部６１が取得した前記商品基本画像または前記識別情報画像は、静止画および動画のいずれであってもよい。例えば、図１０に示すように、入庫データ取得部６１が取得した商品基本画像が静止画の場合、入庫商品画像抽出部７０は、商品基本画像に含まれる複数種の商品（「じゃがいも」と「にんじん」）をＡＩ機能を用いた画像解析により商品種ごとに抽出するようになっている。
　また、図１１に示すように、入庫データ取得部６１が取得した商品基本画像が動画の場合、動画を構成するフレーム画像を画像解析することで、動画に含まれる複数種の商品（「じゃがいも」と「にんじん」）を抽出するようになっている。例えば、Ｎ番目のフレーム画像を示すＮフレーム画像には「じゃがいも」と「にんじん」が含まれているため、このＮフレーム画像を画像解析することにより商品種ごとに商品を抽出することができる。または、Ｎ－２フレーム画像には「じゃがいも」、Ｎ＋２フレーム画像には「にんじん」がそれぞれ含まれているため、これらＮ－２フレーム画像およびＮ＋２フレーム画像をそれぞれ画像解析することにより商品種ごとに商品を抽出することができる。
　さらに、本実施形態における入庫商品画像抽出部７０は、画像解析によって商品種ごとの数量を抽出できるようになっており、例えば、図１０または図１１で示す静止画または動画を画像解析した場合には、「じゃがいも」の数量が２個、「にんじん」の数量が１個であることを抽出することができる。
　識別情報画像についても同様であり、入庫データ取得部６１が取得した識別情報画像が静止画の場合には、識別情報画像に含まれる複数の識別情報を画像解析によりそれぞれ抽出することができる。また、入庫データ取得部６１が取得した識別情報画像が動画の場合には、動画を構成する各フレーム画像ごとに画像解析を行うことで識別情報を抽出することができる。
　さらに、入庫商品画像抽出部７０は、静止画および動画に商品および識別情報のいずれもが含まれている場合には、１つの静止画または１つの動画から前記商品基本画像および前記識別情報画像を抽出することができる。
　なお、本実施形態における入庫商品画像抽出部７０は、商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれているか否かの判別した上で、抽出処理を行っているが、これに限定されるものではなく、例えば、ユーザが予めユーザ端末２を介して各画像に複数種の商品または複数の識別情報が含まれているか否かを入力し、含まれていると入力された場合に抽出処理を実行するようにしてもよい。
　出庫商品画像抽出部７１は、出庫商品画像取得部６２が取得した出庫商品画像に複数種の商品が含まれている場合に、画像解析により前記出庫商品画像から商品種ごとの前記出庫商品画像を抽出するものである。本実施形態における出庫商品画像抽出部７１は、ＡＩ機能を用いた画像認識技術などに基づく画像解析により、出庫商品画像取得部６２が取得した出庫商品画像に複数種の商品が含まれているか否かを判別し、複数種の商品が含まれていると判別した場合に、画像解析により商品種ごとの前記出庫商品画像を抽出するようになっている。
　このとき出庫商品画像抽出部７１が取得した出庫商品画像は、入庫商品画像抽出部７０における商品基本画像や識別情報画像と同様に、静止画および動画のいずれであってもよい。よって、図１０に示すように、出庫商品画像取得部６２が取得した出庫商品画像が静止画の場合、出庫商品画像抽出部７１は、出庫商品画像に含まれる複数種の商品（「じゃがいも」と「にんじん」）を画像解析により商品種ごとに抽出することができる。また、図１１に示すように、出庫商品画像取得部６２が取得した出庫商品画像が動画の場合、動画を構成するフレーム画像を画像解析することで、動画に含まれる複数種の商品（「じゃがいも」と「にんじん」）を抽出することができる。
　また、本実施形態における出庫商品画像抽出部７１は、入庫商品画像抽出部７０と同様に、画像解析によって商品種ごとの数量を抽出できるようになっており、例えば、図１０または図１１で示す静止画または動画を画像解析した場合には、「じゃがいも」の数量が２個、「にんじん」の数量が１個であることを抽出することができる。
　なお、出庫商品画像抽出部７１は、ユーザ端末２を介して出庫商品画像に複数種の商品が含まれていると入力された場合に、抽出処理を実行するようにしてもよい。
　つぎに、本実施形態の在庫管理サーバ４、在庫管理システム１および在庫管理プログラム４ａの各構成の作用について、在庫管理方法とともに説明する。
『入庫処理』
　入庫処理を行う場合は、図１２に示すように、ユーザ端末２から在庫管理サーバ４にアクセスして図４に示すログイン画面を表示させ、ログインＩＤおよびパスワードを入力することによってログインする（Ｓ１）。ユーザ端末２では、ログインを行うとことで、図５に示すように、表示手段２２に入庫処理、出庫処理、在庫確認処理、売上処理および発注処理のいずれかを選択できるメイン画面が表示される。ここで入庫処理を選択することにより、図１３に示すように、入庫処理画面へと移動する（Ｓ２）。
　ユーザ端末２では撮影手段２１により入庫する商品の撮影を行う（Ｓ３）。本実施形態では、図１３に示すように、入庫処理画面のカメラの形を模したアイコンをタッチすることでユーザ端末２の撮影手段２１を起動させ、商品として「じゃがいも」の撮影を行う。また、同時に複数種の商品の入庫処理を行いたい場合には、図１０または図１１に示すように、複数種の商品（例えば「じゃがいも」と「にんじん」）を含む静止画または動画の撮影を行う。
　また、ユーザ端末２では商品に関する識別情報の撮影を行う（Ｓ４）。入庫処理画面に表示された商品基本画像の撮影時とは異なる他のカメラ形のアイコンをタッチして撮影手段２１を起動させて撮影する。本実施形態では、当該商品であるじゃがいもが梱包されている段ボールにおいて、その産地、品種等が記載された部分を第一識別情報画像として静止画または動画で撮影する。更に、３つめのカメラ形のアイコンをタッチして撮影手段２１を起動させ、当該商品の賞味期限が記載された部分を第二識別情報画像として静止画または動画で撮影する。このとき、第一識別情報画像および第二識別情報画像を１枚の静止画として撮影してもよく、第一識別情報画像および第二識別情報画像を１つの動画として撮影してもよい。
　つぎに、ユーザ端末２では、入力手段２３を用いて商品の入庫数量を入力する（Ｓ５）。本実施形態では、入庫処理画面における「数量」との記載の横に表示される三角形のアイコンをタッチすると、図９に示すような数字のテーブルが表示されて、その中から数量にかかる数値を選択する。また、「単位」との記載の横に表示される三角形のアイコンをタッチすると「Ｋｇ」、「個」、「箱」等の単位のテーブルが表示され、その中から数量にかかる単位を選択する。同時に複数種の商品の入庫処理を行いたい場合には、商品種ごとに入庫数量を入力する。なお、商品基本画像に含まれる商品の数量と入庫数量とが一致している場合は、当該入庫数量の入力ステップ（Ｓ５）を省略してもよい。
　なお、入庫数量にかかる数値や単位の入力は、テーブルから選択する方法に限定されるものではなく、キーボード等を用いて入力するようにしてもよい。
　つぎに、ユーザ端末２では任意でその他の識別情報を入力する（Ｓ６）。本実施形態では、仕入先と、任意に割り振ったカテゴリーにより検索可能とするためのカテゴリーとを入力する。本実施形態では、カテゴリーとして「じゃがいも」を選択する。
　入庫数量等の入力が完了した場合、ユーザ端末２では、商品基本画像、第一識別情報画像、第二識別情報画像、入庫数量、入庫日、仕入先およびカテゴリーを入庫データとして在庫管理サーバ４に送信する（Ｓ７）。本実施形態では、入庫処理画面に表示された「登録」と記載された領域をタッチすることで送信処理が行われる。
　在庫管理サーバ４では、ユーザ端末２からアクセスされることで演算処理手段６によりプログラム記憶部５１に記憶された在庫管理プログラム４ａが実行される。
　表示制御手段６４では、図１２のフローチャートにおいて図示しないが、ユーザ端末２からのアクセス、ログインおよび入庫処理の選択がなされる毎に、ログイン画面、メイン画面および入庫処理画面をユーザ端末２に送信する。
　入庫データ取得部６１では、入庫データをユーザ端末２から取得する（Ｓ８：入庫データ取得ステップ）。本実施形態では、商品基本画像、第一識別情報画像、第二識別情報画像、入庫数量、入庫日、仕入先およびカテゴリーを取得する。
　つぎに、入庫商品画像抽出部７０では、画像解析により商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれているか否かを判別する（Ｓ９）。入庫データ取得部６１が取得した商品基本画像または識別情報画像が静止画の場合は、当該静止画内に複数種の商品または複数の識別情報が含まれているか否かを判別する。また、入庫データ取得部６１が取得した商品基本画像または識別情報画像が動画の場合は、動画を構成する任意のフレーム画像を画像解析することで当該動画内に複数種の商品または複数の識別情報が含まれているか否かを判別する。
　ここで、商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれている場合には（Ｓ９：ＹＥＳ）、画像解析により商品種ごとの商品基本画像または識別情報画像を抽出する（Ｓ１０：入庫商品画像抽出ステップ）。そして、図１２のフローチャートにおいて図示しないが、以降のステップＳ１１～Ｓ１３では、抽出された商品基本画像ごとまたは識別情報画像ごとに各ステップの処理を実行する。
　一方、商品基本画像または識別情報画像に複数種の商品または複数の識別情報が含まれていない場合は（Ｓ９：ＮＯ）、次のステップＳ１１に進む。なお、商品基本画像に含まれる商品の数量と入庫数量とが一致しており、ユーザ端末２において入庫数量の入力を省略した場合は、入庫商品画像抽出部７０が前記商品基本画像を画像解析し、商品種ごとの数量を抽出し、前記数量を各商品にかかる入庫数量として取得する。
　つぎに、識別情報テキスト処理部６５では、識別情報画像に含まれる識別情報を画像解析によりテキストデータ化する（Ｓ１１）。本実施形態では、第二識別情報画像には、識別情報として賞味期限が写り込んでいるため、当該賞味期限をテキストデータ化する。入庫商品画像抽出部７０において複数の識別情報画像が抽出された場合は、抽出された識別情報画像ごとにテキストデータ化する。
　また、入庫データ取得部６１では、図１４に示すように、任意のファイル名として所定の番号を商品毎にインクリメントして自動的に割り当てた番号を設定する（Ｓ１２）。本実施形態では、「1001」を割り当て、商品基本画像、第一識別情報画像および第二識別情報画像のファイル名をそれぞれ「1001_1」、「1001_2」および「1001_3」にして、他の入庫データとともに在庫データ記憶部５２に記憶させる（Ｓ１３：在庫データ記憶ステップ）。また、識別情報テキスト処理部６５によりテキストデータ化された賞味期限および伝票番号として商品基本画像のファイル名である前記「1001」も在庫データ記憶部５２に記憶させる。このとき、入庫商品画像抽出部７０において複数種の商品からなる商品基本画像が抽出された場合は、抽出された商品種ごとに在庫データ記憶部５２に記憶させる。
　在庫データ記憶部５２では、図１４に示すように、処理区分、伝票番号、日付、商品基本画像、第一識別情報画像、第二識別情報画像、数量、単位、賞味期限、仕入先およびカテゴリーの項目に各データが格納される。
　これにより、入庫する商品の入庫処理が完了する。この入庫処理は、商品ごとに行われる。複数種の商品に対しては、商品ごとに連続して入庫処理を行うか、複数種の商品を含む商品基本画像を撮影して入庫処理を行う。
　入庫処理終了後は、メイン画面に移動し、ログオフを選択することでユーザ端末２は在庫管理サーバ４からログオフされる。当該ログオフとともに、在庫管理サーバ４における在庫管理プログラム４ａの実行が終了する。
『出庫処理』
　つぎに、出庫処理について説明する。出庫処理を行う場合は、図１５に示すように、入庫処理と同様、ユーザ端末２から在庫管理サーバ４にアクセスしてログインする（Ｓ２１）。そして、メイン画面の出庫処理を選択することにより、図１６に示すように、出庫処理画面へと移動する（Ｓ２２）。
　ユーザ端末２では、出庫処理を行う商品の検索を行うための情報を入力する。ここでは、在庫管理サーバ４の類似画像判別部６３を用いて検索する場合について説明する。ユーザ端末２では、出庫する商品または当該商品に類似する商品を静止画または動画により撮影して出庫商品画像として取得する（Ｓ２３）。本実施形態では、出庫処理画面におけるカメラの形を模したアイコンをタッチすることでユーザ端末２の撮影手段２１を起動させ、出庫する商品、本実施形態では、「じゃがいも」の画像を撮影する。同時に複数種の商品の出庫処理を行いたい場合には、図１０または図１１に示すように、複数種の商品（例えば「じゃがいも」と「にんじん」）を含む静止画または動画の撮影を行う。
　なお、このとき撮影するじゃがいもは、在庫管理サーバ４内の入庫商品を特定できればよい。例えば、実際に出庫する商品に限る必要はなく、出庫しない他のじゃがいもを代用してもよい。また、出庫商品画像は、撮影した画像に限定されるものではなく、インターネット上で検索された静止画または動画等であってもよい。
　そして、ユーザ端末２では、取得した出庫商品画像を在庫管理サーバ４に送信する（Ｓ２４）。本実施形態では、出庫商品画像を撮影後、出庫処理画面の登録を選択することで出庫商品画像が在庫管理サーバ４に送信される。
　在庫管理サーバ４では、入庫処理と同様に、ユーザ端末２からアクセスされることで演算処理手段６によりプログラム記憶部５１に記憶された在庫管理プログラム４ａが実行される。
　出庫商品画像取得部６２では、ユーザ端末２から送信される出庫商品画像を取得する（Ｓ２５：出庫商品画像取得ステップ）。
　つぎに、出庫商品画像抽出部７１では、画像解析により出庫商品画像に複数種の商品が含まれているか否かを判別する（Ｓ２６）。出庫商品画像取得部６２が取得した出庫商品画像が静止画の場合は、当該静止画内に複数種の商品が含まれているか否かを判別する。また、出庫商品画像取得部６２が取得した出庫商品画像が動画の場合は、各フレーム画像を画像解析することで当該動画内に複数種の商品が含まれているか否かを判別する。
　ここで、出庫商品画像に複数種の商品または複数の識別情報が含まれている場合には（Ｓ２６：ＹＥＳ）、画像解析により商品種ごとの出庫商品画像を抽出する（Ｓ２７：出庫商品画像抽出ステップ）。図１５のフローチャートにおいて図示しないが、以降のステップＳ２８～Ｓ３５では、抽出された出庫商品画像ごとに各ステップの処理を実行する。また、図示しないが、出庫商品画像に含まれる商品の数量と出庫数量とが一致している場合は、出庫商品画像抽出部７１が前記出庫商品画像を画像解析し、商品種ごとの数量を抽出し、前記数量を各商品にかかる出庫数量として取得してもよい。
　類似画像判別部６３では、出庫商品画像と在庫データ記憶部５２に記憶されている商品基本画像とを比較し類似しているか否かを判別する（Ｓ２８：類似画像判別ステップ）。ここで、出庫商品画像は、出庫する商品または当該商品に類似している商品の画像であるため、当該出庫商品画像に類似していると判別された商品基本画像に対応する在庫データは、出庫する商品の在庫データである可能性が高い。
　そこで、表示制御部６４では、出庫商品画像と類似すると判別された商品基本画像に対応する在庫データを出庫商品の候補として表示させるためユーザ端末２に送信する（Ｓ２９）。このとき出庫商品画像抽出部７１において複数種の出庫商品画像が抽出された場合は、抽出された商品種ごとに商品基本画像に対応する在庫データを送信する。
　ユーザ端末２では、出庫商品の候補の在庫データを取得して（Ｓ３０）、商品基本画像または識別情報画像とともに表示手段２２に表示する（Ｓ３１）。出庫商品の候補が複数ある場合は、図６または図７に示すように、各在庫データを一覧できるように表示する。このとき、商品基本画像および識別情報画像には、入庫日および商品の数量をオーバーレイさせて表示される。
　ユーザ端末２では、表示手段２２に表示された出庫商品の候補から出庫処理を行う商品を選択する。本実施形態では、表示手段２２に表示されている商品基本画像または識別情報画像を長押しすることで選択される。そして、選択された在庫データの商品基本画像または識別情報画像は、図１７に示すように、当該在庫データのみが表示されるように拡大される。このとき、表示されている画像をスワイプすることで、図８に示すように、他の画像に切り替えることができ、識別情報画像等によって商品を確認することができる。
　つぎに、ユーザ端末２では、出庫商品の出庫数量を入力する（Ｓ３２）。本実施形態では表示されている商品基本画像または識別情報画像をタップする回数に応じて商品の数量にかかる数値がデクリメントされる。デクリメントされた商品の数量は、商品基本画像または識別情報画像にオーバーレイさせて表示される。
　出庫数量の入力が終了すると、当該出庫数量を在庫管理サーバ４に送信する（Ｓ３３）。本実施形態では、入庫処理における入庫データの送信時と同様、出庫数量入力画面に表示された「登録」と記載された領域をタッチすることで送信処理が行われる。
　在庫管理サーバ４では、ユーザ端末２から送信された出庫数量を取得する（Ｓ３４）。なお、出庫商品画像に含まれる商品の数量と出庫数量とが一致しており、出庫商品画像抽出部７１が前記出庫商品画像を画像解析し、商品種ごとの出庫数量を取得している場合は、当該出庫数量にかかるユーザ端末２による出庫数量の入力および在庫管理サーバ４による出庫数量の取得にかかる各ステップ（Ｓ３２～Ｓ３４）を省略することができる。
　数量管理部６６では、タップ数を出庫数量として取得し、商品基本画像に対応付けて当該出庫数量および出庫日を在庫データとして在庫データ記憶部５２に記憶させる（Ｓ３５）。
　在庫データ記憶部５２では、図１８に示すように、商品基本画像のファイル名として保存した伝票番号に対応して入庫データに並べるように記憶する。また、同じ商品に対して複数回の出庫処理を行った場合は、前の出庫データに連続するように適宜記憶していく。このように入庫データと出庫データをそれぞれ記憶させておくことにより、いつでも前記入庫数量と前記出庫数量とから在庫数量の再集計を行うことができる。
　出庫処理終了後は、メイン画面に移動し、ログオフを選択することでユーザ端末２は在庫管理サーバ４からログオフされ、在庫管理サーバ４における在庫管理プログラム４ａの実行も終了する。
『在庫確認処理』
　つぎに、在庫確認処理について説明する。在庫確認処理は、主に、商品を出庫する順番や発注処理の要否を判断するため、商品の在庫数量や賞味期限等を確認できるように当該在庫データをユーザ端末２に表示させる処理である。この在庫確認処理を行う場合は、図１９に示すように、入庫処理や出庫処理と同様にユーザ端末２から在庫管理サーバ４にアクセスしてログインする（Ｓ４１）。そして、メイン画面の在庫確認処理を選択することにより、図２１に示すように、在庫確認処理画面へと移動する（Ｓ４２）。
　ユーザ端末２では、在庫確認処理を行う商品の検索を行うための情報を入力する（Ｓ４３）。ここでは、識別情報としてカテゴリーを入力する場合について説明する。図２１に示すように、在庫確認処理画面の「カテゴリー」との記載の横に表示される三角形のアイコンをタッチすると選択可能なカテゴリーのテーブルが表示される。本実施形態では、カテゴリー中の「じゃがいも」を選択すればよい。
　なお、前述した識別情報は、出庫処理と同様、静止画または動画からなる出庫商品画像であってもよく、仕入先、入庫日等のその他の識別情報であってよい。
　ユーザ端末２では、入力した識別情報を在庫管理サーバ４に送信する（Ｓ４４）。本実施形態では、在庫確認処理画面の登録を選択することで識別情報が在庫管理サーバ４に送信される。
　在庫管理サーバ４では、商品の識別情報を取得し（Ｓ４５）、在庫データから当該識別情報に合致する在庫データを検索する（Ｓ４６）。なお、識別情報が出庫商品画像の場合は、出庫処理と同様、出庫商品画像と商品基本画像との比較により在庫データを検索してもよい。また、出庫商品画像に複数種の商品が含まれる場合は、画像解析により出庫商品画像から商品種ごとの出庫商品画像を抽出した上で、各出庫商品画像ごとに商品基本画像との比較を実行して在庫データを検索してもよい。
　数量管理部６６では、検索された在庫データの在庫数量を算出する（Ｓ４７）。具体的には、図１８に示すように、在庫データ記憶部５２に記憶された在庫データのうち、入庫処理において記憶された入庫数量から出庫処理において記憶された出庫数量を減算して算出する。
　また、期限管理部６７では、検索された在庫データの期限が設定された所定の期限に近づいたか否かを判別し、所定の期限内である場合は商品基本画像上および識別情報画像上にその旨の表示を重ねる（Ｓ４８）。本実施形態では、在庫確認処理日が商品の賞味期限に対して８日以上前であった場合には、商品基本画像および識別情報画像は、処理を行わない。
　一方、当該処理日が賞味期限当日～７日前の期間であった場合には、商品基本画像または識別情報画像の左上隅に黄色の三角形の表示を重ねる。また、当該処理日が賞味期限を過ぎていた場合には、商品基本画像または識別情報画像の左上隅に赤色の三角形の表示を重ねる。このように、本実施形態では、在庫数量を確認するのみならず、賞味期限等の期限管理を行うことができる。
　つぎに、本実施形態における在庫確認処理におけるユーザ端末２における表示例について説明する。本実施形態では、図２０に示すように、在庫データの初期表示として一覧表示モードをユーザ端末２に送信する（Ｓ４９）。なお、初期表示させる表示モードは、任意に設定することができる。
　ユーザ端末２では、在庫データを一覧表示モードとして取得し（Ｓ５０）、表示手段２２に表示する（Ｓ５１）。具体的には、図６に示すように、商品基本画像および識別情報画像に並べて数量管理部６６により算出された在庫数量および入庫日が表示される。この一覧表示モードでは、同等の商品、本実施形態では「じゃがいも」の商品基本画像が識別情報画像とともに表示されるため、各商品の相違が一目瞭然となる。
　一覧表示モードから切替表示モードに切り替える場合は、図６に示すように、カテゴリーの「じゃがいも」が記載してある横に表示された切替表示モードを模したアイコンをタップする（Ｓ５２）。
　在庫管理サーバ４では、当該アイコンがタップされたデータを取得する（Ｓ５３）。そして、表示制御手段６４では、切替表示モードをユーザ端末２に送信する（Ｓ５４）。
　ユーザ端末２では、切替表示モードを取得し（Ｓ５５）、表示手段２２に表示する（Ｓ５６）。具体的には、図７に示すように、商品基本画像または識別情報画像のいずれか一つが表示される。また、在庫数量および入庫日は、表示される画像にオーバーレイして表示させる。このとき、一覧表示モードに比べて画像が大きく表示されるため各画像が見やすくなる。一方、他の画像は見られない。そこで、切替表示モードでは、図８に示すように、ユーザ端末２に表示された画像がタップまたはスワイプする（Ｓ５７）。
　在庫管理サーバ４では、タップまたはスワイプされたデータを取得する（Ｓ５８）。表示制御手段６４では、タップまたはスワイプされる毎に、他の画像に切り替えた切替表示モードをユーザ端末２に送信する（Ｓ５９）。
　ユーザ端末２では、他の画像に切り替えられた切替表示モードを取得し（Ｓ６０）、表示手段２２に表示する（Ｓ６１）。これにより、適宜画像が切り替り、容易に他の画像を確認することができる。
　切替表示モードから一覧表示モードに切り替える場合は、図７に示すように、カテゴリーの「じゃがいも」が記載してある横に表示された切替表示モードを模したアイコンをタップする。これにより、図示しないが、在庫管理サーバ４では、当該アイコンがタップされたデータを取得し、表示制御手段６４により一覧表示モードをユーザ端末２に送信する。
　このように、商品基本画像および識別情報画像の表示は、確認し易いように、一覧表示モードと切替表示モードとを任意に選択することができる。
　在庫確認処理終了後は、メイン画面に移動し、ログオフを選択することでユーザ端末２は在庫管理サーバ４からログオフされ、在庫管理サーバ４における在庫管理プログラム４ａの実行も終了する。
『売上処理』
　つぎに、売上処理について説明する。売上処理は、図２２に示すように、アクセスから出庫数量を入力するまでは、売上処理を選択する以外は出庫処理と同様である（Ｓ６１～Ｓ７２）。つまり、図１５におけるＳ２１～Ｓ３２と同様に、出庫商品画像の静止画または動画をユーザ端末２で撮影し、前記出庫商品画像を在庫管理サーバ４に送信することで、前記出庫商品画像に含まれた単数または複数の出庫商品の候補がユーザ端末２に送信され、当該出庫商品の候補ごとに出庫数量を入力するかまたは前記出庫商品画像を画像解析することで出庫数量を取得する。
　次に、売上処理の場合には、ユーザ端末２において出庫数量を入力した後、売上単価の入力を行う（Ｓ７１）。なお、在庫管理サーバ４が出庫商品画像を画像解析することで出庫数量を取得した場合は、ユーザ端末２からの出庫数量の送信は不要である。また、売上管理部６８が単価記憶部５４から出庫商品に対応した売上単価を取得する場合は、前記売上単価の送信も不要である。
　本実施形態では、ユーザ端末２が、出庫数量とともに売上単価を在庫管理サーバ４に送信する（Ｓ７２）。なお、在庫管理サーバ４の出庫商品画像抽出部７１が出庫商品画像を画像解析で出庫数量を取得するとともに、売上管理部６８が単価記憶部５４から出庫商品に対応した売上単価を取得する場合には、ユーザ端末２は表示された出庫商品の候補、その出庫数量および売上単価を承認する旨のデータを送信するか、または適宜入力して修正した出庫数量および売上単価を送信する。
　在庫管理サーバ４では、売上管理部６８がユーザ端末２から送信された出庫数量および売上単価を取得する（Ｓ７３）。そして取得された出庫数量および売上単価を商品基本画像に対応付けて在庫データ記憶部５２に記憶する（Ｓ７４）。
　これにより、売り上げた商品およびその売上げを出庫商品とほぼ同様に管理することができる。また、出庫数量とともに、売上単価を管理することができるようになり、ユーザ端末２をＰＯＳレジなどとして利用することができるようになる。画像解析により出庫数量を取得する場合にはユーザ端末２による出庫数量の入力を省略することができ、さらに出庫商品に対応した売上単価を単価記憶部５４に予め記憶させておけば、ユーザ端末２から出庫商品画像を送信し、取得した出庫商品の候補の承認を行うだけで売上処理を行うことができる。
『発注処理』
　つぎに、発注処理について説明する。この発注処理は、主に、図１に示すように、ユーザ端末２で商品の発注を行い、他のユーザが受注者端末３を用いて発注データを確認して商品を発送するというものである。
　まず、発注処理を行う場合、図２３に示すように、ユーザ端末２から在庫サーバにアクセスしログインする（Ｓ８１）。そして、メイン画面の発注処理を選択する（Ｓ８２）。
　つぎに、ユーザ端末２では、出庫商品の識別情報画像を取得する（Ｓ８３）。本実施形態では、撮影手段２１によって前記出庫商品に関する識別情報を撮影して取得する。なお、識別情報画像は、入庫処理等と同様に、静止画および動画のいずれであってもよい。また、識別情報画像には複数の識別情報が含まれていてもよい。さらに、識別情報画像の取得は撮影手段２１によるものに限定されるものではなく、在庫管理サーバ４から送信された在庫データの識別情報画像から取得してもよい。
　つぎに、ユーザ端末２では、発注数量を入力する（Ｓ８４）。発注数量の入力方法は、出庫数量の入力と同様、タップ数やクリック数に基づくものでもよく、テーブルを用いた入力方法やキーボード等を用いた数値の入力方法でもよい。また、発注数量と一致する数量の商品を撮影した商品基本画像を送信し、在庫管理サーバ４における画像解析で前記発注数量を取得させる方法でもよい。本実施形態では、ユーザ端末２が、識別情報画像および入力した発注数量を在庫管理サーバ４に送信する（Ｓ８５）。
　在庫管理サーバ４では、発注管理部６９が識別情報画像、発注数量および発注単価を取得する（Ｓ８６）。ここで発注単価は発注管理部６９が単価記憶部５４から取得する。なお、発注管理部６９が取得した前記識別情報画像に複数の識別情報が含まれている場合は、入庫商品画像抽出部７０が前記識別情報画像に含まれる識別情報ごとに識別情報画像を抽出してもよい。そして、取得された発注数量および発注単価は識別情報画像に対応付けて発注データとして発注データ記憶部５３に記憶させる（Ｓ８７）。
　受注者端末３では、図１に示すように、在庫管理サーバ４にアクセスして、発注データを確認する。もし、発注データがあった場合は、発注データに基づき発注数量分の商品を発送する。このとき、発注データには識別情報画像が含まれているため、詳細な識別情報のデータを確認しなくても商品の産地、品種およびサイズ等を確認することができる。
　また、受注者端末３では、発送後に在庫管理サーバ４にアクセスして入庫データを確認し、発送した商品が入庫されたか否かを確認することもできる。これにより、仮に商品の配送時の問題により商品の入庫が遅延した場合の対処を迅速に行うことができる。
　以上のような本実施形態によれば、以下の効果を得ることができる。
１．商品マスタが不要であり、システムの構築および管理にかかる費用を安価に抑えることができる。
２．面倒なＰＣ操作を要せず、スマートフォンやタブレット型ＰＣ等によって商品の画像を撮影や画像のタップやスワイプといった直感的な操作により、手軽かつ容易に在庫管理を行うことができる。
３．主に画像として商品や当該商品の産地、品種、サイズ等の識別情報を管理するため、入力操作にかかる労力を格段に軽減することができる。
４．各処理を行う商品を画像検索により行うことができるため、検索に必要な在庫番号等を覚えていなくても容易に在庫データを検索することができる。
５．賞味期限等のテキストデータとして管理が必要なデータは、識別情報画像に含まれる識別情報を画像解析することによってテキストデータ化することができる。
６．画像に賞味期限等の期限情報を重ねて表示させることにより、期限情報にアクセスしなくても、同種の商品に対していずれの商品から使用すればよいか等の直感的に判断することができる。
７．画像を用いて売上処理や発注処理を行うため、各処理にかかる商品の取り間違い等を抑制することができる。
８．複数種の商品を含む画像や複数の識別情報を含む画像を用いることによって一作業で複数種の商品、複数の識別情報にかかる入庫処理または出庫処理を行うことができる。
　なお、本発明に係る在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法は、前述した実施形態に限定されるものではなく、適宜変更することができる。例えば、食品の在庫管理について説明したが、在庫管理できる商品は食品に限定されるものではなく、機械部品等のように在庫管理が必要な他の商品に適用することが可能である。
　１　在庫管理システム
　２　ユーザ端末
　３　受注者端末
　４　在庫管理サーバ
　４ａ　在庫管理プログラム
　５　記憶手段
　６　演算処理手段
　２１　撮影手段
　２２　表示手段
　２３　入力手段
　５１　プログラム記憶部
　５２　在庫データ記憶部
　５３　発注データ記憶部
　５４　単価記憶部
　６１　入庫データ取得部
　６２　出庫商品画像取得部
　６３　類似画像判別部
　６４　表示制御部
　６５　識別情報テキスト処理部
　６６　数量管理部
　６７　期限管理部
　６８　売上管理部
　６９　発注管理部
　７０　入庫商品画像抽出部
　７１　出庫商品画像抽出部

Claims (13)

  1. 　商品の画像を用いて在庫管理を行うための在庫管理サーバであって、
    　入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得部と、
    　取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶部と、
    　を有する、在庫管理サーバ。
  2. 　出庫する商品または当該商品に類似する商品を撮影した出庫商品画像を前記ユーザ端末から取得する出庫商品画像取得部と、
    　取得した前記出庫商品画像と前記在庫データ記憶部に記憶されている前記商品基本画像とを比較して前記出庫商品画像と類似する画像を判別する類似画像判別部と、
    　前記出庫商品画像と類似すると判別された前記商品基本画像に対応する前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部と、
    　を有する、請求項１に記載の在庫管理サーバ。
  3. 　前記識別情報画像に含まれる前記識別情報を画像解析によりテキストデータ化し、当該識別情報を前記商品基本画像に対応付けて前記在庫データ記憶部内の前記在庫データとして記憶させる識別情報テキスト処理部を有する、請求項１または請求項２に記載の在庫管理サーバ。
  4. 　前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部と、
    　前記ユーザ端末において表示された前記商品基本画像または前記識別情報画像のタップ数またはクリック数を出庫数量として取得し、前記商品基本画像に対応付けて前記出庫数量を前記在庫データとして前記在庫データ記憶部に記憶させる数量管理部と、
    　を有する、請求項１から請求項３のいずれかに記載の在庫管理サーバ。
  5. 　前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部を有しており、
    　前記表示制御部は、前記商品基本画像および前記識別情報画像の全てを前記ユーザ端末に一覧表示させる一覧表示モードと、前記商品基本画像または前記識別情報画像のいずれか一つを前記ユーザ端末に表示させるとともに、表示されている画像をタップまたはスワイプするたびに他の画像に切り替え表示する切替表示モードとを有する、請求項１から請求項４のいずれかに記載の在庫管理サーバ。
  6. 　商品基本画像または識別情報画像をユーザ端末に送信する際、当該商品に設定されている所定の期限が近づいた場合に前記ユーザ端末における前記商品基本画像または前記識別情報画像に重ねてその旨を表示させる期限管理部を有する、請求項１から請求項５のいずれかに記載の在庫管理サーバ。
  7. 　前記在庫データ記憶部内の前記在庫データを出庫商品の候補として前記ユーザ端末に表示させる表示制御部と、
    　前記ユーザ端末に表示させた前記商品の出庫数量および当該商品の売上単価を当該ユーザ端末から取得し、前記商品基本画像に対応付けて前記在庫データ記憶部に記憶させる売上管理部とを有する、請求項１から請求項６のいずれかに記載の在庫管理サーバ。
  8. 　発注する商品の前記識別情報画像と当該商品の発注数量とを前記ユーザ端末から取得し、前記識別情報画像に対応付けて前記発注数量を発注データとして発注データ記憶部に記憶させる発注管理部を有する、請求項１から請求項７のいずれかに記載の在庫管理サーバ。
  9. 　前記入庫データ取得部が取得した前記商品基本画像または前記識別情報画像に複数種の商品または複数の識別情報が含まれている場合に、画像解析により前記商品基本画像または前記識別情報画像から商品種ごとの前記商品基本画像または前記識別情報画像を抽出する入庫商品画像抽出部を有する、請求項１から請求項８に記載の在庫管理サーバ。
  10. 　前記出庫商品画像取得部が取得した前記出庫商品画像に複数種の商品が含まれている場合に、画像解析により前記出庫商品画像から商品種ごとの前記出庫商品画像を抽出する出庫商品画像抽出部を有する、請求項２に記載の在庫管理サーバ。
  11. 　請求項１から請求項１０のいずれかに記載の在庫管理サーバと、この在庫管理サーバに商品を入庫する入庫処理および前記在庫管理サーバから商品を出庫する出庫処理を実行するユーザ端末とを有する、在庫管理システム。
  12. 　商品の画像を用いて在庫管理を行うための在庫管理プログラムであって、
    　入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得部と、
    　取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶部と
    　してコンピュータを機能させる、在庫管理プログラム。
  13. 　商品の画像を用いて在庫管理を行うための在庫管理方法であって、
    　入庫する商品を撮影した商品基本画像と、前記商品に関する識別情報を撮影した識別情報画像と、前記商品の入庫数量と、前記商品の入庫日とを含む入庫データをユーザ端末から取得する入庫データ取得ステップと、
    　取得された前記商品基本画像に対応付けて前記識別情報画像、前記商品の入庫数量および入庫日を在庫データとして記憶する在庫データ記憶ステップと、
    　を有する、在庫管理方法。
PCT/JP2017/025985 2016-07-20 2017-07-18 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法 WO2018016494A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/318,505 US11328250B2 (en) 2016-07-20 2017-07-18 Inventory management server, inventory management system, inventory management program, and inventory management method
JP2018528818A JP7104948B2 (ja) 2016-07-20 2017-07-18 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016142040 2016-07-20
JP2016-142040 2016-07-20

Publications (1)

Publication Number Publication Date
WO2018016494A1 true WO2018016494A1 (ja) 2018-01-25

Family

ID=60992211

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/025985 WO2018016494A1 (ja) 2016-07-20 2017-07-18 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法

Country Status (3)

Country Link
US (1) US11328250B2 (ja)
JP (1) JP7104948B2 (ja)
WO (1) WO2018016494A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020118334A (ja) * 2019-01-22 2020-08-06 日立グローバルライフソリューションズ株式会社 冷蔵庫用遠隔制御装置、冷蔵庫用遠隔制御装置の制御方法およびプログラム
JP2021120205A (ja) * 2020-01-31 2021-08-19 サトーホールディングス株式会社 プリンタ、プログラム、印字方法、ユニークｉｄ生成方法
WO2022085283A1 (ja) * 2020-10-20 2022-04-28 三菱電機株式会社 在庫管理システム、在庫管理装置、機械学習装置、在庫管理方法およびプログラム
JP7082359B1 (ja) 2022-01-24 2022-06-08 株式会社イント 在庫管理装置及び在庫管理システム
WO2022138547A1 (ja) * 2020-12-24 2022-06-30 Ｂｉｒｄ ｆａｂ ｓｔｕｄｉｏ株式会社 生地検索装置、生地検索システム、生地検索方法およびプログラム
CN114743299A (zh) * 2022-04-09 2022-07-12 日照山川电子信息技术有限公司 基于图像识别的智能仓储处理方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111459936B (zh) * 2020-03-25 2023-09-29 湖南华菱涟源钢铁有限公司 一种数据管理方法、数据管理装置及服务器
CN111626669B (zh) * 2020-05-19 2023-06-02 泉州财智信息科技有限公司 一种带终端盒的应急救援仓库管理方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012208814A (ja) * 2011-03-30 2012-10-25 Fujitsu Frontech Ltd 情報取得装置、商品登録装置、および、情報取得方法
JP2014049014A (ja) * 2012-09-03 2014-03-17 Toshiba Tec Corp 商品認識装置及び商品認識プログラム
JP2014218313A (ja) * 2013-05-01 2014-11-20 學思行數位行銷股▲分▼有限公司 在庫管理およびマーケティングのための画像認識システム
JP2015125535A (ja) * 2013-12-26 2015-07-06 ソフトバンクモバイル株式会社 管理システム及びプログラム
JP2016095786A (ja) * 2014-11-17 2016-05-26 東芝テック株式会社 情報処理装置及びプログラム
JP2016121019A (ja) * 2016-02-18 2016-07-07 日本電気株式会社 検品処理装置、検品システム、検品処理方法及びプログラム

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000242721A (ja) 1999-02-22 2000-09-08 Yamato System Development Co Ltd 受発注委託管理システム
EP1297477A2 (en) * 2000-06-29 2003-04-02 United Parcel Service Of America, Inc. Systems and methods for end-to-end fulfillment and supply chain management
WO2006045080A1 (en) * 2004-10-20 2006-04-27 Siemens Medical Solutions Usa, Inc. A material and device inventory tracking system for medical and other uses
US20110153614A1 (en) * 2005-08-01 2011-06-23 Worthwhile Products Inventory control system process
US7693757B2 (en) * 2006-09-21 2010-04-06 International Business Machines Corporation System and method for performing inventory using a mobile inventory robot
JP2009176121A (ja) * 2008-01-25 2009-08-06 Isa:Kk 経営管理システム
WO2010048375A1 (en) * 2008-10-22 2010-04-29 Newzoom, Inc. Vending store inventory management and reporting system
JP5062222B2 (ja) * 2009-06-04 2012-10-31 カシオ計算機株式会社 データ処理装置およびプログラム
US20130282522A1 (en) * 2012-04-20 2013-10-24 University Of Florida Research Foundation, Inc. Real-time digital inventory systems and methods
US10482471B2 (en) * 2013-01-16 2019-11-19 Amazon Technologies, Inc. Unauthorized product detection techniques
US20140214547A1 (en) * 2013-01-25 2014-07-31 R4 Technologies, Llc Systems and methods for augmented retail reality
US9400968B2 (en) * 2013-08-14 2016-07-26 Ricoh Company, Ltd. Three-dimensional indexing protocol
CA3225524A1 (en) * 2014-11-21 2016-05-26 Deliveright Logistics, Inc. Delivery management systems and methods for zero-inventory distribution
US10384869B1 (en) * 2014-12-15 2019-08-20 Amazon Technologies, Inc. Optical item management system
US10169660B1 (en) * 2014-12-19 2019-01-01 Amazon Technologies, Inc. Counting inventory items using image analysis
US10318917B1 (en) * 2015-03-31 2019-06-11 Amazon Technologies, Inc. Multiple sensor data fusion system
CA3018381A1 (en) * 2016-03-29 2017-10-05 Bossa Nova Robotics Ip, Inc. System and method for locating, identifying and counting items
CN109313801B (zh) * 2016-04-15 2023-07-18 可口可乐公司 搁板库存管理系统和方法
US10625426B2 (en) * 2016-05-19 2020-04-21 Simbe Robotics, Inc. Method for automatically generating planograms of shelving structures within a store
WO2018005369A1 (en) * 2016-06-30 2018-01-04 Bossa Nova Robotics Ip, Inc. Multiple camera system for inventory tracking
CA2976202A1 (en) * 2016-08-23 2018-02-23 Aditya Reddy Cheruku System and method for managing retail products
US10628792B2 (en) * 2016-12-30 2020-04-21 Walmart Apollo, Llc Systems and methods for monitoring and restocking merchandise

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012208814A (ja) * 2011-03-30 2012-10-25 Fujitsu Frontech Ltd 情報取得装置、商品登録装置、および、情報取得方法
JP2014049014A (ja) * 2012-09-03 2014-03-17 Toshiba Tec Corp 商品認識装置及び商品認識プログラム
JP2014218313A (ja) * 2013-05-01 2014-11-20 學思行數位行銷股▲分▼有限公司 在庫管理およびマーケティングのための画像認識システム
JP2015125535A (ja) * 2013-12-26 2015-07-06 ソフトバンクモバイル株式会社 管理システム及びプログラム
JP2016095786A (ja) * 2014-11-17 2016-05-26 東芝テック株式会社 情報処理装置及びプログラム
JP2016121019A (ja) * 2016-02-18 2016-07-07 日本電気株式会社 検品処理装置、検品システム、検品処理方法及びプログラム

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020118334A (ja) * 2019-01-22 2020-08-06 日立グローバルライフソリューションズ株式会社 冷蔵庫用遠隔制御装置、冷蔵庫用遠隔制御装置の制御方法およびプログラム
JP7101130B2 (ja) 2019-01-22 2022-07-14 日立グローバルライフソリューションズ株式会社 冷蔵庫用遠隔制御装置、冷蔵庫用遠隔制御装置の制御方法およびプログラム
JP2021120205A (ja) * 2020-01-31 2021-08-19 サトーホールディングス株式会社 プリンタ、プログラム、印字方法、ユニークｉｄ生成方法
WO2022085283A1 (ja) * 2020-10-20 2022-04-28 三菱電機株式会社 在庫管理システム、在庫管理装置、機械学習装置、在庫管理方法およびプログラム
WO2022138547A1 (ja) * 2020-12-24 2022-06-30 Ｂｉｒｄ ｆａｂ ｓｔｕｄｉｏ株式会社 生地検索装置、生地検索システム、生地検索方法およびプログラム
JP2022101412A (ja) * 2020-12-24 2022-07-06 Ｂｉｒｄ ｆａｂ ｓｔｕｄｉｏ株式会社 生地検索装置、生地検索システム、生地検索方法およびプログラム
JP7144077B2 (ja) 2020-12-24 2022-09-29 Ｂｉｒｄ ｆａｂ ｓｔｕｄｉｏ株式会社 生地検索装置、生地検索システムおよび生地検索プログラム
JP7082359B1 (ja) 2022-01-24 2022-06-08 株式会社イント 在庫管理装置及び在庫管理システム
JP2023107297A (ja) * 2022-01-24 2023-08-03 株式会社イント 在庫管理装置及び在庫管理システム
CN114743299A (zh) * 2022-04-09 2022-07-12 日照山川电子信息技术有限公司 基于图像识别的智能仓储处理方法
CN114743299B (zh) * 2022-04-09 2024-04-12 日照山川电子信息技术有限公司 基于图像识别的智能仓储处理方法

Also Published As

Publication number Publication date
JPWO2018016494A1 (ja) 2019-05-09
US20190311317A1 (en) 2019-10-10
JP7104948B2 (ja) 2022-07-22
US11328250B2 (en) 2022-05-10

Similar Documents

Publication Publication Date Title
WO2018016494A1 (ja) 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法
US10242410B2 (en) Storage medium, image processing method and image processing apparatus
US20180181913A1 (en) Shelf allocation assistance device, shelf allocation assistance system, shelf allocation assistance method, and recording medium
US20150242964A1 (en) Non-transitory Computer-Readable Medium, Data Management System and Data Management Server
JP2018139062A (ja) 商品情報取得システム
US11303769B2 (en) Image processing system that computerizes documents with notification of labeled items, control method thereof, and storage medium
WO2021039126A1 (ja) 業務支援システム、業務支援装置、業務支援方法、及び、コンピュータプログラム
JP6263483B2 (ja) 物品認識装置、販売データ処理装置および制御プログラム
US20160260178A1 (en) Commodity management system, information processing apparatus and terminal device for managing commodity
JP2006350405A (ja) 単価管理プログラム及び単価管理装置
US20190355039A1 (en) Methods of managing and querying product inventory data and inventory management server
JP2016212603A (ja) バーコード認識装置およびバーコード認識方法
JP7067812B2 (ja) 情報処理装置、及び制御方法
JP7386501B2 (ja) 文書処理プログラム及び情報処理装置
KR20180019939A (ko) 온라인으로 상품을 구매하는 방법 및 장치
US7207484B2 (en) System and method for stocktaking management
JP7160086B2 (ja) 情報処理装置、制御方法、及びプログラム
US20220277264A1 (en) Merchandise management system, merchandise management method, computer program and recording medium
KR20180111451A (ko) 상품 검색 장치, 서버 및 검색 시스템의 제어 방법
US20210287003A1 (en) Information processing apparatus and non-transitory computer readable medium
US20220230514A1 (en) Product recognition apparatus, system, and method
JP7125179B1 (ja) 商品認識装置、商品認識システム、商品認識方法、及びプログラム
JP2010211359A (ja) 業務管理システム
JP2021189518A (ja) プログラム、電子商取引システム、電子商取引支援方法、及び電子商取引方法
JP2021056962A (ja) ワークフロー支援装置、ワークフロー支援システム及びプログラム

Legal Events

Date Code Title Description
DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17831010

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018528818

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17831010

Country of ref document: EP

Kind code of ref document: A1