JP2019008574A - Article determination device, system, method, and program - Google Patents

Article determination device, system, method, and program Download PDF

Info

Publication number
JP2019008574A
JP2019008574A JP2017124003A JP2017124003A JP2019008574A JP 2019008574 A JP2019008574 A JP 2019008574A JP 2017124003 A JP2017124003 A JP 2017124003A JP 2017124003 A JP2017124003 A JP 2017124003A JP 2019008574 A JP2019008574 A JP 2019008574A
Authority
JP
Japan
Prior art keywords
article
learning
correct answer
answer rate
rate curve
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017124003A
Other languages
Japanese (ja)
Other versions
JP6744633B2 (en
Inventor
貴文 矢野
Takafumi Yano
貴文 矢野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ypc LLC
Original Assignee
Ypc LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ypc LLC filed Critical Ypc LLC
Priority to JP2017124003A priority Critical patent/JP6744633B2/en
Publication of JP2019008574A publication Critical patent/JP2019008574A/en
Application granted granted Critical
Publication of JP6744633B2 publication Critical patent/JP6744633B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

To provide an article determination device, a system, a method, and a program in which a dense and highly accurate article determination including determining the authenticity can be executed.SOLUTION: A transaction management server 14 representing an article determination device comprises a learner 62 for inputting the image feature amount of an article 12 and outputting a multilevel value or a consecutive value indicating the matching degree of the article 12, and a learning processing part 64 for executing the learning processing of the learner 62 using a learning data group D2. The learning processing part 64 assumes the whole or a part of the learning data group D2 as a population, and the same terminates the learning processing when a correct answer ratio curve 80 (84, 86) indicating the relationship between the output level of the learner 62 and the correct answer ratio of output results satisfies the convergence condition.SELECTED DRAWING: Figure 6

Description

本発明は、学習器を用いて物品を判定する物品判定装置、システム、方法及びプログラムに関する。   The present invention relates to an article determination apparatus, system, method, and program for determining an article using a learning device.

近時、人工知能技術が飛躍的に発展し、高次の情報処理が実現可能になりつつある。例えば、学習処理により最適解を得るための収束判定方法が種々提案されている。   Recently, artificial intelligence technology has been dramatically improved, and high-order information processing is becoming feasible. For example, various convergence determination methods for obtaining an optimal solution by learning processing have been proposed.

特許文献1では、導出される各入力パターンの誤差評価関数と入力パターン毎のケース数からなる重み係数を用いて、学習の収束条件を決定するための総誤差評価関数を計算する手法が提案されている。   Patent Document 1 proposes a method of calculating a total error evaluation function for determining a learning convergence condition using a weighting coefficient including an error evaluation function of each input pattern to be derived and the number of cases for each input pattern. ing.

特許文献2では、誤差逆伝播学習の際に、入力データと入力層及び隠れ層のノード間の重み係数との相関係数に基づいて学習の収束を判定する手法が提案されている。   Patent Document 2 proposes a method of determining learning convergence based on a correlation coefficient between input data and a weight coefficient between nodes of the input layer and the hidden layer in error back propagation learning.

特開2011−107885号公報JP 2011-107885 A 国際公開第2007/096954号パンフレットInternational Publication No. 2007/096954

しかしながら、特許文献1、2で提案される手法は、例えば、降雨、海面温度を含む事象の予測に適しているが、物品の画像情報に基づいて種別又は真贋を判定するような、緻密かつ高精度な物品判定には適していない可能性がある。   However, the methods proposed in Patent Documents 1 and 2 are suitable for, for example, prediction of events including rainfall and sea surface temperature. However, the methods are precise and high so as to determine the type or authenticity based on the image information of the article. There is a possibility that it is not suitable for accurate article determination.

本発明は上記した問題を解決するためになされたものであり、真贋判定を含む緻密かつ高精度な物品判定を実行可能な物品判定装置、システム、方法及びプログラムを提供することを目的とする。   The present invention has been made to solve the above-described problems, and an object thereof is to provide an article determination apparatus, system, method, and program capable of executing precise and highly accurate article determination including authenticity determination.

第1の本発明に係る物品判定装置は、物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器と、学習データ群を用いて前記学習器に対する学習処理を実行する学習処理部と、を備え、前記学習処理部は、前記学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に前記学習処理を終了する。   The article determination apparatus according to the first aspect of the present invention is a learning device that receives an image feature amount of an article and outputs a multi-value or continuous value indicating the degree of coincidence of the article, and the learning device using a learning data group. A learning processing unit that executes a learning process for the learning unit, wherein the learning processing unit has a whole or a part of the learning data group as a population, and a relationship of a correct answer rate of an output result to an output level of the learning device. A correct answer rate curve is created, and the learning process is terminated when the correct answer rate curve satisfies a convergence condition.

このように、学習データ群の全部又は一部を母集団とする正答率曲線が収束条件を満たす場合に学習処理を終了するので、学習器は、統計的規則性が高い判定特性(つまり、出力レベルに対する出力結果の正答率)に基づいた物品の判定処理を実行可能となる。これにより、真贋判定を含む緻密かつ高精度な物品判定を行うことができる。   In this way, the learning process is terminated when the correct answer rate curve having the whole or part of the learning data group satisfies the convergence condition, so that the learning device has a determination characteristic with high statistical regularity (that is, output) The article determination process based on the correct answer rate of the output result with respect to the level can be executed. As a result, precise and highly accurate article determination including authenticity determination can be performed.

また、前記学習処理部は、前記学習処理の前後にわたる前記正答率曲線の変化量が閾値よりも小さくなった場合に、前記収束条件を満たすとして前記学習処理を終了してもよい。正答率曲線の収束性に着目することで、学習状態の最適化を図ることができる。   The learning processing unit may end the learning process as satisfying the convergence condition when a change amount of the correct answer rate curve before and after the learning process becomes smaller than a threshold value. By focusing on the convergence of the correct answer rate curve, the learning state can be optimized.

また、前記学習処理部は、前記物品の本物及び偽物に関する学習データのうち、いずれか一方のみで構成される前記母集団における前記正答率曲線を作成してもよい。これにより、正答率曲線の単調性(増加又は減少)が得られ易くなり、統計的規則性がさらに高くなる。   In addition, the learning processing unit may create the correct answer rate curve in the population composed of only one of learning data related to the real and fake of the article. Thereby, monotonicity (increase or decrease) of the correct answer rate curve is easily obtained, and the statistical regularity is further increased.

また、前記学習器は、前記画像特徴量の入力に対して前記物品の分類に応じた複数の一致度を一括で出力し、前記学習処理部は、前記学習器により一括で出力された上位の2つ以上の一致度に関する前記正答率曲線を作成してもよい。これにより、2つ以上の一致度の相関関係を正答率曲線に反映させることができる。   In addition, the learning device outputs a plurality of coincidences according to the classification of the article in batch with respect to the input of the image feature amount, and the learning processing unit outputs the higher ranks output in batch by the learning device. You may create the said correct answer rate curve regarding two or more coincidence degrees. Thereby, the correlation of two or more coincidences can be reflected in the correct answer rate curve.

また、当該物品判定装置は、前記学習器から出力された前記物品の一致度、該一致度に基づく前記物品の分類結果、及び/又は、前記物品の商取引、搬入出若しくは通関に関する情報を、外部に向けて出力可能に構成される情報出力部をさらに備えてもよい。これにより、判定対象の物品に関する有用な情報を提供することができる。   In addition, the article determination apparatus outputs the degree of coincidence of the article output from the learning device, the classification result of the article based on the degree of coincidence, and / or information on the commercial transaction, carry-in / out, or customs clearance of the article. An information output unit configured to be able to output the information may be further provided. Thereby, useful information regarding the article to be determined can be provided.

第2の本発明に係る物品判定システムは、物品を撮像可能なカメラを有する携帯端末と、前記カメラにより得られた前記物品の画像情報を前記携帯端末から取得可能に構成される上記したいずれかの物品判定装置と、を備える。   The article determination system according to the second aspect of the present invention is any of the above-described configurations configured to be able to acquire image information of the article obtained by the portable terminal having a camera capable of imaging the article from the portable terminal. And an article determination device.

第3の本発明に係る物品判定方法は、物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器を用いた方法であって、学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に、前記学習器に対する学習処理を終了する。   An article determination method according to a third aspect of the present invention is a method using a learning device that receives an image feature quantity of an article and outputs a multi-value or a continuous value indicating the degree of coincidence of the article, and includes a learning data group A correct answer rate curve indicating the relationship of the correct answer rate of the output result with respect to the output level of the learner is created, and the correct answer rate curve satisfies a convergence condition. The learning process ends.

第4の本発明に係る物品判定プログラムは、物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器を含むコンピュータに実行させるプログラムであって、前記コンピュータは、学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に、前記学習器に対する学習処理を終了する。   An article determination program according to a fourth aspect of the present invention is a program that is executed by a computer including a learning device that receives an image feature amount of an article and outputs a multivalue or continuous value indicating the degree of coincidence of the article, The computer creates a correct answer rate curve showing a relationship of a correct answer rate of an output result with respect to an output level of the learning device, wherein the whole or a part of a learning data group is a population, and the correct answer rate curve satisfies a convergence condition. In this case, the learning process for the learning device is terminated.

本発明に係る物品判定装置、システム、方法及びプログラムによれば、真贋判定を含む緻密かつ高精度な物品判定を実行することができる。   According to the article determination device, system, method, and program according to the present invention, precise and highly accurate article determination including authenticity determination can be performed.

本発明の一実施形態における物品判定システムとしての商取引支援システムの全体構成図である。1 is an overall configuration diagram of a commercial transaction support system as an article determination system in an embodiment of the present invention. 取引管理サーバによる物品の判定結果を示す図である。It is a figure which shows the determination result of the articles | goods by a transaction management server. 図1に示す物品判定部の機能ブロック図である。It is a functional block diagram of the article | item determination part shown in FIG. 図3に示す学習処理部の動作説明に供されるフローチャートである。It is a flowchart with which operation | movement description of the learning process part shown in FIG. 3 is provided. 学習器による判定結果の分類方法を示す図である。It is a figure which shows the classification method of the determination result by a learning device. 図6A〜図6Cは、正答率曲線の作成例を示す図である。6A to 6C are diagrams illustrating examples of creating a correct answer rate curve. 学習処理の収束条件を模式的に説明する図である。It is a figure which illustrates typically the convergence conditions of learning processing. 変形例における正答率曲線の作成方法を示す図である。It is a figure which shows the preparation method of the correct answer rate curve in a modification.

以下、本発明に係る物品判定装置について、物品判定システム、方法及びプログラムとの関係において好適な実施形態を挙げ、添付の図面を参照しながら説明する。   DESCRIPTION OF EMBODIMENTS Hereinafter, an article determination apparatus according to the present invention will be described with reference to the accompanying drawings by giving preferred embodiments in relation to an article determination system, method, and program.

[商取引支援システム10の説明]
<全体構成>
図1は、本発明の一実施形態における物品判定システムとしての商取引支援システム10の全体構成図である。商取引支援システム10は、サービスの利用登録がなされたユーザが、自身の所有物(以下、物品12)を取引対象の商品として、オンラインで出品可能に構成されるシステムである。
[Description of Commerce Support System 10]
<Overall configuration>
FIG. 1 is an overall configuration diagram of a commercial transaction support system 10 as an article determination system according to an embodiment of the present invention. The business transaction support system 10 is a system that allows a user who has registered for use of a service to exhibit his / her property (hereinafter referred to as an article 12) as an item for sale online.

このサービスは、例えば、ネットフリーマーケット、ネットオークション、或いは、ネット質屋である。本図の例では、物品12は、いわゆるブランド品の高級腕時計であるが、バッグ、アクセサリ(貴金属、宝石類)の他、合法的に商取引可能であればその種類は問わない。   This service is, for example, a net flea market, a net auction, or a net pawn shop. In the example shown in the figure, the article 12 is a so-called brand luxury watch, but any type can be used as long as it can be legally traded in addition to bags and accessories (precious metals, jewelry).

この商取引支援システム10は、具体的には、取引管理サーバ14(物品判定装置)と、ストレージ装置16と、1つ又は複数の携帯端末18と、を含んで構成される。   Specifically, the commercial transaction support system 10 includes a transaction management server 14 (article determination device), a storage device 16, and one or a plurality of portable terminals 18.

取引管理サーバ14は、物品12の商取引に関する統括的な制御を行うコンピュータである。具体的には、取引管理サーバ14は、通信部20(情報出力部)と、制御部22と、記憶部24と、を含んで構成される。   The transaction management server 14 is a computer that performs overall control related to the commercial transaction of the article 12. Specifically, the transaction management server 14 includes a communication unit 20 (information output unit), a control unit 22, and a storage unit 24.

通信部20は、外部装置に対して電気信号を送受信するインターフェースである。制御部22は、CPU(Central Processing Unit)、MPU(Micro-Processing Unit)を含む処理演算装置によって構成される。制御部22は、記憶部24に格納されたプログラムを読み出して実行することで、データベース処理部26、物品判定部28、及び取引管理部30として機能する。   The communication unit 20 is an interface that transmits and receives electrical signals to and from an external device. The control unit 22 includes a processing arithmetic device including a CPU (Central Processing Unit) and an MPU (Micro-Processing Unit). The control unit 22 functions as the database processing unit 26, the article determination unit 28, and the transaction management unit 30 by reading and executing the program stored in the storage unit 24.

記憶部24は、非一過性であり、かつ、コンピュータ読み取り可能な記憶媒体で構成されている。ここで、コンピュータ読み取り可能な記憶媒体は、光磁気ディスク、ROM、CD−ROM、フラッシュメモリ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置である。本図の例では、記憶部24には、後述するパラメータ群32が格納されている。   The storage unit 24 is configured of a non-transitory and computer-readable storage medium. Here, the computer-readable storage medium is a portable medium such as a magneto-optical disk, ROM, CD-ROM, or flash memory, or a storage device such as a hard disk built in the computer system. In the example of this figure, the storage unit 24 stores a parameter group 32 described later.

ストレージ装置16は、商取引の支援処理に関わる複数種類のデータベースを構築可能な外部記憶装置であり、取引管理サーバ14との間でデータのやり取りが可能である。具体的には、ストレージ装置16には、学習データに関するデータベース(以下、学習情報DB36)、物品12の出品情報に関するデータベース(以下、出品情報DB38)、及び、商取引情報に関するデータベース(以下、商取引情報DB40)が構築されている。   The storage device 16 is an external storage device capable of constructing a plurality of types of databases related to support processing for commercial transactions, and can exchange data with the transaction management server 14. Specifically, the storage device 16 includes a database relating to learning data (hereinafter referred to as learning information DB 36), a database relating to exhibition information of the article 12 (hereinafter referred to as exhibition information DB 38), and a database relating to commercial transaction information (hereinafter referred to as commercial transaction information DB 40). ) Has been built.

ところで、取引管理サーバ14は、ネットワークNW(インターネット)及び中継機器42を介して、1つ又は複数の携帯端末18と双方向に通信可能に接続されている。携帯端末18は、図示しないユーザにより携行可能な機器であり、例えば、スマートフォン、タブレット又はウェアラブル端末である。   By the way, the transaction management server 14 is connected to one or a plurality of portable terminals 18 through a network NW (Internet) and a relay device 42 so as to be capable of bidirectional communication. The portable terminal 18 is a device that can be carried by a user (not shown), and is, for example, a smartphone, a tablet, or a wearable terminal.

携帯端末18は、具体的には、物品12を撮像可能なカメラ44と、カメラ44により得られた画像情報D1を含む可視情報を表示する表示部46と、を含んで構成される。カメラ44は、携帯端末18に内蔵されてもよいし、外部端子を介して着脱可能な外付けモジュールであってもよい。   Specifically, the portable terminal 18 includes a camera 44 that can image the article 12 and a display unit 46 that displays visible information including image information D1 obtained by the camera 44. The camera 44 may be built in the mobile terminal 18 or may be an external module that is detachable via an external terminal.

<概略的な動作>
本実施形態における商取引支援システム10は、以上のように構成される。続いて、商取引支援システム10の概略的な動作について、図1を参照しながら説明する。
<Schematic operation>
The commercial transaction support system 10 in the present embodiment is configured as described above. Next, a schematic operation of the commercial transaction support system 10 will be described with reference to FIG.

(1)出品の問合せ
先ず、ユーザは、出品対象である物品12を準備した後、携帯端末18のカメラ44を用いて物品12を撮像する。その後、携帯端末18は、ユーザの操作に応じて、ユーザ情報及び画像情報D1を含む問合せデータを、取引管理サーバ14に向けて送信する。これにより、取引管理サーバ14は、中継機器42、ネットワークNW及び通信部20を介して、携帯端末18からの問合せデータを取得する。
(1) Inquiry about exhibition First, after preparing the article 12 to be exhibited, the user images the article 12 using the camera 44 of the mobile terminal 18. Thereafter, the mobile terminal 18 transmits inquiry data including the user information and the image information D1 to the transaction management server 14 in accordance with a user operation. Thereby, the transaction management server 14 acquires inquiry data from the portable terminal 18 via the relay device 42, the network NW, and the communication unit 20.

(2)物品12の判定
次いで、取引管理サーバ14(具体的には、物品判定部28)は、ユーザから供給された画像情報D1に基づいて、物品12の種別(商品名を含む)及び/又は真贋の判定処理を行う。これにより、物品判定部28は、該当する種別(商品名)又は判定の信頼度(例えば、後述する一致度)を含む判定結果D3を出力する。
(2) Determination of article 12 Next, the transaction management server 14 (specifically, the article determination unit 28), based on the image information D1 supplied from the user, the type of the article 12 (including the product name) and / or Alternatively, authenticity determination processing is performed. Thereby, the article determination unit 28 outputs the determination result D3 including the corresponding type (product name) or the reliability of determination (for example, the degree of coincidence described later).

図2は、取引管理サーバ14による物品12の判定結果を示す図である。より詳しくは、本図の左側には「本物」(正規品)である腕時計の画像を示すと共に、本図の右側には「偽物」(非正規品)である腕時計の画像を示す。本図から理解されるように、偽物の腕時計は、全体の外観上、一見すると本物と区別できない程度に類似した形状を有する。   FIG. 2 is a diagram illustrating a determination result of the article 12 by the transaction management server 14. More specifically, an image of a watch that is “real” (genuine) is shown on the left side of the figure, and an image of a watch that is “fake” (non-genuine) is shown on the right side of the figure. As can be understood from the drawing, the fake wristwatch has a shape similar to an extent that cannot be distinguished from the real watch at first glance.

ところが、文字盤のロゴ部分を拡大してみると、空洞部の大きさに関する相違箇所50、先端部の形状に関する相違箇所51〜53がある。ここで、物品判定部28による判定処理を行うことで、上記した相違箇所50〜53の形態的特徴を捉え、高い確度で物品12の真贋を判定することができる。   However, when the logo portion of the dial is enlarged, there are a difference portion 50 relating to the size of the cavity portion and difference portions 51 to 53 relating to the shape of the tip portion. Here, by performing the determination process by the article determination unit 28, it is possible to capture the morphological features of the above-described different portions 50 to 53 and determine the authenticity of the article 12 with high accuracy.

(3)相場情報D4の提供
次いで、取引管理サーバ14(具体的には、データベース処理部26)は、物品12の種別が正しく判定された場合、この種別に応じた最新の相場情報D4を商取引情報DB40から取得する。この相場情報D4は、例えば、取引価格(買取価格・レート)、直近の取引量・在庫数量、今後の需要予測を含む。
(3) Provision of market price information D4 Next, the transaction management server 14 (specifically, the database processing unit 26), when the type of the article 12 is correctly determined, performs the commercial transaction of the latest market price information D4 corresponding to this type. Obtained from the information DB 40. This market information D4 includes, for example, a transaction price (purchase price / rate), the latest transaction volume / inventory quantity, and future demand forecast.

その後、取引管理サーバ14は、判定結果D3及び相場情報D4を含む提供データを、携帯端末18に向けて送信する。これにより、携帯端末18は、通信部20、ネットワークNW及び中継機器42を介して、取引管理サーバ14からの提供データを取得する。   Thereafter, the transaction management server 14 transmits provided data including the determination result D3 and the market price information D4 to the mobile terminal 18. Thereby, the portable terminal 18 acquires the provision data from the transaction management server 14 via the communication unit 20, the network NW, and the relay device 42.

(4)出品の登録
次いで、ユーザは、表示部46に提示される相場情報D4の内容を確認し、出品に同意した旨の操作を行う。そうすると、取引管理サーバ14(具体的には、取引管理部30)は、ユーザの操作を受け付けた後、ユーザ情報、画像情報D1及び判定結果D3を集約し、取引単位毎の出品データを生成する。
(4) Registration of Exhibition Next, the user confirms the contents of the market price information D4 presented on the display unit 46, and performs an operation indicating that he has agreed to the exhibition. Then, the transaction management server 14 (specifically, the transaction management unit 30) collects the user information, the image information D1, and the determination result D3 after receiving a user operation, and generates exhibition data for each transaction unit. .

最後に、データベース処理部26は、生成された出品データをストレージ装置16に向けて供給する。これにより、出品情報DB38が最新の状態に更新されると共に、物品12の出品登録が完了する。   Finally, the database processing unit 26 supplies the generated exhibition data to the storage device 16. Thereby, the exhibition information DB 38 is updated to the latest state, and the exhibition registration of the article 12 is completed.

[物品判定部28の詳細説明]
<機能ブロック図>
図3は、図1に示す物品判定部28の機能ブロック図である。物品判定部28は、特徴量生成部60と、学習器62と、学習処理部64と、を備える。
[Detailed Description of Article Determination Unit 28]
<Functional block diagram>
FIG. 3 is a functional block diagram of the article determination unit 28 shown in FIG. The article determination unit 28 includes a feature amount generation unit 60, a learning device 62, and a learning processing unit 64.

特徴量生成部60は、学習器62の学習処理又は判定処理に供される1つ以上の画像特徴量を生成する。例えば、畳み込みニューラルネットワーク(CNN; Convolutional Neural Network)の場合、画像特徴量は、サイズ又は形状が異なる畳み込みカーネルを用いて抽出された画素値の集合に相当する。   The feature amount generation unit 60 generates one or more image feature amounts to be used for learning processing or determination processing of the learning device 62. For example, in the case of a convolutional neural network (CNN), the image feature amount corresponds to a set of pixel values extracted using convolution kernels having different sizes or shapes.

学習器62は、特徴量生成部60により生成された1つ以上の画像特徴量の入力を受け付けた後、学習処理により構築された演算規則に従って、物品12の判定結果D3を出力する。この学習器62は、例えば、ニューラルネットワーク、機械学習、深層学習(ディープラーニング)を含む公知の人工知能技術を用いて構築されている。なお、学習アルゴリズムは、教師あり学習、教師なし学習、強化学習のうちのいずれの手法を採用してもよい。   The learning device 62 receives the input of one or more image feature values generated by the feature value generation unit 60, and then outputs the determination result D3 of the article 12 according to the calculation rule constructed by the learning process. The learning device 62 is constructed by using known artificial intelligence techniques including, for example, a neural network, machine learning, and deep learning (deep learning). Note that the learning algorithm may employ any method of supervised learning, unsupervised learning, and reinforcement learning.

本図の例では、学習器62は、1つの入力層66と、1つ又は複数の中間層68(隠れ層)と、1つの出力層70とから構成される階層型ニューラルネットワークである。ここで、ニューロン(丸印で図示)の個数、中間層68の数、入力パラメータの定義、又は出力パラメータの定義を適宜変更してもよい。   In the example of this figure, the learning device 62 is a hierarchical neural network including one input layer 66, one or a plurality of intermediate layers 68 (hidden layers), and one output layer 70. Here, the number of neurons (illustrated by circles), the number of intermediate layers 68, the definition of input parameters, or the definition of output parameters may be changed as appropriate.

なお、学習器62の演算規則は、パラメータの集合体であるパラメータ群32の値によって決定される。パラメータ群32は、例えば、ニューロンの応答関数を特定する係数、シナプス結合の重み付け係数、中間層68の数、各層を構成するニューロンの個数を含んでもよい。このパラメータ群32は、記憶部24(図1)に格納され、必要に応じて適時に読み出される。   The calculation rule of the learning device 62 is determined by the value of the parameter group 32 that is a set of parameters. The parameter group 32 may include, for example, a coefficient for specifying a neuron response function, a weighting coefficient for synapse connection, the number of intermediate layers 68, and the number of neurons constituting each layer. The parameter group 32 is stored in the storage unit 24 (FIG. 1) and is read out in a timely manner as necessary.

学習処理部64は、学習情報DB36から読み出した学習データの集合体(以下、学習データ群D2)を用いて、学習器62の学習処理を実行する。具体的には、学習処理部64は、パラメータ更新部72と、後述する収束判断部74と、を含んで構成される。   The learning processing unit 64 executes the learning process of the learning device 62 using a collection of learning data read from the learning information DB 36 (hereinafter, learning data group D2). Specifically, the learning processing unit 64 includes a parameter update unit 72 and a convergence determination unit 74 described later.

パラメータ更新部72は、学習データの正解(理想的な出力値)と、学習器62による実際の出力値を比較し、出力値の誤差が小さくなるようにパラメータ群32の各値を更新する。更新アルゴリズムとして、具体的には、誤差逆伝播法を含む様々な手法を用いてもよい。   The parameter update unit 72 compares the correct answer (ideal output value) of the learning data with the actual output value from the learning device 62, and updates each value of the parameter group 32 so that the error of the output value becomes small. Specifically, various methods including an error back propagation method may be used as the update algorithm.

<学習処理の詳細>
続いて、物品判定部28の動作(学習器62に対する学習処理)について、図4のフローチャートを参照しながら説明する。
<Details of learning process>
Next, the operation of the article determination unit 28 (learning processing for the learning device 62) will be described with reference to the flowchart of FIG.

図4のステップS1において、学習処理部64は、学習処理に供される学習データ群D2を、学習情報DB36から読み出して取得する。この学習データ群D2は、1組以上の本物学習データ及び/又は1組以上の偽物学習データから構成される。   In step S1 of FIG. 4, the learning processing unit 64 reads and acquires the learning data group D2 used for the learning process from the learning information DB 36. The learning data group D2 includes one or more sets of real learning data and / or one or more sets of fake learning data.

ここで、「本物学習データ」は、「本物」の物品12を示す学習用画像と、特定の種別のみ「該当」であり、その他の種別は「非該当」に相当するラベル情報を対応付けた学習データである。また、「偽物学習データ」は、「偽物」の物品12を示す学習用画像と、いずれの種別も「非該当」に相当するラベル情報を対応付けた学習データである。   Here, “genuine learning data” correlates the learning image indicating the “genuine” article 12 with the label information corresponding to “non-applicable” only for a specific type and “non-applicable” for other types. Learning data. The “fake learning data” is learning data in which a learning image indicating the “fake” article 12 is associated with label information corresponding to “not applicable” for any type.

ステップS2において、学習処理部64は、ステップS1で取得された学習データ群D2を用いて、学習器62に対する学習処理を開始する。   In step S <b> 2, the learning processing unit 64 starts learning processing for the learning device 62 using the learning data group D <b> 2 acquired in step S <b> 1.

ステップS3において、学習処理部64は、学習データ群D2を構成する学習データを用いて学習処理を順次実行する。具体的には、[1]特徴量生成部60は、学習処理部64から供給された学習データに含まれる学習用画像を用いて、1つ又は複数の画像特徴量を生成する。[2]学習器62は、特徴量生成部60から供給された画像特徴量を入力層66に入力した後、中間層68での演算処理を経て、出力層70から物品12の一致度を出力する。[3]パラメータ更新部72は、誤差逆伝播法を含む様々な更新手法を用いて、パラメータ群32の各値を更新する。   In step S <b> 3, the learning processing unit 64 sequentially executes learning processing using learning data constituting the learning data group D <b> 2. Specifically, [1] the feature amount generation unit 60 generates one or more image feature amounts using the learning image included in the learning data supplied from the learning processing unit 64. [2] The learning device 62 inputs the image feature amount supplied from the feature amount generation unit 60 to the input layer 66, and then outputs the degree of coincidence of the article 12 from the output layer 70 through arithmetic processing in the intermediate layer 68. To do. [3] The parameter update unit 72 updates each value of the parameter group 32 using various update methods including the error back propagation method.

ステップS4において、収束判断部74は、ステップS3の学習処理に関する正答率曲線80を作成する。ここで、正答率曲線80とは、学習器62の出力レベルに対する出力結果の正答率の関係を示す特性曲線である。   In step S4, the convergence determination unit 74 creates a correct answer rate curve 80 related to the learning process in step S3. Here, the correct answer rate curve 80 is a characteristic curve showing the relationship of the correct answer rate of the output result to the output level of the learning device 62.

図5は、学習器62による判定結果の分類方法を示す図である。ここでは、物品12が本物であることを「陰性(Negative)」と定義し、物品12が偽物であることを「陽性(Positive)」と定義する。この場合、判定結果の属性は、[1]「本物」を「該当」と判定する「真陰性」(データ総数Ntn)、[2]「本物」を「非該当」と判定する「偽陽性」(データ総数Nfp)、[3]「偽物」を「非該当」と判定する「真陽性」(データ総数Ntp)、[4]「偽物」を「該当」と判定する「偽陰性」(データ総数Nfn)、の4つに分類される。   FIG. 5 is a diagram illustrating a classification method of the determination result by the learning device 62. Here, “Negative” means that the article 12 is genuine, and “Positive” means that the article 12 is fake. In this case, the attribute of the determination result is [1] “true negative” (data total Ntn) for determining “genuine” as “applicable”, and [2] “false positive” for determining “genuine” as “not applicable”. (Total number of data Nfp), [3] “True positive” (data total number Ntp) for determining “fake” as “not applicable”, [4] “False negative” for determining “fake” as “applicable” (total number of data) Nfn).

図6A〜図6Cは、正答率曲線80の作成例を示す図である。グラフの横軸は「出力レベルX」を示し、グラフの縦軸は「正答率Y」を示す。この出力レベルXは、出力層70(図3)に属する複数のニューロンによる出力値のうち、最も大きい出力値(いわゆる最大値)に相当する。各々の出力値は、物品12の種別に紐付けされ、かつ、[0,1]の範囲に正規化された一致度(いわゆる、ラベル値)である。「1」は一致度が最も高い出力レベルであり、「0」は一致度が最も低い出力レベルである。   6A to 6C are diagrams illustrating examples of creating the correct answer rate curve 80. The horizontal axis of the graph indicates “output level X”, and the vertical axis of the graph indicates “correct answer rate Y”. This output level X corresponds to the largest output value (so-called maximum value) among the output values of a plurality of neurons belonging to the output layer 70 (FIG. 3). Each output value is a degree of coincidence (so-called label value) linked to the type of the article 12 and normalized to the range of [0, 1]. “1” is the output level with the highest degree of coincidence, and “0” is the output level with the lowest degree of coincidence.

一方、正答率Yは、特定の母集団において学習器62が正しい結果(つまり、真陰性又は真陽性)を出力した割合を示す。この母集団は、例えば、学習データ群D2の全部又は一部であり、[1]本物学習データのみの集合、[2]偽物学習データのみの集合、[3]本物学習データ及び偽物学習データが混合した集合、のいずれであってもよい。   On the other hand, the correct answer rate Y indicates the rate at which the learning device 62 outputs a correct result (that is, true negative or true positive) in a specific population. This population is, for example, all or part of the learning data group D2, and [1] a set of only real learning data, [2] a set of only fake learning data, [3] real learning data and fake learning data Any of a mixed set may be used.

つまり、正答率曲線80は、実質的には、[0,1]の出力レベルXを複数のデータ区間で区分したヒストグラムに相当する。この場合、データ区間の幅・個数又は母集団の属性・数の組み合わせを任意に変更してもよい。   That is, the correct answer rate curve 80 substantially corresponds to a histogram in which the output level X of [0, 1] is divided into a plurality of data sections. In this case, the combination of the width / number of data sections or the attribute / number of the population may be arbitrarily changed.

図6Aは、本物学習データのみからなる母集団における正答率曲線80を示す。具体的には、(1)式及び(2)式に示すK個のプロット(i=1〜K)を順次接続することで、本図に示す正答率曲線80が得られる。
X=X(i) ‥(1)
Y=Mtn(i)/{Mtn(i)+Mfp(i)} ‥(2)
FIG. 6A shows a correct answer rate curve 80 in a population composed only of genuine learning data. Specifically, the correct answer rate curve 80 shown in this figure is obtained by sequentially connecting K plots (i = 1 to K) shown in the equations (1) and (2).
X = X (i) (1)
Y = Mtn (i) / {Mtn (i) + Mfp (i)} (2)

ここで、Mtn(i)は、i番目の出力レベルX(i)における「真陰性(正解)」のデータ数である。また、Mfp(i)は、出力レベルX(i)における「偽陽性(第1種過誤)」のデータ数である。   Here, Mtn (i) is the number of “true negative (correct answer)” data at the i-th output level X (i). Mfp (i) is the number of data of “false positive (first type error)” at the output level X (i).

出力レベルX=1である場合、物品12の分類(つまり、該当)を概ね正しく判定しているため、正答率Y=1(つまり、100%)になる。一方、出力レベルXが0に近づくほど、母集団の数及び不正解(偽陽性)の数が少なくなるので、正答率Yが0に近づいていく。すなわち、正答率曲線80は、2点(0,0)、(1,1)を結ぶ単調増加関数を示す場合が多い。   When the output level X = 1, since the classification (that is, corresponding) of the article 12 is roughly determined correctly, the correct answer rate Y = 1 (that is, 100%). On the other hand, as the output level X approaches 0, the number of populations and the number of incorrect answers (false positives) decrease, so that the correct answer rate Y approaches 0. That is, the correct answer rate curve 80 often shows a monotonically increasing function connecting two points (0, 0) and (1, 1).

図6Bは、偽物学習データのみからなる母集団における正答率曲線80を示す。具体的には、上記の(1)式、以下の(3)式に示すK個のプロット(i=1〜K)を順次接続することで、本図に示す正答率曲線80が得られる。
Y=Mtp(i)/{Mtp(i)+Mfn(i)} ‥(3)
FIG. 6B shows a correct answer rate curve 80 in a population composed only of fake learning data. Specifically, the correct answer rate curve 80 shown in this figure is obtained by sequentially connecting the K plots (i = 1 to K) shown in the above equation (1) and the following equation (3).
Y = Mtp (i) / {Mtp (i) + Mfn (i)} (3)

ここで、Mtp(i)は、i番目の出力レベルX(i)における「真陽性(正解)」のデータ数である。また、Mfn(i)は、出力レベルX(i)における「偽陰性(第2種過誤)」のデータ数である。   Here, Mtp (i) is the number of “true positive (correct answer)” data at the i-th output level X (i). Mfn (i) is the number of data of “false negative (second type error)” at the output level X (i).

出力レベルX=0である場合、物品12の分類(つまり、非該当)を概ね正しく判定しているため、正答率Y=0(つまり、0%)になる。一方、出力レベルXが1に近づくほど、母集団の数及び不正解(偽陰性)の数が少なくなるので、正答率Yが0に近づいていく。すなわち、正答率曲線は、2点(1,0)、(0,1)を結ぶ単調減少関数を示す場合が多い。   When the output level X = 0, since the classification (that is, non-applicable) of the article 12 is roughly determined correctly, the correct answer rate Y = 0 (that is, 0%). On the other hand, as the output level X approaches 1, the number of populations and the number of incorrect answers (false negatives) decrease, and the correct answer rate Y approaches 0. That is, the correct answer rate curve often shows a monotone decreasing function connecting two points (1, 0) and (0, 1).

図6Cは、本物学習データ及び偽物学習データを混合してなる母集団における正答率曲線80を示す。具体的には、上記の(1)式、以下の(4)式に示すK個のプロット(i=1〜K)を順次接続することで、本図に示す正答率曲線80が得られる。
Y={Mtn(i)+Mtp(i)}
/{Mtn(i)+Mfp(i)+Mtp(i)+Mfn(i)} ‥(4)
FIG. 6C shows a correct answer rate curve 80 in a population obtained by mixing real learning data and fake learning data. Specifically, the correct answer rate curve 80 shown in this figure is obtained by sequentially connecting the K plots (i = 1 to K) shown in the above equation (1) and the following equation (4).
Y = {Mtn (i) + Mtp (i)}
/ {Mtn (i) + Mfp (i) + Mtp (i) + Mfn (i)} (4)

例えば、本物と偽物の混合比が1:1である場合、正答率曲線80は、図6A及び図6Bに示す2つの正答率Yの和に概ね等しい曲線形状になる。   For example, when the mixing ratio of the real product and the fake product is 1: 1, the correct answer rate curve 80 has a curve shape substantially equal to the sum of the two correct answer rates Y shown in FIGS. 6A and 6B.

このように、学習処理部64は、物品12の本物及び偽物に関する学習データのうち、いずれか一方のみで構成される母集団における正答率曲線80を作成してもよい。これにより、正答率曲線80の単調性(増加又は減少)が得られ易くなり、統計的規則性がさらに高くなる。   As described above, the learning processing unit 64 may create the correct answer rate curve 80 in the population composed of only one of the learning data related to the genuine article and the fake article 12. Thereby, the monotonicity (increase or decrease) of the correct answer rate curve 80 is easily obtained, and the statistical regularity is further increased.

ステップS5において、収束判断部74は、ステップS4で作成された正答率曲線80が収束条件を満たすか否かを判断する。この収束条件は、例えば、[1]正答率曲線80と、予め定められた目標曲線との差分量が閾値よりも小さいこと、[2]学習処理の前後にわたる正答率曲線80の変化量が閾値よりも小さいこと、が挙げられる。   In step S5, the convergence determination unit 74 determines whether or not the correct answer rate curve 80 created in step S4 satisfies the convergence condition. For example, [1] the difference between the correct answer rate curve 80 and a predetermined target curve is smaller than the threshold, and [2] the amount of change in the correct answer rate curve 80 before and after the learning process is the threshold. Smaller than that.

図7では、前回及び今回作成した2つの正答率曲線80(以下、前者を「前回曲線81」、後者を「今回曲線82」という)が重ねて表記されている。前回曲線81は、γoldを指数とする累乗関数で近似的に表現される。今回曲線82は、γnewを指数とする累乗関数で近似的に表現される。   In FIG. 7, two correct answer rate curves 80 (hereinafter, the former is referred to as “previous curve 81” and the latter is referred to as “current curve 82”) created in the previous time and the current time are superimposed. The previous curve 81 is approximately expressed by a power function with γold as an index. The current curve 82 is approximately expressed by a power function with γnew as an index.

ここで、正答率曲線80の変化量は、例えば、正答率Yの最大差分値(ΔY)であってもよいし、関数の形状を特定可能な係数(ここでは、指数)の差の絶対値(|γnew−γold|)であってもよい。   Here, the amount of change of the correct answer rate curve 80 may be, for example, the maximum difference value (ΔY) of the correct answer rate Y, or the absolute value of the difference between coefficients (here, exponents) that can specify the shape of the function. (| Γnew−γold |) may also be used.

このように、学習処理部64は、学習処理の前後にわたる正答率曲線80の変化量が閾値よりも小さくなった場合に、収束条件を満たすとして学習処理を終了してもよい。正答率曲線80の収束性に着目することで、学習状態の最適化を図ることができる。   In this way, the learning processing unit 64 may end the learning process as satisfying the convergence condition when the change amount of the correct answer rate curve 80 before and after the learning process becomes smaller than the threshold value. By focusing on the convergence of the correct answer rate curve 80, the learning state can be optimized.

収束条件を満たさないと判断された場合(ステップS5:NO)、ステップS3に戻って、以下、ステップS3〜S5を順次繰り返す。一方、収束条件を満たすと判断された場合(ステップS5:YES)、ステップS6に進む。   When it is determined that the convergence condition is not satisfied (step S5: NO), the process returns to step S3, and thereafter steps S3 to S5 are sequentially repeated. On the other hand, when it is determined that the convergence condition is satisfied (step S5: YES), the process proceeds to step S6.

ステップS6において、学習処理部64は、学習器62に対する学習処理を終了する。この学習器62を用いることで、図2に示すように、真贋判定を含む緻密かつ高精度な物品判定を行うことができる。   In step S <b> 6, the learning processing unit 64 ends the learning process for the learning device 62. By using this learning device 62, as shown in FIG. 2, it is possible to perform precise and highly accurate article determination including authenticity determination.

[商取引支援システム10による効果]
以上のように、商取引支援システム10(物品判定システム)は、物品12を撮像可能なカメラ44を有する携帯端末18と、カメラ44により得られた物品12の画像情報D1を携帯端末18から取得可能に構成される取引管理サーバ14と、を備える。
[Effects of the commercial transaction support system 10]
As described above, the commercial transaction support system 10 (article determination system) can acquire from the mobile terminal 18 the mobile terminal 18 having the camera 44 capable of imaging the article 12 and the image information D1 of the article 12 obtained by the camera 44. The transaction management server 14 comprised by these.

そして、取引管理サーバ14(物品判定装置)は、[1]物品12の画像特徴量を入力とし、物品12の一致度を示す多値又は連続値を出力とする学習器62と、[2]学習データ群D2を用いて学習器62に対する学習処理を実行する学習処理部64と、を備え、[3]学習処理部64は、学習データ群D2の全部又は一部を母集団とする、学習器62の出力レベルに対する出力結果の正答率の関係を示す正答率曲線80を作成し、正答率曲線80が収束条件を満たす場合に学習処理を終了する。   Then, the transaction management server 14 (article determination apparatus) [1] a learning device 62 that receives the image feature amount of the article 12 and outputs a multi-value or continuous value indicating the degree of coincidence of the article 12; [2] A learning processing unit 64 that performs learning processing on the learning device 62 using the learning data group D2, and [3] the learning processing unit 64 uses all or part of the learning data group D2 as a population. A correct answer rate curve 80 showing the relationship of the correct answer rate of the output result to the output level of the device 62 is created, and the learning process is terminated when the correct answer rate curve 80 satisfies the convergence condition.

また、この物品判定方法及び物品判定プログラムによれば、学習データ群D2の全部又は一部を母集団とする、学習器62の出力レベルに対する出力結果の正答率の関係を示す正答率曲線80を作成し(ステップS4)、正答率曲線80が収束条件を満たす場合に(ステップS5:YES)、学習器62に対する学習処理を終了する(ステップS6)。   Further, according to the article determination method and the article determination program, the correct answer rate curve 80 showing the relationship of the correct answer rate of the output result with respect to the output level of the learning device 62 with the whole or a part of the learning data group D2 as a population. When the correct answer rate curve 80 satisfies the convergence condition (step S5: YES), the learning process for the learning device 62 is terminated (step S6).

このように、学習データ群D2の全部又は一部を母集団とする正答率曲線80が収束条件を満たす場合に学習処理を終了するので、学習器62は、統計的規則性が高い判定特性(つまり、出力レベルに対する出力結果の正答率)に基づいた物品12の判定処理を実行可能となる。これにより、真贋判定を含む緻密かつ高精度な物品判定を行うことができる。   In this way, the learning process ends when the correct answer rate curve 80 having the whole or a part of the learning data group D2 as a population satisfies the convergence condition. Therefore, the learning device 62 has a determination characteristic (high statistical regularity) That is, the determination process of the article 12 based on the output result correct answer rate) can be performed. As a result, precise and highly accurate article determination including authenticity determination can be performed.

[変形例]
<第1例>
図6A〜図6Cの例では、1組の学習データにつき1つの出力値(最大値のみ)を用いて正答率曲線80を作成したが、この作成方法に限られない。
[Modification]
<First example>
In the example of FIGS. 6A to 6C, the correct answer rate curve 80 is created using one output value (only the maximum value) for one set of learning data, but this is not a limitation.

図8は、変形例における正答率曲線84、86の作成方法を示す図である。ここで、学習器62の出力層70には150個のニューロンがあり、出力値(ラベル値)が大きい順に、第1位〜第150位のランク付けがなされているとする。   FIG. 8 is a diagram showing a method of creating correct answer rate curves 84 and 86 in the modification. Here, it is assumed that the output layer 70 of the learning device 62 has 150 neurons, and the first to 150th ranks are ranked in descending order of output values (label values).

ここで、正答率曲線84は、第1位の出力値(=0.95)を「正解」とし、第2位の出力値(=0.62)を「不正解」として、1組の学習データにつき標本数を二重に計上して作成された1つ分の曲線に相当する。   Here, the correct answer rate curve 84 is a set of learning in which the first output value (= 0.95) is “correct” and the second output value (= 0.62) is “incorrect”. This corresponds to one curve created by double counting the number of samples per data.

一方、正答率曲線86は、第1位の出力値(=0.95)を「正解」とし、第2位の出力値(=0.62)を「不正解」とし、第3位の出力値(=0.38)を「不正解」として、1組の学習データにつき順位毎に作成された3つの曲線に相当する。   On the other hand, in the correct answer rate curve 86, the first output value (= 0.95) is “correct”, the second output value (= 0.62) is “incorrect”, and the third output The value (= 0.38) is “incorrect answer”, which corresponds to three curves created for each rank for one set of learning data.

このように、画像特徴量の入力に対して物品12の分類に応じた複数の一致度を一括で出力する学習器62に関して、学習処理部64は、学習器62により一括で出力された上位の2つ以上の一致度に関する正答率曲線84、86を作成してもよい。これにより、2つ以上の一致度の相関関係を正答率曲線84、86に反映させることができる。   As described above, with respect to the learning device 62 that collectively outputs a plurality of matching degrees according to the classification of the article 12 with respect to the input of the image feature amount, the learning processing unit 64 has the higher rank output collectively by the learning device 62 You may create the correct answer rate curves 84 and 86 regarding two or more coincidences. Thereby, the correlation of two or more degrees of coincidence can be reflected in the correct answer rate curves 84 and 86.

<第2例>
また、取引管理サーバ14は、学習器62から出力された物品12の一致度、該一致度に基づく物品12の分類結果、及び/又は、物品12の商取引、搬入出若しくは通関に関する情報を、外部に向けて出力可能に構成される出力装置(通信部20の他、ディスプレイ、スピーカ)をさらに備えてもよい。
<Second example>
Further, the transaction management server 14 sends the degree of coincidence of the article 12 output from the learning device 62, the classification result of the article 12 based on the degree of coincidence, and / or information related to the commercial transaction, carry-in / out, or customs clearance of the article 12 to the outside. An output device (display, speaker, in addition to the communication unit 20) configured to be able to output the signal may be further provided.

これにより、判定対象の物品12に関する有用な情報を提供可能となり、様々なユースケースに適用することができる。具体的には、鑑定、検査、査察、警備、或いは港湾・空港での通関に関わる各種業務(スクリーニング、セカンドオピニオンを含む)のみならず、当該業務の教育にも活用してもよい。或いは、画像情報D1を用いた製品の自動検品(例えば、プリント基板における半田付けの良否判定、カニを含む動植物の年齢・鮮度の判定)にも適用可能である。   This makes it possible to provide useful information regarding the article 12 to be determined, and can be applied to various use cases. Specifically, it may be used not only for various operations (including screening and second opinion) related to appraisal, inspection, inspection, security, or customs clearance at ports and airports, but also for education of such operations. Alternatively, the present invention can also be applied to automatic inspection of products using the image information D1 (for example, determination of soldering quality on a printed circuit board, determination of age and freshness of animals and plants including crabs).

[補足]
なお、この発明は、上述した実施形態に限定されるものではなく、この発明の主旨を逸脱しない範囲で自由に変更できることは勿論である。或いは、技術的に矛盾が生じない範囲で各々の構成を任意に組み合わせてもよい。
[Supplement]
In addition, this invention is not limited to embodiment mentioned above, Of course, it can change freely in the range which does not deviate from the main point of this invention. Or you may combine each structure arbitrarily in the range which does not produce technical contradiction.

例えば、上記した実施形態では、物品判定装置を汎用計算機(コンピュータ)により構成しているが、これに代わってFPGA(Field-Programmable Gate Array)等の集積回路を含む任意のハードウェア構成を採用してもよい。   For example, in the above-described embodiment, the article determination apparatus is configured by a general-purpose computer (computer). Instead, any hardware configuration including an integrated circuit such as an FPGA (Field-Programmable Gate Array) is employed. May be.

10…商取引支援システム(物品判定システム)
12…物品 14…取引管理サーバ(物品判定装置)
16…ストレージ装置 18…携帯端末
20…通信部(情報出力部) 22…制御部
24…記憶部 26…データベース処理部
28…物品判定部 30…取引管理部
32…パラメータ群 36…学習情報DB
38…出品情報DB 40…商取引情報DB
44…カメラ 46…表示部
60…特徴量生成部 62…学習器
64…学習処理部 66…入力層
68…中間層 70…出力層
72…パラメータ更新部 74…収束判断部
80、84、86…正答率曲線 D1…画像情報
D2…学習データ群 D3…判定結果
D4…相場情報
10 ... Commerce support system (goods judgment system)
12 ... Goods 14 ... Transaction management server (goods judgment device)
DESCRIPTION OF SYMBOLS 16 ... Storage apparatus 18 ... Portable terminal 20 ... Communication part (information output part) 22 ... Control part 24 ... Memory | storage part 26 ... Database processing part 28 ... Article determination part 30 ... Transaction management part 32 ... Parameter group 36 ... Learning information DB
38 ... Exhibition information DB 40 ... Commerce transaction information DB
44 ... Camera 46 ... Display unit 60 ... Feature value generation unit 62 ... Learning device 64 ... Learning processing unit 66 ... Input layer 68 ... Intermediate layer 70 ... Output layer 72 ... Parameter update unit 74 ... Convergence determining unit 80, 84, 86 ... Correct answer rate curve D1 ... Image information D2 ... Learning data group D3 ... Judgment result D4 ... Market price information

Claims (8)

物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器と、
学習データ群を用いて前記学習器に対する学習処理を実行する学習処理部と、
を備え、
前記学習処理部は、前記学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に前記学習処理を終了することを特徴とする物品判定装置。
A learning device that takes an image feature amount of an article as an input, and outputs a multi-value or continuous value indicating the degree of coincidence of the article;
A learning processing unit that executes learning processing for the learning device using a learning data group;
With
The learning processing unit creates a correct answer rate curve indicating a relation of a correct answer rate of an output result with respect to an output level of the learning device, wherein the whole or a part of the learning data group is a population, and the correct answer rate curve is converged. An article determination apparatus that ends the learning process when a condition is satisfied.
請求項1に記載の物品判定装置において、
前記学習処理部は、前記学習処理の前後にわたる前記正答率曲線の変化量が閾値よりも小さくなった場合に、前記収束条件を満たすとして前記学習処理を終了することを特徴とする物品判定装置。
The article determination apparatus according to claim 1,
The article determination apparatus according to claim 1, wherein the learning processing unit ends the learning processing as satisfying the convergence condition when a change amount of the correct answer rate curve before and after the learning processing becomes smaller than a threshold value.
請求項1又は2に記載の物品判定装置において、
前記学習処理部は、前記物品の本物及び偽物に関する学習データのうち、いずれか一方のみで構成される前記母集団における前記正答率曲線を作成することを特徴とする物品判定装置。
In the article determination apparatus according to claim 1 or 2,
The article determination apparatus according to claim 1, wherein the learning processing unit creates the correct answer rate curve in the population composed of only one of learning data related to real and fake articles.
請求項1〜3のいずれか1項に記載の物品判定装置において、
前記学習器は、前記画像特徴量の入力に対して前記物品の分類に応じた複数の一致度を一括で出力し、
前記学習処理部は、前記学習器により一括で出力された上位の2つ以上の一致度に関する前記正答率曲線を作成する
ことを特徴とする物品判定装置。
The article determination apparatus according to any one of claims 1 to 3,
The learning device collectively outputs a plurality of matching degrees according to the classification of the article with respect to the input of the image feature amount,
The said learning process part produces the said correct answer rate curve regarding two or more high-order coincidence output collectively by the said learning device. The article | item determination apparatus characterized by the above-mentioned.
請求項1〜4のいずれか1項に記載の物品判定装置において、
前記学習器から出力された前記物品の一致度、該一致度に基づく前記物品の分類結果、及び/又は、前記物品の商取引、搬入出若しくは通関に関する情報を、外部に向けて出力可能に構成される情報出力部をさらに備えることを特徴とする物品判定装置。
In the article determination apparatus according to any one of claims 1 to 4,
The degree of coincidence of the articles output from the learning device, the classification result of the articles based on the degree of coincidence, and / or information related to commercial transactions, loading / unloading or customs clearance of the articles can be output to the outside. The article determination apparatus further comprising an information output unit.
物品を撮像可能なカメラを有する携帯端末と、
前記カメラにより得られた前記物品の画像情報を前記携帯端末から取得可能に構成される請求項1〜5のいずれか1項に記載の物品判定装置と、
を備えることを特徴とする物品判定システム。
A portable terminal having a camera capable of imaging an article;
The article determination device according to any one of claims 1 to 5, wherein image information of the article obtained by the camera is configured to be acquired from the portable terminal.
An article determination system comprising:
物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器を用いた物品判定方法であって、
学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に、前記学習器に対する学習処理を終了することを特徴とする物品判定方法。
An article determination method using a learning device that takes an image feature amount of an article as input and outputs a multi-value or continuous value indicating the degree of coincidence of the article,
Create a correct answer rate curve showing the relationship of the correct answer rate of the output result with respect to the output level of the learning device, the whole or a part of the learning data group, and when the correct answer rate curve satisfies the convergence condition, An article determination method characterized by ending learning processing for a learning device.
物品の画像特徴量を入力とし、前記物品の一致度を示す多値又は連続値を出力とする学習器を含むコンピュータに実行させる物品判定プログラムであって、
前記コンピュータは、学習データ群の全部又は一部を母集団とする、前記学習器の出力レベルに対する出力結果の正答率の関係を示す正答率曲線を作成し、前記正答率曲線が収束条件を満たす場合に、前記学習器に対する学習処理を終了することを特徴とする物品判定プログラム。
An article determination program to be executed by a computer including a learning device that receives an image feature amount of an article and outputs a multivalue or continuous value indicating the degree of coincidence of the article,
The computer creates a correct answer rate curve showing a relationship of a correct answer rate of an output result with respect to an output level of the learning device, wherein the whole or a part of a learning data group is a population, and the correct answer rate curve satisfies a convergence condition. In this case, the article determination program ends the learning process for the learning device.
JP2017124003A 2017-06-26 2017-06-26 Article determination device, system, learning method and program Active JP6744633B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017124003A JP6744633B2 (en) 2017-06-26 2017-06-26 Article determination device, system, learning method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017124003A JP6744633B2 (en) 2017-06-26 2017-06-26 Article determination device, system, learning method and program

Publications (2)

Publication Number Publication Date
JP2019008574A true JP2019008574A (en) 2019-01-17
JP6744633B2 JP6744633B2 (en) 2020-08-19

Family

ID=65025964

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017124003A Active JP6744633B2 (en) 2017-06-26 2017-06-26 Article determination device, system, learning method and program

Country Status (1)

Country Link
JP (1) JP6744633B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200119385A (en) * 2019-03-26 2020-10-20 주식회사 캐시고 Artificial intelligence appraisal system, artificial intelligence appraisal method and storage medium
KR102202788B1 (en) * 2020-05-04 2021-01-14 주식회사 아우라제이 Artificial intelligence device and method for discriminating counterfeits
JP7480811B2 (en) 2021-09-14 2024-05-10 日本電気株式会社 Method of sample analysis, electronic device, computer readable storage medium, and computer program product

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03134705A (en) * 1989-10-20 1991-06-07 Hitachi Ltd Process control method
JPH09179843A (en) * 1995-11-22 1997-07-11 Arch Dev Corp Shift unchanged artificial neural network for computer detection of gregarious fine calcare part in x-ray image of breast
JPH1083432A (en) * 1996-09-09 1998-03-31 Sumitomo Metal Ind Ltd Character recognizing method and device therefor
JP2007327885A (en) * 2006-06-08 2007-12-20 Matsushita Electric Works Ltd Abnormality determination method and abnormality determination device
WO2016167779A1 (en) * 2015-04-16 2016-10-20 Mitsubishi Electric Corporation Speech recognition device and rescoring device
US20170032285A1 (en) * 2014-04-09 2017-02-02 Entrupy Inc. Authenticating physical objects using machine learning from microscopic variations

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03134705A (en) * 1989-10-20 1991-06-07 Hitachi Ltd Process control method
JPH09179843A (en) * 1995-11-22 1997-07-11 Arch Dev Corp Shift unchanged artificial neural network for computer detection of gregarious fine calcare part in x-ray image of breast
JPH1083432A (en) * 1996-09-09 1998-03-31 Sumitomo Metal Ind Ltd Character recognizing method and device therefor
JP2007327885A (en) * 2006-06-08 2007-12-20 Matsushita Electric Works Ltd Abnormality determination method and abnormality determination device
US20170032285A1 (en) * 2014-04-09 2017-02-02 Entrupy Inc. Authenticating physical objects using machine learning from microscopic variations
WO2016167779A1 (en) * 2015-04-16 2016-10-20 Mitsubishi Electric Corporation Speech recognition device and rescoring device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200119385A (en) * 2019-03-26 2020-10-20 주식회사 캐시고 Artificial intelligence appraisal system, artificial intelligence appraisal method and storage medium
KR102358607B1 (en) * 2019-03-26 2022-02-07 주식회사 캐시고 Artificial intelligence appraisal system, artificial intelligence appraisal method and storage medium
KR102202788B1 (en) * 2020-05-04 2021-01-14 주식회사 아우라제이 Artificial intelligence device and method for discriminating counterfeits
KR102307619B1 (en) * 2020-05-04 2021-10-01 주식회사 아우라제이 method and system for identifying counterfeit products based on artificial intelligence
JP7480811B2 (en) 2021-09-14 2024-05-10 日本電気株式会社 Method of sample analysis, electronic device, computer readable storage medium, and computer program product

Also Published As

Publication number Publication date
JP6744633B2 (en) 2020-08-19

Similar Documents

Publication Publication Date Title
US20210073283A1 (en) Machine learning and prediction using graph communities
CN110503531A (en) The dynamic social activity scene recommended method of timing perception
CN111695719A (en) User value prediction method and system
WO2014143729A1 (en) Method and apparatus for interactive evolutionary optimization of concepts
Yilmaz et al. Synthetic demand data generation for individual electricity consumers: Generative Adversarial Networks (GANs)
KR102203252B1 (en) Method and system for collaborative filtering based on generative adversarial networks
JP6744633B2 (en) Article determination device, system, learning method and program
CN112633927B (en) Combined commodity mining method based on knowledge graph rule embedding
KR102531185B1 (en) System for providing online advertising content platform
KR20220084136A (en) Learning Support Devices, Learning Devices, Learning Support Methods and Learning Support Programs
Ahamed et al. A recommender system based on deep neural network and matrix factorization for collaborative filtering
CN111861679A (en) Commodity recommendation method based on artificial intelligence
CN115271976A (en) Advisory recommendation method and device and computer readable storage medium
CN114445121A (en) Advertisement click rate prediction model construction and advertisement click rate prediction method
CN112287225B (en) Object recommendation method and device
CN113761388A (en) Recommendation method and device, electronic equipment and storage medium
CN115294405B (en) Method, device, equipment and medium for constructing crop disease classification model
CN115222203A (en) Risk identification method and device
CN114429384A (en) Intelligent product recommendation method and system based on e-commerce platform
CN117390295B (en) Method and device for recommending objects based on mask module
Almajed et al. Forecasting NFT Prices on Web3 Blockchain Using Machine Learning to Provide SAAS NFT Collectors
JP6670406B1 (en) Learning device and prediction device
CN111815396B (en) Product screening method, system, equipment and storage medium based on metagraph
JP7379300B2 (en) Estimation device, estimation method and program
CN117708340B (en) Label text determining method, model training and adjusting method, device and medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170707

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190403

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200518

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200714

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200727

R150 Certificate of patent or registration of utility model

Ref document number: 6744633

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350