JP2019192169A - 判定装置、判定方法、および対象物判定プログラム - Google Patents
判定装置、判定方法、および対象物判定プログラム Download PDFInfo
- Publication number
- JP2019192169A JP2019192169A JP2018087742A JP2018087742A JP2019192169A JP 2019192169 A JP2019192169 A JP 2019192169A JP 2018087742 A JP2018087742 A JP 2018087742A JP 2018087742 A JP2018087742 A JP 2018087742A JP 2019192169 A JP2019192169 A JP 2019192169A
- Authority
- JP
- Japan
- Prior art keywords
- determination
- image
- unit
- classification category
- determination unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 32
- 238000012549 training Methods 0.000 claims abstract description 44
- 238000010801 machine learning Methods 0.000 claims abstract description 15
- 230000006870 function Effects 0.000 claims description 15
- 238000013480 data collection Methods 0.000 claims description 5
- 238000011156 evaluation Methods 0.000 description 44
- 235000013305 food Nutrition 0.000 description 42
- 238000004519 manufacturing process Methods 0.000 description 24
- 230000008569 process Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 13
- 230000000007 visual effect Effects 0.000 description 13
- 238000011179 visual inspection Methods 0.000 description 13
- 235000015278 beef Nutrition 0.000 description 10
- 238000001514 detection method Methods 0.000 description 10
- 235000013372 meat Nutrition 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 3
- 235000015277 pork Nutrition 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000003908 quality control method Methods 0.000 description 2
- 230000032258 transport Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 235000021485 packed food Nutrition 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Abstract
Description
〔判定システムの概要〕
本発明の一実施形態について図1〜図4に基づいて説明する。まず、本実施形態に係る判定システム500の概要を図2に基づいて説明する。図2は、判定システム500の構成例を示すブロック図である。
判定システム500の用途は特に限定されないが、例えば食品生産工場の品質管理に利用することができる。これについて図3に基づいて説明する。図3は、食品生産工場において、生産された食品を判定システム500の判定対象物として撮影した例を示す図である。
判定システム500は、例えば図1に示す判定装置1によって実現できる。図1は、判定装置1の要部構成の一例を示すブロック図である。なお、判定装置1は、図2の第1チェックシステム501〜第3チェックシステム503の機能を1つの装置で実現するものであるが、各機能を個別の装置で実現してもよい。
判定装置1が実行する処理の流れを図4に基づいて説明する。図4は、判定装置1が実行する処理(判定方法)の一例を示すフローチャートである。なお、以下では、パック詰めされた食品について、その内容物の分類カテゴリを判定装置1が判定する例を説明する。
上述のように、合否判定部105は、判定結果を出力部50に出力させてもよい。ここでは、第1判定部102または第2判定部103の判定結果を表示出力させる例を図5に基づいて説明する。図5は、判定結果の表示例を示す図である。
本発明の他の実施形態について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。本実施形態では、判定対象の画像における対象物の写り方に応じた評価基準で判定結果を評価する例を説明する。
本実施形態の判定装置1の構成を図6に基づいて説明する。図6は、対象物の写り方に応じた評価基準を設定する機能を備えた判定装置1の要部構成の一例を示すブロック図である。図6の判定装置1は、対象物領域検出部121および閾値設定部122を備えている点が図1の判定装置1との相違点である。
閾値設定部122が閾値を設定する際の処理の流れを図7に基づいて説明する。図7は、閾値設定処理の流れを説明する図である。閾値設定処理は、同図の(a)のフローチャートに示すような流れで行われる。なお、図6は、実施形態1と同様に、判定システム500の判定対象がトレイに入った食品である例を示している。
判定装置1の制御ブロック(特に制御部10に含まれる各部)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、ソフトウェアによって実現してもよい。
本発明の一態様に係る判定装置は、対象物を撮影した画像から当該対象物を複数の分類カテゴリのうちの1つに分類する判定装置であって、上記画像に基づいて上記対象物の分類カテゴリを判定する第1判定部と、上記第1判定部の判定結果の確度が閾値未満であった場合に、当該判定に用いられた上記画像に基づいて上記対象物の分類カテゴリを判定する第2判定部と、を備え、上記第2判定部は、画像と該画像に写る対象物の分類カテゴリとの対応関係を、訓練データセットを用いて機械学習した結果に基づいて上記対象物の分類カテゴリを判定し、上記訓練データセットには、過去に上記第1判定部が判定に用いた画像のうち、上記第1判定部の判定結果の確度が上記閾値未満であった判定に用いられた画像が含まれる。
102 第1判定部
103 第2判定部
104 第3判定部
106 判定結果評価部(訓練データ収集部)
122 閾値設定部
Claims (7)
- 対象物を撮影した画像から当該対象物を複数の分類カテゴリのうちの1つに分類する判定装置であって、
上記画像に基づいて上記対象物の分類カテゴリを判定する第1判定部と、
上記第1判定部の判定結果の確度が閾値未満であった場合に、当該判定に用いられた上記画像に基づいて上記対象物の分類カテゴリを判定する第2判定部と、を備え、
上記第2判定部は、画像と該画像に写る対象物の分類カテゴリとの対応関係を、訓練データセットを用いて機械学習した結果に基づいて上記対象物の分類カテゴリを判定し、
上記訓練データセットには、過去に上記第1判定部が判定に用いた画像のうち、上記第1判定部の判定結果の確度が上記閾値未満であった判定に用いられた画像が含まれることを特徴とする判定装置。 - 上記第1判定部の判定結果の確度が閾値未満であった場合に、上記第1判定部が当該判定に用いた上記画像を上記訓練データセットに追加する訓練データ収集部を備えていることを特徴とする請求項1に記載の判定装置。
- 上記第2判定部の判定結果の確度が閾値未満であった場合に、当該画像または上記対象物の閲覧者による分類カテゴリの入力を受け付けることにより、上記対象物の分類カテゴリを判定する第3判定部を備えていることを特徴とする請求項1または2に記載の判定装置。
- 上記画像における上記対象物の写り方に応じた上記閾値を設定する閾値設定部を備えていることを特徴とする請求項1から3の何れか1項に記載の判定装置。
- 上記閾値設定部は、上記画像の全領域に占める上記対象物が写っている領域の割合が大きいほど上記閾値を高く設定することを特徴とする請求項4に記載の判定装置。
- 1または複数の装置により、対象物を撮影した画像から当該対象物を複数の分類カテゴリのうちの1つに分類する判定方法であって、
上記画像に基づいて上記対象物の分類カテゴリを判定する第1判定ステップと、
上記第1判定ステップの判定結果の確度が閾値未満であった場合に、当該判定に用いられた上記画像に基づいて上記対象物の分類カテゴリを判定する第2判定ステップと、を含み、
上記第2判定ステップでは、画像と該画像に写る対象物の分類カテゴリとの対応関係を、訓練データセットを用いて機械学習した結果に基づいて上記対象物の分類カテゴリを判定し、
上記訓練データセットには、過去に上記第1判定ステップで判定に用いた画像のうち、当該第1判定ステップの判定結果の確度が上記閾値未満であった判定に用いられた画像が含まれることを特徴とする判定方法。 - 請求項1に記載の判定装置としてコンピュータを機能させるための対象物判定プログラムであって、上記第1判定部および上記第2判定部としてコンピュータを機能させるための対象物判定プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018087742A JP7219016B2 (ja) | 2018-04-27 | 2018-04-27 | 判定装置、判定方法、および対象物判定プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018087742A JP7219016B2 (ja) | 2018-04-27 | 2018-04-27 | 判定装置、判定方法、および対象物判定プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019192169A true JP2019192169A (ja) | 2019-10-31 |
JP7219016B2 JP7219016B2 (ja) | 2023-02-07 |
Family
ID=68391369
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018087742A Active JP7219016B2 (ja) | 2018-04-27 | 2018-04-27 | 判定装置、判定方法、および対象物判定プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7219016B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021076472A (ja) * | 2019-11-08 | 2021-05-20 | 株式会社イシダ | 物品処理装置、物品処理システム及び物品処理方法 |
KR20210157509A (ko) * | 2020-06-19 | 2021-12-29 | 주식회사 디엔비소프트 | 인공지능 기술을 이용한 축산물 부분육 부위 자동 판별 시스템 |
JP7500115B2 (ja) | 2020-09-04 | 2024-06-17 | オネストチョイス カンパニー リミテッド | 画像基盤のパック詰め肉類の品質分類及販売方法、装置及びシステム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006098093A (ja) * | 2004-09-28 | 2006-04-13 | Omron Corp | 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法 |
US20170082555A1 (en) * | 2015-09-18 | 2017-03-23 | Kla-Tencor Corporation | Adaptive Automatic Defect Classification |
JP2018027242A (ja) * | 2016-08-18 | 2018-02-22 | 安川情報システム株式会社 | 錠剤検知方法、錠剤検知装置および錠剤検知プログラム |
US20180089497A1 (en) * | 2016-09-27 | 2018-03-29 | Apical Ltd | Image processing |
-
2018
- 2018-04-27 JP JP2018087742A patent/JP7219016B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006098093A (ja) * | 2004-09-28 | 2006-04-13 | Omron Corp | 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法 |
US20170082555A1 (en) * | 2015-09-18 | 2017-03-23 | Kla-Tencor Corporation | Adaptive Automatic Defect Classification |
JP2018027242A (ja) * | 2016-08-18 | 2018-02-22 | 安川情報システム株式会社 | 錠剤検知方法、錠剤検知装置および錠剤検知プログラム |
US20180089497A1 (en) * | 2016-09-27 | 2018-03-29 | Apical Ltd | Image processing |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021076472A (ja) * | 2019-11-08 | 2021-05-20 | 株式会社イシダ | 物品処理装置、物品処理システム及び物品処理方法 |
JP7368834B2 (ja) | 2019-11-08 | 2023-10-25 | 株式会社イシダ | 物品処理装置、物品処理システム及び物品処理方法 |
KR20210157509A (ko) * | 2020-06-19 | 2021-12-29 | 주식회사 디엔비소프트 | 인공지능 기술을 이용한 축산물 부분육 부위 자동 판별 시스템 |
KR102443508B1 (ko) * | 2020-06-19 | 2022-09-16 | 주식회사 디엔비소프트 | 인공지능 기술을 이용한 축산물 부분육 부위 자동 판별 시스템 |
JP7500115B2 (ja) | 2020-09-04 | 2024-06-17 | オネストチョイス カンパニー リミテッド | 画像基盤のパック詰め肉類の品質分類及販売方法、装置及びシステム |
Also Published As
Publication number | Publication date |
---|---|
JP7219016B2 (ja) | 2023-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11720939B2 (en) | Retail checkout terminal fresh produce identification system | |
US20190220692A1 (en) | Method and apparatus for checkout based on image identification technique of convolutional neural network | |
JP6403261B2 (ja) | 分類器生成装置、外観検査装置、分類器生成方法、及びプログラム | |
US9064187B2 (en) | Method and system for item identification | |
US11680744B2 (en) | Artificial intelligence refrigerator | |
JP2019192169A (ja) | 判定装置、判定方法、および対象物判定プログラム | |
WO2015115274A1 (ja) | 物体判別装置、画像センサ、物体判別方法 | |
CN103072718A (zh) | 用于食品包装生产线的机器视觉检测系统及方法 | |
US20220174912A1 (en) | Egg Sorting Device, Egg Sorting Method and Recording Medium | |
CN110674736A (zh) | 一种识别食材新鲜度的方法、装置、服务器及存储介质 | |
CN111539311A (zh) | 基于ir和rgb双摄的活体判别方法、装置及系统 | |
JP7219023B2 (ja) | 情報処理装置および対象物判定プログラム | |
US9858662B2 (en) | Image processing device, computer storage medium, and method for detecting and displaying nucleated target cells | |
CN116977257A (zh) | 缺陷检测方法、装置、电子设备、存储介质及程序产品 | |
JP2020177429A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP5253194B2 (ja) | 物体検出装置 | |
JP6715001B2 (ja) | 食品検査システム及び食品検査方法 | |
CN114926464A (zh) | 在双录场景下的图像质检方法、图像质检装置及系统 | |
US20210232840A1 (en) | Object recognition system, object control device, object recognition device, object recognition method, object control method, and recording medium | |
US9311515B2 (en) | Automatic tuning of scanner lighting | |
CN109975299B (zh) | 发光源检测系统与方法 | |
JP2011135477A (ja) | モニタリング方法およびモニタリング装置 | |
US20230058730A1 (en) | Food product monitoring solution | |
JP2021128130A (ja) | 画像検査装置 | |
JP5137862B2 (ja) | 物体検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201221 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211207 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220705 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220928 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220928 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20220929 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20221025 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20221101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230126 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7219016 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |