JP7312560B2 - 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル - Google Patents
情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル Download PDFInfo
- Publication number
- JP7312560B2 JP7312560B2 JP2019015884A JP2019015884A JP7312560B2 JP 7312560 B2 JP7312560 B2 JP 7312560B2 JP 2019015884 A JP2019015884 A JP 2019015884A JP 2019015884 A JP2019015884 A JP 2019015884A JP 7312560 B2 JP7312560 B2 JP 7312560B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- inspection
- inspection object
- restored
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Image Analysis (AREA)
Description
本発明の一実施形態に係る錠剤9の欠陥を検出する後述する情報処理装置200を含む錠剤印刷装置1の全体構成について、図1を参照しつつ説明する。図1は、錠剤印刷装置1の構成を示した図である。錠剤印刷装置1は、複数の錠剤9を搬送しながら、各錠剤9の表面に、製品としての識別を目的として、製品名、製品コード、会社名、ロゴマーク等の画像をインクジェット方式で印刷する装置である。本実施形態の錠剤9は、円盤形状を有する(後述する図4参照)。ただし、錠剤9の形状は、楕円形状等の他の形状であってもよい。なお、以下の説明においては、複数の錠剤9が搬送される方向を「搬送方向」と称し、搬送方向に対して垂直かつ水平な方向を「幅方向」と称する。
図6は、錠剤印刷装置1内の制御部70における機能の一部を概念的に示したブロック図である。図6に示すように、本実施形態の制御部70は、角度認識部71、ヘッド制御部72、および検査部を有する。これらの機能は、記憶装置703に記憶されたコンピュータプログラムPおよびデータDをメモリ702に一時的に読み出し、当該コンピュータプログラムPおよびデータDに基づいて、プロセッサ701が演算処理を行うことによって、実現される。また、検査部としての機能は、制御部70の一部または全部の機械要素からなる情報処理装置200により実現される。情報処理装置200には、予め機械学習により生成された学習済みの学習モデルがインストールされている。
続いて、情報処理装置200の構成について、説明する。上述のとおり、制御部70内の検査部としての機能は、制御部70の一部または全部の機械要素からなる情報処理装置200により実現される。情報処理装置200には、予め機械学習により生成された学習済みの学習モデルがインストールされている。情報処理装置200は、錠剤9における傷等の欠陥の有無を検査し、欠陥を有する異常な錠剤9を検出することができる装置である。図6に示すように、情報処理装置200は、機能として、画像復元部201、判定部202、および出力部203を有する。
以上、本発明の主たる実施形態について説明したが、本発明は、上述の実施形態に限定されるものではない。
9 錠剤
10 ホッパー
20 フィーダ部
30 搬送ドラム
33 第1状態検出カメラ
40 第1印刷部
41 第1搬送コンベア
42 第2状態検出カメラ
43 第1ヘッドユニット
44 第1検査カメラ
45 第1定着部
50 第2印刷部
51 第2搬送コンベア
52 第3状態検出カメラ
53 第2ヘッドユニット
54 第2検査カメラ
55 第2定着部
56 欠陥品回収部
60 搬出コンベア
70 制御部
71 角度認識部
90 割線
100 筐体
200 情報処理装置
201 画像復元部
202 判定部
203 出力部
411 第1プーリ
412 第1搬送ベルト
431 第1ヘッド
511 第2プーリ
512 第2搬送ベルト
531 第2ヘッド
561 回収箱
701 プロセッサ
702 メモリ
703 記憶装置
704 受信部
705 送信部
D データ
D1 印刷画像データ
De 欠陥
Dr 判定結果
Ih 画像データ
Ii 検査画像
Io 学習画像
Ip 撮影画像
Ir 復元画像
P コンピュータプログラム
X 学習モデル
Y 学習モデル
Claims (7)
- 錠剤を検査対象物とし、正常な検査対象物の画像データの集合を用いて、欠陥を有する異常な検査対象物を検出する情報処理装置であって、
正常か異常か不明な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像され、検査対象物の割線の向きに応じて回転された検査画像の一部が隠された画像データから、前記隠された一部が復元された復元画像を生成する画像復元部と、
前記復元画像を、前記検査画像と比較することによって、検査対象物が正常か異常かを判定する判定部と、
前記判定部による判定結果を出力する出力部と、
を備え、
前記画像復元部は、正常な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像された複数の学習画像のそれぞれの一部が隠された画像データから、前記隠された一部が復元された復元画像を高精度に生成できるように、ディープラーニングにより学習済みであり、
前記割線は、検査対象物のうちの前記割線が形成される割線面の中心を通り、前記割線面の両端まで真っ直ぐに延び、かつ、検査対象物の側面に現れる前記割線の端部から、前記割線の位置を斜め方向から認識可能である、情報処理装置。 - 請求項1に記載の情報処理装置であって、
前記画像復元部は、前記画像データのうち、前記隠された一部の場所を順次に変更しながら、複数の前記復元画像を生成し、
前記判定部は、複数の前記復元画像のそれぞれと、前記検査画像とを比較することによって、検査対象物が正常か異常かを判定する、情報処理装置。 - 請求項2に記載の情報処理装置であって、
前記判定部は、前記復元画像と前記検査画像との差異が所定の許容値よりも大きい場合に、前記隠された一部の場所を前記欠陥の場所として決定し、
前記出力部は、さらに前記欠陥の場所に係る情報を出力する、情報処理装置。 - 請求項1から請求項3までのいずれか1項に記載の情報処理装置であって、
前記画像復元部は、
前記検査画像から特徴を抽出して潜在変数を生成するエンコード処理と、
前記潜在変数から前記復元画像を生成するデコード処理と、
を実行する、情報処理装置。 - 請求項4に記載の情報処理装置であって、
前記画像復元部は、前記学習において、畳み込みニューラルネットワークにより、前記エンコード処理および前記デコード処理のパラメータが調整済みである、情報処理装置。 - 錠剤を検査対象物とし、正常な検査対象物の画像データの集合を用いて、欠陥を有する異常な検査対象物を検出する情報処理方法であって、
a)正常な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像された複数の学習画像のそれぞれの一部が隠された画像データから、前記隠された一部が復元された復元画像を生成する処理をディープラーニングによって学習する工程と、
b)正常か異常か不明な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像され、検査対象物の割線の向きに応じて回転された検査画像の一部が隠された画像データから、前記工程a)において学習した処理を用いて復元された復元画像を、前記検査画像と比較することによって、検査対象物が正常か異常かを判定する工程と、
c)前記工程b)による判定結果を出力する工程と、
を有し、
前記割線は、検査対象物のうちの前記割線が形成される割線面の中心を通り、前記割線面の両端まで真っ直ぐに延び、かつ、検査対象物の側面に現れる前記割線の端部から、前記割線の位置を斜め方向から認識可能である、情報処理方法。 - 錠剤を検査対象物とし、正常な検査対象物の画像データの集合を用いて、欠陥を有する異常な検査対象物を検出する情報処理プログラムであって、
a)正常か異常か不明な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像され、検査対象物の割線の向きに応じて回転された検査画像の一部が隠された画像データから、前記隠された一部が復元された復元画像を生成する画像復元処理と、
b)前記復元画像を、前記検査画像と比較することによって、検査対象物が正常か異常かを判定する判定処理と、
c)前記判定処理による判定結果を出力する出力処理と、
をコンピュータに実行させ、
前記画像復元処理は、正常な検査対象物が前記検査対象物の側面を視認可能な斜め方向から撮像された複数の学習画像のそれぞれの一部が隠された画像データから、前記隠された一部が復元された復元画像を高精度に生成できるように、ディープラーニングにより学習済みであり、
前記割線は、検査対象物のうちの前記割線が形成される割線面の中心を通り、前記割線面の両端まで真っ直ぐに延び、かつ、検査対象物の側面に現れる前記割線の端部から、前記割線の位置を斜め方向から認識可能である、情報処理プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019015884A JP7312560B2 (ja) | 2019-01-31 | 2019-01-31 | 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル |
PCT/JP2019/043948 WO2020158098A1 (ja) | 2019-01-31 | 2019-11-08 | 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル |
CN201980077404.1A CN113168686A (zh) | 2019-01-31 | 2019-11-08 | 信息处理装置、信息处理方法、信息处理程序、学习方法以及已学习模型 |
TW108143219A TWI724655B (zh) | 2019-01-31 | 2019-11-27 | 資訊處理裝置、資訊處理方法、資訊處理程式、藉由深度學習而學習之學習方法及安裝有學習完成模型之資訊處理裝置 |
JP2023113020A JP7496458B2 (ja) | 2023-07-10 | 情報処理装置、情報処理方法、情報処理プログラム、学習装置、学習方法および学習済モデル |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019015884A JP7312560B2 (ja) | 2019-01-31 | 2019-01-31 | 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023113020A Division JP7496458B2 (ja) | 2023-07-10 | 情報処理装置、情報処理方法、情報処理プログラム、学習装置、学習方法および学習済モデル |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020123238A JP2020123238A (ja) | 2020-08-13 |
JP7312560B2 true JP7312560B2 (ja) | 2023-07-21 |
Family
ID=71840404
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019015884A Active JP7312560B2 (ja) | 2019-01-31 | 2019-01-31 | 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP7312560B2 (ja) |
CN (1) | CN113168686A (ja) |
TW (1) | TWI724655B (ja) |
WO (1) | WO2020158098A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230281787A1 (en) * | 2020-08-26 | 2023-09-07 | Mitsubishi Heavy Industries, Ltd. | Image generation device, image generation method, and program |
JP7330328B1 (ja) | 2022-05-17 | 2023-08-21 | Ckd株式会社 | 目視検査補助装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017217784A (ja) | 2016-06-06 | 2017-12-14 | フロイント産業株式会社 | 固形製剤印刷機及び固形製剤印刷方法 |
JP2018079240A (ja) | 2016-11-18 | 2018-05-24 | 株式会社Screenホールディングス | 印刷装置およびバリデーション方法 |
US20180374569A1 (en) | 2017-06-27 | 2018-12-27 | Nec Laboratories America, Inc. | Reconstructor and contrastor for medical anomaly detection |
WO2019087803A1 (ja) | 2017-10-31 | 2019-05-09 | 日本電気株式会社 | 画像処理装置、画像処理方法及び記録媒体 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08136466A (ja) * | 1994-11-10 | 1996-05-31 | Dainippon Screen Mfg Co Ltd | 画像パターン検査装置 |
JP5025893B2 (ja) * | 2004-03-29 | 2012-09-12 | ソニー株式会社 | 情報処理装置および方法、記録媒体、並びにプログラム |
JP5660361B2 (ja) * | 2010-03-26 | 2015-01-28 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
CN107949848B (zh) * | 2015-06-26 | 2022-04-15 | 英特尔公司 | 数字图像中的缺陷检测和校正 |
JP2017097718A (ja) * | 2015-11-26 | 2017-06-01 | 株式会社リコー | 識別処理装置、識別システム、識別処理方法、およびプログラム |
US10181185B2 (en) * | 2016-01-11 | 2019-01-15 | Kla-Tencor Corp. | Image based specimen process control |
TWI647626B (zh) * | 2017-11-09 | 2019-01-11 | 慧穩科技股份有限公司 | Intelligent image information and big data analysis system and method using deep learning technology |
TWM558943U (zh) * | 2017-11-22 | 2018-04-21 | Aiwin Technology Co Ltd | 運用深度學習技術之智慧影像資訊及大數據分析系統 |
CN108961217B (zh) * | 2018-06-08 | 2022-09-16 | 南京大学 | 一种基于正例训练的表面缺陷检测方法 |
-
2019
- 2019-01-31 JP JP2019015884A patent/JP7312560B2/ja active Active
- 2019-11-08 WO PCT/JP2019/043948 patent/WO2020158098A1/ja active Application Filing
- 2019-11-08 CN CN201980077404.1A patent/CN113168686A/zh active Pending
- 2019-11-27 TW TW108143219A patent/TWI724655B/zh active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017217784A (ja) | 2016-06-06 | 2017-12-14 | フロイント産業株式会社 | 固形製剤印刷機及び固形製剤印刷方法 |
JP2018079240A (ja) | 2016-11-18 | 2018-05-24 | 株式会社Screenホールディングス | 印刷装置およびバリデーション方法 |
US20180374569A1 (en) | 2017-06-27 | 2018-12-27 | Nec Laboratories America, Inc. | Reconstructor and contrastor for medical anomaly detection |
WO2019087803A1 (ja) | 2017-10-31 | 2019-05-09 | 日本電気株式会社 | 画像処理装置、画像処理方法及び記録媒体 |
Non-Patent Citations (1)
Title |
---|
栗原 慧至,外1名,画像補完技術を用いた眼底画像の異常検出,電気学会研究会資料,2018年09月26日,ST-18-085~102・104~118,pp. 105-109 |
Also Published As
Publication number | Publication date |
---|---|
TWI724655B (zh) | 2021-04-11 |
CN113168686A (zh) | 2021-07-23 |
JP2023126337A (ja) | 2023-09-07 |
TW202032498A (zh) | 2020-09-01 |
WO2020158098A1 (ja) | 2020-08-06 |
JP2020123238A (ja) | 2020-08-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6297428B2 (ja) | 錠剤印刷装置および錠剤印刷方法 | |
JP6357351B2 (ja) | 錠剤印刷装置および錠剤印刷方法 | |
JP6325699B2 (ja) | 錠剤印刷装置 | |
WO2018003458A1 (ja) | 錠剤印刷装置および錠剤印刷方法 | |
WO2019187898A1 (ja) | 印刷装置および印刷方法 | |
JP7312560B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム、学習方法および学習済モデル | |
JP7405663B2 (ja) | 錠剤印刷装置及び錠剤印刷方法 | |
JP2023121822A (ja) | 搬送処理装置および搬送処理方法 | |
JP6633704B2 (ja) | 錠剤印刷方法 | |
JP7496458B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム、学習装置、学習方法および学習済モデル | |
JP2018079240A (ja) | 印刷装置およびバリデーション方法 | |
JP2019072497A (ja) | 錠剤印刷装置および錠剤印刷方法 | |
CN110386421B (zh) | 振动送料器以及印刷装置 | |
WO2019155680A1 (ja) | 判定装置、判定方法、錠剤印刷装置および錠剤印刷方法 | |
JP6397061B2 (ja) | 錠剤印刷方法 | |
JP7146678B2 (ja) | 判定装置、判定方法、錠剤印刷装置および錠剤印刷方法 | |
JP7451364B2 (ja) | 錠剤印刷装置および錠剤印刷方法 | |
JP2019167171A (ja) | 搬送装置および搬送方法 | |
JP7397132B2 (ja) | 錠剤印刷装置及び錠剤印刷方法 | |
TWI836852B (zh) | 片劑檢查裝置及片劑印刷裝置 | |
JP2019202506A (ja) | 印刷方法、印刷装置、および粒状物 | |
TWI836559B (zh) | 錠劑印刷裝置及錠劑印刷方法 | |
JP2022170002A (ja) | 領域判定方法、錠剤検査方法、および錠剤検査装置 | |
JP2020039946A (ja) | 錠剤印刷方法 | |
JP2017080502A (ja) | 錠剤印刷装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230410 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230613 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230710 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7312560 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |