JP7340806B2 - 画像検査装置、画像検査システム、および画像検査用プログラム - Google Patents
画像検査装置、画像検査システム、および画像検査用プログラム Download PDFInfo
- Publication number
- JP7340806B2 JP7340806B2 JP2018248158A JP2018248158A JP7340806B2 JP 7340806 B2 JP7340806 B2 JP 7340806B2 JP 2018248158 A JP2018248158 A JP 2018248158A JP 2018248158 A JP2018248158 A JP 2018248158A JP 7340806 B2 JP7340806 B2 JP 7340806B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- inspection
- data
- logo
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
先ず、本願において開示される発明の代表的な実施の形態について概要を説明する。なお、以下の説明では、一例として、発明の構成要素に対応する図面上の参照符号を、括弧を付して記載している。
以下、本発明の実施の形態の具体例について図を参照して説明する。なお、以下の説明において、各実施の形態において共通する構成要素には同一の参照符号を付し、繰り返しの説明を省略する。また、図面は模式的なものであり、各要素の寸法の関係、各要素の比率などは、現実と異なる場合があることに留意する必要がある。図面の相互間においても、互いの寸法の関係や比率が異なる部分が含まれている場合がある。
図1は、本発明の実施の形態1に係る画像検査システムの構成を示す図である。
同図に示される画像検査システム1は、所定の対象物を表す大量の画像データを機械学習によって学習して学習済みモデルを生成し、その学習済みモデルを用いて、入力された画像データ中に上記所定の対象物が含まれているか否かを検査するためのシステムである。
ここで、ロゴとは、企業、団体、商品、またはサービス等を表す標章や商品の外観等の情報である。ここで、標章とは、文字、図形、記号、立体的形状若しくは色彩、またはこれらの結合をいう。
図3は、実施の形態1に係る画像検査装置2のハードウェア構成を示す図である。
画像検査装置2は、例えば、PC(パーソナルコンピュータ)やサーバ等の情報処理装置(コンピュータ)であって、インストールされた画像検査用プログラムにしたがって、学習済みモデルを用いて入力された画像データにおける所定の対象物(ロゴ)の有無を検査する装置である。
通信部21は、外部の情報処理装置と通信を行うための機能部である。
具体的に、通信部21は、ネットワーク6に接続されて、ネットワーク6を介して複数のクライアント端末装置4やウェブサーバ5等の外部の情報処理装置との間でデータの送受信を行う。
図4は、実施の形態1に係る学習済みモデル生成装置3の機能ブロック構成を示す図である。
図5は、実施の形態1に係る学習済みモデル生成装置3のハードウェア構成を示す図である。
図6A~図6Dに示すように、立体画像データ302は、ロゴ(所定の対象物)を立体的に表した画像データである。例えば、立体画像データ302は、所定の形状を有する立体の表面に描かれたロゴ(所定の対象物)を所定の角度(方向)から見たときの当該ロゴを表す画像データ、または立体的に表したロゴそのものを所定の角度から見たときの画像データである。
画像合成部34は、例えば、図6A~図6Dに示されるような立体画像データ302_1~302_nと背景画像データ303_1~303_mとそれぞれ一枚ずつ選択し、選択した立体画像データ302と背景画像データ303とを互いに異なるレイヤーで重ね合わせて合成し、合成画像データ304を生成する。
これにより、画像検査装置2は、記憶部24に記憶された学習済みモデル202(307)を用いて、入力した画像に対する特定のロゴの有無を検査する画像検査処理を行うことが可能となる。
図8は、画像検査システム1による処理の流れを示すフロー図である。
ステップS1において、先ず、学習用画像データ生成部32の画像合成部34が立体画像データ302と背景画像データ303とを記憶部36から読み出す(ステップS11)。
例えば、クライアント端末装置4が、画像検査システム1に対して、指定された情報媒体における特定のロゴの有無の検査の実行を要求するリクエスト情報を送信した場合、画像検査装置2がその要求に応答して画像検査処理を開始する。あるいは、例えば、ユーザ(例えば、サービス提供者)が画像検査装置2の入力装置103(キーボードやマウス等)を操作することによりリクエスト情報が入力された場合、画像検査装置2がその要求に応答して画像検査処理を開始する。
ステップS4において、先ず、画像検査装置2のデータ取得部22が、検査対象画像データ201を取得する(ステップS41)。
すなわち、学習済みモデル生成装置3によれば、ロゴの見え方とその背景とが異なる大量の学習用画像データ306を生成することができるので、これらの学習用画像データ306を機械学習器に学習させることにより、画像データ(コンテンツ)内のロゴの表示態様や背景画像の変化に対してロバスト性の高い学習済みモデルを生成することができる。これにより、画像検査装置2によるロゴの検出精度を向上させることが可能となる。
図11は、実施の形態2に係る画像検査システムにおける学習済みモデル生成装置の機能ブロック構成を示す図である。
図13は、実施の形態3に係る画像検査システムにおける画像検査装置の機能ブロック構成を示す図である。
同図に示される画像検査装置2Bは、検査対象のロゴに関する検査結果に基づいて、検査対象画像データの画像編集を行う機能を備える点において、実施の形態1に係る画像検査装置2と相違し、その他の点においては画像検査装置2と同様である。
図14に示すように、画像検査システム1Bでは、ステップS4の後に、画像編集部25が、検査対象画像データ201に基づく画像編集処理を実行する(ステップS5)。
先ず、ステップS5では、画像編集部25が、記憶部24から検査結果データ203を読み出す(ステップS51)。次に、画像編集部25が、ステップS51で読み出した検査結果データ203に対応する検査対象画像データ201を読み出す(ステップS52)。
以上、本発明者らによってなされた発明を実施の形態に基づいて具体的に説明したが、本発明はそれに限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは言うまでもない。
Claims (9)
- 検査対象画像データを取得するデータ取得部と、
画像データを入力として当該画像データにロゴを表す画像が含まれるか否かを検査するようにコンピュータを機能させるための学習済みモデルを記憶する記憶部と、
前記記憶部に記憶された前記学習済みモデルに基づいて、前記データ取得部によって取得した前記検査対象画像データに前記ロゴを表す画像が含まれるか否かを検査する検査部と、
インターネットを含むネットワークと接続するための通信部とを備え、
前記学習済みモデルは、立体の表面に描かれた前記ロゴを互いに異なる複数の角度から見たときの複数の第1画像をそれぞれ主題とし、前記第1画像と異なる複数の第2画像をそれぞれ背景とした複数の第3画像に前記ロゴに関する識別情報をそれぞれラベリングして生成された複数の学習用画像データを機械学習することによって調整された学習済みパラメータを含み、
前記データ取得部は、前記通信部を介して前記検査対象画像データを取得し、
前記データ取得部は、前記ネットワークにおける検査範囲を指定する情報を取得した場合に、前記検査範囲を指定する情報に基づいて、前記ネットワークから前記検査対象画像データを取得し、
前記検査範囲を指定する情報は、アドレス情報を含み、
前記データ取得部は、前記アドレス情報で指定されたウェブページを画像データとして複製し、当該画像データを前記検査対象画像データとして取得する
画像検査装置。 - 請求項1に記載の画像検査装置において、
前記検査範囲を指定する情報は、タグ情報を含み、
前記データ取得部は、前記タグ情報によって特定されるSNSに投稿された画像を含むデータを前記検査対象画像データとして取得する
ことを特徴とする画像検査装置。 - 請求項1または2に記載の画像検査装置において、
前記検査部は、前記検査対象画像データの画像内における前記ロゴの位置を示す位置情報を含む検査結果データを生成する
ことを特徴とする画像検査装置。 - 請求項3に記載の画像検査装置において、
前記検査結果データに基づいて、前記データ取得部によって取得した前記検査対象画像データの画像編集を行う画像編集部を更に備える
ことを特徴とする画像検査装置。 - 請求項4に記載の画像検査装置において、
前記画像編集部は、前記位置情報に基づいて、前記検査対象画像データの画像内における前記ロゴを含む領域に対して画像編集処理を行う
ことを特徴とする画像検査装置。 - 請求項1乃至5の何れか一項に記載の画像検査装置において、
前記データ取得部は、複数のフレームを含む動画データを入力し、前記動画データのフレームに基づいて前記検査対象画像データを取得する
ことを特徴とする画像検査装置。 - 立体の表面に描かれたロゴを互いに異なる複数の角度から見たときの複数の第1画像をそれぞれ主題とし、前記第1画像と異なる複数の第2画像をそれぞれ背景とした複数の第3画像に前記ロゴに関する識別情報をそれぞれラベリングした複数の学習用画像データを生成する学習用画像データ生成部と、
前記学習用画像データを機械学習することにより、画像データを入力として当該画像データに前記ロゴを表す画像が含まれるか否かを検査するようにコンピュータを機能させるための学習済みモデルを生成する学習済みモデル生成部と、
検査対象画像データを取得するデータ取得部と、
前記学習済みモデル生成部によって生成された前記学習済みモデルに基づいて、前記データ取得部によって取得した前記検査対象画像データに前記ロゴを表す画像が含まれるか否かを検査する検査部と、
インターネットを含むネットワークと接続するための通信部とを備え、
前記データ取得部は、前記通信部を介して前記検査対象画像データを取得し、
前記データ取得部は、前記ネットワークにおける検査範囲を指定する情報を取得した場合に、前記検査範囲を指定する情報に基づいて、前記ネットワークから前記検査対象画像データを取得し、
前記検査範囲を指定する情報は、アドレス情報を含み、
前記データ取得部は、前記アドレス情報で指定されたウェブページを画像データとして複製し、当該画像データを前記検査対象画像データとして取得する
画像検査システム。 - コンピュータを、
検査対象画像データを取得するデータ取得部と、
画像データを入力として当該画像データにロゴを表す画像が含まれるか否かを検査するようにコンピュータを機能させるための学習済みモデルを記憶する記憶部と、
前記記憶部に記憶された前記学習済みモデルに基づいて、前記データ取得部によって取得した前記検査対象画像データに前記ロゴを表す画像が含まれるか否かを検査する検査部と、
インターネットを含むネットワークと接続するための通信部として機能させ、
前記学習済みモデルは、立体の表面に描かれた前記ロゴを互いに異なる複数の角度から見たときの複数の第1画像をそれぞれ主題とし、前記第1画像と異なる複数の第2画像をそれぞれ背景とした複数の第3画像に、前記ロゴに関する識別情報をラベリングした学習用画像データを機械学習することによって生成されており、
前記データ取得部は、前記通信部を介して前記検査対象画像データを取得し、
前記データ取得部は、前記ネットワークにおける検査範囲を指定する情報を取得した場合に、前記検査範囲を指定する情報に基づいて、前記ネットワークから前記検査対象画像データを取得し、
前記検査範囲を指定する情報は、アドレス情報を含み、
前記データ取得部は、前記アドレス情報で指定されたウェブページを画像データとして複製し、当該画像データを前記検査対象画像データとして取得する
画像検査用プログラム。 - 請求項8に記載の画像検査用プログラムにおいて、
前記コンピュータを前記検査部による検査結果に基づいて、前記データ取得部によって取得した前記検査対象画像データの画像編集を行う画像編集部として更に機能させる
ことを特徴とする画像検査用プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018248158A JP7340806B2 (ja) | 2018-12-28 | 2018-12-28 | 画像検査装置、画像検査システム、および画像検査用プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018248158A JP7340806B2 (ja) | 2018-12-28 | 2018-12-28 | 画像検査装置、画像検査システム、および画像検査用プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020107254A JP2020107254A (ja) | 2020-07-09 |
JP7340806B2 true JP7340806B2 (ja) | 2023-09-08 |
Family
ID=71449236
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018248158A Active JP7340806B2 (ja) | 2018-12-28 | 2018-12-28 | 画像検査装置、画像検査システム、および画像検査用プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7340806B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7031812B1 (ja) | 2020-09-28 | 2022-03-08 | 株式会社GamingD | プログラム、方法、およびシステム |
JP2022091269A (ja) * | 2020-12-09 | 2022-06-21 | ブラザー工業株式会社 | 方法、システム、および、コンピュータプログラム |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005327242A (ja) | 2004-05-14 | 2005-11-24 | Omron Corp | 特定被写体検出装置 |
JP2006344154A (ja) | 2005-06-10 | 2006-12-21 | Sumitomo Electric Ind Ltd | 車両判別装置及び方法 |
JP2010128768A (ja) | 2008-11-27 | 2010-06-10 | Toyota Motor Corp | 車両周辺監視装置 |
JP2011150381A (ja) | 2010-01-19 | 2011-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 表情識別器作成装置,表情識別器作成方法,表情認識装置,表情認識方法およびそれらのプログラム |
JP2014229115A (ja) | 2013-05-23 | 2014-12-08 | キヤノン株式会社 | 情報処理装置および方法、プログラム、記憶媒体 |
JP2015172876A (ja) | 2014-03-12 | 2015-10-01 | 株式会社デンソーアイティーラボラトリ | 車両周辺監視装置、車両周辺監視システム、及びプログラム |
WO2016157499A1 (ja) | 2015-04-02 | 2016-10-06 | 株式会社日立製作所 | 画像処理装置、物体検知装置、画像処理方法 |
JP2017208006A (ja) | 2016-05-20 | 2017-11-24 | 株式会社リコー | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3431678B2 (ja) * | 1994-02-14 | 2003-07-28 | 三菱自動車工業株式会社 | 車両用周囲状況表示装置 |
-
2018
- 2018-12-28 JP JP2018248158A patent/JP7340806B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005327242A (ja) | 2004-05-14 | 2005-11-24 | Omron Corp | 特定被写体検出装置 |
JP2006344154A (ja) | 2005-06-10 | 2006-12-21 | Sumitomo Electric Ind Ltd | 車両判別装置及び方法 |
JP2010128768A (ja) | 2008-11-27 | 2010-06-10 | Toyota Motor Corp | 車両周辺監視装置 |
JP2011150381A (ja) | 2010-01-19 | 2011-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 表情識別器作成装置,表情識別器作成方法,表情認識装置,表情認識方法およびそれらのプログラム |
JP2014229115A (ja) | 2013-05-23 | 2014-12-08 | キヤノン株式会社 | 情報処理装置および方法、プログラム、記憶媒体 |
JP2015172876A (ja) | 2014-03-12 | 2015-10-01 | 株式会社デンソーアイティーラボラトリ | 車両周辺監視装置、車両周辺監視システム、及びプログラム |
WO2016157499A1 (ja) | 2015-04-02 | 2016-10-06 | 株式会社日立製作所 | 画像処理装置、物体検知装置、画像処理方法 |
JP2017208006A (ja) | 2016-05-20 | 2017-11-24 | 株式会社リコー | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
Non-Patent Citations (1)
Title |
---|
青木 一憲,画像中の靴ロゴマークの抽出と認識,第22回 画像センシングシンポジウム SSII2016 [USB] The 22nd Symposium on Sensing via Image Information,日本,画像センシング技術研究会,2016年 |
Also Published As
Publication number | Publication date |
---|---|
JP2020107254A (ja) | 2020-07-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10339383B2 (en) | Method and system for providing augmented reality contents by using user editing image | |
US11475176B2 (en) | Method and system for automatically ordering and fulfilling architecture, design and construction product sample requests | |
KR101859856B1 (ko) | 맥락적 환경에 아이템 이미지를 디스플레이하는 증강 현실 시스템, 방법 및 장치 | |
US20190012758A1 (en) | Screen watermarking methods and arrangements | |
US9923949B2 (en) | All-electronic ecosystems for design and collaboration | |
Clini et al. | Augmented Reality Experience: From High‐Resolution Acquisition to Real Time Augmented Contents | |
CN109255767B (zh) | 图像处理方法和装置 | |
CN106484408A (zh) | 一种基于html5的节点关系图显示方法及系统 | |
CN104798094B (zh) | 确定内容项目显示环境的配置 | |
JP6140904B2 (ja) | 端末標記方法、端末標記装置、プログラム及び記録媒体 | |
JP7340806B2 (ja) | 画像検査装置、画像検査システム、および画像検査用プログラム | |
WO2015164463A1 (en) | Web user interface builder application | |
CN110197053B (zh) | 页面生成方法和装置及电子装置 | |
CN110532497A (zh) | 生成全景图的方法、生成三维页面的方法以及计算设备 | |
CN108134906B (zh) | 图像处理方法及其系统 | |
US20170041494A1 (en) | Digital content access using a machine -readable link | |
JP6955356B2 (ja) | 配筋検査支援システム及び配筋検査支援プログラム | |
Khairunisa et al. | Virtual Job Fair Information System Design Based on Augmented Reality/Virtual Reality | |
US9696957B2 (en) | Graphic processing method, system and server | |
Rinaldi et al. | Virtual reality as a collaborative tool for digitalised crime scene examination | |
CN115756461A (zh) | 标注模板生成方法、图像识别方法、装置和电子设备 | |
JP2015125541A (ja) | 視線予測システム、視線予測方法、および視線予測プログラム | |
JP2015125543A (ja) | 視線予測システム、視線予測方法、および視線予測プログラム | |
CN114153729A (zh) | 网页测试方法、装置、电子设备和存储介质 | |
US11295493B2 (en) | System and method for generating scalar vector graphics image in an imaginary console |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20200131 |
|
RD13 | Notification of appointment of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7433 Effective date: 20200131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201002 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210209 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210216 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220216 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220414 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220823 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221017 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230410 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20230410 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230511 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230511 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230530 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230818 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7340806 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |