JP7229795B2 - アノテーション装置、アノテーション方法、及び、プログラム - Google Patents
アノテーション装置、アノテーション方法、及び、プログラム Download PDFInfo
- Publication number
- JP7229795B2 JP7229795B2 JP2019016935A JP2019016935A JP7229795B2 JP 7229795 B2 JP7229795 B2 JP 7229795B2 JP 2019016935 A JP2019016935 A JP 2019016935A JP 2019016935 A JP2019016935 A JP 2019016935A JP 7229795 B2 JP7229795 B2 JP 7229795B2
- Authority
- JP
- Japan
- Prior art keywords
- labels
- label
- annotation
- unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2431—Multiple classes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Description
機械学習の1つの手法であるDeep Learning(深層学習)において、対象物の認識には大量の学習用の画像データが必要となる。例えば、10万~100万単位の学習用の画像データが必要となる。そして、学習用の画像データでは、対象物に対して、対象物の内容、位置、領域等を含む情報が、アノテーションデータとして付与される。なお、通常、対象物に対してアノテーションデータを付与するアノテーション作業では、画像上で対象物を囲む等による対象物の領域(例えば、バウンディングボックスで示される領域)、及び、当該領域に含まれる対象物を認識するためのラベル(人、自転車、バイクなど)の設定が、画像に人が入力することによって実施される。高精度な認識器を生成するためには、質のよい学習データセットが構築されるとよい。
以下、本実施の形態に係るアノテーション装置等について、図1~図7を参照しながら説明する。
本実施の形態に係るアノテーション装置を含むアノテーション付与システム100について、図1を参照しながら説明する。図1は、本実施の形態に係るアノテーション付与システムの構成を示すブロック図である。
次に、上記のアノテーション付与システム100の動作について、図4~図7を参照しながら説明する。具体的には、アノテーション装置10の動作について、説明する。
以下、本変形例に係るアノテーション装置等について、図8を参照しながら説明する。なお、本変形例に係るアノテーション装置の構成は、実施の形態と同じであり説明を省略する。本変形例では、決定部が決定する複数のラベルの表示順が実施の形態と異なるので、その点を中心に説明する。図8は、本変形例に係るラベルの表示順の一例を示す図である。
以上、本開示について実施の形態に基づいて説明したが、本開示は、上記実施の形態に限定されるものではない。
11、21、31 制御部
12 第一通信部(ラベル情報取得部)
13 第二通信部(データ取得部)
14 類似情報取得部
15 決定部
16 検証部
16a 認識器
17、23 記憶部
20 サーバ装置
22、32 通信部
24、34 入力部
30 アノテーション付与装置
33 表示部
100 アノテーション付与システム
P 作業画面
p1 画像
p2、p2a、p2b、p2c ラベル一覧
D データ
T テーブル
Claims (9)
- 画像にアノテーションデータを付与するための複数のラベルが互いに類似しているか否かを示す類似情報を取得する類似情報取得部と、
前記類似情報に基づいて、アノテーション作業用の作業画面に表示される前記複数のラベルの配置を決定する決定部と、
前記作業画面を用いて前記画像に付与された前記アノテーションデータを取得するデータ取得部と、
前記データ取得部が取得した前記アノテーションデータに含まれるラベルの付与誤りを検証する検証部とを備える
アノテーション装置。 - 前記複数のラベルは、互いに類似している第一ラベル及び第二ラベルと、前記第一ラベル及び前記第二ラベルの双方に類似していない第三ラベルとを含み、
前記決定部は、前記作業画面において、前記第一ラベルと前記第二ラベルとの間に前記第三ラベルを表示するように前記配置に決定する
請求項1に記載のアノテーション装置。 - 前記検証部は、所定の学習データセットで学習された認識器を有し、前記複数のラベルのうち、前記画像に対する前記認識器の認識結果に対応するラベルと、取得した前記アノテーションデータに含まれるラベルとが前記作業画面において隣り合うラベルであった場合、取得した前記アノテーションデータに含まれるラベルが付与誤りであると判定する
請求項2に記載のアノテーション装置。 - 前記複数のラベルは、さらに前記第一ラベル、前記第二ラベル、及び、前記第三ラベルのそれぞれに類似していない第四ラベルを含み、
前記決定部は、前記作業画面において、前記第一ラベルと前記第二ラベルとの間にさらに前記第四ラベルを表示するように前記配置に決定する
請求項2又は3に記載のアノテーション装置。 - 前記決定部は、さらに、前記類似情報に基づいて、前記作業画面に配置される前記複数のラベルの表示色を決定する
請求項1~4のいずれか1項に記載のアノテーション装置。 - 前記決定部は、互いに類似しているラベル同士の表示色を他のラベルより近い表示色に決定する
請求項5に記載のアノテーション装置。 - 前記画像に付与するためのラベル情報を取得するラベル情報取得部をさらに備え、
前記類似情報取得部は、前記ラベル情報に3以上のラベルが含まれる場合に、前記複数のラベルのうち前記3以上のラベルそれぞれの類似情報を取得する
請求項1~6のいずれか1項に記載のアノテーション装置。 - コンピュータが実行するアノテーション方法であって、
画像にアノテーションデータを付与するための複数のラベルが互いに類似しているか否かを示す類似情報を取得するステップと、
前記類似情報に基づいて、アノテーション作業用の作業画面に表示される前記複数のラベルの配置を決定するステップと、
前記作業画面を用いて前記画像に付与された前記アノテーションデータを取得するステップと、
取得された前記アノテーションデータに含まれるラベルの付与誤りを検証するステップとを含む
アノテーション方法。 - 請求項8に記載のアノテーション方法をコンピュータに実行させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019016935A JP7229795B2 (ja) | 2019-02-01 | 2019-02-01 | アノテーション装置、アノテーション方法、及び、プログラム |
US16/773,095 US11113531B2 (en) | 2019-02-01 | 2020-01-27 | Annotation device, annotation method, and non-transitory computer-readable storage medium |
JP2023021567A JP2023058667A (ja) | 2019-02-01 | 2023-02-15 | アノテーション装置、アノテーション方法、及び、プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019016935A JP7229795B2 (ja) | 2019-02-01 | 2019-02-01 | アノテーション装置、アノテーション方法、及び、プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023021567A Division JP2023058667A (ja) | 2019-02-01 | 2023-02-15 | アノテーション装置、アノテーション方法、及び、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020126311A JP2020126311A (ja) | 2020-08-20 |
JP7229795B2 true JP7229795B2 (ja) | 2023-02-28 |
Family
ID=71836517
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019016935A Active JP7229795B2 (ja) | 2019-02-01 | 2019-02-01 | アノテーション装置、アノテーション方法、及び、プログラム |
JP2023021567A Pending JP2023058667A (ja) | 2019-02-01 | 2023-02-15 | アノテーション装置、アノテーション方法、及び、プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023021567A Pending JP2023058667A (ja) | 2019-02-01 | 2023-02-15 | アノテーション装置、アノテーション方法、及び、プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11113531B2 (ja) |
JP (2) | JP7229795B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005352780A (ja) | 2004-06-10 | 2005-12-22 | Canon Inc | 画像記録装置及びその制御方法 |
US20120121187A1 (en) | 2010-11-15 | 2012-05-17 | Lg Electronic Inc. | Mobile terminal and metadata setting method thereof |
JP2013502637A (ja) | 2009-08-21 | 2013-01-24 | サムスン エレクトロニクス カンパニー リミテッド | メタデータのタグ付けシステム、イメージ検索方法、デバイス及びそれに適用されるジェスチャーのタグ付け方法 |
JP2018106662A (ja) | 2016-12-22 | 2018-07-05 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5244846B2 (ja) | 2010-04-06 | 2013-07-24 | 京セラドキュメントソリューションズ株式会社 | 表示入力装置及びこれを備えた画像形成装置 |
JP5889019B2 (ja) | 2012-02-06 | 2016-03-22 | キヤノン株式会社 | ラベル付加装置、ラベル付加方法及びプログラム |
JP5753945B2 (ja) * | 2012-05-16 | 2015-07-22 | 楽天株式会社 | 画像処理装置、画像処理装置の制御方法、プログラム、及び情報記憶媒体 |
CN104584073B (zh) * | 2012-08-23 | 2017-04-05 | 日本电气株式会社 | 物体识别装置和物体识别方法 |
US9646226B2 (en) * | 2013-04-16 | 2017-05-09 | The Penn State Research Foundation | Instance-weighted mixture modeling to enhance training collections for image annotation |
WO2015007945A1 (en) * | 2013-07-18 | 2015-01-22 | Nokia Corporation | Method and apparatus for updating points of interest information via crowdsourcing |
WO2017017738A1 (ja) * | 2015-07-24 | 2017-02-02 | 富士通株式会社 | 符号化プログラム、符号化装置、及び符号化方法 |
JP2019008519A (ja) * | 2017-06-23 | 2019-01-17 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 移動体検出方法、移動体学習方法、移動体検出装置、移動体学習装置、移動体検出システム、および、プログラム |
JP2019023858A (ja) * | 2017-07-21 | 2019-02-14 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 学習データ生成装置、学習データ生成方法、機械学習方法及びプログラム |
JP7211735B2 (ja) * | 2018-08-29 | 2023-01-24 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 寄与度決定方法、寄与度決定装置及びプログラム |
US10818386B2 (en) * | 2018-11-21 | 2020-10-27 | Enlitic, Inc. | Multi-label heat map generating system |
US11366988B2 (en) * | 2019-05-28 | 2022-06-21 | Wipro Limited | Method and system for dynamically annotating and validating annotated data |
US11126855B2 (en) * | 2019-08-08 | 2021-09-21 | Robert Bosch Gmbh | Artificial-intelligence powered ground truth generation for object detection and tracking on image sequences |
JP7265961B2 (ja) * | 2019-08-21 | 2023-04-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | アノテーション支援方法、アノテーション支援装置、及びアノテーション支援プログラム |
JP7363384B2 (ja) * | 2019-11-05 | 2023-10-18 | 富士通株式会社 | 解析装置、解析プログラム及び解析方法 |
-
2019
- 2019-02-01 JP JP2019016935A patent/JP7229795B2/ja active Active
-
2020
- 2020-01-27 US US16/773,095 patent/US11113531B2/en active Active
-
2023
- 2023-02-15 JP JP2023021567A patent/JP2023058667A/ja active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005352780A (ja) | 2004-06-10 | 2005-12-22 | Canon Inc | 画像記録装置及びその制御方法 |
JP2013502637A (ja) | 2009-08-21 | 2013-01-24 | サムスン エレクトロニクス カンパニー リミテッド | メタデータのタグ付けシステム、イメージ検索方法、デバイス及びそれに適用されるジェスチャーのタグ付け方法 |
US20120121187A1 (en) | 2010-11-15 | 2012-05-17 | Lg Electronic Inc. | Mobile terminal and metadata setting method thereof |
JP2018106662A (ja) | 2016-12-22 | 2018-07-05 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023058667A (ja) | 2023-04-25 |
US11113531B2 (en) | 2021-09-07 |
US20200250432A1 (en) | 2020-08-06 |
JP2020126311A (ja) | 2020-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11551134B2 (en) | Information processing apparatus, information processing method, and storage medium | |
CN112395978B (zh) | 行为检测方法、装置及计算机可读存储介质 | |
CN103714338B (zh) | 图像处理装置和图像处理方法 | |
JP7051267B2 (ja) | 画像検出方法、装置、電子設備、記憶媒体、及びプログラム | |
US20170293959A1 (en) | Information processing apparatus, shelf label management system, control method, and program | |
CN109815156A (zh) | 页面中视觉元素的展示测试方法、装置、设备和存储介质 | |
US20180174062A1 (en) | Root cause analysis for sequences of datacenter states | |
US20170278057A1 (en) | Information processing apparatus, shelf label management system, control method, and program | |
JP6517666B2 (ja) | 物品管理装置、その方法、及びそのプログラム | |
CN108563559A (zh) | 一种验证码的测试方法、装置、终端设备及存储介质 | |
JPWO2016084336A1 (ja) | 追学習装置、追学習方法、および、追学習プログラム | |
JP2012083951A (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN112396005A (zh) | 生物特征图像识别方法、装置、电子设备及可读存储介质 | |
US9477457B1 (en) | Automated software installation using a click area prediction model | |
WO2021017286A1 (zh) | 人脸识别方法、装置、电子设备及计算机非易失性可读存储介质 | |
US20160098615A1 (en) | Apparatus and method for producing image processing filter | |
US10817716B2 (en) | Coarse-to-fine hand detection method using deep neural network | |
TWI770947B (zh) | 基於攻擊型圖像風格轉換的驗證方法及系統 | |
US20210390342A1 (en) | Machine Learning (ML) Quality Assurance for Data Curation | |
CN106663207A (zh) | 白板和文档图像检测方法和系统 | |
US11482025B2 (en) | Electronic device and control method thereof | |
TWI671686B (zh) | 影像數據擷取方法及影像數據擷取裝置 | |
JP7229795B2 (ja) | アノテーション装置、アノテーション方法、及び、プログラム | |
US20230005248A1 (en) | Machine learning (ml) quality assurance for data curation | |
US11749021B2 (en) | Retrieval device, control method, and non-transitory storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210823 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220927 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221021 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7229795 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |