JP6967041B2 - 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム - Google Patents
画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム Download PDFInfo
- Publication number
- JP6967041B2 JP6967041B2 JP2019150334A JP2019150334A JP6967041B2 JP 6967041 B2 JP6967041 B2 JP 6967041B2 JP 2019150334 A JP2019150334 A JP 2019150334A JP 2019150334 A JP2019150334 A JP 2019150334A JP 6967041 B2 JP6967041 B2 JP 6967041B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- image recognition
- image
- character
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/778—Active pattern-learning, e.g. online learning of image or video features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
- G06V10/809—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of classification results, e.g. where the classifiers operate on the same input data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Molecular Biology (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Description
図1は本発明の一実施形態によるシステム1の全体構成の一例を示す。図1に示すように、システム1は、ユーザ端末である複数の電子装置10及びサーバ20を備える。電子装置10及びサーバ20は、インターネットなどのネットワーク2に接続され、互いに通信可能である。
本実施形態は、電子装置10が画像認識モデルを記憶部104に記憶せず、電子装置10の画像認識モデル選択部108及び識別子情報推論部109に代えて、サーバ20が画像認識モデル選択部208及び識別子情報推論部209を備える点で、第1の実施形態と異なる。以下、第1の実施形態と異なる点を中心に説明する。
2 :ネットワーク
10 :電子装置
11 :プロセッサ
12 :表示装置
13 :入力装置
14 :記憶装置
15 :通信装置
16 :バス
20 :サーバ
21 :プロセッサ
22 :表示装置
23 :入力装置
24 :記憶装置
25 :通信装置
26 :バス
101 :制御部
102 :表示部
103 :操作受付部
104 :記憶部
105 :通信部
106 :画像情報指定部
107 :送り先属性情報特定部
108 :画像認識モデル選択部
109 :識別子情報推論部
110 :応答内容実行部
150 :画像認識モデル
201 :制御部
202 :表示部
203 :操作受付部
204 :記憶部
205 :通信部
208 :画像認識モデル選択部
209 :識別子情報推論部
250 :画像認識モデル
Claims (8)
- ユーザからの操作を受け付け可能な操作受付部と、
固有の学習内容によって定義され、当該学習内容を利用して少なくとも1つの識別子情報を推論可能な画像認識モデルであって、キャラクタのキャラクタ識別情報に紐づけられる画像認識モデルを複数記憶し、複数の識別子情報のそれぞれに対応する複数の応答内容を前記複数の画像認識モデルのそれぞれに紐づけて記憶する記憶部と、
操作受付部の受け付けたキャラクタを選択するためのユーザによる操作に基づき、前記記憶部に記憶されたキャラクタ識別情報の中から前記選択されたキャラクタのキャラクタ識別情報を画像情報の送り先として特定する送り先属性情報特定部と、
前記送り先属性情報特定部の特定したキャラクタ識別情報に紐づけられた画像認識モデルを、前記記憶部に記憶された複数の画像認識モデルの中から選択する画像認識モデル選択部と、
前記画像認識モデル選択部の選択した画像認識モデルへ画像情報を入力し、前記学習内容に基づいて、当該画像情報から識別子情報を推論する識別子情報推論部と、
前記識別子情報推論部の推論した識別子情報に基づき、当該識別子情報に対応した応答内容を前記記憶部に記憶された複数の応答内容の中から特定して実行する応答内容実行部と、
を備えることを特徴とする電子装置。 - 前記記憶部に記憶された複数の画像認識モデルは、その学習内容が各画像認識モデルに固有の教師データによって定義され、当該固有の教師データはそれぞれ画像情報および識別情報であるラベルの対の集合によって定義されることを特徴とする請求項1に記載の電子装置。
- ユーザに対して情報を表示する表示部を備え、
前記記憶部は、前記キャラクタ識別情報に対応する文字情報及びアイコン画像情報の少なくとも1つを記憶し、
前記送り先属性情報特定部は、前記記憶部に記憶された前記文字情報及び前記アイコン画像情報の少なくとも1つを前記表示部に表示するとともに、当該表示された文字情報及びアイコン画像情報の少なくとも1つを前記操作受付部によってユーザが指定することで前記記憶部に記憶されたキャラクタ識別情報の中からキャラクタ識別情報を画像情報の送り先として特定することを特徴とする請求項1ないし請求項2のいずれか1項に記載の電子装置。 - 1つ以上のコンピュータによって実行される方法であって、
固有の学習内容によって定義され、当該学習内容を利用して少なくとも1つの識別子情報を推論可能な画像認識モデルであって、キャラクタのキャラクタ識別情報に紐づけられる画像認識モデルを複数記憶し、複数の識別子情報のそれぞれに対応する複数の応答内容を前記複数の画像認識モデルのそれぞれに紐づけて記憶する記憶段階と、
ユーザからの操作を受け付ける操作受付段階と、
操作受付段階において受け付けたキャラクタを選択するためのユーザによる操作に基づき、前記記憶されたキャラクタ識別情報の中から前記選択されたキャラクタのキャラクタ識別情報を画像情報の送り先として特定する送り先属性情報特定段階と、
前記送り先属性情報特定段階において特定したキャラクタ識別情報に紐づけられた画像認識モデルを、前記記憶された複数の画像認識モデルの中から選択する画像認識モデル選択段階と、
前記画像認識モデル選択段階において選択した画像認識モデルへ画像情報を入力し、前記学習内容に基づいて、当該画像情報から識別子情報を推論する識別子情報推論段階と、
前記識別子情報推論段階の推論した識別子情報に基づき、当該識別子情報に対応した応答内容を前記記憶段階において記憶された複数の応答内容の中から特定して実行する応答内容段階と、
を実行させることを特徴とする方法。 - 前記1つ以上のコンピュータは、ユーザ端末であることを特徴とする請求項4項に記載の方法。
- 前記1つ以上のコンピュータは、ユーザ端末及びサーバを含むことを特徴とする請求項4に記載の方法。
- 請求項4〜6のいずれか1項に記載された方法を、1以上のコンピュータに実行させることを特徴とするプログラム。
- ユーザ端末及びサーバを含むシステムであって、
前記ユーザ端末が、
ユーザからの操作を受け付け可能な操作受付部と、
操作受付部の受け付けたキャラクタを選択するためのユーザによる操作に基づき、前記選択されたキャラクタのキャラクタ識別情報を画像情報の送り先として特定する送り先属性情報特定部と、
を備え、
前記サーバが、
固有の学習内容によって定義され、当該学習内容を利用して少なくとも1つの識別子情報を推論可能な画像認識モデルであって、キャラクタのキャラクタ識別情報に紐づけられる画像認識モデルを複数記憶し、複数の識別子情報のそれぞれに対応する複数の応答内容を前記複数の画像認識モデルのそれぞれに紐づけて記憶する記憶部と、
前記送り先属性情報特定部の特定したキャラクタ識別情報に紐づけられた画像認識モデルを、前記記憶部に記憶された複数の画像認識モデルの中から選択する画像認識モデル選択部と、
前記画像認識モデル選択部の選択した画像認識モデルへ画像情報を入力し、前記学習内容に基づいて、当該画像情報から識別子情報を推論する識別子情報推論部と、
前記識別子情報推論部の推論した識別子情報に基づき、当該識別子情報に対応した応答内容を前記記憶部に記憶された複数の応答内容の中から特定して実行する応答内容実行部と、
を備えることを特徴とするシステム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019150334A JP6967041B2 (ja) | 2019-08-20 | 2019-08-20 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
CN202080058765.4A CN114269443A (zh) | 2019-08-20 | 2020-08-17 | 用于使用图像识别模型的标识符信息推断的电子装置、方法、程序和系统 |
PCT/JP2020/030998 WO2021033666A1 (ja) | 2019-08-20 | 2020-08-17 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
JP2020185857A JP7335221B2 (ja) | 2019-08-20 | 2020-11-06 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
US17/651,495 US20220172082A1 (en) | 2019-08-20 | 2022-02-17 | Electronic device, method, program, and system for identifier-information inference using image recognition model |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019150334A JP6967041B2 (ja) | 2019-08-20 | 2019-08-20 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020185857A Division JP7335221B2 (ja) | 2019-08-20 | 2020-11-06 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021033450A JP2021033450A (ja) | 2021-03-01 |
JP6967041B2 true JP6967041B2 (ja) | 2021-11-17 |
Family
ID=74661164
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019150334A Active JP6967041B2 (ja) | 2019-08-20 | 2019-08-20 | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220172082A1 (ja) |
JP (1) | JP6967041B2 (ja) |
CN (1) | CN114269443A (ja) |
WO (1) | WO2021033666A1 (ja) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6044079B2 (ja) * | 2012-02-06 | 2016-12-14 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP6753707B2 (ja) * | 2016-06-16 | 2020-09-09 | 株式会社オルツ | コミュニケーションを支援する人工知能システム |
US10803407B2 (en) * | 2017-02-03 | 2020-10-13 | Panasonic Intellectual Property Management Co., Ltd. | Method for selecting learned model corresponding to sensing data and provisioning selected learned model, and learned model provision device |
JP7011146B2 (ja) * | 2017-03-27 | 2022-01-26 | 富士通株式会社 | 画像処理装置、画像処理方法、画像処理プログラム、及び教師データ生成方法 |
JP7252701B2 (ja) * | 2017-05-23 | 2023-04-05 | 株式会社Preferred Networks | システム、プログラム、および方法 |
JP6467012B1 (ja) * | 2017-09-28 | 2019-02-06 | グリー株式会社 | プログラム、制御方法、および情報処理装置 |
JP7242175B2 (ja) * | 2017-12-05 | 2023-03-20 | 株式会社バンダイナムコエンターテインメント | ゲームシステム及びプログラム |
JP6641446B2 (ja) * | 2017-12-26 | 2020-02-05 | キヤノン株式会社 | 画像処理方法、画像処理装置、撮像装置、プログラム、記憶媒体 |
-
2019
- 2019-08-20 JP JP2019150334A patent/JP6967041B2/ja active Active
-
2020
- 2020-08-17 CN CN202080058765.4A patent/CN114269443A/zh active Pending
- 2020-08-17 WO PCT/JP2020/030998 patent/WO2021033666A1/ja active Application Filing
-
2022
- 2022-02-17 US US17/651,495 patent/US20220172082A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2021033666A1 (ja) | 2021-02-25 |
US20220172082A1 (en) | 2022-06-02 |
CN114269443A (zh) | 2022-04-01 |
JP2021033450A (ja) | 2021-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3713159B1 (en) | Gallery of messages with a shared interest | |
CN111931591B (zh) | 用于构建关键点学习模型的方法、装置、电子设备及可读存储介质 | |
WO2019132923A1 (en) | Automatic image correction using machine learning | |
CN112241764A (zh) | 图像识别方法、装置、电子设备及存储介质 | |
CN112527115B (zh) | 用户形象生成方法、相关装置及计算机程序产品 | |
JP6489005B2 (ja) | 情報処理システム、情報処理方法、プログラム | |
CN115066667A (zh) | 使用深度学习来确定注视 | |
CN109039671A (zh) | 群组消息显示方法、装置、终端及存储介质 | |
KR20150131358A (ko) | 컨텐츠 생성 툴 | |
TWI845492B (zh) | 程式、資訊處理方法及資訊處理裝置 | |
EP3869393B1 (en) | Image recognition method and apparatus, electronic device, and medium | |
JP6721727B1 (ja) | 情報処理装置の制御プログラム、情報処理装置の制御方法、及び、情報処理装置 | |
JP7393487B2 (ja) | プロフィール写真を推薦する方法とシステム、および非一時的なコンピュータ読み取り可能な記録媒体 | |
KR20210050166A (ko) | 그룹 앨범을 이용하는 대화방에서 프로필 사진 기반 사용자 얼굴 인식과 활용 방법 | |
WO2021068613A1 (zh) | 面部识别方法、装置、设备及计算机可读存储介质 | |
JP2018190091A (ja) | 検索プログラム、検索装置及び検索方法 | |
JP7491308B2 (ja) | 物体検出装置、物体検出方法、プログラムおよび記録媒体 | |
JP6967041B2 (ja) | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム | |
CN107770253A (zh) | 远程控制方法及系统 | |
JP7335221B2 (ja) | 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム | |
US20220374935A1 (en) | Method of deep learning user interface and automatically recommending winner of different variants for user interface based experiments | |
US11556183B1 (en) | Techniques for generating data for an intelligent gesture detector | |
JP2023050159A (ja) | コンピュータプログラム、メディアメッセージ検索方法、記録媒体およびコンピュータ装置 | |
CN114092608A (zh) | 表情的处理方法及装置、计算机可读存储介质、电子设备 | |
TW202101278A (zh) | 字體標籤提供方法、電腦系統及電腦可讀取記錄媒體 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191122 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191122 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200217 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200417 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200515 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200901 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20201106 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210603 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210804 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20210915 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20211013 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20211013 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211022 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6967041 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |