JP6420268B2 - 画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム - Google Patents
画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム Download PDFInfo
- Publication number
- JP6420268B2 JP6420268B2 JP2016031685A JP2016031685A JP6420268B2 JP 6420268 B2 JP6420268 B2 JP 6420268B2 JP 2016031685 A JP2016031685 A JP 2016031685A JP 2016031685 A JP2016031685 A JP 2016031685A JP 6420268 B2 JP6420268 B2 JP 6420268B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- evaluation
- learning
- expression
- feature amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Description
第一実施形態の画像評価学習装置は、図1に示すように、画像記憶部1、評価表現抽出部2、学習データ生成部3、画像特徴量抽出部4、および学習部5を備える。この画像評価学習装置が後述する各ステップの処理を行うことにより第一実施形態の画像評価学習方法が実現される。
・nexpA>0かつnexpB=0の場合、ClassAに分類する。
・nexpA>0かつnexpB>0の場合、以下に従う。
・・nexpA-nexpB>thの場合、ClassAに分類する。
・・nexpB-nexpA>thの場合、ClassBに分類する。
・・その他の場合、ClassOに分類する。
・nexpA=0かつnexpB>0の場合、ClassBに分類する。
・nA=0かつnB>0の場合、ClassBに分類する。
・その他の場合、ClassOに分類する。
第二実施形態の画像評価装置は、図3に示すように、画像特徴量抽出部4、学習器記憶部6、および評価部7を備える。画像評価装置は、評価表現抽出部2を備えてもよい。この画像評価装置が後述する各ステップの処理を行うことにより第二実施形態の画像評価方法が実現される。
第三実施形態の画像検索装置は、図5に示すように、評価結果記憶部8および検索部9を備える。この画像検索装置が後述する各ステップの処理を行うことにより第三実施形態の画像検索方法が実現される。
絵本のレビューと表紙の画像データを利用して評価実験を行った。絵本に関するレビューと表紙画像をWeb上で収集した結果、レビューを獲得できた絵本が17,521冊、そのうち表紙画像を獲得できた絵本が15,484冊であった。
上記実施形態で説明した各装置における各種の処理機能をコンピュータによって実現する場合、各装置が有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムをコンピュータで実行することにより、上記各装置における各種の処理機能がコンピュータ上で実現される。
2 評価表現抽出部
3 学習データ生成部
4 画像特徴量抽出部
5 学習部
6 学習器記憶部
7 評価部
8 評価結果記憶部
9 検索部
Claims (13)
- 複数の画像と各画像に関するレビューとを関連付けて記憶する画像記憶部と、
上記レビューから上記画像に関する評価表現を抽出する評価表現抽出部と、
上記レビューにおける上記評価表現の共起関係に基づいて上記画像の上記評価表現に対する評価値を得、上記画像に上記評価値を付与した学習データを生成する学習データ生成部と、
上記画像から画像特徴量を抽出する画像特徴量抽出部と、
上記画像特徴量と上記学習データとを用いて、画像特徴量を入力として上記評価表現との一致度を示すスコアを出力する学習器を生成する学習部と、
を含む画像評価学習装置。 - 請求項1に記載の画像評価学習装置であって、
上記評価表現抽出部は、上記レビューを形態素解析した結果に基づいて予め定めたキーワードとそのキーワードと所定の関係にある内容語とを組にして上記評価表現として抽出するものである、
画像評価学習装置。 - 請求項1または2に記載の画像評価学習装置であって、
上記学習データ生成部は、上記評価表現と他の評価表現との共起関係に基づいて上記他の評価表現を重み付けし、その重みに基づいて上記他の評価表現に関する画像をクラスに分類し、そのクラスを上記評価値として付与するものである、
画像評価学習装置。 - 請求項1または2に記載の画像評価学習装置であって、
上記学習データ生成部は、上記評価表現と他の評価表現との共起関係に基づいて上記他の評価表現の出現頻度を重み付けした値を求め、その値に基づいて上記他の評価表現に関する画像をクラスに分類し、そのクラスを上記評価値として付与するものである、
画像評価学習装置。 - 請求項1または2に記載の画像評価学習装置であって、
上記学習データ生成部は、上記評価表現をクラスタリングし、各クラスタに分類された評価表現ごとに各画像をクラスに分類し、そのクラスを上記評価値として付与するものである、
画像評価学習装置。 - 請求項1から5のいずれかに記載の画像評価学習装置であって、
上記画像特徴量抽出部は、上記画像の色、明度、輝度、または複雑さを反映する指標のいずれか一つ以上を上記画像特徴量として抽出するものである、
画像評価学習装置。 - 請求項1から6のいずれかに記載の画像評価学習装置により生成された学習器を記憶する学習器記憶部と、
入力された画像から画像特徴量を抽出する画像特徴量抽出部と、
上記学習器へ上記画像特徴量を入力して評価表現との一致度を示すスコアを得る評価部と、
を含む画像評価装置。 - 請求項7に記載の画像評価装置であって、
入力された画像と関連付けられたレビューから上記画像に関する評価表現を抽出する評価表現抽出部をさらに含み、
上記評価部は、抽出された評価表現の出現回数に基づく特徴量を、上記画像特徴量とともに上記学習器へ入力して上記スコアを得るものである、
画像評価装置。 - 請求項7または8に記載の画像評価装置により得たスコアと各画像を関連付けて記憶する評価結果記憶部と、
入力された検索語に対応する評価表現のスコアを所定の閾値と比較して上記検索語に合致する画像を抽出する検索部と、
を含む画像検索装置。 - 画像記憶部に、複数の画像と各画像に関するレビューとが関連付けて記憶されており、
評価表現抽出部が、上記レビューから上記画像に関する評価表現を抽出し、
学習データ生成部が、上記レビューにおける上記評価表現の共起関係に基づいて上記画像の上記評価表現に対する評価値を得、上記画像に上記評価値を付与した学習データを生成し、
画像特徴量抽出部が、上記画像から画像特徴量を抽出し、
学習部が、上記画像特徴量と上記学習データとを用いて、画像特徴量を入力として上記評価表現との一致度を示すスコアを出力する学習器を生成する、
画像評価学習方法。 - 学習器記憶部に、請求項10に記載の画像評価学習方法により生成された学習器を記憶されており、
画像特徴量抽出部が、入力された画像から画像特徴量を抽出し、
評価部が、上記学習器へ上記画像特徴量を入力して評価表現との一致度を示すスコアを得る、
画像評価方法。 - 評価結果記憶部に、請求項11に記載の画像評価方法により得たスコアと各画像を関連付けて記憶されており、
検索部が、入力された検索語に対応する評価表現のスコアを所定の閾値と比較して上記検索語に合致する画像を抽出する、
画像検索方法。 - 請求項1から6のいずれかに記載の画像評価学習装置、請求項7または8に記載の画像評価装置、あるいは請求項9に記載の画像検索装置のいずれかとしてコンピュータを機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016031685A JP6420268B2 (ja) | 2016-02-23 | 2016-02-23 | 画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016031685A JP6420268B2 (ja) | 2016-02-23 | 2016-02-23 | 画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017151588A JP2017151588A (ja) | 2017-08-31 |
JP6420268B2 true JP6420268B2 (ja) | 2018-11-07 |
Family
ID=59739293
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016031685A Active JP6420268B2 (ja) | 2016-02-23 | 2016-02-23 | 画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6420268B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019082853A (ja) * | 2017-10-30 | 2019-05-30 | 日立造船株式会社 | 情報処理装置、情報処理方法、および情報処理プログラム |
CN109978812A (zh) * | 2017-12-24 | 2019-07-05 | 奥林巴斯株式会社 | 摄像系统、学习装置、摄像装置和学习方法 |
CN108256070B (zh) * | 2018-01-17 | 2022-07-15 | 北京百度网讯科技有限公司 | 用于生成信息的方法和装置 |
CN110781633A (zh) * | 2019-10-30 | 2020-02-11 | 广东博智林机器人有限公司 | 基于深度学习模型的图文设计质量检测方法、装置及系统 |
CN113486744B (zh) * | 2021-06-24 | 2023-02-14 | 中国科学院西安光学精密机械研究所 | 基于眼动和人脸表情范式的学生学习状态评估系统及方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006092134A (ja) * | 2004-09-22 | 2006-04-06 | Fuji Xerox Co Ltd | 文書情報解析用コンピュータプログラムならびに文書情報解析装置および方法 |
JP2009301121A (ja) * | 2008-06-10 | 2009-12-24 | Nikon Systems Inc | 印象判定処理方法、プログラム、及び、画像印象判定装置 |
US9129008B1 (en) * | 2008-11-10 | 2015-09-08 | Google Inc. | Sentiment-based classification of media content |
-
2016
- 2016-02-23 JP JP2016031685A patent/JP6420268B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017151588A (ja) | 2017-08-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2678716C1 (ru) | Использование автоэнкодеров для обучения классификаторов текстов на естественном языке | |
Nie et al. | Multimedia answering: enriching text QA with media information | |
Cappallo et al. | New modality: Emoji challenges in prediction, anticipation, and retrieval | |
Gao et al. | Modeling interestingness with deep neural networks | |
JP6420268B2 (ja) | 画像評価学習装置、画像評価装置、画像検索装置、画像評価学習方法、画像評価方法、画像検索方法、およびプログラム | |
US10482146B2 (en) | Systems and methods for automatic customization of content filtering | |
US20230177360A1 (en) | Surfacing unique facts for entities | |
CN111401045B (zh) | 一种文本生成方法、装置、存储介质和电子设备 | |
Romeo et al. | Neural attention for learning to rank questions in community question answering | |
CN107506472B (zh) | 一种学生浏览网页分类方法 | |
Patel et al. | Dynamic lexicon generation for natural scene images | |
Ozkan et al. | A large-scale database of images and captions for automatic face naming | |
Song et al. | Semi-automatic construction of a named entity dictionary for entity-based sentiment analysis in social media | |
Wen et al. | Cross-lingual cross-platform rumor verification pivoting on multimedia content | |
Bleoancă et al. | Lsi based mechanism for educational videos retrieval by transcripts processing | |
Xu et al. | Measuring semantic relatedness between flickr images: from a social tag based view | |
Rahul et al. | Social media sentiment analysis for Malayalam | |
Wijewickrema | Impact of an ontology for automatic text classification | |
He et al. | Discovering interdisciplinary research based on neural networks | |
CN113761125A (zh) | 动态摘要确定方法和装置、计算设备以及计算机存储介质 | |
Balaji et al. | Finding related research papers using semantic and co-citation proximity analysis | |
Hung et al. | Aafndl-an accurate fake information recognition model using deep learning for the vietnamese language | |
Blooma et al. | Clustering Similar Questions In Social Question Answering Services. | |
Bhargava et al. | High-throughput and language-agnostic entity disambiguation and linking on user generated data | |
Kumar et al. | Domain and Intelligence Based Multimedia Question Answering System. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171002 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180808 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181009 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181011 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6420268 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |