JP2016143355A - 感性評価装置、感性評価方法、およびプログラム - Google Patents

感性評価装置、感性評価方法、およびプログラム Download PDF

Info

Publication number
JP2016143355A
JP2016143355A JP2015020712A JP2015020712A JP2016143355A JP 2016143355 A JP2016143355 A JP 2016143355A JP 2015020712 A JP2015020712 A JP 2015020712A JP 2015020712 A JP2015020712 A JP 2015020712A JP 2016143355 A JP2016143355 A JP 2016143355A
Authority
JP
Japan
Prior art keywords
image
learning
recognition
processing unit
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015020712A
Other languages
English (en)
Other versions
JP6184033B2 (ja
Inventor
藤江 長森
Fujie Nagamori
藤江 長森
中江 俊博
Toshihiro Nakae
俊博 中江
将平 長谷川
Shohei Hasegawa
将平 長谷川
麻理子 井前
Mariko Imae
麻理子 井前
直也 宮下
Naoya Miyashita
直也 宮下
木全 英明
Hideaki Kimata
英明 木全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Comware Corp
Original Assignee
NTT Comware Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Comware Corp filed Critical NTT Comware Corp
Priority to JP2015020712A priority Critical patent/JP6184033B2/ja
Publication of JP2016143355A publication Critical patent/JP2016143355A/ja
Application granted granted Critical
Publication of JP6184033B2 publication Critical patent/JP6184033B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

【課題】画像を見た者の感性に基づいて画像を評価することができる感性評価装置、感性評価方法、およびプログラムを提供する。【解決手段】感性評価装置1は、評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成する認識処理部30と、学習画像を見た人間の感性で評価される学習画像の評価値であって、一次元量で表現される評価値の入力を受け付ける学習画像蓄積部10と、認識処理部30が学習画像に対して認識処理を行った場合に、学習画像蓄積部10に入力された評価値を認識結果として出力するように、認識処理部30の処理パラメータを学習する学習処理部20と、を有する。【選択図】図1

Description

本発明は、感性評価装置、感性評価方法、およびプログラムに関する。
従来、撮像画像に対して画像認識を行って画像内に含まれる対象を認識する技術がある。この画像認識技術においては、近年、ニューラルネットワークを多層化したディープラーニング技術を利用して高い精度で対象を認識することが行われている。このディープラーニング技術は、一般的にはニューラルネットワークの入力層と出力層との間の中間層において複数段階に亘って層を重ねることにより高い精度で対象を認識する。このディープラーニング技術において、特に、畳み込みニューラルネットワーク(Convolutional Neural Network;CNN)が、従来の画像特徴量に基づいて対象を認識するよりも高い性能を有することで注目されている。
従来の畳み込みニューラルネットワークによれば、ラベルが付与された認識対象画像を学習し、認識対象画像に含まれる対象を認識する。また、従来の畳み込みニューラルネットワークは、複数のカテゴリを予め設定し、何れかのカテゴリを示すラベルが付与された認識対象画像を学習することで、入力画像が複数のカテゴリのうち何れに分類されるかを認識する手法である。この複数のカテゴリは、入力画像から受ける印象として分類される場合がある。この印象は、ミニマル(minimal)調、メランコリー(melancholy)調、HDR(High Dynamic Range)調、またはビンテージ(vintage)調といったものである。
"Recognizing Image Style", Sergey Karayev, Matthew Trentacoste, Helen Han, Aseem Agarwala, Trevor Darrell, Aaron Hertzmann, Holger Winnemoeller (Submitted on 15 Nov 2013 (v1), last revised 23 Jul 2014 (this version, v3))
上述した画像認識技術において、各カテゴリは完全に独立しており、入力画像は何れかのカテゴリに分類にされる。しかしながら、上述の画像認識技術は、入力画像を見た者が直接的に感じる強さの度合いに基づいて分類することができない可能性がある。例えば、従来の畳み込みニューラルネットワークを利用した認識技術は、予め設定した各カテゴリの何れにも分類されないような入力画像であっても何れかのカテゴリに分類してしまい、入力画像を見た者の直感と大きくはずれている場合があった。
そこで本発明は、上記の課題に鑑みてなされたものであって、画像を見た者の感性に基づいて画像を評価することができる感性評価装置、感性評価方法、およびプログラムを提供することを目的としている。
(1)本発明の一態様は、評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成する認識処理部と、学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付ける入力部と、前記認識処理部が前記学習画像に対して認識処理を行った場合に、前記入力部に入力された評価値を前記認識結果として出力するように、前記認識処理部の処理パラメータを学習する学習処理部と、を有する感性評価装置である。
(2)本発明の一態様は、上述の感性評価装置であって、前記評価値には所定ステップ数の離散値が設定され、前記入力部は、前記評価値として任意の値の入力を受け付け、前記認識処理部は、前記認識結果としての評価値を生成し、前記学習処理部は、前記入力部に入力された前記評価値を前記認識結果としての評価値として出力するように学習処理を行う。
(3)本発明の一態様は、上述の感性評価装置であって、前記学習処理部は、前記認識処理部により出力された評価値を修正した修正値、および前記修正値に対応した再学習画像を入力し、前記再学習画像に対して認識処理を行った場合に前記修正値を認識結果として出力するように前記認識処理部の処理パラメータを学習する。
(4)本発明の一態様は、上述の感性評価装置であって、前記修正値は、前記学習画像を見た人間の感性に基づく正解値に対し、前記認識処理部により処理された認識結果から遠ざかる方向にずれた値である。
(5)本発明の一態様は、上述の感性評価装置であって、管理者による操作を受け付けて前記認識処理部の認識結果を修正した修正値を受け付け、前記修正値および前記再学習画像を前記学習処理部に出力する管理端末を有する。
(6)本発明の一態様は、評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成するステップと、学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付けるステップと、前記学習画像に対して認識処理を行った場合に、入力された評価値を前記認識結果として出力するように、認識処理の処理パラメータを学習するステップと、を有する感性評価方法である。
(7)本発明の一態様は、コンピュータに、評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成させ、学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付けさせ、前記学習画像に対して認識処理を行った場合に、入力された評価値を前記認識結果として出力するように、認識処理の処理パラメータを学習させる、処理を実行させるためのプログラムである。
本発明の一態様によれば、画像を見た者の感性に基づいて画像を評価することができる。
本発明を適用した実施形態の感性評価装置1の機能的な構成を示すブロック図である。 本発明を適用した感性評価装置1の学習処理および認識処理を示す図である。 本発明を適用した感性評価装置1において記憶される認識結果データを示す図である。 本発明を適用した感性評価装置1において、画像の危険度と認識結果としての危険度との関係を示す図である。 本発明を適用した感性評価装置1において、管理端末60に表示させる表示画面62aの一例を示す図である。 本発明を適用した感性評価装置1における再学習の概要を示すブロック図である。 本発明を適用した感性評価装置1において再学習データに付加する危険度を示す図である。
以下、本発明を適用した感性評価装置1、感性評価方法、およびプログラムを、図面を参照して説明する。
まず、本発明を適用した実施形態の感性評価装置1の機能的な説明を行う。
図1は、本発明を適用した実施形態の感性評価装置1の機能的な構成を示すブロック図である。感性評価装置1は、画像を見た人間の感性に基づいて画像の評価を行うものである。感性評価装置1は、画像の評価を行うことにより、評価結果に基づいて画像を分類させることができる。
感性評価装置1は、学習画像蓄積部10と、学習処理部20と、認識処理部30と、認識結果管理部40と、インターフェース部50とを有する。
感性評価装置1は、ソフトウェアを実行する制御装置および記憶部を有するコンピュータである。感性評価装置1は、CPU(Central Processing Unit)などのプロセッサが記憶部(不図示)に記憶されているプログラムを実行することによって機能するソフトウェア機能部である。また、感性評価装置1は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)等のハードウェア機能部であってよい。
また、感性評価装置1において情報を記憶する記憶部(14、32、42)は、例えば、HDD(Hard Disc Drive)、フラッシュメモリ、EEPROM(Electrically Erasable Programmable Read Only Memory),ROM(Read Only Memory),またはRAM(Random Access Memory)等により実現される。また、記憶部には、ファームウェアやアプリケーションプログラム等の各種プログラム、各種機能部による処理結果、インターフェース部20が外部からから取得した情報などが記憶される。
学習画像蓄積部10は、画像変換部12と、学習画像データベース14とを有する。
画像変換部12は、サンプル画像の入力を受け付ける。このサンプル画像は、任意の画像であればよい。画像変換部12は、例えば、学習素材としての画像を記憶するサーバ装置等(不図示)から複数のサンプル画像が供給される。なお、感性評価装置1は、随時サンプル画像が供給され、サンプル画像が供給されたことに応じて後述する学習処理を行ってもよい。
サンプル画像には、当該サンプル画像の属性情報を示すラベルが付加される。ラベルには、サンプル画像の評価値が含まれる。評価値は、サンプル画像を見た人間の感性を表す。本実施形態において、人間の感性は、画像を見たときに直感的に判断される危険度を表す。危険度は、例えばPG12、R−15、R−18のような、情報の閲覧を制限するために指定された値である。
危険度は、本実施形態において、危険度が低い1から2、3、4、5のように段階的に危険度が高くなるよう所定ステップ数の離散値が設定される。なお、危険度は、学習画像に任意の値として付加可能である。さらに、危険度は、認識結果として任意の値が出力されうる。人間の感性は、危険度に限らず、美しさの度合い、重厚さの度合いなど、画像を見たときに直感的に判断される印象であればよい。
サンプル画像に付加される危険度は、例えば感性評価装置1の管理者の感性により予め複数の段階に設定される。なお、サンプル画像に付加される危険度は、離散値の間の値に設定されたものであってもよい。例えば、1〜5の段階的な危険度のうち、「3」に属する画像が他の危険度と比して多数である場合や「3」に属する画像でも危険度に差がある場合には、「3.5」または「2.5」という危険度を設定してもよい。
さらに、サンプル画像に付加される危険度は、均等の間隔ではなく、異なる間隔であってもよい。サンプル画像に付加される危険度は、例えば、4と5との間隔を大きくしてもよい。
画像変換部12は、サンプル画像を学習処理に適した形式に変換する前処理を行う。この前処理は、例えば学習画像の面積変更処理やアスペクト比の調整等である。画像変換部12は、前処理を施した画像を学習画像として学習画像データベース14に蓄積する。学習画像データベース14には、画像変換部12により変換された画像が学習画像として複数蓄積される。画像変換部12は、学習画像および評価値を入力する入力部として機能する。
学習画像データベース14は、外部から供給された変換前のサンプル画像、および画像変換部12により変換された学習画像を蓄積する。学習画像データベース14は、画像変換部12により変換された学習画像が学習処理部20において学習処理が実行可能なファイルとして記憶される。
学習処理部20には、学習画像蓄積部10から出力された学習画像が供給される。学習処理部20は、学習画像に付加された評価値が認識結果となるように処理パラメータを学習し、学習結果を生成する。この学習結果は、認識処理部30における処理パラメータである。この学習結果は、認識処理部30における学習結果データ記憶部32に記憶される。学習処理部20は、学習結果を得ることに応じて学習結果データ記憶部32における学習結果を更新する。これにより、学習処理部20は、画像変換部12に入力された学習画像に付加された評価値を認識結果として出力するように処理を行う。
認識処理部30は、学習結果データ記憶部32を有する。学習結果データ記憶部32における学習結果としての認識処理部30の処理パラメータは、学習処理部20によって更新される。また、認識処理部30は、インターフェース部50から評価対象となる入力画像が供給される。
認識処理部30は、学習処理部20により得た処理パラメータに基づいて入力画像の認識処理を行う。認識処理部30は、認識処理によって入力画像の危険度(評価値)を認識結果として得る。この危険度は、入力画像をユーザが見たときに感じる感性の予測値である。認識処理部30は、入力画像および当該入力画像の危険度を認識結果として認識結果管理部40に出力する。
認識結果管理部40は、認識結果データ記憶部42を有する。認識結果データ記憶部42には、認識処理部30により出力された認識結果を蓄積する。認識結果管理部40は、入力画像の危険度を評価結果としてインターフェース部50に出力して、インターフェース部50により評価結果を出力させる。
認識結果管理部40における認識結果データ記憶部42は、管理端末60が接続されていてもよい。管理端末60は、管理者が操作するユーザインターフェース部62を有するコンピュータにより実現される。ユーザインターフェース部62は、ユーザによる操作を受け付ける操作部、およびユーザに各種情報を提示する表示部を有する。管理端末60は、ユーザインターフェース部62により受け付けられた操作に基づいて危険度を変更する。管理端末60は、変更された危険度および当該危険度が付加された画像を学習処理部20に出力する。管理端末60から学習処理部20に出力された画像は、再学習画像として学習処理部20により処理される。
なお、管理端末60は、学習処理部20および認識結果管理部40と一体化されたコンピュータにより実現されていてもよく、学習処理部20および管理端末60とインターネット等の通信回線を介して接続されていてもよい。
インターフェース部50は、感性評価装置1の外部の装置と通信を行う通信インターフェースにより実現される。インターフェース部50は、外部から入力画像を入力して、当該入力画像を認識処理部30に出力する。また、インターフェース部50は、入力画像の評価結果を認識結果管理部40から入力して、当該評価結果を外部に出力する。
図2は、本発明を適用した感性評価装置1の学習処理および認識処理を示す図である。学習処理部20には、評価値として危険度が付加された学習画像が複数供給される。認識処理部30は、例えば、畳み込みニューラルネットワーク(Convolutional Neural Network;CNN)により実現される。畳み込みニューラルネットワークは、中間層としての複数の畳み込み層(フィルタ部)と、出力層とを有する。畳み込み層は、それぞれ、例えば、入力されたデータにフィルタリング(乗算処理)を行い、フィルタリング後の画像(特徴)にバイアス値を加算する。畳み込みニューラルネットワークは、画像データを入力し、中間層によりフィルタ係数に基づくフィルタ処理を行って、出力層により処理済のデータを出力する。フィルタ部は、学習処理部20により生成された学習結果としてのフィルタ係数が設定される。畳み込みニューラルネットワークは、学習画像に付加された危険度を出力するようにフィルタ係数が設定される。
なお、学習処理部20による学習手法は、畳み込みニューラルネットワークの処理パラメータの設定であってもよく、その他の機械学習手法でもよく、学習結果データ記憶部32には、学習手法に応じた学習結果が記憶される。認識処理部30は、学習結果データ記憶部32に記憶された学習結果に基づいて入力画像の危険度を得ることとなる。
危険度の算出に畳み込みニューラルネットワークを用いる場合、畳み込みニューラルネットワークは、入力画像に入力に応じて一次元量である評価値を出力するよう学習される。学習処理部20は、危険度が「1」のラベルが付加された学習画像が供給されたことに対し、危険度が「1」の認識結果が得られるように畳み込み層における処理パラメータを更新する。このとき、学習処理部20は、学習画像に付加された危険度と畳み込みニューラルネットワークから出力された危険度との誤差を、ユークリッド誤差等を用いて最小となるように、誤差逆伝搬法を用いて回帰を行う。
認識処理部30には、インターフェース部50から入力画像が供給される。認識処理部30は、畳み込みニューラルネットワークに入力画像を入力し、畳み込みニューラルネットワークから出力された値を危険度Xとして出力する。認識処理部30は、入力画像に危険度Xを付加し、危険度Xを付加した入力画像を認識結果データ記憶部42に記憶する。
図3は、本発明を適用した感性評価装置1において記憶される認識結果データを示す図である。認識結果データ記憶部42には、危険度Xに区分して複数のフォルダが設定される。危険度が「1」のフォルダには危険度Xが1.5より小さい入力画像が格納される。危険度が「2」のフォルダには危険度Xが1.5以上であり2.5より小さい入力画像が格納される。危険度が「3」のフォルダには危険度Xが2.5以上であり3.5より小さい入力画像が格納される。危険度が「4」のフォルダには危険度Xが3.5以上であり4.5より小さい入力画像が格納される。危険度が「5」のフォルダには危険度Xが4.5より小さい入力画像が格納される。なお、認識結果データは、指定した危険度の範囲ごとにフォルダに区分している例を説明したが、フォルダに区分しなくてもよい。
また、認識結果管理部40は、認識結果の正解率を記憶するグラフデータフォルダを認識結果データ記憶部42に格納してもよい。認識結果管理部40は、認識結果データ記憶部42に格納された危険度と管理端末60から出力された危険度とを比較する。認識結果管理部40は、双方の危険度が一致する場合には正解であると判定し、双方の危険度が一致していない場合には誤答であると判定する。認識結果管理部40は、比較結果を蓄積し、危険度ごとに正解率のグラフを作成する。認識結果管理部40は、例えば図4に示すようなグラフデータを作成する。図4は、本発明を適用した感性評価装置1において、画像の危険度と認識結果としての危険度との関係を示す図である。
なお、認識結果管理部40は、指定した危険度の範囲ごとにフォルダに区分して認識結果データを区分しない場合には、双方の危険度の差が所定の範囲内であるか否かを判定する。認識結果管理部40は、双方の危険度の差が所定の範囲内である場合には正解であると判定し、双方の危険度の差が所定の範囲内ではない場合には誤答であると判定する。
図5は、本発明を適用した感性評価装置1において、管理端末60に表示させる表示画面62aの一例を示す図である。管理端末60は、認識結果データ記憶部42から認識結果データを読み込み、認識処理がされた処理済み画像100と認識結果としての危険度102とを表示させる。これにより、管理端末60は、管理者に入力画像に対する認識結果を提示する。さらに、管理端末60は、管理者により危険度の修正操作を受け付けるための入力ボタン104を表示する。管理端末60は、修正操作を受け付けた場合、認識結果と修正された危険度(修正値)とを比較し、双方の危険度が一致していない場合には認識結果管理部40に修正された危険度を送信する。図5は、処理済み画像100の危険度が「3」から「4」に修正された様子を示している。
また、管理端末60は、双方の危険度が一致していない場合には、修正された危険度および処理済み画像100を学習処理部20に送信する。処理済み画像100は、再学習画像として学習処理部20に受け付けられる。学習処理部20は、再学習画像を入力した場合には、再学習画像を入力した場合に修正された危険度を出力するように認識処理の処理パラメータを更新する。
図6は、本発明を適用した感性評価装置1における再学習の概要を示すブロック図である。管理端末60には、認識結果データ記憶部42における認識結果データが読み込まれる。管理端末60は、例えば図5に示したような表示画面62aを表示させ、危険度の正解値を入力する操作を促す。管理端末60は、危険度の正解値が入力された場合に、認識結果データから修正後の危険度(正解値)が付加された処理済み画像を抽出する。このとき、管理端末60は、危険度を修正する操作を受け付けたことに応じて、処理済み画像を認識結果データ記憶部42からダウンロードし、ダウンロードした処理済み画像に修正された危険度を付加する。管理端末60は、修正された危険度のフォルダごとに、修正された危険度が付加された処理済み画像を、再学習画像として格納する。管理端末60は、例えば、修正された危険度が「1」が付加された再学習画像を抽出データ(1)のフォルダに格納する。再学習データは、学習処理部20により取り込まれる。学習処理部20は、再学習データに基づいて学習処理を行って認識処理部30の処理パラメータを更新する。
なお、管理端末60は、再学習画像を生成したことに応じて当該再学習画像を学習処理部20に出力してもよい。また、管理端末60は、再学習画像を修正された危険度のフォルダごとに格納してもよい。
図7は、本発明を適用した感性評価装置1において再学習データに付加する危険度を示す図である。管理端末60は、例えば図7に示すように認識処理部30により処理された危険度(計算値)が正解値よりも大きく乖離していた場合に、危険度の修正値を補正する。管理端末60は、修正値を、画像を見た人間の感性に基づく正解値に対し、認識処理部30により処理された認識結果から遠ざかる方向にずれた値に補正する。管理端末60は、修正値と正解値とを比較して、自動的に修正値を補正してもよい。また、管理端末60は、ユーザインターフェース部62の操作に基づいて、正解値から遠ざかる方向に危険度を補正させてもよい。
以上説明した本発明を適用した感性評価装置1は、画像を見た人間の感性が一次元量として予め設定された学習画像の危険値(評価値)の入力を受け付け、認識処理部30により学習画像について認識処理を行った場合に危険値を出力するように認識処理部30の処理パラメータを学習する。これにより、感性評価装置1によれば、画像を見た者の感性に基づいて画像を評価することができる。
本発明を適用した感性評価装置1は、画像をカテゴリに分類するのではなく、感性を一次元量として表して、一次元量の範囲において区分することができる。すなわち、感性評価装置1は、人間が最も近い感度を認識結果として出力することができる。したがって、既存の画像分類技術のように、予め設定した複数のカテゴリのうち何れのカテゴリにも属さない画像であっても、予め設定した複数のカテゴリのうちの最も確信度が高いカテゴリに属するという低い精度の認識結果を生成することがない。
また、感性評価装置1によれば、既存の画像分類技術のように、分類したいカテゴリをさらに細分化する、または新たな分類カテゴリを設定するなどで新たな認識処理部30の値を得る場合であっても、再学習をし直すことなく、認識結果データの評価値の範囲を新たに設定すればよい。新たに設定する評価値の範囲は、例えば1と2との間の1.5のような離散値間の値であってもよく、例えば予め設定された1、2、3、4、5という評価値に対して0や6といった設定範囲を超える値であってもよい。
感性評価装置1は、インターフェース部50を介して、例えばユーザに提示する画像を入力し、当該画像の危険度Xを出力することができる。これにより、感性評価装置1は、画像を提供する装置によって予め設定した危険度Xの閾値と認識処理部30により出力した危険度Xとを比較させ、危険度Xが閾値よりも低い場合には画像をユーザに提供させることができる。また、感性評価装置1は、認識処理部30により出力された危険度Xが閾値以上である場合には、ユーザに画像を提供することを禁止させることができる。さらに、感性評価装置1は、例えばユーザごとに閾値を設定させることにより、ユーザに合わせて画像のフィルタリングを行わせることができる。
また、感性評価装置1によれば、例えば感性のレベルが区分しにくいグレーゾーンの画像であっても、感性に基づく一次元量を出力するように認識処理部30の処理パラメータを学習することにより、自動的に画像にラベルを付加することができる。
さらに、感性評価装置1によれば、危険度として所定ステップ数の離散値が設定され、学習画像に付加される危険度として任意の値を入力し、入力した危険度を認識結果として出力するように学習処理を行う。この結果、感性評価装置1によれば、認識処理部30によって複数の離散値のうち何れかに近い危険度を出力させることができる。
なお、危険度は、1〜5のような整数ではなく、ランダムな値や正規分布に沿って変化させた値を設定してもよい。例えば、同じサンプル画像について、危険度が「1.0」のラベルを付加したサンプル画像と、危険度が「1.1」のラベルを付加したサンプル画像とを認識処理部30の処理パラメータを学習させることにより、少ないサンプル画像数であっても認識処理部30の処理パラメータを学習できる。
さらに、感性評価装置1によれば、認識処理部30により出力された危険度を修正した修正値、および修正値に対応した再学習画像に対して認識処理を行った場合に修正値を認識結果として出力するように認識処理部30の処理パラメータを学習する。この結果、感性評価装置1によれば、認識処理部30により出力する危険度の精度を効果的に高めて、画像を見た者の感性により近い認識結果を得ることができる。
さらに、感性評価装置1によれば、画像を見た人間の感性に基づく正解値に対し、認識処理部30により処理された認識結果から遠ざかる方向にずれた値に修正するので、誤った認識結果を出力した場合に認識処理部30の処理パラメータを大きく変更するよう学習することができる。この結果、感性評価装置1によれば、認識処理部30により出力する危険度の精度を効果的に高めて、画像を見た者の感性により近い認識結果を得ることができる。
さらに、感性評価装置1によれば、管理者による操作を受け付けて危険度の修正値を受け付け、修正値および再学習画像を認識処理部30に出力する管理端末(60)を有するので、管理者の感性によって認識処理部30の処理パラメータを変更するよう学習することができる。この結果、感性評価装置1によれば、認識処理部30により出力する危険度の精度を効果的に高めて、画像を見た者の感性により近い認識結果を得ることができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
上述した実施形態の感性評価装置1は、サンプル画像に付加される評価値を単一ものとして説明したが、複数の異なる感性に基づく一次元量であってもよい。この感性評価装置1は、各感性について一次元量を設定したサンプル画像を用いて学習処理を行って認識処理部30の処理パラメータを学習する。この結果、感性評価装置1は、単一の画像について各感性の評価値を出力することができる。
また、上述した感性評価装置1の機能を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、DVD(Digital Versatile Disk)等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(例えばDRAM(Dynamic Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
1…感性評価装置、10…学習画像蓄積部、12…画像変換部、14…学習画像データベース、20…学習処理部、30…認識処理部、32…学習結果データ記憶部、40…認識結果管理部、42…認識結果データ記憶部、50…インターフェース部、60…管理端末、62…ユーザインターフェース部

Claims (7)

  1. 評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成する認識処理部と、
    学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付ける入力部と、
    前記認識処理部が前記学習画像に対して認識処理を行った場合に、前記入力部に入力された評価値を前記認識結果として出力するように、前記認識処理部の処理パラメータを学習する学習処理部と、
    を有する感性評価装置。
  2. 前記評価値には所定ステップ数の離散値が設定され、
    前記入力部は、前記評価値として任意の値の入力を受け付け、
    前記認識処理部は、前記認識結果としての評価値を生成し、
    前記学習処理部は、前記入力部に入力された前記評価値を前記認識結果としての評価値として出力するように学習処理を行う、
    請求項1に記載の感性評価装置。
  3. 前記学習処理部は、前記認識処理部により出力された評価値を修正した修正値、および前記修正値に対応した再学習画像を入力し、前記再学習画像に対して認識処理を行った場合に前記修正値を認識結果として出力するように前記認識処理部の処理パラメータを学習する、
    請求項1または2に記載の感性評価装置。
  4. 前記修正値は、前記学習画像を見た人間の感性に基づく正解値に対し、前記認識処理部により処理された認識結果から遠ざかる方向にずれた値である、
    請求項3に記載の感性評価装置。
  5. 管理者による操作を受け付けて前記認識処理部の認識結果を修正した修正値を受け付け、前記修正値および再学習画像を前記学習処理部に出力する管理端末を有する、
    請求項1から4のうち何れか1項に記載の感性評価装置。
  6. 評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成するステップと、
    学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付けるステップと、
    前記学習画像に対して認識処理を行った場合に、入力された評価値を前記認識結果として出力するように、認識処理の処理パラメータを学習するステップと、
    を有する感性評価方法。
  7. コンピュータに、
    評価対象の画像に対して認識処理を行い、人間の感性で評価可能な一次元量で表現される認識結果を生成させ、
    学習画像を見た人間の感性で評価される前記学習画像の評価値であって、一次元量で表現される評価値の入力を受け付けさせ、
    前記学習画像に対して認識処理を行った場合に、入力された評価値を前記認識結果として出力するように、認識処理の処理パラメータを学習させる、
    処理を実行させるためのプログラム。
JP2015020712A 2015-02-04 2015-02-04 感性評価装置、感性評価方法、およびプログラム Active JP6184033B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015020712A JP6184033B2 (ja) 2015-02-04 2015-02-04 感性評価装置、感性評価方法、およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015020712A JP6184033B2 (ja) 2015-02-04 2015-02-04 感性評価装置、感性評価方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2016143355A true JP2016143355A (ja) 2016-08-08
JP6184033B2 JP6184033B2 (ja) 2017-08-23

Family

ID=56570606

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015020712A Active JP6184033B2 (ja) 2015-02-04 2015-02-04 感性評価装置、感性評価方法、およびプログラム

Country Status (1)

Country Link
JP (1) JP6184033B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2022049616A1 (ja) * 2020-09-01 2022-03-10
WO2022181410A1 (ja) * 2021-02-24 2022-09-01 パナソニックIpマネジメント株式会社 画像識別装置、映像再生装置、画像識別方法、及び、プログラム

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1063859A (ja) * 1996-08-22 1998-03-06 Fuji Xerox Co Ltd 画質評価方法および装置
JP2002175527A (ja) * 2000-12-06 2002-06-21 Gala Inc コンピュータ画像処理により猥褻ヌード画像を弁別する方法
JP2002189925A (ja) * 2000-12-21 2002-07-05 Gala Inc インターネット上の広告管理サーバー
JP2008033654A (ja) * 2006-07-28 2008-02-14 Noritsu Koki Co Ltd 写真画像判別方法、写真画像判別プログラム、及び、写真画像処理装置
JP2009503657A (ja) * 2005-07-22 2009-01-29 エル ターラー、ステフエン ニューラルネットワークによるレーティングシステム
JP2009252243A (ja) * 2008-04-04 2009-10-29 Nhn Corp 成人物判断方法及びシステム
JP2011199598A (ja) * 2010-03-19 2011-10-06 Sharp Corp 録画再生装置及び特殊再生方法
JP2014023086A (ja) * 2012-07-23 2014-02-03 Funai Electric Co Ltd 情報処理装置及び視聴制限システム
JP2014153906A (ja) * 2013-02-08 2014-08-25 Honda Motor Co Ltd 検査装置、検査方法及びプログラム
JP2015149030A (ja) * 2014-02-07 2015-08-20 国立大学法人名古屋大学 ビデオコンテンツ暴力度評価装置、ビデオコンテンツ暴力度評価方法およびビデオコンテンツ暴力度評価プログラム

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1063859A (ja) * 1996-08-22 1998-03-06 Fuji Xerox Co Ltd 画質評価方法および装置
JP2002175527A (ja) * 2000-12-06 2002-06-21 Gala Inc コンピュータ画像処理により猥褻ヌード画像を弁別する方法
JP2002189925A (ja) * 2000-12-21 2002-07-05 Gala Inc インターネット上の広告管理サーバー
JP2009503657A (ja) * 2005-07-22 2009-01-29 エル ターラー、ステフエン ニューラルネットワークによるレーティングシステム
JP2008033654A (ja) * 2006-07-28 2008-02-14 Noritsu Koki Co Ltd 写真画像判別方法、写真画像判別プログラム、及び、写真画像処理装置
JP2009252243A (ja) * 2008-04-04 2009-10-29 Nhn Corp 成人物判断方法及びシステム
JP2011199598A (ja) * 2010-03-19 2011-10-06 Sharp Corp 録画再生装置及び特殊再生方法
JP2014023086A (ja) * 2012-07-23 2014-02-03 Funai Electric Co Ltd 情報処理装置及び視聴制限システム
JP2014153906A (ja) * 2013-02-08 2014-08-25 Honda Motor Co Ltd 検査装置、検査方法及びプログラム
JP2015149030A (ja) * 2014-02-07 2015-08-20 国立大学法人名古屋大学 ビデオコンテンツ暴力度評価装置、ビデオコンテンツ暴力度評価方法およびビデオコンテンツ暴力度評価プログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2022049616A1 (ja) * 2020-09-01 2022-03-10
WO2022049616A1 (ja) * 2020-09-01 2022-03-10 三菱電機株式会社 誘導装置、プログラム及び誘導方法
JP7241981B2 (ja) 2020-09-01 2023-03-17 三菱電機株式会社 誘導装置、プログラム及び誘導方法
WO2022181410A1 (ja) * 2021-02-24 2022-09-01 パナソニックIpマネジメント株式会社 画像識別装置、映像再生装置、画像識別方法、及び、プログラム

Also Published As

Publication number Publication date
JP6184033B2 (ja) 2017-08-23

Similar Documents

Publication Publication Date Title
JP6148265B2 (ja) 学習装置、学習方法、およびプログラム
JP2016143354A (ja) 学習装置、学習方法、およびプログラム
US10726038B2 (en) System and method for optimizing aggregation and analysis of data across multiple data sources
JP4429236B2 (ja) 分類ルール作成支援方法
JP2020052520A (ja) 判定装置、判定方法、およびプログラム
US11429892B2 (en) Recommending sequences of content with bootstrapped reinforcement learning
WO2018170454A2 (en) Using different data sources for a predictive model
JP6002796B1 (ja) 感性評価装置、感性評価方法、およびプログラム
JP7191058B2 (ja) チューニング可能なバイアス低減用パイプライン
US20150186780A1 (en) System and Method for Biometrics-Based Music Recommendation
US20230188595A1 (en) Computer-Implemented Systems and Methods for a User-Controllable Parameter
CN111898675A (zh) 信贷风控模型生成方法、装置、评分卡生成方法、机器可读介质及设备
US20190354991A1 (en) System and method for managing service requests
JP6184033B2 (ja) 感性評価装置、感性評価方法、およびプログラム
JP2014215685A (ja) レコメンドサーバおよびレコメンドコンテンツ決定方法
US20230008904A1 (en) Systems and methods for de-biasing campaign segmentation using machine learning
JP5953384B1 (ja) 学習装置、学習方法、およびプログラム
CN112997148A (zh) 睡眠预测方法、装置、存储介质及电子设备
US20210158213A1 (en) Learning model management system, learning model management method, and recording medium
JP5929532B2 (ja) イベント検出装置、イベント検出方法およびイベント検出プログラム
US11120537B2 (en) Cognitive object emotional analysis based on image quality determination
JP6072103B2 (ja) 学習装置、学習方法、およびプログラム
CN107301185B (zh) 音乐推荐系统及方法
JP7112924B2 (ja) 情報処理装置、情報処理方法、およびプログラム
CN111553375A (zh) 使用变换以验证计算机视觉质量

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160517

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170627

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170724

R150 Certificate of patent or registration of utility model

Ref document number: 6184033

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250