JP5875005B2 - Human emotion estimation device, human emotion estimation method, and human emotion estimation program - Google Patents
Human emotion estimation device, human emotion estimation method, and human emotion estimation program Download PDFInfo
- Publication number
- JP5875005B2 JP5875005B2 JP2012189878A JP2012189878A JP5875005B2 JP 5875005 B2 JP5875005 B2 JP 5875005B2 JP 2012189878 A JP2012189878 A JP 2012189878A JP 2012189878 A JP2012189878 A JP 2012189878A JP 5875005 B2 JP5875005 B2 JP 5875005B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- user
- input
- learning
- factor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000008451 emotion Effects 0.000 title claims description 71
- 238000000034 method Methods 0.000 title claims description 15
- 238000011156 evaluation Methods 0.000 claims description 29
- 230000006870 function Effects 0.000 claims description 8
- 238000012545 processing Methods 0.000 description 11
- 239000013256 coordination polymer Substances 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000003745 diagnosis Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000001364 causal effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 108010014173 Factor X Proteins 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 238000013178 mathematical model Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000006461 physiological response Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000013179 statistical model Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002889 sympathetic effect Effects 0.000 description 1
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
本発明は、人が他者をどのような基準で評価し、またどのような印象や感情を抱いているかを推定し、その結果を提示する対人感情推定装置、対人感情推定方法及び対人感情推定プログラムに関する。 The present invention relates to a human emotion estimation device, a human emotion estimation method, and a human emotion estimation that estimate what kind of criteria a person evaluates others, and what impressions and emotions they have, and present the results. Regarding the program.
画像・音声認識技術の発展や新たな生理センサの登場から、気分や感情など人の内面情報を計測・推定しようという研究が盛んになっている。例えば画像認識技術を用いて人の表情を検出し、そこから感情を推定する技術(例えば、特許文献1参照)、声の強弱や揺れなどの情報を用いて感情を抽出する技術(例えば、特許文献2参照)などが提案されている。 With the development of image and voice recognition technology and the emergence of new physiological sensors, research to measure and estimate the inside information of people such as mood and emotion has become active. For example, a technique for detecting a facial expression of a person using an image recognition technique and estimating an emotion therefrom (for example, see Patent Document 1), a technique for extracting an emotion using information such as voice strength and shaking (for example, a patent) Document 2) has been proposed.
しかしながら、特許文献1、2に記載の感情を推定する技術にあっては、人の表情や生理反応といった表層に現れる感情を取得することを目的としており、それらの感情がなぜ発生したのかといった解釈を与えることはできないという問題がある。
However, the techniques for estimating emotions described in
本発明は、このような事情に鑑みてなされたもので、ユーザが指定の対象に対して抱く評価や感情を推定し、またそれらがどのような因子から発生するのかを明らかにすることができる対人感情推定装置、対人感情推定方法及び対人感情推定プログラムを提供することを目的とする。 The present invention has been made in view of such circumstances, and can estimate evaluations and emotions that a user has with respect to a specified target, and can clarify the factors that cause them. It is an object to provide a human emotion estimation device, a human emotion estimation method, and a human emotion estimation program.
本発明は、ユーザの個人属性情報と、評価対象の個人属性情報と、前記評価対象に対する心理因子の評点情報と、対人感情因子の評点情報とを入力する入力手段と、前記入力手段により入力した情報を蓄積する情報蓄積手段と、前記情報蓄積手段に蓄積された情報の関連性を学習した学習モデルを生成する学習手段と、前記学習手段により生成された前記学習モデルを利用して、前記入力手段からの入力が欠損していた因子の評点情報の期待値を推定する推定手段と、前記推定した結果の情報を提示する情報提示手段とを備えることを特徴とする。 According to the present invention, input means for inputting personal attribute information of a user, personal attribute information of an evaluation target, score information of psychological factors for the evaluation target, and score information of interpersonal emotion factors, and input by the input means Using the information storage means for storing information, the learning means for learning the relevance of the information stored in the information storage means, the learning model generated by the learning means, and the input An estimation means for estimating the expected value of the score information of the factor for which input from the means is missing, and an information presentation means for presenting information on the estimated result are provided.
本発明は、前記ユーザのアカウント情報を管理するアカウント管理手段と、前記推定結果に対して前記ユーザからフィードバックされた情報を前記入力手段により入力し、前記ユーザ毎の前記学習モデルを再構築して、前記アカウント情報と関係つけることにより、前記ユーザに適応した前記学習モデルを生成する個人性学習手段とをさらに備えることを特徴とする。 The present invention provides an account management means for managing the account information of the user, and inputs information fed back from the user with respect to the estimation result by the input means, and reconstructs the learning model for each user. And personality learning means for generating the learning model adapted to the user by associating with the account information.
本発明は、前記情報提示手段は、前記個人属性情報、前記評価対象に対する心理因子及び前記対人感情因子の各因子間の関係を有向もしくは無向グラフの形で可視化して提示することにより、前記学習モデルの情報の提示をさらに行うことを特徴とする。 In the present invention, the information presentation means visualizes and presents the relationship between each factor of the personal attribute information, the psychological factor for the evaluation target, and the interpersonal emotion factor in the form of a directed or undirected graph, The information of the learning model is further presented.
本発明は、前記ユーザ毎に構築された前記学習モデルに基づき、前記ユーザがどのような基準で他者を評価しているかを診断することを特徴とする。 The present invention is characterized in that, based on the learning model constructed for each user, a criterion for evaluating the other by the user is evaluated.
本発明は、ユーザの個人属性情報と、評価対象の個人属性情報と、前記評価対象に対する心理因子の評点情報と、対人感情因子の評点情報とを入力する入力手段と、前記入力手段により入力した情報を蓄積する情報蓄積手段とを備える対人感情推定装置が行う対人感情推定方法であって、前記情報蓄積手段に蓄積された情報の関連性を学習した学習モデルを生成する学習ステップと、前記学習ステップにより生成された前記学習モデルを利用して、前記入力手段からの入力が欠損していた因子の評点情報の期待値を推定する推定ステップと、前記推定した結果の情報を提示する情報提示ステップとを有することを特徴とする。 According to the present invention, input means for inputting personal attribute information of a user, personal attribute information of an evaluation target, score information of psychological factors for the evaluation target, and score information of interpersonal emotion factors, and input by the input means An interpersonal emotion estimation method performed by an interpersonal emotion estimation device including an information storage unit that stores information, the learning step generating a learning model that learns the relevance of information stored in the information storage unit, and the learning An estimation step for estimating the expected value of the score information of the factor for which the input from the input means is missing using the learning model generated by the step, and an information presentation step for presenting the information of the estimated result It is characterized by having.
本発明は、コンピュータを、前記対人感情推定装置として機能させるための対人感情推定プログラムである。 The present invention is a human emotion estimation program for causing a computer to function as the human emotion estimation device.
本発明によれば、対人感情に注目し、社会心理学の研究から得られた知見を元に学習モデルを構築し、対人感情やその因子間の関係を学習するようにしたため、ユーザが評価対象に対して抱く評価や感情を推定し、またそれらがどのような因子から発生するのかを明らかにすることができるという効果が得られる。 According to the present invention, attention is paid to interpersonal emotions, and a learning model is constructed based on knowledge obtained from social psychology research to learn interpersonal emotions and the relationships between the factors. It is possible to estimate the evaluations and feelings that are held against and to clarify the factors that cause them.
以下、図面を参照して、本発明の一実施形態による対人感情推定装置を説明する。図1は同実施形態の構成を示すブロック図である。符号1は、ユーザが、自身と評価対象の個人属性、評価対象に対する各心理因子と対人感情の評点の情報を入力する入力部である。符号2は、入力部2により入力した情報を蓄積する情報蓄積部である。符号3は、学習モデルを構築する学習部である。符号4は、情報蓄積部2に蓄積された情報と、学習部3により学習されたモデルを用い、入力が欠損していた因子の期待値を推定する推定部である。符号5は、学習されたグラフ構造と推定された欠損因子の期待値を表示装置等に提示する情報提示部である。
Hereinafter, a human emotion estimation apparatus according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the embodiment.
図1に示す対人感情推定装置は、対人感情に注目し、社会心理学の研究から得られた知見を元に数理モデルを構築し、対人感情やその因子間の関係を学習することで、ユーザが指定の対象に対して抱く評価や感情を推定し、またそれらがどのような因子から発生するのかを明らかにするものである。 The interpersonal emotion estimation device shown in FIG. 1 focuses on interpersonal emotions, constructs a mathematical model based on knowledge obtained from research in social psychology, and learns the interpersonal emotions and the relationships between the factors, thereby Estimates the evaluations and feelings held by a specified object, and clarifies what factors cause them.
人が他者を評価する枠組みとして、Brunerらが提案した暗黙裡のパーソナリティ観という概念が広く支持されている。暗黙裡のパーソナリティ観は個人が経験などを通して培った、特定の個人属性や行動と人格的特徴とを結びつける信念体系である。例えば、日本人は右に倣うことを好む、A型は真面目だ、等である。 The concept of implicit personality, proposed by Bruner et al., Is widely supported as a framework for human evaluation of others. The tacit perception of personality is a belief system that links specific personal attributes and behavior with personality characteristics that individuals have cultivated through experience. For example, Japanese prefer to follow the right, type A is serious, etc.
暗黙裡のパーソナリティ観は個人差が非常に大きいが、それを構成する要素は「個人的親しみやすさ」、「社会的望ましさ」、「力本性」の基本三次元に対応付けられることが報告されている(文献:林文俊,”対人認知構造の基本次元についての一考察”,名古屋大學教育學部紀要,教育心理学科,vol.25,pp.233−247,Dec. 1978.)。個人的親しみやすさは「優しさ」や「あたたかさ」、社会的望ましさは「誠実さ」や「理性」、「知性」、力本性は「積極性」や「意欲性」といったカテゴリに該当する。 There is a great individual difference in the personality view of tacit jealousy, but it is reported that the elements that compose it are associated with the basic three dimensions of "personal friendliness", "social desirability" and "powerfulness" (Reference: Fumitoshi Hayashi, "A Study on Basic Dimensions of Interpersonal Cognitive Structure", Bulletin of Faculty of Education, Nagoya University, Department of Educational Psychology, vol. 25, pp. 233-247, Dec. 1978.). Personal friendliness falls into categories such as “kindness” and “warmth”, social desirability falls into “honesty”, “reason”, “intelligence”, and empowerment falls into categories such as “aggressiveness” and “motivation” .
また暗黙裡のパーソナリティ観は個人差が大きい一方で、例えば「団塊の世代」や「有閑マダム」等、社会背景や生活環境を等しくする集団は一定の共通した価値観を有していることが知られており、例えばマーケティング・サイエンスでは、年齢や性別、国籍といった人口統計的区分、及び職業や学歴、所得といった社会的区分に属する情報をデモグラフィック属性、趣味や嗜好、ライフスタイルに関する情報をサイコグラフィック属性と呼び、デモグラフィック属性やサイコグラフィック属性といった個人属性を元に顧客を分類するターゲット・セグメンテーションが行われている。パーソナリティ観についても同様に、個人属性からのグルーピングが可能である。 In addition, while tacit perceptions of personality vary widely among individuals, groups that share the same social background and living environment, such as the “baby boomer generation” and “busy madam”, have certain common values. For example, in marketing science, demographic attributes such as age, gender, nationality, and social categories such as occupation, educational background, income, etc. Called graphic attributes, target segmentation is performed to classify customers based on personal attributes such as demographic attributes and psychographic attributes. Similarly, personality can be grouped from individual attributes.
本発明はこれらの社会心理学的、もしくはマーケティング・サイエンス的な知見を取り入れた数理モデルを構築する。具体的には、個人属性や心理因子のひとつひとつを確率変数とし、その間の関係をグラフG(V,E)により表現する。ここで、Vは個人属性や心理因子等に対応するノード集合であり、Eは確率変数間の関係を表すエッジの集合である。 The present invention constructs a mathematical model that incorporates these social psychological or marketing science findings. Specifically, each individual attribute and psychological factor is a random variable, and the relationship between them is expressed by a graph G (V, E). Here, V is a node set corresponding to personal attributes, psychological factors, and the like, and E is a set of edges representing the relationship between random variables.
暗黙のパーソナリティ観を構成する心理因子(以下、パーソナリティ観因子という)は、SD法(semantic−differential法)に基づき、人間性に関連する形容詞の対義語対により表現する。図2〜図7は、対義語対の一例を示す説明図である。図2〜図7は、「外見」、「力強さ」、「性質」、「外向性」、「理性・情動」、「能力」それぞれについて対義語対の一例を示している。 Psychological factors constituting the implicit personality view (hereinafter referred to as personality view factor) are expressed by an adjective pair of adjectives related to humanity based on the SD method (semantic-differential method). 2-7 is explanatory drawing which shows an example of an antonym pair. 2 to 7 show an example of an antonym pair for each of “appearance”, “strength”, “nature”, “extroversion”, “reason / emotion”, and “ability”.
個人属性については年齢や性別、職業といった社会背景やライフスタイルを規定するもの、及び学歴や年収といった生活レベルに関連する要素がある。図8は、個人属性の一例を示す説明図である。 Personal attributes include elements that define social backgrounds and lifestyles such as age, gender and occupation, and elements related to living levels such as educational background and annual income. FIG. 8 is an explanatory diagram showing an example of personal attributes.
また、対人感情を構成する心理因子(以下、対人感情因子という)についても心理学的知見を参照し、SD法によるいくつかの評価軸を設定する。図9は、対人感情を構成する心理因子の一例を示す説明図である。 In addition, psychological factors that constitute personal feelings (hereinafter referred to as personal feeling factors) are also referred to psychological knowledge, and several evaluation axes based on the SD method are set. FIG. 9 is an explanatory diagram illustrating an example of psychological factors that constitute interpersonal emotions.
パーソナリティ観因子や対人感情因子は、離散値(例えば5段階評価)もしくは実数値(例えば0〜1)により表現することとする。この時ノード集合V={X1,…,Xp}中の要素Xiは、「年齢」「性別」といった個人属性、「話が合う−話が合わない」「思いやりがある−思いやりがない」といったパーソナリティ観因子、「好き−嫌い」「尊敬−軽蔑」といった対人感情因子に対応する確率変数となる。 The personality factor and the interpersonal emotion factor are expressed by discrete values (for example, five-level evaluation) or real values (for example, 0 to 1). At this time, the element X i in the node set V = {X 1 ,..., X p } has an individual attribute such as “age” and “gender”, “speaks together—not talks”, “sympathetic” —not considerate It is a random variable corresponding to a personality factor such as “like” and an interpersonal emotion factor such as “like-dislike” and “respect-contempt”.
またエッジ集合E={e(Xi,Xj)}中の要素e(Xi,Xj)は、XiからXjに何らかの影響があることを示す。例えば「話が合う−話が合わない」というパーソナリティ観因子Xiが「好き−嫌い」という対人感情因子Xjに影響するという事象に対応する。e(Xi,Xj)は無向でも有向でもよく、無向エッジであれば相関関係、有向エッジであれば因果関係を表す。e(Xi,Xj)が有向である時、XiをXjの親と呼ぶ。 The element e (X i , X j ) in the edge set E = {e (X i , X j )} indicates that X i has some influence on X j . For example, it corresponds to the phenomenon that the personality factor X i “speaks fits-not talks” affects the interpersonal emotion factor X j “likes-dislikes”. e (X i , X j ) may be undirected or directed, and represents a correlation if it is an undirected edge and a causal relationship if it is a directed edge. When e (X i , X j ) is directed, X i is called the parent of X j .
グラフG(V,E)の構造として有向非閉路グラフを仮定すればベイジアンネットワークモデル、無向グラフを仮定すれば一次マルコフモデルやファクターモデルとなる。以下、ベイジアンネットワークモデルB(G(V,E),θ)を仮定し、ノードXiの親集合をPaiとする。つまりE={e(Paij,xi)|Paij∈Pai,i=1,…,p)である。図10は、グラフィカルモデルの構造例、つまり各ノードXiに対する親集合Paiの構成例を示す説明図である。ノードは、ユーザの個人属性、評価対象の個人属性、ユーザのパーソナリティ観因子、対人感情因子の4種類からなる。 If a directed acyclic graph is assumed as the structure of the graph G (V, E), a Bayesian network model is assumed, and if an undirected graph is assumed, a linear Markov model or a factor model is obtained. Hereinafter, a Bayesian network model B (G (V, E), θ) is assumed, and a parent set of the node X i is Pa i . That is, E = {e (Pa ij , x i ) | Pa ij ∈ Pa i , i = 1,..., P). FIG. 10 is an explanatory diagram showing a structural example of the graphical model, that is, a configuration example of the parent set Pa i for each node X i . The node is composed of four types: a user personal attribute, an evaluation target personal attribute, a user personality factor, and an interpersonal emotion factor.
ユーザのパーソナリティ観因子は、ユーザの個人属性及び評価対象の個人属性に影響を受ける。また、ユーザのパーソナリティ観因子間にも因果もしくは共起関係が存在する。それらの心理因子は最終的に、「個人的親しみやすさ」、「社会的望ましさ」、「力本性」の3次元に集約される。そして、このパーソナリティ観モデルを元に対人感情が形成される。 The user's personality factor is influenced by the user's personal attributes and the personal attributes of the evaluation target. There is also a causal or co-occurrence relationship between the user's personality factors. Those psychological factors are finally summarized in the three dimensions of “personal friendliness”, “social desirability”, and “strength”. Interpersonal feelings are formed based on this personality model.
以上より、対人感情は、ユーザの個人属性及び評価対象の個人属性を最上層、ユーザのパーソナリティ観因子を中間層、対人感情因子を最下層とする層状の構造をとる。 As described above, the personal feeling has a layered structure in which the personal attribute of the user and the personal attribute to be evaluated are the top layer, the personality factor of the user is the middle layer, and the personal emotion factor is the bottom layer.
X1,…,Xpに対するn個の観測データD={x1,…,xn}が与えられたとき、ベイジアンネットワークモデルB(G(V,E),θ)の尤度L(B|D)は以下となる。
θの具体例として、例えば、すべての確率変数Xiが1≦Xi≦riの範囲の離散値であり、Xiの条件付き確率p(Xi|Pai)が多項分布に従うとする。また親の観測値ベクトルPaiがとりうるパターン数をqiとし、Paiがj番目のパターンをとった時にXi=kとなる確率をθijkとすると、θ={θijk}となる。またこの時、モデルの尤度l(B|D)は
学習部3は情報蓄積部2に蓄積された情報Dから、パラメータ(Pai,θ)を学習する。ここでユーザは個人属性、パーソナリティ観因子、対人感情因子のうち任意の項目に対して回答するため、蓄積データは相応の欠損を含む。データの欠損傾向はユーザが普段どのような観点のもとに他者を判断しているかに依存し、値の大小には関係しないため、その欠損傾向はMAR(Missing at Random)の性質を有する。情報Dの部分集合
この時、MARの仮定の下、尤度l(D|B)は以下のように書き直せる。
事前確率π(θ)には、多項分布の共役分布であるディリクレ分布を仮定する。
事後分布は尤度と事前確率の積で与えられる。すなわち、
ディリクレ分布は多変量に対するベータ分布であり、θijkの事前確率がそれぞれハイパーパラメータaijkによって規定されるベータ分布に従うと解釈でき、aijkに対して「どの個人属性や心理因子がともに回答されやすいか」という事前知識を入れ込むことができる。例えば、各項目に対して回答があった場合を1、回答がなかった場合を0とする行列を生成し、それに数量化III類等の手法を用いて各項目の成分スコアを算出する。そして同じ成分に対して、高い成分スコアを示す項目間に高い相関があるとみなし、高いaijkを与える。 Dirichlet distribution is a beta distribution for multivariate, the prior probability of θ ijk can be interpreted as follows the beta distribution, which is defined by hyper-parameters a ijk each, "Which personal attributes and psychological factors is likely to be both answer to a ijk Can put in prior knowledge. For example, a matrix is generated in which 1 is set when there is a response to each item and 0 is set when there is no response, and the component score of each item is calculated using a method such as quantification type III. For the same component, it is considered that there is a high correlation between items showing a high component score, and a high a ijk is given.
ここまでG(V,E)が既知であるとしてモデルを定式化したが、実際にはE、つまりそれぞれのXiに対する親集合Paiは一般に未知である。この学習アルゴリズムとして、以下の(1)、(2)のアルゴリズムを利用することができる。
(1)統計モデル選択問題と見做し、情報量規準、例えばBIC=−2logπ(D,θ|B)−|θ|log(n)を最小化するグラフ構造をボトムアップに探索する貪欲アルゴリズム
(2)グラフ理論的アプローチとして、IC(Inductive Causation)アルゴリズム(文献:黒木学、”統計的因果推論−モデル・推論・推測”、共立出版株式会社、2009年3月1日)、GS(Grow-Shrink)アルゴリズム(文献:D. Margaritis and S. Thrun. “Bayesian network induction via local neighborhoods." In S.A. Solla, T.K. Leen, and K.-R. Muller, editors, Proceedings of Conference on Neural Information Processing Systems (NIPS-12). MIT Press, 1999.)
G (V, E) were formulated the model as is known so far, but actually E, that is, the parent set Pa i for each X i is generally unknown. As the learning algorithm, the following algorithms (1) and (2) can be used.
(1) Greedy algorithm for bottom-up searching for a graph structure that minimizes an information criterion, for example, BIC = −2 logπ (D, θ | B) − | θ | log (n), considering a statistical model selection problem (2) As a graph-theoretic approach, IC (Inductive Causation) algorithm (reference: Manabu Kuroki, “Statistical causal reasoning-model, reasoning, guess”, Kyoritsu Publishing Co., Ltd., March 1, 2009), GS (Grow -Shrink) algorithm (literature: D. Margaritis and S. Thrun. “Bayesian network induction via local neighborhoods.” In SA Solla, TK Leen, and K.-R. Muller, editors, Proceedings of Conference on Neural Information Processing Systems ( NIPS-12). MIT Press, 1999.)
以下、(1)貪欲アルゴリズムについて説明する。まず、BICを以下のように変形し、BICiを得る。
ステップ1)任意の2つのノードの組(Xi,Xj)に対し、Pai=XiとしてBICiを計算する。上位のM個をXiの仮親集合CPiとする。
ステップ2)Pai=φ(空集合)とする。
ステップ3)すべてのノードXi(1≦i≦p)に対し、
ステップ3−1:すべてのノードCPij∈CPi(1≦j≦M)に対し、
(i)¬(CPij∈Pai)であれば、CPij∈Paiとする(append)。
(ii)CPij∈Paiであれば、¬(CPij∈Pai)とする(delete)。
(iii)¬(CPij∈Pai)かつXi∈Paiであれば、CPij∈Pai,¬(Xi∈Pai)とする(reverse)。
ステップ3−2:新しい親集合Paiに対し、^θijk(^はθijkの上に付く)を求め、BICiを算出する。
ステップ3−3:最良のスコア(最小のBICi)を与えた変更を採用し、Pajを更新する。
Step 1) For any two node pairs (X i , X j ), BIC i is calculated as Pa i = X i . The upper M pieces are assumed to be the temporary parent set CP i of X i .
Step 2) Set Pa i = φ (empty set).
Step 3) For all nodes Xi (1 ≦ i ≦ p)
Step 3-1: For all nodes CP ij εCP i (1 ≦ j ≦ M)
If (i) ¬ (CP ij ∈ Pa i ), then CP ij ∈ Pa i is set (append).
(Ii) If CP ij ∈ Pa i , set ¬ (CP ij ∈ Pa i ) (delete).
(Iii) If ¬ (CP ij ∈ Pa i ) and X i ∈ Pa i , then CP ij ∈ Pa i , ¬ (X i ∈ Pa i ) (reverse).
Step 3-2: For the new parent set Pa i , ^ θ ijk (^ is attached to θ ijk ) is obtained, and BIC i is calculated.
Step 3-3: Adopt the change that gave the best score (minimum BIC i ) and update Pa j .
学習部3は、上記の学習アルゴリズムに基づき、情報蓄積部2に蓄積された情報を利用して、各個人属性及び心理因子間の関係を学習し、パラメータPa,θを保存する。
Based on the learning algorithm described above, the
なお、情報蓄積部2には、予めアンケート調査などにより取得された情報が保存されるほか、ユーザが図1に示す対人感情推定装置を利用するごとに投入される情報が逐次蓄積される。学習部3は、管理者の指定するタイミングで、もしくはユーザからのフィードバックにより、それまでに蓄積された情報を用いてモデルを再学習する。
The
次に、図1に示す対人感情推定装置の動作を説明する。ユーザは入力部1を介して、自身と評価対象の個人属性、評価対象に対する各心理因子と対人感情の評点を入力する。個人属性については性別や年齢、職業、その他趣味嗜好やライフスタイルに関する情報を、提示された選択肢から選択する。パーソナリティ観因子と対人感情因子については前述の通り、五段階評価もしくは0〜1の連続値などで回答する。例えば、対象に対する「話が合う−合わない」は2、「恋人としての好き−嫌い」は5などである。この時すべての要素を入力する必要はなく、入力された因子が説明変数、入力されなかった因子が目的変数(推定対象)と解釈される。
Next, the operation of the human emotion estimation apparatus shown in FIG. 1 will be described. Through the
次に、推定部4は、情報蓄積部2に蓄積された情報と、学習部3により学習されたモデルを用い、入力が欠損していた因子の期待値を推定する。グラフ構造に閉路が存在しない場合、欠損因子の確率分布はsum−product法(文献:F. R. Kschischang, B. J. Frey, and H. A. Loeliger, "Factor Graphs and the Sum-Product Algorithm," IEEE Trans. on Information Theory, vol. 47, no. 2, pp.498-519, Feb. 2001.)などにより計算できる。閉路が存在する場合にも、Loopy belief propagation(文献:K. P. Murphy, Y. Weiss, M. I. Jordan, “Loopy Belief Propagation for Approximate Inference: An Empirical Study," Proceedings of Uncertainty in AI, pp. 467-475, 1999)などを利用することで、多くの場合近似的に解を求めることができる。
Next, the estimation unit 4 uses the information stored in the
以下、Loopy belief propagationによる期待値の算出について説明する。あるノードXiの親集合をPai、子集合をChiとする。ベイジアンネットワークの定義より、Paiの取りうる確率がわかれば期待値^paij(^はpaijの上に付く)を求めることができ、Xiの条件付き確率p(xij|paij)を求めることができる。ここで、親Paijがaとなる確率を、親Paijから子Xiへのメッセージと定義し、πj(a)で表すこととする。また逆に、子Xiがaである時に、親Paijへ送られるメッセージをλj(a)とする。この時、
Loopy belief propagationはこれをすべてのノードXiの周辺に対して順次適応し、収束するまで確率値を更新し、全ノードXiに対する条件付き確率p(xij|paij)を得る。 Loopy belief propagation is successively adapt it to the peripheral for all nodes X i, and updates the probability value to converge, the conditional probability p for all the nodes X i | obtain (x ij pa ij).
次に、情報提示部5は、学習されたグラフ構造及び推定された欠損因子の期待値を表示装置等に提示する。これにより、ユーザは評価対象に対してどのような感情を抱き、かつその感情がどのような評価因子に基づくものなのかを知ることができる。情報提示部5においてはすべての因子に対する結果を示す必要はなく、期待値が所定の閾値以上の因子のみを抽出し、その間のエッジのみを可視化することで、強い影響を与えると推定された因子集合とその間の関係のみを提示することができる。またユーザはこの閾値を調節し、結果をさまざまなレベルで閲覧することが可能である。
Next, the
次に、図12を参照して、図1に示す対人感情推定装置の変形例を説明する。図12は、図1に示す対人感情推定装置の変形例の構成を示すブロック図である。この図において、図1に示す装置と同一の部分には同一の符号を付し、その説明を省略する。この図に示す装置が図1に示す装置と異なる点は、新たにアカウント管理部6、個人学習部7が設けられている点である。図12に示す対人感情推定装置は、情報提示部5に提示された結果がユーザ自身の判断に合わない場合、ユーザは入力部1を介して情報入力を行い、この入力情報に基づきフィードバックを行うものである。
Next, with reference to FIG. 12, the modification of the interpersonal emotion estimation apparatus shown in FIG. 1 is demonstrated. 12 is a block diagram showing a configuration of a modification of the interpersonal emotion estimation apparatus shown in FIG. In this figure, the same parts as those in the apparatus shown in FIG. The apparatus shown in this figure is different from the apparatus shown in FIG. 1 in that an account management unit 6 and a personal learning unit 7 are newly provided. In the interpersonal emotion estimation apparatus shown in FIG. 12, when the result presented to the
次に、図13を参照して、図12に示す対人感情推定装置の運用前の処理動作を説明する。図13は、図12に示す対人感情推定装置の運用前の処理動作を示すフローチャートである。まずユーザは、入力部1を介して、情報蓄積部2に対して、事前に収集したデータを蓄積する(ステップS1)。これを受けて、学習部3は、情報蓄積部2に蓄積されたデータからパラメータを学習し、汎的なモデルを得る(ステップS2)。
Next, with reference to FIG. 13, the processing operation before operation of the human emotion estimation apparatus shown in FIG. 12 will be described. FIG. 13 is a flowchart showing a processing operation before operation of the human emotion estimation apparatus shown in FIG. First, the user accumulates data collected in advance in the
次に、図14を参照して、図12に示すアカウント管理部6の処理動作を説明する。図14は、図12に示すアカウント管理部6の処理動作を示すフローチャートである。まず、ユーザは、入力部を介して新規のアカウントを作成し、個人情報を登録する。そして、アカウント管理部6は、登録されたアカウントに対し、学習部3で生成された汎的なパラメータを割り当てる(ステップS12)。
Next, the processing operation of the account management unit 6 shown in FIG. 12 will be described with reference to FIG. FIG. 14 is a flowchart showing the processing operation of the account management unit 6 shown in FIG. First, the user creates a new account via the input unit and registers personal information. Then, the account management unit 6 assigns general parameters generated by the
次に、図15を参照して、図12に示す対人感情推定装置が対人感情診断を行う処理動作を説明する。図15は、図12に示す対人感情推定装置が対人感情診断を行う処理動作を示すフローチャートである。まず、ユーザは、入力部1を介して、診断対象の個人情報や、特性語に対する評価、自身が現在抱く感情のうち、任意の項目を入力する(ステップS21)。続いて、推定部4は入力のなかった属性に対する推定値を算出し、それぞれの属性の期待値を、情報提示部5を通してユーザに通知する(ステップS22)。ユーザは、診断結果に対して、納得できるか、違和感を感じるかを判定する(ステップS23)。この判定の結果、診断結果に違和感を感じる場合、ユーザは入力部1を介して、誤った診断結果に対する正しい値をフィードバックする(ステップS24)。これを受けて、個人性学習部7はユーザからのフィードバックを受けて、局所的に新しいモデル構造及びパラメータを学習し、保存する(ステップS25)。 Next, with reference to FIG. 15, the processing operation in which the human emotion estimation apparatus shown in FIG. 12 performs human emotion diagnosis will be described. FIG. 15 is a flowchart showing a processing operation in which the human emotion estimation apparatus shown in FIG. First, the user inputs arbitrary items among personal information to be diagnosed, evaluation of characteristic words, and emotions he / she currently has via the input unit 1 (step S21). Subsequently, the estimating unit 4 calculates an estimated value for the attribute that has not been input, and notifies the user of the expected value of each attribute through the information presenting unit 5 (step S22). The user determines whether the diagnosis result is satisfactory or feels uncomfortable (step S23). As a result of this determination, if the user feels uncomfortable with the diagnosis result, the user feeds back a correct value for the wrong diagnosis result via the input unit 1 (step S24). In response to this, the personality learning unit 7 receives the feedback from the user, locally learns and stores the new model structure and parameters (step S25).
このように、フィードバックは因子に対する評点(数値)として与えられる。例えば、ある入力を受け、ユーザから評価対象への「誠実な−不誠実な」という因子に対する評点を1と推定したとする。ユーザはこの結果を見て、この値が不正確だと感じた場合に、正しい評点(例えば3など)を入力する。個人性学習部7は入力された情報を元に、その因子の周辺のエッジの重みを再学習し、ユーザのアカウントに紐づけて保持する。これにより、ユーザ毎に適応したエッジの重み集合が学習され、ユーザの個人性を反映した推定を行うことができる。また学習されたエッジの重みを可視化してユーザに提示することで、ユーザは自身が日ごろどのような軸で他者を評価するのかを知ることができる。 Thus, feedback is given as a score (numerical value) for a factor. For example, when a certain input is received, the score for a factor of “sincere-unfaithful” from the user to the evaluation target is estimated as 1. If the user sees this result and feels that this value is inaccurate, the user inputs a correct score (for example, 3). Based on the input information, the personality learning unit 7 re-learns the weights of the edges around the factor, and holds them associated with the user account. Thereby, an edge weight set adapted for each user is learned, and estimation reflecting the individuality of the user can be performed. Also, by visualizing the learned edge weights and presenting them to the user, the user can know what axis he / she evaluates on a daily basis.
以上説明したように、個人属性、対人評価因子、及び対人感情因子のそれぞれを確率変数とし、この確率変数をノードで表現し、確率変数間の関係をエッジで表現したグラフ(図10)を、ユーザとその評価対象の個人属性(図8)、及びユーザによる評価対象に対する心理因子(図2〜図7)と対人感情(図9)の評点を用いた学習によって生成するようにした。そして、学習によって得られたグラフに対して、入力された個人属性、及び心理因子と対人感情の評点を説明変数とし、入力されなかった個人属性、及び心理因子と対人感情の評点を推定対象である目的変数として、この目的変数の期待値を算出して提示することができる。これにより、人が他者を評価する尺度となる暗黙のパーソナリティ観を構成する心理因子を可視化し、人が指定の他者に対してどのような感情をなぜ抱くのかを提供することが可能になる。 As described above, each of the personal attribute, the interpersonal evaluation factor, and the interpersonal emotion factor is a random variable, the random variable is represented by a node, and the relationship between the random variables is represented by an edge (FIG. 10). It is generated by learning using the user and the personal attributes of the evaluation target (FIG. 8), and the psychological factors (FIGS. 2 to 7) and the personal feelings (FIG. 9) for the evaluation target by the user. Then, for the graph obtained by learning, the input personal attributes and the scores of psychological factors and interpersonal feelings are used as explanatory variables, and the personal attributes that were not input and the scores of psychological factors and interpersonal emotions are estimated. As an objective variable, an expected value of the objective variable can be calculated and presented. This makes it possible to visualize the psychological factors that make up the implied personality view, which is a measure by which a person evaluates others, and to provide what emotions a person has and why Become.
また、新規ユーザに対してはそれまで情報蓄積部2に蓄積された他の全ユーザの入力情報を用いて学習部3により学習された汎的なモデルを利用することができ、さらにユーザの入力に合わせて適応的な学習を行い、ユーザの個人性を反映したモデルを生成することができる。また、ユーザは自身の個人情報、相手の情報、相手に対する対人評価と対人感情を入力する際に、全ての情報を入力する必要はない。本実施形態による対人感情推定装置はユーザが入力しなかった情報を推定部4により推定し、情報提示部5を用いてユーザに提示することができる。ユーザは提示された情報を確認し、必要であれば入力部1を介して修正を行うことにより、ユーザからのフィードバックを用いて再学習を行い、モデルを更新することができる。
For new users, the general model learned by the
なお、図1、図12における処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより対人感情推定処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。 The program for realizing the functions of the processing units in FIGS. 1 and 12 is recorded on a computer-readable recording medium, and the program recorded on the recording medium is read into a computer system and executed. Emotion estimation processing may be performed. Here, the “computer system” includes an OS and hardware such as peripheral devices. The “computer system” includes a WWW system having a homepage providing environment (or display environment). The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Further, the “computer-readable recording medium” refers to a volatile memory (RAM) in a computer system that becomes a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. In addition, those holding programs for a certain period of time are also included.
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。 The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.
以上、図面を参照して本発明の実施の形態を説明してきたが、上記実施の形態は本発明の例示に過ぎず、本発明が上記実施の形態に限定されるものではないことは明らかである。したがって、本発明の技術思想及び範囲を逸脱しない範囲で構成要素の追加、省略、置換、その他の変更を行っても良い。 As mentioned above, although embodiment of this invention has been described with reference to drawings, the said embodiment is only the illustration of this invention, and it is clear that this invention is not limited to the said embodiment. is there. Accordingly, additions, omissions, substitutions, and other changes of the components may be made without departing from the technical idea and scope of the present invention.
人が他者をどのような基準で評価し、またどのような印象や感情を抱いているかを推定し、その結果を提示することが不可欠な用途にも適用できる。 It is also applicable to uses where it is indispensable to estimate what kind of criteria a person evaluates others, what kind of impression or emotion they have, and present the results.
1・・・入力部、2・・・情報蓄積部、3・・・学習部、4・・・推定部、5・・・情報提示部、6・・・アカウント管理部、7・・・個人性学習部
DESCRIPTION OF
Claims (5)
前記入力手段により入力した情報を蓄積する情報蓄積手段と、
前記ユーザのアカウント情報を管理するアカウント管理手段と、
前記情報蓄積手段に蓄積された情報の関連性を学習した学習モデルを生成する学習手段と、
前記学習手段により生成された前記学習モデルを利用して、前記入力手段からの入力が欠損していた因子の評点情報の期待値を推定する推定手段と、
前記推定した結果の情報を提示する情報提示手段と、
前記推定した結果に対して前記ユーザからフィードバックされた情報を前記入力手段により入力し、前記ユーザ毎の前記学習モデルを再構築して、前記アカウント情報と関係付けることにより、前記ユーザに適応した前記学習モデルを生成する個人性学習手段と
を備えることを特徴とする対人感情推定装置。 Input means for inputting personal attribute information of the user, personal attribute information of the evaluation target, score information of the psychological factor for the evaluation target, and score information of the interpersonal emotion factor,
Information storage means for storing information input by the input means;
Account management means for managing the account information of the user;
Learning means for generating a learning model learning the relevance of the information stored in the information storage means;
Using the learning model generated by the learning means, an estimation means for estimating an expected value of the score information of a factor for which an input from the input means is missing;
Information presenting means for presenting information of the estimated result ;
The information fed back from the user with respect to the estimated result is input by the input means, the learning model for each user is reconstructed, and related to the account information, thereby being adapted to the user. An interpersonal emotion estimation device comprising personality learning means for generating a learning model .
前記個人属性情報、前記評価対象に対する心理因子及び前記対人感情因子の各因子間の関係を有向もしくは無向グラフの形で可視化して提示することにより、前記学習モデルの情報の提示をさらに行うことを特徴とする請求項1に記載の対人感情推定装置。 The information presenting means includes
Further presenting the information of the learning model by visualizing and presenting the relationship between each factor of the personal attribute information, the psychological factor for the evaluation object and the interpersonal emotion factor in the form of a directed or undirected graph The interpersonal emotion estimation apparatus according to claim 1 .
前記情報蓄積手段に蓄積された情報の関連性を学習した学習モデルを生成する学習ステップと、
前記学習ステップにより生成された前記学習モデルを利用して、前記入力手段からの入力が欠損していた因子の評点情報の期待値を推定する推定ステップと、
前記推定した結果の情報を提示する情報提示ステップと、
前記推定した結果に対して前記ユーザからフィードバックされた情報を前記入力手段により入力し、前記ユーザ毎の前記学習モデルを再構築して、前記アカウント情報と関係付けることにより、前記ユーザに適応した前記学習モデルを生成する個人性学習ステップと
を有することを特徴とする対人感情推定方法。 Input means for inputting personal attribute information of a user, personal attribute information to be evaluated, psychological factor score information for the evaluation target, and personal emotion factor score information, and storing information input by the input means An interpersonal emotion estimation method performed by an interpersonal emotion estimation device comprising information storage means and account management means for managing account information of the user ,
A learning step for generating a learning model that learns the relevance of information stored in the information storage means;
Using the learning model generated by the learning step, an estimation step for estimating an expected value of the score information of the factor for which the input from the input means is missing,
An information presentation step for presenting information of the estimated result ;
The information fed back from the user with respect to the estimated result is input by the input means, the learning model for each user is reconstructed, and related to the account information, thereby being adapted to the user. An interpersonal emotion estimation method comprising: a personality learning step for generating a learning model .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012189878A JP5875005B2 (en) | 2012-08-30 | 2012-08-30 | Human emotion estimation device, human emotion estimation method, and human emotion estimation program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012189878A JP5875005B2 (en) | 2012-08-30 | 2012-08-30 | Human emotion estimation device, human emotion estimation method, and human emotion estimation program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014048795A JP2014048795A (en) | 2014-03-17 |
JP5875005B2 true JP5875005B2 (en) | 2016-03-02 |
Family
ID=50608439
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012189878A Active JP5875005B2 (en) | 2012-08-30 | 2012-08-30 | Human emotion estimation device, human emotion estimation method, and human emotion estimation program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5875005B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6605410B2 (en) * | 2016-07-15 | 2019-11-13 | Kddi株式会社 | Emotion factor estimation support device, emotion factor estimation support method, and emotion factor estimation support program |
JP6970641B2 (en) * | 2018-04-25 | 2021-11-24 | Kddi株式会社 | Emotion Guessing Method, Emotion Guessing Device and Program |
JP7411977B2 (en) * | 2019-07-05 | 2024-01-12 | 国立研究開発法人物質・材料研究機構 | Machine learning support method and machine learning support device |
JP7491403B2 (en) | 2020-11-25 | 2024-05-28 | 日本電気株式会社 | Information processing device, information processing method, and program |
-
2012
- 2012-08-30 JP JP2012189878A patent/JP5875005B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014048795A (en) | 2014-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Gayathri et al. | Probabilistic ontology based activity recognition in smart homes using Markov Logic Network | |
Iannario et al. | A generalized framework for modelling ordinal data | |
JP5875005B2 (en) | Human emotion estimation device, human emotion estimation method, and human emotion estimation program | |
CN110704692A (en) | Employee job leaving behavior prediction method and device based on graph embedding | |
Lee et al. | FML-based reinforcement learning agent with fuzzy ontology for human-robot cooperative edutainment | |
Ares et al. | A soft computing framework for classifying time series based on fuzzy sets of events | |
Filipovic et al. | An application of artificial intelligence for detecting emotions in neuromarketing | |
Kukkar et al. | A novel methodology using RNN+ LSTM+ ML for predicting student’s academic performance | |
Tegen et al. | Activity recognition through interactive machine learning in a dynamic sensor setting | |
Younis et al. | Machine learning for human emotion recognition: a comprehensive review | |
Benabbes et al. | A new hybrid approach to detect and track learner’s engagement in e-learning | |
Puerto et al. | A recursive patterns matching model for the dynamic pattern recognition problem | |
Wang et al. | Modeling Latent Comorbidity for Health Risk Prediction Using Graph Convolutional Network. | |
Chapsky | Leveraging online social networks and external data sources to predict personality | |
Marchezini et al. | Counterfactual inference with latent variable and its application in mental health care | |
Hao et al. | Modeling social learning on consumers’ long-term usage of a mobile technology: a Bayesian estimation of a Bayesian learning model | |
Lewis et al. | Shaping habit formation insights with Shapley values: Towards an explainable AI-system for self-understanding and health behavior change | |
de Campos et al. | Group recommending: A methodological approach based on bayesian networks | |
Zawadzka et al. | Ontological model for contextual data defining time series for emotion recognition and analysis | |
Fofanah et al. | Adaptive neuro-fuzzy inference system with non-linear regression model for online learning framework | |
JP7464346B2 (en) | Object attribute expression generation model capable of generating object attribute expressions, object attribute estimation device and method | |
CN119049734B (en) | Psychological disease early warning system and method | |
JP7495363B2 (en) | Personality information generation model, device and method using domain-independent RNN | |
Muklason et al. | Android-Based Chatbot Application Using Back Propagation Neural Network to Help the First Treatment of Children’s Diseases | |
Fujita et al. | Virtual doctor system (VDS): Aspects on reasoning issues |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140710 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20140710 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160108 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5875005 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |