JP7036149B2 - 情報処理システム、および制御方法 - Google Patents
情報処理システム、および制御方法 Download PDFInfo
- Publication number
- JP7036149B2 JP7036149B2 JP2020098003A JP2020098003A JP7036149B2 JP 7036149 B2 JP7036149 B2 JP 7036149B2 JP 2020098003 A JP2020098003 A JP 2020098003A JP 2020098003 A JP2020098003 A JP 2020098003A JP 7036149 B2 JP7036149 B2 JP 7036149B2
- Authority
- JP
- Japan
- Prior art keywords
- interaction
- value
- server
- information
- evaluation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 51
- 238000000034 method Methods 0.000 title claims description 24
- 230000003993 interaction Effects 0.000 claims description 231
- 230000035945 sensitivity Effects 0.000 claims description 111
- 238000011156 evaluation Methods 0.000 claims description 105
- 238000004891 communication Methods 0.000 claims description 59
- 238000012545 processing Methods 0.000 claims description 23
- 238000004364 calculation method Methods 0.000 description 65
- 230000008921 facial expression Effects 0.000 description 40
- 241001465754 Metazoa Species 0.000 description 30
- 230000000694 effects Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 16
- 230000004044 response Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000000605 extraction Methods 0.000 description 7
- 238000007726 management method Methods 0.000 description 7
- 230000006399 behavior Effects 0.000 description 5
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000007935 neutral effect Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- JYGXADMDTFJGBT-VWUMJDOOSA-N hydrocortisone Chemical compound O=C1CC[C@]2(C)[C@H]3[C@@H](O)C[C@](C)([C@@](CC4)(O)C(=O)CO)[C@@H]4[C@@H]3CCC2=C1 JYGXADMDTFJGBT-VWUMJDOOSA-N 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000036039 immunity Effects 0.000 description 2
- 230000004630 mental health Effects 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 235000006481 Colocasia esculenta Nutrition 0.000 description 1
- 240000004270 Colocasia esculenta var. antiquorum Species 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000035622 drinking Effects 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 239000003344 environmental pollutant Substances 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 229960000890 hydrocortisone Drugs 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 231100000719 pollutant Toxicity 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000036642 wellbeing Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
- G06Q30/0236—Incentive or reward received by requiring registration or ID from user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/08—Insurance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/03—Credit; Loans; Processing thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Entrepreneurship & Innovation (AREA)
- Technology Law (AREA)
- Tourism & Hospitality (AREA)
- Game Theory and Decision Science (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- User Interface Of Digital Computer (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Description
なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
1.本開示の一実施形態による情報処理システムの概要
2.基本構成
2-1.センシングデバイス
2-2.感性サーバ
2-3.バイアス算出サーバ
3.各実施形態
3-1.第1の実施形態
3-2.第2の実施形態
3-3.第3の実施形態
4.まとめ
まず、本開示の一実施形態による情報処理システムの概要について説明する。本実施形態による情報処理システムは、ユーザの人または物との間のインタラクションのうち、ポジティブなインタラクションに特化し、ユーザが当該ポジティブなインタラクションを行ったまたは受けたことに基づいて、ユーザの感性値(ポジティブ感性値とも称す)を生成する。感性値は、その人物(または物)が抱く(或いは抱かれた)気持ち(すなわち感情)の価値を数値化して示した指標であって、例えばポジティブなインタラクションをより多く行っている人物や、ポジティブなインタラクションをより多く受けている人物の感性価値は高くなる。
<2-1.センシングデバイス>
図3は、本実施形態によるセンシングデバイス2の構成の一例を示す図である。図3に示すように、センシングデバイス2は、センサ21、インタラクション抽出部22、および通信部23を有する。
センサ21は、オブジェクト間のインタラクションを検知する機能を有する。センサ21は、例えばカメラ、赤外線センサ、マイクロホン、湿度センサ、温度センサ、振動センサ、触覚センサ、ジャイロセンサ、加速度センサ、照度センサ、人感センサ、大気センサ(具体的に埃センサ、汚染物質センサ)、速度センサ、回数計測値等により実現される。
インタラクション抽出部22は、センサ21から出力されたセンシングデータを解析して、第1のオブジェクトと、第2のオブジェクトとの間のインタラクションに関連する情報を検出する検出部として機能する。例えば、インタラクション抽出部22は、人と人とのインタラクション(笑顔、会話、贈与等)や、人と物とのインタラクション(物に向けた表情、物の手入れ、物の扱い等)を具体的に抽出する。また、インタラクション抽出部22は、抽出したインタラクション情報を、第1のオブジェクトのIDおよび第2のオブジェクトのIDと関連付けて、通信部23から感性サーバ3に送信するよう制御する制御部としても機能する。
通信部23は、インタラクション抽出部22により抽出されたインタラクションに関連する情報を、ネットワーク5を介して感性サーバ3に送信する。
図5は、本実施形態による感性サーバ3の構成の一例を示す図である。図5に示すように、感性サーバ3は、制御部30、通信部31、オブジェクトDB(データベース)32、および感性情報DB33を有する。
制御部30は、CPU、ROM、RAM、および不揮発性メモリを備えたマイクロコンピュータにより構成され、感性サーバ3の各構成を制御する。また、制御部30は、図5に示すように、インタラクション記憶制御部30a、評価部30b、オブジェクト管理部30c、関連オブジェクト検索部30d、および感性値算出部30eとして機能する。
通信部31は、ネットワーク5を介して、センシングデバイス2からインタラクション情報を受信したり、バイアス算出サーバ4からの感性値取得要求を受信したりする。また、通信部31は、バイアス算出サーバ4からの感性値取得要求に応じて、感性値算出部30eにより算出されたポジティブインタラクション評価値に基づく感性値を返信する。
オブジェクトDB32は、各オブジェクト(人間および物を含む)のオブジェクトIDに紐付けて、各オブジェクトの付属情報、例えば名称(氏名、商品名)、種類(性別、カテゴリ)、識別情報(顔画像、生体情報、シリアル番号、型番、メーカーID)等を格納する。
感性情報DB33は、感性値の算出に用いられる、オブジェクト間のインタラクションに関する情報(インタラクション情報)を格納する。ここで、図6にインタラクション情報の一例を示す。図6は、本実施形態による感性情報DB33に格納されるインタラクション情報の一例を示す図である。
図7は、本実施形態によるバイアス算出サーバ4の構成の一例を示す図である。図7に示すように、バイアス算出サーバ4は、制御部40、通信部41、および記憶部42を有する。
制御部40は、CPU、ROM、RAM、および不揮発性メモリを備えたマイクロコンピュータにより構成され、バイアス算出サーバ4の各構成を制御する。また、制御部40は、図7に示すように、感性値取得部40a、バイアス算出部40b、および通知部40cとして機能する。
通信部41は、ネットワーク5を介して、感性サーバ3からポジティブなインタラクションの感性値を受信する。また、通信部41は、通知部40cの制御に従って、算出されたポジティブなインタラクションのバイアス値を、他の人物に出力して利用するクラウドサーバまたはアプリケーションに送信する。
記憶部42は、制御部40が各処理を実行するためのプログラムや、各処理を実行するために必要なパラメータを格納する。また、記憶部42は、算出されたバイアス値を一時的に記憶していてもよい。
以上、本開示の一実施形態による情報処理システムの概要と全体構成、および情報処理システムに含まれる各装置の構成について説明した。上述したポジティブなインタラクションの感性値やバイアス値は、様々なサービスや制御に利用され、最終的には社会全体の幸福度を向上させる。ここで、ポジティブなインタラクションのバイアス値等の利用に関し、複数の実施形態を一例として挙げて説明する。
第1の実施形態は、対象人物と他の人物双方の笑顔を支援することが可能な双方向笑顔支援システムに関する。双方向笑顔支援システムは、対象人物の蓄積されたポジティブなインタラクションに基づくバイアス値やリアルタイムのポジティブなインタラクションに基づく感性値に応じて他の人物が所有するぬいぐるみや人形の表情を制御する。以下、本システムの概要について図8を参照して説明する。
図8は、第1の実施形態による双方向笑顔支援システムの概要について説明する図である。本実施形態による双方向笑顔支援システムは、例えば図8に示すように、例えばオフィスに居る父親(オブジェクト1A)と、家に居る娘(オブジェクト1F)の笑顔を支援する。具体的には、例えばオフィスに居る父親が笑顔や「ありがとう」といった感謝の言葉を発した場合、これらのポジティブインタラクションが、周囲のオブジェクト1C、1D、1E等により検出され、感性サーバ3に送信される。ここで、オブジェクト1Cは例えば机上のPC(パーソナルコンピュータ)であって、オブジェクト1Dは机上の人形であって、オブジェクト1Eは椅子である。また、父親(オブジェクト1A)のインタラクションを受けるオブジェクトは、オフィスに居る他の人物(不図示)であってもよく、この場合は当該人物に装着されたセンシングデバイス2により「笑顔」等のインタラクションが検出され、感性サーバ3に送信される。
ここで、ぬいぐるみ(オブジェクト1E)や人形(オブジェクト1D)等の、ポジティブインタラクションをフィードバックするオブジェクト1に関し、図9を参照して具体的に説明する。
続いて、本実施形態による双方向笑顔支援システムの動作処理について、図10~図12を参照して具体的に説明する。
次に、本開示の第2の実施形態について図15~図16を参照して説明する。第2の実施形態は、笑顔に応じて保険料を変化させる保険料設定システムに関する。本システムでは、笑顔や笑いが多いと免疫力が上がるといった健康への寄与を考慮して、日頃からよく笑い幸福感を感じている人ほど病気にかかり難いと推定し、そのような人物に対しては保険料を安くする。これにより各人は、保険料を安くするためにも笑顔で過ごすよう心掛けるため、笑顔や笑いが増えて、社会全体の幸福度が向上する。以下、本システムの概要について図15を参照して説明する。
図15は、第2の実施形態による保険料設定システムの概要について説明する図である。図15に示すように、保険料設定システムは、感性サーバ3と、バイアス算出サーバ4と、保険システムサーバ6を含む。
続いて、本実施形態による動作処理について図16を参照して説明する。図16は、第2の実施形態による保険料設定システムの動作処理を示すフローチャートである。
続いて、本開示による第3の実施形態について図17~図22を参照して説明する。第3の実施形態は、ポジティブなインタラクションに特化して算出された感性値を、結婚相手のマッチングを行う婚活(結婚活動の略)システムサーバに提供する婚活システムである。以下、本システムの概要について図17を参照して説明する。
図17は、第3の実施形態による婚活システムの概要について説明する図である。図17に示すように、婚活システムは、感性サーバ3、評価サーバ7、および婚活システムサーバ8を含む。
次に、本システムに含まれる評価サーバ7の構成について図18を参照して説明する。図18は、第3の実施形態による評価サーバ7の構成の一例を示す図である。図18に示すように、評価サーバ7は、制御部70、通信部71、および記憶部72を有する。
制御部70は、CPU、ROM、RAM、および不揮発性メモリを備えたマイクロコンピュータにより構成され、評価サーバ7の各構成を制御する。また、制御部70は、図18に示すように、インタラクション取得部70a、スコア算出部70b、評価画面生成部70c、および通知部70dとして機能する。
通信部71は、ネットワーク5を介して、感性サーバ3からポジティブなインタラクションの感性値を受信する。また、通信部71は、通知部70dの制御に従って、生成された評価画面を婚活システムサーバ8に送信する。
記憶部72は、制御部70が各処理を実行するためのプログラムや、各処理を実行するために必要なパラメータを格納する。また、記憶部72は、算出された評価スコアや、生成された評価画面を一時的に記憶していてもよい。
続いて、本実施形態による動作処理について図19を参照して説明する。図19は、本実施形態による婚活システムの動作処理を示すフローチャートである。
上述したように、本開示の実施形態による情報処理システムでは、人と人または物間におけるポジティブなインタラクションを感性値として生成することを可能とする。
(1)
第1のオブジェクトが第2のオブジェクトに表出したポジティブなインタラクションに関連する情報と、当該第2のオブジェクトが当該第1のオブジェクトに表出したポジティブなインタラクションに関連する情報を受信する通信部と、
前記受信したポジティブなインタラクションに関連する情報の少なくとも一部に基づいて、前記第1のオブジェクトの感性値を生成する制御部と、
を備える、情報処理システム。
(2)
前記受信したポジティブなインタラクションに関連する情報は、前記第1のオブジェクトに関連付けて記憶部に記憶され、
前記通信部は、前記記憶部に記憶されるポジティブなインタラクションに関連する情報に基づいて生成された前記第1のオブジェクトの感性値を、第3のオブジェクトに送信する、前記(1)に記載の情報処理システム。
(3)
前記通信部は、前記第1のオブジェクトが現在表出しているポジティブなインタラクションに関連する情報を、実時間で前記第3のオブジェクトに送信する、前記(2)に記載の情報処理システム。
(4)
前記通信部は、前記第3のオブジェクトのインタラクションに関連する情報を受信すると共に、実時間で前記第1のオブジェクトが現在視認可能で前記インタラクションに関連する情報を表出可能な第4のオブジェクトに送信する、前記(2)または(3)に記載の情報処理システム。
(5)
前記受信したポジティブなインタラクションに関連する情報は、前記第1のオブジェクトに関連付けて記憶部に記憶され、
前記制御部は、前記第1のオブジェクトである人物が加入する保険料の改定タイミング、若しくは当該保険料を管理する保険管理サーバからの要求に応じて、前記記憶部に記憶されるポジティブなインタラクションに関連する情報に基づき生成された前記第1のオブジェクトの感性値を生成し、
前記通信部は、前記感性値を保険管理サーバに送信する、前記(1)に記載の情報処理システム。
(6)
前記受信されたポジティブなインタラクションに関連する情報は、前記第1のオブジェクトに関連付けて記憶部に記憶され、
前記制御部は、前記第1のオブジェクトである人物が加入する保険料の改定タイミング、若しくは当該保険料を管理する保険管理サーバからの要求に応じて、前記記憶部に記憶されるネガティブなインタラクションに関連する情報に基づき生成された前記第1のオブジェクトの感性値を生成し、
前記通信部は、前記感性値を保険管理サーバに送信する、前記(1)に記載の情報処理システム。
(7)
前記受信されたポジティブなインタラクションに関連する情報は、前記第1のオブジェクトに関連付けて記憶部に記憶され、
前記制御部は、所定の情報処理装置から、前記第1のオブジェクトに対する評価要求を、前記通信部を介して受信すると、前記記憶部に記憶されるポジティブなインタラクションに関連する情報に基づいて評価チャートを生成し、
前記通信部は、前記評価チャートを前記所定の情報処理装置に送信する、前記(1)に記載の情報処理システム。
(8)
前記評価チャート、グラフである、前記(7)に記載の情報処理システム。
(9)
本通信デバイスが取り付けられている第1のオブジェクトに対面する第2のオブジェクトの表情を撮像するための撮像部と、
前記第2のオブジェクトの音声を収音するための指向性収音部と、
前記第1のオブジェクトの識別情報を送信すると共に、前記第2のオブジェクトの識別情報を受信する通信部と、
前記撮像部により撮像された画像、または前記指向性収音部により収音された音声を、前記第1のオブジェクトの識別情報および前記第2のオブジェクトの識別情報に関連付けて、オブジェクトのインタラクションに関連する情報を当該オブジェクトの識別情報に関連付けて記憶する記憶部を有するサーバに、前記通信部を介して送信する制御部と、
を備える、通信デバイス。
(10)
本通信デバイスが取り付けられている第1のオブジェクトの表情と、当該第1のオブジェクトに対面する第2のオブジェクトの表情を撮像するための撮像部と、
前記第1のオブジェクトの音声と、前記第2のオブジェクトの音声を収音するための収音部と、
前記撮像部と前記収音部により取得された第1のオブジェクトの画像と音声、および第2のオブジェクトの画像と音声を、前記第1のオブジェクトの識別情報に関連付けて、オブジェクトのインタラクションに関連する情報を当該オブジェクトの識別情報に関連付けて記憶する記憶部を有するサーバに、通信部を介して送信する制御部と、
を備える、通信デバイス。
(11)
第1のオブジェクトが第2のオブジェクトに表出したポジティブなインタラクションに関連する情報と、当該第2のオブジェクトが当該第1のオブジェクトに表出したポジティブなインタラクションに関連する情報を受信することと、
前記受信したポジティブなインタラクションに関連する情報の少なくとも一部に基づいて、前記第1のオブジェクトの感性値を制御部により生成することと、
を含む、制御方法。
(12)
コンピュータを、
通信デバイスが取り付けられている第1のオブジェクトに対面する第2のオブジェクトの表情を撮像するための撮像部と、
前記第2のオブジェクトの音声を収音するための指向性収音部と、
前記第1のオブジェクトの識別情報を送信すると共に、前記第2のオブジェクトの識別情報を受信する通信部と、
前記撮像部により撮像された画像、または前記指向性収音部により収音された音声を、前記第1のオブジェクトの識別情報および前記第2のオブジェクトの識別情報に関連付けて、オブジェクトのインタラクションに関連する情報を当該オブジェクトの識別情報に関連付けて記憶する記憶部を有するサーバに、前記通信部を介して送信する制御部と、
として機能させるプログラムが記憶された、記憶媒体。
(13)
コンピュータを、
通信デバイスが取り付けられている第1のオブジェクトの表情と、当該第1のオブジェクトに対面する第2のオブジェクトの表情を撮像するための撮像部と、
前記第1のオブジェクトの音声と、前記第2のオブジェクトの音声を収音するための収音部と、
前記撮像部と前記収音部により取得された第1のオブジェクトの画像と音声、および第2のオブジェクトの画像と音声を、前記第1のオブジェクトの識別情報に関連付けて、オブジェクトのインタラクションに関連する情報を当該オブジェクトの識別情報に関連付けて記憶する記憶部を有するサーバに、通信部を介して送信する制御部と、
として機能させるためのプログラムが記憶された、記憶媒体。
2 センシングデバイス
21 センサ
22 インタラクション抽出部
23 通信部
3 感性サーバ
30 制御部
30a インタラクション記憶制御部
30b 評価部
30c オブジェクト管理部
30d 関連オブジェクト検索部
30e 感性値算出部
31 通信部
32 オブジェクトDB
33 感性情報DB
4 バイアス算出サーバ
40 制御部
40a 感性値取得部
40b バイアス算出部
40c 通知部
41 通信部
42 記憶部
5 ネットワーク
6 保険システムサーバ
7 評価サーバ
70 制御部
70a インタラクション取得部
70b スコア算出部
70c 評価画面生成部
70d 通知部
71 通信部
72 記憶部
8 婚活システムサーバ
9 情報処理装置
Claims (6)
- 第1のオブジェクトが第2のオブジェクトに表出したポジティブなインタラクションに関連する第1情報と、当該第2のオブジェクトが当該第1のオブジェクトに表出したポジティブなインタラクションに関連する第2情報を受信する通信部と、
所定の基準に基づいて、前記受信したポジティブなインタラクションに関連する前記第1情報および前記第2情報の各々に対して評価値を付与し、
前記評価値に基づいて、前記第1のオブジェクトの感性値を生成する制御部と、
を備えた第1の情報処理装置を備える、情報処理システム。 - 前記第1の情報処理装置は、前記受信したポジティブなインタラクションに関連する前記第1情報および前記第2情報を前記第1のオブジェクトに関連付けて記憶する記憶部を備え、
前記通信部は、前記記憶部に記憶されるポジティブなインタラクションに関連する前記第1情報および前記第2情報に基づいて生成された前記第1のオブジェクトの感性値を、第2の情報処理装置に送信する、請求項1に記載の情報処理システム。 - 前記第1の情報処理装置は、生成された前記第1のオブジェクトの感性値を前記第1のオブジェクトに関連付けて記憶する記憶部を備え、
前記通信部は、前記第1のオブジェクトの感性値を、第2の情報処理装置に送信する、請求項1に記載の情報処理システム。 - 第3の情報処理装置から、前記第1のオブジェクトに対する評価要求を受信すると、前記第1のオブジェクトの感性値に基づいて評価チャートを生成する制御部と、
前記第1のオブジェクトの感性値を前記第1の情報処理装置から受信し、前記評価チャートを前記第3の情報処理装置に送信する通信部と、
を備えた前記第2の情報処理装置を備える、請求項2または3に記載の情報処理システム。 - 前記評価チャートは、グラフである、請求項4に記載の情報処理システム。
- 第1のオブジェクトが第2のオブジェクトに表出したポジティブなインタラクションに関連する第1情報と、当該第2のオブジェクトが当該第1のオブジェクトに表出したポジティブなインタラクションに関連する第2情報を受信することと、
所定の基準に基づいて、前記受信したポジティブなインタラクションに関連する前記第1情報および前記第2情報の各々に対して評価値を付与し、
前記評価値に基づいて、前記第1のオブジェクトの感性値を生成することと、
を含む処理を情報処理装置が実行する、制御方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015094067 | 2015-05-01 | ||
JP2015094067 | 2015-05-01 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017516560A Division JP6717297B2 (ja) | 2015-05-01 | 2016-01-21 | 情報処理システム、通信デバイス、制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020170518A JP2020170518A (ja) | 2020-10-15 |
JP7036149B2 true JP7036149B2 (ja) | 2022-03-15 |
Family
ID=57218211
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017516560A Active JP6717297B2 (ja) | 2015-05-01 | 2016-01-21 | 情報処理システム、通信デバイス、制御方法、およびプログラム |
JP2020098003A Active JP7036149B2 (ja) | 2015-05-01 | 2020-06-04 | 情報処理システム、および制御方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017516560A Active JP6717297B2 (ja) | 2015-05-01 | 2016-01-21 | 情報処理システム、通信デバイス、制御方法、およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US11392979B2 (ja) |
JP (2) | JP6717297B2 (ja) |
CN (2) | CN114926292A (ja) |
WO (1) | WO2016178327A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018116552A1 (ja) * | 2016-12-20 | 2018-06-28 | ソニー株式会社 | 情報処理装置および情報処理方法 |
WO2018146936A1 (ja) * | 2017-02-13 | 2018-08-16 | ソニー株式会社 | クライアント装置、情報処理システム、記憶媒体、および情報処理方法 |
US11868405B2 (en) * | 2018-01-23 | 2024-01-09 | Sony Corporation | Information processor, information processing method, and recording medium |
CN108837510B (zh) * | 2018-06-27 | 2020-11-06 | 腾讯科技(深圳)有限公司 | 信息的展示方法和装置、存储介质、电子装置 |
JP6884952B1 (ja) * | 2020-01-29 | 2021-06-09 | 株式会社クリディアル | 状態確認プログラム |
JP7121848B1 (ja) | 2021-11-12 | 2022-08-18 | 株式会社ユカリア | 情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システム |
JP2023072649A (ja) * | 2021-11-12 | 2023-05-24 | 株式会社ユカリア | 情報処理装置、情報処理方法、情報処理プログラムおよびアプリケーションプログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011082913A (ja) | 2009-10-09 | 2011-04-21 | Sony Corp | 撮像装置、撮像方法及び撮像プログラム |
JP2011223369A (ja) | 2010-04-12 | 2011-11-04 | Kim Hyon-Su | 認知症患者用会話システム |
US20140212853A1 (en) | 2013-01-31 | 2014-07-31 | Sri International | Multi-modal modeling of temporal interaction sequences |
US20140249891A1 (en) | 2013-02-14 | 2014-09-04 | Sociometric Solutions, Inc. | Social Sensing And Behavior Analysis System |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7886326B2 (en) * | 2006-08-23 | 2011-02-08 | Kye Systems Corp. | Web cam for indicating the expression of a remote end user |
JP5071404B2 (ja) | 2009-02-13 | 2012-11-14 | オムロン株式会社 | 画像処理方法、画像処理装置、及び画像処理プログラム |
TWI379205B (en) | 2009-03-12 | 2012-12-11 | Ind Tech Res Inst | Instant communication interacting system and method thereof |
JP2013537435A (ja) * | 2010-06-07 | 2013-10-03 | アフェクティヴァ,インコーポレイテッド | ウェブサービスを用いた心理状態分析 |
WO2012068193A2 (en) | 2010-11-17 | 2012-05-24 | Affectiva, Inc. | Sharing affect across a social network |
JP2012155374A (ja) | 2011-01-21 | 2012-08-16 | Sony Corp | 情報処理装置、情報処理方法、プログラムおよび情報処理システム |
JP5766470B2 (ja) | 2011-03-07 | 2015-08-19 | 株式会社日本総合研究所 | スマイルバンキング・システム |
US20140012091A1 (en) * | 2012-07-03 | 2014-01-09 | David George Reynolds | Systems And Methods For Evaluating A Person's Dynamic Wellness |
US9019174B2 (en) * | 2012-10-31 | 2015-04-28 | Microsoft Technology Licensing, Llc | Wearable emotion detection and feedback system |
US9521258B2 (en) * | 2012-11-21 | 2016-12-13 | Castel Communications, LLC | Real-time call center call monitoring and analysis |
KR101397572B1 (ko) * | 2012-11-27 | 2014-05-30 | 홍상민 | 반려동물과의 의사소통을 위한 원거리 커뮤니케이션 시스템 및 이를 이용한 반려동물과의 원거리 커뮤니케이션 방법 |
US20150025917A1 (en) * | 2013-07-15 | 2015-01-22 | Advanced Insurance Products & Services, Inc. | System and method for determining an underwriting risk, risk score, or price of insurance using cognitive information |
WO2015020638A1 (en) * | 2013-08-06 | 2015-02-12 | Intel Corporation | Emotion-related query processing |
JP6189684B2 (ja) | 2013-08-29 | 2017-08-30 | 京セラ株式会社 | 端末装置及び通話データ処理方法 |
EP3103089A1 (en) * | 2014-02-04 | 2016-12-14 | Dirk Helbing | Interaction support processor |
US20160117592A1 (en) * | 2014-10-24 | 2016-04-28 | Elwha LLC, a limited liability company of the State of Delaware | Effective response protocols relating to human impairment arising from insidious heterogeneous interaction |
US10074009B2 (en) * | 2014-12-22 | 2018-09-11 | International Business Machines Corporation | Object popularity detection |
-
2016
- 2016-01-21 CN CN202210428558.4A patent/CN114926292A/zh active Pending
- 2016-01-21 US US15/566,003 patent/US11392979B2/en active Active
- 2016-01-21 WO PCT/JP2016/051726 patent/WO2016178327A1/ja active Application Filing
- 2016-01-21 CN CN201680023735.3A patent/CN107533735B/zh active Active
- 2016-01-21 JP JP2017516560A patent/JP6717297B2/ja active Active
-
2020
- 2020-06-04 JP JP2020098003A patent/JP7036149B2/ja active Active
-
2022
- 2022-06-03 US US17/831,602 patent/US20220301002A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011082913A (ja) | 2009-10-09 | 2011-04-21 | Sony Corp | 撮像装置、撮像方法及び撮像プログラム |
JP2011223369A (ja) | 2010-04-12 | 2011-11-04 | Kim Hyon-Su | 認知症患者用会話システム |
US20140212853A1 (en) | 2013-01-31 | 2014-07-31 | Sri International | Multi-modal modeling of temporal interaction sequences |
US20140249891A1 (en) | 2013-02-14 | 2014-09-04 | Sociometric Solutions, Inc. | Social Sensing And Behavior Analysis System |
Also Published As
Publication number | Publication date |
---|---|
US20180121946A1 (en) | 2018-05-03 |
JP6717297B2 (ja) | 2020-07-01 |
CN107533735A (zh) | 2018-01-02 |
JPWO2016178327A1 (ja) | 2018-02-22 |
US20220301002A1 (en) | 2022-09-22 |
WO2016178327A1 (ja) | 2016-11-10 |
CN114926292A (zh) | 2022-08-19 |
CN107533735B (zh) | 2022-06-07 |
JP2020170518A (ja) | 2020-10-15 |
US11392979B2 (en) | 2022-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7036149B2 (ja) | 情報処理システム、および制御方法 | |
CN109475294B (zh) | 用于治疗精神障碍的移动和可穿戴视频捕捉和反馈平台 | |
US20160350801A1 (en) | Method for analysing comprehensive state of a subject | |
JP6397817B2 (ja) | サービス提供管理システム | |
US20180075763A1 (en) | System and method of generating recommendations to alleviate loneliness | |
JP6114773B2 (ja) | 情報処理装置及び方法 | |
JP6715410B2 (ja) | 評価方法、評価装置、評価プログラム、および、評価システム | |
JP6242359B2 (ja) | 情報処理装置及び方法 | |
JP7078035B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20190050881A1 (en) | Method and apparatus for rewarding reaction of simulation participant | |
JP7306152B2 (ja) | 感情推定装置、感情推定方法、プログラム、情報提示装置、情報提示方法及び感情推定システム | |
JP2011118558A (ja) | 潜在意識マーケティングシステム、潜在意識マーケティングシステムのサーバ、及び潜在意識マーケティング方法 | |
Zhang et al. | A survey on mobile affective computing | |
KR20210070119A (ko) | 스마트폰 전면 카메라와 인공지능 자세 분석을 이용한 명상 가이드 시스템 | |
JP6288748B1 (ja) | 評価支援システム及び評価支援装置 | |
JP6758351B2 (ja) | 画像管理システムおよび画像管理方法 | |
Nijholt | Social augmented reality: A multiperspective survey | |
JP6360218B2 (ja) | 情報処理装置及び方法 | |
JP7378743B2 (ja) | 情報処理システム、情報処理方法およびプログラム | |
JP6230560B2 (ja) | 情報処理装置及び方法 | |
WO2021100515A1 (ja) | 情報処理装置、及び情報処理方法 | |
JP6159357B2 (ja) | 情報処理装置及び方法 | |
US12002073B2 (en) | Information display terminal, information transmission method, and computer program | |
WO2022270001A1 (ja) | 活動量算出装置および活動量算出方法 | |
WO2022049708A1 (ja) | サービス提供装置、サービス提供システム、サービス提供方法及び非一時的なコンピュータ可読媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200625 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210721 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210817 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211005 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220214 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7036149 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |