JP2018072876A - 感情推定システム、感情推定モデル生成システム - Google Patents
感情推定システム、感情推定モデル生成システム Download PDFInfo
- Publication number
- JP2018072876A JP2018072876A JP2016207696A JP2016207696A JP2018072876A JP 2018072876 A JP2018072876 A JP 2018072876A JP 2016207696 A JP2016207696 A JP 2016207696A JP 2016207696 A JP2016207696 A JP 2016207696A JP 2018072876 A JP2018072876 A JP 2018072876A
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- emotion
- learning model
- estimation system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 204
- 238000001514 detection method Methods 0.000 claims abstract description 38
- 230000002452 interceptive effect Effects 0.000 claims description 67
- 230000007613 environmental effect Effects 0.000 claims description 35
- 230000008921 facial expression Effects 0.000 claims description 23
- 238000000605 extraction Methods 0.000 claims description 13
- 238000010801 machine learning Methods 0.000 claims description 10
- 230000001815 facial effect Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 28
- 230000008569 process Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 15
- 230000005540 biological transmission Effects 0.000 description 13
- 230000006399 behavior Effects 0.000 description 10
- 230000036760 body temperature Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 239000011295 pitch Substances 0.000 description 4
- 230000004044 response Effects 0.000 description 3
- 230000035622 drinking Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1113—Local tracking of patients, e.g. in a hospital or private home
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4803—Speech analysis specially adapted for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7405—Details of notification to user or communication with user or patient ; user input means using sound
- A61B5/741—Details of notification to user or communication with user or patient ; user input means using sound using synthesised speech
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B7/00—Instruments for auscultation
- A61B7/02—Stethoscopes
- A61B7/04—Electric stethoscopes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/0005—Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/004—Artificial life, i.e. computing arrangements simulating life
- G06N3/008—Artificial life, i.e. computing arrangements simulating life based on physical entities controlled by simulated intelligence so as to replicate intelligent life forms, e.g. based on robots replicating pets or humans in their appearance or behaviour
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/053—Measuring electrical impedance or conductance of a portion of the body
- A61B5/0531—Measuring skin impedance
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Artificial Intelligence (AREA)
- Theoretical Computer Science (AREA)
- Psychiatry (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Physiology (AREA)
- Mathematical Physics (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Child & Adolescent Psychology (AREA)
- Robotics (AREA)
- Hospice & Palliative Care (AREA)
- Cardiology (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Psychology (AREA)
Abstract
Description
外面情報及び生体情報を入力して、利用者の感情を出力する学習モデルと、
第1の検出手段により検出された利用者の外面情報に対する重み付けと第2の検出手段により検出された当該利用者の生体情報に対する重み付けとを、前記利用者の周囲の状況に応じて変化させ、前記重み付けによりそれぞれ変化した外面情報と生体情報とを前記学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システムである。
外面情報及び生体情報を入力して、利用者の感情を出力する複数の学習モデルと、
利用者の周囲の状況に応じて、使用する学習モデルを選択する選択手段と、
第1の検出手段により検出された利用者の外面情報と第2の検出手段により検出された当該利用者の生体情報とを選択された学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システムである。
外面情報、生体情報及び利用者の周囲の環境情報を入力して、利用者の感情を出力する学習モデルと、
第1の検出手段により検出された当該利用者の外面情報、第2の検出手段により検出された当該利用者の生体情報及び第3の検出手段により検出された当該利用者の周囲の環境情報を前記学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システムである。
第1の検出手段により検出された利用者の外面情報と第2の検出手段により検出された当該利用者の生体情報とから、当該利用者の感情に関する特徴量を抽出する抽出手段と、
前記抽出手段により抽出された特徴量を用いた機械学習を行うことにより、前記抽出手段により抽出された特徴量を入力して利用者の感情を出力する、利用者の周囲の状況に応じた複数の学習モデルを生成する生成手段と、
を備える感情推定モデル生成システムである。
以上、上記の例においては、制御サーバ40において利用者70の感情を推定する例を説明したが、本発明は制御サーバ40が利用者70の感情を推定する方法に限定されず、本実施形態の各構成要素を対話型ロボット20が備えるように構成することによって対話型ロボット20が利用者70の感情を推定するように構成してもよい。
20 対話型ロボット
30 環境センサ
40 制御サーバ
50 ネットワーク
60 アクセスポイント
70 利用者
80 生体センサ
100 ワークプレイス
211 制御用マイクロプロセッサ
212 メモリ
213 記憶装置
214 通信インタフェース
215 カメラ
216 マイクロフォン
217 スピーカ
218 モータ
219 現在位置検出装置
220 制御バス
221 センサ情報送信部
222 対話制御部
223 移動制御部
224 認識情報受信部
401 CPU
402 メモリ
403 記憶装置
404 通信インタフェース
405 ユーザインタフェース
406 制御バス
411 センサ情報取得部
412 特徴量抽出部
413 状況特定部
414 学習モデル生成部
415 学習モデル選択部
416 感情推定部
417 認識情報送信部
418 学習モデル記憶部
Claims (15)
- 外面情報及び生体情報を入力して、利用者の感情を出力する学習モデルと、
第1の検出手段により検出された利用者の外面情報に対する重み付けと第2の検出手段により検出された当該利用者の生体情報に対する重み付けとを、前記利用者の周囲の状況に応じて変化させ、前記重み付けによりそれぞれ変化した外面情報と生体情報とを前記学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システム。 - 前記利用者の周囲の環境情報を検出する第3の検出手段により検出された環境情報に基づいて前記利用者の周囲の状況を判定する請求項1記載の感情推定システム。
- 前記推定手段は、利用者の周囲の状況が公的な状況、又は緊張を引き起こしやすい状況であると判断した場合に、前記生体情報に対する重み付けを、前記外面情報に対する重み付けよりも大きくする請求項2記載の感情推定システム。
- 前記推定手段は、利用者の周囲の状況が私的な状況、又はくつろぎやすい状況であると判断した場合、前記生体情報に対する重み付けを、前記外面情報に対する重み付けよりも小さくする請求項2記載の感情推定システム。
- 前記推定手段は、利用者の感情が表情又は動作に表われにくいタイプであると判断した場合、前記生体情報に対する重み付けを、前記外面情報に対する重み付けよりも大きくする請求項1から4のいずれかに記載の感情推定システム。
- 前記推定手段は、利用者の感情が表情又は動作に表われやすいタイプであると判断した場合、前記生体情報に対する重み付けを、前記外面情報に対する重み付けよりも小さくする請求項1から4のいずれかに記載の感情推定システム。
- 外面情報及び生体情報を入力して、利用者の感情を出力する複数の学習モデルと、
利用者の周囲の状況に応じて、使用する学習モデルを選択する選択手段と、
第1の検出手段により検出された利用者の外面情報と第2の検出手段により検出された当該利用者の生体情報とを選択された学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システム。 - 前記利用者の周囲の環境情報を検出する第3の検出手段をさらに備え、
前記選択手段は、前記第3の検出手段により検出された環境情報に基づいて前記利用者の周囲の状況を判定する請求項7記載の感情推定システム。 - 外面情報、生体情報及び利用者の周囲の環境情報を入力して、利用者の感情を出力する学習モデルと、
第1の検出手段により検出された当該利用者の外面情報、第2の検出手段により検出された当該利用者の生体情報及び第3の検出手段により検出された当該利用者の周囲の環境情報を前記学習モデルに入力することにより出力された感情を、前記利用者の感情として推定する推定手段と、
を備える感情推定システム。 - 前記第1の検出手段は、前記外面情報として、利用者の表情、音声の少なくとも一つを検出し、
前記第2の検出手段は、前記生体情報として、利用者の皮膚電位、心拍の少なくとも一つを検出する請求項1から9いずれかに記載の感情推定システム。 - 対話型ロボットが前記第1の検出手段および前記第2の検出手段を備えている請求項1から10いずれかに記載の感情推定システム。
- 前記対話型ロボットが存在する付近に設置された環境センサによって利用者の周囲の環境情報を検出する請求項11記載の感情推定システム。
- 前記感情推定システムは制御サーバを含み、
前記対話型ロボットは前記制御サーバに対して現在位置情報を送信し、
前記制御サーバは、前記対話型ロボットから取得した現在位置情報に該当する位置に設置されている環境センサから取得した当該利用者の周囲の環境情報を前記対話型ロボットに送信する請求項12記載の感情推定システム。 - 前記制御サーバは、前記対話型ロボットから取得した現在位置情報に該当する位置に設置されている環境センサに対して、当該利用者の周囲の環境情報を取得するよう要求する請求項13記載の感情推定システム。
- 第1の検出手段により検出された利用者の外面情報と第2の検出手段により検出された当該利用者の生体情報とから、当該利用者の感情に関する特徴量を抽出する抽出手段と、
前記抽出手段により抽出された特徴量を用いた機械学習を行うことにより、前記抽出手段により抽出された特徴量を入力して利用者の感情を出力する、利用者の周囲の状況に応じた複数の学習モデルを生成する生成手段と、
を備える感情推定モデル生成システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016207696A JP6761598B2 (ja) | 2016-10-24 | 2016-10-24 | 感情推定システム、感情推定モデル生成システム |
US15/583,098 US10452982B2 (en) | 2016-10-24 | 2017-05-01 | Emotion estimating system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016207696A JP6761598B2 (ja) | 2016-10-24 | 2016-10-24 | 感情推定システム、感情推定モデル生成システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018072876A true JP2018072876A (ja) | 2018-05-10 |
JP6761598B2 JP6761598B2 (ja) | 2020-09-30 |
Family
ID=61969809
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016207696A Expired - Fee Related JP6761598B2 (ja) | 2016-10-24 | 2016-10-24 | 感情推定システム、感情推定モデル生成システム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10452982B2 (ja) |
JP (1) | JP6761598B2 (ja) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020021962A1 (ja) * | 2018-07-26 | 2020-01-30 | 日本電信電話株式会社 | 学習装置、学習方法及びコンピュータプログラム |
JP2020135368A (ja) * | 2019-02-19 | 2020-08-31 | Necパーソナルコンピュータ株式会社 | 情報処理装置、見守りシステム、見守り方法、及び見守りプログラム |
KR20200143991A (ko) * | 2019-06-17 | 2020-12-28 | 주식회사 오니온파이브 | 텍스트의 내용 및 감정 분석에 기반한 답변 추천 시스템 및 방법 |
WO2021014878A1 (ja) * | 2019-07-25 | 2021-01-28 | オムロン株式会社 | 推論装置、推論方法、及び推論プログラム |
JP2021012285A (ja) * | 2019-07-05 | 2021-02-04 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
JPWO2021171606A1 (ja) * | 2020-02-28 | 2021-09-02 | ||
JP6951004B1 (ja) * | 2021-03-29 | 2021-10-20 | 株式会社pluszero | 情報処理システム及び仮想人材 |
JPWO2020174680A1 (ja) * | 2019-02-28 | 2021-12-16 | 日本電気株式会社 | 感情推定装置、感情推定方法、及びプログラム |
KR102359344B1 (ko) * | 2021-09-13 | 2022-02-08 | 가온플랫폼 주식회사 | 인공지능 기반의 영유아 행동 및 심리분석 스마트 보육환경 모니터링 시스템 및 그 방법 |
KR102454737B1 (ko) * | 2021-12-17 | 2022-10-19 | 주식회사 하이 | 심리 상태 분류 서버, 단말기, 심리 상태 분류 방법, 및 심리 상태 분류 서비스를 제공하는 방법 |
JP7396133B2 (ja) | 2020-03-11 | 2023-12-12 | オムロン株式会社 | パラメータ調整装置、推論装置、パラメータ調整方法、及びパラメータ調整プログラム |
KR102668931B1 (ko) * | 2023-05-08 | 2024-05-29 | (주)로보케어 | 맞춤형 서비스 제공 장치 및 방법 |
JP7501348B2 (ja) | 2020-12-22 | 2024-06-18 | 株式会社Jvcケンウッド | 情報出力装置および情報出力方法 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11484685B2 (en) * | 2010-06-07 | 2022-11-01 | Affectiva, Inc. | Robotic control using profiles |
US10318799B2 (en) * | 2017-02-16 | 2019-06-11 | Wipro Limited | Method of predicting an interest of a user and a system thereof |
KR102497042B1 (ko) * | 2018-01-29 | 2023-02-07 | 삼성전자주식회사 | 사용자 행동을 바탕으로 반응하는 로봇 및 그의 제어 방법 |
EP3811245A4 (en) | 2018-06-19 | 2022-03-09 | Ellipsis Health, Inc. | MENTAL HEALTH ASSESSMENT SYSTEMS AND METHODS |
US20190385711A1 (en) | 2018-06-19 | 2019-12-19 | Ellipsis Health, Inc. | Systems and methods for mental health assessment |
CN108922564B (zh) * | 2018-06-29 | 2021-05-07 | 北京百度网讯科技有限公司 | 情绪识别方法、装置、计算机设备及存储介质 |
KR20200036680A (ko) * | 2018-09-28 | 2020-04-07 | 삼성전자주식회사 | 감정 정보 획득을 위한 전자 장치 및 방법 |
CN109227558A (zh) * | 2018-10-09 | 2019-01-18 | 北京智合大方科技有限公司 | 可实时调校的智能外呼机器人 |
KR102228866B1 (ko) * | 2018-10-18 | 2021-03-17 | 엘지전자 주식회사 | 로봇 및 그의 제어 방법 |
CN110267052B (zh) * | 2019-06-19 | 2021-04-16 | 云南大学 | 一种基于实时情绪反馈的智能弹幕机器人 |
US10796561B1 (en) * | 2019-09-10 | 2020-10-06 | International Business Machines Corporation | Cognitive safety alert generation |
CN110534135A (zh) * | 2019-10-18 | 2019-12-03 | 四川大学华西医院 | 一种基于语言引导与心率反应来评估情绪特征的方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10228295A (ja) * | 1997-02-14 | 1998-08-25 | Atr Chino Eizo Tsushin Kenkyusho:Kk | 階層的感情認識装置 |
JP2005199403A (ja) * | 2004-01-16 | 2005-07-28 | Sony Corp | 情動認識装置及び方法、ロボット装置の情動認識方法、ロボット装置の学習方法、並びにロボット装置 |
JP2007287177A (ja) * | 2002-12-11 | 2007-11-01 | Sony Corp | 情報処理装置および方法、プログラム、並びに記録媒体 |
JP2007296169A (ja) * | 2006-05-01 | 2007-11-15 | Agi:Kk | 心的状態判定装置、およびプログラム |
JP2012059107A (ja) * | 2010-09-10 | 2012-03-22 | Nec Corp | 感情推定装置、感情推定方法およびプログラム |
JP2013105232A (ja) * | 2011-11-11 | 2013-05-30 | Nippon Telegr & Teleph Corp <Ntt> | 感情推定装置及び感情推定方法 |
JP2016106689A (ja) * | 2014-12-03 | 2016-06-20 | 日本電信電話株式会社 | 感情情報推定装置、感情情報推定方法及び感情情報推定プログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000015396A1 (fr) * | 1998-09-10 | 2000-03-23 | Sony Corporation | Appareil robotique, procede de commande de l'appareil robotique, procede d'affichage et support |
JP2001154681A (ja) * | 1999-11-30 | 2001-06-08 | Sony Corp | 音声処理装置および音声処理方法、並びに記録媒体 |
WO2001070468A1 (fr) * | 2000-03-24 | 2001-09-27 | Sony Corporation | Determination de l'action d'un robot et robot |
KR20020067669A (ko) * | 2001-02-16 | 2002-08-23 | 산요 덴키 가부시키가이샤 | 로봇 시스템 및 로봇 |
KR100624403B1 (ko) * | 2001-10-06 | 2006-09-15 | 삼성전자주식회사 | 인체의 신경계 기반 정서 합성 장치 및 방법 |
US7113848B2 (en) * | 2003-06-09 | 2006-09-26 | Hanson David F | Human emulation robot system |
JP2006071936A (ja) | 2004-09-01 | 2006-03-16 | Matsushita Electric Works Ltd | 対話エージェント |
US20070074114A1 (en) * | 2005-09-29 | 2007-03-29 | Conopco, Inc., D/B/A Unilever | Automated dialogue interface |
TWI293571B (en) * | 2006-08-25 | 2008-02-21 | Benq Corp | Device for animating facial expression |
KR100850352B1 (ko) * | 2006-09-26 | 2008-08-04 | 한국전자통신연구원 | 상태 정보를 이용하여 감성을 표현하기 위한 지능형 로봇의감성 표현 장치 및 그 방법 |
US10679749B2 (en) * | 2008-08-22 | 2020-06-09 | International Business Machines Corporation | System and method for virtual world biometric analytics through the use of a multimodal biometric analytic wallet |
TWI447660B (zh) * | 2009-12-16 | 2014-08-01 | Univ Nat Chiao Tung | Robot autonomous emotion expression device and the method of expressing the robot's own emotion |
US9079313B2 (en) * | 2011-03-15 | 2015-07-14 | Microsoft Technology Licensing, Llc | Natural human to robot remote control |
US10009644B2 (en) * | 2012-12-04 | 2018-06-26 | Interaxon Inc | System and method for enhancing content using brain-state data |
EP2933064A1 (en) * | 2014-04-17 | 2015-10-21 | Aldebaran Robotics | System, method and computer program product for handling humanoid robot interaction with human |
US20180077095A1 (en) * | 2015-09-14 | 2018-03-15 | X Development Llc | Augmentation of Communications with Emotional Data |
JP2017151517A (ja) * | 2016-02-22 | 2017-08-31 | 富士ゼロックス株式会社 | ロボット制御システム |
JP6726388B2 (ja) * | 2016-03-16 | 2020-07-22 | 富士ゼロックス株式会社 | ロボット制御システム |
-
2016
- 2016-10-24 JP JP2016207696A patent/JP6761598B2/ja not_active Expired - Fee Related
-
2017
- 2017-05-01 US US15/583,098 patent/US10452982B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10228295A (ja) * | 1997-02-14 | 1998-08-25 | Atr Chino Eizo Tsushin Kenkyusho:Kk | 階層的感情認識装置 |
JP2007287177A (ja) * | 2002-12-11 | 2007-11-01 | Sony Corp | 情報処理装置および方法、プログラム、並びに記録媒体 |
JP2005199403A (ja) * | 2004-01-16 | 2005-07-28 | Sony Corp | 情動認識装置及び方法、ロボット装置の情動認識方法、ロボット装置の学習方法、並びにロボット装置 |
JP2007296169A (ja) * | 2006-05-01 | 2007-11-15 | Agi:Kk | 心的状態判定装置、およびプログラム |
JP2012059107A (ja) * | 2010-09-10 | 2012-03-22 | Nec Corp | 感情推定装置、感情推定方法およびプログラム |
JP2013105232A (ja) * | 2011-11-11 | 2013-05-30 | Nippon Telegr & Teleph Corp <Ntt> | 感情推定装置及び感情推定方法 |
JP2016106689A (ja) * | 2014-12-03 | 2016-06-20 | 日本電信電話株式会社 | 感情情報推定装置、感情情報推定方法及び感情情報推定プログラム |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020017104A (ja) * | 2018-07-26 | 2020-01-30 | 日本電信電話株式会社 | 学習装置、学習方法及びコンピュータプログラム |
WO2020021962A1 (ja) * | 2018-07-26 | 2020-01-30 | 日本電信電話株式会社 | 学習装置、学習方法及びコンピュータプログラム |
JP7048893B2 (ja) | 2018-07-26 | 2022-04-06 | 日本電信電話株式会社 | 学習装置、学習方法及びコンピュータプログラム |
JP2020135368A (ja) * | 2019-02-19 | 2020-08-31 | Necパーソナルコンピュータ株式会社 | 情報処理装置、見守りシステム、見守り方法、及び見守りプログラム |
JPWO2020174680A1 (ja) * | 2019-02-28 | 2021-12-16 | 日本電気株式会社 | 感情推定装置、感情推定方法、及びプログラム |
US11984136B2 (en) | 2019-02-28 | 2024-05-14 | Nec Corporation | Emotion estimation apparatus, emotion estimation method, and computer readable recording medium |
JP7115625B2 (ja) | 2019-02-28 | 2022-08-09 | 日本電気株式会社 | 感情推定装置、感情推定方法、及びプログラム |
KR20200143991A (ko) * | 2019-06-17 | 2020-12-28 | 주식회사 오니온파이브 | 텍스트의 내용 및 감정 분석에 기반한 답변 추천 시스템 및 방법 |
KR102218468B1 (ko) | 2019-06-17 | 2021-02-22 | 주식회사 오니온파이브 | 텍스트의 내용 및 감정 분석에 기반한 답변 추천 시스템 및 방법 |
JP2021012285A (ja) * | 2019-07-05 | 2021-02-04 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
JP7379788B2 (ja) | 2019-07-05 | 2023-11-15 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
JP7342491B2 (ja) | 2019-07-25 | 2023-09-12 | オムロン株式会社 | 推論装置、推論方法、及び推論プログラム |
WO2021014878A1 (ja) * | 2019-07-25 | 2021-01-28 | オムロン株式会社 | 推論装置、推論方法、及び推論プログラム |
US11941868B2 (en) | 2019-07-25 | 2024-03-26 | Omron Corporation | Inference apparatus, inference method, and computer-readable storage medium storing an inference program |
JP2021022079A (ja) * | 2019-07-25 | 2021-02-18 | オムロン株式会社 | 推論装置、推論方法、及び推論プログラム |
JPWO2021171606A1 (ja) * | 2020-02-28 | 2021-09-02 | ||
WO2021171606A1 (ja) * | 2020-02-28 | 2021-09-02 | 日本電気株式会社 | サーバ装置、会議支援システム、会議支援方法及びプログラム |
JP7371759B2 (ja) | 2020-02-28 | 2023-10-31 | 日本電気株式会社 | サーバ装置、会議支援システム、会議支援方法及びプログラム |
JP7396133B2 (ja) | 2020-03-11 | 2023-12-12 | オムロン株式会社 | パラメータ調整装置、推論装置、パラメータ調整方法、及びパラメータ調整プログラム |
JP7501348B2 (ja) | 2020-12-22 | 2024-06-18 | 株式会社Jvcケンウッド | 情報出力装置および情報出力方法 |
JP2022152397A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社pluszero | 情報処理システム及び仮想人材 |
WO2022208953A1 (ja) * | 2021-03-29 | 2022-10-06 | 株式会社pluszero | 情報処理システム及び仮想人材 |
JP6951004B1 (ja) * | 2021-03-29 | 2021-10-20 | 株式会社pluszero | 情報処理システム及び仮想人材 |
KR102359344B1 (ko) * | 2021-09-13 | 2022-02-08 | 가온플랫폼 주식회사 | 인공지능 기반의 영유아 행동 및 심리분석 스마트 보육환경 모니터링 시스템 및 그 방법 |
KR102454737B1 (ko) * | 2021-12-17 | 2022-10-19 | 주식회사 하이 | 심리 상태 분류 서버, 단말기, 심리 상태 분류 방법, 및 심리 상태 분류 서비스를 제공하는 방법 |
US11862341B2 (en) | 2021-12-17 | 2024-01-02 | Haii Corp. | Server and method for classifying mental state |
KR102668931B1 (ko) * | 2023-05-08 | 2024-05-29 | (주)로보케어 | 맞춤형 서비스 제공 장치 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
JP6761598B2 (ja) | 2020-09-30 |
US20180114125A1 (en) | 2018-04-26 |
US10452982B2 (en) | 2019-10-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6761598B2 (ja) | 感情推定システム、感情推定モデル生成システム | |
US20200090393A1 (en) | Robot and method for operating the same | |
US11948241B2 (en) | Robot and method for operating same | |
JP7003400B2 (ja) | 対話制御システム | |
CN107097234B (zh) | 机器人控制系统 | |
WO2017215297A1 (zh) | 云端互动系统及其多感知型智能机器人和感知互动方法 | |
US11017551B2 (en) | System and method for identifying a point of interest based on intersecting visual trajectories | |
Rossi et al. | An extensible architecture for robust multimodal human-robot communication | |
KR20200048201A (ko) | 전자 장치 및 이의 제어 방법 | |
US20220215678A1 (en) | System and method for reconstructing unoccupied 3d space | |
US10785489B2 (en) | System and method for visual rendering based on sparse samples with predicted motion | |
US11398218B1 (en) | Dynamic speech output configuration | |
US20190251350A1 (en) | System and method for inferring scenes based on visual context-free grammar model | |
JP7323098B2 (ja) | 対話支援装置、対話支援システム、及び対話支援プログラム | |
KR102222911B1 (ko) | 로봇 상호작용 시스템 및 그를 위한 프로그램 | |
US11115409B2 (en) | User authentication by emotional response | |
Sivakumar et al. | Virtual vision architecture for VIP in ubiquitous computing | |
JP6887035B1 (ja) | 制御システム、制御装置、制御方法及びコンピュータプログラム | |
WO2021084810A1 (ja) | 情報処理装置及び情報処理方法、並びに人工知能モデル製造方法 | |
JP6798258B2 (ja) | 生成プログラム、生成装置、制御プログラム、制御方法、ロボット装置及び通話システム | |
US9923938B2 (en) | Managing drop-ins on focal points of activities | |
WO2019073668A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US11388116B2 (en) | Augmented reality enabled communication response | |
JP2023551169A (ja) | 何らかの音声コマンドを実行する間にar(拡張現実)ベースで周囲からの音を選択的に包含すること | |
JP6866731B2 (ja) | 音声認識装置、音声認識方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190910 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200717 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200807 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200820 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6761598 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |